ต่อไป »

[skyworker]

ช่วยด้วยครับ ทำยังไงดี ไปเซตใน Google master tool แล้ว นั่งดูผลมันยังมาหนักเหมือนเดิมเลย ทำใ connect db บ่อยๆ เกิด exceed db connection เว็บเน่าเลย ยอด amazon ร่วง

แก้ปัญหาไม่ตก ทำไงได้มั่งครับ ตอนนี้ทำ cache ช่วยยังไม่ค่อยดีขึ้นเท่าไหร่ เสียเวลาไปหลายวันแล้ว

1 Google   66.249.72.24  วันนี้ เวลา 04.52:25 น.

2 Google   66.249.72.24  วันนี้ เวลา 04.52:18 น.

3 Google   66.249.72.24  วันนี้ เวลา 04.52:06 น.

4 Google   66.249.72.24  วันนี้ เวลา 04.51:25 น.

5 Google   66.249.72.24  วันนี้ เวลา 04.51:14 น.

6 Google   66.249.72.24  วันนี้ เวลา 04.51:11 น.

7 Google   66.249.72.143  วันนี้ เวลา 04.51:03 น.

8 Google   66.249.72.24  วันนี้ เวลา 04.50:57 น.

9 Google   66.249.72.24  วันนี้ เวลา 04.50:51 น.

10 Google   66.249.72.143  วันนี้ เวลา 04.50:51 น.

11 Google   66.249.72.24  วันนี้ เวลา 04.50:43 น.

12 Google   66.249.72.24  วันนี้ เวลา 04.50:38 น.

13 Google   66.249.72.143  วันนี้ เวลา 04.50:38 น.

14 Google   66.249.72.24  วันนี้ เวลา 04.49:51 น.

15 Google   66.249.72.24  วันนี้ เวลา 04.49:48 น.

16 Google   66.249.72.143  วันนี้ เวลา 04.49:00 น.

17 Google   66.249.72.24  วันนี้ เวลา 04.49:00 น.

18 Google   66.249.72.24  วันนี้ เวลา 04.48:49 น.

19 Google   66.249.72.24  วันนี้ เวลา 04.48:33 น.

20 Google   66.249.72.143  วันนี้ เวลา 04.48:26 น.

[ten1312]

ช่วงนี้ google bot โหดมาก ขยันเกินเหตุ
ของผมลบทิ้งแล้วทำใหม่ไป 4-5 เว็บแล้ว ไม่งั้นโฮสมันจะเตะ 

[TOOAds.com]

ก็บล็อคมันอ่ะครับ อย่าให้เข้ามา ใครไม่ติด adsense ให้บล็อก "มิเดียพาทเนอร์-บอท" ด้วย(ใครทำ ads อย่าไปบล็อกมันนะ เดี๋ยวยอดไม่ขึ้น 555โดนมากับตัว)

[skyworker]

block gg bot แล้วจะขาย amazon ไงอ่า

[skyworker]

ล่าสุดไป gg master tool รูดลงช้าสุดมัน delay ลงนิดนึง
1 Google   66.249.72.24  วันนี้ เวลา 05.08:25 น.
2 Google   66.249.72.24  วันนี้ เวลา 05.08:18 น.
3 Google   66.249.72.24  วันนี้ เวลา 05.08:07 น.
4 Google   66.249.72.24  วันนี้ เวลา 05.07:01 น.
5 Google   66.249.72.143  วันนี้ เวลา 05.06:47 น.
6 Google   66.249.72.143  วันนี้ เวลา 05.06:37 น.
7 Google   66.249.72.24  วันนี้ เวลา 05.06:15 น.
8 Google   66.249.72.24  วันนี้ เวลา 05.05:18 น.
9 Google   66.249.72.24  วันนี้ เวลา 05.05:10 น.
10 Google   66.249.72.24  วันนี้ เวลา 05.04:06 น.
11 Google   66.249.72.24  วันนี้ เวลา 05.03:59 น.
12 Google   66.249.72.143  วันนี้ เวลา 05.03:43 น.
13 Google   66.249.72.24  วันนี้ เวลา 05.03:25 น.
14 Google   66.249.72.24  วันนี้ เวลา 05.03:24 น.
15 Google   66.249.72.24  วันนี้ เวลา 05.03:05 น.
16 Google   66.249.72.24  วันนี้ เวลา 05.02:45 น.
17 Google   66.249.72.24  วันนี้ เวลา 05.01:50 น.
18 Google   66.249.72.24  วันนี้ เวลา 05.01:41 น.
19 Google   66.249.72.24  วันนี้ เวลา 05.01:27 น.
20 Google   66.249.67.168  วันนี้ เวลา 05.00:19 น.

พอถูๆ ไถๆ ไม่รุจะรอดป่ะ

[icez]

ถ้าแค่นี้ยังล่ม แก้ script เหอะครับ
ยังไม่ถึงวิละ request ด้วยซ้ำ

[TOOAds.com]

ลองบล็อกแบบนี้ดูครับ(หลังจากใส่โคดนี้ vps ล่มไป2 วันยังใช้งานไม่ได้เลย )

User-agent: *
Disallow: /
User-agent: Googlebot
Allow: /
User-agent: Adsbot-Google
Allow: /
User-agent: Googlebot-Image
Allow: /
User-agent: Mediapartners-Google
Allow: /
User-agent: Googlebot-Mobile
Allow: /
User-agent: MSNBot
Allow: /
User-agent: Slurp
Allow: /
User-agent: ia_archiver
Allow: /
#Crawl-delay: 5

[TAXZe]

Crawl-delay: 5

น่าจะช่วยได้

บอทกูเกิ้ล หรือ โดนอะไรดูดเว็บหรือเปล่า

เข้าไปดู log ดีๆครับ

 

[skyworker]

4 Google   66.249.72.143  วันนี้ เวลา 05.11:53 น.

5 Google   66.249.72.24  วันนี้ เวลา 05.11:50 น.

6 Google   66.249.72.24  วันนี้ เวลา 05.11:45 น.

7 Google   66.249.72.24  วันนี้ เวลา 05.11:41 น.

8 Google   66.249.72.24  วันนี้ เวลา 05.11:30 น.

9 Google   66.249.72.24  วันนี้ เวลา 05.11:17 น.

เว็บเดียวเฉลี่ย 7 วิต่อที ก็เยอะไปนะผมว่า ที่สำคัญมันมันแชร์กันหลายเว็บ ตัวนี้ถ่วงทำให้ที่เหลือแย่ไปด้วย
ไม่ยากบอกว่ามีเว็บอื่นๆ อีก sub หลายร้อยด้วย ถ้าไม่ไหวอาจ block แบบข้างบนว่า  

[skyworker]

ขอบคุณทุกท่านที่ช่วยดูครับ



นี่คือ bandwidth 7 วันเศษๆ ที่ gg bot รับประทานไป จาก 1 เว็บ น่าจะมีปัญหาแน่ๆ
ลอง claw delay แบบน้อง Taxze ว่าสักตั้งครับ ได้ผลไงจะมารายงาน

[ขัน]

ผมมีเว็บนึงใช้ wildcard อยู่ดีๆบอทGGก็มาถล่มซะเละคล้ายๆแบบนี้แหละ จนโดน hostgator ระงับเว็บนั้นไป
จนป่านนี้สามเดือนแล้ว ก็ยังไม่มีเวลาแก้โค้ดเลยครับ
 

[nocturne in the moonlight]

แบ่ง บอท มามั่ง จิ

[ปลวกจุติ]

ทำไงให้บอท google เข้าอ่ะครับ
ไม่อยากได้บอท yahoo

[Moyzier]

ฝากลิ้งได้ไหมครับ


หึหึ

[skyworker]

Crawl-delay: 5

น่าจะช่วยได้

บอทGoogle หรือ โดนอะไรดูดเว็บหรือเปล่า

เข้าไปดู log ดีๆครับ

 

Claw delay : 30 ได้ป่ะครับ
รู้สึกวา 5 มันจะมีอยู่แล้ว ในเครื่อง

หน่วยเป็นวินาที ใช่เปล่า

[skyworker]

ลองบล็อกแบบนี้ดูครับ(หลังจากใส่โคดนี้ vps ล่มไป2 วันยังใช้งานไม่ได้เลย )

User-agent: *
Disallow: /
User-agent: Googlebot
Allow: /
User-agent: Adsbot-Google
Allow: /
User-agent: Googlebot-Image
Allow: /
User-agent: Mediapartners-Google
Allow: /
User-agent: Googlebot-Mobile
Allow: /
User-agent: MSNBot
Allow: /
User-agent: Slurp
Allow: /
User-agent: ia_archiver
Allow: /
#Crawl-delay: 5

พูดเล่น หรือจริงครับ กำลังจะลอง เริ่มจนปัญญาแล้ว

[mumdochata]

ง่ายมากๆ เพียงปิดเว็บสักวันสองวันแล้วเปิดใหม่ 

[prempcc]

หน้าจะที่สคลิปอ่ะครับของผม

เมื่อก่อนเว็บ pligg

โค๊ด:

16/12/2009|07:36:00|Google|66.249.67.7
16/12/2009|07:36:00|Google|66.249.67.7
16/12/2009|07:36:02|Google|66.249.67.7
16/12/2009|07:36:04|Google|66.249.67.7
16/12/2009|07:36:04|Google|66.249.67.7
16/12/2009|07:36:05|Google|66.249.67.7
16/12/2009|07:36:07|Google|66.249.67.7
16/12/2009|07:36:09|Google|66.249.67.7
16/12/2009|07:36:10|Google|66.249.67.7
16/12/2009|07:36:12|Google|66.249.67.7
16/12/2009|07:36:14|Google|66.249.67.7
16/12/2009|07:36:15|Google|66.249.67.7
16/12/2009|07:36:16|Google|66.249.67.7
16/12/2009|07:36:17|Google|66.249.67.7
16/12/2009|07:36:19|Google|66.249.67.7
16/12/2009|07:36:20|Google|66.249.67.7
16/12/2009|07:36:21|Google|66.249.67.7
16/12/2009|07:36:24|Google|66.249.67.7
16/12/2009|07:36:25|Google|66.249.67.7
16/12/2009|07:36:26|Google|66.249.67.7
16/12/2009|07:36:28|Google|66.249.67.7
16/12/2009|07:36:29|Google|66.249.67.7
16/12/2009|07:36:30|Google|66.249.67.7
16/12/2009|07:36:31|Google|66.249.67.7
16/12/2009|07:36:33|Google|66.249.67.7
16/12/2009|07:36:35|Google|66.249.67.7
16/12/2009|07:36:36|Google|66.249.67.7
16/12/2009|07:36:38|Google|66.249.67.7
16/12/2009|07:36:40|Google|66.249.67.7
16/12/2009|07:36:40|Google|66.249.67.7
16/12/2009|07:36:41|Google|66.249.67.7
16/12/2009|07:36:43|Google|66.249.67.7
16/12/2009|07:36:45|Google|66.249.67.7
16/12/2009|07:36:45|Google|66.249.67.7
16/12/2009|07:36:47|msnbot1.0|65.55.207.120
16/12/2009|07:36:48|Google|66.249.67.7
16/12/2009|07:36:50|Google|66.249.67.7
16/12/2009|07:36:50|Google|66.249.67.7
16/12/2009|07:36:53|Google|66.249.67.7
16/12/2009|07:36:55|Google|66.249.67.7
16/12/2009|07:36:55|Google|66.249.67.7
16/12/2009|07:36:58|Google|66.249.67.7
16/12/2009|07:36:59|Google|66.249.67.7

1 นาทีมา 40 กว่าตัวเพราะ pligg เว็บนั้นๆเว็บเดียวทำให้ผมต้องเช่า vps และต้อง ปิด มันไปในที่สุดเพราะรับ ต้นทุนไม่ไหว

[skyworker]

คือ จริงๆ แล้วมันเข้ามาเยอะกว่าที่เห็นอ่ะ
แบบว่านั่นกรองมาแล้วระดับนึง
มีเข้ามาแล้วตรวจเจอ reject ออกไปก็มี

สรุปว่า bot เข้ามาเยอะเกินไป
1. api amazon request ผมเกินโคว์ต้าตลอด 20 นาที จำนวน call เกิน
2. ดึง database ถี่เกินไป เพราะผมเชคข้อมูลหลายอย่าง ในการแสดงสินค้า

ดังนั้นบทเข้ามาแบบนั้น ระบบจึงรับไม่ไหว จึงแก้ปัญหาแบบง่ายๆ คือ
ทำ mod rewrite ไล่ไป url เว็บอื่นที่แข็งแรงกว่า

ขณะนี้รอฟังผลอยู่ครับ ถ้าไม่ไหวอีกทีก็จะไม่ทำหน้าหน้า detail สินค้าล้ะ
กดลิ้งแล้วไปหน้าขายของที่เว็บ amazon เลย

เพราะเว็บอื่นๆ เดี้ยงไปด้วย ไม่คุ้มเลย ประมาณว่ารีบไล่ user ออกไปที่อื่นโดยไว
ไม่มีหน้าให้กดเยอะเหมือนเดิม

[gunhotnews]

มาๆๆ  botgoogle


เค้าไม่ชอบก็อย่าไปเว็บเค้า มาเว็บผมนี้