|
หัวข้อ: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: Step9 ที่ 26 ธันวาคม 2008, 15:33:04 ปกติถ้า bot Noname มารุมเรามักจะแบนไปเลย
แต่ครั้งนี้ชื่อ GoogleBot อ่ะครับ มาเยอะก็ดีแต่มากจนDir ผมโดนDisable Accไป1แล้ว -*- ผมเทียบกับเว็บอื่นๆเฉพาะGoogleBot จะมาไม่เกิน 20MB แต่นี่มากกว่า 250MB+ รู้แต่คำสั่งกั้นBot ใน robots.txt แต่ถ้าจะให้เพลาๆหรือ limit ไว้มีคำสั่งไหมครับ :'( มีวิธีลด Google Bot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: Step9 ที่ 26 ธันวาคม 2008, 15:53:51 Dir อื่น GoogleBotเกือบ 400MB ถ้ามันเกิดจาก Botถล่มจริง เดี๋ยวโดนเด้งอีกซวยเลย
มีวิธีให้ Bot เพลาๆไหมครับ เช่นกำหนดว่าตัวนี้มาใช้Banwithไม่ให้เกิน 100 MBอย่างนี้เป็นต้น :-X หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: win ที่ 26 ธันวาคม 2008, 15:55:48 http://www.google.com/support/webmasters/bin/answer.py?hl=en&answer=48620
อ้างถึง Changing Google's crawl rate Googlebot has sophisticated algorithms that determine how much to crawl each site. Our goal is to crawl as many pages from your site as we can on each visit without overwhelming your server's bandwidth. You can change the crawl rate (the time used by Googlebot to crawl the site) for sites that are at the root level - for example, [url=http://www.example.com]www.example.com[/url] and [url]http://subdomain.example.com[/url]. You can't change the crawl rate for sites that are not at the root level - for example, [url=http://www.example.com/folder]www.example.com/folder[/url]. To change the rate at which we crawl your site: 1. Sign into Google Webmaster Tools with your Google Account. 2. Click the URL for the site you want. 3. Click Settings. 4. In the Crawl rate section, select the option you want. The new crawl rate will be valid for 90 days. ลองดูครับ หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: gftframe ที่ 26 ธันวาคม 2008, 16:02:05 อะไรจะขนาดน้าน
หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: Rock2Rich ที่ 26 ธันวาคม 2008, 16:06:32 Google webmaster tool มีให้ปรับนิครับ ผมเคยแต่ปรับเพิ่ม
ปรับลดลงนี่ไม่เคยลองดูนะครับ หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: Step9 ที่ 26 ธันวาคม 2008, 16:07:34 ขอบคุณครับ :-*
ด้วยเหตุผลทางเทคนิคเลยไม่ได้ทำไว้ แต่แบบนี้ก็ต้องทำละ ไม่ทราบว่าจะจำกัดไว้ที่แค่ไหนดีครับ มาเยอะอ่ะดี แต่รับไม่ไหว ทางHostแนะนำให้ใช้เดดิเคท ไอ๋หย๋า แค่นี้ก็แพงหูฉี่แล้วอ่า :'( หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: mapandy ที่ 26 ธันวาคม 2008, 16:29:56 หุ ๆ อยากให้มาเด็กดิ๊กก++ เยอะ ๆ แบบนี้มั่งอ่ะ อิ ๆ
:) หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: Step9 ที่ 26 ธันวาคม 2008, 16:32:40 อ้างถึง The new crawl rate will be valid for 90 days. นานเกินไปครับท่านGoogle เฮีย เอก iamnewbies แนะนำให้ใช้ โค๊ด: User-agent: Googlebot ก็ไม่ต้องไปสมัครWebmaster Tool สำคัญว่าขอให้เว็บปลดDisableผ่านก่อน Codeนี้จะฟังขึ้นไหมนะ :-* หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: Step9 ที่ 26 ธันวาคม 2008, 16:49:19 ไหนๆก็พูดถึง robots.txt แล้ว
ผมเจอSEO Forumนอกแห่งหนึ่ง แห่งนี้แหล่ะ http://www.webmaster-talk.com/ ตั้งกั้นพวกBotที่เราอาจไม่รู้จักชื่อไว้เยอะเลย http://www.webmaster-talk.com/robots.txt โค๊ด: User-agent: Fasterfox หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: zo501 ที่ 26 ธันวาคม 2008, 17:35:24 เหมือนผมตอนโดย cuil ถล่ม ผมก็ใส่ Crawl-delay ก็เริ่มนิ่ง แต่ข้อเสียคือจะ indexed ไม่มากเท่าเหมือนก่อน
หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: gootum ที่ 26 ธันวาคม 2008, 17:36:13 Google webmaster tool
setting แล้วเลื่อนให้มันลดลงอีก ทำแล้วทราฟฟิกของ cpu เครื่องนั้นลดลงครับได้ผล 100% หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: Step9 ที่ 26 ธันวาคม 2008, 17:38:03 เหมือนผมตอนโดย cuil ถล่ม ผมก็ใส่ Crawl-delay ก็เริ่มนิ่ง แต่ข้อเสียคือจะ indexed ไม่มากเท่าเหมือนก่อน ไม่ทราบว่าใส่ Crawl-delay เท่าไรครับ 10 - 20 - XX หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: Step9 ที่ 26 ธันวาคม 2008, 17:56:00 Capมาให้ดูกัน แถบบาที่ว่า นี่เป็นค่าปกติครับ(เว็บอื่นที่ทำไว้)
(http://www.googeb.com/images/jdv1230292089o.jpg) หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: fammoko ที่ 26 ธันวาคม 2008, 19:09:47 พึงรู้ว่ามันปรับแบบนี้ได้ด้วย
หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: ColdMoney ที่ 26 ธันวาคม 2008, 21:09:00 ก่อนหน้านี้ผมก็เจอครับ ทั้ง bot ทั้ง user ผมแก้โดยเปลี่ยนไปใช้ dedicate ครับ ไม่อยากใช้ delay เดี๋ยวมันงอน :)
หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: pooh20240 ที่ 22 มกราคม 2009, 20:36:44 มันงอลได้ด้วยหรอ- -"
:o หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: kanokk ที่ 22 มกราคม 2009, 20:58:05 มาถามความคืบหน้าว่าได้ผลเป็นงัยมั่ง
ของผมนี่ มันเล่นไป 20 วัน เกือบ 2 G เลย หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: Hari Seldon ที่ 22 มกราคม 2009, 21:11:28 ผมเพิ่งลองปรับขึ้นไป 10 pages/sec สุดสเกล
ก็เข้าน้อยเท่าเดิมครับ ประมาณ 1.7 pages/sec แต่มีอยู่คืนนึง มันพรวดขึ้นมา 10.0 pages/sec เลย โหลดพุ่งขึ้นไปประมาณ 2.4 ขนาดเข้ามาตอนทราฟฟิคปกติน้อยสุดนะเนี่ย หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: afterdead ที่ 23 มกราคม 2009, 11:52:26 แหง้ๆ ถ้ามานเยอะมาก บอกมันมาหาผม ซักตัวฉอง ตัวก็ได้นะครับ ฮาา ;D
หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: EThaiZone ที่ 23 มกราคม 2009, 12:08:30 สงสัยซัพมิทเว็บมากเกินไป บอทเลยพล่าน :D
้ ปล. ผมเป็นหน้าม้าครับ :D หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: Step9 ที่ 23 มกราคม 2009, 12:29:51 สงสัยซัพมิทเว็บมากเกินไป บอทเลยพล่าน :D ้ ปล. ผมเป็นหน้าม้าครับ :D ล่าสุด ไฟล์มันก็โตมากๆด้วยครับ เห็นเพื่อนว่าเพราะแรมHostไม่พอ จึงต้องสร้างไฟล์มาช่วย อันนี้ผมก็ไม่รู้นะครับ แต่ก็ต้องตามลบไฟล์ดังกล่าว :P หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: marus ที่ 23 มกราคม 2009, 12:37:52 ไหนๆก็พูดถึง robots.txt แล้ว ผมเจอSEO Forumนอกแห่งหนึ่ง แห่งนี้แหล่ะ [url]http://www.webmaster-talk.com/[/url] ตั้งกั้นพวกBotที่เราอาจไม่รู้จักชื่อไว้เยอะเลย [url]http://www.webmaster-talk.com/robots.txt[/url] โค๊ด: User-agent: Fasterfox ขอบคุณมากครับ ถ้าหากเป็นผมจะเปลี่ยนเป็นเช่าเครื่องดีกว่า ผมว่ามันเข้ามาอ่านนะครับแต่มันไม่ index ให้ เพราะถ้ามันจะเข้าจริงๆ มันห้ามไม่ได้หรอก ผมก็เขียนโปรแกรมแนวนี้อยู่แต่ใช้ส่วนตัว ไม่เคยอ่าน robots.txt เลย หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: Step9 ที่ 23 มกราคม 2009, 12:40:41 ู^
^ ผมก็ได้ยินมาครับว่า bot หลายตัวมันไม่สน robots.txt มันไปหมด bot google จะฟังrobots ก็ฟังไปคนเดียว marus Confirm!! :o หัวข้อ: Re: มีวิธีลด GoogleBot ให้ช่วยเพลาๆลงหน่อยไหมครับ -*- เริ่มหัวข้อโดย: imodxlstep ที่ 17 มีนาคม 2014, 09:23:46 พึ่งโดนมาหยก ๆ ขอบคุณครับ
|