ThaiSEOBoard.com

ความรู้ทั่วไป => Search Engine Optimization => ข้อความที่เริ่มโดย: yogolas101 ที่ 19 กันยายน 2009, 20:47:19



หัวข้อ: ทำ robots.txt ให้บล็อคบอททุกตัวยกเว้น google bot ทำยังไงครับ
เริ่มหัวข้อโดย: yogolas101 ที่ 19 กันยายน 2009, 20:47:19
จากกระทู้ http://www.thaiseoboard.com/index.php/topic,70934.msg870643.html#msg870643

"ทำได้ครับ block badbot"

block บอท ทุกตัว ยกเว้น google bot
ทำยังไงครับ

ขอบคุณครับ


หัวข้อ: Re: ทำ robots.txt ให้บล็อคบอททุกตัวยกเว้น google bot ทำยังไงครับ
เริ่มหัวข้อโดย: yogolas101 ที่ 19 กันยายน 2009, 23:27:00
 :'(


หัวข้อ: Re: ทำ robots.txt ให้บล็อคบอททุกตัวยกเว้น google bot ทำยังไงครับ
เริ่มหัวข้อโดย: navico ที่ 19 กันยายน 2009, 23:35:48
User-agent: Googlebot
Allow: /

มั๊ง


หัวข้อ: Re: ทำ robots.txt ให้บล็อคบอททุกตัวยกเว้น google bot ทำยังไงครับ
เริ่มหัวข้อโดย: shidoshide ที่ 19 กันยายน 2009, 23:43:49
รู้สึกว่า bot บางเจ้า(โดยเฉพาะ bot นิสัยไม่ดี) มันไม่สนใจ robots.txt นะครับ
ดังนั้นไม่น่า block ได้อ่ะ  :)


หัวข้อ: Re: ทำ robots.txt ให้บล็อคบอททุกตัวยกเว้น google bot ทำยังไงครับ
เริ่มหัวข้อโดย: navico ที่ 19 กันยายน 2009, 23:52:49
http://blamcast.net/articles/block-bots-hotlinking-ban-ip-htaccess
โค๊ด:
   RewriteEngine on
   RewriteCond %{HTTP_USER_AGENT} ^BadBot [OR]
   RewriteCond %{HTTP_USER_AGENT} ^EvilScraper [OR]
   RewriteCond %{HTTP_USER_AGENT} ^FakeUser
   RewriteRule ^(.*)$ http://go.away/

ถ้าลองอันนี้ดูน่าจะได้


หัวข้อ: Re: ทำ robots.txt ให้บล็อคบอททุกตัวยกเว้น google bot ทำยังไงครับ
เริ่มหัวข้อโดย: nimda ที่ 20 กันยายน 2009, 13:54:14
บอทเกเร นี่ไม่ดีเลย ... ขอบคุณความคิดเห็นข้างบนคับ