ยินดีต้อนรับคุณ, บุคคลทั่วไป กรุณา เข้าสู่ระบบ หรือ ลงทะเบียน

เข้าสู่ระบบด้วยชื่อผู้ใช้ รหัสผ่าน และระยะเวลาในเซสชั่น

ThaiSEOBoard.comพัฒนาเว็บไซต์Programmingมีวิธีกันไม่ให้ bots เข้าบ่อยๆไมครับ
หน้า: [1]   ลงล่าง
พิมพ์
ผู้เขียน หัวข้อ: มีวิธีกันไม่ให้ bots เข้าบ่อยๆไมครับ  (อ่าน 814 ครั้ง)
0 สมาชิก และ 1 บุคคลทั่วไป กำลังดูหัวข้อนี้
WPDSign
Verified Seller
เจ้าพ่อบอร์ดเสียว
*

พลังน้ำใจ: 500
ออฟไลน์ ออฟไลน์

กระทู้: 9,060



ดูรายละเอียด เว็บไซต์
« เมื่อ: 20 พฤศจิกายน 2011, 12:03:42 »

ตอนนี้ได้เช็คดู บอทเข้าจนเว็บล่ม ล่มเกือบทุกวัน พึงดู logs  wanwan031
บอททั้งนั้น  Shocked ทั้งๆที่ traffic น้อย 2000++ เอง

มีวิธีใหนกันไม่ให้ bots เข้าบ่อยๆบ้างครับ
« แก้ไขครั้งสุดท้าย: 20 พฤศจิกายน 2011, 12:07:42 โดย WPDSign » บันทึกการเข้า

สร้างบ้าน Modern แบบบ้านโมเดิร์น มาแรง
» ต้องการสร้างบ้านดูแบบบ้านสวยๆ แบบบ้านสองชั้น ทุกสไลต์บริการรับสร้างบ้าน ใครฝันอย่างสร้างบ้านสไตล์รีสอร์ท มีแบบบ้านสไตล์รีสอร์ท พร้อมก่อสร้าง ลงประกาศขายบ้านที่ ลงประกาศ
aottty
คนรักเสียว
*

พลังน้ำใจ: 2
ออฟไลน์ ออฟไลน์

กระทู้: 108



ดูรายละเอียด
« ตอบ #1 เมื่อ: 20 พฤศจิกายน 2011, 12:05:52 »

รอฟังด้วยคน :wanwan004:ครับ
บันทึกการเข้า
vanavat
หัวหน้าแก๊งเสียว
*

พลังน้ำใจ: 373
ออฟไลน์ ออฟไลน์

กระทู้: 2,752



ดูรายละเอียด เว็บไซต์
« ตอบ #2 เมื่อ: 20 พฤศจิกายน 2011, 12:07:00 »

เขียนไฟล์ robot.txt ไงครับ
บันทึกการเข้า

JackSandee
Newbie
*

พลังน้ำใจ: 4
ออฟไลน์ ออฟไลน์

กระทู้: 34



ดูรายละเอียด
« ตอบ #3 เมื่อ: 20 พฤศจิกายน 2011, 12:08:32 »

ใส่ระบบล็อคอินครับ แต่จะเข้าไม่ได้เลยแทน  Tongue
บันทึกการเข้า
หมีกระป๋อง
Verified Seller
เจ้าพ่อบอร์ดเสียว
*

พลังน้ำใจ: 826
ออฟไลน์ ออฟไลน์

กระทู้: 3,155



ดูรายละเอียด
« ตอบ #4 เมื่อ: 20 พฤศจิกายน 2011, 12:09:22 »

ใส่ meta revisit ให้บอทมาทุกๆ 2 วันดีปะครับ  Tongue
บันทึกการเข้า

WPDSign
Verified Seller
เจ้าพ่อบอร์ดเสียว
*

พลังน้ำใจ: 500
ออฟไลน์ ออฟไลน์

กระทู้: 9,060



ดูรายละเอียด เว็บไซต์
« ตอบ #5 เมื่อ: 20 พฤศจิกายน 2011, 12:12:01 »

เขียนไฟล์ robot.txt ไงครับ

เดี่ยวลองดูอีกทีครับ
พอดีเมื่ออีกลองอยู่ แต่ยังอืดๆครับ
บันทึกการเข้า

สร้างบ้าน Modern แบบบ้านโมเดิร์น มาแรง
» ต้องการสร้างบ้านดูแบบบ้านสวยๆ แบบบ้านสองชั้น ทุกสไลต์บริการรับสร้างบ้าน ใครฝันอย่างสร้างบ้านสไตล์รีสอร์ท มีแบบบ้านสไตล์รีสอร์ท พร้อมก่อสร้าง ลงประกาศขายบ้านที่ ลงประกาศ
vanavat
หัวหน้าแก๊งเสียว
*

พลังน้ำใจ: 373
ออฟไลน์ ออฟไลน์

กระทู้: 2,752



ดูรายละเอียด เว็บไซต์
« ตอบ #6 เมื่อ: 20 พฤศจิกายน 2011, 12:12:09 »

# robots.txt generated at http://www.mcanerin.com
User-agent: Googlebot
Disallow:
User-agent: googlebot-image
Disallow:
User-agent: googlebot-mobile
Disallow:
User-agent: MSNBot
Disallow:
User-agent: Slurp
Disallow:
User-agent: Teoma
Disallow: /
User-agent: twiceler
Disallow: /
User-agent: Gigabot
Disallow: /
User-agent: Scrubby
Disallow: /
User-agent: Robozilla
Disallow: /
User-agent: Nutch
Disallow: /
User-agent: ia_archiver
Disallow: /
User-agent: baiduspider
Disallow: /
User-agent: naverbot
Disallow: /
User-agent: yeti
Disallow: /
User-agent: yahoo-mmcrawler
Disallow:
User-agent: psbot
Disallow:
User-agent: asterias
Disallow: /
User-agent: yahoo-blogs/v3.9
Disallow:
User-agent: *
Disallow:
Crawl-delay: 5
Disallow: go-offers.php
Disallow: rss.php
Disallow: detail.php
 
Sitemap: http://yourdomain.com/sitemap.xml


ไม่ต้องมาสักตัวเลยเอามั้ย  wanwan007
บันทึกการเข้า

หมีกระป๋อง
Verified Seller
เจ้าพ่อบอร์ดเสียว
*

พลังน้ำใจ: 826
ออฟไลน์ ออฟไลน์

กระทู้: 3,155



ดูรายละเอียด
« ตอบ #7 เมื่อ: 20 พฤศจิกายน 2011, 12:15:58 »

^
^
^

จบเลยครับ ไม่ต้อง Index กันพอดี  wanwan004

จขกท. ลองใส่ <meta name="revisit-after" content="1 days" />

เปลี่ยนเลขเอาว่าจะให้บอทมากี่วันครั้ง

แล้วก็ระวังไฟล์เก็บ Log ของบอทบวมนะครับ
บันทึกการเข้า

bluezip
ก๊วนเสียว
*

พลังน้ำใจ: 5
ออฟไลน์ ออฟไลน์

กระทู้: 294



ดูรายละเอียด
« ตอบ #8 เมื่อ: 20 พฤศจิกายน 2011, 12:17:15 »

คนเข้า 2000 เว็บล่ม เปลี่ยนโฮสดีกว่า
บันทึกการเข้า

WPDSign
Verified Seller
เจ้าพ่อบอร์ดเสียว
*

พลังน้ำใจ: 500
ออฟไลน์ ออฟไลน์

กระทู้: 9,060



ดูรายละเอียด เว็บไซต์
« ตอบ #9 เมื่อ: 20 พฤศจิกายน 2011, 12:19:26 »

# robots.txt generated at http://www.mcanerin.com
User-agent: Googlebot
Disallow:
User-agent: googlebot-image
Disallow:
User-agent: googlebot-mobile
Disallow:
User-agent: MSNBot
Disallow:
User-agent: Slurp
Disallow:
User-agent: Teoma
Disallow: /
User-agent: twiceler
Disallow: /
User-agent: Gigabot
Disallow: /
User-agent: Scrubby
Disallow: /
User-agent: Robozilla
Disallow: /
User-agent: Nutch
Disallow: /
User-agent: ia_archiver
Disallow: /
User-agent: baiduspider
Disallow: /
User-agent: naverbot
Disallow: /
User-agent: yeti
Disallow: /
User-agent: yahoo-mmcrawler
Disallow:
User-agent: psbot
Disallow:
User-agent: asterias
Disallow: /
User-agent: yahoo-blogs/v3.9
Disallow:
User-agent: *
Disallow:
Crawl-delay: 5
Disallow: go-offers.php
Disallow: rss.php
Disallow: detail.php
 
Sitemap: http://yourdomain.com/sitemap.xml


ไม่ต้องมาสักตัวเลยเอามั้ย  wanwan007


ขอบคุณครับเดี่ยวลองดู


ใส่ meta revisit ให้บอทมาทุกๆ 2 วันดีปะครับ  Tongue


พึ่งแก้พอดี น่ามีส่วนครับ
ก่อนหน้านี้ผมตั้งไว้ 1day

ใส่ระบบล็อคอินครับ แต่จะเข้าไม่ได้เลยแทน  Tongue

อยากให้มันเข้า แต่ไม่ต้องมาก สงสัยอยู่ว่าทำไม vps ผมล่ม

+ thank ครับ
« แก้ไขครั้งสุดท้าย: 20 พฤศจิกายน 2011, 12:22:46 โดย WPDSign » บันทึกการเข้า

สร้างบ้าน Modern แบบบ้านโมเดิร์น มาแรง
» ต้องการสร้างบ้านดูแบบบ้านสวยๆ แบบบ้านสองชั้น ทุกสไลต์บริการรับสร้างบ้าน ใครฝันอย่างสร้างบ้านสไตล์รีสอร์ท มีแบบบ้านสไตล์รีสอร์ท พร้อมก่อสร้าง ลงประกาศขายบ้านที่ ลงประกาศ
หมีกระป๋อง
Verified Seller
เจ้าพ่อบอร์ดเสียว
*

พลังน้ำใจ: 826
ออฟไลน์ ออฟไลน์

กระทู้: 3,155



ดูรายละเอียด
« ตอบ #10 เมื่อ: 20 พฤศจิกายน 2011, 12:22:21 »

กำ อย่าไปลองใส่ robots.txt แบบนั้นนะครับ

เดี๋ยวเว็บไม่ index หรอก  wanwan022
บันทึกการเข้า

vanavat
หัวหน้าแก๊งเสียว
*

พลังน้ำใจ: 373
ออฟไลน์ ออฟไลน์

กระทู้: 2,752



ดูรายละเอียด เว็บไซต์
« ตอบ #11 เมื่อ: 20 พฤศจิกายน 2011, 12:26:25 »

ไม่ต้องลองนะครับ robot.txt มีไว้สำหรับหน้าที่เป็นข้อมูลลับ ไม่อยากให้ index ไม่จำเป็นไม่ต้องไปเขียนกันมันนะ ไม่เกิดพอดี  wanwan004
บันทึกการเข้า

หน้า: [1]   ขึ้นบน
พิมพ์