ผมเคยโดน Baidu บอทเข้ามาถล่ม เว็บอื่นมากเลยครับ สุดท้ายก็เขียน robot.txt ไม่ให้มันเข้าอีกเลย
Baidu บอทเข้ามาถล่ม เขียน robot.txt ไม่ให้มันเข้ามาอีก เขียน ยังไงหรือท่าน php หรือเปล่าผมโดน ถล่ม อยู่ตอนนี้ นะครับ ช่วยชี้แนะด้วยครับท่าน กำลังแย่เลย
robots.txt เป็น แค่ Text File ธรรมดาครับ โดยใส่ไว้ที่ Root Path ของเว็บ หรือจะทำ Mod Rewrite ก็ได้ ให้เรียกในลักษณะนี้ ซึ่งบอทจะรู้เองครับ
hปปp://www.domain.com/robots.txt
เอาไว้ระบุว่า เราจะอนุญาตให้บอท ตัวไหน เข้าบ้าง หรือทั้งหมด
แล้วก็บอกว่าอนุญาตให้เข้า Path ไหนได้บ้าง
hปปp://tools.seobook.com/robots-txt/
< กดยุบ (ห้องยกเลิกการใช้งาน)
