ยินดีต้อนรับคุณ, บุคคลทั่วไป กรุณา เข้าสู่ระบบ หรือ ลงทะเบียน

เข้าสู่ระบบด้วยชื่อผู้ใช้ รหัสผ่าน และระยะเวลาในเซสชั่น

ThaiSEOBoard.comความรู้ทั่วไปSearch Engine Optimizationไม่ต้องการให้ bot ของ Search Engine เข้ามาเก็บข้อมูล ต้องทำอย่างไรครับ
หน้า: [1]   ลงล่าง
พิมพ์
ผู้เขียน หัวข้อ: ไม่ต้องการให้ bot ของ Search Engine เข้ามาเก็บข้อมูล ต้องทำอย่างไรครับ  (อ่าน 736 ครั้ง)
0 สมาชิก และ 1 บุคคลทั่วไป กำลังดูหัวข้อนี้
nothingg
Newbie
*

พลังน้ำใจ: 2
ออฟไลน์ ออฟไลน์

กระทู้: 29



ดูรายละเอียด
« เมื่อ: 24 กรกฎาคม 2015, 09:59:55 »

ถ้า website ไม่ได้ใช้งานที่ port 80 bot ของ Search Engine จะสามารถเข้ามาเก็บข้อมูลได้รึป่าวครับ (เช่น ใช้งานที่ port 1478)
ถ้าสามารถวิ่งเข้ามาเก็บข้อมูลโดยที่ไม่ได้ใช้ port 80 ต้องทำอย่างไรถึงจะป้องกัน bot ไม่ให้เข้ามาเก็ฐข้อมูลได้ครับ.
  เท่าที่รู้มาวิธีป้องกัน (วิธีไหนดีกว่ากันครับ หรือ ถ้ามีวิธีอื่นแนะนำได้เลยน่ะครับ)
   - ใช้ robots.txt
   - ใส่ <meta name="robots" content="noindex, nofollow" /> ทุกหน้า


ขอบคุณครับ..  wanwan017
« แก้ไขครั้งสุดท้าย: 24 กรกฎาคม 2015, 10:00:21 โดย nothingg » บันทึกการเข้า
sushike
คนรักเสียว
*

พลังน้ำใจ: 11
ออฟไลน์ ออฟไลน์

กระทู้: 156



ดูรายละเอียด
« ตอบ #1 เมื่อ: 26 กรกฎาคม 2015, 17:55:09 »

ทำได้ครับ ต้องมีบัญชี gmail
แล้วแจ้งใน google webmaster tool
 ไม่ให้ส่ง bot ฟรืลบ cache ทิ้งก็ได้นะครับ
บันทึกการเข้า

รับจ้างทำ Submit Network ราคาเริ่มต้น 500 บาท/เดือน/keyword
ภาษาไทย|ภาษาอังกฤษ,

รับจ้างดูแล fanpage,ขาย Account Facebook เชื่อม Power Editor แล้ว & Gmail เชื่อม Google Adwords
sputtaro
สมุนแก๊งเสียว
*

พลังน้ำใจ: 139
ออฟไลน์ ออฟไลน์

กระทู้: 910



ดูรายละเอียด
« ตอบ #2 เมื่อ: 26 กรกฎาคม 2015, 18:20:46 »

ไม่ว่าจะตั้งค่าให้ port อะไร เป็น port เข้าถึง เว็บไซท์ได้
bot ต่างๆก็เข้าถึงได้เสมอครับ
แต่บอทมาตรฐาน จะให้ความเคารพ ไฟล์ robots.txt เสมอ
เมื่อคุณ disallow เขาก็จะไม่เข้าไป

แต่กฎข้อนี้ใช้ไม่ได้กับ spam bot พวกนี้ไม่สนใจกฎเกณฑ์ใดๆทั้งสิ้น
แม้ว่า คุณจะพยามยามบล็อกมันแค่ไหน วันนี้เข้าไม่ได้เพราะคุณบล็อกชื่อนี้ วันพรุ่งนี้ มันเปลี่ยนชื่อใหม่
วันนี้คุณบล็อกไอพีนี้ วันพรุ่งนี้ มันก็เปลี่ยนไอพีใหม่เข้ามาอีก
และมันก็เป็นเช่นนี้เสมอ

หากมีโฟลเดอร์ใดที่คุณไม่ต้องการให้เข้า นอกเหนือจากการใช้ robots.txt แล้วก็คือ htaccess ครับ
รวมทั้ง การตั้งค่าให้ใช้รหัสผ่าน ( password protecting )
การตั้งค่าให้ใส่รหัสผ่านจะได้ผลชงัดนัก กับบอททุกประเภท
และแน่นอน เผลอๆ มันรวมถึงเราด้วย หากลืมรหัสผ่าน
« แก้ไขครั้งสุดท้าย: 26 กรกฎาคม 2015, 18:22:40 โดย sputtaro » บันทึกการเข้า
josephsrawut
สมุนแก๊งเสียว
*

พลังน้ำใจ: 56
ออฟไลน์ ออฟไลน์

กระทู้: 600



ดูรายละเอียด เว็บไซต์
« ตอบ #3 เมื่อ: 27 กรกฎาคม 2015, 06:56:20 »

ไม่ว่าจะตั้งค่าให้ port อะไร เป็น port เข้าถึง เว็บไซท์ได้
bot ต่างๆก็เข้าถึงได้เสมอครับ
แต่บอทมาตรฐาน จะให้ความเคารพ ไฟล์ robots.txt เสมอ
เมื่อคุณ disallow เขาก็จะไม่เข้าไป

แต่กฎข้อนี้ใช้ไม่ได้กับ spam bot พวกนี้ไม่สนใจกฎเกณฑ์ใดๆทั้งสิ้น
แม้ว่า คุณจะพยามยามบล็อกมันแค่ไหน วันนี้เข้าไม่ได้เพราะคุณบล็อกชื่อนี้ วันพรุ่งนี้ มันเปลี่ยนชื่อใหม่
วันนี้คุณบล็อกไอพีนี้ วันพรุ่งนี้ มันก็เปลี่ยนไอพีใหม่เข้ามาอีก
และมันก็เป็นเช่นนี้เสมอ

หากมีโฟลเดอร์ใดที่คุณไม่ต้องการให้เข้า นอกเหนือจากการใช้ robots.txt แล้วก็คือ htaccess ครับ
รวมทั้ง การตั้งค่าให้ใช้รหัสผ่าน ( password protecting )
การตั้งค่าให้ใส่รหัสผ่านจะได้ผลชงัดนัก กับบอททุกประเภท
และแน่นอน เผลอๆ มันรวมถึงเราด้วย หากลืมรหัสผ่าน

รบกวนสอบถามครับ  การตั้งpassword protecting ให้กับโฟลเดอร์ แต่ถ้าโฟลเดอร์นั้นเป็น sub-domain เรายังคงเข้าเวบ sub-domain ได้เหมือนเดิมหรือเปล่าครับ

ขอบคุณมากๆครับ
บันทึกการเข้า
sputtaro
สมุนแก๊งเสียว
*

พลังน้ำใจ: 139
ออฟไลน์ ออฟไลน์

กระทู้: 910



ดูรายละเอียด
« ตอบ #4 เมื่อ: 27 กรกฎาคม 2015, 08:04:34 »

ได้ครับ อย่างเช่นที่มักจะมีคำแนะนำว่า ให้ใช้ authorization login (ซึ่งมันก็คือการใช้ password protect อย่างหนึ่ง) ก่อนที่จะเข้า phpmyadmin ไม่ว่าจะอยู่ในรูปของ
ซับโดเมนหรือโฟลเดอร์ก็ตาม นั่นแหละครับ
ปลอดภัยที่สุด แต่มีคนไม่มากนักที่จะทำ
« แก้ไขครั้งสุดท้าย: 27 กรกฎาคม 2015, 08:10:13 โดย sputtaro » บันทึกการเข้า
josephsrawut
สมุนแก๊งเสียว
*

พลังน้ำใจ: 56
ออฟไลน์ ออฟไลน์

กระทู้: 600



ดูรายละเอียด เว็บไซต์
« ตอบ #5 เมื่อ: 27 กรกฎาคม 2015, 08:09:30 »

ได้ครับ อย่างเช่นที่มักจะมีคำแนะนำว่า ให้ใช้ authorization login (ซึ่งมันก็คือการใช้ password protect อย่างหนึ่ง) ก่อนที่จะเข้า phpmyadmin นั่นแหละครับ
ปลอดภัยที่สุด แต่มีคนไม่มากนักที่จะทำ

ขอบคุณมากๆครับ

 wanwan017
บันทึกการเข้า
Victory-Mik
ก๊วนเสียว
*

พลังน้ำใจ: 4
ออฟไลน์ ออฟไลน์

กระทู้: 440



ดูรายละเอียด เว็บไซต์
« ตอบ #6 เมื่อ: 27 กรกฎาคม 2015, 08:51:52 »

 wanwan020
บันทึกการเข้า

evev9
ก๊วนเสียว
*

พลังน้ำใจ: 13
ออฟไลน์ ออฟไลน์

กระทู้: 471



ดูรายละเอียด เว็บไซต์
« ตอบ #7 เมื่อ: 27 กรกฎาคม 2015, 09:32:03 »

อยากรู้เหมือนกันครับ  wanwan017
บันทึกการเข้า

mosmf
หัวหน้าแก๊งเสียว
*

พลังน้ำใจ: 61
ออฟไลน์ ออฟไลน์

กระทู้: 1,610



ดูรายละเอียด เว็บไซต์
« ตอบ #8 เมื่อ: 27 กรกฎาคม 2015, 11:19:52 »

ขอบคุณครับ ข้อมูลเยอะดี  wanwan017
บันทึกการเข้า

หน้า: [1]   ขึ้นบน
พิมพ์