ทำไม Net Crawler ของ Google ถึงเข้าไปได้ทุกที่ แม้ที่ที่ต้องการการล๊อคอินเป็นสมาชิก
เคยเจอไหม เวลาเซิสใน SE แล้วคลิกเข้าไป แต่ดูไม่ได้ต้องสมัครสมาชิกก่อน
ตอบ.......google ไม่สามารถเก็บข้อมูลในหน้าที่ต้องมีการ log in ก่อน แต่ที่มี index อยู่ก็เพราะว่าหน้านั้น ๆ มีการอนุญาตให้ google เก็บได้บางส่วนเช่น ในส่วนของ head เป็นต้น หรือไม่ก็อนุญาตให้ google เก็บได้เลย เพื่อหวังผลในการทำ SEO ถึงแม้ว่าจะต้อง log in ก่อนก็ตามครับ แต่ว่าคนที่เข้ามาต้อง Log in ก่อน ต้องดูว่าเขียน web อย่างไรครับ
ไอ้ robot.txt เขียน disallowed นี่มันกัน bot ไม่ให้มาเก็บได้จริงเหรอ หรือแค่ไม่ให้เอาไปแสดงใน SE มากกว่า
ตอบ........ไม่มีใครยืนยันได้นอกจาก google เองครับ ซึ่งแน่นอนว่าเขาจะต้องบอกว่าไม่ได้เก็บ แต่ใครจะรู้ล่ะ แต่ผมว่ามันเก็บครับ แต่ว่าไม่แสดงใน SE เนื่องจากต้องการเก็บไว้เป็นข้อมูลอ้างอิง ถ้าผมเป็นเจ้าของ google นะครับ ผมจะสั่งให้มันเก็บ ถึงแม้ว่าคุณจะบอกไม่ให้เก็บก็ตามที ถ้าไม่แสดงใน SE ก็คงจะไม่มีคนรู้ใช่ไหมครับว่า google เก็บมา
จริง ๆ แล้ว Google แอบเก็บข้อมูลของทั้งโลกเอาไว้แล้ว !!
ตอบ.........แน่นอนที่สุดครับ
มันเก็บครับ ยืนยัน แต่จะทำยังไม่ให้มันเก็บเนี่ยสิ รอคนต่อไป
ตอบ........ก็ทำแบบให้ log in ก่อน google ก็เก็บไม่ได้แล้วครับ แต่ว่าจะต้องไม่แสดงข้อมูลอะไรให้ google เห็นเลยแม้แต่นิดเดียวนะครับ แล้วก็ต้องไม่มีช่องโหว่ตรงไหนให้ google เล็ดลอดเข้าไปได้ สุดท้ายถ้าพี่ google แกแอบมาสมัครเป็นสมาชิก แล้วก็เก็บข้อมูลไปก็คงต้องปล่อยให้เขาเก็บไปแล้วล่ะครับ
ความรู้ทั่วไป
