Googlebot

TL;DR
Googlebot เป็นโปรแกรมรวบรวมข้อมูลของ Google ที่ใช้ในการสแกนเว็บไซต์โดยอัตโนมัติโดยติดตามลิงก์จากหน้าหนึ่งไปยังอีกหน้าหนึ่งและเพิ่มลงในดัชนีตามความเกี่ยวข้อง
Googlebot คืออะไร?
Googlebot ตามชื่อคือโปรแกรมรวบรวมข้อมูลของ Google (เรียกอีกอย่างว่าบอท) ที่รับผิดชอบการรวบรวมข้อมูลเว็บไซต์ Googlebot เป็นชื่อทั่วไปที่กำหนดให้:
- โปรแกรมรวบรวมข้อมูลเดสก์ท็อปที่จำลองผู้ใช้บนเดสก์ท็อป (Googlebot Desktop)
- โปรแกรมรวบรวมข้อมูลมือถือที่จำลองผู้ใช้บนอุปกรณ์มือถือ (Googlebot Smartphone)
Googlebot เข้าถึงไซต์ของคุณได้อย่างไร
จุดประสงค์ของ Googlebot คือการรวบรวมข้อมูลและสแกนเว็บไซต์ทั้งหมดและหน้าเว็บผ่านลิงก์ โดยพื้นฐานแล้ว Googlebot จะค้นหาและอ่านเนื้อหาใหม่หรือที่อัปเดตทั้งหมด และเพิ่มลงในดัชนีตามความเกี่ยวข้อง การเข้าชมที่สร้างโดยโปรแกรมรวบรวมข้อมูลของ Google อาจแสดงในบันทึกผู้อ้างอิง และควรระบุใน robots.txt
Googlebot รวบรวมข้อมูลหน้าจากเว็บไซต์ให้ได้มากที่สุดเท่าที่จะเป็นไปได้ แต่ให้เคารพลิงก์ปฏิเสธที่เลือกโดยเจ้าของเว็บไซต์ด้วย หากต้องการขอให้ Google (อีกครั้ง) จัดทำดัชนีเว็บไซต์ โปรดทราบหลักเกณฑ์ทั่วไปเหล่านี้: