Visitor Analytics
Skip to main content

Googlebot

TL;DR

Googlebot este crawlerul Google utilizat pentru a scana automat site-urile web urmărind linkurile de la o pagină la alta și adăugându-le la index în funcție de relevanță.

Ce este Googlebot?

Googlebot, după cum îi spune și numele, este crawlerul Google (numit și bots) însărcinat cu parcurgerea site-urilor web. Googlebot este denumirea generală dată:

  • Un crawler de birou care simulează un utilizator pe desktop (Googlebot Desktop).
  • Un crawler mobil care simulează un utilizator pe un dispozitiv mobil (Googlebot Smartphone).

Cum accesează Googlebot site-ul dumneavoastră?

Scopul lui Googlebot este de a parcurge și de a scana toate site-urile web și paginile acestora prin intermediul link-urilor: practic, Googlebot găsește și citește tot conținutul nou sau actualizat și îl adaugă la index pe baza relevanței sale. Vizitele create de crawlerele Google pot fi afișate în jurnalele de referințe și trebuie specificate în robots.txt.

Googlebot răscolește cât mai multe pagini de pe un site, dar respectând și legăturile de dezaprobare selectate de proprietarul site-ului web. Pentru a cere Google să (re)indexeze un site web, vă rugăm să țineți cont de aceste orientări generale:

  • Crawling-ul poate dura de la câteva zile până la câteva săptămâni, dar puteți monitoriza întotdeauna progresul folosind oricare dintre instrumentele Google: Index Status report sau instrumentul URL Inspection.
  • Dacă solicitați de mai multe ori o recrawl pentru același URL sau sitemap, nu veți obține o căutare mai rapidă.
  • Cel mai bun mod de a verifica dacă o cerere provine de fapt de la Googlebot este să utilizați o căutare DNS inversă pe IP-ul sursă al cererii.
  • Google luptă în mod activ împotriva spammerilor; dacă observați pagini sau site-uri spam în rezultatele căutării Google, puteți raporta spam-ul la Google.
  • Dacă doriți să împiedicați Googlebot să răscolească conținutul de pe site-ul dvs., aveți mai multe opțiuni. Fiți conștienți de diferența dintre împiedicarea Googlebot de a parcurge o pagină, împiedicarea Googlebot de a indexa o pagină și împiedicarea ca o pagină să fie accesibilă atât de către crawlere, cât și de către utilizatori.