Googlebot è il nome del robot (o crawler) di Google.
Un web crawler, chiamato anche spider o robot (o semplicemente “bot”) è un software che naviga sistematicamente nel World Wide Web, tipicamente ai fini dell’indicizzazione.
I motori di ricerca come Google e alcuni altri tipi di siti utilizzano il web crawling per aggiornare i loro contenuti web o gli indici dei contenuti web di altri siti.
I crawler come Googlebot creano una copia delle pagine web per l’elaborazione da parte del motore di ricerca, che indicizza le pagine scaricate in modo che gli utenti possano effettuare ricerche in modo più efficiente.
Vedi anche:
