Googlebot ist ein Webcrawler von Google, der Webseiten auf ihren Inhalt untersucht. Findet er neue Domains, speichert er diese in dem Daten-Index der Suchmaschine. Bei neuen Inhalten auf bereits gespeicherten Webseiten verändert das Programm dementsprechend den bestehenden Eintrag. Die Häufigkeit, mit der einzelne Webseiten vom Googlebot gescannt werden, hängt mit dem Page Rank sowie der Anzahl der externen Links zusammen. Google verwendet allerdings nicht nur einen, sondern mehrere solcher Webcrawler, um das Netz zu durchsuchen.
Das soll gewährleisten, dass die Informationen der Suchmaschine immer auf den aktuellen Stand gebracht und Veränderungen von Webseiten wahrgenommen werden. Außerdem hat die mittlerweile hohe Anzahl solcher Programme ebenfalls mit den vielen Manipulationsversuchen der Suchmaschinenrankings zu tun. Oftmals täuschen Webseiten einen anderen Inhalt vor, um eine bessere Platzierung bei den Suchmaschinen zu erlangen. Googlebot soll deshalb feststellen, ob der Inhalt einer Webseite tatsächlich denen in der Suchmaschine angegebenen Informationen entspricht.