KI- & Bot-Verzeichnis · Suchmaschine
Googlebot: was er ist, wie du ihn prüfst und wie du ihn sperrst
Googlebot wird von Google betrieben. Durchsucht das Web für die Google-Suche.
Wichtigste Fakten
| Betreiber | Google |
|---|---|
| Kategorie | Suchmaschine |
| Name in robots.txt | Googlebot |
| Beachtet robots.txt | OK: Ja |
| Prüfbar? | OK: Ja, über IP-Bereiche und Reverse-DNS |
| Offizielle Dokumentation | |
| Register geprüft | 11. Nov. 2026 |
User-Agent
Sein Name in robots.txt ist Googlebot.
Google dokumentiert diesen User-Agent:
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Googlebot/2.1; +http://www.google.com/bot.html) Chrome/W.X.Y.Z Safari/537.36W.X.Y.Z steht für eine Browser-Versionsnummer, die sich mit der Zeit ändert.
Lässt sich Googlebot prüfen?
Ja Google veröffentlicht die IP-Adressen, die Googlebot nutzt. Wir laden diese Liste alle 6 Stunden herunter: Unsere Kopie ist vom 20. Nov. 2026 und hat 317 Einträge; Google hat sie auf den 20. Nov. 2026 datiert.
Seine Adressen haben außerdem Reverse-DNS-Namen unter googlebot.com, geo.googlebot.com; ein Name zählt nur, wenn er auf dieselbe Adresse zurückzeigt.
Beachtet Googlebot robots.txt?
Ja Google sagt, dass Googlebot robots.txt beachtet.
“always obey robots.txt rules when crawling automatically”
So sperrst oder erlaubst du Googlebot
Um ihn zu bitten, der ganzen Website fernzubleiben, trag das in robots.txt ein:
User-agent: Googlebot
Disallow: /
Um ihn nur aus einem Ordner fernzuhalten:
User-agent: Googlebot
Disallow: /private/
Um ihn zu erlauben und alle anderen Bots zu bitten, fernzubleiben:
User-agent: Googlebot
Allow: /
User-agent: *
Disallow: /
robots.txt ist eine Bitte, kein Schloss. Um eine Sperre durchzusetzen, leg eine Regel in Firewall oder CDN an. Weil Google die Adressen von Googlebot veröffentlicht, kann die Regel sie genau treffen, sodass ein falscher Googlebot nicht als echter durchkommt.
Für eine robots.txt für mehrere Bots auf einmal nutze den robots.txt-Generator.
Wie oft kommt Googlebot vorbei?
Google veröffentlicht nicht, wie oft Googlebot eine Website besucht, und iplover sieht deinen Traffic nicht. Dein eigenes Zugriffslog ist die einzige verlässliche Zählung: Füg es in den Log-Check ein, der in deinem Browser die Besuche jedes Crawlers zählt und Fälschungen markiert.
Offizielle Dokumentation
developers.google.com/search/docs/crawling-indexing/google-common-crawlers
Register geprüft am 11. Nov. 2026. Die Adresslisten werden alle 6 Stunden heruntergeladen.