KI- & Bot-Verzeichnis · KI-Training
Google-Extended: was er ist, wie du ihn prüfst und wie du ihn sperrst
Google-Extended wird von Google betrieben. Eine robots.txt-Steuerung, kein Crawler: Sie legt fest, ob Seiten, die Google ohnehin crawlt, zum Training und zur Fundierung von Gemini-Modellen genutzt werden dürfen. Auf die Google-Suche hat sie keinen Einfluss.
Wichtigste Fakten
| Betreiber | Google |
|---|---|
| Kategorie | KI-Training |
| Name in robots.txt | Google-Extended |
| Beachtet robots.txt | Hinweis: Eine robots.txt-Steuerung |
| Prüfbar? | Hinweis: Kein Crawler |
| Offizielle Dokumentation | |
| Register geprüft | 11. Nov. 2026 |
User-Agent
Sein Name in robots.txt ist Google-Extended.
Google-Extended hat keinen eigenen User-Agent. Das Crawlen übernimmt Googlebot; dieser Name steht nur in robots.txt und legt dort fest, wofür die gecrawlten Seiten genutzt werden dürfen.
Lässt sich Google-Extended prüfen?
Nicht nötig Google-Extended besucht deine Website nie selbst, es gibt also nichts zu prüfen.
Beachtet Google-Extended robots.txt?
Eine robots.txt-Steuerung Es gibt ihn nur als robots.txt-Regel, also steuerst du ihn genau dort.
“Google-Extended doesn't have a separate HTTP request user agent string.”
So sperrst oder erlaubst du Google-Extended
Um ihn zu bitten, der ganzen Website fernzubleiben, trag das in robots.txt ein:
User-agent: Google-Extended
Disallow: /
Um ihn nur aus einem Ordner fernzuhalten:
User-agent: Google-Extended
Disallow: /private/
Um ihn zu erlauben und alle anderen Bots zu bitten, fernzubleiben:
User-agent: Google-Extended
Allow: /
User-agent: *
Disallow: /
Google-Extended zu sperren ändert nur, wofür Google deine Seiten nutzen darf; Googlebot crawlt sie weiter. Um das Crawlen selbst zu stoppen, sperr Googlebot, was dich auch aus dessen Suchergebnissen entfernt.
Für eine robots.txt für mehrere Bots auf einmal nutze den robots.txt-Generator.
Wie oft kommt Google-Extended vorbei?
Google veröffentlicht nicht, wie oft Google-Extended eine Website besucht, und iplover sieht deinen Traffic nicht. Dein eigenes Zugriffslog ist die einzige verlässliche Zählung: Füg es in den Log-Check ein, der in deinem Browser die Besuche jedes Crawlers zählt und Fälschungen markiert.
Offizielle Dokumentation
developers.google.com/search/docs/crawling-indexing/google-common-crawlers
Register geprüft am 11. Nov. 2026. Die Adresslisten werden alle 6 Stunden heruntergeladen.