KI- & Bot-Verzeichnis · KI-Training
ClaudeBot: was er ist, wie du ihn prüfst und wie du ihn sperrst
ClaudeBot wird von Anthropic betrieben. Sammelt Webinhalte, die zum Training von Anthropics Claude-Modellen beitragen können. Er unterstützt auch Crawl-delay.
Wichtigste Fakten
| Betreiber | Anthropic |
|---|---|
| Kategorie | KI-Training |
| Name in robots.txt | ClaudeBot |
| Beachtet robots.txt | OK: Ja |
| Prüfbar? | OK: Ja, über IP-Bereiche |
| Offizielle Dokumentation | |
| Register geprüft | 11. Nov. 2026 |
User-Agent
Sein Name in robots.txt ist ClaudeBot.
Anthropic veröffentlicht keinen vollständigen User-Agent; achte auf ClaudeBot im User-Agent.
Lässt sich ClaudeBot prüfen?
Ja Anthropic veröffentlicht die IP-Adressen, die ClaudeBot nutzt. Wir laden diese Liste alle 6 Stunden herunter: Unsere Kopie ist vom 15. Nov. 2026 und hat 14 Einträge; Anthropic hat sie auf den 20. Okt. 2026 datiert.
Anthropic veröffentlicht eine einzige Liste für alle seine Bots: Die Adresse beweist, dass die Anfrage von Anthropic kommt, aber nicht, welcher seiner Bots sie gestellt hat.
Beachtet ClaudeBot robots.txt?
Ja Anthropic sagt, dass ClaudeBot robots.txt beachtet.
“Anthropic's Bots respect "do not crawl" signals by honoring industry standard directives in robots.txt.”
Anthropic sagt, dass ClaudeBot auch Crawl-delay beachtet, was ihn bremst, ohne ihn zu sperren.
So sperrst oder erlaubst du ClaudeBot
Um ihn zu bitten, der ganzen Website fernzubleiben, trag das in robots.txt ein:
User-agent: ClaudeBot
Disallow: /
Um ihn nur aus einem Ordner fernzuhalten:
User-agent: ClaudeBot
Disallow: /private/
Um ihn zu erlauben und alle anderen Bots zu bitten, fernzubleiben:
User-agent: ClaudeBot
Allow: /
User-agent: *
Disallow: /
robots.txt ist eine Bitte, kein Schloss. Um eine Sperre durchzusetzen, leg eine Regel in Firewall oder CDN an. Weil Anthropic die Adressen von ClaudeBot veröffentlicht, kann die Regel sie genau treffen, sodass ein falscher ClaudeBot nicht als echter durchkommt.
Für eine robots.txt für mehrere Bots auf einmal nutze den robots.txt-Generator.
Wie oft kommt ClaudeBot vorbei?
Anthropic veröffentlicht nicht, wie oft ClaudeBot eine Website besucht, und iplover sieht deinen Traffic nicht. Dein eigenes Zugriffslog ist die einzige verlässliche Zählung: Füg es in den Log-Check ein, der in deinem Browser die Besuche jedes Crawlers zählt und Fälschungen markiert.
Offizielle Dokumentation
Register geprüft am 11. Nov. 2026. Die Adresslisten werden alle 6 Stunden heruntergeladen.