Bot prüfen
Ist der „Googlebot“ oder „GPTBot“ in deinen Logs echt? Gib seine IP-Adresse, seinen User-Agent oder beides ein. Wir prüfen die Adresse mit den Listen, die die Betreiber veröffentlichen, und mit Reverse-DNS, denn ein User-Agent kann alles Mögliche behaupten.
Du willst ein ganzes Log prüfen? Füg es in den Log-Check ein: Er liest die User-Agents in deinem Browser und markiert Adressen, die sich als Crawler ausgeben, der sie nicht sind. Das Log verlässt dein Gerät nie.
Die Listen, mit denen wir prüfen
Viele Bot-Prüfer vertrauen dem User-Agent oder nutzen Adresslisten, die Monate alt sind. Wir laden die Liste jedes Betreibers alle 6 Stunden herunter und vergleichen Adressen mit unserer Kopie. Auch die Betreiber datieren ihre Listen, und manche Daten sind alt: Wir zeigen beide, damit du selbst urteilen kannst.
| Liste | Belegt | Einträge | Unsere Kopie | Datum des Betreibers |
|---|---|---|---|---|
| Google common crawlers (Googlebot) | Googlebot | 317 | 13. Nov. 2026 | 13. Nov. 2026 |
| Google special-case crawlers (e.g. AdsBot) | Google special-case crawlers | 272 | 13. Nov. 2026 | 13. Nov. 2026 |
| Google user-triggered fetchers | Google user-triggered fetchers | 1612 | 13. Nov. 2026 | 13. Nov. 2026 |
| Bingbot | Bingbot | 29 | 13. Nov. 2026 | 3. Jan. 2024 |
| Applebot | Applebot | 24 | 13. Nov. 2026 | 15. Sept. 2026 |
| DuckDuckBot | DuckDuckBot | 486 | 13. Nov. 2026 | 1. Sept. 2026 |
| OpenAI OAI-SearchBot | OAI-SearchBot | 39 | 13. Nov. 2026 | 2. Jan. 2026 |
| PerplexityBot | PerplexityBot | 13 | 13. Nov. 2026 | 28. Okt. 2026 |
| Anthropic crawlers (ClaudeBot, Claude-User, Claude-SearchBot) | Claude-SearchBot, ClaudeBot, Claude-User | 14 | 13. Nov. 2026 | 20. Okt. 2026 |
| Amazon Amzn-SearchBot | Amzn-SearchBot | 816 | 13. Nov. 2026 | 8. Sept. 2026 |
| OpenAI GPTBot | GPTBot | 18 | 13. Nov. 2026 | 22. Sept. 2026 |
| Common Crawl CCBot | CCBot | 5 | 13. Nov. 2026 | 11. Aug. 2026 |
| Amazonbot | Amazonbot | 1292 | 13. Nov. 2026 | 8. Sept. 2026 |
| OpenAI ChatGPT-User | ChatGPT-User | 237 | 13. Nov. 2026 | 6. Nov. 2026 |
| Perplexity-User | Perplexity-User | 10 | 13. Nov. 2026 | 28. Okt. 2026 |
| Amazon Amzn-User | Amzn-User | 1023 | 13. Nov. 2026 | 4. Nov. 2025 |
| AhrefsBot and AhrefsSiteAudit | AhrefsBot | 81 | 13. Nov. 2026 | ohne Datum |
Diese Bots veröffentlichen keine Adressen, sie lassen sich also nur am User-Agent erkennen, und der beweist nichts: meta-webindexer, meta-externalagent, Bytespider, Timpibot, FacebookBot, meta-externalfetcher, cohere-ai, SemrushBot, DotBot, MJ12bot, facebookexternalhit, Diffbot, omgili.
Was dieses Tool macht
Bots stellen sich im User-Agent vor, aber das ist nur Text: Ein Scraper kann sich mit einer Zeile Code Googlebot oder GPTBot nennen. Was er nicht fälschen kann, ist, woher die Anfrage kommt.
Deshalb prüft dieses Tool die Adresse. Die meisten großen Betreiber veröffentlichen die IP-Bereiche ihrer Crawler; wir laden diese Listen alle 6 Stunden herunter. Manche geben den Adressen ihrer Crawler außerdem Reverse-DNS-Namen in der eigenen Domain; wir schlagen den Namen nach und prüfen, ob er auf dieselbe Adresse zurückzeigt.
Mit User-Agent und Adresse zusammen bekommst du ein Urteil: bestätigt, gefälscht, ein echter Bot unter fremdem Namen oder nicht prüfbar, weil der Betreiber nichts zum Vergleichen veröffentlicht.
So liest du die Ergebnisse
- Bestätigt: Die Adresse steht in der Liste des Betreibers, oder ihr Reverse-DNS-Name liegt in der Domain des Betreibers und zeigt auf die Adresse zurück.
- Gefälscht: Der User-Agent nennt einen Bot, der seine Adressen veröffentlicht, und diese Adresse gehört nicht dazu.
- Nicht prüfbar: Der Bot veröffentlicht keine Adressen, also gibt es nur den User-Agent. Das spricht weder dafür noch dagegen.
- Die Listentabelle zeigt, wann wir jede Liste zuletzt geladen haben und welches Datum ihr der Betreiber gibt. Ein altes Betreiberdatum heißt, dass der Betreiber sie nicht aktualisiert hat, nicht, dass unsere Kopie alt ist.
Häufige Fragen
Warum nicht einfach dem User-Agent vertrauen?
Weil jeder jeden User-Agent schicken kann. Scraper geben sich oft als Googlebot aus, weil viele Websites ihn durchlassen. Die Adresse lässt sich bei einer abgeschlossenen Web-Anfrage nicht fälschen.
Was heißt „vorwärts bestätigtes“ Reverse-DNS?
Wer eine Adresse kontrolliert, kann ihr jeden Reverse-DNS-Namen geben, auch einen, der auf googlebot.com endet. Schlägt man diesen Namen erneut nach und bekommt dieselbe Adresse zurück, beweist das, dass der Betreiber der Domain einverstanden ist, denn nur er kontrolliert sie.
Warum lassen sich manche Bots nicht prüfen?
Ihre Betreiber veröffentlichen weder IP-Bereiche noch Reverse-DNS-Namen. Dann ist der User-Agent das einzige Zeichen, und der beweist nichts. Das sagen wir, statt zu raten.
Wird meine Abfrage gespeichert?
Nein. Die Adresse wird mit unserer Kopie der Listen verglichen und in DNS und Registern nachgeschlagen, wie bei jeder IP-Prüfung. Wir führen kein Protokoll darüber, was du prüfst.
Kann ich viele Adressen auf einmal prüfen?
Ja: Füg ein Server-Log in den Log-Check ein. Er liest die User-Agents in deinem Browser und markiert Adressen, die sich als Crawler ausgeben, der sie nicht sind. Unsere Quellen stehen auf der Seite mit den Datenquellen.