KI- & Bot-Verzeichnis · SEO-Crawler
AhrefsBot: was er ist, wie du ihn prüfst und wie du ihn sperrst
AhrefsBot wird von Ahrefs betrieben. Durchsucht das Web für die Link- und SEO-Datenbank von Ahrefs. AhrefsSiteAudit prüft Websites im Auftrag ihrer Betreiber.
Wichtigste Fakten
| Betreiber | Ahrefs |
|---|---|
| Kategorie | SEO-Crawler |
| Name in robots.txt | AhrefsBot, AhrefsSiteAudit |
| Beachtet robots.txt | OK: Ja |
| Prüfbar? | OK: Ja, über IP-Bereiche und Reverse-DNS |
| Offizielle Dokumentation | |
| Register geprüft | 11. Nov. 2026 |
User-Agent
Seine Namen in robots.txt sind AhrefsBot, AhrefsSiteAudit.
Ahrefs dokumentiert diesen User-Agent:
Mozilla/5.0 (compatible; AhrefsBot/7.0; +http://ahrefs.com/robot/)Mozilla/5.0 (compatible; AhrefsSiteAudit/6.1; +http://ahrefs.com/robot/site-audit)
Lässt sich AhrefsBot prüfen?
Ja Ahrefs veröffentlicht die IP-Adressen, die AhrefsBot nutzt. Wir laden diese Liste alle 6 Stunden herunter: Unsere Kopie ist vom 15. Nov. 2026 und hat 81 Einträge; Ahrefs datiert sie nicht.
Seine Adressen haben außerdem Reverse-DNS-Namen unter ahrefs.com, ahrefs.net; ein Name zählt nur, wenn er auf dieselbe Adresse zurückzeigt.
Beachtet AhrefsBot robots.txt?
Ja Ahrefs sagt, dass AhrefsBot robots.txt beachtet.
“Both bots strictly respect robots.txt on both disallow and allow rules, as well as crawl-delay directives.”
Ahrefs sagt, dass AhrefsBot auch Crawl-delay beachtet, was ihn bremst, ohne ihn zu sperren.
So sperrst oder erlaubst du AhrefsBot
Um ihn zu bitten, der ganzen Website fernzubleiben, trag das in robots.txt ein:
User-agent: AhrefsBot
User-agent: AhrefsSiteAudit
Disallow: /
Um ihn nur aus einem Ordner fernzuhalten:
User-agent: AhrefsBot
User-agent: AhrefsSiteAudit
Disallow: /private/
Um ihn zu erlauben und alle anderen Bots zu bitten, fernzubleiben:
User-agent: AhrefsBot
User-agent: AhrefsSiteAudit
Allow: /
User-agent: *
Disallow: /
robots.txt ist eine Bitte, kein Schloss. Um eine Sperre durchzusetzen, leg eine Regel in Firewall oder CDN an. Weil Ahrefs die Adressen von AhrefsBot veröffentlicht, kann die Regel sie genau treffen, sodass ein falscher AhrefsBot nicht als echter durchkommt.
Für eine robots.txt für mehrere Bots auf einmal nutze den robots.txt-Generator.
Wie oft kommt AhrefsBot vorbei?
Ahrefs veröffentlicht nicht, wie oft AhrefsBot eine Website besucht, und iplover sieht deinen Traffic nicht. Dein eigenes Zugriffslog ist die einzige verlässliche Zählung: Füg es in den Log-Check ein, der in deinem Browser die Besuche jedes Crawlers zählt und Fälschungen markiert.
Offizielle Dokumentation
Register geprüft am 11. Nov. 2026. Die Adresslisten werden alle 6 Stunden heruntergeladen.