KI- & Bot-Verzeichnis · SEO-Crawler
MJ12bot: was er ist, wie du ihn prüfst und wie du ihn sperrst
MJ12bot wird von Majestic betrieben. Durchsucht das Web für den Link-Index von Majestic. Er läuft auf Rechnern von Freiwilligen, seine Adressen sind daher weltweit verstreut.
Wichtigste Fakten
| Betreiber | Majestic |
|---|---|
| Kategorie | SEO-Crawler |
| Name in robots.txt | MJ12bot |
| Beachtet robots.txt | OK: Ja |
| Prüfbar? | Nicht geprüft: Nein, nur am User-Agent |
| Offizielle Dokumentation | |
| Register geprüft | 11. Nov. 2026 |
User-Agent
Sein Name in robots.txt ist MJ12bot.
Majestic veröffentlicht keinen vollständigen User-Agent; achte auf MJ12bot im User-Agent.
Lässt sich MJ12bot prüfen?
Nein Majestic veröffentlicht für MJ12bot weder IP-Adressen noch Reverse-DNS-Namen, also kann sich jeder Besucher als er ausgeben. Nimm seinen User-Agent als Behauptung.
Beachtet MJ12bot robots.txt?
Ja Majestic sagt, dass MJ12bot robots.txt beachtet.
“MJ12bot adheres to the robots.txt standard.”
Majestic sagt, dass MJ12bot auch Crawl-delay beachtet, was ihn bremst, ohne ihn zu sperren.
So sperrst oder erlaubst du MJ12bot
Um ihn zu bitten, der ganzen Website fernzubleiben, trag das in robots.txt ein:
User-agent: MJ12bot
Disallow: /
Um ihn nur aus einem Ordner fernzuhalten:
User-agent: MJ12bot
Disallow: /private/
Um ihn zu erlauben und alle anderen Bots zu bitten, fernzubleiben:
User-agent: MJ12bot
Allow: /
User-agent: *
Disallow: /
robots.txt ist eine Bitte, kein Schloss. Um eine Sperre durchzusetzen, leg eine Regel in Firewall oder CDN an, die MJ12bot im User-Agent erkennt. Das stoppt den echten MJ12bot; ein Bot, der über seinen User-Agent lügt, kommt trotzdem durch.
Für eine robots.txt für mehrere Bots auf einmal nutze den robots.txt-Generator.
Wie oft kommt MJ12bot vorbei?
Majestic veröffentlicht nicht, wie oft MJ12bot eine Website besucht, und iplover sieht deinen Traffic nicht. Dein eigenes Zugriffslog ist die einzige verlässliche Zählung: Füg es in den Log-Check ein, der in deinem Browser die Besuche jedes Crawlers zählt und Fälschungen markiert.
Offizielle Dokumentation
Register geprüft am 11. Nov. 2026. Die Adresslisten werden alle 6 Stunden heruntergeladen.