Elenco di bot e IA · Crawler SEO
SemrushBot: cos'è, come verificarlo e come bloccarlo
SemrushBot è gestito da Semrush. Scansiona il web per gli strumenti SEO e di marketing di Semrush. Semrush dice di non usare blocchi di IP fissi.
Dati principali
| Operatore | Semrush |
|---|---|
| Categoria | Crawler SEO |
| Nome in robots.txt | SemrushBot |
| Rispetta robots.txt | OK: Sì |
| Si può verificare? | Non verificato: No, solo dallo user agent |
| Documentazione ufficiale | |
| Registro controllato | 11 nov 2026 |
User agent
Il suo nome in robots.txt è SemrushBot.
Semrush non pubblica uno user agent completo: cerca SemrushBot nello user agent.
Si può verificare SemrushBot?
No Semrush non pubblica indirizzi IP né nomi DNS inversi per SemrushBot, quindi qualsiasi visitatore può spacciarsi per lui. Considera il suo user agent una dichiarazione.
SemrushBot rispetta robots.txt?
Sì Semrush dice che SemrushBot rispetta robots.txt.
Come bloccare o consentire SemrushBot
Per chiedergli di stare lontano da tutto il sito, aggiungi questo a robots.txt:
User-agent: SemrushBot
Disallow: /
Per tenerlo fuori da una sola cartella:
User-agent: SemrushBot
Disallow: /private/
Per consentirlo chiedendo a tutti gli altri bot di stare lontani:
User-agent: SemrushBot
Allow: /
User-agent: *
Disallow: /
robots.txt è una richiesta, non un lucchetto. Per imporre il blocco aggiungi una regola nel firewall o nella CDN che cerchi SemrushBot nello user agent. Ferma il vero SemrushBot; un bot che mente sul proprio user agent può comunque passare.
Per creare un unico robots.txt per più bot, usa il generatore di robots.txt.
Quanto spesso passa SemrushBot?
Semrush non pubblica con che frequenza SemrushBot visita un sito, e iplover non vede il tuo traffico. Il tuo log di accesso è l'unico conteggio affidabile: incollalo nella verifica log, che conta le visite di ogni crawler e segnala quelli falsi, nel tuo browser.
Documentazione ufficiale
Registro controllato il 11 nov 2026. Gli elenchi di indirizzi vengono scaricati ogni 6 ore.