Vérifier un bot
Le « Googlebot » ou le « GPTBot » de vos journaux est-il vrai ? Saisissez son adresse IP, son user agent, ou les deux. Nous comparons l'adresse aux listes que publient les opérateurs et au DNS inverse, car un user agent peut affirmer n'importe quoi.
Vous voulez vérifier un journal entier ? Collez-le dans l'analyse de journaux : elle lit les user agents dans votre navigateur et signale les adresses qui se font passer pour un robot qu'elles ne sont pas. Le journal ne quitte jamais votre appareil.
Les listes que nous consultons
Beaucoup d'outils de vérification se fient au user agent, ou utilisent des listes d'adresses vieilles de plusieurs mois. Nous téléchargeons la liste de chaque opérateur toutes les 6 heures et comparons les adresses à notre copie. Les opérateurs datent aussi leurs listes, et certaines dates sont anciennes : nous affichons les deux pour que vous puissiez juger.
| Liste | Prouve | Entrées | Notre copie | Date de l'opérateur |
|---|---|---|---|---|
| Google common crawlers (Googlebot) | Googlebot | 317 | 13 nov. 2026 | 13 nov. 2026 |
| Google special-case crawlers (e.g. AdsBot) | Google special-case crawlers | 272 | 13 nov. 2026 | 13 nov. 2026 |
| Google user-triggered fetchers | Google user-triggered fetchers | 1612 | 13 nov. 2026 | 13 nov. 2026 |
| Bingbot | Bingbot | 29 | 13 nov. 2026 | 3 janv. 2024 |
| Applebot | Applebot | 24 | 13 nov. 2026 | 15 sept. 2026 |
| DuckDuckBot | DuckDuckBot | 486 | 13 nov. 2026 | 1 sept. 2026 |
| OpenAI OAI-SearchBot | OAI-SearchBot | 39 | 13 nov. 2026 | 2 janv. 2026 |
| PerplexityBot | PerplexityBot | 13 | 13 nov. 2026 | 28 oct. 2026 |
| Anthropic crawlers (ClaudeBot, Claude-User, Claude-SearchBot) | Claude-SearchBot, ClaudeBot, Claude-User | 14 | 13 nov. 2026 | 20 oct. 2026 |
| Amazon Amzn-SearchBot | Amzn-SearchBot | 816 | 13 nov. 2026 | 8 sept. 2026 |
| OpenAI GPTBot | GPTBot | 18 | 13 nov. 2026 | 22 sept. 2026 |
| Common Crawl CCBot | CCBot | 5 | 13 nov. 2026 | 11 août 2026 |
| Amazonbot | Amazonbot | 1292 | 13 nov. 2026 | 8 sept. 2026 |
| OpenAI ChatGPT-User | ChatGPT-User | 237 | 13 nov. 2026 | 6 nov. 2026 |
| Perplexity-User | Perplexity-User | 10 | 13 nov. 2026 | 28 oct. 2026 |
| Amazon Amzn-User | Amzn-User | 1023 | 13 nov. 2026 | 4 nov. 2025 |
| AhrefsBot and AhrefsSiteAudit | AhrefsBot | 81 | 13 nov. 2026 | non datée |
Ces bots ne publient aucune adresse : on ne peut les reconnaître que par leur user agent, qui ne prouve rien : meta-webindexer, meta-externalagent, Bytespider, Timpibot, FacebookBot, meta-externalfetcher, cohere-ai, SemrushBot, DotBot, MJ12bot, facebookexternalhit, Diffbot, omgili.
Ce que fait cet outil
Les bots se présentent dans le user agent, mais ce n'est que du texte : un scraper peut se faire appeler Googlebot ou GPTBot en une ligne de code. Ce qu'il ne peut pas falsifier, c'est la provenance de la requête.
Cet outil vérifie donc l'adresse. La plupart des grands opérateurs publient les plages d'IP de leurs robots ; nous téléchargeons ces listes toutes les 6 heures. Certains donnent aussi aux adresses de leurs robots des noms DNS inverses dans leur propre domaine : nous cherchons ce nom et vérifions qu'il renvoie à la même adresse.
Avec un user agent et une adresse ensemble, vous obtenez un verdict : vérifié, faux, un vrai bot qui emprunte le nom d'un autre, ou invérifiable parce que l'opérateur ne publie rien pour comparer.
Comment lire les résultats
- Vérifié : l'adresse figure dans la liste de l'opérateur, ou son nom DNS inverse est dans le domaine de l'opérateur et renvoie à l'adresse.
- Faux : le user agent nomme un bot qui publie ses adresses, et celle-ci n'en fait pas partie.
- Impossible à vérifier : le bot ne publie aucune adresse, il ne reste donc que le user agent. Ce n'est une preuve ni dans un sens ni dans l'autre.
- Le tableau des listes indique quand nous avons téléchargé chaque liste pour la dernière fois et la date que lui donne l'opérateur. Une date ancienne côté opérateur signifie qu'il ne l'a pas mise à jour, pas que notre copie est ancienne.
Questions fréquentes
Pourquoi ne pas se fier au user agent ?
Parce que n'importe qui peut envoyer n'importe quel user agent. Les scrapers se font souvent passer pour Googlebot, car beaucoup de sites le laissent passer. L'adresse, elle, ne peut pas être falsifiée pour une requête web aboutie.
Que signifie un DNS inverse « confirmé dans le sens direct » ?
Quiconque contrôle une adresse peut lui donner n'importe quel nom DNS inverse, même un nom en googlebot.com. Rechercher ce nom à nouveau et retrouver la même adresse prouve que le propriétaire du domaine est d'accord, car lui seul contrôle ce domaine.
Pourquoi certains bots sont-ils invérifiables ?
Leurs opérateurs ne publient ni plages d'IP ni noms DNS inverses. Le user agent est alors le seul indice, et il ne prouve rien. Nous le disons au lieu de deviner.
Ma requête est-elle enregistrée ?
Non. L'adresse est comparée à notre copie des listes et recherchée dans le DNS et les registres, comme pour toute vérification d'IP. Nous ne gardons aucune trace de ce que vous vérifiez.
Puis-je vérifier beaucoup d'adresses d'un coup ?
Oui : collez un journal de serveur dans l'analyse de journaux. Elle lit les user agents dans votre navigateur et signale les adresses qui se font passer pour un robot qu'elles ne sont pas. Nos sources figurent sur la page des sources de données.