Vérifier ma connexion

Annuaire des bots et de l'IA · Autres

Google special-case crawlers : ce que c'est, comment le vérifier et comment le bloquer

Google special-case crawlers est exploité par Google. Des robots de Google pour des produits précis, comme la vérification des pages de destination des annonces, qui agissent selon un accord avec le site.

L'essentiel

L'essentiel
Opérateur
Google
Catégorie
Autres
Nom dans robots.txt
Il n'a pas de nom unique dans robots.txt ; Google indique plusieurs user agents dans sa documentation.
Respecte robots.txt
Avertissement: En partie
Vérifiable ?
OK: Oui, par plages IP et DNS inverse
Documentation officielle
Registre vérifié
11 nov. 2026

User agent

Il n'a pas de nom unique dans robots.txt ; Google indique plusieurs user agents dans sa documentation.

Google ne publie pas de chaîne de user agent complète ; cherchez Google special-case crawlers dans le user agent.

Peut-on vérifier Google special-case crawlers ?

Oui Google publie les adresses IP utilisées par Google special-case crawlers. Nous téléchargeons cette liste toutes les 6 heures : notre copie date du 20 nov. 2026 et compte 272 entrées ; Google l'a datée du 20 nov. 2026.

Ses adresses ont aussi des noms DNS inverses sous google.com ; un nom ne compte que s'il renvoie à la même adresse.

Vérifier une adresse de vos journaux

Google special-case crawlers respecte-t-il robots.txt ?

En partie En partie seulement : Google indique que Google special-case crawlers peut ne pas respecter robots.txt dans certains cas, donc robots.txt seul ne suffira pas toujours à l'écarter.

“may ignore robots.txt rules”

Comment bloquer ou autoriser Google special-case crawlers

Il n'a pas de nom propre dans robots.txt ; la documentation de Google explique quels user agents il utilise.

robots.txt est une demande, pas un verrou. Pour imposer un blocage, ajoutez une règle de pare-feu ou de CDN. Comme Google publie les adresses de Google special-case crawlers, une règle peut les cibler exactement : un faux Google special-case crawlers ne peut pas passer pour le vrai.

À quelle fréquence Google special-case crawlers visite-t-il ?

Google ne publie pas la fréquence des visites de Google special-case crawlers, et iplover ne voit pas votre trafic. Votre propre journal d'accès est le seul décompte fiable : collez-le dans le vérificateur de journaux, qui compte les visites de chaque robot et repère les imposteurs, dans votre navigateur.

Documentation officielle

developers.google.com/crawling/docs/crawlers-fetchers/google-special-case-crawlers

Registre vérifié le 11 nov. 2026. Les listes d'adresses sont téléchargées toutes les 6 heures.