Vérifier ma connexion

Générateur de robots.txt

Cochez les bots à bloquer (ou les seuls à autoriser) dans notre annuaire de 32 robots d'exploration et bots d'IA. Vous obtenez un robots.txt à copier, et les règles Cloudflare, nginx et Apache pour le faire respecter.

Partir d'un modèle

Que doivent faire les bots cochés ?
Moteur de recherche
Entraînement d'IA
Requêtes d'assistants IA
Robot SEO
Autres

Vos règles

robots.txt

# Généré par iplover.com/robots-txt-generator le 2026-11-21
# robots.txt is a request: well-behaved bots follow it, others can ignore it.

User-agent: Applebot-Extended
Disallow: /

User-agent: *
Allow: /

Cloudflare (règle WAF personnalisée)

# Rien à bloquer : aucun bot nommé n'est sélectionné pour le blocage.

nginx

# Rien à bloquer : aucun bot nommé n'est sélectionné pour le blocage.

Apache (.htaccess)

# Rien à bloquer : aucun bot nommé n'est sélectionné pour le blocage.

Absents des règles serveur : Applebot-Extended. Ce sont des contrôles propres à robots.txt, sans user agent : robots.txt est le seul endroit où les régler.

robots.txt est une demande que les bots corrects respectent. Il n'arrête pas un bot qui l'ignore, et certains bots d'IA l'ignorent quand une personne a demandé la page. Pour imposer un blocage, utilisez les règles serveur ci-dessus ou votre pare-feu ou CDN. Elles vérifient le user agent, qu'un bot malhonnête peut falsifier.

Registre vérifié le 2026-11-11. Les listes d'adresses sont téléchargées toutes les 6 heures.

Ce que fait cet outil

robots.txt est un fichier texte à la racine de votre site (example.com/robots.txt) qui indique aux robots d'exploration quelles parties ils peuvent récupérer. Chaque bot cherche son nom sur une ligne « User-agent » et suit les règles qui la suivent.

Les entreprises d'IA utilisent désormais plusieurs types de bots : certains collectent des pages pour entraîner des modèles, d'autres récupèrent une page quand une personne interroge un assistant à son sujet, d'autres construisent des index de recherche. Bloquer les bots d'entraînement ne vous retire pas des résultats de recherche habituels ; bloquer les robots des moteurs de recherche, si.

Chaque bot, avec son nom exact, son opérateur et ce qu'il fait, figure dans l'annuaire des bots et de l'IA.

Comment lire les résultats

  • Choisissez un modèle ou cochez des bots, puis décidez si les bots cochés sont bloqués ou sont les seuls autorisés.
  • Copiez le robots.txt et placez-le à la racine de votre site, en remplaçant (ou en fusionnant avec) celui que vous avez. Les règles de chaque bot s'appliquent à tout le site (Disallow: /).
  • Pour imposer le blocage, ajoutez la règle Cloudflare, nginx ou Apache. Elle répond « 403 Forbidden » aux user agents correspondants.
  • Vérifiez que cela fonctionne : au bout de quelques jours, collez votre journal d'accès dans le vérificateur de journaux, ou vérifiez un visiteur qui prétend être l'un de ces bots.

Questions fréquentes

Comment bloquer ChatGPT et les autres bots d'IA sur mon site ?

Utilisez le modèle « Bloquer tous les bots d'IA, garder la recherche ». Il ajoute à robots.txt GPTBot (entraînement), ChatGPT-User (pages demandées par les utilisateurs) et leurs équivalents chez d'autres entreprises d'IA. OpenAI indique que GPTBot respecte robots.txt ; ChatGPT-User peut ne pas le faire, car une personne a demandé la page : ajoutez donc aussi la règle serveur.

Bloquer les bots d'IA nuit-il à mon référencement Google ?

Non, si vous gardez les robots de recherche. Googlebot indexe vos pages pour la recherche Google. Google-Extended est un contrôle robots.txt distinct : le bloquer empêche l'utilisation de votre contenu pour entraîner Gemini sans affecter la recherche.

robots.txt arrête-t-il tous les bots ?

Non. C'est une demande. Les robots sérieux la respectent, mais les scrapers et certains bots d'IA l'ignorent. Pour les bots qui ignorent robots.txt, utilisez une règle de pare-feu ou de CDN, en sachant qu'un bot peut falsifier son user agent.

Quelle différence entre bloquer et n'autoriser que certains bots ?

« Bloquer » liste les bots à tenir à l'écart et laisse entrer tous les autres. « N'autoriser que » laisse entrer les bots listés et demande à tous les autres de ne pas venir, y compris ceux qui n'existent pas encore : c'est plus strict, et les nouveaux moteurs de recherche resteront aussi à l'écart.