Adnave

Vérificateur gratuit d'accès des robots d'IA

Voyez quels assistants d'IA votre site laisse entrer, et obtenez les règles robots.txt pour la politique de votre choix

Obtenez les règles robots.txt pour la politique de votre choix

User-agent: GPTBot
Disallow: /

User-agent: OAI-SearchBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: ClaudeBot
Disallow: /

User-agent: Claude-SearchBot
Allow: /

User-agent: Claude-User
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Perplexity-User
Allow: /

User-agent: Google-Extended
Disallow: /

User-agent: Applebot-Extended
Disallow: /

User-agent: Meta-ExternalAgent
Disallow: /

User-agent: Amazonbot
Allow: /

User-agent: CCBot
Disallow: /

User-agent: Bytespider
Disallow: /

Ajoutez-les au fichier robots.txt à la racine de votre site. Les robots sérieux respectent ces règles ; c'est une demande, pas un verrou.

Ce que ce vérificateur examine

+

Les assistants d'IA lisent les sites avec leurs propres robots, et le fichier robots.txt d'un site peut autoriser ou bloquer chacun d'eux. Beaucoup de sites les bloquent sans le savoir, à cause du réglage par défaut d'un créateur de sites ou d'une extension de sécurité. Cet outil lit votre robots.txt et montre la situation de chaque robot.

Robots d'entraînement et robots de réponse ne sont pas les mêmes

Certains robots collectent du texte pour entraîner des modèles. D'autres ouvrent une page au moment où quelqu'un pose une question, et la citent. Vous pouvez bloquer les premiers tout en restant recommandé par les assistants : c'est la politique que choisissent de nombreux éditeurs.

Bloqué nommément ou par une règle générale

Un robot peut être bloqué par une règle écrite pour lui, ou par une règle valable pour tous les robots. Le vérificateur précise laquelle, car la correction n'est pas la même.

Ce qui compte comme bloqué

Un robot est compté comme bloqué quand l'ensemble du site lui est interdit. Les règles qui ne couvrent qu'une partie, comme un espace de connexion, ne sont pas comptées.

Google-Extended n'est pas la recherche Google

Bloquer Google-Extended tient vos pages à l'écart de l'entraînement et des réponses de Gemini. Cela n'a aucun effet sur votre présence dans les résultats Google ordinaires.

robots.txt est une demande

Les robots sérieux le respectent. Il n'arrête pas un robot qui ignore les règles ; pour cela, il faut un pare-feu.

Le blocage est-il courant ?

Oui. Notre étude en direct des sites les plus populaires du monde compte ceux qui bloquent au moins un robot d'IA ; le chiffre actuel figure sur la page de l'étude.

La liste couvre les robots publiés par OpenAI, Anthropic, Perplexity, Google, Apple, Meta, Amazon, Common Crawl et ByteDance. De nouveaux apparaissent régulièrement, et personne en dehors de ces entreprises ne peut garantir qu'un site soit cité dans les réponses des IA.

Autres outils gratuits

Cette page dans d'autres langues: English · Español · Português · Deutsch