Outil gratuit
Quels robots d'IA votre site bloque-t-il ?
Nous lisons votre robots.txt et vous disons, pour chaque robot d'IA séparément, s'il est autorisé ou bloqué, et quelle ligne du fichier en a décidé.
- Sans inscription ni courriel
- Une lecture d'un seul fichier
- Vérifiez un chemin précis, pas seulement l'accueil
Qui est qui
Ce tableau se suffit à lui-même : le nom du robot tel qu'il apparaît dans la ligne User-agent, qui l'exploite et pour quoi faire.
| User-agent | Exploité par | Pour quoi faire |
|---|---|---|
GPTBot | OpenAI | EntraînementRassemble des pages pour entraîner un modèle. Le bloquer vous laisse hors du prochain modèle. |
OAI-SearchBot | OpenAI | IndexConstruit un index de recherche, sur lequel s'appuient aussi les réponses d'IA. |
ChatGPT-User | OpenAI | Réponse en directCharge la page au moment où quelqu'un pose une question, pour vous citer dans la réponse avec un lien. |
ClaudeBot | Anthropic | EntraînementRassemble des pages pour entraîner un modèle. Le bloquer vous laisse hors du prochain modèle. |
Claude-SearchBot | Anthropic | IndexConstruit un index de recherche, sur lequel s'appuient aussi les réponses d'IA. |
Claude-User | Anthropic | Réponse en directCharge la page au moment où quelqu'un pose une question, pour vous citer dans la réponse avec un lien. |
Google-Extended | EntraînementRassemble des pages pour entraîner un modèle. Le bloquer vous laisse hors du prochain modèle. | |
PerplexityBot | Perplexity | IndexConstruit un index de recherche, sur lequel s'appuient aussi les réponses d'IA. |
Perplexity-User | Perplexity | Réponse en directCharge la page au moment où quelqu'un pose une question, pour vous citer dans la réponse avec un lien. |
Applebot-Extended | Apple | EntraînementRassemble des pages pour entraîner un modèle. Le bloquer vous laisse hors du prochain modèle. |
Meta-ExternalAgent | Meta | EntraînementRassemble des pages pour entraîner un modèle. Le bloquer vous laisse hors du prochain modèle. |
meta-externalfetcher | Meta | Réponse en directCharge la page au moment où quelqu'un pose une question, pour vous citer dans la réponse avec un lien. |
Amazonbot | Amazon | Réponse en directCharge la page au moment où quelqu'un pose une question, pour vous citer dans la réponse avec un lien. |
CCBot | Common Crawl | EntraînementRassemble des pages pour entraîner un modèle. Le bloquer vous laisse hors du prochain modèle. |
Bytespider | ByteDance | EntraînementRassemble des pages pour entraîner un modèle. Le bloquer vous laisse hors du prochain modèle. |
cohere-ai | Cohere | EntraînementRassemble des pages pour entraîner un modèle. Le bloquer vous laisse hors du prochain modèle. |
Diffbot | Diffbot | EntraînementRassemble des pages pour entraîner un modèle. Le bloquer vous laisse hors du prochain modèle. |
AI2Bot | Allen Institute for AI | EntraînementRassemble des pages pour entraîner un modèle. Le bloquer vous laisse hors du prochain modèle. |
Timpibot | Timpi | EntraînementRassemble des pages pour entraîner un modèle. Le bloquer vous laisse hors du prochain modèle. |
omgili | Webz.io | EntraînementRassemble des pages pour entraîner un modèle. Le bloquer vous laisse hors du prochain modèle. |
MistralAI-User | Mistral AI | Réponse en directCharge la page au moment où quelqu'un pose une question, pour vous citer dans la réponse avec un lien. |
Googlebot | IndexConstruit un index de recherche, sur lequel s'appuient aussi les réponses d'IA. | |
Bingbot | Microsoft | IndexConstruit un index de recherche, sur lequel s'appuient aussi les réponses d'IA. |
Applebot | Apple | IndexConstruit un index de recherche, sur lequel s'appuient aussi les réponses d'IA. |
Ce que cette vérification ne peut pas vous dire
- robots.txt est une demande, pas un mur. Un robot peut l'ignorer.
- Un pare-feu ou un CDN peut bloquer un robot que robots.txt autorise.
- La vérification décrit un instant. Modifier le fichier change la réponse aussitôt.
- Bloquer un robot d'entraînement et bloquer un robot de réponse en direct sont deux décisions tout à fait différentes.
Voyez si l'IA vous mentionne vraiment
L'accès n'est que la première étape. Go Top SEO vérifie automatiquement si votre entreprise apparaît dans les réponses de ChatGPT, de Gemini et de Google AI, et suit vos positions sur Google et sur Maps chaque mois.
Essayez 7 jours gratuitement, sans carte