Outils GEO gratuits · Testeur robots.txt IA
Testeur robots.txt IA
Saisissez l'adresse de votre site : l'outil lit votre robots.txt et indique, pour 16 robots (Google, Bing et 14 robots IA), s'ils peuvent explorer votre site. Il propose ensuite un fichier corrigé.
Gratuit, 5 utilisations par jour sans inscription. Sans limite avec les formules Solo et Agence.
Pourquoi tester son robots.txt pour les IA ?
Le fichier robots.txt dit aux robots ce qu'ils ont le droit de lire. Une règle trop large (« Disallow: / » pour tous) ou une règle anti-IA mal choisie peut empêcher ChatGPT, Perplexity ou Claude de lire vos pages, et donc de vous citer. Beaucoup d'hébergeurs et d'extensions ajoutent ces règles sans prévenir.
Robots de recherche et robots d'entraînement : quelle différence ?
Les robots de recherche (OAI-SearchBot, ChatGPT-User, Claude-SearchBot, PerplexityBot…) lisent vos pages pour répondre à une question et citer la source. Les robots d'entraînement (GPTBot, ClaudeBot, Google-Extended, CCBot…) collectent des textes pour entraîner les modèles. Vous pouvez bloquer les seconds sans bloquer les premiers : c'est le choix de nombreux grands sites, comme le montre notre étude.
Allez plus loin : l'audit GEO complet
L'audit GEO et SEO gratuit de TraceFlow Lens vérifie 33 points en 20 secondes (robots IA, lisibilité sans JavaScript, données structurées, sitemap, technique, contenu) et fournit, pour chaque problème, la correction et un prompt prêt à coller dans votre agent IA.
Questions fréquentes
Comment autoriser ChatGPT dans mon robots.txt ?
Ajoutez « User-agent: OAI-SearchBot » puis « Allow: / », et faites de même pour ChatGPT-User. Ces deux robots permettent à ChatGPT de consulter et de citer vos pages.
Bloquer GPTBot empêche-t-il d'apparaître dans ChatGPT ?
Non. GPTBot collecte des textes pour l'entraînement. La recherche de ChatGPT passe par OAI-SearchBot et ChatGPT-User, qui ont leurs propres règles.
Où se trouve mon fichier robots.txt ?
Toujours à la racine du site : https://votresite.fr/robots.txt.