Vérificateur robots.txt pour les robots d'IA
Collez le contenu de votre fichier robots.txt (il se trouve à l'adresse https://votre-site.fr/robots.txt) : l'outil indique, robot par robot, si les IA peuvent lire la page choisie et quelle règle s'applique. Gratuit, sans inscription ; rien n'est envoyé à un serveur.
GPTBot ou ClaudeBot refuse l'usage de vos pages pour l'entraînement, mais bloquer OAI-SearchBot, Claude-SearchBot ou PerplexityBot peut vous faire disparaître des réponses des assistants de recherche. Beaucoup de sites bloquent l'un en voulant bloquer l'autre.Résultat
| Robot | Éditeur | Usage | Accès | Règle appliquée |
|---|
Interprétation selon la norme RFC 9309 : un robot suit le groupe qui porte son nom, sinon le groupe * ; la règle la plus longue l'emporte, Allow gagne en cas d'égalité. Le robots.txt est une consigne : les robots sérieux la respectent, il ne protège pas un contenu.
Générer des règles prêtes à coller
Ajoutez ces lignes à votre robots.txt existant sans supprimer vos autres règles, puis vérifiez le résultat ci-dessus.
Aller plus loin
Website SEO Audit
Tout le site exploré : liens cassés, balises title et meta, titres, images sans alt, redirections.
Auditer un site →Audit de la page en un clic
Accessibilité (WCAG 2.2) et SEO de la page ouverte, puis scan de tout le site.
Découvrir l'extension →Déclaration d'accessibilité
Générez votre déclaration EAA en français ou en anglais.
Ouvrir le générateur →