Quels bots IA peuvent explorer ton site?
Analyse ton robots.txt face aux 14 crawlers IA qui comptent en 2026 — ChatGPT, Claude, Perplexity, Gemini, et plus. Vois exactement qui peut lire ton contenu, qui est bloqué, et si tu laisses de la visibilité IA sur la table.
Vérifie ton robots.txt.
Entre ton URL et on va chercher /robots.txt, on l'analyse pour chaque user-agent IA connu, et on te montre ce qui est autorisé et ce qui est bloqué.
Laisse l'IA apprendre sur ta marque
Autorise les bots d'entraînement comme GPTBot, ClaudeBot et Google-Extended à lire ton site. Ils nourrissent les modèles qui répondent aux questions sur ta catégorie. Si tu les bloques, l'IA n'a aucun moyen de savoir que tu existes.
Reste visible dans les réponses IA
Autorise les bots de retrieval comme OAI-SearchBot et PerplexityBot pour que les gens qui demandent à ChatGPT dans ta catégorie te voient cité dans la réponse.
Trois étapes. Aucune configuration.
Récupère
On récupère /robots.txt sur ton domaine avec un User-Agent neutre. Aucune exécution JS, aucun tracking, aucun scraping au-delà de ce fichier.
Analyse & associe.
Tes règles sont comparées aux 14 crawlers IA connus — bots d'entraînement, de retrieval, et hybrides. Wildcards et priorité gérés selon RFC 9309.
Score
On calcule un score de préparation AEO basé sur les bons bots autorisés, les mauvais bloqués, et la fraîcheur de ta configuration.
Les questions qu'on reçoit souvent.
Est-ce que je dois bloquer GPTBot si je veux être visible dans ChatGPT?
Non — autorise-le. GPTBot entraîne le modèle. Si tu le bloques, l'IA n'a aucun moyen de savoir que ta marque existe quand quelqu'un pose une question sur ta catégorie. Autorise les bots d'entraînement ET de retrieval.
Est-ce que ça vérifie aussi les balises noindex?
Pas encore — cet outil analyse uniquement /robots.txt. La couverture complète (meta, headers, llms.txt) fait partie du dashboard xSeek.
C'est quoi le score de préparation AEO?
Un composite 0–100 : bots de retrieval autorisés (60 %), bots d'entraînement autorisés (25 %), fraîcheur du fichier (15 %).
À quelle fréquence la liste des crawlers IA change?
Environ une fois par trimestre. On maintient la liste à partir de la doc de chaque vendor et on re-teste notre monitoring.
Mon URL est-elle stockée?
Non. Le scan est éphémère — on ne log pas l'URL, le résultat ou les headers.
Et si mon site n'a pas de robots.txt?
On te le dit aussi — et on te montre exactement quoi écrire, ajusté à tes objectifs AEO.