Outil gratuit pour la recherche IA

Générateur de robots.txt IA

Parmi 36 crawlers IA, bots de recherche et assistants, choisissez ceux qui peuvent lire votre site et obtenez en quelques secondes un robots.txt prêt à publier.

Fonctionne dans votre navigateur Sans inscription Bots d’entraînement, de recherche et assistants

Partez d’une configuration type

Choisissez un point de départ, puis ajustez n’importe quel bot ci-dessous.

Voir votre robots.txt

Choisissez bot par bot

Désactivez un bot pour le bloquer. Chacun est indiqué avec l’entreprise qui l’exploite.

Crawlers de recherche IA

Indexent les pages pour que les moteurs de recherche IA et leurs réponses puissent les citer et y renvoyer.

Assistants IA à la demande

Récupèrent une page quand une personne demande à un assistant IA de l’ouvrir ou de la lire.

Crawlers d’entraînement IA

Collectent des pages pour entraîner les modèles d’IA et constituer leurs jeux de données.

Règles facultatives pour tous les bots

Un chemin par ligne. Les bots que vous autorisez n’exploreront pas ces chemins.

Facultatif. Aide tous les crawlers à trouver vos pages.

Autorisés : 36 Bloqués : 0

Publiez-le

Placez le fichier à la racine de votre domaine, par exemple example.com/robots.txt. Vérifiez ensuite comment chaque bot IA le lit.

Vérifier le robots.txt publié

Avant de bloquer

Quels bots IA faut-il bloquer ?

Les bots IA se répartissent en trois groupes. Bloquer chacun d’eux a un coût différent : décidez groupe par groupe plutôt que de tout bloquer.

Crawlers de recherche IA

Indexent les pages pour que les moteurs de recherche IA et leurs réponses puissent les citer et y renvoyer.

Si vous les bloquez : la recherche IA cesse de citer vos pages et d’y renvoyer.

OAI-SearchBot, PerplexityBot, Claude-SearchBot, Applebot

Assistants IA à la demande

Récupèrent une page quand une personne demande à un assistant IA de l’ouvrir ou de la lire.

Si vous les bloquez : les assistants ne peuvent pas ouvrir vos pages pour les personnes qui les interrogent sur vous.

ChatGPT-User, Perplexity-User, Claude-User, Meta-ExternalFetcher

Crawlers d’entraînement IA

Collectent des pages pour entraîner les modèles d’IA et constituer leurs jeux de données.

Si vous les bloquez : les futurs modèles en sauront moins sur vous, mais la recherche IA pourra toujours vous citer.

GPTBot, ClaudeBot, Claude-Web, anthropic-ai

Questions sur le robots.txt et l’IA

Comment les crawlers IA lisent le robots.txt et ce que change leur blocage.

Découvrez d’autres outils de recherche IA gratuits

LLM Pulse est la plateforme tout-en-un dédiée à la recherche IA et au GEO. Utilisez ces outils gratuits pour auditer la façon dont les moteurs IA voient votre marque, puis suivez tout au même endroit.

Rapport de visibilité IA gratuit

Découvrez à quelle fréquence les moteurs IA mentionnent votre marque dans ChatGPT, Perplexity et Gemini.

Vérificateur de mentions de marque

Vérifiez si les réponses de l’IA mentionnent votre marque pour les prompts qui comptent.

Vérificateur de classement IA

Découvrez le classement de votre marque dans la recherche IA face aux concurrents que mentionnent les réponses de l’IA.

Vérificateur de découvrabilité

Mesurez la découvrabilité de votre marque dans les moteurs IA.

Bibliothèque ChatGPT Ads

Recherchez les publicités observées dans ChatGPT par annonceur, pays, message et date.

Regex GA4 pour le trafic IA

Créez une regex GA4 qui regroupe ChatGPT, Perplexity, Gemini et les autres assistants IA dans un seul canal.

Préparation aux agents d’IA

Notez votre domaine selon les fichiers, formats et interfaces que recherchent les agents d’IA.

Vérificateur de crawlabilité GEO

Testez si les moteurs IA peuvent explorer et afficher vos pages.

Vérificateur de robots.txt

Vérifiez si les crawlers IA sont autorisés à lire votre site.

Générateur de robots.txt IA

Choisissez quels crawlers IA, bots de recherche et assistants peuvent lire votre site, et obtenez un robots.txt prêt à l’emploi.

Détecteur de sitemaps XML

Trouvez tous les sitemaps XML d’un site, y compris ceux que robots.txt ne liste pas, et les problèmes à corriger.

Générateur de llms.txt

Générez un fichier llms.txt pour que les crawlers IA comprennent votre site.

Vérificateur de données d’entraînement IA

Vérifiez si votre site figure dans Common Crawl, le corpus ouvert qui entraîne la plupart des modèles d’IA.

Vérificateur de structure du site

Vérifiez si la structure de votre site aide les moteurs IA à vous comprendre.

Analyseur Schema

Auditez vos données structurées pour que l’IA et les moteurs de recherche comprennent vos pages.

Évaluateur AEO

Évaluez le niveau d’optimisation d’une page pour les moteurs de réponse IA.

Préparation du contenu

Vérifiez si votre contenu est prêt à être cité dans les réponses de l’IA.

Vérificateur de flux ChatGPT Shopping

Validez votre flux produits pour les résultats ChatGPT Shopping.

Nettoyeur de texte IA

Supprimez les caractères cachés, les espacements irréguliers et les restes de mise en forme d’un texte collé.

Suppression de filigranes IA

Analysez un texte pour repérer les caractères de filigrane invisibles, décoder les messages cachés et les supprimer.

Découvrez quels bots IA lisent votre site

Voyez quels bots IA visitent réellement votre site, quelles pages ils lisent et à quelle fréquence les réponses de l’IA mentionnent votre marque.

Démarrer l’essai gratuit
Essai gratuit de 14 jours
Résiliable à tout moment

Pas encore le moment d’acheter ? Réservez une démo et découvrez LLM Pulse avec nos fondateurs