Réponses rapides

AIGrow propose un suivi de la visibilité dans les réponses des IA, un assistant pour les entreprises, la publication d’articles de blog et des services d’automatisation à périmètre défini. Commencez par l’analyse gratuite pour examiner les résultats avant de payer.

Lancer l’analyse gratuite

L’analyse est gratuite et les forfaits de suivi commencent à 29 € par mois. L’audit des opérations coûte 290 €, l’audit de visibilité 490 €, et les projets sur mesure font l’objet d’un devis écrit avant le début des travaux.

Voir les forfaits

Lancez l’analyse gratuite. Elle lit votre site, demande à plusieurs assistants IA ce que recherchent vos clients et vous indique un point précis. Aucune inscription n’est requise, et elle vous dira si vous n’avez pas besoin de nous.

Commencer

Oui. Utilisez le formulaire de contact pour toute question sur le produit, la facturation, l’assistance ou un projet. Décrivez l’objectif et le système concerné afin que la première réponse soit précise.

Contacter AIGrow
Générateur de robots.txt pour l’IA

Générateur de robots.txt pour l’IA

Choisissez quels robots d’exploration IA peuvent accéder à votre site. Partez d’un réglage prédéfini, ajustez les règles de chaque robot, puis téléchargez la partie dédiée à l’IA de votre robots.txt. Gratuit, sans compte.

Gratuit et sans inscription. Vos choix sont conservés dans l’URL de cette page pour que vous puissiez les partager.

Préréglage

OAI-SearchBot

OpenAI: Recherche ChatGPT

Claude-SearchBot

Anthropic: Recherche Claude

PerplexityBot

Perplexity: Perplexity

Applebot

Apple: Siri et Spotlight

DuckAssistBot

DuckDuckGo: Réponses de DuckDuckGo

Amazonbot

Amazon: Alexa et Rufus

YouBot

You.com: Réponses de You.com

Robots déclenchés par l’utilisateur

ChatGPT-User

OpenAI: ChatGPT

Claude-User

Anthropic: Claude

Perplexity-User

Perplexity: Perplexity

MistralAI-User

Mistral: Le Chat

Meta-ExternalFetcher

Meta: Meta AI

Robots d’entraînement

GPTBot

OpenAI: Futurs modèles OpenAI

ClaudeBot

Anthropic: Futurs modèles Claude

Google-Extended

Google: Entraînement et ancrage de Gemini

Applebot-Extended

Apple: Entraînement d’Apple Intelligence

Meta-ExternalAgent

Meta: Meta AI

CCBot

Common Crawl: Le jeu de données ouvert utilisé pour entraîner la plupart des modèles

Bytespider

ByteDance: Doubao

cohere-ai

Cohere: Modèles Cohere

Googlebot et Bingbot ne figurent pas dans ce fichier. Ils explorent aussi le Web pour Google Search et Bing : votre groupe User-agent: * continue donc de définir leurs règles. Pour exclure vos pages de l’entraînement de Gemini et des sources utilisées pour étayer ses réponses, bloquez Google-Extended.

Facultatif. Un chemin par ligne, dans la limite de 20 lignes. Commencez chaque chemin par / et n’utilisez ni espace ni #. Ces chemins sont inclus dans l’URL partagée.

Vos règles robots.txt pour l’IA

# aigrow.gg/tools/ai-robots-txt

User-agent: OAI-SearchBot
User-agent: ChatGPT-User
User-agent: Claude-SearchBot
User-agent: Claude-User
User-agent: PerplexityBot
User-agent: Perplexity-User
User-agent: Applebot
User-agent: DuckAssistBot
User-agent: MistralAI-User
User-agent: Meta-ExternalFetcher
User-agent: Amazonbot
User-agent: YouBot
Allow: /

User-agent: GPTBot
User-agent: ClaudeBot
User-agent: Google-Extended
User-agent: Applebot-Extended
User-agent: Meta-ExternalAgent
User-agent: CCBot
User-agent: Bytespider
User-agent: cohere-ai
Disallow: /

Ajoutez ces règles au fichier robots.txt à la racine de votre site et conservez tout groupe User-agent: * existant.

Vérifiez quels robots votre site autorise actuellement

Ce générateur gratuit crée des règles robots.txt pour les robots répertoriés dans l’annuaire AIGrow. Par défaut, il autorise les robots de recherche et ceux qui ouvrent une page à la demande d’un utilisateur, mais bloque les robots d’entraînement. Choisissez un autre réglage prédéfini ou modifiez les règles de chaque robot, ajoutez les chemins à exclure, puis copiez ou téléchargez les règles pour votre site.

Comment ça marche

Choisissez un réglage de départ
Par défaut, les robots de recherche et ceux qui ouvrent une page à la demande d’un utilisateur sont autorisés, tandis que les robots d’entraînement sont bloqués. Vous pouvez tous les autoriser, tous les bloquer ou régler chacun séparément.
Une seule section pour les mêmes règles
Les robots soumis aux mêmes règles sont regroupés dans une section contenant plusieurs lignes User-agent. Leurs noms proviennent de l’annuaire des robots d’exploration IA. Googlebot et Bingbot sont exclus, car ils explorent aussi le Web pour Google Search et Bing.
Les chemins s’appliquent à toutes les sections
Comme le décrit la RFC 9309, un robot nommé dans une section n’hérite pas des règles de la section User-agent: *. Les chemins supplémentaires marqués Disallow sont ajoutés à chaque section IA. Les autres chemins restent accessibles aux robots que vous autorisez.
Conservez le reste de votre fichier
Le générateur ne crée que les sections IA. Conservez votre section User-agent: * et les autres entrées existantes, notamment les liens vers les sitemaps. Remplacez les anciennes sections qui nomment ces mêmes robots et reportez les chemins que vous souhaitez continuer à exclure.

Questions sur les robots d’exploration IA

Il crée des sections User-agent avec des règles Allow ou Disallow pour les robots de l’annuaire des robots d’exploration IA, à l’exception de Googlebot et Bingbot, qui explorent aussi le Web pour Google Search et Bing. Les robots soumis aux mêmes règles partagent une section. Vous pouvez copier le texte ou le télécharger sous le nom robots.txt, puis l’ajouter à votre fichier existant.

Ils remplissent des fonctions différentes et portent des noms distincts. Les robots de recherche constituent l’index qu’un assistant consulte. Les robots activés par une requête utilisateur ouvrent une page à la demande. Les robots d’entraînement collectent des pages pour les futurs modèles. Vous pouvez donc définir des règles distinctes pour eux.

robots.txt transmet des consignes aux robots d’exploration, comme l’explique la documentation de leurs opérateurs. Ce fichier indique les règles que vous leur demandez de suivre.

À la racine de votre site, par exemple https://example.com/robots.txt. Si un fichier s’y trouve déjà, conservez sa section User-agent: * et ses autres entrées, puis mettez à jour les sections IA avec les règles générées.

Les assistants IA peuvent-ils lire les pages de votre entreprise ?

Lancez le scan gratuit pour vérifier l’accès à vos pages et découvrir ce que les assistants disent de votre entreprise.

Lancer le scan IA gratuit