Hurtige svar

AIGrow tilbyder overvågning af AI-synlighed, en virksomhedsassistent, blogudgivelse og afgrænsede automatiseringstjenester. Start med den gratis scanning for at se resultatet, før du betaler.

Kør den gratis scanning

Scanningen er gratis, og overvågningsplanerne starter ved 29 € om måneden. Driftsauditten koster 290 €, synlighedsauditten koster 490 €, og specialbyggede løsninger får en skriftlig pris, før arbejdet begynder.

Se planerne

Kør den gratis scanning. Den læser dit website, spørger flere AI-assistenter, hvad dine kunder spørger om, og peger på én ting. Du behøver ikke at oprette dig, og den fortæller dig, hvis du ikke har brug for os.

Start nu

Ja. Brug kontaktformularen til spørgsmål om produktet, fakturering, support eller projekter. Beskriv målet og det involverede system, så det første svar kan blive konkret.

Kontakt AIGrow
robots.txt-generator til AI

robots.txt-generator til AI

Vælg, hvilke AI-crawlere der må læse dit website. Start med en forudindstilling, tilpas hver enkelt crawler, og download AI-delen af din robots.txt-fil. Gratis og uden krav om konto.

Gratis og uden tilmelding. Dine valg gemmes i sidens URL, så du kan dele dem.

Forudindstilling

OAI-SearchBot

OpenAI: ChatGPT-søgning

Claude-SearchBot

Anthropic: Claude-søgning

PerplexityBot

Perplexity: Perplexity

Applebot

Apple: Siri og Spotlight

DuckAssistBot

DuckDuckGo: svar fra DuckDuckGo

Amazonbot

Amazon: Alexa og Rufus

YouBot

You.com: svar fra You.com

Crawlere til brugerforespørgsler

ChatGPT-User

OpenAI: ChatGPT

Claude-User

Anthropic: Claude

Perplexity-User

Perplexity: Perplexity

MistralAI-User

Mistral: Le Chat

Meta-ExternalFetcher

Meta: Meta AI

Træningscrawlere

GPTBot

OpenAI: fremtidige OpenAI-modeller

ClaudeBot

Anthropic: fremtidige Claude-modeller

Google-Extended

Google: træning og grounding af Gemini

Applebot-Extended

Apple: træning af Apple Intelligence

Meta-ExternalAgent

Meta: Meta AI

CCBot

Common Crawl: det åbne datasæt, som de fleste modeller trænes på

Bytespider

ByteDance: Doubao

cohere-ai

Cohere: Cohere-modeller

Googlebot og Bingbot er ikke med i filen. De crawler også til Google Search og Bing, så gruppen User-agent: * afgør stadig, om de har adgang. Bloker Google-Extended for at holde dine sider ude af Gemini-træning og forhindre, at de bruges som grundlag for Gemini-svar.

Valgfrit. Én sti pr. linje, højst 20 linjer. Begynd hver sti med /, og brug ikke mellemrum eller #. Stierne kommer med i den delte URL.

Dine AI-regler i robots.txt

# aigrow.gg/tools/ai-robots-txt

User-agent: OAI-SearchBot
User-agent: ChatGPT-User
User-agent: Claude-SearchBot
User-agent: Claude-User
User-agent: PerplexityBot
User-agent: Perplexity-User
User-agent: Applebot
User-agent: DuckAssistBot
User-agent: MistralAI-User
User-agent: Meta-ExternalFetcher
User-agent: Amazonbot
User-agent: YouBot
Allow: /

User-agent: GPTBot
User-agent: ClaudeBot
User-agent: Google-Extended
User-agent: Applebot-Extended
User-agent: Meta-ExternalAgent
User-agent: CCBot
User-agent: Bytespider
User-agent: cohere-ai
Disallow: /

Indsæt disse regler i robots.txt i roden af dit website, og behold en eventuel eksisterende gruppe med User-agent: *.

Se, hvilke crawlere dit website giver adgang nu

Denne gratis AI-generator til robots.txt skriver regler for crawlerne i AIGrows oversigt. Som standard giver den søgecrawlere og crawlere, der åbner sider på anmodning, adgang og blokerer crawlere, der indsamler træningsdata. Vælg en anden forudindstilling, eller tilpas de enkelte crawlere. Tilføj stier, der skal udelukkes, og kopiér eller download derefter reglerne til dit website.

Sådan fungerer det

Vælg et udgangspunkt
Som standard får søgecrawlere og crawlere, der åbner sider på anmodning, adgang, mens crawlere, der indsamler træningsdata, blokeres. Du kan også tillade alle crawlere, blokere dem alle eller tilpasse hver enkelt.
Samme regler samles i én gruppe
Crawlere med samme regler samles i en gruppe med flere User-agent-linjer. Navnene kommer fra oversigten over AI-crawlere. Googlebot og Bingbot er udeladt, fordi de også crawler for Google Search og Bing.
Stier gælder for alle grupper
En crawler, der er nævnt i en gruppe, arver ikke reglerne fra gruppen User-agent: *, som beskrevet i RFC 9309. Ekstra Disallow-stier føjes til alle AI-grupper. Andre stier forbliver tilgængelige for de crawlere, du tillader.
Behold resten af din fil
Generatoren skriver kun AI-grupperne. Behold din eksisterende User-agent: *-gruppe og andre poster, herunder links til sitemaps. Erstat gamle grupper med navnene på de samme crawlere, og overfør de stier, du fortsat vil udelukke.

Spørgsmål om AI-crawlere

Den skriver User-agent-grupper med Allow- eller Disallow-regler for crawlerne i oversigten over AI-crawlere. Googlebot og Bingbot er undtaget, fordi de også crawler for Google Search og Bing. Crawlere med samme regler samles i én gruppe. Du kan kopiere teksten eller downloade den som robots.txt og derefter føje den til din eksisterende fil.

De har forskellige opgaver og navne. Søgecrawlere opbygger det indeks, en assistent søger i. Crawlere, der handler på brugerens anmodning, åbner en side, når nogen spørger. Crawlere til træning indsamler sider til fremtidige modeller, så du kan vælge særskilte regler for dem.

robots.txt er en anmodning til crawlere, som beskrevet i operatørernes dokumentation. Filen angiver de regler, du beder dem følge.

Den skal ligge i roden af dit website, for eksempel på https://example.com/robots.txt. Hvis du allerede har en fil der, skal du beholde dens User-agent: *-gruppe og øvrige poster og opdatere AI-grupperne med de genererede regler.

Kan AI-assistenter læse siderne om din virksomhed?

Kør den gratis scanning for at tjekke adgangen og se, hvad assistenter siger om din virksomhed.

Kør den gratis AI-scanning