Oppsett av tilgang for KI-crawlere: robots.txt, CDN-regler og sitemap satt slik at KI-crawlerne du velger, kan lese nettstedet ditt

290 €Fast pris, betalt én gangRapport innen 5 arbeidsdager etter at vi har fått tilgang

De samme kontrollene før og etter, og én gang til 30 dager senere. Levert som beskrevet, ellers får du full refusjon.

AIGROW setter opp tilgang for KI-crawlere på ett nettsted for 290 € betalt én gang. Vi sjekker hva de viktigste crawlerne for KI-søk og KI-trening får tilgang til gjennom robots.txt, CDN- og brannmurregler, omdirigeringer og HTML, setter reglene slik du velger, retter sitemapet, sender det inn til Bing og IndexNow, og sjekker på nytt 30 dager senere.

Dette gjør vi, og dette gjør vi ikke

Et nettsted kan se helt fint ut i nettleseren og likevel avvise KI-crawlere: en gammel robots.txt-regel kopiert fra et annet nettsted, en CDN- eller brannmurinnstilling for KI-roboter, tekst som først vises etter at JavaScript kjøres, eller et ødelagt sitemap. Noen crawlere henter sider til KI-søk og svar, andre samler inn sider for å trene KI-modeller, og du velger hvilke du slipper inn.

Dette gjør den
  • Sjekker hva de viktigste KI-crawlerne får tilgang til på opptil 10 sider: de som henter sider til KI-søk og svar, som OAI-SearchBot, Claude-SearchBot og PerplexityBot, og treningscrawlerne, som GPTBot, ClaudeBot og CCBot
  • Leser robots.txt, CDN- eller brannmurreglene for roboter, HTTP-status og omdirigeringer for hver side, og om hovedteksten finnes i HTML-en før JavaScript kjøres
  • Skriver valget ditt ned på et beslutningsark: hvilke crawlere som skal tillates for søk og svar, og hvilke treningscrawlere som skal blokkeres, etter at vi har forklart avveiningen med enkle ord
  • Setter robots.txt og CDN-regelen slik du valgte og retter XML-sitemapet, med tilgangen du gir oss, eller sender filene og nøyaktige trinn til utvikleren din
  • Sender sitemapet til Bing Webmaster Tools og IndexNow der du gir oss tilgang, og legger til en llms.txt-fil hvis du ønsker det
  • Kjører de samme kontrollene på nytt etter endringene og 30 dager senere
Dette gjør tjenesten ikke
  • Den bestemmer ikke for deg hvilke crawlere som skal tillates: vi forklarer, du velger
  • Den lover ikke at noen KI-assistent vil sitere, nevne eller anbefale deg, og heller ingen rangering
  • Den bygger ikke om nettstedet ditt: hvis hovedteksten først vises etter JavaScript, melder vi fra om det og skriver ned hva utvikleren din må endre
  • Den stopper ikke crawlere som ignorerer robots.txt: en regel uttrykker bare hva du ønsker, og noen forespørsler som gjøres på vegne av en bruker, følger den ikke
  • Den trenger ikke passordet ditt: du inviterer hello@aigrow.gg, eller oppretter en midlertidig bruker til den adressen som fjernes etter rapporten

Fra betaling til ny sjekk

Hvert trinn og når det skjer. Ingenting endres på nettstedet ditt før du har bekreftet valgene dine skriftlig.

Betal i kassenBetal én gang med kort i Stripe-kassen. Stripe sender kvitteringen.2 minutter
Svar og gi oss tilgangVi sender deg en e-post rett etter betalingen. Svar med nettstedet ditt, CDN-en eller verten din og sidene dine, og inviter deretter hello@aigrow.gg eller opprett en midlertidig bruker til den adressen.15 minutter
Vi sjekker hva crawlerne får tilgang tilFor hver side og hver crawler registrerer vi robots.txt-regelen, CDN-innstillingen, HTTP-statusen og omdirigeringene, og om hovedteksten finnes i HTML-en. Deretter sender vi deg beslutningsarket med avveiningen forklart.Innen 5 virkedagerFra tilgang til rapport
Vi gjør endringene du valgteVi setter robots.txt, CDN-regelen og sitemapet, legger til llms.txt hvis du ba om det, og sender sitemapet inn til Bing og IndexNow. Eller vi sender filene og trinnene til utvikleren din.Etter din skriftlige godkjenning
Les rapportenDe samme kontrollene før og etter, side for side og crawler for crawler, og deretter fjerner vi tilgangen vår. 30 dager senere kjører vi kontrollene på nytt og sender deg resultatet.Med endringeneNy sjekk etter 30 dager

Ett nettsted, crawlerreglene for det, én pris

Betales én gang i kassen, som ber om e-postadressen og kortet ditt. Rett etter betalingen sender vi deg et kort spørreskjema og en veiledning for hvordan du gir oss tilgang uten passord. Rapporten kommer innen 5 arbeidsdager etter at vi har fått tilgang.

Dette trenger vi fra deg

Svar på spørreskjemaet vårt med nettstedet ditt, plattformen det kjører på, CDN-en eller verten din, opptil 10 sider og valgene dine. Inviter deretter hello@aigrow.gg til CDN-kontoen din, nettstedplattformen eller verten og Bing Webmaster Tools, eller opprett en midlertidig bruker for den adressen. Send aldri passord på e-post.

Dette får du

  • En sjekk av opptil 10 sider for hver av de viktigste KI-crawlerne: robots.txt, CDN- og brannmurregler, HTTP-status og omdirigeringer, og hovedteksten i HTML-en
  • Et beslutningsark med valget ditt for crawlere til søk og svar og for treningscrawlere
  • robots.txt og CDN-regelen satt slik du valgte, eller filene og nøyaktige trinn til utvikleren din
  • XML-sitemapet rettet og sendt inn til Bing Webmaster Tools og IndexNow der du gir tilgang
  • En llms.txt-fil, hvis du ønsker det
  • En rapport med de samme kontrollene før og etter, innen 5 arbeidsdager etter at vi har fått tilgang
  • Tilgangen vår fjernes etter rapporten, og én ny sjekk 30 dager senere

Oppsett av tilgang for KI-crawlere

290 €

Betales én gang i kassen. Intet abonnement, ingenting fornyes.

Hvis vi ikke leverer det som står på denne siden, eller du ombestemmer deg før arbeidet starter, får du full refusjon.

Hvorfor kjøpe det av AIGROW

Det du kan sjekke før du betaler, og etter at jobben er gjort.

Fast pris
290 €, betalt én gang. Intet abonnement, ingenting fornyes. Alt som er inkludert, står oppført på denne siden før du betaler.
Bevis du kan etterprøve
Rapporten viser hver side og hver crawler før og etter: robots.txt-regelen som gjelder, CDN-innstillingen, HTTP-statusen og om hovedteksten finnes i HTML-en. Du kan kjøre den samme sjekken selv med den gratis KI-crawlersjekken.
En åpen metode
Den første kontrollen kan du kjøre selv: den gratis KI-crawlersjekken leser robots.txt og ber om en side som hver enkelt crawler, på noen sekunder og uten konto. Kjør den gratis KI-crawlersjekken

Før du kjøper

Hva vi sjekker og endrer, og hva prisen ikke lover.

Det kan ingen love, og det gjør heller ikke vi. Oppsettet sørger for at dine egne regler ikke avviser crawlerne du har valgt, og at sidene og sitemapet ditt kan leses. Om en assistent bruker eller siterer en side, avgjør driveren av assistenten. Bings retningslinjer for webansvarlige sier det samme om denne typen arbeid: det garanterer ikke siteringer.

Noen crawlere henter sider slik at en KI-assistent kan finne og sitere dem i et svar, for eksempel OAI-SearchBot for ChatGPT-søk, Claude-SearchBot og PerplexityBot. Andre samler inn sider for å trene KI-modeller, for eksempel GPTBot, ClaudeBot og CCBot. OpenAI og Anthropic dokumenterer hver sin separate kontroll, så du kan blokkere trening og likevel tillate søk. Vi forklarer avveiningen, og valget er ditt.

Et CDN eller en brannmur kan blokkere KI-crawlere gjennom en innstilling du kanskje ikke vet er slått på. Cloudflare lar hvert nettsted tillate eller blokkere KI-crawlere etter kategori, og domener som er lagt til siden 15. september 2026 blokkerer som standard trenings- og agentcrawlere på sider som viser annonser. Vercel tilbyr et brannmursett for KI-roboter. Vi leser innstillingen som gjelder for nettstedet ditt.

llms.txt er et forslag fra september 2024 om en fil som peker språkmodeller til de viktigste sidene på et nettsted. Ingen av de store KI-assistentene har bekreftet at de leser filen, og Google sier at Search ignorerer den. Hvis du vil ha en, skriver vi den ut fra sidene dine. Hvis ikke, lar vi den være.

Bing sier at Copilot-søket bygger på den samme crawlingen og indekseringen som Bing-søk, og at det finner sider gjennom XML-nettstedskart og IndexNow. Derfor sender vi inn nettstedskartet ditt i Bing Webmaster Tools og sender sidene dine gjennom IndexNow der du gir oss tilgang.

Vi rapporterer det side for side. Bings retningslinjer advarer mot å skjule viktig innhold bak rendering på klientsiden, og en studie fra Vercel og MERJ publisert i desember 2024 fant at crawlerne til OpenAI, Anthropic og Perplexity ikke kjørte JavaScript. Å endre hvordan nettstedet ditt rendres er utviklingsarbeid utenfor dette oppsettet, så vi skriver ned hva utvikleren din må endre.

Nei, og send aldri et passord på e-post. Du inviterer hello@aigrow.gg som medlem av CDN-kontoen din, begrenset til dette nettstedet, som bruker på nettstedsplattformen eller verten din og som bruker i Bing Webmaster Tools. Der en plattform ikke kan sende invitasjoner, oppretter du en midlertidig bruker for hello@aigrow.gg, og plattformen sender innloggingslenken til oss på e-post. Vi oppbevarer den i passordhvelvet vårt og fjerner tilgangen når rapporten er sendt.

Rapporten med kontrollene før og etter kommer innen 5 virkedager etter at vi har fått tilgang. Dagene vi venter på valgene dine eller utvikleren din, regnes ikke med. Crawlere plukker opp endringer i sitt eget tempo, og OpenAI sier at en endring i robots.txt kan ta omtrent 24 timer å nå systemene deres, så vi kjører de samme kontrollene på nytt 30 dager senere.

Vil du vite hva assistentene allerede sier om deg?

Revisjonen av KI-nøyaktighet spør ChatGPT, Claude, Gemini og Grok om det kundene spør om virksomheten din, markerer hvert feil svar mot de faktiske opplysningene dine og skriver en plan for utbedring.

Se revisjonen av KI-nøyaktighet

Tjenesten som passer som neste steg

390 €

Strukturerte data og sider med svar

Vi legger til schema.org-markering på opptil 20 sider på nettstedet ditt og skriver 5 sider som svarer på spørsmål fra kunder.

Se strukturerte data og svarsider

La KI-crawlerne du velger, lese nettstedet ditt.

Betal én gang, gi oss tilgang uten passord, velg hvilke crawlere som skal tillates, og få rapporten innen 5 virkedager etter at vi har fått tilgang.

290 € · betales én gang · leveres som beskrevet eller refunderes