Kan AI læse mit website?

Kan AI læse mit website? Sammenlign tekst, overskrifter, links og strukturerede data i rå HTML på tværs af crawlerforespørgsler. Tjek adgangsregler, og find tomme JavaScript-skaller.

Gratis, ingen konto. Ti tjek i timen på tværs af værktøjerne til AI-læsbarhed, mobilvisning og teknologi.

Vi sender adressen til vores API for at udføre tjekket. Resultaterne kan gemmes i cachen i fem minutter.

AI-crawlere læser den HTML, som din server sender. I Vercels undersøgelse fra december 2024 kørte crawlerne bag ChatGPT, Claude og Perplexity ikke JavaScript. Tekst tilføjet af scripts nåede derfor aldrig frem til dem. Indtast en side, og hent den som fire AI-crawlere og en browser. Se derefter, hvilken tekst, hvilke overskrifter og hvilke links hver af dem modtog.

Sådan bruger du tjekværktøjet

Fem forespørgsler til én side
Vores server henter siden som GPTBot, ClaudeBot, PerplexityBot og OAI-SearchBot med den user agent, som hver operatør offentliggør, og én gang som en Chrome-browser på en computer. Hver forespørgsel følger op til tre omdirigeringer og læser højst 3 MB.
robots.txt tjekkes først
Vi læser websitets robots.txt før hver crawlerforespørgsel. Hvis robots.txt afviser en crawler, sender vi den ikke til siden. Du får vist den regel, der blokerer den.
Sidedirektiver og llms.txt
Hver crawlerrække viser begrænsende meta robots-direktiver og X-Robots-Tag-direktiver samt operatørens dokumentation af user agent. noai og noimageai er ikke-standardiserede anmodninger. Vi tjekker llms.txt som et mindre, frivilligt signal. Vi måler ikke andelen af gengivet tekst. Sammenligninger af ordantal bygger på rå HTML til computerbrowsere.
Ingen JavaScript bliver kørt
Tekst, overskrifter, links, titel, beskrivelse og JSON-LD hentes fra HTML, præcis som serveren sendte den. Intet på siden bliver kørt. Det svarer til den måde, crawlerne i Vercels undersøgelse læste sider på.
Sådan fastsættes vurderingen
Læsbar: Crawleren modtog mindst 40 ord, og intet tyder på, at resten kræver JavaScript. Delvist læsbar: en kort side på under 150 ord med tegn på, at scripts bygger siden, eller en side med under halvt så mange ord som browserudgaven. Tom skal: ingen læsbare ord, men scripts, eller under 40 ord sammen med en tom app-root, en JavaScript-meddelelse eller omfattende indlejrede scripts. Blokeret: robots.txt, en afvisning eller en botkontrol stoppede crawleren.

Kilde til, hvad crawlerne kører: Vercel, “The rise of the AI crawler”, 17. december 2024. De crawlere fra OpenAI, Anthropic, Meta, ByteDance og Perplexity, som undersøgelsen målte, kørte ikke JavaScript.

Spørgsmål om tjekværktøjet

I Vercels undersøgelse “The rise of the AI crawler” (17. december 2024) gengav ingen af de store AI-crawlere JavaScript. Det gjaldt OpenAIs OAI-SearchBot, ChatGPT-User og GPTBot, Anthropics ClaudeBot og PerplexityBot. ChatGPT og Claude hentede JavaScript-filer uden at køre dem. Gemini bruger Googlebots infrastruktur, som gengiver JavaScript. Crawlere kan ændre sig, så test igen efter et redesign.

Din browser kører sidens scripts, som bygger teksten efter indlæsning. En crawler, der ikke kører scripts, ser kun den oprindelige HTML. I en app, der gengives på klientsiden, er det en tom beholder. Servergengivelse, statisk generering eller forhåndsgengivelse lægger den færdige tekst i den oprindelige HTML.

Nogle websites sender crawlere en forhåndsgengivet udgave og browsere den scriptbyggede side. Tjekket markerer dette, når en crawler modtager mindst 150 ord, mens browserudgaven har færre end 40. Sørg for, at begge udgaver har samme indhold i det væsentlige, da søgemaskiner betragter forskelligt indhold til bots og mennesker som cloaking.

En firewall eller en tjeneste til botbeskyttelse kan afvise en forespørgsel eller svare med en kontrolside, før websitet ser den. Tillad crawleren i tjenesten, for eksempel i Cloudflares botindstillinger. Vores forespørgsler kommer fra én server, så en blokering her er et stærkt tegn på, hvad den rigtige crawler får, men ikke et bevis.

Nej. Det viser kun, hvad en crawler kan læse på én side. Om en assistent nævner din virksomhed, afhænger af mange andre kilder. Den gratis AI-synlighedsscanning tjekker rigtige svar.

Relaterede værktøjer

  • Tjek af websiteteknologi

    Brug værktøjet til at finde teknologier ud fra synlige spor og DNS. Se oplyste versioner og dokumentation, og sammenlign derefter to websites med oplysninger om adgang for AI-crawlere.

  • Tjek AI-crawlere

    Gennemgå robots.txt-regler, indekseringssignaler og HTTP-svar med dette værktøj til tjek af AI-crawlere. Undersøg blokeret adgang, før du ændrer reglerne for dit website.

  • Generator og validator til llms.txt

    Brug denne llms.txt-generator til at oprette en redigerbar fil ud fra et website, et XML-sitemap eller en indsat liste over sider. Inddel filen i sektioner, gennemgå beskrivelserne, og kopiér eller download derefter Markdown-filen.

Tjek din virksomhed i AI-svar

En side, som crawlere kan læse, er udgangspunktet. Den gratis AI-synlighedsscanning viser, hvordan assistenter svarer om din virksomhed, og hvad du bør arbejde videre med.

Start den gratis AI-synlighedsscanning