Claude-SearchBot: En søgecrawler, som drives af Anthropic

Claude-SearchBot er en søgecrawler. Den læser sider til søgeindekset bag produktet (Claude-søgning). Operatøren er Anthropic.

Overblik

Ansvarlig virksomhed
Anthropic
robots.txt-token
Claude-SearchBot
Formål
Søgning. Søgecrawlere læser sider for at opbygge det indeks, en assistent søger i, når den svarer. Hvis de ikke kan læse en side, kan den hverken findes eller citeres i de svar.
Hvad den leverer data til
Claude-søgning

Hvad det ændrer at blokere den

Hvis du blokerer Claude-SearchBot, kan dine sider ikke findes eller citeres i søgesvar fra produktet (Claude-søgning).

User agent

En repræsentativ user agent for Claude-SearchBot. Vi bruger operatørens dokumentation, når den fulde streng er offentliggjort. Versionsnumre og browseroplysninger i faktiske serverlogs kan variere.

Claude-SearchBot

Linjer i robots.txt for Claude-SearchBot

robots.txt er en almindelig tekstfil i roden af et website (yoursite.com/robots.txt). En gruppe begynder med en eller flere User-agent-linjer, der navngiver crawlere, efterfulgt af Allow- og Disallow-linjer for stier. En crawler, der er nævnt i en gruppe, følger de grupper, hvor dens navn står, og ignorerer gruppen for alle crawlere (User-agent: *).

Tillad adgang

User-agent: Claude-SearchBot
Allow: /

Blokér adgang

User-agent: Claude-SearchBot
Disallow: /

Giver dit website adgang?

Det gratis crawlertjek læser din robots.txt for Claude-SearchBot og henter din side med crawlerens user agent. Så kan du se, om en regel i robots.txt eller en firewall afviser den.

Tjek, om dit website giver adgang til Claude-SearchBot

Spørgsmål om Claude-SearchBot

Claude-SearchBot er en søgecrawler. Den læser sider til søgeindekset bag produktet (Claude-søgning). Operatøren er Anthropic.

Kun hvis du ikke ønsker, at dine sider skal vises i søgesvar fra produktet (Claude-søgning). Det ændrer ikke noget for crawlere med andre navne.

Tilføj en gruppe med crawlerens navn og en regel for alle stier: “User-agent: Claude-SearchBot” efterfulgt af “Disallow: /”. Vil du give den adgang, skal du skrive “Allow: /” i stedet.