cohere-ai: en ældre indstilling i robots.txt
Cohere angiver i øjeblikket ingen aktiv crawler til træning af modeller. cohere-ai-tokenet er bevaret som en kontrol af en ældre robots.txt-præference, uden nogen aktuel forespørgsel fra en crawler.
Overblik
- Ansvarlig virksomhed
- Cohere
- robots.txt-token
cohere-ai- Formål
- ældre robots.txt-præference
- Hvad den leverer data til
- ældre robots.txt-præference
Hvad det ændrer at blokere den
En post for cohere-ai registrerer en præference for dette token. Cohere angiver det i øjeblikket ikke som en aktiv crawler til modeltræning.
Linjer i robots.txt for cohere-ai
robots.txt er en almindelig tekstfil i roden af et website (yoursite.com/robots.txt). En gruppe begynder med en eller flere User-agent-linjer, der navngiver crawlere, efterfulgt af Allow- og Disallow-linjer for stier. En crawler, der er nævnt i en gruppe, følger de grupper, hvor dens navn står, og ignorerer gruppen for alle crawlere (User-agent: *).
Tillad adgang
User-agent: cohere-ai
Allow: /Blokér adgang
User-agent: cohere-ai
Disallow: /Giver dit website adgang?
cohere-ai er kun et navn til regler i robots.txt. Crawlertjekket læser robots.txt for den og sender ingen forespørgsel som den.