Claude-User: crawler gestito da Anthropic che apre le pagine su richiesta
Claude-User è un crawler attivato dall’utente. Apre una pagina quando qualcuno chiede a questo prodotto di leggerla: Claude. È gestito da Anthropic.
In breve
- Gestore
- Anthropic
- Identificativo robots.txt
Claude-User- Scopo
- Richiesta dell’utente. I crawler attivati dall’utente aprono una pagina quando qualcuno chiede a un assistente di leggerla. Se non possono leggerla, l’assistente non può aprirla durante quella conversazione.
- Cosa alimenta
- Claude
Effetti del blocco
Se blocchi Claude-User, questo prodotto non potrà aprire la tua pagina quando qualcuno glielo chiede: Claude.
User agent
Questo è lo user agent completo riportato nella documentazione del gestore. Le richieste di Claude-User lo includono e puoi vederlo nei log del server.
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Claude-User/1.0; [email protected])Regole robots.txt per Claude-User
robots.txt è un file di testo semplice nella directory principale di un sito (yoursite.com/robots.txt). Un gruppo inizia con una o più righe User-agent che indicano i crawler, seguite da righe Allow e Disallow per i percorsi. Un crawler indicato in un gruppo segue i gruppi che lo nominano e ignora quello valido per tutti i crawler (User-agent: *).
Per consentire l’accesso
User-agent: Claude-User
Allow: /Per bloccare l’accesso
User-agent: Claude-User
Disallow: /Il tuo sito gli consente l’accesso?
Il controllo dei crawler legge il tuo robots.txt per Claude-User e richiede una pagina usando il suo user agent. Ti mostra così se a bloccarlo è una regola robots.txt o un firewall.