MistralAI-User: een crawler van Mistral die pagina's op verzoek opent
MistralAI-User is een crawler voor gebruikersverzoeken. Hij opent een pagina wanneer iemand Le Chat vraagt die te lezen. Mistral beheert deze crawler.
In één oogopslag
- Beheerder
- Mistral
- robots.txt-token
MistralAI-User- Doel
- Verzoek van gebruiker. Crawlers voor gebruikersverzoeken openen een pagina wanneer iemand een assistent vraagt die te lezen. Als ze de pagina niet kunnen lezen, kan de assistent die in dat gesprek niet openen.
- Waarvoor de gegevens worden gebruikt
- Le Chat
Wat blokkeren verandert
Als je MistralAI-User weert, kan Le Chat je pagina niet openen wanneer iemand daarom vraagt.
User-agent
De volledige user-agent volgens de documentatie van de beheerder. Een verzoek van MistralAI-User bevat deze tekst, die ook in serverlogs te zien is.
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; MistralAI-User/1.0; +https://docs.mistral.ai/robots)robots.txt-regels voor MistralAI-User
robots.txt is een tekstbestand in de hoofdmap van een site (yoursite.com/robots.txt). Een groep begint met één of meer User-agent-regels die crawlers benoemen, gevolgd door Allow- en Disallow-regels voor paden. Een crawler die in een groep wordt genoemd, volgt de groepen met zijn naam en negeert de groep voor alle crawlers (User-agent: *).
Toelaten
User-agent: MistralAI-User
Allow: /Blokkeren
User-agent: MistralAI-User
Disallow: /Laat jouw site deze crawler toe?
De gratis crawlercheck leest je robots.txt voor MistralAI-User en vraagt je pagina op met de bijbehorende user-agent. Zo zie je of een robots.txt-regel of een firewall deze crawler weert.