MistralAI-User: ein Crawler, den Mistral betreibt und der Seiten auf Anfrage öffnet

MistralAI-User ist ein Nutzer-Crawler. Er öffnet eine Seite, wenn jemand das jeweilige Angebot (Vibe) bittet, sie zu lesen. Betrieben wird er von Mistral.

Auf einen Blick

Betreiber
Mistral
robots.txt-Token
MistralAI-User
Zweck
Nutzeranfrage. Nutzer-Crawler öffnen eine einzelne Seite, wenn jemand einen Assistenten bittet, sie zu lesen. Können sie die Seite nicht lesen, lässt sie sich in diesem Gespräch nicht öffnen.
Wofür er Daten liefert
Vibe

Was sich durch das Blockieren ändert

Eine Disallow-Regel signalisiert, dass MistralAI-User Ihre Seiten nicht aufrufen soll. Manche durch Nutzer ausgelöste Abrufdienste ignorieren robots.txt möglicherweise. Wenn eine Seite privat bleiben muss, verwenden Sie serverseitige Zugriffskontrollen.

User-Agent

Ein repräsentativer User-Agent (MistralAI-User). Wir richten uns nach der Dokumentation des jeweiligen Betreibers, sofern darin die vollständige Zeichenfolge veröffentlicht ist. Versions- und Browserangaben in echten Serverprotokollen können davon abweichen.

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; MistralAI-User/1.0; +https://docs.mistral.ai/robots)

robots.txt-Zeilen für MistralAI-User

robots.txt ist eine reine Textdatei im Stammverzeichnis einer Website (yoursite.com/robots.txt). Eine Gruppe beginnt mit einer oder mehreren User-agent-Zeilen, die Crawler benennen. Darauf folgen Allow- und Disallow-Zeilen für Pfade. Ein Crawler, der in einer Gruppe namentlich genannt wird, befolgt die Gruppen mit seinem Namen und ignoriert die Gruppe für alle Crawler (User-agent: *).

Zulassen

User-agent: MistralAI-User
Allow: /

Sperren

User-agent: MistralAI-User
Disallow: /

Lässt Ihre Website den Crawler zu?

Die kostenlose Crawler-Prüfung liest Ihre robots.txt für MistralAI-User und ruft Ihre Seite mit dessen User-Agent auf. So zeigt sie, ob eine robots.txt-Regel oder eine Firewall den Crawler abweist.

Prüfen Sie, ob Ihre Website MistralAI-User zulässt

Fragen zu MistralAI-User

MistralAI-User ist ein Nutzer-Crawler. Er öffnet eine Seite, wenn jemand das jeweilige Angebot (Vibe) bittet, sie zu lesen. Betrieben wird er von Mistral.

Nur wenn das jeweilige Angebot (Vibe) Ihre Seiten nicht öffnen soll, wenn Nutzer darum bitten. Crawler mit anderen Namen bleiben davon unberührt.

Fügen Sie eine Gruppe mit diesem Namen und einer Regel für alle Pfade hinzu: „User-agent: MistralAI-User“, gefolgt von „Disallow: /“. Wenn Sie den Crawler zulassen möchten, schreiben Sie stattdessen „Allow: /“.