Perplexity-User: ein Crawler, den Perplexity betreibt und der Seiten auf Anfrage öffnet
Perplexity-User ist ein Nutzer-Crawler. Er öffnet eine Seite, wenn jemand das jeweilige Angebot (Perplexity) bittet, sie zu lesen. Betrieben wird er von Perplexity.
Auf einen Blick
- Betreiber
- Perplexity
- robots.txt-Token
Perplexity-User- Zweck
- Nutzeranfrage. Nutzer-Crawler öffnen eine einzelne Seite, wenn jemand einen Assistenten bittet, sie zu lesen. Können sie die Seite nicht lesen, lässt sie sich in diesem Gespräch nicht öffnen.
- Wofür er Daten liefert
- Perplexity
Was sich durch das Blockieren ändert
Eine Disallow-Regel signalisiert, dass Perplexity-User Ihre Seiten nicht aufrufen soll. Manche durch Nutzer ausgelöste Abrufdienste ignorieren robots.txt möglicherweise. Wenn eine Seite privat bleiben muss, verwenden Sie serverseitige Zugriffskontrollen.
User-Agent
Ein repräsentativer User-Agent (Perplexity-User). Wir richten uns nach der Dokumentation des jeweiligen Betreibers, sofern darin die vollständige Zeichenfolge veröffentlicht ist. Versions- und Browserangaben in echten Serverprotokollen können davon abweichen.
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Perplexity-User/1.0; +https://perplexity.ai/perplexity-user)robots.txt-Zeilen für Perplexity-User
robots.txt ist eine reine Textdatei im Stammverzeichnis einer Website (yoursite.com/robots.txt). Eine Gruppe beginnt mit einer oder mehreren User-agent-Zeilen, die Crawler benennen. Darauf folgen Allow- und Disallow-Zeilen für Pfade. Ein Crawler, der in einer Gruppe namentlich genannt wird, befolgt die Gruppen mit seinem Namen und ignoriert die Gruppe für alle Crawler (User-agent: *).
Zulassen
User-agent: Perplexity-User
Allow: /Sperren
User-agent: Perplexity-User
Disallow: /Lässt Ihre Website den Crawler zu?
Die kostenlose Crawler-Prüfung liest Ihre robots.txt für Perplexity-User und ruft Ihre Seite mit dessen User-Agent auf. So zeigt sie, ob eine robots.txt-Regel oder eine Firewall den Crawler abweist.