Amzn-User: ein Crawler, den Amazon betreibt und der Seiten auf Anfrage öffnet

Amzn-User ist ein Nutzer-Crawler. Er öffnet eine Seite, wenn jemand das jeweilige Angebot (Alexa) bittet, sie zu lesen. Betrieben wird er von Amazon.

Auf einen Blick

Betreiber
Amazon
robots.txt-Token
Amzn-User
Zweck
Nutzeranfrage. Nutzer-Crawler öffnen eine einzelne Seite, wenn jemand einen Assistenten bittet, sie zu lesen. Können sie die Seite nicht lesen, lässt sie sich in diesem Gespräch nicht öffnen.
Wofür er Daten liefert
Alexa

Was sich durch das Blockieren ändert

Eine Disallow-Regel signalisiert, dass Amzn-User Ihre Seiten nicht aufrufen soll. Manche durch Nutzer ausgelöste Abrufdienste ignorieren robots.txt möglicherweise. Wenn eine Seite privat bleiben muss, verwenden Sie serverseitige Zugriffskontrollen.

User-Agent

Ein repräsentativer User-Agent (Amzn-User). Wir richten uns nach der Dokumentation des jeweiligen Betreibers, sofern darin die vollständige Zeichenfolge veröffentlicht ist. Versions- und Browserangaben in echten Serverprotokollen können davon abweichen.

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amzn-User/0.1) Chrome/W.X.Y.Z Safari/537.36

robots.txt-Zeilen für Amzn-User

robots.txt ist eine reine Textdatei im Stammverzeichnis einer Website (yoursite.com/robots.txt). Eine Gruppe beginnt mit einer oder mehreren User-agent-Zeilen, die Crawler benennen. Darauf folgen Allow- und Disallow-Zeilen für Pfade. Ein Crawler, der in einer Gruppe namentlich genannt wird, befolgt die Gruppen mit seinem Namen und ignoriert die Gruppe für alle Crawler (User-agent: *).

Zulassen

User-agent: Amzn-User
Allow: /

Sperren

User-agent: Amzn-User
Disallow: /

Lässt Ihre Website den Crawler zu?

Die kostenlose Crawler-Prüfung liest Ihre robots.txt für Amzn-User und ruft Ihre Seite mit dessen User-Agent auf. So zeigt sie, ob eine robots.txt-Regel oder eine Firewall den Crawler abweist.

Prüfen Sie, ob Ihre Website Amzn-User zulässt

Fragen zu Amzn-User

Amzn-User ist ein Nutzer-Crawler. Er öffnet eine Seite, wenn jemand das jeweilige Angebot (Alexa) bittet, sie zu lesen. Betrieben wird er von Amazon.

Nur wenn das jeweilige Angebot (Alexa) Ihre Seiten nicht öffnen soll, wenn Nutzer darum bitten. Crawler mit anderen Namen bleiben davon unberührt.

Fügen Sie eine Gruppe mit diesem Namen und einer Regel für alle Pfade hinzu: „User-agent: Amzn-User“, gefolgt von „Disallow: /“. Wenn Sie den Crawler zulassen möchten, schreiben Sie stattdessen „Allow: /“.