Amazonbot : un robot de recherche exploité par Amazon
Amazonbot est un robot de recherche. Il lit des pages pour constituer l’index utilisé par ce produit (Alexa et Rufus). Il est exploité par Amazon.
En un coup d’œil
- Exploitant
- Amazon
- Nom dans robots.txt
Amazonbot- Rôle
- Recherche. Les robots de recherche lisent les pages pour constituer l’index qu’un assistant consulte lorsqu’il répond. Si un robot ne peut pas lire une page, elle ne peut pas être trouvée ni citée dans ces réponses.
- À quoi servent les pages collectées
- Alexa et Rufus
Conséquences du blocage
Si vous bloquez Amazonbot, vos pages ne pourront pas être trouvées ni citées dans les réponses de recherche de ce produit (Alexa et Rufus).
Agent utilisateur
L’agent utilisateur complet, tel qu’il figure dans la documentation de son exploitant. Ce texte apparaît dans les requêtes d’Amazonbot et dans les journaux du serveur.
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amazonbot/0.1; +https://developer.amazon.com/support/amazonbot) Chrome/119.0.6045.214 Safari/537.36Lignes robots.txt pour Amazonbot
robots.txt est un fichier texte brut à la racine d’un site (yoursite.com/robots.txt). Un groupe commence par une ou plusieurs lignes User-agent qui nomment les robots, suivies de lignes Allow et Disallow définissant les chemins. Un robot nommé dans un groupe suit les groupes qui portent son nom et ignore celui destiné à tous les robots (User-agent: *).
Pour l’autoriser
User-agent: Amazonbot
Allow: /Pour le bloquer
User-agent: Amazonbot
Disallow: /Votre site l’autorise-t-il ?
La vérification lit votre fichier robots.txt pour Amazonbot et demande votre page avec son agent utilisateur. Elle indique ainsi si une règle robots.txt ou un pare-feu le bloque.