Amazonbot: rastreador de búsqueda operado por Amazon
Amazonbot es un rastreador de búsqueda. Lee páginas para crear el índice que utiliza Alexa y Rufus. Lo opera Amazon.
De un vistazo
- Responsable del sitio
- Amazon
- Identificador en robots.txt
Amazonbot- Función
- Búsqueda. Los rastreadores de búsqueda leen páginas para crear el índice que consulta un asistente al responder. Si no pueden leer una página, no podrán encontrarla ni citarla en sus respuestas.
- Qué alimenta
- Alexa y Rufus
Qué cambia al bloquearlo
Si bloqueas Amazonbot, tus páginas no podrán aparecer ni citarse en las respuestas de búsqueda de Alexa y Rufus.
Agente de usuario
El agente de usuario completo, según la documentación de quien lo opera. Las solicitudes de Amazonbot incluyen este texto, que aparece en los registros del servidor.
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amazonbot/0.1; +https://developer.amazon.com/support/amazonbot) Chrome/119.0.6045.214 Safari/537.36Reglas de robots.txt para Amazonbot
robots.txt es un archivo de texto sin formato situado en la raíz de un sitio (yoursite.com/robots.txt). Un grupo empieza con una o varias líneas User-agent que nombran rastreadores, seguidas de líneas Allow y Disallow para las rutas. Un rastreador nombrado en un grupo sigue los grupos que lo nombran e ignora el grupo general (User-agent: *).
Para permitirle el acceso
User-agent: Amazonbot
Allow: /Para bloquearle el acceso
User-agent: Amazonbot
Disallow: /¿Tu sitio le permite el acceso?
La comprobación de rastreadores lee tu robots.txt para Amazonbot y solicita tu página con su agente de usuario. Así muestra si lo bloquea una regla de robots.txt o un firewall.