Meta-ExternalFetcher: rastreador operado por Meta que abre páginas a petición del usuario
Meta-ExternalFetcher es un rastreador que actúa a petición del usuario. Abre una página cuando alguien pide a Meta AI que la lea. Lo opera Meta.
De un vistazo
- Responsable del sitio
- Meta
- Identificador en robots.txt
Meta-ExternalFetcher- Función
- Solicitud del usuario. Los rastreadores que actúan a petición del usuario abren una página cuando alguien pide a un asistente que la lea. Si no pueden leerla, el asistente no podrá abrirla en esa conversación.
- Qué alimenta
- Meta AI
Qué cambia al bloquearlo
Si bloqueas Meta-ExternalFetcher, Meta AI no podrá abrir tu página cuando alguien se lo pida.
Agente de usuario
El agente de usuario completo, según la documentación de quien lo opera. Las solicitudes de Meta-ExternalFetcher incluyen este texto, que aparece en los registros del servidor.
meta-externalfetcher/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler)Reglas de robots.txt para Meta-ExternalFetcher
robots.txt es un archivo de texto sin formato situado en la raíz de un sitio (yoursite.com/robots.txt). Un grupo empieza con una o varias líneas User-agent que nombran rastreadores, seguidas de líneas Allow y Disallow para las rutas. Un rastreador nombrado en un grupo sigue los grupos que lo nombran e ignora el grupo general (User-agent: *).
Para permitirle el acceso
User-agent: Meta-ExternalFetcher
Allow: /Para bloquearle el acceso
User-agent: Meta-ExternalFetcher
Disallow: /¿Tu sitio le permite el acceso?
La comprobación de rastreadores lee tu robots.txt para Meta-ExternalFetcher y solicita tu página con su agente de usuario. Así muestra si lo bloquea una regla de robots.txt o un firewall.