Comprobador de rastreadores de IA
Usa este comprobador de rastreadores de IA para revisar las reglas de robots.txt, las señales de indexación y las respuestas HTTP. Comprueba qué accesos están bloqueados antes de cambiar las reglas de tu sitio.
Gratis, sin cuenta ni correo electrónico. La comprobación tarda varios segundos.
Este comprobador gratuito de acceso para rastreadores de IA lee robots.txt, revisa las señales meta robots y X-Robots-Tag y envía solicitudes con identificadores de rastreadores de IA. Cada fila muestra la regla aplicable y la respuesta HTTP. Los resultados «permitido», «bloqueado» e «incierto» describen lo que observamos desde nuestro servidor; no garantizan que un rastreador real reciba la misma respuesta.
Cómo funciona esta comprobación
- robots.txt
- Se lee el robots.txt del sitio una sola vez y se aplican las reglas correspondientes a cada rastreador para esa página, según RFC 9309: el grupo que nombra al rastreador prevalece sobre el grupo general.
- Una solicitud como cada rastreador
- Se solicita la página con el identificador de usuario de cada rastreador. La tabla muestra el estado HTTP, cualquier comprobación de seguridad y la cadena de identificación enviada. Google-Extended y Applebot-Extended son tokens de control y no generan una solicitud independiente. Googlebot y Bingbot solo se comprueban en robots.txt.
- Solicitud de control
- También se solicita la página como un navegador corriente. Si esa solicitud también se rechaza, las solicitudes de los rastreadores no permiten sacar conclusiones específicas sobre ellos y solo se evalúa robots.txt.
- La limitación
- Nuestras solicitudes salen de nuestra dirección. Un firewall que comprueba las direcciones IP publicadas de un rastreador puede rechazar nuestra solicitud y permitir la del rastreador real. Por eso, Googlebot y Bingbot solo se evalúan mediante robots.txt.
Cada rastreador de la tabla tiene su propia página en la lista de rastreadores de IA.
Crea un robots.txt completo para IA · Comprueba la longitud del título y la descripción
Preguntas sobre los rastreadores de IA
Descubre qué dicen los asistentes sobre ti
El análisis gratuito lee tu sitio, comprueba esos mismos rastreadores y plantea a los asistentes las preguntas que hacen tus compradores.