OAI-SearchBot: rastreador de búsqueda operado por OpenAI
OAI-SearchBot es un rastreador de búsqueda. Lee páginas para crear el índice que utiliza Búsqueda de ChatGPT. Lo opera OpenAI.
De un vistazo
- Responsable del sitio
- OpenAI
- Identificador en robots.txt
OAI-SearchBot- Función
- Búsqueda. Los rastreadores de búsqueda leen páginas para crear el índice que consulta un asistente al responder. Si no pueden leer una página, no podrán encontrarla ni citarla en sus respuestas.
- Qué alimenta
- Búsqueda de ChatGPT
Qué cambia al bloquearlo
Si bloqueas OAI-SearchBot, tus páginas no podrán aparecer ni citarse en las respuestas de búsqueda de Búsqueda de ChatGPT.
Agente de usuario
El agente de usuario completo, según la documentación de quien lo opera. Las solicitudes de OAI-SearchBot incluyen este texto, que aparece en los registros del servidor.
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbotReglas de robots.txt para OAI-SearchBot
robots.txt es un archivo de texto sin formato situado en la raíz de un sitio (yoursite.com/robots.txt). Un grupo empieza con una o varias líneas User-agent que nombran rastreadores, seguidas de líneas Allow y Disallow para las rutas. Un rastreador nombrado en un grupo sigue los grupos que lo nombran e ignora el grupo general (User-agent: *).
Para permitirle el acceso
User-agent: OAI-SearchBot
Allow: /Para bloquearle el acceso
User-agent: OAI-SearchBot
Disallow: /¿Tu sitio le permite el acceso?
La comprobación de rastreadores lee tu robots.txt para OAI-SearchBot y solicita tu página con su agente de usuario. Así muestra si lo bloquea una regla de robots.txt o un firewall.