OAI-SearchBot: rastreador de búsqueda operado por OpenAI
OAI-SearchBot es un rastreador de búsqueda. Lee páginas para crear el índice que utiliza Búsqueda de ChatGPT. Lo opera OpenAI.
De un vistazo
- Responsable del sitio
- OpenAI
- Identificador en robots.txt
OAI-SearchBot- Función
- Búsqueda. Los rastreadores de búsqueda leen páginas para crear el índice que consulta un asistente al responder. Si no pueden leer una página, no podrán encontrarla ni citarla en sus respuestas.
- Qué alimenta
- Búsqueda de ChatGPT
Qué cambia al bloquearlo
Si bloqueas OAI-SearchBot, tus páginas no podrán aparecer ni citarse en las respuestas de búsqueda de Búsqueda de ChatGPT.
Agente de usuario
Un agente de usuario representativo de OAI-SearchBot. Usamos la documentación del operador cuando publica la cadena completa. Las versiones y los datos del navegador pueden variar en los registros reales del servidor.
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbotReglas de robots.txt para OAI-SearchBot
robots.txt es un archivo de texto sin formato situado en la raíz de un sitio (yoursite.com/robots.txt). Un grupo empieza con una o varias líneas User-agent que nombran rastreadores, seguidas de líneas Allow y Disallow para las rutas. Un rastreador nombrado en un grupo sigue los grupos que lo nombran e ignora el grupo general (User-agent: *).
Para permitirle el acceso
User-agent: OAI-SearchBot
Allow: /Para bloquearle el acceso
User-agent: OAI-SearchBot
Disallow: /¿Tu sitio le permite el acceso?
La comprobación de rastreadores lee tu robots.txt para OAI-SearchBot y solicita tu página con su agente de usuario. Así muestra si lo bloquea una regla de robots.txt o un firewall.