OAI-SearchBot: en søkerobot drevet av OpenAI
OAI-SearchBot er en søkerobot. Den leser sider til søkeindeksen bak ChatGPT-søk. Roboten drives av OpenAI.
Kort fortalt
- Driftsansvarlig
- OpenAI
- navn i robots.txt
OAI-SearchBot- Formål
- Søk. Søkeroboter leser sider for å bygge søkeindeksen en assistent bruker når den svarer. En side de ikke kan lese, kan ikke bli funnet eller sitert i disse svarene.
- Hva den bidrar til
- ChatGPT-søk
Hva som skjer når den blokkeres
Hvis du holder OAI-SearchBot ute, kan sidene dine ikke bli funnet eller sitert i søkesvar fra ChatGPT-søk.
Brukeragent
Den fullstendige brukeragenten fra dokumentasjonen til den som driver roboten. En forespørsel fra OAI-SearchBot inneholder denne teksten, som vises i serverloggen.
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbotLinjer i robots.txt for OAI-SearchBot
robots.txt er en ren tekstfil i roten av et nettsted (yoursite.com/robots.txt). En gruppe begynner med én eller flere User-agent-linjer som navngir roboter, etterfulgt av Allow- og Disallow-linjer for stier. En robot som er navngitt i en gruppe, følger gruppene der den er navngitt og ignorerer gruppen for alle roboter (User-agent: *).
For å slippe den inn
User-agent: OAI-SearchBot
Allow: /For å holde den ute
User-agent: OAI-SearchBot
Disallow: /Slipper nettstedet ditt den inn?
Den gratis robotsjekken leser robots.txt-filen din for OAI-SearchBot og ber om siden din med robotens brukeragent. Slik ser du om en regel i robots.txt eller en brannmur avviser den.