ChatGPT-User: een crawler van OpenAI die pagina's op verzoek opent

ChatGPT-User is een crawler voor gebruikersverzoeken. Hij opent een pagina wanneer iemand ChatGPT vraagt die te lezen. OpenAI beheert deze crawler.

In één oogopslag

Beheerder
OpenAI
robots.txt-token
ChatGPT-User
Doel
Verzoek van gebruiker. Crawlers voor gebruikersverzoeken openen een pagina wanneer iemand een assistent vraagt die te lezen. Als ze de pagina niet kunnen lezen, kan de assistent die in dat gesprek niet openen.
Waarvoor de gegevens worden gebruikt
ChatGPT

Wat blokkeren verandert

Met een Disallow-regel verzoek je ChatGPT-User je pagina's niet te bezoeken. Sommige systemen die op verzoek van gebruikers pagina's ophalen, negeren mogelijk robots.txt. Gebruik toegangsbeheer op de server als een pagina privé moet blijven.

User-agent

Een representatieve useragent voor ChatGPT-User. We gebruiken de documentatie van de aanbieder als daarin een volledige string is gepubliceerd. Versies en browsergegevens in echte serverlogs kunnen afwijken.

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; ChatGPT-User/1.0; +https://openai.com/bot

robots.txt-regels voor ChatGPT-User

robots.txt is een tekstbestand in de hoofdmap van een site (yoursite.com/robots.txt). Een groep begint met één of meer User-agent-regels die crawlers benoemen, gevolgd door Allow- en Disallow-regels voor paden. Een crawler die in een groep wordt genoemd, volgt de groepen met zijn naam en negeert de groep voor alle crawlers (User-agent: *).

Toelaten

User-agent: ChatGPT-User
Allow: /

Blokkeren

User-agent: ChatGPT-User
Disallow: /

Laat jouw site deze crawler toe?

De gratis crawlercheck leest je robots.txt voor ChatGPT-User en vraagt je pagina op met de bijbehorende user-agent. Zo zie je of een robots.txt-regel of een firewall deze crawler weert.

Controleer of jouw site ChatGPT-User toelaat

Vragen over ChatGPT-User

ChatGPT-User is een crawler voor gebruikersverzoeken. Hij opent een pagina wanneer iemand ChatGPT vraagt die te lezen. OpenAI beheert deze crawler.

Alleen als je niet wilt dat ChatGPT je pagina's opent wanneer iemand daarom vraagt. Andere crawlers blijven hierdoor ongemoeid.

Voeg een groep toe met de naam van de crawler en een regel voor alle paden: “User-agent: ChatGPT-User”, gevolgd door “Disallow: /”. Wil je de crawler toelaten, gebruik dan “Allow: /”.