AI-crawlere
Bingbot: En søgecrawler, som drives af Microsoft
Bingbot er en søgecrawler. Den læser sider til søgeindekset bag produktet (Bing og Copilot). Operatøren er Microsoft.
Overblik
- Ansvarlig virksomhed
- Microsoft
- robots.txt-token
Bingbot- Formål
- Søgning. Søgecrawlere læser sider for at opbygge det indeks, en assistent søger i, når den svarer. Hvis de ikke kan læse en side, kan den hverken findes eller citeres i de svar.
- Hvad den leverer data til
- Bing og Copilot
Hvad det ændrer at blokere den
Hvis du blokerer Bingbot, kan dine sider ikke findes eller citeres i søgesvar fra produktet (Bing og Copilot).
Linjer i robots.txt for Bingbot
robots.txt er en almindelig tekstfil i roden af et website (yoursite.com/robots.txt). En gruppe begynder med en eller flere User-agent-linjer, der navngiver crawlere, efterfulgt af Allow- og Disallow-linjer for stier. En crawler, der er nævnt i en gruppe, følger de grupper, hvor dens navn står, og ignorerer gruppen for alle crawlere (User-agent: *).
Tillad adgang
User-agent: Bingbot
Allow: /Blokér adgang
User-agent: Bingbot
Disallow: /Giver dit website adgang?
Crawlertjekket læser kun robots.txt for Bingbot og sender ingen forespørgsel som den.