Applebot-Extended: en träningscrawlare som drivs av Apple
Applebot-Extended är en träningscrawlare. Den samlar in sidor till träning av Apple Intelligence och drivs av Apple.
Översikt
- Ansvarig för webbplatsen
- Apple
- robots.txt-token
Applebot-Extended- Syfte
- Träning. Träningscrawlare samlar in sidor till framtida modeller. Att stänga ute dem stoppar inte de crawlare som hämtar sidor för att ge svar. De har egna namn.
- Vad den bidrar till
- träning av Apple Intelligence
Vad som händer om du blockerar den
Om du stänger ute Applebot-Extended kommer dina sidor inte med i det som samlas in till träning av Apple Intelligence. Crawlarna som hämtar sidor för att ge svar har egna namn och kan därför fortfarande läsa din webbplats.
Rader i robots.txt för Applebot-Extended
robots.txt är en vanlig textfil i en webbplats rotkatalog (yoursite.com/robots.txt). En grupp börjar med en eller flera User-agent-rader som namnger crawlare, följt av Allow- och Disallow-rader för sökvägar. En crawlare som namnges i en grupp följer grupperna där den namnges och ignorerar gruppen för alla crawlare (User-agent: *).
För att släppa in den
User-agent: Applebot-Extended
Allow: /För att stänga den ute
User-agent: Applebot-Extended
Disallow: /Släpper din webbplats in den?
Applebot-Extended är bara ett namn för regler i robots.txt. Kontrollen läser robots.txt för det namnet och skickar ingen förfrågan med det som användaragent.