YouBot: robot wyszukiwarki, za którego odpowiada You.com
YouBot to robot wyszukiwarki. Czyta strony, aby tworzyć indeks, z którego korzysta odpowiedzi You.com. Za robota odpowiada You.com.
W skrócie
- Podmiot prowadzący stronę
- You.com
- nazwa robota w robots.txt
YouBot- Zastosowanie
- Wyszukiwanie. Roboty wyszukiwarek czytają strony, aby zbudować indeks, który asystent przeszukuje podczas udzielania odpowiedzi. Strony, której nie mogą odczytać, nie znajdą ani nie zacytują w tych odpowiedziach.
- Do czego służy
- odpowiedzi You.com
Co zmienia zablokowanie
Jeśli YouBot nie ma dostępu do twoich stron, odpowiedzi You.com nie może ich znaleźć ani cytować w odpowiedziach wyszukiwania.
Identyfikator User-Agent
Pełny identyfikator User-Agent z dokumentacji operatora. Żądania wysyłane przez YouBot zawierają ten tekst, który widać w logach serwera.
Mozilla/5.0 (compatible; YouBot/1.0; +https://about.you.com/youbot/)Reguły robots.txt: YouBot
robots.txt to zwykły plik tekstowy w katalogu głównym witryny (yoursite.com/robots.txt). Grupa zaczyna się od jednego lub kilku wierszy User-agent z nazwami robotów, po których następują reguły Allow i Disallow dla ścieżek. Robot wymieniony w grupie stosuje reguły grup, w których podano jego nazwę, i ignoruje grupę ogólną dla wszystkich robotów (User-agent: *).
Aby zezwolić na dostęp
User-agent: YouBot
Allow: /Aby zablokować dostęp
User-agent: YouBot
Disallow: /Czy ma dostęp do twojej strony?
Bezpłatny test sprawdza reguły robots.txt, a następnie wysyła żądanie z identyfikatorem User-Agent, którego używa YouBot. Dzięki temu pokazuje, czy dostęp blokuje reguła robots.txt lub zapora sieciowa.