Generator robots.txt

Utwórz plik robots.txt dla całej witryny. Zacznij od domyślnych ustawień WordPress, Shopify, Wix lub Squarespace, a potem sprawdź dowolną ścieżkę względem gotowego pliku.

Bezpłatnie, bez konta. Plik powstaje w twojej przeglądarce i nic nie jest wysyłane.

Zacznij od

Każdy robot indeksujący może zażądać dowolnej ścieżki. Wpisz poniżej ścieżki, do których chcesz zablokować dostęp.

Opcjonalnie. Służy do tworzenia wierszy map witryny i linku do testera robots.txt.

Grupa 1

* oznacza wszystkie roboty bez własnej grupy. Inne przykłady: Googlebot, Bingbot.

Ścieżki do zablokowania, po jednej w wierszu, na przykład /admin/ lub /*?sort=.

Wyjątki w zablokowanej ścieżce, po jednym w wierszu.

Opcjonalnie. Google ignoruje to ustawienie. Bing uwzględnia wartości od 1 do 30 sekund.

Pełne adresy. Wiersze map witryny dotyczą wszystkich robotów.

Twój plik robots.txt

Po ponownym odczytaniu przez parser: 1 grupa, 0 reguł, 0 wierszy mapy witryny, 64 bajty.

# aigrow.gg/tools/robots-txt-generator

User-agent: *
Disallow:

Sprawdź ścieżkę

Dozwolone Robot Googlebot nie ma własnej grupy i stosuje reguły grupy *. Do tej ścieżki nie pasuje żadna reguła, więc dostęp jest dozwolony.

Plik robots.txt znajduje się w katalogu głównym witryny i informuje roboty, o które ścieżki mogą wysyłać żądania. Generator zapisuje grupy agentów użytkownika, reguły Allow i Disallow oraz wpisy map witryny. Następnie ponownie odczytuje plik parserem RFC 9309 używanym przez nasze narzędzie do testowania robots.txt, aby można było sprawdzić ścieżkę przed przesłaniem pliku na serwer.

Jak to działa

Grupy i reguły
Każda grupa wskazuje co najmniej jednego agenta użytkownika, ścieżki, o które nie może wysyłać żądań (Disallow), oraz wyjątki (Allow). Ścieżka zaczyna się od / lub *, a $ oznacza koniec adresu URL. Robot stosuje grupę, w której został wymieniony. Jeśli takiej nie ma, korzysta z grupy *.
Domyślne ustawienia platform
Szablon WordPress odpowiada plikowi tworzonemu przez sam WordPress. Szablony Shopify, Wix i Squarespace odtwarzają domyślne pliki udostępniane przez witryny na tych platformach w październiku 2026. W Shopify zmiany wprowadza się przez szablon motywu robots.txt.liquid, a Wix udostępnia edytor robots.txt w ustawieniach SEO. Squarespace nie dokumentuje sposobu przesłania własnego pliku, więc jego szablon służy jako punkt odniesienia.
Opóźnienie indeksowania
Google ignoruje Crawl-delay. Bing odczytuje tę wartość jako przedział od 1 do 30 sekund. Generator przyjmuje pełne sekundy od 1 do 30 i zapisuje tę linię tylko w grupach, dla których ją ustawisz.
Sprawdzone przed skopiowaniem
Gotowy plik jest ponownie odczytywany parserem RFC 9309 używanym przez nasze narzędzie do testowania robots.txt. Jeśli linia zostałaby zinterpretowana inaczej, niż zamierzono, albo plik przekracza limit Google wynoszący 500 KiB, strona Cię o tym poinformuje. Test ścieżki pokazuje, która linia rozstrzyga o dostępie danego robota.

Pytania dotyczące robots.txt

Nie. Blokuje skanowanie, ale Google może nadal zaindeksować zablokowany adres URL bez treści strony, jeśli prowadzą do niego linki z innych stron. Aby wykluczyć stronę z wyników, pozwól na jej skanowanie i dodaj metatag robots z dyrektywą noindex lub nagłówek X-Robots-Tag.

W katalogu głównym hosta, na przykład pod adresem https://example.com/robots.txt. Każda subdomena i każdy protokół wymagają osobnego pliku. Plik umieszczony w folderze zostanie zignorowany. Na Shopify, Wix i Squarespace plik udostępnia platforma, więc zmiany wprowadza się w jej ustawieniach lub motywie.

Grupa musi zawierać co najmniej jedną linię z regułą. Puste Disallow zezwala na dostęp do wszystkiego i zapobiega dołączeniu agentów użytkownika z następnej grupy do tej grupy.

Google i RFC 9309 wybierają najbardziej szczegółową regułę, czyli tę z najdłuższą ścieżką. Jeśli reguły Allow i Disallow są równie długie, pierwszeństwo ma Allow. Test ścieżki pokazuje, która linia rozstrzyga.

Dodaj osobną grupę dla każdego robota albo skorzystaj z generatora robots.txt dla AI. Zawiera on listę robotów AI według ich przeznaczenia i tworzy odpowiednie linie. Dodaj je pod istniejącymi grupami.

Powiązane narzędzia

  • Tester robots.txt

    Sprawdź do 50 ścieżek w testerze robots.txt. Porównaj reguły dla robotów wyszukiwarek i AI, znajdź zablokowane zasoby i mapy witryny, a potem edytuj wersję roboczą pliku i przetestuj ją ponownie.

  • Generator pliku robots.txt dla AI

    Wybierz, które roboty AI mogą czytać twoją stronę. Dostosuj gotowy zestaw reguł i pobierz je, aby połączyć je z istniejącym plikiem robots.txt.

  • Analiza SEO

    Sprawdź SEO na maksymalnie 25 stronach. Zobacz problemy z dostępnością dla robotów i treścią stron, adresy URL, których dotyczą, oraz listę poprawek. Możesz też dodać niewielką próbkę stron konkurenta.

Sprawdź, jak AI opisuje twoją firmę

Strony, które roboty mogą odczytywać i po których mogą się poruszać, to podstawa. Bezpłatny skan widoczności AI pokaże, jak asystenci odpowiadają na pytania o twoją firmę i nad czym warto dalej pracować.

Uruchom bezpłatny skan widoczności AI