Tester robots.txt: czy roboty AI i Google mogą wejść na Twoją stronę
Wpisz adres swojej strony, a tester pobierze plik robots.txt i pokaże, czy roboty ChatGPT, Google, Claude, Copilota i Perplexity mogą na nią wejść oraz który wiersz pliku o tym decyduje.
Tu pojawi się wynik sprawdzenia
Zobaczysz, który z jedenastu robotów może wejść na stronę, który wiersz pliku o tym decyduje i co warto w nim poprawić.
Wynik dla adresu /
Plik: , odpowiedź serwera: kod .
| Robot | Stan | Co decyduje | Do czego służy |
|---|
OAI-SearchBot ma zakaz wejścia
Jeśli plik blokuje wszystkie roboty, a chcesz, żeby strona mogła się pojawiać w wynikach wyszukiwania ChatGPT, dodaj osobną grupę dla tego robota:
User-agent: OAI-SearchBot
Allow: /
Jeśli OAI-SearchBot ma już w pliku własną grupę, usuń z niej regułę z zakazem. Według OpenAI wyszukiwanie ChatGPT może potrzebować około 24 godzin, żeby uwzględnić zmianę.
Uwagi do pliku
Pokaż pobrany plik
Czego tester nie sprawdzi
- Tester czyta tylko plik. Nie widzi zapory, sieci CDN ani ustawień hostingu, a OpenAI i Perplexity zalecają też przepuszczać adresy IP swoich robotów. O to zapytaj firmę hostingową.
- Zmiana w pliku nie działa od razu. Google zwykle trzyma plik w pamięci do 24 godzin, a według OpenAI wyszukiwanie ChatGPT potrzebuje na to około doby.
- Dostęp dla robota nie daje jeszcze miejsca w odpowiedziach czatów ani w wynikach Google. OpenAI i Google piszą wprost, że pozycji nie gwarantują.
Pytania o robots.txt i roboty AI
Czy blokować GPTBot?
To Twoja decyzja. GPTBot zbiera treści, które mogą trafić do trenowania modeli OpenAI. Według OpenAI ustawienia robotów są od siebie niezależne: możesz wpuścić OAI-SearchBot, żeby strona mogła się pojawiać w wynikach ChatGPT, i zablokować GPTBot.
Czy blokada Google-Extended usunie stronę z Google?
Nie. Google podaje, że Google-Extended nie wpływa na obecność strony w wyszukiwarce ani na jej pozycję. Decyduje o tym, czy treści mogą służyć do trenowania modeli Gemini i do odpowiedzi w aplikacjach Gemini.
Czy ChatGPT-User i Perplexity-User słuchają robots.txt?
Nie zawsze. Oba wchodzą na stronę na prośbę użytkownika. OpenAI podaje, że reguły z pliku mogą nie obejmować ChatGPT-User, a Perplexity, że Perplexity-User zwykle je pomija. Anthropic przy Claude-User pisze, że pozwala właścicielom stron decydować o takich wejściach.
Czy roboty Claude i Copilota słuchają robots.txt?
Tak. Anthropic podaje, że jego roboty przestrzegają robots.txt, a Microsoft, że Bing szanuje ustawienia z tego pliku. Bing ma jedną własną zasadę: gdy w pliku nie ma grupy dla bingbot, stosuje grupę msnbot, a dopiero potem grupę *. Tester sprawdza to tak samo.
Czy potrzebuję pliku llms.txt?
Do funkcji AI w wyszukiwarce Google nie. Google pisze, że nie trzeba tworzyć nowych plików zrozumiałych dla komputera, plików z tekstem AI ani znaczników. Tester sprawdza tylko robots.txt.
Strona jest zablokowana przez plik robots.txt, a widać ją w Google. Dlaczego?
Blokada zatrzymuje tylko pobieranie treści. Google może wyświetlić adres zablokowanej strony w wynikach, tylko bez opisu pod tytułem.
Czy zapisujecie adres mojej strony?
Nie. Plik pobiera nasz serwer tylko po to, żeby tester mógł go sprawdzić w Twojej przeglądarce. Nie zapisujemy ani adresu, ani pliku.
W każdym poziomie opieki SEO co miesiąc sprawdzamy między innymi odpowiedzi czatów AI: ChatGPT, Perplexity i Google AI. Czaty sprawdzamy też w pełnym audycie.
Skąd ChatGPT bierze dane o firmach i czego nikt nie zagwarantuje, opisujemy w poradniku pozycjonowanie w ChatGPT.
Zamów bezpłatny mini-audytStan sprawdzenia dokumentacji: 14.10.2026. Plik czytamy według RFC 9309 i opisu Google. Narzędzie nie jest powiązane z OpenAI, Google, Anthropic, Microsoft ani Perplexity. Zasady korzystania: regulamin narzędzi. Źródła: Google: jak Google interpretuje plik robots.txt, RFC 9309, OpenAI: roboty, Anthropic: roboty, Bing: bingbot i robots.txt, Bing: Copilot i cytowania, Perplexity: roboty, Google: popularne roboty.