GPTBot i robots.txt: jak wpuścić lub zablokować boty AI
Część botów AI zbiera dane do trenowania modeli, a część buduje odpowiedzi dla Twoich klientów. Pokazujemy, jak ustawić robots.txt, żeby zablokować tylko to, co chcesz.
AmIPicked · 7 min czytania · aktualizacja
Wpis o GPTBot w robots.txt to dziś za mało. OpenAI ma cztery boty, Anthropic trzy, Perplexity dwa, a Google steruje AI osobnym tokenem. Każdy robi coś innego, więc jedna linijka skopiowana z artykułu z 2023 roku może wyciąć Twoją stronę z odpowiedzi ChatGPT. Ten poradnik pokazuje, który bot do czego służy, jak go wpuścić lub zablokować i jak sprawdzić, czy robots.txt robi to, co myślisz.
Najpierw sprawdź swój plik. Nasze darmowe sprawdzanie botów AI w kilka sekund pokaże, które boty mają dostęp do Twojej strony.
Trzy rodzaje botów AI
Boty treningowe zbierają publiczne treści, z których powstają kolejne wersje modeli. Blokada oznacza, że Twoje teksty nie trafią do przyszłych danych treningowych.
Boty wyszukiwania pobierają strony, żeby ChatGPT, Claude czy Perplexity mogły je cytować w odpowiedziach z wyszukiwaniem. Blokada oznacza, że model nie zacytuje Twojej strony i trudniej mu będzie Cię polecić.
Boty użytkownika otwierają stronę, gdy ktoś w czacie wklei link albo poprosi model o sprawdzenie konkretnego adresu. Działają na prośbę człowieka, więc część firm zastrzega, że robots.txt może ich nie dotyczyć.
Tabela botów AI: nazwy w robots.txt i do czego służą
Stan według dokumentacji firm w listopadzie 2026 roku:
| Token w robots.txt | Firma | Rodzaj | Co się dzieje po zablokowaniu |
|---|---|---|---|
| OAI-SearchBot | OpenAI | wyszukiwanie | strona nie pojawia się w odpowiedziach wyszukiwania ChatGPT, najwyżej jako zwykły link nawigacyjny |
| GPTBot | OpenAI | trening | treści nie trafiają do trenowania modeli |
| ChatGPT-User | OpenAI | użytkownik | OpenAI zaznacza, że reguły robots.txt mogą go nie dotyczyć |
| OAI-AdsBot | OpenAI | reklamy | sprawdza tylko strony docelowe reklam w ChatGPT, nie trenuje modeli |
| Claude-SearchBot | Anthropic | wyszukiwanie | strona nie jest indeksowana do wyszukiwania w Claude |
| ClaudeBot | Anthropic | trening | treści nie trafiają do przyszłych danych treningowych |
| Claude-User | Anthropic | użytkownik | Claude nie pobierze strony na prośbę użytkownika |
| PerplexityBot | Perplexity | wyszukiwanie | strona nie pojawia się w wynikach Perplexity |
| Perplexity-User | Perplexity | użytkownik | według Perplexity zwykle ignoruje robots.txt, bo działa na prośbę człowieka |
| Google-Extended | trening i ugruntowanie Gemini | nie wpływa na wyszukiwarkę Google ani na ranking | |
| Applebot-Extended | Apple | trening | Apple nie użyje treści do trenowania swoich modeli |
| CCBot | Common Crawl | zbiór danych | z otwartego zbioru Common Crawl korzysta wiele firm trenujących modele |
| meta-externalagent | Meta | trening | treści nie trafiają do modeli Meta |
| Bytespider | ByteDance | trening | dotyczy modeli ByteDance |
| Amazonbot | Amazon | różne usługi, w tym AI | strona nie trafi do usług Amazona, na przykład asystenta Alexa |
Google-Extended to wyjątek. Nie jest osobnym robotem, tylko tokenem w robots.txt, który czytają zwykłe roboty Google. AI Overviews i tryb AI w wyszukiwarce korzystają z tego, co pobiera Googlebot. Więcej o tym w poradniku o AI Overviews.
GPTBot user agent i pełny nagłówek
W robots.txt wpisujesz sam token, na przykład GPTBot. W logach serwera zobaczysz dłuższy nagłówek User-Agent, w którym jest ten sam token i numer wersji, na przykład GPTBot/1.4. Numer może się zmieniać, więc reguły pisz zawsze dla samej nazwy. OpenAI publikuje listy adresów IP swoich botów (openai.com/gptbot.json, openai.com/searchbot.json, openai.com/chatgpt-user.json). Anthropic i Perplexity robią to samo. Po nich rozpoznasz, czy ruch z nagłówkiem GPTBot jest prawdziwy.
Czy wpuścić boty AI na stronę
Dla małej firmy, która chce, żeby AI ją polecało, odpowiedź jest prosta. Boty wyszukiwania i boty użytkownika wpuszczasz zawsze. Bez nich ChatGPT, Claude i Perplexity nie przeczytają Twojej strony, kiedy klient zapyta o usługę w Twoim mieście.
Boty treningowe to osobna decyzja. Wpuszczenie ich może z czasem sprawić, że model będzie kojarzył Twoją markę także bez wyszukiwania. Zablokowanie chroni treści, nad którymi pracujesz, na przykład płatne materiały czy autorskie artykuły. Na widoczność w odpowiedziach z wyszukiwaniem ta decyzja nie wpływa.
Gotowe reguły robots.txt do skopiowania
Wariant 1: wpuszczasz wszystkie boty. Jeśli robots.txt nie wspomina o botach AI i nie blokuje wszystkiego dla gwiazdki, boty AI mają dostęp. Wystarczy zwykły plik:
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Sitemap: https://twojadomena.pl/sitemap.xml
Wariant 2: blokujesz trening, zostawiasz odpowiedzi AI. Najczęstszy wybór firm, które chcą być polecane, a nie chcą oddawać treści do trenowania:
User-agent: GPTBot
Disallow: /
User-agent: ClaudeBot
Disallow: /
User-agent: Google-Extended
Disallow: /
User-agent: Applebot-Extended
Disallow: /
User-agent: CCBot
Disallow: /
User-agent: meta-externalagent
Disallow: /
User-agent: Bytespider
Disallow: /
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Sitemap: https://twojadomena.pl/sitemap.xml
OAI-SearchBot, ChatGPT-User, Claude-SearchBot, Claude-User i PerplexityBot nie mają tu własnych grup, więc korzystają z reguł dla gwiazdki i mają dostęp.
Wariant 3: blokujesz tylko część strony. Przydaje się, gdy masz strefę dla klientów albo płatne materiały:
User-agent: GPTBot
Disallow: /materialy-dla-klientow/
User-agent: ClaudeBot
Disallow: /materialy-dla-klientow/
Wariant 4: spowalniasz bota, który za mocno obciąża serwer. Anthropic obsługuje nieoficjalną regułę Crawl-delay:
User-agent: ClaudeBot
Crawl-delay: 1
Blokady wszystkich botów AI naraz nie polecamy firmom, które chcą być widoczne w AI. Jeśli jednak tego potrzebujesz, dopisz grupy z Disallow: / także dla OAI-SearchBot, Claude-SearchBot i PerplexityBot i licz się z tym, że znikniesz z ich odpowiedzi.
Pułapka: bot z własną grupą nie czyta reguł dla gwiazdki
Robot szuka w robots.txt grupy ze swoją nazwą. Jeśli ją znajdzie, stosuje tylko tę grupę, a reguły dla User-agent: * ignoruje. Przykład: w grupie dla gwiazdki blokujesz /koszyk/, a dla GPTBot dodajesz osobną grupę z jedną regułą. GPTBot nie zobaczy wtedy blokady koszyka. Jeśli tworzysz grupę dla konkretnego bota, powtórz w niej reguły, które mają go dotyczyć.
Drugi częsty błąd to blokada wszystkiego dla gwiazdki, czyli User-agent: * z Disallow: /, zostawiona po pracach nad stroną. Taki zapis wycina z AI i z Google wszystkie boty, które nie mają własnej grupy.
Jak edytować robots.txt w WordPressie
WordPress tworzy wirtualny robots.txt, którego nie ma na dysku. Masz trzy sposoby na zmiany:
- Yoast SEO: w menu wtyczki otwórz narzędzia i edytor plików. Tam utworzysz i zmienisz robots.txt.
- Rank Math: w ustawieniach ogólnych znajdziesz sekcję edycji robots.txt.
- Plik na serwerze: wgraj robots.txt przez FTP lub menedżer plików do katalogu głównego, tego samego co wp-config.php. Fizyczny plik ma pierwszeństwo przed wirtualnym i wtedy edytor we wtyczce może nie działać.
Nazwy menu zmieniają się między wersjami wtyczek. Jeśli ich nie widzisz, wpisz „robots.txt” w wyszukiwarce ustawień. Po zapisaniu otwórz twojadomena.pl/robots.txt i sprawdź, czy widać nową wersję. Niektóre wtyczki cache i CDN pokazują starą przez kilka godzin.
Cloudflare i zapory mogą blokować boty bez Twojej wiedzy
robots.txt to prośba. Zapora działa jak zamek w drzwiach i blokuje bota, zanim ten w ogóle przeczyta robots.txt. Dlatego zdarza się, że plik jest w porządku, a ChatGPT i tak nie widzi strony.
W Cloudflare sprawdź ustawienia dostępu dla crawlerów i agentów AI. Panel dzieli boty na wyszukiwanie, agentów i trening, a dla każdej grupy możesz wybrać blokadę, blokadę tylko na stronach z reklamami albo dostęp. Zgodnie z dokumentacją z listopada 2026 roku nowe domeny mają domyślnie dostęp we wszystkich trzech grupach, ale ustawienia domyślne zmieniały się już w przeszłości, więc sprawdź, co masz u siebie. Cloudflare może też dopisywać do Twojego robots.txt zarządzane reguły dla botów treningowych. Search Console może wtedy zgłaszać „Nie rozpoznano składni” przy dodatkowych liniach z sygnałami treści, co zwykle nie jest problemem.
Poza Cloudflare zajrzyj do wtyczek bezpieczeństwa w WordPressie, na przykład Wordfence, do zapory w panelu hostingu i do ochrony przed botami w CDN. Każda z nich może blokować nieznane nagłówki.
Jak sprawdzić, czy boty AI odwiedzają Twoją stronę
- Nasze narzędzie: sprawdzanie botów AI czyta Twój robots.txt i pokazuje dostęp dla każdego bota z tabeli.
- Logi serwera: w panelu hostingu znajdziesz logi dostępu. Wyszukaj w nich nazwy GPTBot, OAI-SearchBot, ClaudeBot i PerplexityBot. Brak wizyt przez kilka tygodni przy otwartym robots.txt to sygnał, żeby sprawdzić zaporę.
- Cloudflare: jeśli korzystasz z Cloudflare, w sekcji o crawlerach AI zobaczysz, które boty odwiedzają stronę i ile razy zostały zablokowane.
- Weryfikacja IP: porównaj adres z logów z listą publikowaną przez firmę. Fałszywe boty często podszywają się pod znane nazwy.
Co dalej
Prawidłowy robots.txt to warunek, żeby AI w ogóle mogło Cię polecić. Sam dostęp nie wystarczy. Liczy się też to, co bot znajdzie na stronie i w innych miejscach w sieci. Zobacz, jak wygląda to u Ciebie: darmowy test widoczności w AI czyta Twoją stronę, zadaje ChatGPT i Gemini pięć pytań Twoich klientów i pokazuje, czy AI Cię poleca. Przy okazji możesz dodać plik z opisem firmy dla modeli, o którym piszemy w poradniku o llms.txt.
Najczęstsze pytania
Co to jest GPTBot?
+
GPTBot to robot OpenAI, który zbiera publiczne treści do trenowania modeli. Jego token w robots.txt to GPTBot. Za widoczność w wyszukiwaniu ChatGPT odpowiada inny bot, OAI-SearchBot.
Czy zablokowanie GPTBot usunie mnie z ChatGPT?
+
Według dokumentacji OpenAI nie. GPTBot służy do trenowania modeli, a strony do odpowiedzi z wyszukiwaniem pobiera OAI-SearchBot. Możesz zablokować GPTBot i zostawić OAI-SearchBot, a wtedy Twoja strona dalej może pojawiać się w odpowiedziach ChatGPT.
Jak zablokować boty AI w robots.txt?
+
Dodaj do robots.txt grupę z nazwą bota i regułą Disallow: /, na przykład User-agent: GPTBot i w następnej linii Disallow: /. Każdy bot ma osobną nazwę, więc blokujesz je pojedynczo. Pamiętaj, że robots.txt to prośba, której przestrzegają uczciwe boty. Do twardej blokady potrzebujesz zapory, na przykład w Cloudflare.
Czy Google-Extended wpływa na AI Overviews?
+
Według Google Google-Extended nie wpływa na obecność w wyszukiwarce i nie jest sygnałem rankingowym. Steruje tym, czy treści mogą trenować modele Gemini i służyć do ugruntowania odpowiedzi w Gemini. Na AI Overviews wpływasz przez dostęp Googlebota i ustawienia fragmentów, takie jak nosnippet.
Ile trwa, zanim zmiana w robots.txt zadziała?
+
OpenAI podaje, że zmiana dla wyszukiwania zaczyna działać po około 24 godzinach. Perplexity pisze o maksymalnie 24 godzinach. Inne firmy nie podają czasu, więc zakładaj kilka dni.
Czy mała firma powinna wpuszczać boty AI?
+
Boty wyszukiwania i boty użytkownika tak, jeśli chcesz, żeby AI polecało Twoją firmę. Decyzja o botach treningowych należy do Ciebie i nie usuwa Cię z odpowiedzi z wyszukiwaniem.