GPTBot i robots.txt: jak wpuścić lub zablokować boty AI

Część botów AI zbiera dane do trenowania modeli, a część buduje odpowiedzi dla Twoich klientów. Pokazujemy, jak ustawić robots.txt, żeby zablokować tylko to, co chcesz.

AmIPicked · 7 min czytania · aktualizacja

Wpis o GPTBot w robots.txt to dziś za mało. OpenAI ma cztery boty, Anthropic trzy, Perplexity dwa, a Google steruje AI osobnym tokenem. Każdy robi coś innego, więc jedna linijka skopiowana z artykułu z 2023 roku może wyciąć Twoją stronę z odpowiedzi ChatGPT. Ten poradnik pokazuje, który bot do czego służy, jak go wpuścić lub zablokować i jak sprawdzić, czy robots.txt robi to, co myślisz.

Najpierw sprawdź swój plik. Nasze darmowe sprawdzanie botów AI w kilka sekund pokaże, które boty mają dostęp do Twojej strony.

Trzy rodzaje botów AI

Boty treningowe zbierają publiczne treści, z których powstają kolejne wersje modeli. Blokada oznacza, że Twoje teksty nie trafią do przyszłych danych treningowych.

Boty wyszukiwania pobierają strony, żeby ChatGPT, Claude czy Perplexity mogły je cytować w odpowiedziach z wyszukiwaniem. Blokada oznacza, że model nie zacytuje Twojej strony i trudniej mu będzie Cię polecić.

Boty użytkownika otwierają stronę, gdy ktoś w czacie wklei link albo poprosi model o sprawdzenie konkretnego adresu. Działają na prośbę człowieka, więc część firm zastrzega, że robots.txt może ich nie dotyczyć.

Tabela botów AI: nazwy w robots.txt i do czego służą

Stan według dokumentacji firm w listopadzie 2026 roku:

Token w robots.txtFirmaRodzajCo się dzieje po zablokowaniu
OAI-SearchBotOpenAIwyszukiwaniestrona nie pojawia się w odpowiedziach wyszukiwania ChatGPT, najwyżej jako zwykły link nawigacyjny
GPTBotOpenAItreningtreści nie trafiają do trenowania modeli
ChatGPT-UserOpenAIużytkownikOpenAI zaznacza, że reguły robots.txt mogą go nie dotyczyć
OAI-AdsBotOpenAIreklamysprawdza tylko strony docelowe reklam w ChatGPT, nie trenuje modeli
Claude-SearchBotAnthropicwyszukiwaniestrona nie jest indeksowana do wyszukiwania w Claude
ClaudeBotAnthropictreningtreści nie trafiają do przyszłych danych treningowych
Claude-UserAnthropicużytkownikClaude nie pobierze strony na prośbę użytkownika
PerplexityBotPerplexitywyszukiwaniestrona nie pojawia się w wynikach Perplexity
Perplexity-UserPerplexityużytkownikwedług Perplexity zwykle ignoruje robots.txt, bo działa na prośbę człowieka
Google-ExtendedGoogletrening i ugruntowanie Gemininie wpływa na wyszukiwarkę Google ani na ranking
Applebot-ExtendedAppletreningApple nie użyje treści do trenowania swoich modeli
CCBotCommon Crawlzbiór danychz otwartego zbioru Common Crawl korzysta wiele firm trenujących modele
meta-externalagentMetatreningtreści nie trafiają do modeli Meta
BytespiderByteDancetreningdotyczy modeli ByteDance
AmazonbotAmazonróżne usługi, w tym AIstrona nie trafi do usług Amazona, na przykład asystenta Alexa

Google-Extended to wyjątek. Nie jest osobnym robotem, tylko tokenem w robots.txt, który czytają zwykłe roboty Google. AI Overviews i tryb AI w wyszukiwarce korzystają z tego, co pobiera Googlebot. Więcej o tym w poradniku o AI Overviews.

GPTBot user agent i pełny nagłówek

W robots.txt wpisujesz sam token, na przykład GPTBot. W logach serwera zobaczysz dłuższy nagłówek User-Agent, w którym jest ten sam token i numer wersji, na przykład GPTBot/1.4. Numer może się zmieniać, więc reguły pisz zawsze dla samej nazwy. OpenAI publikuje listy adresów IP swoich botów (openai.com/gptbot.json, openai.com/searchbot.json, openai.com/chatgpt-user.json). Anthropic i Perplexity robią to samo. Po nich rozpoznasz, czy ruch z nagłówkiem GPTBot jest prawdziwy.

Czy wpuścić boty AI na stronę

Dla małej firmy, która chce, żeby AI ją polecało, odpowiedź jest prosta. Boty wyszukiwania i boty użytkownika wpuszczasz zawsze. Bez nich ChatGPT, Claude i Perplexity nie przeczytają Twojej strony, kiedy klient zapyta o usługę w Twoim mieście.

Boty treningowe to osobna decyzja. Wpuszczenie ich może z czasem sprawić, że model będzie kojarzył Twoją markę także bez wyszukiwania. Zablokowanie chroni treści, nad którymi pracujesz, na przykład płatne materiały czy autorskie artykuły. Na widoczność w odpowiedziach z wyszukiwaniem ta decyzja nie wpływa.

Gotowe reguły robots.txt do skopiowania

Wariant 1: wpuszczasz wszystkie boty. Jeśli robots.txt nie wspomina o botach AI i nie blokuje wszystkiego dla gwiazdki, boty AI mają dostęp. Wystarczy zwykły plik:

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

Sitemap: https://twojadomena.pl/sitemap.xml

Wariant 2: blokujesz trening, zostawiasz odpowiedzi AI. Najczęstszy wybór firm, które chcą być polecane, a nie chcą oddawać treści do trenowania:

User-agent: GPTBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: Google-Extended
Disallow: /

User-agent: Applebot-Extended
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: meta-externalagent
Disallow: /

User-agent: Bytespider
Disallow: /

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

Sitemap: https://twojadomena.pl/sitemap.xml

OAI-SearchBot, ChatGPT-User, Claude-SearchBot, Claude-User i PerplexityBot nie mają tu własnych grup, więc korzystają z reguł dla gwiazdki i mają dostęp.

Wariant 3: blokujesz tylko część strony. Przydaje się, gdy masz strefę dla klientów albo płatne materiały:

User-agent: GPTBot
Disallow: /materialy-dla-klientow/

User-agent: ClaudeBot
Disallow: /materialy-dla-klientow/

Wariant 4: spowalniasz bota, który za mocno obciąża serwer. Anthropic obsługuje nieoficjalną regułę Crawl-delay:

User-agent: ClaudeBot
Crawl-delay: 1

Blokady wszystkich botów AI naraz nie polecamy firmom, które chcą być widoczne w AI. Jeśli jednak tego potrzebujesz, dopisz grupy z Disallow: / także dla OAI-SearchBot, Claude-SearchBot i PerplexityBot i licz się z tym, że znikniesz z ich odpowiedzi.

Pułapka: bot z własną grupą nie czyta reguł dla gwiazdki

Robot szuka w robots.txt grupy ze swoją nazwą. Jeśli ją znajdzie, stosuje tylko tę grupę, a reguły dla User-agent: * ignoruje. Przykład: w grupie dla gwiazdki blokujesz /koszyk/, a dla GPTBot dodajesz osobną grupę z jedną regułą. GPTBot nie zobaczy wtedy blokady koszyka. Jeśli tworzysz grupę dla konkretnego bota, powtórz w niej reguły, które mają go dotyczyć.

Drugi częsty błąd to blokada wszystkiego dla gwiazdki, czyli User-agent: * z Disallow: /, zostawiona po pracach nad stroną. Taki zapis wycina z AI i z Google wszystkie boty, które nie mają własnej grupy.

Jak edytować robots.txt w WordPressie

WordPress tworzy wirtualny robots.txt, którego nie ma na dysku. Masz trzy sposoby na zmiany:

  1. Yoast SEO: w menu wtyczki otwórz narzędzia i edytor plików. Tam utworzysz i zmienisz robots.txt.
  2. Rank Math: w ustawieniach ogólnych znajdziesz sekcję edycji robots.txt.
  3. Plik na serwerze: wgraj robots.txt przez FTP lub menedżer plików do katalogu głównego, tego samego co wp-config.php. Fizyczny plik ma pierwszeństwo przed wirtualnym i wtedy edytor we wtyczce może nie działać.

Nazwy menu zmieniają się między wersjami wtyczek. Jeśli ich nie widzisz, wpisz „robots.txt” w wyszukiwarce ustawień. Po zapisaniu otwórz twojadomena.pl/robots.txt i sprawdź, czy widać nową wersję. Niektóre wtyczki cache i CDN pokazują starą przez kilka godzin.

Cloudflare i zapory mogą blokować boty bez Twojej wiedzy

robots.txt to prośba. Zapora działa jak zamek w drzwiach i blokuje bota, zanim ten w ogóle przeczyta robots.txt. Dlatego zdarza się, że plik jest w porządku, a ChatGPT i tak nie widzi strony.

W Cloudflare sprawdź ustawienia dostępu dla crawlerów i agentów AI. Panel dzieli boty na wyszukiwanie, agentów i trening, a dla każdej grupy możesz wybrać blokadę, blokadę tylko na stronach z reklamami albo dostęp. Zgodnie z dokumentacją z listopada 2026 roku nowe domeny mają domyślnie dostęp we wszystkich trzech grupach, ale ustawienia domyślne zmieniały się już w przeszłości, więc sprawdź, co masz u siebie. Cloudflare może też dopisywać do Twojego robots.txt zarządzane reguły dla botów treningowych. Search Console może wtedy zgłaszać „Nie rozpoznano składni” przy dodatkowych liniach z sygnałami treści, co zwykle nie jest problemem.

Poza Cloudflare zajrzyj do wtyczek bezpieczeństwa w WordPressie, na przykład Wordfence, do zapory w panelu hostingu i do ochrony przed botami w CDN. Każda z nich może blokować nieznane nagłówki.

Jak sprawdzić, czy boty AI odwiedzają Twoją stronę

  • Nasze narzędzie: sprawdzanie botów AI czyta Twój robots.txt i pokazuje dostęp dla każdego bota z tabeli.
  • Logi serwera: w panelu hostingu znajdziesz logi dostępu. Wyszukaj w nich nazwy GPTBot, OAI-SearchBot, ClaudeBot i PerplexityBot. Brak wizyt przez kilka tygodni przy otwartym robots.txt to sygnał, żeby sprawdzić zaporę.
  • Cloudflare: jeśli korzystasz z Cloudflare, w sekcji o crawlerach AI zobaczysz, które boty odwiedzają stronę i ile razy zostały zablokowane.
  • Weryfikacja IP: porównaj adres z logów z listą publikowaną przez firmę. Fałszywe boty często podszywają się pod znane nazwy.

Co dalej

Prawidłowy robots.txt to warunek, żeby AI w ogóle mogło Cię polecić. Sam dostęp nie wystarczy. Liczy się też to, co bot znajdzie na stronie i w innych miejscach w sieci. Zobacz, jak wygląda to u Ciebie: darmowy test widoczności w AI czyta Twoją stronę, zadaje ChatGPT i Gemini pięć pytań Twoich klientów i pokazuje, czy AI Cię poleca. Przy okazji możesz dodać plik z opisem firmy dla modeli, o którym piszemy w poradniku o llms.txt.

Najczęstsze pytania

Co to jest GPTBot?

+

GPTBot to robot OpenAI, który zbiera publiczne treści do trenowania modeli. Jego token w robots.txt to GPTBot. Za widoczność w wyszukiwaniu ChatGPT odpowiada inny bot, OAI-SearchBot.

Czy zablokowanie GPTBot usunie mnie z ChatGPT?

+

Według dokumentacji OpenAI nie. GPTBot służy do trenowania modeli, a strony do odpowiedzi z wyszukiwaniem pobiera OAI-SearchBot. Możesz zablokować GPTBot i zostawić OAI-SearchBot, a wtedy Twoja strona dalej może pojawiać się w odpowiedziach ChatGPT.

Jak zablokować boty AI w robots.txt?

+

Dodaj do robots.txt grupę z nazwą bota i regułą Disallow: /, na przykład User-agent: GPTBot i w następnej linii Disallow: /. Każdy bot ma osobną nazwę, więc blokujesz je pojedynczo. Pamiętaj, że robots.txt to prośba, której przestrzegają uczciwe boty. Do twardej blokady potrzebujesz zapory, na przykład w Cloudflare.

Czy Google-Extended wpływa na AI Overviews?

+

Według Google Google-Extended nie wpływa na obecność w wyszukiwarce i nie jest sygnałem rankingowym. Steruje tym, czy treści mogą trenować modele Gemini i służyć do ugruntowania odpowiedzi w Gemini. Na AI Overviews wpływasz przez dostęp Googlebota i ustawienia fragmentów, takie jak nosnippet.

Ile trwa, zanim zmiana w robots.txt zadziała?

+

OpenAI podaje, że zmiana dla wyszukiwania zaczyna działać po około 24 godzinach. Perplexity pisze o maksymalnie 24 godzinach. Inne firmy nie podają czasu, więc zakładaj kilka dni.

Czy mała firma powinna wpuszczać boty AI?

+

Boty wyszukiwania i boty użytkownika tak, jeśli chcesz, żeby AI polecało Twoją firmę. Decyzja o botach treningowych należy do Ciebie i nie usuwa Cię z odpowiedzi z wyszukiwaniem.

Czytaj dalej