# CCBot

## In short

CCBot to robot AI prowadzony przez Common Crawl Foundation. Jego token w pliku robots.txt to CCBot, a dokumentacja dostawcy pobrana przez nas dnia 2026-09-06 jest zrodlem kazdego stwierdzenia na tej stronie.

| Fact | Value |
| --- | --- |
| Token robots | CCBot |
| Dostawca | Common Crawl Foundation |
| Cel | training corpus, public web corpus |
| Udokumentowana weryfikacja | nie opublikowano |
| Dokumentacja dostawcy sprawdzona ostatnio | 2026-09-06 |
| Udzial odczytanych domen, ktore go blokuja dla / | 19.1% of 131 |
| Last verified | 2026-09-06 |

## Czy CCBot przestrzega pliku robots.txt?

Dokumentacja dostawcy pod adresem https://commoncrawl.org/ccbot podaje, ze CCBot przestrzega pliku robots.txt. Pobralismy te strone i odpowiedziala naszemu programowi sprawdzajacemu dnia 2026-09-06. To zapisuje, co dokumentuje dostawca, a nie to, co zrobilo pojedyncze zadanie.

## Jak zezwolic na CCBot w pliku robots.txt?

Dodaj te grupe do pliku robots.txt w katalogu glownym hosta: User-agent: CCBot
Allow: /. Zgodnie z RFC 9309 token jest porownywany bez rozroznienia wielkosci liter jako fragment ciagu user agent, a wygrywa najdluzsza pasujaca regula.

## Jak zablokowac CCBot w pliku robots.txt?

Dodaj te grupe do pliku robots.txt w katalogu glownym hosta: User-agent: CCBot
Disallow: /. Regula w pliku robots.txt jest prosba, ktora spelnia dobrze wychowany robot; nie jest kontrola dostepu.

## Jak sprawdzic, czy zadanie naprawde pochodzilo od CCBot?

Nie znalezlismy udokumentowanej metody weryfikacji dla CCBot: dostawca nie publikuje ani pliku z zakresami IP, ani konwencji odwrotnego DNS, ktore moglibysmy pobrac. Bez tego ciag user agent nie jest dowodem pochodzenia.

## Zrodlo

- https://commoncrawl.org/ccbot (HTTP 200, Sprawdzono 2026-09-06)

AEO Watch jest niezaleznym, faktograficznym monitorem. Nie jest powiazany z zadnym dostawca robotow, nie jest przez nikogo wspierany i nie wypowiada sie w niczyim imieniu. Kazde stwierdzenie jest obserwacja z data jej wykonania i surowym dowodem: wiersz pliku robots.txt, kod stanu HTTP, naglowek. Nie ma tu ocen, stopni ani wyrokow, a nic na tej stronie nie jest porada. Witryna moze w kazdej chwili zrezygnowac, a rezygnacja jest respektowana automatycznie i trwale.
