ClaudeBot: robots jetonu, dogrulama, izin verme veya engelleme
Bu sayfa makine cevirisidir. Sayilar ve kanitlar kayitli gozlemlerden oldugu gibi gelir.
ClaudeBot, Anthropic tarafindan isletilen bir yapay zeka tarayicisidir. robots.txt belirteci ClaudeBot olup 2026-09-06 tarihinde indirdigimiz saglayici belgeleri bu sayfadaki her ifadenin kaynagidir.
| Robots belirteci | ClaudeBot |
|---|---|
| Saglayici | Anthropic |
| Amac | training corpus |
| Belgelenmis dogrulama | yayimlanmamis |
| Saglayici belgelerinin son dogrulanmasi | 2026-09-06 |
| Okunan alan adlari icinde / yolunu engelleyenlerin orani | 17.2% of 128 |
| Last verified |
Kimlik
| Robots belirteci | ClaudeBot |
|---|---|
| Su sekilde eslesir | claudebot |
| Saglayici | Anthropic |
| Amac | training corpus |
| Belgeler | https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler |
| Belgelenmis dogrulama | yayimlanmamis |
Vendor text: 'ClaudeBot helps enhance the utility and safety of our generative AI models by collecting web content that could potentially contribute to their training.' No published IP ranges and no reverse DNS convention were found on 2026-09-06, so a hit carrying this token is recorded as unverifiable, never as verified (same rule as app/botverify.py).
Izin ver veya engelle
User-agent: ClaudeBot Allow: /
User-agent: ClaudeBot Disallow: /
robots.txt kurali, iyi davranan bir tarayicinin yerine getirdigi bir ricadir. Bir erisim denetimi degildir ve bu sayfa kimseye ne secmesi gerektigini soylemez.
Sorular
ClaudeBot robots.txt kurallarina uyar mi?
https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler adresindeki saglayici belgeleri ClaudeBot icin robots.txt dosyasina uyuldugunu belirtiyor. Bu sayfayi indirdik ve 2026-09-06 tarihinde denetleyicimize yanit verdi. Bu, saglayicinin belgeledigi seyin kaydidir, tek bir istegin ne yaptiginin degil.
robots.txt icinde ClaudeBot nasil izin verilir?
Bu grubu sunucunun kokundeki robots.txt dosyasina ekleyin: User-agent: ClaudeBot Allow: /. RFC 9309 uyarinca belirtec, kullanici aracisi dizesinin bir parcasi olarak buyuk kucuk harf ayrimi gozetmeden eslesir ve en uzun eslesen kural gecerlidir.
robots.txt icinde ClaudeBot nasil engellenir?
Bu grubu sunucunun kokundeki robots.txt dosyasina ekleyin: User-agent: ClaudeBot Disallow: /. robots.txt kurali, iyi davranan bir tarayicinin yerine getirdigi bir ricadir; bir erisim denetimi degildir.
Bir istegin gercekten ClaudeBot tarafindan gonderildigini nasil dogrularim?
ClaudeBot icin belgelenmis bir dogrulama yontemi bulamadik: saglayici, indirebilecegimiz ne bir IP aralik dosyasi ne de bir ters DNS uzlasimi yayimliyor. Bunlar olmadan kullanici aracisi dizesi koken kaniti degildir.
Neyi olcuyoruz
robots.txt dosyasini okudugumuz 128 kayitli alan adindan 22 tanesi ClaudeBot icin / yolunu engelliyor, 106 tanesi izin veriyor, yani yuzde 17.2 engelli, hafta 2026-W37. Yalnizca sayilar: hicbir alan adi anilmaz.
Haftalik yapay zeka tarayici erisim endeksi
Kaynaklar
| Kaynak | Tur | HTTP | Dogrulandi | Not |
|---|---|---|---|---|
| https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler | vendor | 200 | 2026-09-06 | URL taken from the support.claude.com sitemap, not guessed; 12 occurrences of ClaudeBot and the exact snippet 'User-agent: ClaudeBot Disallow: /' in the body |
| https://darkvisitors.com/agents/claudebot | aggregator | 200 | 2026-09-06 | third-party aggregator, redirects to knownagents.com; corroboration only; volatile source: identical byte count but a different content hash on every fetch (verified twice on 2026-09-06), so the refresher compares byte counts for it, not hashes |
Ucretsiz veri
Bir alan adini tum jetonlara karsi kontrol et
AEO Watch bagimsiz ve olgusal bir izleme hizmetidir. Hicbir tarayici saglayicisiyla baglantili degildir, hicbiri tarafindan desteklenmez ve hicbiri adina konusmaz. Her ifade, yapildigi tarihi ve arkasindaki ham kaniti tasiyan bir gozlemdir: bir robots.txt satiri, bir HTTP durum kodu, bir baslik. Burada puan, not ve hukum yoktur ve bu sayfadaki hicbir sey tavsiye degildir. Bir site istedigi anda kapsam disinda kalmayi isteyebilir ve bu istek otomatik ve kalici olarak yerine getirilir.