anthropic-ai: jeton robots, verification, autoriser ou bloquer

Cette page est traduite automatiquement. Les mesures et les preuves proviennent telles quelles des observations enregistrees.

anthropic-ai est un robot d'IA exploite par Anthropic. Son jeton robots.txt est anthropic-ai, et la documentation de l'editeur que nous avons telechargee le 2026-09-06 est la source de chaque affirmation de cette page.

Jeton robotsanthropic-ai
EditeurAnthropic
Finaliteundocumented
Verification documenteeaucune publiee
Documentation de l'editeur verifiee le2026-09-06
Part des domaines lus qui le bloquent pour /7.8% of 128
Last verified

Identite

Jeton robotsanthropic-ai
Compare commeanthropic-ai
EditeurAnthropic
Finaliteundocumented
DocumentationNone
Verification documenteeaucune publiee

documentation_url is null on purpose: the vendor help article fetched on 2026-09-06 documents three robots (ClaudeBot, Claude-User, Claude-SearchBot) and contains zero occurrences of 'anthropic-ai'. The token is still widely present in site robots.txt files, so it stays in the registry as a legacy token whose current behaviour the vendor does not document.

Autoriser ou bloquer

User-agent: anthropic-ai
Allow: /
User-agent: anthropic-ai
Disallow: /

Une regle du fichier robots.txt est une demande qu'un robot bien eleve respecte. Ce n'est pas un controle d'acces, et cette page ne dit a personne quoi choisir.

Questions

Comment autoriser anthropic-ai dans le fichier robots.txt?

Ajoutez ce groupe au fichier robots.txt place a la racine de l'hote: User-agent: anthropic-ai Allow: /. Selon la RFC 9309, le jeton est compare sans tenir compte de la casse comme sous chaine du user agent, et la regle correspondante la plus longue l'emporte.

Comment bloquer anthropic-ai dans le fichier robots.txt?

Ajoutez ce groupe au fichier robots.txt place a la racine de l'hote: User-agent: anthropic-ai Disallow: /. Une regle du fichier robots.txt est une demande qu'un robot bien eleve respecte; ce n'est pas un controle d'acces.

Comment verifier qu'une requete vient reellement de anthropic-ai?

Nous n'avons trouve aucune methode de verification documentee pour anthropic-ai: l'editeur ne publie ni fichier de plages IP ni convention de DNS inverse que nous puissions telecharger. Sans cela, une chaine de user agent ne prouve pas l'origine.

Ce que nous mesurons

Sur les 128 domaines recenses dont nous avons lu le fichier robots.txt, 10 bloquent anthropic-ai pour / et 118 l'autorisent, soit 7.8% de blocage, semaine 2026-W37. Uniquement des comptes: aucun domaine n'est nomme.

L'index hebdomadaire de l'acces des robots d'IA

Sources

SourceTypeHTTPVerifieRemarque
https://darkvisitors.com/agents/anthropic-ai aggregator200 2026-09-06only source found; third party, not the vendor; volatile source: identical byte count but a different content hash on every fetch (verified twice on 2026-09-06), so the refresher compares byte counts for it, not hashes
https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler vendor200 2026-09-06negative evidence: 0 occurrences of anthropic-ai

Donnees libres

Verifier un domaine pour tous les jetons

AEO Watch est un observateur independant et factuel. Il n'est affilie a aucun editeur de robot, n'est soutenu par aucun et ne parle au nom d'aucun. Chaque affirmation est une observation portant la date a laquelle elle a ete faite et la preuve brute qui la fonde: une ligne du fichier robots.txt, un code d'etat HTTP, un en tete. Il n'y a ici ni note, ni classement, ni verdict, et rien sur cette page n'est un conseil. Un site peut se retirer a tout moment et ce retrait est respecte automatiquement et definitivement.

Cite this
anthropic-ai: jeton robots, verification et comment l'autoriser ou le bloquer - https://bikoosh.com/fr/aeo/crawler/anthropic-ai
<a href="https://bikoosh.com/fr/aeo/crawler/anthropic-ai">anthropic-ai: jeton robots, verification et comment l'autoriser ou le bloquer</a>
[anthropic-ai: jeton robots, verification et comment l'autoriser ou le bloquer](https://bikoosh.com/fr/aeo/crawler/anthropic-ai)
anthropic-ai: jeton robots, verification et comment l'autoriser ou le bloquer. Bikoosh. Retrieved 2026-09-07, from https://bikoosh.com/fr/aeo/crawler/anthropic-ai