# anthropic-ai

## In short

anthropic-ai ist ein KI Crawler, betrieben von Anthropic. Sein robots.txt Token lautet anthropic-ai, und die Herstellerdokumentation, die wir am 2026-09-06 abgerufen haben, ist die Quelle jeder Aussage auf dieser Seite.

| Fact | Value |
| --- | --- |
| Robots Token | anthropic-ai |
| Hersteller | Anthropic |
| Zweck | undocumented |
| Dokumentierte Pruefung | nicht veroeffentlicht |
| Herstellerdokumentation zuletzt geprueft | 2026-09-06 |
| Anteil der gelesenen Domains, die ihn fuer / sperren | 7.8% of 128 |
| Last verified | 2026-09-06 |

## Wie erlaube ich anthropic-ai in der robots.txt?

Fuegen Sie diese Gruppe in die robots.txt im Wurzelverzeichnis des Hosts ein: User-agent: anthropic-ai
Allow: /. Nach RFC 9309 wird der Token ohne Beachtung der Gross und Kleinschreibung als Teilzeichenkette des User Agent verglichen, und die laengste passende Regel gewinnt.

## Wie sperre ich anthropic-ai in der robots.txt?

Fuegen Sie diese Gruppe in die robots.txt im Wurzelverzeichnis des Hosts ein: User-agent: anthropic-ai
Disallow: /. Eine Regel in der robots.txt ist eine Bitte, die ein gut erzogener Crawler befolgt; sie ist keine Zugriffskontrolle.

## Wie pruefe ich, ob eine Anfrage wirklich von anthropic-ai kam?

Wir haben fuer anthropic-ai keine dokumentierte Pruefmethode gefunden: Der Hersteller veroeffentlicht weder eine Datei mit IP Bereichen noch eine Reverse DNS Konvention, die wir abrufen koennten. Ohne eine solche ist eine User Agent Zeichenkette kein Beleg fuer die Herkunft.

## Quelle

- https://darkvisitors.com/agents/anthropic-ai (HTTP 200, Geprueft 2026-09-06)
- https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler (HTTP 200, Geprueft 2026-09-06)

AEO Watch ist ein unabhaengiger, faktischer Monitor. Er ist mit keinem Crawler Hersteller verbunden, wird von keinem unterstuetzt und spricht fuer keinen. Jede Aussage ist eine Beobachtung mit dem Datum, an dem sie gemacht wurde, und dem Rohbeleg dahinter: eine Zeile aus der robots.txt, ein HTTP Statuscode, ein Header. Es gibt hier keine Noten, keine Bewertungen und keine Urteile, und nichts auf dieser Seite ist eine Beratung. Eine Website kann jederzeit widersprechen, und der Widerspruch wird automatisch und dauerhaft beachtet.
