Amzn-SearchBot: robots-Token, Verifizierung, erlauben oder sperren
Diese Seite ist maschinell uebersetzt. Die Messwerte und die Belege stammen unveraendert aus den gespeicherten Beobachtungen.
Amzn-SearchBot ist ein KI Crawler, betrieben von Amazon. Sein robots.txt Token lautet Amzn-SearchBot, und die Herstellerdokumentation, die wir am 2026-09-17 abgerufen haben, ist die Quelle jeder Aussage auf dieser Seite.
| Robots Token | Amzn-SearchBot |
|---|---|
| Hersteller | Amazon |
| Zweck | search index |
| Dokumentierte Pruefung | veroeffentlichte IP Bereiche |
| Herstellerdokumentation zuletzt geprueft | 2026-09-17 |
| Anteil der gelesenen Domains, die ihn fuer / sperren | 4.3% of 12373 |
| Last verified |
Identitaet
| Robots Token | Amzn-SearchBot |
|---|---|
| Abgeglichen als | amzn-searchbot |
| Hersteller | Amazon |
| Zweck | search index |
| Dokumentation | https://developer.amazon.com/amazonbot |
| Dokumentierte Pruefung | veroeffentlichte IP Bereiche: https://developer.amazon.com/amazonbot/searchbot-ip-addresses/ |
Vendor text fetched on 2026-09-17: 'Amzn-SearchBot is used to improve search experiences in Amazon products and services.' The same page states 'Amzn-SearchBot does not crawl content for generative AI model training', so no training purpose is recorded here. It is covered by the page's robots.txt section: 'Automated crawling from these listed user agents respects the Robots Exclusion Protocol, honoring the user-agent and the allow/disallow directives.' Documented UA sample contains 'compatible; Amzn-SearchBot/0.1'.
Erlauben oder sperren
User-agent: Amzn-SearchBot Allow: /
User-agent: Amzn-SearchBot Disallow: /
Eine Regel in der robots.txt ist eine Bitte, die ein gut erzogener Crawler befolgt. Sie ist keine Zugriffskontrolle, und diese Seite sagt niemandem, wie er sich entscheiden soll.
Build a robots.txt with Amzn-SearchBot and every other documented token
Fragen
Befolgt Amzn-SearchBot die robots.txt?
Die Herstellerdokumentation unter https://developer.amazon.com/amazonbot gibt an, dass Amzn-SearchBot die robots.txt beachtet. Wir haben diese Seite abgerufen, und sie hat unserem Pruefer am 2026-09-17 geantwortet. Das haelt fest, was der Hersteller dokumentiert, nicht was eine einzelne Anfrage getan hat.
Wie erlaube ich Amzn-SearchBot in der robots.txt?
Fuegen Sie diese Gruppe in die robots.txt im Wurzelverzeichnis des Hosts ein: User-agent: Amzn-SearchBot Allow: /. Nach RFC 9309 wird der Token ohne Beachtung der Gross und Kleinschreibung als Teilzeichenkette des User Agent verglichen, und die laengste passende Regel gewinnt.
Wie sperre ich Amzn-SearchBot in der robots.txt?
Fuegen Sie diese Gruppe in die robots.txt im Wurzelverzeichnis des Hosts ein: User-agent: Amzn-SearchBot Disallow: /. Eine Regel in der robots.txt ist eine Bitte, die ein gut erzogener Crawler befolgt; sie ist keine Zugriffskontrolle.
Wie pruefe ich, ob eine Anfrage wirklich von Amzn-SearchBot kam?
Der Hersteller veroeffentlicht unter https://developer.amazon.com/amazonbot/searchbot-ip-addresses/ die IP Bereiche, aus denen dieser Crawler abruft. Vergleichen Sie die Adresse der Anfrage mit dieser Datei. Eine User Agent Zeichenkette allein beweist nichts, denn jeder kann sie senden.
Was wir messen
Von den 12373 erfassten Domains, deren robots.txt wir gelesen haben, sperren 534 den Token Amzn-SearchBot fuer / und 11839 erlauben ihn, das sind 4.3% gesperrt, Woche 2026-W41. Nur Zahlen: keine Domain wird genannt.
Der woechentliche Index des KI Crawler Zugangs
Quellen
| Quelle | Typ | HTTP | Geprueft | Hinweis |
|---|---|---|---|---|
| https://developer.amazon.com/amazonbot | vendor | 200 | 2026-09-17 | 9 occurrences of Amazonbot, 8 of Amzn-SearchBot and 7 of Amzn-User; robots.txt discussed 10 times; the page names one published IP address URL per user agent |
| https://developer.amazon.com/amazonbot/searchbot-ip-addresses/ | vendor | 200 | 2026-09-17 | the published IP list for this user agent, printed as JSON inside a code block on the page rather than served as a JSON document: 816 prefixes under a prefixes array with an ip_prefix field, creationTime 2026-09-08. Identical bytes and hash on two fetches on 2026-09-17, so it is not a volatile source; also refreshed weekly into data/bot_ranges.json |
Freie Daten
- The AEO Watch dataset
- Tranco top 1,000 AI crawler policy (CSV, CC BY 4.0)
- The AEO Watch API
- The checker as a command line tool (one file, no install)
Eine Domain gegen alle Token pruefen
Check your own site
The same checks, run on your domain now: what robots.txt tells each AI crawler, whether the edge answers them, and whether the text is readable without JavaScript. Free, no signup.
Limits: 8 checks and 5 different domains per address per hour; a repeat of the same domain inside 7 days is answered from what we already hold.
AEO Watch ist ein unabhaengiger, faktischer Monitor. Er ist mit keinem Crawler Hersteller verbunden, wird von keinem unterstuetzt und spricht fuer keinen. Jede Aussage ist eine Beobachtung mit dem Datum, an dem sie gemacht wurde, und dem Rohbeleg dahinter: eine Zeile aus der robots.txt, ein HTTP Statuscode, ein Header. Es gibt hier keine Noten, keine Bewertungen und keine Urteile, und nichts auf dieser Seite ist eine Beratung. Eine Website kann jederzeit widersprechen, und der Widerspruch wird automatisch und dauerhaft beachtet.