Amzn-SearchBot: token de robots, verificacao, permitir ou bloquear
Esta pagina foi traduzida automaticamente. Os numeros e as provas vem sem alteracao das observacoes guardadas.
Amzn-SearchBot e um rastreador de IA operado por Amazon. Seu token de robots.txt e Amzn-SearchBot, e a documentacao do fornecedor que baixamos em 2026-09-17 e a fonte de cada afirmacao desta pagina.
| Token de robots | Amzn-SearchBot |
|---|---|
| Fornecedor | Amazon |
| Finalidade | search index |
| Verificacao documentada | faixas de IP publicadas |
| Documentacao do fornecedor verificada pela ultima vez | 2026-09-17 |
| Parcela dos dominios lidos que o bloqueiam para / | 4.3% of 12373 |
| Last verified |
Identidade
| Token de robots | Amzn-SearchBot |
|---|---|
| Comparado como | amzn-searchbot |
| Fornecedor | Amazon |
| Finalidade | search index |
| Documentacao | https://developer.amazon.com/amazonbot |
| Verificacao documentada | faixas de IP publicadas: https://developer.amazon.com/amazonbot/searchbot-ip-addresses/ |
Vendor text fetched on 2026-09-17: 'Amzn-SearchBot is used to improve search experiences in Amazon products and services.' The same page states 'Amzn-SearchBot does not crawl content for generative AI model training', so no training purpose is recorded here. It is covered by the page's robots.txt section: 'Automated crawling from these listed user agents respects the Robots Exclusion Protocol, honoring the user-agent and the allow/disallow directives.' Documented UA sample contains 'compatible; Amzn-SearchBot/0.1'.
Permitir ou bloquear
User-agent: Amzn-SearchBot Allow: /
User-agent: Amzn-SearchBot Disallow: /
Uma regra do robots.txt e um pedido que um rastreador bem comportado atende. Nao e um controle de acesso, e esta pagina nao diz a ninguem o que escolher.
Build a robots.txt with Amzn-SearchBot and every other documented token
Perguntas
O Amzn-SearchBot respeita o robots.txt?
A documentacao do fornecedor em https://developer.amazon.com/amazonbot afirma que o Amzn-SearchBot respeita o robots.txt. Baixamos essa pagina e ela respondeu ao nosso verificador em 2026-09-17. Isto registra o que o fornecedor documenta, nao o que uma requisicao especifica fez.
Como permito o Amzn-SearchBot no robots.txt?
Adicione este grupo ao robots.txt na raiz do host: User-agent: Amzn-SearchBot Allow: /. Pela RFC 9309 o token e comparado sem diferenciar maiusculas como subcadeia do user agent, e vence a regra correspondente mais longa.
Como bloqueio o Amzn-SearchBot no robots.txt?
Adicione este grupo ao robots.txt na raiz do host: User-agent: Amzn-SearchBot Disallow: /. Uma regra do robots.txt e um pedido que um rastreador bem comportado atende; nao e um controle de acesso.
Como verifico se uma requisicao veio mesmo do Amzn-SearchBot?
O fornecedor publica em https://developer.amazon.com/amazonbot/searchbot-ip-addresses/ as faixas de enderecos IP de onde este rastreador busca. Compare o endereco da requisicao com esse arquivo. Uma cadeia de user agent sozinha nao prova nada, porque qualquer um pode envia la.
O que medimos
Dos 12373 dominios cadastrados cujo robots.txt lemos, 534 bloqueiam o Amzn-SearchBot para / e 11839 o permitem, ou seja 4.3% bloqueados, semana 2026-W41. Apenas contagens: nenhum dominio e nomeado.
O indice semanal de acesso dos rastreadores de IA
Fontes
| Fonte | Tipo | HTTP | Verificado | Observacao |
|---|---|---|---|---|
| https://developer.amazon.com/amazonbot | vendor | 200 | 2026-09-17 | 9 occurrences of Amazonbot, 8 of Amzn-SearchBot and 7 of Amzn-User; robots.txt discussed 10 times; the page names one published IP address URL per user agent |
| https://developer.amazon.com/amazonbot/searchbot-ip-addresses/ | vendor | 200 | 2026-09-17 | the published IP list for this user agent, printed as JSON inside a code block on the page rather than served as a JSON document: 816 prefixes under a prefixes array with an ip_prefix field, creationTime 2026-09-08. Identical bytes and hash on two fetches on 2026-09-17, so it is not a volatile source; also refreshed weekly into data/bot_ranges.json |
Dados livres
- The AEO Watch dataset
- Tranco top 1,000 AI crawler policy (CSV, CC BY 4.0)
- The AEO Watch API
- The checker as a command line tool (one file, no install)
Verificar um dominio com todos os tokens
Check your own site
The same checks, run on your domain now: what robots.txt tells each AI crawler, whether the edge answers them, and whether the text is readable without JavaScript. Free, no signup.
Limits: 8 checks and 5 different domains per address per hour; a repeat of the same domain inside 7 days is answered from what we already hold.
O AEO Watch e um monitor independente e factual. Nao tem vinculo com nenhum fornecedor de rastreadores, nao e endossado por nenhum e nao fala por nenhum. Cada afirmacao e uma observacao com a data em que foi feita e a prova bruta por tras dela: uma linha do robots.txt, um codigo de estado HTTP, um cabecalho. Aqui nao ha notas, classificacoes ou vereditos, e nada nesta pagina e aconselhamento. Um site pode pedir exclusao a qualquer momento e a exclusao e respeitada de forma automatica e permanente.