Amzn-SearchBot: token de robots, verificacion, permitir o bloquear
Esta pagina esta traducida automaticamente. Las cifras y la evidencia proceden sin cambios de las observaciones almacenadas.
Amzn-SearchBot es un rastreador de IA operado por Amazon. Su token de robots.txt es Amzn-SearchBot, y la documentacion del proveedor que descargamos el 2026-09-17 es la fuente de cada afirmacion de esta pagina.
| Token de robots | Amzn-SearchBot |
|---|---|
| Proveedor | Amazon |
| Finalidad | search index |
| Verificacion documentada | rangos IP publicados |
| Documentacion del proveedor verificada por ultima vez | 2026-09-17 |
| Proporcion de dominios leidos que lo bloquean para / | 4.3% of 12373 |
| Last verified |
Identidad
| Token de robots | Amzn-SearchBot |
|---|---|
| Comparado como | amzn-searchbot |
| Proveedor | Amazon |
| Finalidad | search index |
| Documentacion | https://developer.amazon.com/amazonbot |
| Verificacion documentada | rangos IP publicados: https://developer.amazon.com/amazonbot/searchbot-ip-addresses/ |
Vendor text fetched on 2026-09-17: 'Amzn-SearchBot is used to improve search experiences in Amazon products and services.' The same page states 'Amzn-SearchBot does not crawl content for generative AI model training', so no training purpose is recorded here. It is covered by the page's robots.txt section: 'Automated crawling from these listed user agents respects the Robots Exclusion Protocol, honoring the user-agent and the allow/disallow directives.' Documented UA sample contains 'compatible; Amzn-SearchBot/0.1'.
Permitir o bloquear
User-agent: Amzn-SearchBot Allow: /
User-agent: Amzn-SearchBot Disallow: /
Una regla del archivo robots.txt es una peticion que un rastreador bien educado atiende. No es un control de acceso, y esta pagina no le dice a nadie que elegir.
Build a robots.txt with Amzn-SearchBot and every other documented token
Preguntas
Respeta Amzn-SearchBot el archivo robots.txt?
La documentacion del proveedor en https://developer.amazon.com/amazonbot indica que Amzn-SearchBot respeta el archivo robots.txt. Descargamos esa pagina y respondio a nuestro verificador el 2026-09-17. Esto registra lo que documenta el proveedor, no lo que hizo una peticion concreta.
Como permito Amzn-SearchBot en el archivo robots.txt?
Anada este grupo al archivo robots.txt en la raiz del host: User-agent: Amzn-SearchBot Allow: /. Segun la RFC 9309 el token se compara sin distinguir mayusculas como subcadena del user agent, y gana la regla coincidente mas larga.
Como bloqueo Amzn-SearchBot en el archivo robots.txt?
Anada este grupo al archivo robots.txt en la raiz del host: User-agent: Amzn-SearchBot Disallow: /. Una regla del archivo robots.txt es una peticion que un rastreador bien educado atiende; no es un control de acceso.
Como compruebo que una peticion vino realmente de Amzn-SearchBot?
El proveedor publica en https://developer.amazon.com/amazonbot/searchbot-ip-addresses/ los rangos de direcciones IP desde los que rastrea. Compare la direccion de la peticion con ese archivo. Una cadena de user agent por si sola no prueba nada, porque cualquiera puede enviarla.
Lo que medimos
De los 12373 dominios registrados cuyo archivo robots.txt hemos leido, 534 bloquean Amzn-SearchBot para / y 11839 lo permiten, es decir un 4.3% bloqueado, semana 2026-W41. Solo recuentos: no se nombra ningun dominio.
El indice semanal de acceso de los rastreadores de IA
Fuentes
| Fuente | Tipo | HTTP | Verificado | Nota |
|---|---|---|---|---|
| https://developer.amazon.com/amazonbot | vendor | 200 | 2026-09-17 | 9 occurrences of Amazonbot, 8 of Amzn-SearchBot and 7 of Amzn-User; robots.txt discussed 10 times; the page names one published IP address URL per user agent |
| https://developer.amazon.com/amazonbot/searchbot-ip-addresses/ | vendor | 200 | 2026-09-17 | the published IP list for this user agent, printed as JSON inside a code block on the page rather than served as a JSON document: 816 prefixes under a prefixes array with an ip_prefix field, creationTime 2026-09-08. Identical bytes and hash on two fetches on 2026-09-17, so it is not a volatile source; also refreshed weekly into data/bot_ranges.json |
Datos libres
- The AEO Watch dataset
- Tranco top 1,000 AI crawler policy (CSV, CC BY 4.0)
- The AEO Watch API
- The checker as a command line tool (one file, no install)
Comprobar un dominio con todos los tokens
Check your own site
The same checks, run on your domain now: what robots.txt tells each AI crawler, whether the edge answers them, and whether the text is readable without JavaScript. Free, no signup.
Limits: 8 checks and 5 different domains per address per hour; a repeat of the same domain inside 7 days is answered from what we already hold.
AEO Watch es un monitor independiente y factual. No esta afiliado a ningun proveedor de rastreadores, ninguno lo respalda y no habla en nombre de ninguno. Cada afirmacion es una observacion con la fecha en que se hizo y la prueba en bruto que la sostiene: una linea del archivo robots.txt, un codigo de estado HTTP, una cabecera. Aqui no hay puntuaciones, ni calificaciones, ni veredictos, y nada de esta pagina es un consejo. Un sitio puede excluirse en cualquier momento y la exclusion se respeta de forma automatica y permanente.