Amazonbot: robots-token, verificatie, toestaan of blokkeren
Deze pagina is machinaal vertaald. De cijfers en het bewijs komen ongewijzigd uit de opgeslagen waarnemingen.
Amazonbot is een AI crawler die wordt beheerd door Amazon. Het robots.txt token is Amazonbot, en de documentatie van de leverancier die wij op 2026-09-06 hebben opgehaald is de bron van elke uitspraak op deze pagina.
| Robots token | Amazonbot |
|---|---|
| Leverancier | Amazon |
| Doel | search index, user-initiated fetch |
| Gedocumenteerde controle | reverse DNS |
| Documentatie van de leverancier voor het laatst gecontroleerd | 2026-09-06 |
| Aandeel van de gelezen domeinen dat het blokkeert voor / | 16.4% of 128 |
| Last verified |
Identiteit
| Robots token | Amazonbot |
|---|---|
| Vergeleken als | amazonbot |
| Leverancier | Amazon |
| Doel | search index, user-initiated fetch |
| Documentatie | https://developer.amazon.com/amazonbot |
| Gedocumenteerde controle | reverse DNS: https://developer.amazon.com/amazonbot/live-ip-addresses/ (.crawl.amazonbot.amazon) |
Vendor text fetched on 2026-09-06: 'Automated crawling from these listed user agents respects the Robots Exclusion Protocol, honoring the user-agent and the allow/disallow directives.' The reverse DNS suffix comes from app/botverify.py (existing fleet data), not from this page. The live IP address URL is referenced by the vendor page but was not fetched in this session.
Toestaan of blokkeren
User-agent: Amazonbot Allow: /
User-agent: Amazonbot Disallow: /
Een regel in robots.txt is een verzoek dat een net gedragende crawler inwilligt. Het is geen toegangscontrole, en deze pagina zegt niemand wat te kiezen.
Vragen
Volgt Amazonbot robots.txt?
De documentatie van de leverancier op https://developer.amazon.com/amazonbot stelt dat Amazonbot robots.txt respecteert. Wij hebben die pagina opgehaald en zij antwoordde onze controle op 2026-09-06. Dit legt vast wat de leverancier documenteert, niet wat een afzonderlijk verzoek deed.
Hoe sta ik Amazonbot toe in robots.txt?
Voeg deze groep toe aan de robots.txt in de hoofdmap van de host: User-agent: Amazonbot Allow: /. Volgens RFC 9309 wordt het token hoofdletterongevoelig vergeleken als deel van de user agent, en de langste passende regel wint.
Hoe blokkeer ik Amazonbot in robots.txt?
Voeg deze groep toe aan de robots.txt in de hoofdmap van de host: User-agent: Amazonbot Disallow: /. Een regel in robots.txt is een verzoek dat een net gedragende crawler inwilligt; het is geen toegangscontrole.
Hoe controleer ik of een verzoek echt van Amazonbot kwam?
De leverancier documenteert controle via reverse DNS: zoek het adres van het verzoek op, controleer of de naam eindigt op .crawl.amazonbot.amazon, en zoek die naam opnieuw op om te bevestigen dat hij naar hetzelfde adres verwijst.
Wat wij meten
Van de 128 opgenomen domeinen waarvan wij robots.txt hebben gelezen, blokkeren 21 Amazonbot voor / en staan 107 het toe, dat is 16.4% geblokkeerd, week 2026-W37. Alleen aantallen: geen enkel domein wordt genoemd.
De wekelijkse index van AI crawler toegang
Bronnen
| Bron | Type | HTTP | Gecontroleerd | Opmerking |
|---|---|---|---|---|
| https://developer.amazon.com/amazonbot | vendor | 200 | 2026-09-06 | 21 occurrences of Amazonbot; robots.txt discussed 11 times |
| https://darkvisitors.com/agents/amazonbot | aggregator | 200 | 2026-09-06 | corroboration only; volatile source: identical byte count but a different content hash on every fetch (verified twice on 2026-09-06), so the refresher compares byte counts for it, not hashes |
Vrije data
Controleer een domein tegen alle tokens
AEO Watch is een onafhankelijke, feitelijke monitor. Het is niet verbonden met een leverancier van crawlers, wordt door niemand onderschreven en spreekt namens niemand. Elke uitspraak is een waarneming met de datum waarop zij is gedaan en het ruwe bewijs erachter: een regel uit robots.txt, een HTTP statuscode, een header. Er zijn hier geen scores, geen cijfers en geen oordelen, en niets op deze pagina is advies. Een site kan zich op elk moment afmelden en die afmelding wordt automatisch en blijvend gerespecteerd.