Applebot-Extended: token de robots, verificacao, permitir ou bloquear

Esta pagina foi traduzida automaticamente. Os numeros e as provas vem sem alteracao das observacoes guardadas.

Applebot-Extended e um rastreador de IA operado por Apple. Seu token de robots.txt e Applebot-Extended, e a documentacao do fornecedor que baixamos em 2026-09-06 e a fonte de cada afirmacao desta pagina.

Token de robotsApplebot-Extended
FornecedorApple
Finalidadetraining corpus
Verificacao documentadaDNS reverso
Documentacao do fornecedor verificada pela ultima vez2026-09-06
Parcela dos dominios lidos que o bloqueiam para /16.4% of 128
Last verified

Identidade

Token de robotsApplebot-Extended
Comparado comoapplebot-extended
FornecedorApple
Finalidadetraining corpus
Documentacaohttps://support.apple.com/en-us/119829
Verificacao documentadaDNS reverso (.applebot.apple.com)

probe_supported is false on the vendor's own evidence: 'Applebot-Extended does not crawl webpages.' It is a robots.txt control token over the use of already crawled content in Apple generative models. Reverse DNS suffix is the one app/botverify.py forward confirms.

Permitir ou bloquear

User-agent: Applebot-Extended
Allow: /
User-agent: Applebot-Extended
Disallow: /

Uma regra do robots.txt e um pedido que um rastreador bem comportado atende. Nao e um controle de acesso, e esta pagina nao diz a ninguem o que escolher.

Perguntas

O Applebot-Extended respeita o robots.txt?

A documentacao do fornecedor em https://support.apple.com/en-us/119829 afirma que o Applebot-Extended respeita o robots.txt. Baixamos essa pagina e ela respondeu ao nosso verificador em 2026-09-06. Isto registra o que o fornecedor documenta, nao o que uma requisicao especifica fez.

Como permito o Applebot-Extended no robots.txt?

Adicione este grupo ao robots.txt na raiz do host: User-agent: Applebot-Extended Allow: /. Pela RFC 9309 o token e comparado sem diferenciar maiusculas como subcadeia do user agent, e vence a regra correspondente mais longa.

Como bloqueio o Applebot-Extended no robots.txt?

Adicione este grupo ao robots.txt na raiz do host: User-agent: Applebot-Extended Disallow: /. Uma regra do robots.txt e um pedido que um rastreador bem comportado atende; nao e um controle de acesso.

Como verifico se uma requisicao veio mesmo do Applebot-Extended?

O fornecedor documenta a verificacao por DNS reverso: resolva o endereco da requisicao, confira se o nome termina em .applebot.apple.com e resolva esse nome de novo para confirmar que ele volta ao mesmo endereco.

O que medimos

Dos 128 dominios cadastrados cujo robots.txt lemos, 21 bloqueiam o Applebot-Extended para / e 107 o permitem, ou seja 16.4% bloqueados, semana 2026-W37. Apenas contagens: nenhum dominio e nomeado.

O indice semanal de acesso dos rastreadores de IA

Fontes

FonteTipoHTTPVerificadoObservacao
https://support.apple.com/en-us/119829 vendor200 2026-09-0613 occurrences of Applebot-Extended in the fetched body
https://darkvisitors.com/agents/applebot-extended aggregator200 2026-09-06corroboration only; volatile source: identical byte count but a different content hash on every fetch (verified twice on 2026-09-06), so the refresher compares byte counts for it, not hashes

Dados livres

Verificar um dominio com todos os tokens

O AEO Watch e um monitor independente e factual. Nao tem vinculo com nenhum fornecedor de rastreadores, nao e endossado por nenhum e nao fala por nenhum. Cada afirmacao e uma observacao com a data em que foi feita e a prova bruta por tras dela: uma linha do robots.txt, um codigo de estado HTTP, um cabecalho. Aqui nao ha notas, classificacoes ou vereditos, e nada nesta pagina e aconselhamento. Um site pode pedir exclusao a qualquer momento e a exclusao e respeitada de forma automatica e permanente.

Cite this
Applebot-Extended: token de robots, verificacao e como permitir ou bloquear - https://bikoosh.com/pt/aeo/crawler/applebot-extended
<a href="https://bikoosh.com/pt/aeo/crawler/applebot-extended">Applebot-Extended: token de robots, verificacao e como permitir ou bloquear</a>
[Applebot-Extended: token de robots, verificacao e como permitir ou bloquear](https://bikoosh.com/pt/aeo/crawler/applebot-extended)
Applebot-Extended: token de robots, verificacao e como permitir ou bloquear. Bikoosh. Retrieved 2026-09-07, from https://bikoosh.com/pt/aeo/crawler/applebot-extended