OAI-SearchBot: token robots, verifica, consentire o bloccare
Questa pagina e tradotta automaticamente. I numeri e le prove provengono invariati dalle osservazioni memorizzate.
OAI-SearchBot e un crawler di IA gestito da OpenAI. Il suo token robots.txt e OAI-SearchBot, e la documentazione del fornitore che abbiamo scaricato il 2026-09-06 e la fonte di ogni affermazione in questa pagina.
| Token robots | OAI-SearchBot |
|---|---|
| Fornitore | OpenAI |
| Finalita | search index |
| Verifica documentata | intervalli IP pubblicati |
| Documentazione del fornitore verificata l'ultima volta | 2026-09-06 |
| Quota dei domini letti che lo bloccano per / | 5.5% of 128 |
| Last verified |
Identita
| Token robots | OAI-SearchBot |
|---|---|
| Confrontato come | oai-searchbot |
| Fornitore | OpenAI |
| Finalita | search index |
| Documentazione | https://platform.openai.com/docs/bots |
| Verifica documentata | intervalli IP pubblicati: https://openai.com/searchbot.json |
Builds the search surface that produces links and citations in ChatGPT. Vendor states it is not used to train foundation models.
Consentire o bloccare
User-agent: OAI-SearchBot Allow: /
User-agent: OAI-SearchBot Disallow: /
Una regola del file robots.txt e una richiesta che un crawler educato rispetta. Non e un controllo di accesso, e questa pagina non dice a nessuno cosa scegliere.
Domande
OAI-SearchBot rispetta il file robots.txt?
La documentazione del fornitore all'indirizzo https://platform.openai.com/docs/bots afferma che OAI-SearchBot rispetta il file robots.txt. Abbiamo scaricato quella pagina e ha risposto al nostro verificatore il 2026-09-06. Questo registra cio che il fornitore documenta, non cio che ha fatto una singola richiesta.
Come consento OAI-SearchBot nel file robots.txt?
Aggiungi questo gruppo al file robots.txt nella radice dell'host: User-agent: OAI-SearchBot Allow: /. Secondo la RFC 9309 il token viene confrontato senza distinzione tra maiuscole e minuscole come sottostringa dello user agent, e vince la regola corrispondente piu lunga.
Come blocco OAI-SearchBot nel file robots.txt?
Aggiungi questo gruppo al file robots.txt nella radice dell'host: User-agent: OAI-SearchBot Disallow: /. Una regola del file robots.txt e una richiesta che un crawler educato rispetta; non e un controllo di accesso.
Come verifico che una richiesta provenga davvero da OAI-SearchBot?
Il fornitore pubblica all'indirizzo https://openai.com/searchbot.json gli intervalli di indirizzi IP da cui questo crawler scarica. Confronta l'indirizzo della richiesta con quel file. Una stringa di user agent da sola non prova nulla, perche chiunque puo inviarla.
Che cosa misuriamo
Dei 128 domini censiti di cui abbiamo letto il file robots.txt, 7 bloccano OAI-SearchBot per / e 121 lo consentono, cioe il 5.5% bloccato, settimana 2026-W37. Solo conteggi: nessun dominio viene nominato.
L'indice settimanale di accesso dei crawler di IA
Fonti
| Fonte | Tipo | HTTP | Verificato | Nota |
|---|---|---|---|---|
| https://platform.openai.com/docs/bots | vendor | 200 | 2026-09-06 | 10 occurrences of OAI-SearchBot in the fetched body |
| https://openai.com/searchbot.json | vendor | 200 | 2026-09-06 | published IP ranges |
Dati liberi
Verifica un dominio con tutti i token
AEO Watch e un osservatorio indipendente e fattuale. Non e affiliato ad alcun fornitore di crawler, non e approvato da nessuno e non parla per nessuno. Ogni affermazione e un'osservazione con la data in cui e stata fatta e la prova grezza che la sostiene: una riga del file robots.txt, un codice di stato HTTP, un'intestazione. Qui non ci sono punteggi, voti o verdetti, e nulla in questa pagina e un consiglio. Un sito puo chiedere l'esclusione in qualsiasi momento e l'esclusione e rispettata in modo automatico e permanente.