OAI-SearchBot: user agent, robots.txt e IP

OAI-SearchBot trova pagine per la ricerca di ChatGPT. Se lo blocchi, la ricerca di ChatGPT non mostra le tue pagine nelle sue risposte. Ecco come consentirlo.

Cosa fa

OAI-SearchBot è il crawler di ricerca di OpenAI. OpenAI dice che serve a far emergere i siti nei risultati delle funzioni di ricerca di ChatGPT. Non è il crawler di addestramento, che è GPTBot. OpenAI tratta ogni impostazione da sola, quindi puoi consentire OAI-SearchBot e bloccare GPTBot. Se li consenti entrambi, OpenAI dice che può usare una sola scansione per tutti e due gli usi.

User agent

Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbot
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; robots.txt; +https://openai.com/searchbot

OpenAI li indica come esempi: il numero di versione può cambiare. Il secondo ha il marcatore robots.txt, che OpenAI usa quando legge il tuo file robots.txt. Cerca OAI-SearchBot, non la stringa intera.

robots.txt

OpenAI elenca OAI-SearchBot come tag di robots.txt per gestire come il tuo sito funziona con la ricerca di ChatGPT. Dopo una modifica, i sistemi di OpenAI possono metterci circa 24 ore ad adeguarsi.

User-agent: OAI-SearchBot
Allow: /

Per bloccarlo, usa Disallow: / al posto di Allow: /.

Cosa costa bloccarlo

OpenAI dice che i siti che escludono OAI-SearchBot non vengono mostrati nelle risposte di ricerca di ChatGPT, anche se possono comparire come link di navigazione. Per comparire, OpenAI consiglia di consentirlo in robots.txt e di accettare le richieste dai suoi intervalli IP pubblicati.

Verifica e firewall

Controlla che l'IP della richiesta sia nell'elenco pubblicato da OpenAI per OAI-SearchBot. Chiunque può copiare lo user agent, solo gli indirizzi di OpenAI lo provano. Un firewall, una CDN o una regola anti-bot può bloccarlo anche se robots.txt lo consente. OpenAI chiede di consentire entrambe le cose: la regola di robots.txt e le richieste dai suoi IP.

Se usi Cloudflare, apri Security Settings > Configure AI bot policies e imposta Search su Allow (do not block). La documentazione di Cloudflare dice che dal 15 settembre 2026 bloccare Training blocca anche i crawler che fanno sia ricerca sia addestramento.

Con CrawlCoach

Su ogni piano a pagamento, CrawlCoach legge il tuo robots.txt e segnala le regole che bloccano OAI-SearchBot sulle tue pagine pubbliche presenti su Google. Richiede anche una pagina pubblica come OAI-SearchBot e come crawler normale. Se solo la richiesta di OAI-SearchBot riceve un 403, una verifica o un rifiuto simile, la lista delle correzioni ti dice che probabilmente lo blocca una regola del firewall.

Domande frequenti

Devo consentire OAI-SearchBot?

Sì, se vuoi le tue pagine nelle risposte di ricerca di ChatGPT. OpenAI dice che i siti che lo bloccano non vengono mostrati lì. Consentirlo non permette a OpenAI di addestrare i modelli sulle tue pagine: quello è GPTBot, che puoi bloccare da solo.

Che differenza c'è tra OAI-SearchBot e ChatGPT-User?

OAI-SearchBot scansiona da solo per trovare pagine per la ricerca di ChatGPT, e segue robots.txt. ChatGPT-User visita una pagina solo quando una persona in ChatGPT lo chiede, e OpenAI dice che robots.txt può non valere. Per la ricerca conta OAI-SearchBot.

Come faccio a comparire in ChatGPT?

Fai entrare OAI-SearchBot, tramite robots.txt e firewall. Poi crea pagine che rispondono chiaramente a domande vere, con il testo nell'HTML inviato dal server. Nessuna impostazione garantisce una citazione: ChatGPT sceglie cosa mostrare.

Fonti

Verificato il 8 ottobre 2026. Google cambia ogni tanto Search Console e la sua guida. Se sul tuo schermo vedi qualcosa di diverso, controlla la fonte.

OAI-SearchBot: conviene consentirlo, e come