Se il tuo sito è protetto da Cloudflare — circa il 20% di tutti i siti web lo è — qualcosa di importante cambia il 15 settembre 2026 e la maggior parte dei proprietari di piccole imprese non ne è a conoscenza.
Il 1° luglio 2026, Cloudflare ha annunciato la sostituzione del classico toggle unico «Blocca tutti i bot IA» con tre controlli indipendenti: crawler di Ricerca (Search), di Addestramento (Training) e di Agente (Agent). Le nuove impostazioni predefinite entrano in vigore il 15 settembre. Per la maggior parte dei siti si tratta di una transizione fluida. Ma per un gruppo specifico — siti su Cloudflare con pubblicità che avevano attivato il vecchio toggle — esiste un rischio serio: bloccare i crawler di addestramento può bloccare anche Googlebot, Applebot e Bingbot. (Blog di Cloudflare, 1 luglio 2026)
I tre tipi di crawler
- Search: Indicizzano il sito per i risultati di ricerca. Storicamente Googlebot, Bingbot e Applebot — con un'importante eccezione illustrata sotto.
- Training: Raccolgono contenuti in massa per addestrare modelli linguistici IA. Non restituiscono valore immediato al sito.
- Agent: Recuperano contenuti in tempo reale per rispondere alle domande in ChatGPT, Perplexity e simili. Sono il canale diretto di citazione IA.
Il problema dei crawler multiuso
Googlebot, Applebot e Bingbot non sono crawler a scopo singolo: raccolgono anche dati per finalità IA correlate, collocandoli nella categoria «multiuso» del nuovo sistema. In base alle regole del 15 settembre, qualsiasi crawler multiuso viene trattato secondo la regola più restrittiva applicabile. Su pagine con pubblicità, bloccare Training può bloccare anche Googlebot, anche se Search è esplicitamente permesso. (Search Engine Journal, luglio 2026)
Chi è a rischio
- Il sito è su Cloudflare (piano gratuito o a pagamento)
- Il sito mostra pubblicità (display, affiliazione o sponsorizzazioni)
- Hai attivato il toggle «Blocca i bot IA» nel 2025
- Sei un nuovo cliente Cloudflare con un dominio creato dopo il 15 settembre
Tre azioni prima del 15 settembre
- Verifica le impostazioni Cloudflare. Accedi a Security → Bots e controlla lo stato di ciascun controllo per i crawler IA. Se hai attivato il vecchio «Block AI Bots» nel 2025, è la configurazione più a rischio.
- Scegli intenzionalmente per ogni categoria. Per la maggior parte delle PMI orientate al ranking di ricerca e alla citazione IA, la configurazione consigliata è: permetti Search, permetti Agent, blocca Training.
- Verifica il robots.txt. Se robots.txt blocca GPTBot, PerplexityBot, ClaudeBot o Google-Extended, quei bot non accedono al sito indipendentemente da Cloudflare.
La dimensione GEO: i crawler Agent sono il tuo canale di citazione
Bloccare i crawler Agent taglia l'accesso di ChatGPT, Perplexity e Google AI Mode ai tuoi contenuti. Considerando che il traffico da ChatGPT converte al ~15,9% contro l'~1,76% dell'organico Google, bloccarli inavvertitamente significa chiudere il canale a conversione più elevata.