Ecco un numero su cui riflettere: a metà del 2026, le richieste automatizzate costituiscono oltre il 57% di tutto il traffico HTML sul web, superando per la prima volta nella storia di Internet i visitatori umani effettivi. Una fetta significativa e in rapida crescita di questo traffico non è Googlebot che indicizza il tuo sito per farlo apparire nei risultati di ricerca. Sono crawler AI che raschiano i tuoi post del blog, le pagine dei prodotti e la documentazione per addestrare modelli o rispondere a domande in un chatbot, spesso senza che un essere umano faccia mai clic per arrivare al tuo sito.
Se gestisci un sito web dietro Cloudflare, e una grande fetta del web delle piccole imprese lo fa, che tu lo sappia o no, un cambiamento normativo arriverà il 15 settembre 2026 che rimodellerà silenziosamente chi può leggere i tuoi contenuti gratuitamente, chi deve pagare e chi verrà bloccato direttamente. Se non controlli le tue impostazioni prima di allora, Cloudflare prenderà la decisione per te.
Ecco cosa sta realmente accadendo, perché è importante per i tuoi profitti e cosa fare al riguardo, anche se non hai mai aperto un pannello di controllo di Cloudflare in vita tua.
Cosa ha effettivamente cambiato Cloudflare
Cloudflare si trova davanti a una grande percentuale di Internet come rete di distribuzione di contenuti e livello di sicurezza, il che la pone in una posizione unica per vedere e controllare il traffico dei bot su larga scala. Nel 2025, ha lanciato una funzionalità sperimentale chiamata Pay Per Crawl: i proprietari dei siti potevano azionare un interruttore e iniziare ad addebitare alle aziende AI una tariffa per pagina ogni volta che il loro crawler recuperava contenuti, utilizzando l'oscuro codice di stato HTTP 402 Payment Required per dire a un bot "paga, o non entri".
Da allora, quell'esperimento si è evoluto in qualcosa di più ampio chiamato Pay Per Use, abbinato a un nuovo Gateway di Monetizzazione. Il cambiamento di pensiero è sottile ma importante: invece di addebitare alle aziende AI ogni volta che un bot si limita a recuperare una pagina (cosa facile da aggirare e che non riflette il valore effettivo), il nuovo modello è orientato all'addebito quando i tuoi contenuti creano effettivamente valore, ad esempio quando vengono citati in una risposta generata dall'AI o quando un agente AI estrae dati specifici per completare un'attività per il suo utente. I primi partner che adottano questo approccio includono prodotti di ricerca AI che pagano gli editori quando i loro contenuti emergono nei risultati.
Parallelamente a questo cambiamento, Cloudflare sta inasprendo il comportamento predefinito su come i bot AI possono comportarsi sul tuo sito. A partire dal 15 settembre 2026, Cloudflare classifica i crawler in tre categorie:
- Bot di ricerca: i crawler che alimentano i risultati di ricerca assistiti dall'AI e, in generale, inviano ancora visitatori umani al tuo sito. Questi rimangono consentiti per impostazione predefinita perché continuano a guidare la scoperta e il traffico.
- Bot agente: crawler che agiscono per conto di un agente AI che completa un'attività per un utente (prenotare qualcosa, confrontare prezzi, riassumere una pagina).
- Bot di addestramento: crawler il cui unico scopo è raccogliere i tuoi contenuti per addestrare un modello, senza alcun beneficio di generazione di visite per te.
L'elemento controverso è ciò che Cloudflare chiama crawler "a uso misto": bot che combinano più di uno di questi scopi, rendendo difficile capire se una determinata richiesta ti invierà un cliente o si limiterà a estrarre i tuoi contenuti gratuitamente. A partire dal 15 settembre, Cloudflare bloccherà i crawler a uso misto per impostazione predefinita su qualsiasi pagina che porta pubblicità, a meno che il proprietario del sito non abbia modificato manualmente l'impostazione. Questa nuova impostazione predefinita si applica ai nuovi clienti Cloudflare, ai nuovi siti creati da clienti esistenti e, in particolare, a tutti gli account del livello gratuito, che copre un numero enorme di siti per piccole imprese e personali.
Perché è importante anche se non hai mai toccato queste impostazioni
È facile archiviare la cosa come un "problema dei grandi editori" e andare avanti. Non lo è. Ecco alcuni motivi per cui questo riguarda direttamente i proprietari di piccole imprese:
Le tue impostazioni predefinite stanno per cambiare senza che tu faccia nulla. Se il tuo sito ha annunci pubblicitari (anche qualcosa di modesto come un link di affiliazione o una rete di annunci display) e sei sul livello gratuito di Cloudflare, o se avvii un nuovo sito dopo il 15 settembre, il nuovo comportamento di blocco si applica automaticamente. Non devi aderire per essere coinvolto: devi rinunciare se non sei d'accordo.
Il traffico AI verso il tuo sito sta crescendo o diminuendo a seconda di come vieni classificato. Dati recenti sul comportamento dei crawler AI mostrano che circa il 20% del traffico bot verificato proviene ora da crawler AI, più un altro 6-7% da bot di ricerca AI, e le richieste di crawler relative all'AI sono più che raddoppiate come percentuale del traffico crawler in poco più di un anno. Parte di questo traffico è genuinamente prezioso (un motore di risposta AI che cita la tua pagina e ti invia un lettore). Parte è pura estrazione: un bot di addestramento che copia i tuoi contenuti in un set di dati che non ti invierà mai un singolo visitatore.
Bloccare indiscriminatamente può farti male. È facile sentire "l'AI sta raschiando il mio sito gratuitamente" e voler bloccare tutto. Ma se blocchi accidentalmente i bot orientati alla ricerca che alimentano i motori di risposta AI, puoi scomparire da un canale di scoperta sempre più importante, proprio come bloccare Googlebot farebbe crollare il tuo traffico organico di ricerca. Lo scopo del nuovo sistema a categorie è permetterti di essere selettivo, non tutto o niente.
Ora esiste un meccanismo effettivo per essere pagati. Per anni, l'accordo è stato implicito e unilaterale: i crawler prendevano i tuoi contenuti, tu non ricevevi nulla a meno che un essere umano non cliccasse su un link. Pay Per Use è il primo tentativo a livello di infrastruttura mainstream di cambiare questa equazione, permettendo a un sito web di mettere un prezzo reale sull'accesso AI ai suoi contenuti, allo stesso modo in cui un paywall mette un prezzo sull'accesso umano.
Cosa fare effettivamente prima del 15 settembre
Non devi diventare un esperto di traffico bot dall'oggi al domani. Per la maggior parte dei siti di piccole imprese, la mossa giusta è un audit breve e deliberato piuttosto che uno degli estremi (ignorare tutto completamente o affrettarsi a far pagare tutto).
1. Conferma se Cloudflare è davanti al tuo sito
Se il tuo sviluppatore, agenzia o piattaforma web ha configurato l'hosting o il DNS per te, potresti persino non sapere che Cloudflare è coinvolto. Controlla il tuo provider DNS o chiedi a chi gestisce l'infrastruttura del tuo sito. Se non sei su Cloudflare, niente di tutto questo ti riguarda direttamente per ora, anche se aspettati che altri CDN seguano una strategia simile data la direzione del settore.
2. Trova le impostazioni di gestione dei bot AI
Nel pannello di controllo di Cloudflare, queste si trovano nell'area di gestione dei bot / Controllo Crawl AI delle impostazioni della tua zona. Qui vedrai la categorizzazione Ricerca / Agente / Addestramento e i controlli su come ciascuna viene trattata sul tuo sito.
3. Decidi deliberatamente, categoria per categoria
- Mantieni consentiti i bot AI orientati alla ricerca. Questi sono quelli che molto probabilmente ti invieranno un visitatore tramite una risposta o un risultato di ricerca potenziato dall'AI. Bloccarli è di solito controproducente per un'azienda che cerca di essere trovata online.
- Pensa attentamente ai bot agente. Se gestisci un sito di e-commerce o qualsiasi cosa con dati di prezzi/prenotazioni, gli agenti AI potrebbero fare shopping comparativo o completare acquisti per conto di un cliente. Bloccarli potrebbe significare perdere una vendita che altrimenti otterresti; permetterli potrebbe significare regalare gratuitamente le tue informazioni sui prezzi. Non esiste una risposta giusta universale: dipende dal tuo modello di business.
- Sentiti più a tuo agio nel bloccare i bot di addestramento puri, specialmente su qualsiasi pagina che non sia intesa come documento di riferimento pubblico. Ti offrono un beneficio commerciale quasi nullo, quindi il comportamento "blocca per impostazione predefinita" per le pagine con pubblicità che Cloudflare sta implementando è un'impostazione predefinita ragionevole per la maggior parte dei piccoli siti, non qualcosa da sovrascrivere di riflesso.
4. Non avere fretta di far pagare l'accesso
Il Gateway di Monetizzazione è rivolto a editori con grandi librerie di contenuti di valore o set di dati proprietari, pensa a grandi aziende mediatiche, database di ricerca o piattaforme con contenuti che nessun altro ha. Per un tipico sito di piccola impresa (il blog di un'attività di servizi, le pagine prodotto di un negozio locale, una newsletter di nicchia), il consiglio onesto è: non ancora. Far pagare aggressivamente l'accesso AI può tagliarti fuori silenziosamente dalle risposte generate dall'AI che i tuoi futuri clienti stanno sempre più utilizzando al posto di una ricerca tradizionale, l'opposto di ciò che vuoi se la visibilità è ancora la tua priorità.
5. Metti un promemoria sul calendario, non solo nella tua testa
Poiché le nuove impostazioni predefinite vengono implementate automaticamente per gli account del livello gratuito e per i nuovi account, e poiché questo è chiaramente un settore in evoluzione (Cloudflare è già passato da "Pay Per Crawl" a "Pay Per Use" in circa un anno), trattalo come un controllo ricorrente piuttosto che una soluzione una tantum. Rivedi le impostazioni dei bot ogni trimestre, allo stesso modo in cui rivedresti la spesa pubblicitaria o i prezzi.
Il Quadro Generale: Il Traffico AI Sta Diventando una Voce di Bilancio
Facendo un passo indietro, questa è in realtà una storia su una nuova categoria di economia aziendale che si presenta per la prima volta: i contenuti come input monetizzabile per i sistemi AI, distinto dai contenuti come motore del traffico umano. Che tu attivi o meno Pay Per Use, il cambiamento sottostante è reale: una parte del valore che il tuo sito web crea viene ora consumata dalle macchine invece che dalle persone, e l'infrastruttura sta finalmente emergendo per mettere un prezzo su questo.
Questo ha un'implicazione diretta su come dovresti pensare alla tua contabilità. Se alla fine abiliti la monetizzazione dei contenuti AI, anche una modesta quantità di entrate Pay Per Use, questo è un reddito genuino che necessita di una propria voce nel tuo piano dei conti, separato dalle entrate pubblicitarie, dai proventi delle affiliazioni o dalle vendite di prodotti. Mescolarlo in un generico paniere "altri redditi" rende molto più difficile rispondere a una semplice domanda tra un anno: questo vale effettivamente il sovraccarico operativo o è solo rumore? La stessa logica si applica a qualsiasi nuovo flusso di entrate non familiare: una separazione pulita ora fa risparmiare un mal di testa di riconciliazione in seguito, specialmente quando è coinvolto un processore di pagamenti come Stripe e devi abbinare i report di liquidazione a ciò che è effettivamente arrivato sul tuo conto bancario.
Mantieni i tuoi libri contabili chiari come la tua strategia di contenuti
Decidere quali bot far entrare e a quali far pagare è una decisione aziendale, e come qualsiasi decisione aziendale, è valida solo quanto i registri che stanno dietro. Beancount.io ti offre una contabilità in testo semplice e con controllo di versione, in modo che un nuovo flusso di entrate come la monetizzazione dei contenuti AI abbia la propria voce pulita e verificabile dal primo giorno, invece di perdersi in un foglio di calcolo. Consulta i documenti per vedere quanto è facile monitorare una nuova fonte di reddito insieme a tutto il resto, o esplora la dashboard di Fava per una lettura visiva di da dove provengono effettivamente le tue entrate. Inizia gratuitamente e mantieni i tuoi registri finanziari trasparenti come il resto del tuo stack tecnologico.