Riassunto:
Nel luglio di quest'anno, una società chiamata Cloudflare ha pubblicato un annuncio che ha causato direttamente l'esplosione di X. Cosa significa questo annuncio? Il blogger @iyici_ ha commentato: "La società del codice di verifica utilizzata da tutti i siti web vuole bloccare i motori di ricerca utilizzati da tutti."
Nuove regole, nuove tariffe: è ora di far pagare AI｜Cloudflare
La parte più interessante dell'annuncio | Cloudflare
Charles Petersen, noto scrittore ed editore di tecnologia di San Francisco, ritiene che questa sia la fine di Internet. Ha twittato su X "
RIP World Wide Web (1993-2026)
. "
Commento originale di @iyici_｜X.com
Perché un annuncio da parte di questa azienda tecnologica, di cui la maggior parte delle persone non ha mai sentito parlare, può causare uno shock così grande? Perché questa azienda ha preso una decisione che probabilmente cambierà l'ecosistema Internet:
Aiuterà i siti web a raccogliere "pedaggi" dall'intelligenza artificiale
.Cyber Bodhisattva: non lo sai, ma lo usi ogni giorno
Cosa fa esattamente Cloudflare?
Cloudflare è uno dei maggiori fornitori di servizi di infrastruttura di rete al mondo e la sua quota di mercato nella protezione CDN e DDoS è da tempo in prima linea. Puoi semplicemente intenderlo come il "magazzino anteriore" e il "fossato" del sito web.
Ad esempio, sei proprietario di un piccolo sito web in Cina. Se gli utenti di Singapore, Stati Uniti e Giappone visitano il tuo sito web, riceveranno ogni volta immagini, script e contenuti direttamente dal server cinese, il che sarà estremamente lento. Quindi colleghi il tuo sito web a Cloudflare, che ha molti nodi in tutto il mondo e memorizza nella cache i contenuti di uso comune sul server più vicino all'utente, in modo che gli utenti di altri paesi possano accedere al tuo sito web più velocemente.
E poiché quando gli utenti visitano il tuo sito web, visitano prima il nodo di Cloudflare, può anche fornire servizi di protezione contro attacchi dannosi e robot con traffico anomalo.
Ti senti ancora astratto? Allora devi aver visto la seguente icona:
Fai clic su questo pulsante e attendi circa quattro o cinque secondi prima che il sito web possa essere aperto: questo è il servizio di verifica uomo-macchina di Cloudflare al lavoro, comunemente noto come "scudo dei cinque secondi". Determina se sei una persona reale o un robot analizzando la traiettoria del movimento del mouse dell'utente, la frequenza dei clic e altri modelli comportamentali.
Oggi,
Cloudflare gestisce circa 102 milioni di richieste HTTP al secondo e circa il 20% dei siti web del mondo utilizza i suoi servizi
, che vanno dai blog personali ai giganti di Internet come Discord e LinkedIn, sono i suoi obiettivi di servizio.Il suo servizio copre 125 paesi e regioni, il 95% degli utenti Internet globali, e il ritardo medio non supera i 50 millisecondi
.Ecco perché, se si verificasse un qualsiasi disturbo, il mondo di Internet ne rimarrebbe scosso. Nel novembre 2025, Cloudflare ha subito un'interruzione su larga scala durata circa 6 ore, causando direttamente la paralisi di un gran numero di siti Web e servizi come X, ChatGPT, Spotify, Uber e Discord contemporaneamente.
Quindi quali regole ha stabilito questa volta?
Cosa fa Cloudflare?
Per dirla semplicemente, la nuova regola di Cloudflare è questa frase:
A partire dal 15 settembre 2026, tutti i siti Web che utilizzano i servizi Cloudflare bloccheranno i "crawler AI ibridi" per impostazione predefinita
.Che cos'è un "crawler AI ibrido"?
I crawler sono programmi robot che eseguono la scansione automatica dei contenuti web. Il motivo per cui i motori di ricerca possono eseguire ricerche nelle pagine Web è perché rilasciano un gran numero di crawler per eseguire la scansione dei contenuti Web online, creare indici e quindi fornirli agli utenti.
Google, Bing e Baidu lo fanno da più di 20 anni.
Più tardi è arrivata l'intelligenza artificiale e la formazione sull'intelligenza artificiale ha richiesto molti dati, quindi grandi aziende modello come OpenAI hanno iniziato a fare molto affidamento sui crawler. All'inizio di quest'anno, AI Agent è diventato popolare. Lascia che Codex, Kimi Work e altri strumenti di intelligenza artificiale ti aiutino a controllare le informazioni. Dietro le quinte, un crawler esegue commissioni per farti acquisire contenuti dalle pagine web.
Così | tramite Kimi Work
Ora, i crawler basati sull'intelligenza artificiale hanno occupato metà di Internet. Secondo i dati ufficiali di Cloudflare, nel giugno 2026,
tutto il traffico non umano (inclusi i crawler dei motori di ricerca, i crawler dell'intelligenza artificiale, ecc.) rappresentava il 57,4% del traffico totale delle pagine web
. In altre parole, più della metà delle persone che oggi “leggono” pagine web su Internet non sono più esseri umani.Quindi, a partire dal 2025, Cloudflare lancerà la funzione "AI Crawl Control", consentendo ai proprietari di siti web di bloccare manualmente i crawler AI. È stato inoltre lanciato il meccanismo “Pay Per Crawl”. Se un crawler AI desidera accedere al contenuto, deve includere un'intenzione di pagamento nella richiesta, altrimenti l'accesso verrà negato direttamente.
Entro la fine del 2025, questa funzione ha intercettato più di 416 miliardi di richieste di robot
.Questa funzione funziona bene per i crawler puramente AI come GPTBot di OpenAI e ClaudeBot di Anthropic, ma si blocca quando si tratta di Google.
Google ha una funzione chiamata "Panoramiche AI": quando gli utenti effettuano una ricerca, Google non fornisce più solo collegamenti, ma genera direttamente un riepilogo AI delle risposte di altri siti web nella parte superiore della pagina dei risultati. Il problema è che quando questa funzione genera riepiloghi, non utilizza i dati acquisiti da un crawler AI separato, ma chiama direttamente l'indice di ricerca, ovvero condivide lo stesso Googlebot con la ricerca e questo crawler è chiamato "crawler AI ibrido".
Una volta che il proprietario di un sito web blocca Googlebot, la panoramica dell'IA viene effettivamente bloccata, ma il suo sito web scompare anche dai risultati di ricerca di Google e riceve meno traffico. Non bloccato? Quella panoramica dell'intelligenza artificiale continua a ottenere i tuoi contenuti invano.
Di fronte a questo dilemma, è infatti difficile per un singolo proprietario di un sito web negoziare direttamente con un gigante come Google, quindi Cloudflare è diventato il fratello maggiore che si è opposto.
Le nuove normative di settembre mirano a questo crawler ibrido e la politica è semplice: è stato aggiornato dal blocco manuale da parte dei proprietari di siti Web al blocco predefinito, costringendo Google a fare una scelta: smettere di pescare in acque agitate o sopportare le conseguenze di un calo significativo dei contenuti di ricerca.
Secondo quanto riportato dai media, Cloudflare sta anche avviando la politica di divieto dei crawler misti e sta negoziando con Google per separare il crawler di panoramica AI dal crawler di ricerca, in modo che il sito web possa bloccare solo il crawler di panoramica AI e trattenere il traffico di ricerca.
Google non è d'accordo. Il timore è che, una volta separati, un gran numero di siti web bloccheranno direttamente i crawler della panoramica AI.
Allora perché Cloudflare prende la mano così pesante? Con l’avvento dei crawler basati sull’intelligenza artificiale, la logica di Internet che funziona da decenni sta cambiando.
Il World Wide Web in continua evoluzione
Negli ultimi trent'anni la ricerca di informazioni su Internet ha funzionato così: cerchi "come fare il brasato di maiale", il motore di ricerca ti fornisce dieci link, clicchi sul primo blog di cucina, sfogli il contenuto ed esci.
In questo processo, il sito web scrive il contenuto, il motore di ricerca invia i crawler per catturarlo e gli utenti effettuano la ricerca e fanno clic; sia il sito web che il motore di ricerca guadagnano traffico, che può essere monetizzato dalla pubblicità o dai link di affiliazione, e gli inserzionisti ricevono una consegna più efficace. Tutti sono felici.
Questa tacita intesa può durare trent'anni. Si basa fondamentalmente su uno scambio tacito di pari valore. Ti lascio acquisire i miei contenuti gratuitamente e tu mi dai traffico gratuito. Nessuno deve nulla a nessuno.
Quando i motori di ricerca dispongono dell'intelligenza artificiale, tutto cambia.
Quando cerchi "come preparare il maiale brasato", Google non ti fornisce più solo dieci link. Riepiloga direttamente ricette, passaggi e precauzioni e li inserisce in cima ai risultati della ricerca.
L'utente esce dopo aver letto le risposte senza fare clic su alcun sito web
.Google riceve ancora traffico, ma il traffico del proprietario del sito web è scomparso.
Cloudflare ha annunciato a metà del 2025 il "rapporto di scansione e ritorno" di una serie di crawler di vari produttori:
Google è di circa 10:1 (scansione di 10 pagine web, ingresso di 1 visitatore), OpenAI è di 3700:1 e Anthropic ha raggiunto un sorprendente 500000:1
. In altre parole, Google sta almeno riportando una parte del traffico e le società di intelligenza artificiale non ottengono quasi nulla.Anche la ricerca accademica conferma questo cambiamento.
Uno studio del 2026 ha rilevato che più della metà (51,5%) delle query di ricerca attivano una panoramica dell'intelligenza artificiale di Google.
I dati del Pew Research Center mostrano che nelle pagine di ricerca senza una panoramica dell'intelligenza artificiale, la percentuale di utenti che fanno clic sui collegamenti è del 15%. Quando è presente una panoramica dell'IA, scende direttamente all'8%; per quanto riguarda il link citato nella panoramica AI... la percentuale di clic è solo un misero 1%.
Esistono già piattaforme che stanno perdendo denaro reale.
Nel settembre 2025, il gruppo editoriale americano Penske Media ha portato Google in tribunale. Penske Media possiede noti marchi mediatici come "Rolling Stone", "Hollywood Reporter" e "Billboard", con oltre 120 milioni di visitatori mensili e gran parte delle sue entrate proviene dalle visite al sito web. Tuttavia, da quando Google ha lanciato la sua panoramica sull’intelligenza artificiale, le entrate di Penske Media derivanti dai link di affiliazione sono diminuite di oltre un terzo.
Questa non è solo una storia dall'altra parte dell'oceano. Xiaohongshu ha lanciato una funzione di ricerca AI chiamata “Ask” nel 2025. La logica è esattamente la stessa di Google AI Overview: i risultati ordinati tramite AI vengono visualizzati direttamente nella parte superiore della ricerca.
L'impatto è esattamente lo stesso di Google: in passato, gli utenti cercavano parole chiave, sfogliavano le note una per una e filtravano le informazioni; ora gli utenti fanno domande e l’intelligenza artificiale integra il contenuto delle note pertinenti e fornisce direttamente le risposte. Gli utenti non cliccano più sulle note una per una e i blogger perdono l’opportunità di essere visti, seguiti e convertiti.
Secondo quanto riportato dai media, Xiaohongshu inizialmente consentiva la funzione "Fai domande" solo per coprire l'1%-2% delle richieste di ricerca interna. Il motivo era che “il capo aveva paura di avere un impatto eccessivo”, e successivamente è stato aumentato al 3%-4%. Ovviamente la piattaforma stessa sa quanto impatto ha questo incidente sui creatori.
La vecchia era finisce e inizia la nuova era
La partita tra Cloudflare e Google non ha ancora una risposta. Ma una cosa è certa:
Il tacito patto di "contenuti gratuiti in cambio di traffico" che esiste su Internet da trent'anni non può più tornare indietro
.In effetti, Internet cinese ha già percorso questa strada. Non puoi cercare articoli dagli account pubblici WeChat su Baidu e non puoi cercare contenuti da Xiaohongshu. Non è che la tecnologia dei motori di ricerca non possa farlo, ma che la piattaforma ha attivamente costruito muri per intrappolare i contenuti nel proprio ecosistema. Ora Cloudflare sta costruendo un “paywall” per i siti Web per impedire all’intelligenza artificiale di ottenere contenuti gratuitamente. I metodi sono diversi, ma i risultati sono gli stessi.
Se sempre più siti web bloccano i crawler AI, la ricerca AI otterrà sempre meno contenuti di alta qualità e la qualità delle risposte fornite diminuirà; e sarà difficile mantenere il sito web se perde traffico di ricerca. Alla fine, entrambe le parti crolleranno insieme, dando luogo a un “deserto di contenuti”.
La ricerca tramite intelligenza artificiale è davvero comoda, con una risposta in tre secondi. Ma tutti i riassunti si basano su qualcuno che scrive il testo originale.
Se queste persone non sanno più scrivere, le cose che l'intelligenza artificiale può riassumere diventeranno sempre meno
. Prima o poi qualcuno dovrà pagare questo conto.
Commenti