Cloudflare draait vanaf 15 september de standaardinstellingen om voor AI-verkeer op zijn netwerk. Crawlers die content verzamelen voor AI-training worden dan standaard geblokkeerd op pagina’s die advertenties tonen. Zoekcrawlers blijven wel toegestaan.
Tegelijk bouwt het bedrijf zijn betaalmodel om zodat online uitgevers betaald krijgen naar de mate van gebruik van hun producties. Nu is dat nog de mate van crawlen. Echter, een item kan 1 keer gecrawled worden en duizend keer gebruikt. Dat gat wordt gedicht met de nieuwe regels.
De eindgebruiker gaat niets merken van deze veranderingen. Ze spelen zich allemaal af in het onzichtbare domein van de machine readable content. Cloudflare, dat naar eigen zeggen twintig procent van de infrastructuur achter het internet levert, is bezig nieuwe spelregels te formuleren waarbij de agressieve plundertochten van AI’s wordt ingedamd.
In de huidige setting zijn uitgevers de verliezers. Een AI bezoekt een site, drinkt alle content op, maakt daar zijn taalmodellen beter mee en betaalt niets. Oneerlijk, zegt Cloudflare. Temeer daar meer dan de helft van het interverkeer nu al afkomstig is van niet-menselijke gebruikers.
AI-samenvattingen hollen het klassieke verdienmodel uit waarbij sites geld verdienen met advertenties. Hoe meer verkeer, hoe meer inkomsten. Die vlieger gaat tegenwoordig echter niet meer op. Cloudflare wijst op onderzoek van Pew Research Center uit 2025: wanneer Google een AI-samenvatting toont, klikken gebruikers nog maar in acht procent van de gevallen op een regulier zoekresultaat. Op een link ín een AI-samenvatting klikt slechts 1 procent.
Een uitgever kan in de nieuwe situatie bij Cloudflare aangeven voor welk doel zijn content wel of niet mag worden gebruikt. De drie scenario’s zijn: Search (content indexeren), Agent (AI leest site namens gebruiker) en Training (verzamelt content voor AI-training). De site-eigenaar mag volgens Cloudflare per scenario een vorm van vergoeding vragen. Dat kan zo eenvoudig zijn als een bronvermelding in de vorm van een hyperlink tot een financiële vergoeding voor het leveren van unieke trainingsdata.
Deze nieuwe benadering wordt getest met Ceramic.ai en You.com.
Matthew Prince is naast ceo en oprichter van Cloudflare ook eigenaar van een lokale krant in een plaatsje in zijn thuisstaat Utah.
Foto: Nopparuj Lamaikul / Unsplash
emerce
07-07-2026 08:49