Cloudflare oznámil plány na zavedenie trhu v priebehu nasledujúceho roka, ktorý umožní majiteľom webových stránok účtovať poskytovateľom AI modelov za prístup k ich obsahu pre scraping. Táto iniciatíva je súčasťou širšej stratégie CEO Matthewa Princa, ktorá má za cieľ posilniť vydavateľov v riadení aktivity AI botov na ich stránkach. V nedávnom rozhovore pre TechCrunch Prince zdôraznil potrebu kompenzácie tvorcov obsahu, aby bola zabezpečená nepretržitá produkcia. Ako prvý krok Cloudflare spustil bezplatný nástroj nazvaný AI Audit. Tento dashboard umožňuje majiteľom webových stránok monitorovať správanie AI na ich stránkach—sledovať, kedy a ako často modely zberajú informácie. Používatelia môžu blokovať všetky AI boty, alebo selektívne povoliť určité scrapers na základe dohôd alebo vnímaných výhod. Nový nástroj poskytuje prehľad o pôvode každého scraperu, vrátane návštev od hlavných poskytovateľov AI ako sú OpenAI a Amazon. Cloudflare sa snaží chrániť menších vydavateľov, ktorých obsah je momentálne zberaný bez kompenzácie, čo môže ohroziť ich návštevnosť a príjmy.

Hoci väčší vydavatelia môžu vyjednávať dohody, mnohí zostávajú nechránene proti nekontrolovanému zberaniu. Skôr tohto leta, startup AI čelil reakcii za zberanie stránok, ktoré vyjadrili prianie nebyť prehľadávané. V reakcii Cloudflare implementoval možnosť jedným kliknutím pre zákazníkov blokovať všetky AI boty. Majitelia webových stránok hlásili stres z obrovského množstva AI zberania, prirovnávajúc to k DDoS útokom, ktoré môžu zvýšiť náklady na cloud a narušiť služby. Prince poznamenal, že zákazníci chcú detailnejšiu kontrolu nad tým, ktoré AI modely môžu pristupovať k ich obsahu. Dokonca aj veľkí vydavatelia s licenčnými dohodami často nemajú jasnosť ohľadom miery AI zberania, čo sa spolieha na obmedzené informácie od poskytovateľov. Nadchádzajúci trh Cloudflare je navrhnutý tak, aby rozšíril podobné príležitosti na menších vydavateľov, umožňujúc im nastaviť podmienky pre prístup k obsahu. Hoci detaily o trhu ešte nie sú plne rozvinuté, Prince si predstavuje systém, kde webové stránky môžu účtovať na základe mier zberania alebo žiadať kredity výmenou za prístup. Hoci AI spoločnosti môžu odolávať plateniu za momentálne bezplatný obsah, Prince verí, že kompenzácia tvorcov je rozhodujúca pre udržateľný ekosystém AI.