Cloudflare برنامه دارد تا در سال آینده بازاری معرفی کند که به صاحبان وب‌سایت اجازه می‌دهد ارائه‌دهندگان مدل‌های هوش مصنوعی را برای دسترسی به محتواهایشون هزینه کنند. این ابتکار بخشی از استراتژی گسترده‌تر مدیر عامل Matthew Prince برای توانمندسازی ناشران در کنترل فعالیت‌های ربات‌های هوش مصنوعی در سایت‌هایشان است. در مصاحبه‌ای اخیر با TechCrunch، پرنس بر نیاز به جبران خسارت تولیدکنندگان محتوا تأکید کرد تا تولید مداوم تضمین شود. به عنوان اولین گام، Cloudflare ابزاری رایگان به نام AI Audit راه‌اندازی کرد. این داشبورد به صاحبان وب‌سایت امکان می‌دهد رفتار هوش مصنوعی را در سایت‌هایشان نظارت کنند - ردیابی می‌کند که مدل‌ها چه زمانی و چند بار اطلاعات را می‌خزند. کاربران می‌توانند تمامی ربات‌های هوش مصنوعی را مسدود کنند یا به صورت انتخابی خزنده‌های خاصی را بر اساس توافقات یا مزایای درک شده مجاز کنند. این ابزار جدید اطلاعاتی در مورد منابع هر خزنده ارائه می‌دهد، از جمله بازدیدها از ارائه‌دهندگان بزرگ هوش مصنوعی مانند OpenAI و Amazon. Cloudflare می‌خواهد از ناشران کوچکتری که محتویاتشان به طور فعلی بدون جبران خسارت خزیده می‌شود، حفاظت کند، که می‌تواند ترافیک و درآمد آن‌ها را به خطر بیاندازد.

در حالی که ناشران بزرگتر می‌توانند معامله‌هایی انجام دهند، بسیاری در برابر خزیدن افسارگسیخته محافظت نشده باقی می‌مانند. اوایل تابستان امسال، یک استارتاپ هوش مصنوعی با واکنش شدید مواجه شد به خاطر خزیدن سایت‌هایی که تمایلی به خزیده شدن نداشتند. در پاسخ، Cloudflare گزینه‌ای با یک کلیک برای مشتریان قرار داد تا تمامی ربات‌های هوش مصنوعی را مسدود کنند. صاحبان وب‌سایت‌ها از حجم زیاد خزیدن هوش مصنوعی گزارش داده‌اند که آن را به حملات DDoS شبیه می‌دانند، که می‌تواند هزینه‌های ابر را افزایش دهد و خدمات را مختل کند. پرنس اشاره کرد که مشتریان می‌خواهند کنترل دقیق‌تری بر دریافت‌های مدل‌های هوش مصنوعی داشته باشند. حتی ناشران بزرگ که توافق‌نامه‌های مجوزی دارند اغلب اطلاعات محدودی از میزان خزیدن هوش مصنوعی دارند، و به اطلاعات محدودی از ارائه‌دهندگان متکی هستند. بازار آینده Cloudflare برای فراهم کردن فرصت‌های مشابه برای ناشران کوچکتر طراحی شده است، به آن‌ها امکان می‌دهد شرایط دسترسی به محتوا را تعیین کنند. اگرچه جزئیات بازار به طور کامل توسعه نیافته است، پرنس یک سیستم را متصور می‌سازد که وب‌سایت‌ها می‌توانند بر اساس نرخ‌های خزیدن هزینه دریافت کنند یا اعتباراتی در ازای دسترسی درخواست کنند. با اینکه شرکت‌های هوش مصنوعی ممکن است در مقابل پرداخت برای محتوای رایگان مقاوم باشند، پرنس معتقد است که جبران خسارت تولیدکنندگان برای اکوسیستم پایدار هوش مصنوعی حیاتی است.