У середу компанія Cloudflare представила функцію під назвою "AI Labyrinth", яка призначена для боротьби з несанкціонованим збором даних штучного інтелекту, пропонуючи ботам фальшивий контент, згенерований AI. Цей інструмент націлений на компанії AI, які сканують веб-сайти для збору даних для великих мовних моделей, таких як ті, що використовуються в помічниках AI, таких як ChatGPT. Cloudflare, заснована в 2009 році, відома своєю інфраструктурою веб-сайтів і службами безпеки, особливо проти атак DDoS. Замість простого блокування ботів AI Labyrinth заманює їх у "лабіринт" оманливих, але правдоподібних веб-сторінок, що виснажує ресурси сканерів. Це відзначає відхід від стандартного підходу блокування і захисту, оскільки просте блокування ботів може сповістити їх операторів про виявлення. Інструмент генерує контент, який є нерелевантним для фактичного веб-сайту, але оснований на справжніх наукових фактах, щоб уникнути поширення дезінформації. Цей контент виробляється за допомогою служби Cloudflare Workers AI, і оманливі сторінки залишаються прихованими від звичайних користувачів. AI Labyrinth діє як "потенційний наступний покоління ловчий ящик", покращуючи традиційні методи, які боти навчилися успішно обходити. Посилання, які використовуються, розроблені так, щоб бути привабливими для скребків, у той час як перешкоджають індексації пошуковими системами.

Ця техніка дозволяє Cloudflare ідентифікувати і створювати "відбитки" зловмисних ботів, передаючи дані в систему машинного навчання, що покращує виявлення ботів по всій їхній мережі. Усі користувачі, включаючи тих, хто на безкоштовних планах, можуть активувати цю функцію через свою інформаційну панель. Зростання AI-сканування є значним, з відзначенням Cloudflare, що AI-боти генерують понад 50 мільярдів запитів щодня, що становить близько 1% усього веб-трафіку. Це піднімає питання про несанкціонований збір даних, спонукаючи до юридичних дій з боку творців контенту. Попри надання захисного застосування AI, ефективність AI Labyrinth у протидії адаптивним сканерам залишається невідомою. Cloudflare планує подальші вдосконалення, щоб зробити фальшивий контент важчими для виявлення та краще інтегрованим у веб-архітектури. Постійна динаміка кішки та миші між веб-сайтами та скраберами триває, з AI, що відіграє вирішальну роль з обох сторін.