Провайдер безпеки сайтів Cloudflare блокує доступ ШІ-ботам і запускає оплату за сканування контенту

Провайдер безпеки сайтів Cloudflare блокує доступ ШІ-ботам і запускає оплату за сканування контенту

Провайдер безпеки сайтів Cloudflare оголосив, що блокуватиме сканування сайтів ШІ-ботами за замовчуванням. Також компанія запустила ініціативу Pay Per Crawl — модель, яка передбачає оплату за доступ до вебконтенту для тренування чи генерації ШІ.

Близько 20% інтернету використовує сервіси Cloudflare, тож рішення суттєво вплине на обсяги даних, доступних для ШІ-компаній. Відтепер усі нові сайти, що підключаються до платформи, автоматично блокуватимуть ШІ-ботів. Власники сайтів зможуть гнучко визначати, які саме сканери допускати. Наприклад, лише для пошуку, але не для тренування мовних моделей.

Компанія також розробляє систему попереднього перегляду контенту для ШІ-ботів та його подачі в оптимізованому форматі. Автори контенту зможуть самі встановлювати ціни за доступ, а ШІ-компанії — вирішувати, чи приймати ці умови. До ініціативи вже приєдналися великі медіа: The Atlantic, TIME, BuzzFeed, ADWEEK, Quora, Stack Overflow, Ziff Davis, а також видавці USA TODAY Network.

CEO Cloudflare Метью Прінс зазначив, що модель фінансування вебу має змінитися: «AI краулери безконтрольно копіювали контент. Ми прагнемо повернути контроль авторам і одночасно підтримати розвиток ШІ».

Джерело: Search Engine Land

Яна Поліщук
Яна Поліщук
• Content Writer
Inweb
Редакторка за фахом і райтерка за покликанням. Уже понад 13 років пишу тексти, які допомагають читачам знайти відповіді на свої запитання. Люблю слова і їхню силу, але «порожні» і «без цілі» — безжально видаляю. Уважна до деталей, бо вірю, що саме вони роблять тексти живими й переконливими.
Більше цікавого