Генеральный директор Cloudflare Мэтью Принс заявил, что рост числа ИИ-агентов создает финансовую нагрузку на владельцев сайтов. Боты потребляют серверные ресурсы и трафик, сканируя контент для ответов пользователям, но не приносят сайтам реальных посещений или дохода.
Принс отмечает, что такая модель меняет экономику интернета. Например, при поиске ресторана ИИ-агент может изучить меню 1000 заведений, чтобы предложить одно. В итоге 999 сайтов несут расходы на инфраструктуру, не получая клиентов. Аналогичная проблема затрагивает новостные ресурсы, чьи статьи ИИ пересказывает без перехода пользователя на сайт.
Cloudflare внедряет инструменты для управления ИИ-краулерами и предлагает два пути решения. Первый — повышение эффективности сканирования: например, партнерство с OpenAI позволяет ботам получать уведомления только при обновлении контента, что снижает нагрузку на серверы.
Второй подход заключается во внедрении платного доступа к контенту для ИИ-сервисов. Владельцы сайтов смогут настраивать политики оплаты в зависимости от целей агента, например, взимать плату за сбор данных для исследований. Cloudflare уже развивает инструменты для тарификации по факту использования контента.
