Cloudflare, ведущий поставщик облачной инфраструктуры, обслуживающий 20% всех веб-ресурсов, объявил о запуске инновационной торговой площадки, которая меняет подход к взаимодействию между владельцами сайтов и компаниями, работающими в сфере искусственного интеллекта. Этот новый сервис даст возможность издателям иметь больший контроль над своим контентом.
В течение последнего года Cloudflare выпустила ряд инструментов, предназначенных для издателей, чтобы решить проблему резко возросшего числа ИИ-ботов. Среди новинок — функция блокировки всех ИИ-ботов в один клик и специальная панель для отслеживания активности ИИ-сканеров на своих страницах. В интервью 2024 года генеральный директор Cloudflare, Мэтью Принс, подчеркнул, что эти новшества закладывают основу для нового типа рыночной инфраструктуры, где издатели могут распространять свой контент среди ИИ-компаний и получать за это финансовое вознаграждение.
Так появилась Pay per Crawl
Теперь Cloudflare реализует эту концепцию на практике. Новая инициатива, получившая название Pay per Crawl, была запущена во вторник в виде закрытого бета-тестирования. Владельцы сайтов, участвующие в эксперименте, смогут разрешить ИИ-сканерам доступ к своим страницам за определённую плату — микроплатёж за каждое «сканирование». Также у них есть возможность предоставить доступ безвозмездно или полностью заблокировать доступ ИИ-роботам. Cloudflare уверяет, что с помощью её инструментов владельцы сайтов смогут отслеживать, используют ли ИИ-боты их контент для обучения, отображения в результатах поиска или других целей.
Перспективы нового маркетплейса
В целом, маркетплейс Cloudflare представляет собой амбициозную идею, которая может предложить издателям новую бизнес-модель для эпохи искусственного интеллекта и вывести Cloudflare на передний план в этой трансформации. Запуск площадки происходит в то время, когда новостные издания сталкиваются с экзистенциальными вопросами о том, как привлекать читателей, поскольку трафик из Google Search снижается и растёт популярность ИИ-чат-ботов.
Ответ на вопрос, как новостные издания будут адаптироваться к условиям эпохи ИИ, не столь очевиден. Например, The New York Times подали иски к технологическим компаниям за использование их новостных материалов для обучения ИИ без разрешения. В то же время некоторые издатели заключили многолетние соглашения о лицензировании контента для обучения ИИ-моделей и появления их материалов в ответах чат-ботов.
Однако только крупные СМИ подписали соглашения о лицензировании, и пока не совсем ясно, приносят ли они значительную прибыль. Cloudflare намеревается создать более устойчивую систему, в которой издатели будут устанавливать цены на своих условиях.
Новые возможности для веб-сайтов
Кроме того, во вторник компания анонсировала, что новые веб-сайты, созданные с использованием Cloudflare, теперь автоматически блокируют доступ всем ИИ-сканерам. Владельцы этих сайтов должны будут явно давать разрешение для доступа определённым ИИ-роботам. Cloudflare подчеркивает, что такое нововведение позволит каждому новому домену контролировать свои настройки по умолчанию.
Некоторые успешные издательства, включая Conde Nast, TIME, The Associated Press, The Atlantic, ADWEEK и Fortune, подписали соглашение с Cloudflare о блокировке ИИ-ботов по умолчанию в рамках более широкой стратегии компании по разработке подхода к сканированию на основе одобрения.
Проблемы старой бизнес-модели
Бизнес-модель, на которой многие издатели полагались на протяжении десятилетий, начинает утрачивать актуальность. Ранее онлайн-издатели разрешали Google сканировать свои сайты в обмен на переходы по ссылкам в поисковой системе, что способствовало увеличению трафика и доходов от рекламы.
Тем не менее новые данные от Cloudflare показывают, что в эпоху ИИ издатели могут получать менее значительные доходы, чем когда-либо. Хотя некоторые веб-сайты ссылаются на ChatGPT как на основной источник трафика, в целом эта тенденция не подтверждается.
По данным Cloudflare, в июне этого года поисковый робот Google просматривал сайты 14 раз за каждую ссылку, в то время как OpenAI делал это 1700 раз, а Anthropic — целых 73 000 раз за ту же ссылку.
В то же время компании, такие как OpenAI и Google, разрабатывают ИИ-агентов, которые будут посещать веб-сайты от имени пользователей для сбора информации и предоставления её непосредственно конечному потребителю. Массовое внедрение таких инструментов окажет огромное влияние на издателей, которые рассчитывают, что пользователи будут посещать их сайты.
Будущее Pay per Crawl
Cloudflare отмечает, что «истинный потенциал» модели Pay per Crawl может проявиться в «агентском» будущем. В своем блоге компания задается вопросом: «А что если платный доступ мог бы работать на грани сети полностью программно? Представьте себе, что вы просите своего любимого помощника исследовать и обобщить последние данные о научных исследованиях или находить лучший ресторан в Сохо, при этом выделяя бюджеты на закупку соответствующего контента».
Для участия в эксперименте на маркетплейсе Cloudflare как компаниям, работающим с ИИ, так и издателям необходимо создать учетные записи Cloudflare. В этих учетных записях обе стороны смогут устанавливать цены на «сканирование» контента, что позволяет Cloudflare выступать в роли посредника, взимая плату с ИИ-компаний и распределяя доходы между издателями.
Представитель Cloudflare, Рипли Парк, сообщил, что на данный момент в Pay per Crawl не используются стейблкоины или криптовалюта, хотя многие предполагали, что цифровые валюты идеально подходят для подобных транзакций. Однако в ходе своего выступления во вторник Принс заявил, что Cloudflare рассматривает возможность «создания собственного стейблкоина» для таких операций и сотрудничает с различными поставщиками стейблкоинов.
Торговая площадка Cloudflare является смелым шагом в будущее, что потребует активного участия множества издателей и компаний, работающих в сфере ИИ. Однако нет никаких гарантий, что издатели будут в выигрыше, и убедить ИИ-компании принять участие в проекте может быть непросто, особенно учитывая, что в текущий момент они получают контент без затрат.
Тем не менее, Cloudflare, похоже, находится в числе немногих компаний, способных реализовать подобный рынок.
Переход к новой модели позволяет не только адаптироваться к изменениям, но и формировать новые возможности для сотрудничества и инноваций.🔔 Чтобы узнать больше и следить за новостями из мира ИИ, подписывайтесь на мой канал “ProAI” в Telegram!