Cloudflare удивляет новостью о намерении брать микроплату за парсинг веб-сайтов с AI роботов.
Речь идет о клиентах хостинга и фильтра безопасности Cloudflare. Свое решение компания объясняет тем что сейчас AI краулеры беспрепятственно получают доступ к текстам и изображениям размещённым на веб-сайтах и используют полученные данные для генерации контента. Извлекая тем самым коммерческую прибыль, и не платя за использование источника информации.
Cloudflare, конечно компания серьезная, около 20% веб-сайтов используют фильтр безопасности Cloudflare либо хостинг этой компании. Но не совсем понятно как они собираются реализовать это технически. Как отличить AI робота посещающего веб-сайт от человека открывающего страницу в браузере.
Или Cloudflare хочет таким способом направить в коммерческое русло многочисленных программистов, ежедневно выполняющих задачу по обходу защитных алгоритмов Cloudflare для автоматизированного сбора данных?
Если цена за парсинг будет микроскопической а объем данных для сбора - небольшой. Возможно предложенный вариант найдет своих клиентов.
