" :) Cloudflare запустил сервис, который одним вызовом парсит весь сайт. Чужой. Целиком. Если забыли, то Cloudflare – абсолютный лидер как раз в защите сайтов от нежелательных краулеров и ботов, которые собирают данные для обучения ИИ. Правда их бот уважает правила в robots.txt (но кто там в детали вникает...) К слову, в clickfraud.ru мы скоро очень запустим сервис - на вход Excel с товарами, а на выходе цены на них на Ozon + Wb. Мы ведь боремся с плохими ботами, но делаем хороших :) @clickfraud.ru
"Ты должен был бороться со злом, а не примкнуть к нему" :)
Cloudflare запустил сервис, который одним вызовом парсит весь сайт. Чужой. Целиком. Если забыли, то Cloudflare – абсолютный лидер как раз в защите сайтов от нежелательных краулеров и ботов, которые собирают данные для обучения ИИ.
Правда их бот уважает правила в robots.txt (но кто там в детали вникает...)
К слову, в clickfraud.ru мы скоро очень запустим сервис - на вход Excel с товарами, а на выходе цены на них на Ozon + Wb. Мы ведь боремся с плохими ботами, но делаем хороших :)
