136 млн запросов от ботов, 1000 доменов в анализе, 3 месяца наблюдений — всё что нужно знать о бот-трафике
Мы проанализировали 1000 доменов на наличие бот-трафика. В выборку попали сайты новостного формата — чтобы не было искажений. Почему именно эта выборка? На информационниках очень активно обучаются языковые модели. Пятёрка самых активных ИИ-ботов за 3 месяца: Facebook - 34 502 888 запросов Bytespider (TikTok) - 10 286 154 запросов Huawei - 10 045 766 запросов GPTBoot - 8 653 502 запросов Amazon Bot - 6 477 078 запросов Claude Bot - 4 728 798 запросов Причём они посещают все 1000 сайтов, давая колоссальную нагрузку...