2782 подписчика
Компания ByteDance разработала собственного веб-парсера Bytespider, который в 25 раз быстрее, чем парсер OpenAI.
Bytespider также в 3000 раз производительнее, чем парсер Anthropic ClaudeBot. Как и другие подобные боты, Bytespider игнорирует инструкции robots.txt, которые ограничивают доступ к данным на сайтах.
По данным Kasada, активность Bytespider резко возросла за последние 6 недель. Эксперты считают, что ByteDance отчаянно пытается догнать своих конкурентов в области разработки ИИ-моделей.
Гайд по оплате Нейросетей
Около минуты
8 октября 2024