54 подписчика
Не так хорош, как заявили 😕
Недавние исследования поставили под сомнение возможности Gemini от Google. Учёные протестировали модели на способность отвечать на вопросы по содержанию длинных текстов и видеозаписей.
Результаты показали, что модели справляются с задачами значительно хуже заявленного: Gemini 1.5 Pro правильно ответил на 46,7 % вопросов, а Gemini 1.5 Flash — на 20 %.
Второе исследование выявило проблемы с анализом видеоконтента: точность ответов на вопросы по изображениям составила лишь 30 %.
Эти результаты вызывают серьёзные вопросы о реальных возможностях генеративных моделей ИИ и правдивости маркетинговых заявлений технологических гигантов.
Около минуты
2 июля 2024