ИИ не смог стать аналитиком
Современные модели нейросетей не смогли выполнить удовлетворительный анализ финансового рынка и дать требуемые от них прогнозы.
Стартап Vals AI проверил 22 модели в качестве финансового аналитика и точность анализа оказалась у всех ниже 50%. Первая тройка:
1) OpenAI o3 48,8%,
2) Claude 3.7 Sonnet (Thinking) 44.1%
3) Claude 3.7 Sonnet 42,9%,
остальные значительно хуже, на 4 месте o4 36.5% и на пятом Grock 3 MF Beta Reasoning 31.7%. Примечательно, что ни одной Llama нет выше 18 места.
«Никто из 20 не набрал более 50%. Им задали 500 вопросов». Хотя со временем производительность улучшится, нынешние возможности ИИ в финансах преувеличены, и еще предстоит долгий путь»… «Люди также привносят в свою работу качественные элементы, которые будут по-прежнему важны».
Джо Мансуэто Morningstar Inc
В итоге, все сходятся во мнении, что модели нейросетей в финансовом секторе хорошо могут помочь в финансовом секторе младшим банкирам, в моделировании, вводе данных, сборе данных по сделкам, но пока не более.
