Южнокорейский стартап в области искусственного интеллекта Upstage заявил в четверг, что занял первое место в глобальной оценке больших языковых моделей (LLM).
LLM компании с 30 миллиардами параметров набрал 67 баллов, опередив LLaMa-2 от Meta (66,8 балла) в таблице лидеров Open LLM, управляемой платформой искусственного интеллекта Hugging Face, по состоянию на среду.
Таблица лидеров Hugging Face оценивает LLM с менее чем 100 миллиардами параметров по четырем ключевым показателям: сложность рассуждений модели, вывод здравого смысла, понимание контекста и фактическая точность. Он усредняет баллы для определения глобального рейтинга.
По словам официальных лиц Upstage, несмотря на меньший по параметрам инструмент LLM, корейская фирма показала примерно на 10 процентов более высокие оценки производительности, чем LLM, разработанные крупными мировыми технологическими фирмами, такими как Microsoft, Stability AI и Databricks.
Он также получил 56,5 балла за способность смягчать г