Компания xAI Илона Маска представила нейросеть Grok – конкурента ChatGPT. На официальном сайте перечислены преимущества нового алгоритма и сведения о тестировании чат-бота в ИИ-бенчмарках.
Компания xAI была основана в июле и включает в себя опытных сотрудников, перешедших из компаний, таких как OpenAI и DeepMind. Илон Маск утверждает, что в первых тестах, Grok превзошел ChatGPT и другие модели, несмотря на то, что у него был меньший объем обучающих данных.
При создании нейросети Grok разработчики вдохновлялись путеводителем «Автостопом по галактике» из одноименного произведения Дугласа Адамса.
По их утверждению, «искусственный интеллект предназначен для того, чтобы отвечать практически на все и, что гораздо сложнее, даже подсказывать, какие вопросы задавать».
Ключевым преимуществом этой модели является возможность получения ответов практически на любой вопрос за счет доступа к информации из соцсети X в режиме онлайн. Как отмечают разработчики, чат-бот Grok сможет общаться с юмором и отвечать на те вопросы, которые игнорируют другие чат-боты. В xAI характеризуют Grok как немного забавного и бунтарского чат-бота, готового отвечать на вопросы, от которых другие ИИ могли бы уклониться.
Алгоритм разрабатывался на базе большой языковой модели (LLM) Grok-0 с 33 млрд параметров. Ее прототип по функционалу сопоставим с LLaMA 2 от Meta* в стандартных тестах, при этом в ней используется только половина обучающих ресурсов. В последние два месяца создатели значительно улучшили возможности логического анализа и кодирования, в результате получилась более мощная языковая модель Grok-1.
Последние два месяца разработчики дополнительно обучали Grok-1 на задачах по написанию кода и логическим рассуждениям. В результате чат-бот набрал 73% в стандартном тесте MMLU и 63% в HumanEval, обогнав GPT-3.5, LLaMa 2 и Inflection-1. При этом Grok-1 всё ещё проигрывает Palm 2, Claude 2 и GPT-4. Инженеры xAI считают, что конкурентам удаётся вырваться в лидеры из-за большого количества обучающих данных, но со временем разрыв получится сократить.
Сейчас Grok доступен ограниченному кругу пользователей, принимающих участие в тестировании. Со временем xAI будет выдавать доступ дополнительным группам, но для этого надо зарегистрироваться в программе предварительного доступа на сайте Grok. Авторизоваться можно только с помощью аккаунта X. После выхода ранней бета-версии доступ к чат-боту смогут получить все подписчики X Premium+. Тарифный план стоит 16 долларов в месяц и, кроме Grok, даёт доступ к другим функциям социальной сети X.
*компания Meta признана экстремистской и запрещена на территории Российской Федерации.