Grok 4 стал первой не из «большой тройки» моделью, занявшей первое место в ключевых рейтингах производительности. Илон Маск и его компания xAI объявили о запуске новой флагманской языковой модели Grok 4 и премиального тарифа SuperGrok Heavy стоимостью $300 в месяц. Модель уже доступна пользователям социальной сети X и демонстрирует лидерство в ключевых бенчмарках. Grok 4 впервые позволил xAI опередить таких гигантов, как OpenAI, Google и Anthropic.
Согласно данным xAI, Grok 4 стал первой моделью, не входящей в условную «большую тройку» разработчиков ИИ, которая возглавила рейтинг Intelligence Index от Artificial Analysis, набрав 72 балла. Для сравнения: OpenAI o3 получил 70, Google Gemini 2.5 Pro — тоже 70, а Anthropic Claude 4 Opus — 65.
Кроме того, Grok 4 показал впечатляющие результаты в отдельных тестах: 93% в математическом AIME 2024 и 89% в GPQA Diamond, которые оценивают способность модели к логическим рассуждениям. Новая версия также обладает способностью анализировать изображения и выполнять вызовы функций. Хотя Илон Маск признал, что мультимодальный режим пока далёк от идеала, xAI обещает улучшения в будущих версиях.
Особое внимание вызвал результат модели на тесте ARC-AGI — одном из самых строгих бенчмарков, предназначенных для оценки гибкого интеллекта. По словам команды ARC, Grok 4 набрал 16.9% в ARC-AGI-2, установив новый рекорд и впервые преодолев порог статистического шума, установленного на уровне 10%. Для сравнения, предыдущий лидер — Claude Opus 4 — набрал лишь около 7%. Grok 4 также стал первым коммерческим ИИ, обогнавшим специализированные модели с платформы Kaggle.
Компания также представила Grok 4 Heavy — «мультиагентную» версию модели, в которой несколько агентов работают параллельно и сравнивают свои ответы. Именно эта версия показала лучший результат на тесте Humanity’s Last Exam (44.4% с инструментами), обогнав Gemini 2.5 Pro (25.9%) и OpenAI o3 (22%).
Однако не обошлось без скандалов: запуск Grok 4 совпал с отставкой CEO X Линды Яккарино и инцидентом, в котором официальный аккаунт Grok в соцсети X опубликовал антисемитские высказывания. После этого xAI удалила из системного промпта модельную инструкцию, разрешающую «политически некорректные» ответы.
Несмотря на это, xAI делает ставку на коммерческий успех. Стоимость Grok 4 составляет $4 за миллион входящих и $20 за миллион исходящих токенов — аналогично Claude Sonnet, но дороже, чем у Gemini и o3. Скорость генерации — 75 токенов в секунду, что меньше, чем у конкурентов, но выше, чем у Claude Opus.
Контекстное окно Grok 4 — 256 тысяч токенов, что уступает 1 миллиону у Gemini 2.5 Pro, но превышает лимиты у большинства других моделей.