Nvidia показала модель нейросети, которая учится действовать
Исследователи из Nvidia, Стэнфорда, Caltech и ряда других институтов представили NitroGen — открытую базовую модель, обученную играть более чем в 1000 разных игр. Как пояснил директор Nvidia по ИИ Джим Фан, игры здесь лишь полигон: цель проекта — универсальное обучение действиям, применимое к моделированию, симуляциям и робототехнике.
NitroGen строится на архитектуре GROOT N1.5, изначально разработанной для роботов. Игровая среда используется как источник разнообразной физики, механик и неожиданных ситуаций — того, с чем в реальном мире сталкиваются автономные системы. Для обучения модель получила свыше 40 тысяч часов публичных геймплей-видео, включая стримы, где видно реальные действия игроков с геймпадом.
В тестах NitroGen уверенно справляется с RPG, платформерами, гонками, баттл-роялями и 2D/3D-играми, в том числе в ранее незнакомых и процедурно сгенерированных мирах. По данным авторов, успешность выполнения задач выросла на 52% по сравнению с моделями, обученными с нуля.
Первая версия модели фокусируется на «игровом инстинкте» — быстрой моторной реакции и принятии решений в реальном времени. Но ключевая идея шире: создать универсальных воплощённых агентов, способных действовать в неизвестных средах — давняя цель исследований нейросетей.
Весь проект NitroGen выложен в открытый доступ: веса модели, датасеты действий и код доступны для экспериментов и доработок.
В этом посте есть большое видео, которое не загрузилось в Дзен. Откройте оригинал поста в телеграме, чтобы его посмотреть
