Nvidia выпустила открытую модель ИИ для беспилотных автомобилей

Nvidia продолжает строить фундамент для так называемого «физического ИИ» — технологий, которые позволяют роботам и беспилотным автомобилям воспринимать реальный мир и взаимодействовать с ним. На конференции NeurIPS в Сан-Диего компания представила несколько важных новинок.

Главная из них — Alpamayo-R1, открытая визуально-языковая модель с функцией рассуждения, созданная специально для исследований в области автономного вождения. По заявлению Nvidia, это первая подобная модель, заточенная именно под беспилотники.

Что вообще такое визуально-языковая модель? Если коротко — это ИИ, который умеет одновременно обрабатывать текст и изображения. Для автомобиля это означает способность «видеть» окружающую обстановку и принимать решения на основе увиденного. Не просто распознавать знаки и разметку, а понимать контекст ситуации.

Alpamayo-R1 построена на базе Cosmos Reason — модели, которая сначала «думает», а потом действует. Семейство Cosmos компания впервые представила в январе 2025 года, а в августе добавила новые версии.

Зачем всё это нужно? Nvidia целится в достижение четвёртого уровня автономности. Это когда машина полностью управляет собой в определённых условиях и на заданной территории — без участия человека вообще. Звучит как научная фантастика, но компании по всему миру вкладывают в это миллиарды.

Главная идея Alpamayo-R1 — дать беспилотникам что-то вроде «здравого смысла». Того самого, который позволяет человеку интуитивно понять, что пешеход собирается перебежать дорогу, даже если тот ещё не шагнул на проезжую часть. Или что велосипедист впереди явно нервничает и может повести себя непредсказуемо.

Модель уже доступна на GitHub и Hugging Face. Это открытый проект, так что исследователи и разработчики со всего мира могут её использовать, дорабатывать и адаптировать под свои задачи.

Параллельно Nvidia выложила на GitHub так называемую Cosmos Cookbook — набор пошаговых руководств, ресурсов для инференса и рабочих процессов дообучения. Там есть всё: от курирования данных до генерации синтетических датасетов и оценки качества моделей. По сути — готовый конструктор для тех, кто хочет создавать свои решения на базе Cosmos.

Все эти анонсы — часть большой ставки Nvidia на физический ИИ. Дженсен Хуанг, сооснователь и глава компании, уже не раз говорил, что именно это — следующая волна развития искусственного интеллекта. Его поддерживает Билл Дэлли, главный научный сотрудник Nvidia.

«Думаю, рано или поздно роботы станут огромной силой в мире, и мы хотим делать мозги для всех этих роботов, — объяснял Дэлли летом этого года. — А для этого нужно уже сейчас разрабатывать ключевые технологии».

Логика тут простая: мощные GPU от Nvidia уже стали стандартом для обучения нейросетей. Теперь компания хочет, чтобы её чипы стояли в каждом роботе и каждом беспилотнике. И судя по темпам, с которыми выходят новые модели и инструменты, останавливаться никто не собирается.

Для российских разработчиков, кстати, это тоже любопытная история. Открытые модели вроде Alpamayo-R1 можно изучать и адаптировать — никаких географических ограничений нет. Другое дело, что для серьёзных экспериментов понадобятся те самые GPU от Nvidia, которые сейчас не так просто достать. Но это уже совсем другая история.