Nvidia представила генератор 3D-сцен с движением из статичных 2D-изображений — Instant NeRF. Теперь ИИ сможет работать задействуя технологии RTX и GTX, которые есть в видеокартах компании.
Neural Radiance Fields (NeRF) позволяет преобразовывать изображения объекта, снятые с разных ракурсов, в трехмерную модель задействуя нейросеть. Все это система делает за несколько секунд с использованием ускорения на графических процессорах GeForce RTX и GeForce GTX.
Раньше для такой задачи нужно было иметь большую вычислительную мощность, но сейчас будет только нужна видеокарта GeForce RTX и компьютер.
Сценариев использования системы, представленной Nvidia, достаточно много. Например, можно сфотографировать квартиру и затем устроить виртуальный показ в трехмерном пространстве.
При использовании VR-технологии в сгенерированном нейросетью пространстве можно «побывать». Конечно же, детализация сцены зависит от качества изначального набора кадров. Но есть интересный факт: нейросеть не может распознавать зеркала. Инструмент Instant NeRF воспринимает зеркало, как проход комнату, отражающую ту, где находится сам наблюдатель. И поэтому можно будет «полетать» по отражению .
Технология RTX сделала общедоступным инструмент NeRF для обычных пользователей ПК и ноутбуков.Для тренировки ИИ не будет требоваться серверное оборудование. Компания заявляет, что рабочие станции с Nvidia RTX и ПК с GeForce RTX прекрасно подойдут для работы с NeRF.
Для простых пользователей на сайте GitHub выложили открытый код и приложение для установки Instant NeRF. Там же в открытом доступе на сайте есть руководство и дополнительные обучающие материалы.
Нужно загрузить установщик Instant-NGP для Windows. Сейчас уже есть подробное руководство по работе с Instant NeRF, графическому интерфейсу, оптимизации параметров сцены и созданию анимаций. Эта прекрасная возможность, как и для начинающих художников, так и для профессионалов.
На трехмерные сцены, которые созданы с помощью технологии Instant NeRF можно посмотреть на официальном сайте по следующей ссылке.
Следите за новостями в наших социальных сетях: ВКонтакте и Telegram.