Компания Nvidia представила на GTC 2024 свою новую генеративную модель ИИ под названием Latte3D. Latte3D - это ChatGPT на стероидах. Это модель преобразования текста в 3D, которая принимает простые, короткие текстовые сообщения и за секунду превращает их в 3D-объекты и животных. Latte3D работает гораздо быстрее своих аналогов и напоминает виртуальный 3D-принтер, который может пригодиться творцам во многих отраслях.
Latte3D был создан, чтобы упростить создание 3D-моделей для многих типов творцов, например, тех, кто работает над видеоиграми, дизайнерскими проектами, маркетингом или даже машинным обучением и тренировками для робототехники. В демонстрационном ролике Nvidia модель выглядит очень простой в использовании. После быстрого текстового запроса ИИ генерирует 3D-модель и вскоре дорабатывает ее с большим количеством деталей. Хотя конечный результат не может сравниться по реалистичности с Sora от OpenAI, он и не должен быть таким - это способ ускорить создание активов вместо того, чтобы создавать их с нуля.
Модель генерирует несколько различных вариантов на выбор, и Nvidia утверждает, что эти формы можно "оптимизировать для более высокого качества в течение нескольких минут". Затем проекты можно экспортировать в различные платформы, например Omniverse от Nvidia, и доработать до желаемого конечного результата. Nvidia обучила Latte3D с помощью своих графических процессоров Ada A100 Tensor Core и подкрепила обучение подсказками ChatGPT, чтобы подготовить его к взаимодействию с реальными пользователями.
На данный момент Latte3D может генерировать только объекты и животных. В связи с этим, судя по всему, он отлично справляется с распознаванием различных животных, текстур и типов объектов. Nvidia продемонстрировала эти возможности, представив такие объекты, как обычный журавль амигуруми (вязаный крючком) или кошка оригами сфинкс. Модель научили распознавать различные виды животных, поэтому она может отличить итальянскую борзую от сиба-ину.
Создатели, которые хотят использовать Latte3D для большего, могут обучить ее на другом наборе данных, будь то растения или бытовые предметы, и впоследствии использовать ее в своих целях. Nvidia предлагает несколько интересных вариантов использования, например, обучение роботов-помощников перед их внедрением. Легко представить, что Latte3D пригодится разработчикам игр, но его потенциал выходит далеко за рамки игровых сценариев.
Саня Фидлер, вице-президент Nvidia по исследованиям в области ИИ, отметил, насколько быстрее работает Latte3D по сравнению со своими предшественниками: "Год назад на создание 3D-изображений такого качества у моделей искусственного интеллекта уходил час, а сейчас этот показатель составляет около 10-12 секунд. Теперь мы можем получать результаты на порядок быстрее", - говорит Фидлер.
Все недавние анонсы, связанные с использованием ИИ в разработке игр, довольно революционны, и Latte3D от Nvidia присоединяется к растущему списку инструментов, которые однажды могут полностью изменить процесс создания игры. Например, Nvidia совсем недавно представила неигровых персонажей (NPC) с диалогами, полностью сгенерированными ИИ. А последнее обновление Unreal Engine позволяет генерировать визуальные эффекты кинематографического качества в играх в режиме реального времени, и все это с помощью машинного обучения.
Если вам понравилась эта статья, подписывайтесь, чтобы не пропустить еще много полезных статей!
Также вы можете прочитать меня здесь:
- Telegram: https://t.me/gergenshin
- яндекс Дзен: https://dzen.ru/gergen
- официальный сайт: https://www-genshin.ru
