Тайна робота за стеклом: как работает иллюзия на экранах?

Сейчас на концертах есть не только музыка и освещение, но и сопровождающий все это визуал. Его делают моушн-дизайнеры и аниматоры. Это нужно, чтобы задать тон выступлению, раскрыть идею исполнителя, либо просто впечатлить зрителя красивой картинкой.

Содержание:

1. Где проходит большая часть работы?
2. Как стали использовать нейросеть в моушн-дизайне?
3. Что уже научились делать нейросети?
4. Подборка нейросетей для дизайнеров

И сегодня мы расскажем, как это работает.

Большую часть времени будем рассказывать про то, как нейросеть помогает делать анимацию. Сейчас ИИ может решать монотонные задачи: анимировать волосы, изменять постановку кадра и помогать в создании сценария. Источник картинки.

Где проходит большая часть работы?

В Blender, 3DS Max и других программах. Подсоединить аппаратуру и вывести изображение на экран - самая простая часть работы. А вот сделать продукт - намного тяжелее. Вот условный список пунктов, которые нужно выполнить для создания ролика:

1. Обсудить с заказчиком концепт. Нужно впечатлить зрителя, представить важную персону, показать идею и т.д.
2. Поиск референсов.
3. Написание сценария. Он нужен даже для короткого ролика.
4. Раскадровка. Сценарий и визуал связываются, результат может быть похожим на комикс. Она нужна для более детальной проработки анимации, правильной постановки кадра, создания нужных акцентов в сценарии и т.д.

Для создания сценария можно поговорить с чат-ботом. Роботу можно задавать наводящие вопросы, либо попросить раскрыть определенную мысль подробнее. Считайте его своим другом-сценаристом, который поможет решить проблему чистого листа. Выше вы видите результат общения с GigaChat.

5. Утверждение визуальных эффектов. Для финальной работы могут нарисовать 3 и более персонажей в разных стилях, то же самое касается и фона. Утверждают вид персонажа с нескольких ракурсов, его размер, задний план и т.д.

6. Отрисовка фонов и предметов, с которыми герой будет взаимодействовать.

7. Анимация. Ключевая часть работы, приводящая героев в движение.

8. Музыкальное оформление.

9. Перевод файлов в видеоформат.

Также подбирается голос озвучки (если в нем есть необходимость).

В скольки этапах можно использовать ИИ? Во всех. Вот музыкальный клип, который был сделан с помощью Sora AI.

Как стали использовать нейросеть в моушн-дизайне?

Выделим несколько направлений, в которых используется нейросеть.

Генерация движения

Сейчас ИИ научился создавать плавные анимации. Он берет на себя рутинную часть, а человек занят более сложными задачами.

Создание спецэффектов

Можно освободить часть ресурса, поручив нейросети создание огня или воды. Это как в мультфильмах, где рисовка от руки заменяется 3D-объектами. Более простое применение ИИ - создание эффектов (например, размытия определенных элементов).

Доработка анимаций или объектов

Объект движется, но делает это топорно. Нейросеть может помочь с добавлением кадров.

Ускорение создания интерактивных анимаций

Интерактивная анимация - это движущийся рисунок, который реагирует на движение мышки или клавиатуры. Примером интерактивной анимации является флеш-игра на сайте.

Что уже научились делать нейросети?

Покажем несколько примеров того, что уже умеют делать нейросети (и как это поможет).

• Нейросети завязаны не только на анимации. Например, для проекта “Ева. Связь сквозь время” GPT готовил фактуру. В серии про античную Грецию ИИ он помогал рисовать одежду тех времен, ключевые морские торговые пути, форму бороды и т.д.

• В этом видеоролике вы видите движение необычного существа, часть тела которого составляют помехи. На их создание могут уйти часы работы, но при помощи нейросети элементы были созданы намного быстрее.

• Stable Diffusion позволяет менять ракурсы картинок. Допустим, есть простая анимация (или даже фотография). Можно приблизить изображение так, чтобы менялся фон (либо отдалить его). Добавить эффекты на фоне, заниматься смещением и т.д. А еще она позволяет быстро анимировать волосы.

А вот так применяли Stable Diffusion. Большую часть работы делали люди, но нейросеть помогала с анимациями и движениями.

• Ричард Юан и его команда сделали целый фильм, созданием которого управляла нейросеть. Ее попросили представить список инструкций, выбрать объективы и движение камеры, подобрать правильную одежду и т.д. Нейросеть может помочь проработать сценарий вашего будущего проекта.

Все это вы можете применять в фильмах, мультфильмах, рекламе и т.д. Ведь конечная цель - показать ролик, который понравится людям.

Подборка нейросетей для дизайнеров

6 нейросетей для тех, кто хочет улучшить качество своих работ:

• Adobe Sensei. Нейросеть помогает ускорить разные процессы в сервисах, придуманных компанией Adobe.
• Wonder Dynamics. Позволяет захватывать движения реальных персонажей, чтобы потом переводить их в анимацию. Также нейросеть может изменить стиль изображения.
• AI Color Wheel. Вы сделали анимацию, но хотите ее улучшить при помощи цветокоррекции, контрастности и т.д. Эта нейросеть может выполнить все это за вас.
• Ebsynth. Добавляет анимацию к картинкам. Это же касается и работ, сделанных другими специалистами (например, рисунков в Blender).
• Midjourney Prompt Generator. Сервис дает подсказки при выполнении задач. Это еще один специалист, имеющий альтернативный взгляд на вещи.
• Nolan. Для решения проблемы чистого листа можно воспользоваться этой нейросетью. Она пишет сценарии для будущих проектов.

Одним из инструментов, помогающих делать анимации, является 3DS Max. Мы поможем разобраться в интерфейсе этой программы, расскажем о принципах создания 3D-объектов, подскажем, как проработать окружение и т.д. Также вам помогут научиться работать с библиотеками и полезными материалами. Переходите и записывайтесь к нам.