Midjourney: выпустили видеогенератор Midjourney Video V1

Midjourney: выпустили видеогенератор Midjourney Video V1.

Работает в режиме img-2-video. Выбираете сгенерированную картинку или загружаете свою и нажимаете Animate. Промт автоматом улучшается. Есть и ручной режим, где можно описать, что именно нужно поменять/анимировать. Также в наличии настройка “low motion” и “high motion”. Первая для статичных медленных кадров, вторая для динамичных сцен. Ещё можно расширять видео на 4 сек с лимитом в 16 сек.

Картинка на выходе эстетичная, характерная для Midjourney. С динамикой работает хорошо, и вроде даже с анатомией неплохо. Но есть вопросы к детализации: заметны артефакты и пожатость изображения. Народ пишет на выходе 480p, что не чета даже опенсорсным генераторам типа Wan и сегодняшнему Hailuo 02.

Сами разрабы видят генерацию картинок и видео частью глобальной системы симуляции 3D пространства с управлением сценами и объектами в нём:

Представьте себе систему искусственного интеллекта, которая генерирует изображения в режиме реального времени. Вы можете приказать ей двигаться в 3D-пространстве, окружение и персонажи тоже двигаются, и вы можете взаимодействовать со всем.

Чтобы сделать это, нам нужны строительные блоки. Нам нужны визуальные образы (наши первые модели изображений). Мы должны заставить эти изображения двигаться (видеомодели). Мы должны иметь возможность перемещаться в пространстве (3D-модели) и делать все это *быстро* (модели реального времени).

В течение следующего года мы будем создавать эти части по отдельности, выпускать их, а затем медленно собирать все вместе в единую систему. Поначалу это может быть дорого, но очень скоро, этим смогут пользоваться все.

Доступно по подписке $10/мес. Генерация одного видоса стоит в 5 раз дороже картинки. Владельцы Pro подписок и выше смогут генерить в Relax режиме (тестируется).

Сайт

Анонс