Alibaba выпустила бесплатную нейросеть для анимации персонажей по одному фото
Alibaba представила новую модель Wan 2.2 Animate с открытым исходным кодом, которая умеет превращать статичные изображения в видеоролики. Нужно загрузить фото персонажа и ролик с движениями, и система «оживит» изображение: повторит мимику, позы и пластику тела.
Модель работает в двух режимах. В первом она переносит движения из драйв-видео на героя с фотографии и создает новое видео. Во втором – заменяет персонажа в самом ролике: фон и сцена сохраняются, но вместо оригинального человека появляется выбранный персонаж.
Wan 2.2 Animate входит в семейство моделей Wan 2.2 для генерации видео из текста и озвучки. Скачать инструмент можно на GitHub и Hugging Face, доступен он и через API на Alibaba Cloud.
