77 подписчиков
Теперь можно создавать реалистичные видео с правдоподобными жестами — вышла нейросеть TANGO 💃
Что это такое: вы загружаете видео-референс и свое аудио, а модель генерирует не только липсинк, но и РЕАЛИСТИЧЕСКИЕ ЖЕСТЫ, которые соответствуют темпу аудио.
Под капотом — полноценный комбайн: в процессе генерации создается 3D-модель человека и анимируется в Blender.
Есть демо, но разработчики сразу предупреждают, что качество низкое. Если будете тестировать, загружайте видео, на котором полностью видны руки.
Около минуты
19 октября 2024