Больше новостей об IT в Telegram канале «Код Дурова» Стартап Runway, ранее разработавший популярную нейросеть Stable Diffusion, представил новую модель преобразования видео. Она способна генерировать новые ролики из существующих видео при помощи текстового описания и изображений с возможностью изменения стиля и композиции кадра: Наша модель обучается на изображениях и видео, что также позволяет явно контролировать временную согласованность при помощи нового метода наведения. Наши эксперименты демонстрируют широкий спектр успехов: тонкий контроль над выходными характеристиками, настройка на основе нескольких эталонных изображений и предпочтение пользователей к результатам, полученным с помощью нашей модели. Существует пять возможных режимов: Недавно известный режиссёр Карен Ченг протестировала этот инструмент и опубликовала свои результаты: Больше новостей об IT в Telegram канале «Код Дурова»
Gen-1: новая модель преобразования видео с изменением стилизации
28 февраля 202328 фев 2023
3
~1 мин