Компания «Яндекс» представила бета-версию своей новой нейросети YandexART (Vi), способной создавать короткие 5-секундные видео с плавными и естественными движениями объектов на экране.
В основу YandexART (Vi) легла предыдущая версия нейросети, выпущенная в августе 2023 года. Однако, в отличие от своего предшественника, который использовал технологии для создания эффекта движения камеры, новая версия сосредоточена на более реалистичном движении самих объектов. Ранее смена кадров приводила к заметным изменениям элементов, что влияло на восприятие движения.
Для улучшения YandexART (Vi) была проведена дополнительная обучающая программа с использованием видеоматериалов, в которых задействованы различные движущиеся объекты, такие как автомобили, бегущие животные или падающие листья. Благодаря этому нейросеть теперь может создавать более естественную динамику, практически не искажая объекты в кадре.
YandexART (Vi) способна генерировать анимацию на основе текстового описания. Пользователю необходимо точно сформулировать запрос, чтобы получить желаемый результат. Например, можно запросить: «Длинноволосая девушка держит платок, который уносится ветром на фоне морского заката». На основе текста нейросеть сначала создаёт статичный кадр, который затем преобразуется в плавную анимацию.
Эти новые возможности нейросети могут быть полезны профессионалам в области анимации, мультипликации, блогерам, а также другим креативным специалистам. Обычные пользователи тоже смогут воспользоваться технологией для создания уникальных анимаций, например, для оформления тем на телефоне.
Доступ к YandexART (Vi) открыт уже сейчас через приложение «Шедеврум».