Генеративный сервис Adobe Firefly с обновлением получил возможность создавать не только видео, но и звуки к ним. Причём, помимо текстовой подсказки, можно ввести голосовой образец. Например, сымитировать рык льва, чтобы нейросеть создала на его основе более реалистичный вариант. Также разработчики добавили ещё несколько улучшений.
Новый инструмент для создания звуков Generate Sound Effects работает на базе Project Super Sonic. На входе он принимает описание результата и пример аудио, после чего генерирует несколько похожих вариантов. Голосовая подсказка нужна не только для примера, но и для считывания интонации, энергичности и других характеристик речи. Пока генератор аудио находится на стадии бета-тестирования.
Другая новая функция — Text to Avatar — генерация персонажей, читающих заданный текст. Она принимает текст и генерирует реалистичного человека, который его читает. К слову, генератор видео тоже обновился. Компания добавила функцию добавления первого и последнего кадров, чтобы сервис создавал ролик не с нуля, а между ними.
Также добавили возможность одним нажатием применять различные стили, как, например, аниме или пластилиновой анимации. Композиция видео теперь тоже настраивается проще: можно загрузить эталонный образец, на основе которого Firefly создаст новое видео с учётом подсказки. Также в Adobe заявляют, что движения в кадре стали плавнее и естественнее.