Она зачитала выпуск новостей
По задумке, разработка может использоваться для новостей на телевидении и электронных коммуникаций, создания обучающего, рекламного и другого видеоконтента.
«Елена» способна вести новостные сюжеты, используя лишь текст для генерации полноценного видеоизображения и речи, сопровождая это мимикой и эмоциями реального человека. Особенно разработчики гордятся автоматической генерацией мимики, что является нетривиальной задачей, с которой удалось справиться лишь немногим компаниям в мире.
Над «Еленой» работали в Лаборатории робототехники «Сбербанка» совместно с «ЦРТ» и CGF Innovation. В «ЦРТ» обеспечили опытную систему синтеза речи на основе искусственных нейронных сетей, а в CGF Innovation — создание фотореалистичной компьютерной графики.
Как это работает?
В программу загружается текст новости, после чего она генерирует видеоролик, в котором девушка на экране озвучивает написанное. Виртуальная модель подстраивает мимику лица и движения под смысл текста для пущей достоверности образа, но есть и недочёты. Обратите внимание на глаза с неподвижными зрачками, которые почти никогда не моргают, проследите за движениями губ, которые порой не совпадают с текстом.
Но "Елена" работает при помощи нейросетей и постоянно самообучается, так что со временем виртуальная телеведущая должна подтянуть свои навыки. «Уникальность Елены в том, что она позволяет полностью автоматизировать труд телеведущей: созданный журналистом текст можно оцифровать и получить конечный продукт — новостной сюжет для трансляции зрителям», — гордится первый зампред правления «Сбербанка» Лев Хасис.
К сожалению нам не удалось получить видео фрагмент, который сгенерировала программа. Ждём появления "Елены" на ТВ.
Спасибо за то, что дочитали статью. А чтобы не пропустить следующую статью, подписывайтесь и погружаетесь в будущее вместе с нами!