Технологическая компания Google анонсировала нейросеть Lumiere — видеогенератор, который, похоже, стал одной из самых продвинутых моделей преобразования текста в видео.
Название нейросети Lumiere («Люмьер») — отсылка к братьям Люмьер, которое считаются изобретателями кинематографа.
Помимо преобразования текста в видео, Lumiere умеет генерировать видео из статичных, загружаемых пользователем изображений, применять различные стили по образцу и редактировать ролики по текстовым подсказкам.
Нейросеть обучили на огромном массиве данных, в который вошли 30 миллионов видеороликов. Генератор способен создавать видео продолжительностью пять секунд разрешением 1024 на 1024 пикселей.