Замена персонажа в существующем видео с сохранением липсинка и освещения. Локально на 5090 в Comfy с помощью Wan Animate. На первое видео разрешением 1024х576 в 4 шага ушёл 1 час, на второе 35 мин. А Sora так может? Твит
xAI: Илон обновил свой генератор картинок и видео Grok Imagine с v.01 до v 0.9. Создаёт видео длительностью 6 сек на основе текста или изображений за 15 секунд. Улучшилось качество визуала, но нет разрешения 1080p. Впрочем Sora 2 по умолчанию тоже 360p выдаёт. Генерит со звуком и липсинком, но качество аудио и фреймрейт гуляют судя по примерам. В отличие от Sora 2 тут нет такой цензуры и видео выдаются без водяного знака...
OpenAI: выпустили видеогенератор Sora 2. В модели значительно повысился реализм изображения: картинка выглядит более естественной, даже если это рандомное видео с телефона или футаж с камеры наблюдения. Также обновилась физика, которая способствует реалистичности. Плюс видео теперь генерится со звуком и липсинком, в том числе и на русском. Вместе с Sora 2 OpenAI запустили и соцсеть для публикации сгенерированного контента. Отличительной фишкой ещё является то, что можно генерировать видео с персонажами вроде Сэма Альтмана или друзьями пришедшими по инвайту. Для последнего нужно загрузить видео с собой...