Найти в Дзене
Neuro-сеть

Генерация коротких видео через SVD

Оглавление

Приветствую!

Разработчики компании
Stability AI выпустили Stable Video Diffusion - первую базовую модель для генеративного видео, основанную на модели изображения Stable Diffusion.

Описание модели

(SVD) Изображение-в-видео — это модель скрытой диффузии, обученная генерировать короткие видеоклипы на основе обработки изображения. Эта модель была обучена генерировать 25 кадров с разрешением 576x1024 с учетом контекстного кадра того же размера, точно настроенного из SVD Image-to-Video [14 кадров] . Есть возможность использовать декодер f8 для обеспечения временной согласованности. Для удобства здесь лежит дополнительно стандартный покадровый декодер.

Конкурентоспособная производительность Stable Video Diffusion выпускается в виде двух моделей преобразования изображения в видео, способных генерировать 14 и 25 кадров с настраиваемой частотой кадров от 3 до 30 кадров в секунду.

Источники моделей

Для исследовательских целей мы рекомендуем наш generative-models репозиторий Github ( см. Репозиторий) ), в котором реализованы самые популярные фреймворки распространения (как для обучения, так и для вывода).

По ссылкам выше вы сможете самостоятельно на своём ПК использовать данный сервис, но, разумеется, среди вас будут и те, которые захотят попробовать прямо сейчас без лишних движений.

Для вас я нашёл сайт, где выкладывают модели и позволяют запускать прямо онлайн(не все бесплатные):
https://replicate.com/stability-ai/stable-video-diffusion

Спасибо, что дочитали до конца! 🙏

Буду рад вашим комментариям🎤, лайкам🧡 и подпискам на мой канал:

Neuro-сеть | Дзен

Заходите в мою группу в VK и на канал Телеграм: стараюсь публиковать везде разное и не дублировать

Вам может понравится:

#ai #ИИ #искусственный интеллект #интеллект #нейросети #chatgpt #gpt #нейросеть #stable #sd #diffusion