357 подписчиков
CogVideoX-2B - локальная SORA-подобная модель для генерации видео.
Модель является самой первой и одновременно младшей из серии моделей CogVideoX. В будущем, разработчики обещают выпустить более крупные версии.
По характеристикам:
Разрешение видео: 720x480
Частота кадров: 8 кадров в секунду
Длина видео: 6 секунд
Требуется минимум 18 Гигабайт видеопамяти при использовании SAT или 36 гигабайт при использовании diffusers в качестве бэкенда.
Если что, то как раз таки версия с веб интерфейсом работает на diffusers.
Разработчики обещают позже оптимизировать работу через diffusers и снизить требования к памяти.
Попытаться потестить можно тут:
Воркфлоу для ComfyUI:
#text2video #aivideo #sora #video
Около минуты
6 августа