75 подписчиков
ControlNet для text-2-video подъехал — STF (Sketch The Future)!
Описываешь сцену, делаешь скетчи, и модель генерит для тебя видео.
Сначала интерполируя кадры между введенными эскизами, а затем запускается Text-to-Video Zero в купе с ControlNet для получения консистентности. На выходе получается управляемый видеоконтент, который более точно соответствует предполагаемому движению объекта на видео.
Около минуты
11 мая 2023