Добавить в корзинуПозвонить
Найти в Дзене
Psy Eyes

Те, кто пробовал генерить видео в Seedance 2 знают, что из-за цензуры без ухищрений создать видео с целевым лицом проблематично

Теперь Comfy добавили два воркфлоу для генерации в Seedance 2 видео с лицами людей. Один ворк это reference-2-video, где в виде рефа подаётся изображение или видео, а второй ворк для генерации по двум ключевым кадрам. Закинутые в инпут картинки/видео с человеком сначала должны пройти верификацию: ты добавляешь в ворк изображение/видео с целевым лицом —> проходишь по сгенерированной ссылке на прохождение liveness верификации через облако ByteDance —> получаешь Group ID на персонажа и Asset ID на конкретную картинку/видео —> и дальше их используешь как рефы на основе которых можно генерить. Когда загружешь новую картинку/видео с человеком, подставляешь Group ID для проверки личности, а новому изображению/видео присваивается свой Asset ID, который можно потом снова использовать. В качестве рефов может подаваться: до 9 картинок, 3 видео, и 3 аудио. Group ID привязывается к аккаунту без возможности передачи. На одном изображении/видео должен быть только один человек. Про аудио нигде ни сл

Те, кто пробовал генерить видео в Seedance 2 знают, что из-за цензуры без ухищрений создать видео с целевым лицом проблематично.

Теперь Comfy добавили два воркфлоу для генерации в Seedance 2 видео с лицами людей. Один ворк это reference-2-video, где в виде рефа подаётся изображение или видео, а второй ворк для генерации по двум ключевым кадрам.

Закинутые в инпут картинки/видео с человеком сначала должны пройти верификацию: ты добавляешь в ворк изображение/видео с целевым лицом —> проходишь по сгенерированной ссылке на прохождение liveness верификации через облако ByteDance —> получаешь Group ID на персонажа и Asset ID на конкретную картинку/видео —> и дальше их используешь как рефы на основе которых можно генерить. Когда загружешь новую картинку/видео с человеком, подставляешь Group ID для проверки личности, а новому изображению/видео присваивается свой Asset ID, который можно потом снова использовать. В качестве рефов может подаваться: до 9 картинок, 3 видео, и 3 аудио.

Group ID привязывается к аккаунту без возможности передачи. На одном изображении/видео должен быть только один человек. Про аудио нигде ни слова.

Есть вопросы к этой системе: если я сейчас первым пройду верификацию, используя лицо Брэда Питта или менее известного актёра/блогера обманув Liveness check с помощью DFL или Wan Animate, то я стану владельцем их ID и они сами не смогут ничего сгенерить? Кто первый того и тапки?

Второй момент: это необходимость где-то хранить Asset/Group ID. Пути локального Comfy неисповедимы. Что если папка с комфи случайно потрётся, или сами ID затеряются?

Так или иначе это лучше, чем ничего. Хотя думаю сообщество встретит это решение с вилами.

Верификация на цену видео не повлияла.

PS: кстати Comfy добавили недавно возможность генерить видео в Seedance 2 в 1080p. Стоит 721,5 кредит ($3,42) за 5 сек видео.

Анонс

-2
-3