Если коротко, то это как маленькая киностудия, которая помещается в ноутбуке.
1️⃣ Сначала пишем сценарий — обычный текст: кто что говорит, где он стоит, что происходит в кадре. У нас его пишет Claude AI.
2️⃣ Потом описываем персонажей: возраст, внешность, одежда, настроение, иногда даже «характер камеры» — крупные планы, плавные пролёты, как в кино.
3️⃣ На основе сценария делаем простую раскадровку: разбиваем текст на сцены и для каждой прикидываем кадр — ракурс, фон, движение. Некоторые для этого используют ИИ‑сторибордер: загружаешь текст — он предлагает визуальные наброски сцен.
4️⃣ Дальше — генерация видео: загружаем сценарий и описания в сервис text‑to‑video (Kling, Veo, Sora и т.п.), ИИ создаёт черновик ролика, прорисовывает ключевые кадры и достраивает между ними плавное движение.
5️⃣ Отдельно делаем озвучку: генерируем звук из текста нейросетью (выбираем язык, тембр, эмоциональность).
6️⃣ И самое волшебное — липсинк: мы загружаем видео и аудио, а нейросеть покадрово анализирует звук, распознаёт фонемы и «перерисовывает» движение губ персонажа так, чтобы речь и мимика совпали.
🚀
Для создания первой серии ИИ сериала «Дина и Хива» мы использовали: 8 нейросетей, 386 фотогенераций (проработка персонажей, локации, раскадровка и т.д.), 30 простых видеогенераций без речи, 152 генерации речи и 84 генерации липсинк🤪
Если хотите, в одной из следующих статей разберем один этап подробнее — выбирайте какой?
#ДинаиХива #АрдаХива #ИИсериал