Kling AI VIDEO 3.0
Мощное обновление, какой то новый уровень я думаю в генерации видео, будем наедятся что на деле все будет также сказочно как на словах, в таком случае нас будет ждать полноценная генерация фильмов в один промпт в ближайшем будущем
Представили две модели сразу, VIDEO 3 (стандартная для масс маркета) и OMNI 3 (премиум версия с расширенным контролем как я понял)
Обе модели поддерживают в едином фреймворке: Text-to-Video, Image-to-Video, Reference-to-Video, добавление/удаление контента, модификация и трансформация видео
🔘VIDEO 3.0
1. Multi-Shot - аи-режиссёр
Модель сама понимает структуру сцен и раскадровку из промпта и делает полноценные кинематографические последовательности:
- Классические диалоги с монтажом "крупный план - ответный план"
- Сложные техники типо параллельного монтажа и закадрового голоса
- Автоматическая смена ракурсов и композиции
В одну генерацию делает готовое кинематографическое видео
2. Первая в мире img2vid с усиленной согласованностью объектов
Теперь может в несколько референсных изображений для фиксации ключевых элементов, видео-референсы как источники элементов, жёсткую привязку персонажей, предметов и сцен, они остаются стабильными при любых движениях камеры
3. Нативное аудио с многоязычной поддержкой
Точная привязка реплик к персонажам в многофигурных сценах, работает на 5 языках (англ, китайский, японский, корейский, испанский), диалекты и акценты с естественной синхронизацией губ, многоязычные диалоги в одной сцене
4. Генерация текста нативного качества
Сохраняет текстовые детали с оригинальных изображений (вывески, надписи) или создаёт новый текст с чёткими буквами и грамотной композицией
5. Видео до 15 секунд с гибким контролем
Длительность видосов теперь от 3 до 15 секунд (раньше максимум 10 было)
🔘VIDEO 3.0 Omni
Комплексная система референсов 3.0:
Можно загрузить 3-8 секундное видео и модель сама извлечет все характеристики, захватит и внешность и голоса персонажей
Аудио + визуал
Строим элемент из нескольких картинок под разными углами, добавляем аудиоклип (от 3сек) для извлечения голоса
Раскадровка
Контроль на уровне отдельных кадров, можно регулировать длительность каждого кадра, масштаб, перспективу, движение камеры, нарративный контент и переходы между сценами
Ранний доступ для Ultra-подписчиков, паблик релиз скоро
В этом посте есть большое видео, которое не загрузилось в Дзен. Откройте оригинал поста в телеграме, чтобы его посмотреть
