В сети вирусится запись схватки между Томом Крузом и Брэдом Питтом. Понять, что это не фрагмент из нового боевика, можно лишь по едва заметной плашке AI Generated. Новый уровень реалистичности обеспечила модель Seedance 2.0 от китайской ByteDance.
Голливуд, ты следующий
Разработчики утверждают, что новинка способна моделировать сложные интерактивные сцены, строго соблюдая физическую логику: например, изменения преломления света и трепетание одежды при движении персонажа.
Второе поколение Seedance научили «режиссёрскому мышлению»: ИИ может самостоятельно планировать движения камеры, которые не указаны в промпте напрямую, но желательны для максимального художественного эффекта.
Seedance 2.0 создаёт видео продолжительностью 15 секунд в разрешении 2K. Но модель умеет склеивать несколько отрывков, продолжая повествование без потерь деталей. На вход в качестве примеров можно загрузить несколько изображений или роликов. Из них нейросеть позаимствует персонажей и окружение.
Ещё модель способна генерировать двухканальный звук, в том числе реплики персонажей, синхронизируя аудиопоток с движением губ. Поддерживаются восемь языков, включая русский и английский. Впрочем, разработчики признаются, что нейросеть может ошибаться с липсинком нескольких исполнителей в одном кадре и периодически искажать звуковые эффекты.
C помощью Seedance 2.0 пользователи начали переосмысливать существующие произведения. Например, кто-то «переснял» финал «Очень странных дел»:
Cоавтор сценария фильмов «Дэдпул» и «Росомаха» Ретт Риз заявил, что был потрясён качеством дипфейка с Крузом и Питтом. «Меня совсем не радует вторжение ИИ в творческую сферу. Наоборот, я в ужасе. Многие мои близкие рискуют потерять любимую работу. Я сам тоже в опасности», — написал Риз.
В индустрии есть и другие мнения. Например, сценаристка «Рика и Морти» Хизер Энн Кэмпбелл считает, что даже с неограниченным бюджетом и самыми передовыми технологиями самое сложное в киноискусстве — придумать оригинальную идею.
Как попробовать?
Пока ByteDance не даёт протестировать новую нейросеть пользователям за пределами КНР. Модель представлена на платформе Jimeng AI и в чат-боте Doubao, но опробовать её получится лишь при наличии китайского номера телефона и соответствующей подписки.
Ожидается, что к концу февраля Seedance 2.0 станет доступна в большем количестве сервисов, в том числе за рубежом.