338 подписчиков
OpenAI представила Sora (https:/...ra) — новую модель ИИ для создания и редактирования видео
«Sora открывает перед бизнесом широкие перспективы для усиления бренда и повышения вовлеченности аудитории. Это инструмент, который может радикально изменить подходы к маркетингу и контент-стратегии, делая их более динамичными, персонализированными и эффективными. Кроме того, это важная веха для формирования интерактивных тренингов и обучения», — отмечает дата-саентист ТеДо (https:/...yu) Юрий Симонов.
🔎Технические особенности
Модель принимает на вход не только текстовое описание (промпт), но и изображения, видео.
При этом видео она воспринимает не как единое полотно, а режет его на кусочки — патчи, похожие на токены в текстовых моделях (GPT). Такой подход позволяет обрабатывать гораздо более широкий спектр визуальных данных, разнообразных по длительности, разрешению и соотношению сторон.
Кроме того, Sora «запоминает» объекты, даже если они временно исчезают из поля зрения, благодаря чему в итоговом ролике объекты изменяются последовательно и логично.
⚡️Какие задачи решает модель
❶ Создание видео, в том числе зацикленных, анимация статичных изображений.
❷ Редактирование видео: Sora может продлить видео, соединить два ролика, изменить их визуальный стиль.
❸ Симуляция простых взаимодействий предметов: например, рисования кистью.
❹ Симуляция цифровых миров: модель может имитировать видеоигры, например, Minecraft, управляя игроком и воссоздавая динамику игрового мира с высокой точностью.
1 минута
19 февраля 2024