Новые инструменты ИИ, монтаж с поиском по тексту, преобразование речи в текст, классификация аудиоконтента, дополнительные меню на странице Cut и поддержка файлов USD на странице Fusion.
Новые функции на базе ИИ
- Транскрибирование аудио: Преобразование аудио в текст внутри клипов для поиска медиа на основе нарративного содержания
- Автоматические субтитры: Генерация субтитров с помощью функции распознавания речи
- Классификация аудио: Автоматическая сортировка аудиоклипов с помощью DaVinci Neural Engine AI
- Автоматическая группировка аудиодорожек: Ускоренная автоматизация микширования и редактирования на странице Fairlight с помощью ИИ
Вот перевод новости с официального сайта:
Выставка NAB-2023 (Лас-Вегас, США) - воскресенье, 16 апреля 2023 года - Компания Blackmagic Design анонсировала релиз DaVinci Resolve 18.5, в который добавили новые инструменты ИИ и более 150 обновлений. Среди них эффект Resolve FX Relight, преобразование речи в текст, автоматическое создание субтитров, классификация аудио контента с помощью ИИ, поддержка файлов с универсальным описанием сцены и меню на странице Cut, что позволяет работать быстрее и эффективнее. Публичную бета-версию DaVinci Resolve 18.5 уже можно загрузить с веб-сайта Blackmagic Design.
Компания представила DaVinci Resolve 18.5 на своем стенде N2601 в рамках NAB-2023.
В DaVinci Resolve 18.5 добавлено десятки новых инструментов, в том числе четыре инструмента искусственного интеллекта, сделано более 150 обновлений и значительно оптимизирована страница Cut. Функция преобразования речи в текст позволит монтажерам быстро найти нужный фрагмент на временной шкале или создать субтитры. С помощью алгоритмов ИИ платформы DaVinci Neural Engine можно анализировать и автоматически сортировать аудиоклипы по классификации, а на странице Fairlight - группировать дорожки для автоматизации и редактирования миксов. Кроме того, появился новый эффект Relight, который позволит колористам добавлять виртуальное освещение сцены, а поддержка USD-файлов и новый инструмент многослойного объединения значительно облегчат и ускорят сотрудничество VFX-художников.
Для инициализации удаленного мониторинга нужны только Blackmagic ID и код сеанса. Нужно всего лишь включить эту функцию в приложении DaVinci Resolve и поделиться кодом. Настраивать IP-адреса и перенаправление портов не нужно. Передавать изображение можно одновременно на несколько компьютеров, устройств iPad и iPhone. Также есть средство экспорта временной шкалы в Blackmagic Cloud с помощью новой функции Presentations, которая доступна для тех, кто создал проектную библиотеку. Это позволяет нескольким пользователям просматривать имеющийся материал, оставлять комментарии и даже общаться через чат. Комментарии будут появляться на временной шкале DaVinci Resolve в виде маркеров, поэтому их будет трудно не заметить.
На странице Color для временных шкал теперь можно задавать отдельные цветовые настройки. Ко всем имеющимся специальным шкалам автоматически применяются проектные параметры управления цветом. После этого временные шкалы можно преобразовать в независимые и выбрать для них индивидуальные цветовые пространства при работе с медиа файлами разных форматов. Новый эффект Relight позволяет добавлять виртуальные источники света, чтобы изменять окружающее освещение, насыщенность теней и атмосферу сцены. Можно выбирать направленное, точечное или проекторное освещение, а также регулировать гладкость и зеркальность поверхности. В окне просмотра на странице Color теперь поддерживается показ наложений маркеров и заметок, добавленных на временной шкале.
На странице Cut для временной шкалы были добавлены три новых меню, что позволяет работать быстрее и эффективнее. Теперь можно включать и выключать подгонку со сдвигом, обрезать клипы до курсора воспроизведения, выполнять повторную синхронизацию аудио и изменять внешний вид всей шкалы. На странице Cut также поддерживается обнаружение изменения сцен. Для этого нужно просто перейти в меню временной шкалы и выбрать Detect Scene Cuts. Клипы будут проанализированы, а изменения сцен - автоматически помечены на шкале. Это поможет их быстро найти и выполнить соответствующее редактирование.
На странице Cut появилась новая кнопка Ripple, которая позволяет включать и выключать подгонку со сдвигом. Раньше она всегда была включена, но теперь при выключении этого режима в временной шкале будут оставаться промежутки. Чтобы выключить подгонку со сдвигом для конкретного фрагмента, нужно удерживать нажатой клавишу option. Раздельная корректировка звуковых и визуальных компонентов позволяет отдельно редактировать аудиодорожку, например, перетаскивать передний или задний край для изменения начала или конца речи в видео. Это позволяет монтажерам сосредоточить фокус зрителей на конкретных сценах, а также повышать их драматичность и напряженность.
На страницах Cut и Edit есть функция автоматического преобразования речи в текст и создания субтитров. Чтобы ее активировать, нужно выбрать команду "Создать субтитры из аудио" в меню временной шкалы. Индивидуальные субтитры можно редактировать в окне инспектора.
Функция Transcribe позволяет автоматически преобразовывать речь в видео- и аудиоклипах в текст. После этого можно быстро найти фрагмент, где есть конкретные слова. Слушать всю сцену или интервью больше не нужно. Необходимые клипы можно сразу найти по репликам и добавить на временную шкалу, что позволит сэкономить много времени.
Контент-мейкеры теперь могут загружать видео непосредственно на TikTok, просто войдя в свой аккаунт TikTok в настройках и используя либо настройки экспорта на странице «Deliver», либо диалоговое окно быстрого экспорта. Новая опция для вертикального соотношения сторон упрощает создание контента для социальных сетей.
Поддержка формата OpenTimelineIO (OTIO) ускоряет и упрощает импорт и экспорт таймлайнов из других приложений для редактирования видео. OTIO поддерживает метаданные для клипов, времени, дорожек, переходов и маркеров, а также информацию об порядке и длине кадров и ссылки на внешние медиа-файлы. Кроме того, клиенты теперь могут быстро создавать резервные копии своей работы, включив резервное копирование на каждый таймлайн в настройках. Измененные таймлайны будут сохраняться локально как для коллаборативных, так и для неколлаборативных проектов в локальных, сетевых и библиотеках проектов Blackmagic Cloud для большей безопасности в многопользовательских проектах.
Fusion теперь поддерживает файлы Universal Scene Descriptor (USD) для более легкого сотрудничества между VFX-художниками. Данные USD, такие как геометрия, освещение, камеры, материалы и анимация, могут быть импортированы. Новые инструменты USD в Fusion позволяют клиентам манипулировать, изменять освещение и рендерить файлы с использованием рендереров на базе Hydra, таких как Storm. Новый инструмент для объединения нескольких источников медиа в один многослойный стек упрощает создание композиций путем объединения клипов, статических изображений или графики с использованием слоев. Каждый слой имеет свои собственные настройки, так что клиенты все еще могут изменять индивидуальные свойства, такие как позиция, размер и режим применения. Нативный инструмент Depth Map на базе искусственного интеллекта теперь также поддерживается в Fusion Studio.
Теперь можно объединять связанные аудиодорожки или каналы микшера в группы, позволяя использовать общие операции автоматизации микширования или редактирования. При создании групп пользователи могут определить параметры, которые будут использоваться общими. Группы могут быть вложенными или временно приостановленными для быстрого переключения фокуса на более мелкие группы или отдельные дорожки. Нейронный движок DaVinci теперь может классифицировать аудиоклипы на основе их содержания, что ускоряет выбор вариантов редактирования при работе с незнакомым материалом. После анализа аудиоклипы появляются в бинах, категоризованные по диалогам, музыке и эффектам с подробными подкатегориями, такими как взрывы, вода или насекомые.
При использовании эластичной обработки волн для изменения скорости аудиоклипов новая опция "голос" обеспечивает естественный и высококачественный звук при изменении скорости диалогов или пения, даже при использовании более экстремального кейфрейминга.
"Это крупный новый выпуск с инструментами, которые были специально разработаны для ускорения рабочих процессов", - сказал Грант Петти, генеральный директор Blackmagic Design.
"Инструменты искусственного интеллекта, такие как Resolve FX relight, которые добавляют инструменты источника света для колористов, файлы Universal Scene Descriptor для улучшенного сотрудничества с художниками по визуальным эффектам, классификация звука на основе ИИ для аудио инженеров и речь в текстовом редакторе - все это ускоряет рабочие процессы проектов и позволяет клиентам иметь больше времени для творчества. Новые меню на странице монтажа также делают работу быстрее и проще. Я не могу дождаться, когда услышу, как клиенты использовали эти новые инструменты, чтобы работать не только быстрее, но и более творчески".
Итак новые функции:
- Улучшения множественного инструмента Cut.
- Поддержка облачных презентаций Blackmagic.
- Субтитры на основе звукового трека с использованием DaVinci Neural Engine в Studio.
- Редактирование текста с использованием DaVinci Neural Engine в Studio.
- Новое средство Resolve FX relight для добавления виртуальных источников света.
- Поддержка рабочих процессов на основе Universal Scene Description в Fusion.
- Новое средство Fusion multi-merge для композитинга и управления несколькими слоями.
- Множественные улучшения удаленного мониторинга.
- Поддержка быстрого резервного копирования по таймлайнам.
- Цветовое управление Resolve по таймлайнам.
- Поддержка групп редактирования и микширования в Fairlight.
- Поддержка классификации аудио на основе искусственного интеллекта в Studio.
Что имеем в итоге?
Множество классных функций, которых мне не хватало. Мой любимый редактор стал еще лучше, что меня очень радует! Обязательно попробуйте, если вы еще не пробовали Давинчи - вам понравится =)