В режиме прямой трансляции 16 PTZ камер Lumens с поддержкой NDI и разрешением 4K позволили создать эффект замедления времени (Bullet Time эффект из к/ф «Матрица»)
Компания MoonShine Animation из Тайвани специализируется на создании визуальных эффектов. MoonShine является сообществом творческих профессий, пребывающих в постоянной коллаборации по созданию анимации, рекламных роликов, видеоэффектов, фильмов и виртуальной реальности: дизайнеры, режиссеры, художники и технологи.
Коллектив занимался разработками и созданием иммерсивных 4D-опытов и новаторских соматосенсорных игр, а также виртуальных студий дополненной реальности и дополненной анимации в режиме реального времени. MoonShine построила первый в мире кинотеатр смешанной реальности (MR) на Тайване в 2020 году.
В последнем проекте MoonShine экспериментировал, пытаясь найти универсальное зрительное восприятие. Целью было организовать в музыкальном центре Тайбэя (Тайвань) эффект замедления времени (Bullet Time эффект из к/ф «Матрица») во время прямой трансляции, которая дала возможность зрителям получить уникальное восприятие от просмотра контента на своих устройствах, построенное на собственных впечатлениях.
К особенностям проекта можно отнести: установку массива из 16 PTZ камер NDI, создание видеороликов с эффектом Bullet Time, технологию NDI Video-over-IP, реконструкцию кадра с MoonShine AI, гибкую и масштабируемую структуру на основе IP и бесплатную систему видеозаписи View-Point.
Все редакционные решения в эфире принимают продюсер и режиссер. Взяв за основу знаменитые сцены замедленного времени из фильма «Матрица», команда MoonShine решила дать возможность самим зрителям выбирать и контролировать предпочтительные углы обзора, а также в режиме реального времени динамическое движение виртуальной камеры.
Киану Ривз в фильме 1999 года уклоняется от пуль, как будто бы замедляя время. В этой сцене камера плавно перемещается вокруг героя. Этот эффект «Bullet time» достигается объединением серии отдельных изображений в один видеопоток. Данную концепцию решила испытать и попробовать повторить в прямом эфире команда MoonShine.
Moonshine решила использовать 16 4K PTZ-устройств, работающих в режиме прямой трансляции, в замен использования неподвижных изображений и их длительной постобработки. Эффект «Bullet time» в режиме реального времени удалось достичь с помощью построения системы, объединяющей несколько IP-потоков в один мобильный видео канал со свободной точкой обзора. Съемочной группе пришлось разместить полукругом несколько камер Lumens VC-A71PN с выходом NDI. Благодаря этому стало возможно снимать одну точку одновременно с 16 разных ракурсов.
В единый сигнал сливаются несколько независимых потоков NDI – каждый со своего ракурса. Зрители могут менять его по своему желанию, сами выбирать любой ракурс. Это позволяет выводить воспроизведение видео на новый увлекательный и захватывающий уровень. Исчезает риск появления слепых зон. С помощью искусственного интеллекта команде инженеров MoonShine удалось создать дополнительные кадровые вставки между камерами. Обеспечив более плавное переключении с одной камеры на другую в потоковой передаче.
«Мы установили 16 PTZ-камер NDI на бельэтаже Тайбэйского музыкального центра. При помощи технологии передачи видео по IP, потоки с этих 16 камер отправляются в единую систему видеозаписи и обработки для дальнейшей передачи в эфир. Мы использовали PTZ-камеры Lumens, которые уже зарекомендовали себя в работе с нашей системой видеозаписи. Программное обеспечение управляет фокусировкой, расфокусировкой камер, диафрагмой и так далее», – отметил Джелли, руководитель проекта MoonShine Animation.
Для передачи высококачественных видеосигналов по сетям на базе Ethernet со сравнительно небольшой задержкой, в камерах Lumens серии PN используется технология NDI|HX (NDI — это усовершенствованный IP-протокол). Экономичные сети NDI просты в установке и настройке. С легкостью масштабируются и по мере необходимости позволяют добавлять в рабочий процесс больше камер, кодировщиков, видеомикшеров и записывающих устройств. NDI могут работать в сетях 10G или 1G, эффективно используя полосы пропускания: одновременно обеспечивая питание камер, передавая видеосигналы и управление потоками данных.
NDI снимает ограничения всей творческой команде. Мастера кино могут задавать каждой отдельно взятой камере определенный ракурс с помощью роботизированных PTZ-камер на дистанционном управлении. Помимо эффекта «bullet time», созданного независимым позиционированием шестнадцати камер в виде синхронизированной дуги, съемочная группа теперь может получить полный контроль над всем съемочным процессом традиционной многокамерной съемки.
Камеры VC-A71PN управляются при помощи программного обеспечения от MoonShine или с помощью аппаратного блока Lumens VS-KB30, особенно удобного в осуществлении прямых трансляций, интуитивно понятного тактильного интерфейса управления камерами.
«Поворотная камера Lumens VC-A71PN поддерживает NDI и PoE. Она может получать питание, передавать изображение и управляться через один провод, что, конечно, упрощает процессы работы и монтажа. Мы разместили наши камеры в 30 метрах от сцены. Но благодаря 30-кратному оптическому зуму, мы действительно можем запечатлеть всех исполнителей. VC-A71PN обеспечивает качество изображения 4K и хорошо работает даже в условиях низкой освещенности. VC-A71PN с технологией передачи NDI легко интегрируется в систему видеозаписи со свободной точкой обзора. Техническая поддержка Lumens оказывается своевременно, что, конечно, успокаивает в осуществлении съемочного процесса», – прокомментировал Тед, инженер по системной интеграции MoonShine Animation.
