Создание современных спецэфектов в кино невозможно без отслеживания траектории камеры или объектов видео потоке. Сегодня современные технологии позволяют отслеживать траекторию камеры или траекторию движущихся объектов, а также получить трекинг геометрии лица. Для трекинга используются программы: Pftrack, Syntheyes, Boujou. А также инструмент трекинга встроен в After Effects и NukeX
В сегодняшней статья я расскажу Вам про возможность отслеживания траектории движения камеры вашего Iphone и передачи данных о положении камеры в пространстве в программы по 3d анимации. Отслеживания камеры в пространстве стало возможным благодаря библиотеке ARKit.
CAMERA TRACKING PRO
Как заявляет разработчик приложение Camera tracking pro единственное средство отслеживания перемещения и поворота для iPhone, которое экспортирует данные, подходящие для любых основных 3D-приложений.
На сайте разработчика есть готовые плагины для работы приложения Camera tracking pro с Blender, Maya, 3DS Max, LightWave, Cinema 4D , Houdini, Unity 3D, Adobe Premiere
- Отслеживание камеры работает с использованием новейших технологий машинного обучения и дополненной реальности ;
- Образцы вращения и перемещения берутся с акселерометра, гироскопа и высотомера;
- Треки сохраняются со скоростью 60 кадров в секунду ;
- Создает видеоролик Quicktime с видео MP4 со звуком AAC;
- Файлы экспортируются с использованием матрицы вращения в Collada Files; Файлы экспортируются с использованием углов Эйлера в файлы Maya ASCII .
Сайт разработчика: https://katkay.com/camera-tracking-film-game-television-ios/
Возможно вам пригодится конвертор из collada (dae) в json
http://rmx.github.io/collada-converter/preview/examples/convert.html
или плагин Collada для After Effects
https://clintons3d.com/aecollada/index.html
Камера Byplay
Вы снимаете видео в приложении "Камера Byplay". При этом приложение с помощью AR записывает движение камеры и все возможные данные сцены, включая EXR и облако точек. Далее видео загружается в облако и предварительно обрабатывается mp4 файл, чтобы его было проще использовать, автоматически убирается тряска камеры на видео.
Открываете Ваш пакет VFX и загружаете готовую к использованию сцену с помощью одной кнопки. В итоге Вы получаете сцену с фоновым видео и анимированной камерой. Просто поместите туда 3D-объект, и он готов к рендерингу.
На сайте разработчика есть готовые плагины для работы приложения "Камера Byplay"с Blender, Houdini, After Effects,
VirtuCamera - Приложение для захвата движения камерой в реальном времени
Приложение VirtuCamera позволяет фиксировать перемещение камеры вашего Iphone и передавать эти данные по Wi-Fi на камеру в вашем 3D-приложении. Вы просто нажимаете кнопку «Запись», чтобы сохранить движение камеры в ключевых кадрах.
На сайте разработчика есть готовые плагины для работы приложения VirtuCamera с Maya и Blender.
Сайт разработчика: https://virtucamera.com/