Платформы для видеоконференций позволяют собрать команду специалистов из разных городов и стран в одном онлайн-пространстве или презентовать продукт огромной аудитории. Но это не гарантирует полной вовлеченности участников. Сейчас, когда видеозвонки стали обычным делом, спикерам нужны новые инструменты, чтобы заинтересовать публику. Один из них: встречи в дополненной реальности от AI-платформы коммуникаций SaluteJazz.
Как проходят встречи в SaluteJazz XR
XR означает Extended Reality, в переводе «расширенная реальность». Эта технология объединяет виртуальный и реальный мир, создавая смешанную среду для взаимодействия. К XR относятся три направления:
· AR (Augmented Reality, дополненная реальность) — добавление цифровых объектов к реальному миру.
· VR (Virtual Reality, виртуальная реальность) — полное погружение в виртуальное пространство.
· MR (Mixed Reality, смешанная реальность) — интеграция реальных и виртуальных объектов, которые взаимодействуют между собой в режиме реального времени.
SaluteJazz предлагает проводить встречи в игровом формате без гарнитуры и камеры. Пользователям доступна возможность настроить внешний вид своего аватара, а также выбрать для встречи одну из виртуальных локаций — это может быть конференц-зал, побережье с костром для медитаций или неформального общения либо переговорная для проведения совещаний. Кроме этого, в 3D-пространстве можно создать точную копию продукта, чтобы аудитория могла не только видеть его в презентации, но и взаимодействовать с ним. В ближайшее время разработчик обещает добавить поддержку VR для максимально реалистичного взаимодействия с виртуальной средой, а также конструктор локаций и AI-редактора аватаров.
Преимущества SaluteJazz XR для организаторов конференций:
· Необычный формат гарантирует, что участники не будут отвлекаться на соцсети или другие дела.
· Можно использовать более качественную графику и наглядные пособия для презентаций.
· Можно не только показать продукт, но и предложить попробовать поработать с ним, пусть и виртуально.
· Можно сэкономить на организации реальной конференции, где придется арендовать площадку, оплачивать работу персонала, гостиницы и транспорт для приезжих и т.д.
Количество участников на XR-встрече: 50 человек. И это тоже можно считать преимуществом. Вы как будто создаете закрытый клуб для избранных. Это дополнительно повышает интерес и вызывает желание протестировать функционал самостоятельно.
Как взаимодействовать с аватарами
Вначале пользователю предлагают определиться со своим персонажем. Можно выбрать пол (мужской или женский), прическу, одежду и другие особенности.
Управление знакомо всем, кто когда-нибудь играл в RPG (ролевые компьютерные игры). Используем стрелки на клавиатуре или кнопки WASD. Можно исследовать пространство, открывать двери, включать приборы и выполнять другие действия, предусмотренные разработчиком локации. Объекты реагируют в соответствии с предустановленной физикой: двери открываются, механизмы работают. Есть функция телепорта — чтобы быстро попасть в другую точку пространства, можно менять угол обзора и вид: от первого или от третьего лица.
Персонажи могут отправлять реакции: как в обычном режиме, так и в анимированном. Например, можно аплодировать в ответ на удачную реплику, смеяться (звуковое сопровождение тоже есть), махать рукой. Если включить камеру, то кружочек с видео как в Телеграм будет отображаться над головой аватара. В будущем возможности планируется расширять с акцентом на взаимодействие друг с другом.
Как пользоваться SaluteJazz XR
При создании SaluteJazz XR главной задачей разработчиков было сделать участие в виртуальных 3D-встречах максимально простым и понятным широкой аудитории. Сервис доступен всем обладателям бизнес-лицензии платформы видеоконференцсвязи SaluteJazz. Создать встречу в 3D-пространстве можно точно так же, как и обычную, в браузере: просто выбрать опцию «Встреча с 3D», сформировать ссылку и отправить ее участникам. Последним после перехода по ссылке нужно открыть вкладку «Вид» и нажать «3D». Для работы не нужно скачивать и устанавливать дополнительное ПО, сервис работает в браузере на ПК с Windows и Mac.
Чтобы реализовать такой механизм и предусмотреть возможность масштабирования в будущем, было разработано кроссплатформенное решение на движке Unity. Unity Instance был внедрен в качестве артефакта в платформу видеоконференций SaluteJazz, которая в свою очередь основана на фреймворке React.
Коммуникация между React и Unity реализована с помощью двухстороннего протокола:
· React → Unity: вызовы C# методов из React через unityContext.sendMessage.
· Unity → React: Unity отправляет данные или события в React.
Видео пользователей передается из React через Canvas и синхронизируется в Unity с использованием HTML-элементов и текстур.
Реализован риалтайм-сервер для синхронизации данных о персонажах (положение, направление взгляда, скорость) и их внешнего вида (цвет, скин). Сервер обрабатывает входящие данные и периодически отправляет клиентам актуальное состояние комнаты.
Кроме этого, была разработана собственная Zero-code система логики: настраивать фичи можно прямо в визуальном редакторе, а также добавлены сложные конструкции (стейт-машины, условные действия, контейнеры данных) для более точного управления поведением сервиса.
Примеры уже реализованных проектов
Компания Sitronics Group использовала виртуальное пространство SaluteJazz XR для онлайн-презентации своего продукта. Это первый в РФ ЦОД, представленный в дополненной реальности. Посетители могут взаимодействовать с ним в интерактивном режиме, посмотреть, как реализована IT-инфраструктура, инженерные системы и т.д. Это особенно важно для потенциальных клиентов из других городов РФ. Sitronics Group доставляет продукцию по всей стране, поэтому заинтересована в том, чтобы как можно более подробно рассказать о ней в удаленном режиме. Возможность для реализации этого предоставила платформа SaluteJazz.