Найти в Дзене
Герман Геншин

Бесплатное приложение для камеры с искусственным интеллектом превращает ваш iPhone в устройство для захвата 3D-изображений – как это работае

Оглавление

Благодаря силе искусственного интеллекта вы теперь можете использовать камеру своего iPhone для 3D-съемки. В частности, благодаря силе искусственного интеллекта Luma и их приложению для iPhone.

Используя технологию 3D-захвата Luma AI, вы можете снимать любые объекты вокруг вас в полном и высокодетализированном 3D. Затем вы можете экспортировать захваченные объекты в графические движки, такие как Blender, Unity и Unreal, чтобы отрендерить их с еще большей детализацией и использовать по своему усмотрению, в том числе для разработки игр.

В настоящее время приложение Luma доступно только в Apple App Store для устройств на базе iOS, поэтому если вы пользуетесь телефоном на базе Android, вы не сможете опробовать его. Помимо технологии 3D-захвата, в приложении также есть инструмент генерации изображений с помощью искусственного интеллекта, который создает 3D-изображения на основе подсказок.

На устройствах iOS Luma доступна только для iPhone 12 и более поздних версий. Однако, хотя вы могли бы ожидать, что подобная функция будет использовать датчик LiDAR, который есть в моделях Pro, Luma не использует его - это означает, что вам не нужна модель Pro.

Готовы создавать 3D-активы из всего, что вам нравится? Вот как использовать iPhone в качестве устройства для захвата 3D-изображений с помощью Luma AI.

Как использовать iPhone в качестве устройства 3D-захвата с помощью Luma AI

Этот процесс был продемонстрирован на iPhone 15 Pro. В настоящее время приложение Luma доступно только в Apple App Store, то есть вы не сможете сделать это на устройстве Android.

1. Скачайте приложение Luma и войдите в систему

-2

Для начала загрузите приложение Luma из App Store. После его установки откройте приложение и войдите в систему с помощью учетной записи Google или Apple.

2. Нажмите на символ плюса.

-3

Чтобы начать новый 3D-захват, нажмите на символ "плюс". Перед началом работы необходимо предоставить приложению доступ к камере, если вы этого еще не сделали.

3. Наведите камеру на объект с двух сторон

-4

Сначала совместите перекрестие с центром объекта, а затем нажмите на экран. Теперь переместитесь на другую сторону объекта и повторите. Инструкции можно посмотреть в нижней части экрана. Когда вы дважды коснетесь экрана, вы автоматически перейдете к следующему шагу.

4. Поместите рамку захвата вокруг объекта

-5

Теперь вам нужно расположить рамку вокруг объекта съемки, чтобы указать программе, какая часть сцены является основным объектом, который вы хотите запечатлеть. Перетащите синие стрелки, чтобы расположить рамку примерно вокруг объекта - убедитесь, что все, что вы хотите запечатлеть, находится внутри. Двигайтесь вокруг объекта, чтобы убедиться, что рамка охватывает все (это может быть трудно определить с одного угла). Нажмите кнопку Capture, когда вы будете удовлетворены положением рамки и готовы продолжить.

5. Сканирование вокруг объекта с трех уровней

-6

Эта часть может потребовать некоторой практики. Теперь вам нужно просканировать вокруг объекта на трех уровнях. Для этого вам понадобится приличное пространство вокруг объекта, поскольку камера должна находиться на определенном расстоянии от него. Для крупных объектов, таких как стулья, может потребоваться несколько метров пространства.

Начните сверху и наведитесь на центральное перекрестие и круговую прицельную сетку. Затем проследите за фиолетовой линией, выровняв перекрестие и прицел - вы должны увидеть, как линия начинает окрашиваться в тиловый цвет, поскольку объект был просканирован под этим углом.

Обратите внимание на тиловые прямоугольники - они указывают угол и расстояние, с которого нужно вести прицеливание, но они могут сбить с толку, так как предполагают, что вам нужно вести прицеливание только с этих точек. Используйте их как руководство по высоте, расстоянию и углу, но главное - следовать фиолетовой линии и перекрестию с центральным прицелом. Если вы находитесь слишком близко, прицел станет желтым и подскажет, что нужно отойти подальше.

Как только вы в основном или полностью просканировали один уровень, переходите на следующий, используя линию в качестве ориентира и синие прямоугольники для определения расстояния/высоты, затем повторите.

Стремитесь к тому, чтобы круговой фиолетовый график прогресса внизу был как можно ближе к 100. Вы можете завершить игру, не дойдя до 100, но чем меньше вы пройдете, тем менее точным будет ваш рендер. Когда вы приблизитесь к 100, сканирование автоматически закроется (я дошел примерно до 97).

6. Загрузите снимок

Теперь нажмите "Загрузить". Здесь вы можете нажать на кнопку удаления людей, если в вашей сцене есть люди, которые не хотят быть идентифицированы.

7. Назовите свой снимок

Назовите свой снимок, когда появится запрос, и нажмите Загрузить, когда будете довольны. Если это ваш первый снимок, приложение попросит вас разрешить уведомления, чтобы сообщить вам о завершении съемки, - выберите, хотите ли вы получать уведомления.

8. Настройте параметры конфиденциальности во время процесса съемки

Теперь вам нужно подождать, пока захват обработается. У меня это заняло около 30 минут. Приложение советует, что процесс пойдет быстрее, если вы будете держать его открытым, но вы можете заниматься своими делами во время ожидания и либо время от времени заглядывать в приложение, либо нажимать на уведомление, которое вы получите, когда захват будет завершен (если вы разрешили уведомления).

Пока вы ждете, проведите пальцем вверх по нижней панели, а затем настройте параметры конфиденциальности в соответствии с вашими предпочтениями.

9. Просмотр и экспорт снимка

После завершения съемки вы можете ущипнуть, провести пальцем по объекту и увеличить его масштаб, чтобы просмотреть его в 3D. Проведите пальцем вверх, чтобы открыть нижнюю панель, затем нажмите на тип актива, чтобы экспортировать захват в различные форматы для использования в приложениях для рендеринга.

На этой же панели можно настроить параметры конфиденциальности.

Теперь вы знаете, как использовать iPhone для 3D-захвата. Если вы хотите узнать, как еще можно использовать AI, у нас есть множество руководств, которые помогут вам в этом. Посмотрите наши руководства о том, как использовать ChatGPT, как создать собственного чатбота с помощью ChatGPT, как использовать Microsoft Copilot на iPhone и iPad и как использовать Google Bard AI для планирования отпуска.

Если тебе понравилась статья - подпишись на канал, чтобы не пропустить ещё много полезных статей!

Также ты можешь читать меня здесь: