Парижская компания Prophesee произвела фурор в прошлом году, когда продемонстрировала свою собственную технологию сенсоров Metavision для камер смартфонов, основанную на событиях. Основная идея, лежащая в основе этой технологии, заключалась в том, чтобы сделать размытые изображения достоянием прошлого, и на этапе разработки компания продемонстрировала впечатляющие результаты.
На MWC 2024 компания добилась еще одного значительного прорыва в партнерстве с Qualcomm. Компания, которая ведет серьезную работу в области нейроморфных систем технического зрения, объявила, что ее технология сенсоров Metavision достигла стадии производства.
Prophesee рассказала Digital Trends, что она разработала сенсор в сотрудничестве с Sony, который использует индивидуальную настройку программного обеспечения и мощь чипсета Snapdragon 8 Gen 3 от Qualcomm. На фундаментальном уровне датчик Metavision заполняет пробел в визуальных данных с микросекундной скоростью в тандеме с датчиком изображения, открывая двери для изображений без размытия как в кромешной тьме, так и в очень ярких сценариях.
"Запатентованные датчики Metavision и искусственный интеллект Prophesee имитируют работу человеческого глаза и мозга", - говорят в компании. Технология сенсоров MetaVision, основанная на событиях, обеспечивает подавление размытости при движении, чтобы конечные результаты не имели никаких признаков нечеткости, вызванной движением".
Как Prophesee пытается уничтожить размытые фотографии
Большинство камер смартфонов, даже флагманов самого высокого уровня, испытывают трудности с быстро движущимися объектами - им не удается правильно зафиксировать фокус. В результате снимки не только выглядят неуместно, но и артефакты движения делают их практически бесполезными.
Размытость движения становится особенно заметной в сложных условиях освещения или ночью, когда такие решения, как многокадровое шумоподавление, не оправдывают своего потенциала. Prophesee утверждает, что обеспечивает "беспрецедентный уровень" качества изображения в "быстро движущихся и слабоосвещенных сценах".
В отличие от обычного сенсора камеры смартфона, на котором количество света меняется в течение окна экспозиции, сенсор Metavision обеспечивает "вечное время экспозиции" для непрерывной съемки движения. "Это как если бы у вас в телефоне была камера со скоростью 10 000 снимков в секунду", - утверждает компания.
Помимо того, что Prophesee предлагает специальный сенсор, разработанный совместно с Sony, он также уделяет внимание программному обеспечению и сопутствующим интеграционным услугам. "Программное обеспечение Metavision Deblur находится на стадии производства. Мы интегрируем как HW, так и SW в мобильные телефоны, - рассказывают в компании Digital Trends.
Идея состоит в том, чтобы предложить игрокам индустрии смартфонов бесшовный опыт, чтобы они развернули весь набор аппаратного и программного обеспечения Metavision на своих соответствующих устройствах, работающих на базе Snapdragon". Примечательно, что в качестве базового уровня был выбран флагманский процессор Snapdragon 8 Gen 3, что, очевидно, обусловлено его мощью, передовым провайдером и искусственным интеллектом нового поколения.
Захватывающее будущее для камер смартфонов
Решение Prophesee полностью функционирует на сенсоре камеры Sony IMX636. В настоящее время технология протестирована только для основной камеры телефона. Однако компания сообщила Digital Trends, что в будущих итерациях сенсора Metavision планируется поддержка нескольких сенсоров, включая сверхширокоугольные и телеобъективы.
В своем нынешнем состоянии датчик Prophesee, основанный на событиях, может работать только для создания фотографий без размытия. Но компания говорит нам, что поддержка видео также входит в будущую дорожную карту.
"В первую очередь это платформа для видеосенсоров - она используется для захвата и обработки движения в различных случаях", - сказал Digital Trends представитель Prophesee. Компания не уточнила, когда именно мы увидим датчик Metavision в действии на коммерчески доступном смартфоне. Положительным моментом является то, что телефоны на базе Qualcomm Snapdragon 8 Gen 3 уже поступили в продажу, а поскольку портфолио Metavision уже находится на стадии производства, ждать осталось недолго.
Судя по тому, что Prophesee уже продемонстрировала в демо-версиях, если сенсор Metavision оправдает данные обещания, он может открыть совершенно новую главу в смартфонной фотографии, где рядовой пользователь не будет обременен настройкой выдержки и других параметров для получения снимков без размытия. И это довольно захватывающее будущее, о котором стоит задуматься.
Если вам понравилась эта статья, подписывайтесь, чтобы не пропустить еще много полезных статей!
Также вы можете читать меня здесь:
- Telegram: https://t.me/gergenshin
- яндекс Дзен: https://dzen.ru/gergen
- официальный сайт: https://www-genshin.ru