Впервые о проекте под названием «Codec Avatars» компания Facebook рассказала еще в 2019 году. В ходе программы исследователи Facebook Reality Labs смогли создать удивительно похожих на живых людей аватары. Такой эффект был достигнут посредством полного сканирования человека с помощью 132 камер. Управлять уже готовым аватаром можно было посредством прототипа VR-очков, которые обладают 3 камерами: 2 в зоне глаз и 1 в области рта.
Такие аватары выглядели крайне реалистично, однако, за счет особенностей трекинга лица, создавали ощущение «безумных глаз». Facebook решили проблему просто: компания сделала так, что теперь направление взгляда пользователя берется непосредственно от системы слежения за глазами, а не оценки алгоритма машинного зрения. В итоге, как можно увидеть ниже, взгляд виртуального человека выглядит значительно спокойнее.
Технология «Codec Avatars» может обеспечить поистине другой взгляд на свой виртуальный образ, ведь он заиграет реальными эмоциями и мимикой. Но Facebook сразу предупреждает пользователей, что новый функционал не стоит ожидать на массовых устройствах в ближайшее время.