Создание человекоподобных роботов продвигается стремительными темпами. Исследователи стремятся добиться естественного визуального контакта, который сделает общение с ними более живым и доверительным. Именно эту задачу решает робот EMO.
Проект разработан в Колумбийском университете под руководством Юхан Ху и профессора Хода Липсона. Прототип представляет собой роботизированную голову с гибкой силиконовой «кожей» лица и 26 микромоторами под ней. Комбинации их работы формируют мимику и движения губ.
На первом этапе робот изучал самого себя, глядя в зеркало и демонстрируя тысячи случайных выражений лица. Так он связал работу моторов с визуальным результатом, сформировав модель обучения, получившую название vision-to-action (видение в действие). Затем EMO анализировал часы видео с говорящими и поющими людьми на YouTube.
Объединив оба подхода, система научилась двигать губами в соответствии с синтезированной речью. Пока робот путается с некоторыми звуками, но его точность постепенно растёт.