С развитием технологий в современном мире появляется огромное количество полезных (а иногда не очень) программ и приложений. Люди уже научили холодильники приезжать на зов владельца, роботы легко могут открывать двери, а компьютер легко переведёт вашу шутку на любой язык мира. Однако до недавнего времени один язык так и оставался без должного внимания — им был язык жестов. Но команда студентов из Нью-Йоркского университета решила исправить это недоразумение и создала целое приложение для перевода с английского на язык жестов и обратно.
Инициатором проекта стал студент Ли Чжунчжэн, которого вдохновили глухие родители друга, переехавшие из Китая в США
Так как одинакового для всех стран языка жестов не существует, у родителей друга возникли проблемы с общением. Вот тогда-то Ли и посетила идея создать специальное приложения для общения с глухими людьми.
Ли и его коллега использовали машинное обучение и создали приложение «ASRL», которое позволяет делать перевод с языка жестов на английский и наоборот
При использовании программы можно произносить фразы в микрофон мобильного телефона, а на экране собеседника будут появляться те же слова, но на языке жестов. И наоборот — можно снимать на камеру жесты собеседника, а программа переведёт их на английский.
Пока что в «ASRL» ограничено количество фраз, которые можно перевести
На данный момент приложение может помочь пользователям записаться на приём к врачу. Ли объясняет такой выбор тем, что в больницах редко можно встретить персонал, владеющий языком жестов.
В будущем разработчики планируют расширить возможности программы
Однако, по словам Ли, этот процесс может занять довольно большое количество времени, ведь язык жестов включает себя не только движения руками, но и мимику, а порядок слов в нём отличается от порядка слов в английском языке.