Найти в Дзене

Носимое кольцо переводит язык жестов в текст

Американский язык жестов (ASL) уже давно позволяет вести беседы в режиме реального времени глухим и слабослышащим англоговорящим людям. Но при обсуждении часто возникают значительные задержки, когда один или несколько собеседников не владеют языковой системой в совершенстве. Но, объединив искусственный интеллект с глубоким обучением и технологии микролокации, исследователи из Корнелльского университета разрабатывают новое носимое устройство, которое поможет преодолеть коммуникационные барьеры. При дальнейшем совершенствовании SpellRing может в один прекрасный день упростить все разговоры, независимо от ваших навыков понимания ASL.
Первые версии ASL были разработаны в начале 18 века в Американской школе для глухих в Хартфорде, штат Коннектикут. Сегодня около 400 000 человек в США используют современный ASL, включая большое количество детей глухих взрослых (CODA). Как и для любого другого языка, для достижения беглого владения английским языком часто требуются годы обучения и практики.

Американский язык жестов (ASL) уже давно позволяет вести беседы в режиме реального времени глухим и слабослышащим англоговорящим людям. Но при обсуждении часто возникают значительные задержки, когда один или несколько собеседников не владеют языковой системой в совершенстве. Но, объединив искусственный интеллект с глубоким обучением и технологии микролокации, исследователи из Корнелльского университета разрабатывают новое носимое устройство, которое поможет преодолеть коммуникационные барьеры. При дальнейшем совершенствовании SpellRing может в один прекрасный день упростить все разговоры, независимо от ваших навыков понимания ASL.

Первые версии ASL были разработаны в начале 18 века в Американской школе для глухих в Хартфорде, штат Коннектикут. Сегодня около 400 000 человек в США используют современный ASL, включая большое количество детей глухих взрослых (CODA). Как и для любого другого языка, для достижения беглого владения английским языком часто требуются годы обучения и практики. Однако, учитывая, что большинство американцев нечасто посещают места, где это требуется, этот язык по-прежнему остается в основном доступным для глухих и слабослышащих людей. В то же время технологические инновации еще не догнали их.

“Многие другие технологии, которые распознают произношение пальцев в ASL, не были приняты сообществом глухих и слабослышащих, потому что аппаратное обеспечение громоздкое и непрактичное”, - сказал Хюнчул Лим, докторант по информатике Корнеллского университета, в обзоре университета 17 марта. “Мы стремились разработать единое кольцо, чтобы передать все тонкие и сложные движения пальцев в ASL”.

Лим и его коллеги ранее работали над аналогичными изобретениями в лаборатории интеллектуальных компьютерных интерфейсов для будущих взаимодействий Корнелла (SciFi), включая инструменты интерпретации выражений лица, позы рук в виртуальной реальности и распознавание беззвучной речи.