Найти тему

Будущее наступило: жестовый переводчик на основе нейросети!


Исследователи из британского Университета Суррея сделали шаг вперёд в мире технологий, разработав уникальную нейросеть, переводящую устную речь в язык жестов с помощью виртуального сурдопереводчика. Эта инновация обещает улучшить восприятие информации для миллионов людей с нарушениями слуха и помочь им чувствовать себя более комфортно на публичных мероприятиях.

Сегодня более 70 миллионов людей по всему миру общаются на жестовом языке. Хотя субтитры могут быть полезны в интернете, для общения в общественных местах важно иметь перевод на жестовый язык в реальном времени. Ученые долго работали над этой задачей и, наконец, нашли эффективное решение!

 Как это работает?

Нейросеть преобразует устную речь в реалистичную анимацию. Это значительно улучшает качество перевода, поскольку язык жестов включает в себя не только движения рук, но и мимику, и движения всего тела. Ранее использовавшиеся технологии часто не передавали нюансов, что вызывало недопонимание.

Для обучения алгоритма использовались видео реальных сурдопереводчиков, а результаты тестирования показали, что новая система превосходит прежние методы по нескольким параметрам.

 Не только в Британии!

Однако не только британские ученые занимаются этой проблемой. В России также ведутся разработки в области сурдоперевода. Например, в Новосибирске создана программа, которая распознает речь и переводит её на жестовый язык с помощью аватара. Кроме того, бельгийские учёные разработали 3D-руку, которая также функционирует как сурдопереводчик.

Важным шагом вперед в этой области стали разработки российских ученых из Института проблем управления РАН. Они работают над созданием алгоритма, который сможет переводить жесты в слова и фразы, и уже разрабатывают мобильное приложение для удобного общения слабослышащих. В перспективе виртуальный переводчик может работать в МФЦ и в других общественных местах.

Таким образом, новые технологии, такие как жестовый переводчик, не только улучшают доступ к информации для слабослышащих, но и способствуют их интеграции в общество, позволяя им свободнее чувствовать себя на публичных мероприятиях и в повседневной жизни. Это важный шаг к более инклюзивному будущему, где каждый сможет быть услышан.
Будущее наступило: жестовый переводчик на основе нейросети!
1 минута