Найти тему
Научный журнал

Устройство распознает слова, не сказанные вслух

Исследователи MIT разработали компьютерное устройство, позволяющее транскрибировать слова, которые пользователь вербализирует внутренне, но фактически не говорит вслух.

Система состоит из переносимого устройства и соответствующей вычислительной системы. Электроды в устройстве фиксируют нервно-мышечные сигналы в челюсти и лице, вызванные внутренней вербализацией, произносимые «в голове» слова, но не поддающиеся восприятию человеческим глазом. Сигналы подаются в систему машинного обучения, которая была обучена корреляции конкретных сигналов с определенными словами.

Устройство также включает в себя пару наушников, которые передают вибрации через кости лица во внутреннее ухо. Поскольку они не препятствуют ушному каналу, наушники позволяют системе передавать информацию пользователю без прерывания разговора или иным образом мешать пользователю.

Таким образом, устройство является частью полной бесшумной вычислительной системы, которая позволяет пользователю незаметно позировать и получать ответы на сложные вычислительные проблемы. В одном из экспериментов исследователей, например, испытуемые использовали систему, чтобы молча сообщать о действиях противников в шахматной игре и так же тихо получать ответы, рекомендованные компьютером.

-2

«Мотивацией для этого было создание устройства IA - устройства для увеличения интеллекта (англ. intelligence-augmentation device)», - говорит Арнав Капур, аспирант MIT Media Lab, который возглавлял разработку новой системы. «Наша идея заключалась в том, что у нас есть более сложная вычислительная платформа, которая каким-то образом объединяет человека и машину, и это похоже на внутреннее расширение нашего собственного познания».

«Мы в принципе не можем жить без наших мобильных телефонов, наших цифровых устройств», - говорит Патти Маес, профессор медийных искусств и наук, а также помощник Капура. «Но на данный момент использование этих устройств очень сложно. Если я хочу посмотреть что-то, что имеет отношение к разговору, который у меня есть, мне нужно найти свой телефон и ввести пароль и открыть приложение и ввести какое-то ключевое слово для поиска, и все это требует, чтобы я полностью переключил внимание со своей среды и людей, с которыми я связан с самим телефоном. Итак, мои ученики и я очень долго экспериментировали с новыми форм-факторами, которые позволяют людям пользоваться всеми замечательными знаниями и услугами, которые эти устройства дают нам, но делать это без отвлечения от настоящего ».

Исследователи представили свое устройство на конференции Association for Computing Machinery's ACM Intelligent User Interface conference.

Более подробно: https://worldofmaterials.ru/articles/511-ustrojstvo-raspoznayushchee-slova-kotorye-chelovek-ne-govorit-vslukh

Понравилась статья - подписывайтесь на наш канал!