1306 подписчиков
Ученые разработали интерфейс для декодирования речи у пациенток с инсультом.
Недавно учеными из Калифорнийского университета в Сан-Франциско и Калифорнийского университета в Беркли разработали и успешно испытали интерфейс "мозг-компьютер", благодаря которому женщина, пережившая инсульт ствола мозга, теперь может говорить с использованием цифрового аватара.
Ранее было возможно только декодировать сигналы мозга и преобразовывать их в текст, но новая система позволяет синтезировать речь и выражения лица непосредственно из этих сигналов. То есть речь не идёт о просто преобразовании текста в речь, так было бы не интересно. Это означает, что женщина может выразить свои мысли и чувства через аватар, который передает ее голос и мимику.
Одной из ключевых особенностей этой технологии является ее высокая скорость. Система способна декодировать сигналы мозга и преобразовывать их в текст со скоростью около 80 слов в минуту. Это значительное улучшение по сравнению с коммерческими доступными технологиями, которые обычно имеют намного меньшую скорость.
Доктор Эдвард Чанг, главный разработчик этой технологии, надеется, что результаты исследования приведут к разработке системы, одобренной FDA, которая позволит людям говорить с использованием сигналов мозга. Это открывает двери новых возможностей для тех, кто потерял способность говорить из-за различных причин, таких как инсульты или травмы.
Для реализации этой технологии, доктор Чанг и его команда имплантировали прямоугольник с электродами на поверхность мозга женщины. Электроды перехватывали сигналы мозга, которые обычно контролировали бы мышцы языка, челюсти, гортани и лица. Затем эти сигналы передавались через кабель к блоку компьютеров, где они обрабатывались и преобразовывались в речь.
Чтобы обучить систему распознавать уникальные сигналы мозга женщины для речи, участница прошла несколько недель тренировок с командой исследователей. Алгоритмы искусственного интеллекта были использованы для распознавания и интерпретации этих сигналов, что позволило создать непрерывный и понятный поток речи.
Эти результаты в области интерфейсов "мозг-компьютер" имеют потенциал для улучшения качества жизни людей с ограниченными возможностями. Такие технологии могут помочь людям восстановить связь с окружающим миром и взаимодействовать с ним, открывая новые возможности для общения и самовыражения.
DOI: 10.1038/s41586-023-06443-4
DOI: 10.1038/s41586-023-06377-x
2 минуты
25 августа 2023