Найти в Дзене
Наука

Новый нейроинтерфейс позволил парализованному человеку говорить и даже петь

Ученые из Калифорнийского университета в Дэвисе представили систему «мозг-компьютер», которая позволила человеку с тяжелым параличом — вызванным боковым амиотрофическим склерозом (БАС) — вновь заговорить. Причем не просто произносить слова, а делать это в реальном времени, с интонациями, эмоциональной окраской и даже с возможностью петь простые мелодии. Исследование опубликовано в журнале Nature. Как это работает Технология использует модель клонирования голоса, обученную на старых аудиозаписях участника — то есть система воспроизводит его собственный голос, каким он был до развития болезни. Это делает речь не только функциональной, но и личной. В отличие от более ранних BCI-систем, где речь формировалась фрагментарно или набиралась по буквам, система UC Davis позволяет создавать спонтанную, непрерывную и выразительную речь. В одном из тестов она даже смогла правильно воспроизвести выдуманные слова, которых не было в обучающей выборке ИИ. «Это Святой Грааль для речевых нейроинтерфейсов

Ученые из Калифорнийского университета в Дэвисе представили систему «мозг-компьютер», которая позволила человеку с тяжелым параличом — вызванным боковым амиотрофическим склерозом (БАС) — вновь заговорить. Причем не просто произносить слова, а делать это в реальном времени, с интонациями, эмоциональной окраской и даже с возможностью петь простые мелодии. Исследование опубликовано в журнале Nature.

Как это работает

-2

Технология использует модель клонирования голоса, обученную на старых аудиозаписях участника — то есть система воспроизводит его собственный голос, каким он был до развития болезни. Это делает речь не только функциональной, но и личной.

В отличие от более ранних BCI-систем, где речь формировалась фрагментарно или набиралась по буквам, система UC Davis позволяет создавать спонтанную, непрерывную и выразительную речь. В одном из тестов она даже смогла правильно воспроизвести выдуманные слова, которых не было в обучающей выборке ИИ.

«Это Святой Грааль для речевых нейроинтерфейсов», — прокомментировал Кристиан Херфф, нейробиолог из Маастрихтского университета, не участвовавший в работе.

Пока система испытана на одном участнике, но команда надеется повторить успех с другими пациентами, утратившими речь из-за разных заболеваний.

В Китае разработали свой Neuralink, который помогает парализованным двигаться

Круче, чем у Маска: новый интерфейс позволяет играть на компьютере силой мысли

Подписывайтесь и читайте «Науку» в Telegram