В MIT работают над созданием устройства, способного превращать сигналы мозга в синтезированную речь. Оно позволит людям, страдающим параличом, общаться.
Чтобы человек мог произнести слова, мозг посылает сигналы губам, языку, челюсти и гортани. Инженеры создали виртуальную модель речевого тракта и ПО на основе AI, переводящее сигналы мозга в синтетическую речь.
⠀
Было проведено исследование с добровольцами с неповрежденной речью. Их попросили прочитать несколько сотен предложений вслух. Сигналы записывались с использованием устройства с электродами. Его прикладывали к поверхности головы, чтобы считывать электрические сигналы мозга.
Участники эксперимента зачитывали предложения, а исследователи, используя нейросеть, анализировали то, как сигналы связаны с движениями определенных мышц губ, языка, гортани и челюсти, необходимых для создания звука (2 видео в слайдере).
⠀
Система требует доработок - иногда искажает слова (понимает 69% слов). Однако, даже в текущем состоянии, имплант позволит людям с неврологическими заболеваниями общаться.