Ученые из Техасского университета нашли способ «расшифровать» мысли человека с помощью обычного МРТ-сканера. Новая работа может стать основой для эффективных интерфейсов мозг-компьютер, призванных помочь тем, кто не может говорить или печатать.
Как сообщает The Scientist, ученые Техасского университета в Остине создали «декодер» – алгоритм, способный «читать» слова, которые человек слышит или думает во время МРТ-сканирования мозга.
МРТ отслеживает поток насыщенной кислородом крови через мозг. По словам ученых, такой подход более деликатен, чем измерение активности отдельных нейронов, которые трудны для расшифровки.
Как проходило обучение «декодера»?
В новом исследовании команда обучала алгоритм с помощью МРТ-записей мозга трех испытуемых (одной женщины и двух мужчин в возрасте от 20 до 30 лет), которые 16 часов слушали подкасты и радиорепортажи.
В итоге алгоритму «довольно хорошо» удалось воспроизвести истории, услышанные участникам эксперимента.
Однако «декодер» также имел некоторые недостатки: он часто путал местоимения персонажей подкастов, а также приписывал те или иные реплики не тем людям.
В дополнительных экспериментах системе удалось точно пересказать сюжет немого кино, которое добровольцы смотрели в МРТ-сканере: алгоритму удалось пересказать историю, которую участники мысленно представляли.
На данный момент исследование опубликовано на сайте bioRxiv и ждет рецензирования.