Новая технология позволяет «читать» слова, которые слышит мозг человека, или его мысли в процессе проведения процедуры функциональной магнитно-резонансной томографии (фМРТ).
Ученым удалось провести обучение своего алгоритма с использованием фМРТ-записей головного мозга 3-х участников эксперимента, которые в течение шестнадцати часов слушали репортажи по радио и смотрели аудиоподкасты.
Декодер произвел набор прогнозов данных функциональной магнитно-резонансной томографии. Применение таких прогнозов приблизило то, что декодер переводил мысли, которые не относятся к аудио, прослушанным участниками эксперимента.
Данные прогнозы потом проходили сверку с записью фМРТ в режиме лайв, и прогноз, соответствовавший реальности больше всего, определял слова, которые в результате были созданы декодером.
Проведенный эксперимент абсолютно точно показал, что алгоритм в результате выполняет генерацию калейдоскопа записей фМРТ, отлично совпадающих с реальностью.
Результаты, которые были получены учеными в ходе опытов, приближают к созданию интерфейсов «мозг-компьютер», разрабатываемых для помощи немым людям.