В российском исследовательском центре ГК «Нейроботикс», а также в Лаборатории нейроробототехники МФТИ умеют воссоздать картинки из мыслей людей, о которых они думают сейчас. Данное изобретение будет использовано для нового устройства, которое предназначено для людей, проходящих постинсультную реабилитацию.
Чтобы период продвижения к новому прибору был успешен, необходимо плотнее изучать кодирование информации мозгом. А точнее, как мозг реагирует на визуальные объекты информации. Для этого используется магнитно-резонансная томография и анализ результатов, которые содержат данные о сигналах нейронов.
Но данные методы ограничены в применении в клинике и в жизни. А интерфейс, который создали учёные, основан на использовании электроэнцефалограммы, которую снимают с поверхности головы, и нейронной сети. Данный способ позволяет фиксировать кадры при просмотре видео человеком.
Владимир Конышев, руководитель лаборатории, сообщает, что данные исследования предназначены для того, чтобы пострадавшие от инсультов могли управлять электроколясками. Из-за паралича им необходима высокая точность в использовании. Данная разработка будет помогать и здоровым людям.
Был проведён эксперимент. На начальном этапе людям показывали пять роликов, которые выбрали произвольно. И во время просмотра фиксировали ЭЭГ.
Ролики были короткие и в сумме вышло по 20 минут на человека.
Из этой части было выявлено то, что частота волновой активности при различных роликах отличалась. Поэтому получилось проанализировать деятельность мозга.
На втором этапе использовались три вида видео из предыдущих. Специалистами были разработаны две нейронные сети. Первая выполняла генерирование произвольных картин тех категорий из «шума», а другая создавала нечто подобное из ЭЭГ. Потом ученые из полученного попробовали сделать так, чтобы по сигналам ЭЭГ воплощались кадры, похожие на увиденное испытуемыми.
После этого выполнили проверку, которая заключалась в том что показывали новые видео и фиксировали ЭЭГ. Нейронные сети хорошо работали и справились с задачей. Получались реальные изображения, и в 90 % смогли разглядеть категорию ролика.
Сейчас лаборатория нейроробототехники МФТИ разрабатывает антропоморфные робототехнологии и имеет необходимое оборудование для исследований в нейронауках, физиологии и в поведенческой области.