Резидент «Сколково» разработал программно-аппаратный комплекс для управления и навигации силой мысли, который успешно применил как в игровой, так и в медицинской сфере.
Компания «Ребис», резидент Сколково с 2024 года, работает в области нейрогейминга, развивая решения для управления силой мысли с помощью неинвазивных нейроинтерфейсов в киберсреде и собственных роботизированных устройств. Созданные резидентом нейроинтерфейсы распознают до 30 ментальных команд движения, закрывая почти все потребности движения человека.
Аппаратная часть проекта представляет собой носимые неинвазивные нейроинтерфейсы на основе электроэнцефалограммы (ЭЭГ). Они могут быть дополнительно оснащены VR и трекером глаз. Программная часть представлена мобильными и ИИ-серверным приложениями от компании.
«Наш проект — это гейминг нового поколения, гейминг силой мысли через нейроинтерфейс. Мы не только распознаем ментальные команды движения, но и используем когнитивную прокачку мозга во время игры», — рассказывает Александра Бернадотт, основатель и СЕО компании, кандидат медицинских наук, математик, специалист по ИИ, научный сотрудник МГУ, ВШЭ, МИСиС.
Александру много лет интересовала технология интерфейсов и в целом взаимодействие человека и компьютера в разных формах. Получив образование в области медицинского нейросайенса, математики, компьютерных наук и несколько лет проработав в корпорации, она основала стартап, объединив свои компетенции. Часть команды занималась речевыми технологиями в Сбере, другая часть пришла из МГУ и ВШЭ, где Александра ведет научную работу. Изначально команда сфокусировалась на разработке роботизированных устройств для хирургии, а затем стала создавать нейроинтерфейсы для гейминга, когнитивной прокачки и замещения движения.
«Мы совсем не используем речевые технологии, не занимаемся распознаванием ментальной речи, а распознаем ментальные движения и делаем это быстрее конкурентов — одно ментальное движение распознается нами за 100 миллисекунд, то есть около 10 ментальных движений в секунду, что в 4-10 раз быстрее любой другой технологии любых конкурентов», — рассказывает Александра.
Существует физиологический лимит по скорости распознавания движений. Чтобы распознать движение руки, обычно требуется около секунды: сначала формируется импульс в мозге, затем он передается по нервному волокну, и мышца сокращается. Однако технология резидента не использует движения импульса и мышцы, а распознает сам ментальный паттерн, что и позволяет увеличить скорость до физиологического предела. Для распознания проект применяет свои алгоритмы ИИ и анализа данных, а также другие известные алгоритмы и методы.
Важная составляющая проекта — когнитивная тренировка, которая проводится по авторской методике Александры Бернадотт, запатентованной благодаря резидентству в Сколково и микрогранту от Фонда. Тренинг проводится через реализацию так называемой биологической обратной связи или биологической обратной связи и позволяет активировать любой выбранный участок мозга.
«Пользователь получает обратную связь о том, насколько хорошо у него получается, например, управлять объектом на экране компьютера силой мысли. Для этого используется визуальный сигнал, например изменение цвета, или аудиальный, или управление в игровой среде. Изменение свойств мозга и эффект нейропластичности можно верифицировать по МРТ и функциональным тестам (изменение объема памяти, скорости реакции, словарного запаса и вообще IQ). С помощью когнитивной тренировки у человека увеличивается объем коры головного мозга — по этому параметру можно сказать, что мозг молодеет», — объясняет Александра.
До текущей стадии проект развивался на собственные средства, но недавно команда получила два микрогранта от Сколково общим объемом порядка 2 млн рублей. По словам Александры, отсутствие финансирования является основной сложностью в развитии высокотехнологичных проектов. Тем не менее за полтора года после старта проект достиг серьезных результатов, смог полностью разработать, произвести и выпустить на рынок нейроинтерфейсы, выйдя на самоокупаемость и прибыльность. На адаптацию корпуса шлема и небольшие доработки микроэлектроники как раз и будут направлены микрогранты Сколково.
Сейчас в линейке два неинвазивных нейроинтерфейса с ИИ на основе электроэнцефалограммы — 16-канальный «Гермес» и 8-канальный «Нейрон». С их помощью можно играть силой мысли в компьютерные игры, арсенал которых постоянно увеличивается. В 2024 году при поддержке Сколково компания демонстрировала свое решение на конференции «РедЭкспо».
«Там мы познакомились с СЕО Solar Pixel Денисом Гончаровым, который управлял машиной силой мысли с помощью нашего нейроинтерфейса “Гермес”. Понадобилось всего 15 минут, чтобы научиться, хотя у Дениса есть существенные ограничения движения. В 2025 году мы собираемся организовать нейрокибертурнир для людей с потерей движения после травмы и ищем партнеров и спонсоров для этой важной социальной цели», — поделилась планами Александра.