Специалисты австралийского технологического университета Сиднея сообщили о разработке первой в мире портативной неинвазивной системы, с помощью которой есть возможность декодировать мысли человека и преобразовывать их в текст. Уточняется, что эта технология в будущем может очень помочь тем людям, которые не способны говорить из-за какой-либо патологии или же полученной черепно-мозговой травмы, например, после инсульта или из-за паралича.
В ходе недавно прошедшей конференции NeurIPS в Новом Орлеане, учёные Сиднейского университета продемонстрировали принципы работы устройства. Во время своего доклада представители вуза с предварительно надетой специальной шапкой читали небольшой фрагмент текста, а устройство в это время регистрировало электрическую активность мозга через кожные покровы головы с использованием электроэнцефалограммы (ЭЭГ).
Подчёркивается, что волны ЭЭГ сегментируются на ряд блоков, улавливающих определённые характеристики и закономерности работы мозга человека. В разработке австралийских учёных используется модель искусственного интеллекта DeWave. Эта модель была обучена на огромном массиве данных электроэнцефалограмм и, следовательно, способна переводить полученные от человеческого мозга сигналы в слова и фразы.
Существующие на сегодняшний день в мире технологии по преобразованию мозговых сигналов в текстовую информацию требуют или имплантацию электродов в человеческий мозг, или же выполнение сканирования на аппарате МРТ. В первом случае, имплантация является достаточно опасным и дорогостоящим методом, а второй — с использованием МРТ — сложным и недоступным для постоянного использования.
Кроме того, указанные выше технологии испытывают значительные сложности в переводе сигналов человеческого мозга в отдельные фразы и предложения без использования дополнительных средств, например, отслеживания взгляда человека.
В процессе экспериментов с «шапочкой» в Сиднейском технологическом университете приняли участие 29 человек. Уточняется, что применение сигналов электроэнцефалограммы, которые были получены с использованием «шапочки» и стандартных электродов, не имплантированных в мозг, делало сигнал более шумным и искаженным. Однако проведенный анализ наглядно продемонстрировал, что технологии искусственного интеллекта DeWave способны дешифровать текст не хуже всех известных на данный момент инвазивных методов.
По словам ученых, параметр точности преобразования сигналов мозга в текст по системе BLEU-1 на данный момент находится на уровне 40% (с помощью оценки BLEU происходит измерение сходства переведенного компьютером текста с набором качественных справочных переводов). Ученые предполагают, что по мере дальнейшего обучения искусственного интеллекта, этот показатель может быть улучшен до уровня, который будет сравним с обычными программами языкового перевода или распознавания речи, имеющими показатель точности примерно в 90%.
Ещё по теме: