Исследователи Чжэцзянского университета представили MindGPT — неинвазивный нейронный декодер языка, преобразующий зависящие от уровня кислорода в крови паттерны в устойчивые последовательности слов.Involta Technologies
Впервые осуществлена попытка создать декодер, способный восстанавливать восприятие речи, в том числе даже в немых фильмах.Involta Technologies
Сначала в качестве генератора текста решили применить большую языковую модель GPT-2, предварительно обученную на наборе данных WebText.Involta Technologies
Исследователи выяснили, что даже при минимальном количестве данных для обучения фМРТ-картинкам хорошо обученный MindGPT способен регистрировать визуальные подсказки изображений.Involta Technologies