Найти в Дзене
Петербургский Дюма

О ЯПОНСКОМ

...или чьё-то завтра — это чьё-то вчера.

Учёные из Университета Осаки заявляют, что создали лучшую на сегодня машину для чтения мыслей, которая справляется с визуальными образами.

В основе машины — готовый продукт, популярная программа генерации изображений Stable Diffusion. У испытуемых с помощью МРТ снимают данные об активности мозга и по ним с помощью нейросети реконструируют образы, показанные испытуемым.

Учёные отметили "высокую семантическую точность" результатов, то есть методика позволяет хорошо понять: что видит участник эксперимента?

Одно из достоинств японской машины — отсутствие необходимости тонкой индивидуальной подстройки: она способна сразу работать с любым человеком. Эффект достигнут за счёт интерпретации не только активности первичной зрительной коры, которая отвечает за восприятие формы и цвета. Методика дополнительно учитывает активность в ассоциативных зонах коры — в "семантической коре", где зрительная кора встречается со слуховой и где закодированы значения слов.

На иллюстрации виден процесс чтения мыслей нейросетью.

Первый столбец — изображения, показанные испытуемому.

Второй столбец — реконструкция изображений на основе сигналов первичной зрительной коры.

Третий — реконструкция на основе сигналов "семантической коры".

Четвёртый — изображение, полученное нейросетью в результате объединения данных двух реконструкций.

Куда мы катимся?
Вернее, мы-то ладно... А японцы?