Исследование под названием «Mind Captioning: Evolving Descriptive Text of mind content from Human Brain Activity» («Ввод текста в сознание

Исследование под названием «Mind Captioning: Evolving Descriptive Text of mind content from Human Brain Activity» («Ввод текста в сознание: развитие описательного текста ментального содержания на основе активности человеческого мозга») представляет модель искусственного интеллекта, способную генерировать описательный текст того, что человек видит или вспоминает, путем декодирования паттернов мозговой активности, полученных с помощью фМРТ

Система, разработанная доктором Томоясу Хорикавой и его командой в NTT Communication Science Laboratories в Японии, работает в два этапа

Сначала Ml декодирует сигналы мозга, связанные со зрительным восприятием, используя линейные модели

Затем другая модель Ml, обученная с помощью моделирования языка масок, преобразует эти декодированные сигналы в связные текстовые описания

https://www.science.org/doi/10.1126/sciadv.adw1464