Специалисты лаборатории цифровой философии #СПбГУ с помощью цифровых алгоритмов создали музыкальный отрывок первого дня Великой Отечественной войны, основанный на материалах из дневников очевидцев.
Сонификация данных — относительно новая дисциплина, которая занимается преобразованием различных текстовых данных в звук. Исследователи, основываясь на нейросетевых алгоритмах, присваивают определённым символам — буквам, словам — ноты, которые впоследствии можно собрать в звуковые фрагменты или даже музыкальные композиции.
Такой метод может помочь людям с ограниченными возможностями. Так, например, те, у кого есть различные проблемы со зрением, могут услышать и узнать про научные достижения, открытия. Более того, иногда преобразование данных в звук упрощает анализ научных данных. Например, биологу Марку Темплу из Университета Западного Сиднея удалось сонифицировать ДНК человека, что позволило лучше распознавать повторяющиеся последовательности нуклеиновых кислот.
Учёные Университета взяли данные 17 дневников очевидцев первого дня Великой Отечественной войны проекта центра «Прожито». Это очень драматичные дневниковые воспоминания о дне, в котором люди ещё не до конца понимали происходящее, многие, например, писали о тёплом лете, которое они ждут. Они разделили информацию из дневников на три группы: позитивные, негативные и нейтральные, не обладающие чёткой оценкой в тексте, а затем преобразовали их в звук с помощью цифровых алгоритмов.
Исследователи извлекли массив данных, оцифрованных в языке программирования JavaScript, а затем перенесли их в алгоритм оценки эмоций текста «Достоевский» — метод, преобразующий данные в последовательность чисел, где числам присвоены определенная эмоциональная окраска, от позитивной до негативной. Полученные данные — последовательности чисел — были загружены в сервис, присваивающий цифрам определённые ноты, которые затем учёные собрали в музыкальный отрывок.
По замыслу авторов проекта человек сначала прослушивает полученный фрагмент, результат проделанной работы, а только потом узнаёт, на каких данных он основан, что позволит создать дополнительный эмоциональный эффект, не основанный на ожиданиях.