Ученые СПбГУ собрали звуковой образ первого дня Великой Отечественной войны

Сонификация данных — относительно новая дисциплина, которая занимается преобразованием различных текстовых данных в звук. Исследователи, основываясь на нейросетевых алгоритмах, присваивают определенным символам — буквам, словам — ноты, которые впоследствии можно собрать в звуковые фрагменты или даже музыкальные композиции.

Сегодня это не только смежная область сайнс-арта, но и расширение возможностей познания для людей с ограниченными возможностями. Так, например, люди с различными проблемами зрения могут услышать и узнать про научные достижения, открытия. Более того, иногда преобразование данных в звук упрощает анализ научных данных. Например, биологу Марку Темплу из Университета Западного Сиднея удалось сонифицировать ДНК человека, что позволило лучше распознавать повторяющиеся последовательности нуклеиновых кислот.

Специалисты лаборатории цифровой философии СПбГУ смогли сонифицировать фрагмент первого дня Великой Отечественной войны, основываясь на данных из дневников очевидцев событий.

Мы взяли данные 17 дневников очевидцев первого дня Великой Отечественной войны проекта центра «Прожито». Это очень драматичные дневниковые воспоминания о дне, в котором люди еще не до конца понимали происходящее, многие, например, писали о теплом лете, которое они ждут. Мы разделили информацию из дневников на три группы: позитивные, негативные и нейтральные, не обладающие четкой оценкой в тексте, а затем преобразовали их в звук с помощью цифровых алгоритмов, — рассказал аспирант СПбГУ Дмитрий Ярочкин, координатор лаборатории цифровой философии.

Ученые Университета извлекли массив данных, оцифрованных в языке программирования JavaScript, а затем перенесли их в алгоритм оценки эмоций текста «Достоевский» — алгоритм, преобразующий данные в последовательность чисел, где числам присвоены определенная эмоциональная окраска, от позитивной до негативной. Полученные данные — последовательности чисел — были загружены в сервис, присваивающий цифрам определенные ноты, которые затем исследователи собрали в музыкальный отрывок.

По замыслу авторов проекта человек сначала прослушивает полученный фрагмент, результат проделанной работы, а только потом узнает, на каких данных он основан, что позволит создать дополнительный эмоциональный эффект, не основанный на ожиданиях.

Как отметил Дмитрий Ярочкин, таким образом можно озвучить любую остросоциальную информацию и дать слушателю возможность более детального знакомства с ней и высокий уровень погружения.

Иллюстрация: Дмитрий Ярочкин

28.02.2024, 322 просмотра.



Поиск на сайте

Новости компаний, релизы

3D-печать: от самых смелых концепций до твердой реальности
КНИТУ вошёл в тройку лидеров по количеству перспективных российских стартапов
В ПсковГУ состоялось открытие научно-образовательной лаборатории «Когнитивное развитие в образовании»
Квантовая неделя в Санкт-Петербурге пройдет на площадке СПбГУ
Фестиваль научных театров «Наука всем!» прошёл в Санкт-Петербурге