Аудиовизуализация в музее оптики СПбГУ ИТМО
видео работы системы (рекоммендуется смотреть с самого youtube, там есть FullHD):
В музее оптики СПбГУ ИТМО есть один довольно примечательный экспонат — каталог Аббе, представляющий из себя коллекцию оптических стекол различных марок и размеров. Руководство музея желало чтобы этот каталог подсвечивался под музыку и так появился проект аудиовизуализации, которым я собственно и занялся.
Аппаратная часть была разработана фирмой ЛМТ, а я занимался написанием программы-аудиоплеера, который бы выводил картинку соответствующую играющей в данный момент музыке. Вот краткое описание как именно происходит превращение музыки в изображение:
Во время проигрывания аудиофайла с определенной частотой (в данном случае это частота кадров) берутся небольшие кусочки с сэмплами и затем над ними выполняется быстрое преобразование Фурье.
Исходная часть аудиофайла
Результат выполнения преобразования Фурье
...