1.1 Введение
Нажатие клавиш на смартфоне или имитация щелчка камеры, заставка при запуске Windows XP, циферблат домофона или умные колонки — простые повседневные примеры аудио-дисплеев.
Несмотря на кажущуюся утопичность некоторых публикаций о сонификации, когда речь заходит об анализе данных не при помощи привычных графиков и таблиц, а звука, уже есть много примеров эффективной интеграции подобных систем взаимодействия.
Простой пример устройства, использующегося для тактильного и звукового фидбэка (haptics) в смартфонах1
В 1928 году был изобретен счетчик Гейгера — прибор, который измеряет уровень радиации и оповещает своего пользователя об ее опасных уровнях характерным звуком примитивного гранулярного синтеза. Это наверное самый известный аудио-дисплей.
Можно подключить усилитель или динамик к одной из составляющих компьютера. Получится пульсирующая волна, по которой можно будет отслеживать состояние пк (это использовалось исследователями, работавшими со старыми компьютерами). Или поставить радио рядом, настроить на правильную частоту и подслушивать разговоры компьютерных внутренностей. В свою очередь шум компьютерных внутренностей иногда используется для генерации потоков случайных чисел.
Внутренности счетчика Гейгера2
В цифровых камерах и смартфонах используется имитация звука затвора фотоаппарата3
1.2 Терминология:
Аудио-дисплей ~ звуковой интерфейс для представления данных.
Сонификация ~ это тип аудио-дисплеев, в которых данные представлены в виде звука не являющегося речью. (определение B. N. Walker, M. A. Ness — The Sonification Handbook)
Сонификация — относительно молодое активно развивающееся направление в искусстве и науке. Определения, приведенные мной выше, постоянно меняются, дополняются ограничениями, уточнениями или переизобретаются. С 1992 года почти ежегодно проводится Международная Конференция по Аудио-Дисплеям (далее название будет сокращаться до аббревиатуры ICAD и года проведения).
Постер ICAD 20044
1.3 Методология:
Параметрическое сопоставление ~ техника сонификации, в которой изменению в одном из измерений массива данных соответствует изменение в акустическом измерении (поток данных напрямую сопоставляется с каким-то параметром звукового сигнала).
Аудификация ~ техника сонификации, в которой периодические данные воспроизводятся напрямую, в качестве сигнала.
Моделирование ~ техника сонификации, в которой создается виртуальная звуковая модель предмета исследования открытая к воздействию со стороны пользователя. Ответ этой модели на воздействия определяется исходным датасетом.
1.4 Оглавление
1. Технологии: Примеры программного обеспечения и приборов, использующихся для анализа данных и непосредственно синтеза звука в сонификации (в некоторых работах задействовано устаревшее или нишевое ПО, поэтому оно будет упоминаться только в контексте конкретных проектов).
2. Энцефалограмма: Разбор методологии 10-ти разных сонификаций одного 36-канального датасета для ICAD 2004.
3. Другие сонификации: Примеры и специфика создания аудио-дисплеев в областях геологии, сейсмологии, географии, биологии, астрономии и социальных сетей.
4. Софт и веб-проекты: Первые разработки ПО-аудио-дисплеев и вебсайты, посвященные сонификации.
5. Эстетика: Работы эстетически близкие сонификации и наоборот. О важности эстетической составляющей для коммуникации в аудио-дисплеях.
logitechk750 / https://www.youtube.com (дата обращения: 27.10.2025).
Nick Parlante / https://cs.stanford.edu (дата обращения: 27.10.2025).
Ikey Ajavon / https://sproutvideo.com (дата обращения: 27.10.2025).
https://icad.org (дата обращения: 27.10.2025).
