Другие Сонификации
4.1 Schizosymphony
Проект сонификации неврологических данных людей страдающих шизофренией. Предлагаются два возможных подхода:
а. Сонификация результатов магнитно-резонансной томографии (МРТ) при помощи спектральной обработки данных (для примера сонификации МРТ см. «Neurospaces» — Timothy Schmele, 2014)
б. Создание аудио сцен, передающих характерные симптомы шизофрении, из повседневных звуков, панорамированных соответственно 7-ми функциональным разделам головного мозга. Данные МРТ при этом подходе модулируют амплитуду и ритм.
Анализ данных МРТ1
4.2 Сонификация Структурной Биологии
Структура миоглобина, полученная методом рентгеноструктурного анализа (изучаются отражения рентген-лучей в объекте)2
Рентгеноструктурный анализ ДНК3
4.3 Listening to the Earth Sing
Сонификация сейсмологических данных: Сейсмические сигналы обычно имеют частоту 30-40Hz (далекие источники могут издавать сигналы на частоте ниже 1Hz), на грани слышимого, так же как сигналы получаемые в результате энцефалограммы. При прямом воспроизведении слушатель будет с трудом различать изменения в частоте и тембре. Записи обычно ускоряют в несколько раз (или несколько сотен раз, см. 4.12).
Также эти сигналы при относительно небольшой длительности могут сильно варьироваться в амплитуде (до 100dB), поэтому обычно полученные записи сильно компрессируются.
Схема записи сейсмических сигналов4
Последствия землетрясения и цунами в Индонезии5
4.4 Walk on the Sun
Интерактивная инсталляция музыканта Марти Квинна (см. также Seismic Sonata, Climate Symphony).
Работа создана совместно с NASA и использует видеозапись Солнца с телескопа Hubble. Слушатель сам своим движением определяет «звучащий» участок Солнца.
«Снимок» 09.04.2025 (изображение собрано из множества ультрафиолетовых снимков поверхности солнца сделанных спутником-орбитером с расстояния около 77'000'000км)6
4.5 The Sound of the Discussion of Sounds (ICAD2012)
Сонификация чартов популярной музыки для ICAD 2012 года, записано в Max/MSP. Ноты мажорного аккорда ля сопоставлены с 16-ю наиболее популярными исполнителями дня в возрастающем порядке, с изменениями популярности в реальном времени каждые 30 секунд меняется скорость ноты. Первый вариант отображает два часа данных.
Во втором варианте такое же сопоставление, но все ноты звучат одновременно, как аккорд. Внутри аккорда скорости отдельных нот меняются вместе с изменением позиций соответствующих исполнителей и таким образом создают плавное изменение его воспринимаемой частоты.
4.6 Sonic Window (ICAD 2012)
Сонификация того же датасета популярности музыкальных исполнителей в Твиттере. ID последних 10 пользователей, упомянувших исполнителя, задают амплитуду и различные параметры гранулярного синтезатора.
Имя исполнителя определяет сэмпл для гранулярного синтезатора: синтезатор речи зачитывает имя, а эта запись разбирается на отдельные фонемы в гранулярном синтезаторе.
Схема патча Max/MSP7
4.7 SoundObservation
Сонификация звезд / интерактивная инсталляция про световое загрязнение.
Данные получены со спутника Hipparcos. Данные спутника сравниваются с данными датчиков движения на слушателе, чтобы определить в какую точку звездного неба тот смотрит.
Спутник Hipparcos перед запуском8
Рисунок спутника Hipparcos в космосе8
4.8 Total Solar Eclipse
VR инсталляция + сонификация солнечного затмения 2024-го года.
Территория США вписана в условный прямоугольник, углы которого (автор называет их «экстремальными координатами») соответствуют предельным значениям частоты звука и его панорамирования.
Соответствие между траекторией наблюдения солнечного затмения и распределением частот9
Графическая партитура сонификации9
Карта США с обозначенной на ней траекторий затмения9
Экстремальные координаты9
Композитный снимок затмения10
4.9 MMS Auralization
Сонификация данных магнитометра Magnetospheric Multiscale Mission (MMS) NASA. В программе состоит четыре спутника и сигнал полученный от каждого из них расположен в пространстве аудио-дисплея так же как расположен в пространстве сам спутник.
Расположение спутников11
Расположение колонок / источников звука в наушниках. Слушатель находится в начале координат, лицом в направление оси X.11
Спутники MMS перед запуском12
Промо постер миссии MMS12
4.10 Trve Norths (ICAD 2024)
Инструкция для посетителей инсталляции13
Интерактивная психоакустическая инсталляция для одного слушателя.
Слушатель садится на стул, расположенный между двумя колонками. В одном канале играет постоянный сигнал на частоте 38.1Hz, соответствующий географическому Северу. В другом — еле заметно меняющаяся частота, соответствующая магнитному Северу, данные которого обновляются в реальном времени.
Во время сеанса можно услышать медленно гуляющий гул или сердцебиение, выделяемые из разницы между двумя сигналами.
Фотография с инсталляции13
4.11 Анализ Геологических Данных
VR-инсталляция в Unity + сонификация геологических данных. Каждому минералу в составе пород данного участка земли соответствует свой тембр / инструмент.
Слушатель может взаимодействовать с моделью участка земли при помощи VR-контроллера или тактильного контроллера. С их помощью выбирается точка на карте и соответствующий ей звуковой элемент.
3D карта и состав пород14
Соответствие между породами / минералами и музыкальными инструментами14
Соответствие между породами / минералами и музыкальными инструментами14
Фотография угольной шахты (здесь хорошо видно наслоения пород)15
4.12 Sonification of Tohoku Earthquake / Sendai Coast, Japan, 11.03.2011
Сонификация двух дней землетрясения 2011-го года в регионе Тохоку, Япония. Выполнена в Sonifyer.
Один из самых массово популярных образцов сонификации (на уровне с космическими аудио-дисплеями NASA). Несмотря на свою не-перформативность, видео ярко демонстрирует импрессионистский потенциал сонификации.
Скриншот Sonifyer16
Рисунок «сцены» землетрясения17
Спутниковый снимок региона18
Землетрясение Тохоку19
Последствия землетрясения Тохоку20
4.A Shroomification
Между грибами и музыкой существует глубокая онтологическая связь: «Я люблю грибы, вот и все» (Джон Кейдж в д/ф 4 Американских Композитора, 1983). Поэтому закономерно что в конце 70-х годов в Италии появилась духовная община, посвятившая себя сонификации грибов и других растений.
Джон Кейдж собирает грибы21
В этом видео можно услышать пример биосонификации, используемой в общине Даманхур. Для сонификации здесь растения несколько недель обучаются классической музыке и участвуют в коллективных медитациях.
Вирусная популярность видео с сонификацией грибов (грибы, а также картофель, лимоны и пр. подключаются к аналоговому синтезатору или компьютеру для сонификации биоэлектрических сигналов в реальном времени) безусловно является частью тщательно продуманной психологической атаки либо вышеупомянутой общины Даманхур, либо самого Джона Кейджа.
Электрические сигналы грибов считываются при помощи присоединенных к ним зажимов-электродов и далее обрабатывается для использования этих сигналов в качестве параметров для синтезатора.22
Shin, H., Li, X., Fu, Z., & von Coler, H. SCHIZOSYMPHONY: FROM SCHIZOPHRENIA BRAINWAVES TO NARRATIVE SOUNDSCAPES (дата обращения: 27.10.2025).
https://www.sciencemuseum.org.uk (дата обращения: 27.10.2025).
King’s College London, Archives / https://wellcomecollection.org (дата обращения: 27.10.2025).
Hayward, C. (1994). Listening to the earth sing. In Santa Fe Institute Studies In the Sciences Of Complexity — Proceedings Volume — (Vol. 18, pp. 369-369). Addison-Wesley Publishing Co (дата обращения: 27.10.2025).
https://legacy.itic.ioc-unesco.org (дата обращения 27.10.2025).
https://www.esa.int (дата обращения 27.10.2025)
Vigani, A. (2012). SONIC WINDOW# 1 [2011]–A Real Time Sonification. Georgia Institute of Technology (дата обращения: 27.10.2025).
A review of 70 years with astrometry February 2024 Astrophysics and Space Science 369 (2) Erik Høg (дата обращения 27.10.2025).
Walmer, A., Cash, N., Yin, W., Majors, T., Biggs, B., & Walker, B. N. ACCESSIBLE SONIFICATION OF TOTAL SOLAR ECLIPSE 2024: ACCESSIBLE MAP AND MULTIMODAL VIRTUAL REALITY EXPERIENCE (дата обращения: 27.10.2025).
Fred Espenak / https://www.mreclipse.com (дата обращения 27.10.2025).
Collins, K., Verniero, J., Alexander, R. L., & Candey, R. M. AURALIZATION OF MAGNETIC MULTISCALE SATELLITE DATA: TOWARD INTEGRATED AUDIFICATION IN SPACE SCIENCE (дата обращения: 27.10.2025).
https://www.jorgeboehringer.com/ (дата обращения: 27.10.2025).
Yasmin, S., & Jamal, C. Q. AUDIO-VISUAL ANALYTICS OF GEOSCIENTIFIC DATA WITH TIMBRAL VARIATIONS AND IMMERSIVE INTERACTIONS (дата обращения: 27.10.2025).
https://undergroundminers.com (дата обращения 27.10.2025).
https://sonifyer.org (дата обращения 27.10.2025).
Winters, R. M., & Weinberg, G. (2015). Sonification of the Tohoku earthquake: Music, popularization & the auditory sublime (дата обращения: 27.10.2025).
https://visibleearth.nasa.gov (дата обращения 27.10.2025).
Miyako City Officer / https://shutterstock.com (дата обращения 27.10.2025).
Airman 1st Class Katrina R. Menchaca U.S. Air Force.
https://www.schubertiademusic.com (дата обращения 27.10.2025).
MycoLyco / https://www.youtube.com (дата обращения 27.10.2025).
