Технологии сонификации и записи биологических сигналов растений

Исследование построено на сравнении семи объектов: корней, мха, комнатных растений, грибов, томатов, сосны и годовых колец дерева. Каждый объект связан с отдельным способом получения звука. В случае корней используется биосонификация через электроды и синтезатор; мох рассматривается через контактную запись микровибраций; комнатные растения — через перевод электрической проводимости в MIDI-ноты; грибы — через биоэлектрические сигналы, управляющие роботизированными руками; томаты — через запись реальных ультразвуковых эмиссий при стрессе; сосна — через сонификацию экoфизиологических данных; годовые кольца дерева — через алгоритмический перевод визуальной структуры древесины в звук.

Главный вопрос исследования: какие типы биологических данных можно сделать слышимыми и как технология влияет на то, что мы в итоге воспринимаем как звук живого?В разных главах звук возникает по-разному: как результат электрического измерения, механической вибрации, ультразвуковой записи, MIDI-перевода, параметрической сонификации или анализа изображения. Поэтому каждый фрагмент показывает не только особенности самого организма, но и ограничения выбранного метода.

Теоретически проект связан с понятием звукового ландшафта, но в случае биосонификации границы этого понятия расширяются, ведь в ландшафт попадают не только слышимые звуки, но и скрытые сигналы, которые становятся доступными только через технологию. Поэтому мой проект можно назвать исследованием невидимой или неслышимой части лесного саундскейпа.

Работа также подчёркивает важное различие между прямой записью и сонификацией. Например, ультразвуковые щелчки томатов являются реальными акустическими эмиссиями, которые нужно только перенести в слышимый диапазон. А звук комнатных растений или грибов с роботизированными руками — это уже результат перевода биоданных в музыкальные параметры. Таким образом, технология не просто «показывает» звук природы, а активно формирует его.

Каждый звук я рассматриваю с двух сторон. С научной — объясняю, что именно подключается, какой сигнал считывается. С личной — описываю, какое ощущение вызывает этот звук для меня.

Биосонификация создаёт ситуацию, в которой лес перестаёт быть просто фоном и становится сложной живой системой, часть которой мы можем услышать только через приборы. В этом смысле тишина леса оказывается не пустотой, а границей нашего восприятия.

Я начинаю исследование с корневой системы, потому что это растение связано с основным слоем леса. В структуре проекта оно обозначает старт с его нижнего, менее слышимого уровня.

В этом примере звук рассматривается скорее как звуковая реакция биоматериала, нежели настоящий звук объекта. В биосонификации живой объект подключается к системе через электроды или сенсорные клипсы. [1]

Прибор фиксирует изменения электрической проводимости / сопротивления между двумя точками органической поверхности. На такой отклик могут влиять влажность, свет, площадь контакта и состояние самого объекта. Затем эти изменения переводятся в управляющие сигналы для модульного синтезатора: они могут менять высоту, ритм, фильтр, громкость или тембр звука.

На изображении из видео виден Eurorack-модульный синтезатор. Это система из отдельных модулей, соединённых patch-кабелями. В Eurorack такие модули могут обмениваться аудиосигналом и control voltage — управляющим напряжением. Control voltage не звучит сам по себе, а меняет параметры синтезатора: высоту, фильтр, громкость, модуляцию или запуск событий. Поэтому в этой главе корень работает не как музыкальный инструмент в обычном смысле, а как источник изменяющегося сигнала, который влияет на электронную систему. [2]

По моему ощущению, звук корней, как и сама их биологическая структура, сочетает в себе твёрдость, звонкость и внутреннюю устойчивость. Характер звучания также связан с выбранной методикой — биосонификацией. Я слышу в нём хаотичные, непредсказуемые изменения, будто вся корневая система очень медленно прорастает, питает дерево и реагирует на среду. Каждое такое микродействие как будто получает собственную ноту или короткий звуковой импульс.

Для второй главы я использую проект Moss Listening художников Jez riley French и Pheobe riley Law. В отличие от MycoLyco, здесь мох не подключается к синтезатору как контроллер. Авторы работают с обычными видами мха, почвенными слоями и микоризными сдвигами. Эти записи сделаны с помощью самодельных микрофонов. [3]

Технология здесь заключается в контактной полевой записи. Контактный микрофон, в отличие от обычного микрофона, улавливает вибрации твёрдой поверхности или материала. То есть если обычный микрофон записывает то, что распространяется по воздуху, контактный микрофон фиксирует структурные вибрации внутри объекта или среды. [4]

Jez riley French отдельно пишет, что использует разные микрофоны и устройства слушания для таких записей: c-series+ contact mics, адаптированные контактные микрофоны, ecoutic mic, d-series hydrophones и адаптированные геофоны. Эти инструменты применяются для записи звуков внутри деревьев, папоротников, мха, мицелиальных сетей и других растений. [5]

Здесь звук воспринимается мной почти как привычный ASMR, и это напрямую связано с технологией его получения. В отличие от синтезаторного звучания, в этом фрагменте я слышу более натуральные, естественные микровибрации среды. Они создают очень приятное, телесное ощущение, словно мне мягко щекочет слух и мозг.