Данный раздел исследует проекты двадцати авторов и коллективов, занимающих значимое место в контексте цифрового аудиовизуального искусства. Работы рассматриваемых практиков были разбиты на три категории: объективные, гибридные и субъективные. Такая структура анализа создает последовательное повествование от математически-структурного к эмоциаонально-ассоциативному. Каждый проект разобран на следующие составляющие: описание, визуализация и метод.
3.1. Объективный опыт
Штейна и Вуди Васюлка
Пионеры видеоарта, чья практика на рубеже 1960-2000-х годов заложила основы цифровой визуализации звука. Они рассматривали видео как поток энергии, родственный звуку, а не как простой носитель изображения. В своих работах от ранних Noisefields до поздних Violin Power они прошли путь от аналогового синтеза к цифровому анализу, исследуя, как электрический импульс может стать визуальным языком. Их наследие создало концептуальную основу современного аудиовизуального искусства, где звук, изображение и алгоритм образуют единую взаимопереводимую систему.
- Noisefields (1974)
Описание: Ключевая работа 1970-х, в которой Васюлка исследуют материальность "электронного шума" и его визуальную энергию; часто цитируется как ранний пример «визуализации сигнала».
Визуализация: Цветное «снеговое» поле (video-noise), из которого вычленяются круговые или пульсирующие формы; изображение строится через манипуляцию дефлекцией электронного сигнала и колоризацией шума, так что интенсивность/тембр сигнала коррелируют с плотностью и ритмом визуального шума. Технологически использовались секвенсер/мультикиер и colorizer; очевидна работа с электро-сигнальной топологией.
Метод: Объективный. Визуализация рождается из прямой эксплуатации параметров видео- и электро- сигнала как эквивалента звуковой энергии [12].
Кадры из «Noisefields» Штейны и Вуди Васюлка, 1974.
Ш. Васюлка и В. Васюлка, «Light Revisited», 2002.
- Violin Power (1978)
Описание: Перформативный проект Штейны Васюлка, где игра на скрипке становится непосредственным контроллером изображения [13].
Визуализация: В начальных версиях звук и движение смещали сканирование и формировали абстрактные кривые, которые постепенно трансформировались от узнаваемых сцен до чистой абстракции. Это сочетание музыкальной выразительности и ре-тайм графики делает видеоряд живым продолжением инструмента [14].
Метод: Гибридный, сильно склоняющийся к объективному. Параметрический маппинг в сочетании с перформативным соучастием исполнителя: технически это real-time контроллер.
Кадры из «Violin Power» Ш. Васюлка, 1978.
- The Matter (1974)
Описание: Короткая экспериментальная видеоработа, в которой визуальная и звуковая структуры порождаются одним и тем же источником, а именно генератором волн. Синусоидальные, пилообразные и прямоугольные сигналы формируют как звучание, так и видоизмененный видеорастр через скан-процессор.
Визуализация: Генерируемые волновые формы деформируют горизонтальные строчки растра, при этом на экране возникают волнообразные, ритмически меняющиеся узоры, а итоговый Rutt-Etra-образ снимается второй камерой с дисплея, чтобы сохранить телевизионную синхронизацию и превратить звуковую «волновую» структуру в полноценный визуальный объект [15].
Метод: Объективный. Визуализация получается прямой трансляцией параметров генератора волн в форму растра: звук и изображение происходят из одного сигнала и соотносятся параметрично, а не через свободную интерпретацию или нарратив.
Кадры из «The Matter» В. Васюлка, 1974.
Granular Synthesis
Художники Курт Хентшлагер и Ульф Лангейнрих основали дуэт Granular Synthesis в 1991 году в Вене. Их подход базировался на идее гранулярного синтеза и в аудио, и в видео: они «разрезали» звук и изображение на мельчайшие частицы (гранулы) и собирали их заново в виде пульсирующих аудиовизуальных масс. Главная цель – исследовать физическое воздействие звука и света на тело и восприятие зрителя.
- Model 5 (1994)
Описание: Видеоинсталляция, где на экранах повторяется видео- фрагмент с женским лицом (актриса Акэми Такэя), произносящего слово «model». Этот короткий кадр был «расщеплен» и ритмически смонтирован с синтетическим звуком.
Визуализация: Изображение дезинтегрируется в ритм звуковых импульсов (мельчайшие видео-гранулы, вспышки, повторения и смещения). Свет и звук работают как единая структура синхронное мерцание, пульсации, дробление кадра. Создается эффект физического ощущения ритма, давления и сенсорного перенасыщения.
Метод: Объективный. Видео напрямую синхронизировано с аудио-отрывками, где каждая вспышка и фрагмент соответствует звуковой частоте или ритму. Звук здесь не иллюстрируется, а буквально визуализируется через дерганное движение [16].
Кадры из «MODEL 5» Granular Synthesis, 1994.
Granular Synthesis, «MODEL 5», POSTCITY Linz, Линц, 2019.
- NOISEGATE (1998)
Описание: Иммерсивная аудиовизуальная инсталляция, построенная на принципе «гранулярного» синтеза звука и изображения. В пространстве развернуты многоканальные проекции раздробленного человеческого лица, сопровождаемые звуковыми импульсами.
Визуализация: Фрагментированные и повторяющиеся кадры движения лица синхронизируются с аудиошумами и ритмическими колебаниями. Видео разбивается на мельчайшие элементы и вновь собирается в непрерывные ряды, создавая эффект вибрации и потери человеческой формы [17].
Метод: Объективный. Визуальный ряд напрямую строится на параметрах звука и алгоритмах обработки.
Кадры из «NOISEGATE» Granular Synthesis, 1998.
Granular Synthesis, «NOISEGATE premiere», Museum of Applied Art, Вена, 1998.
- POL (2000)
Описание: крупномасштабная многоканальная инсталляция (7 экранов и многоканальный звук), где визуализация представляет собой абстрактное, звукоориентированное поле цветов и шумов.
Визуализация: Семь экранов показывают световые поля, в основном в оттенках синего: шумовые поверхности, градиенты, динамические «фигуры», вспышки и затухания. Вспышки и пульсации следуют аудиодинамике и создают эффект синхронной вибрации.
Метод: Объективный. Визуализация формируется как прямой отклик на параметры аудиосигнала; образность минимальна, акцент на материале (цвет, шум, интенсивность).
Кадры из «POL» Granular Synthesis, 2000.
Granular Synthesis, «POL», STRP Eindhoven, Эйндховен, 2009.
Редзи Икэда
Японский композитор, саунд- и медиа-художник, один из ключевых представителей направления минималистического аудиовизуального искусства. Его практика фокусируется на взаимосвязи звука, света и данных, исследуя границы человеческого восприятия. Икэда работает на стыке науки и искусства: его инсталляции и перформансы основаны на математической структуре звука, частоте, бинарном коде, ритме и цифровой точности. В этом подходе визуализация не иллюстрирует звук, а представляет сам процесс его цифрового существования, превращая нематериальные данные в оптический и акустический опыт.
- Datamatics [prototype-ver.2.0] (2006-08)
Описание: Cерия аудиовизуальных перформансов и инсталляций, основанных на использовании чистых числовых данных (базы данных, координаты, цифровые коды).
Визуализация: Черно-белые минималистичные формы, линии, точки, работающие в синхронизации со звуком.
Метод: Объективный. Визуализация напрямую построена на числовых данных, звук и картинка сведены к математическим параметрам [18].
Редзи Икэда, «Datamatics [prototype-ver.2.0]», 2006-08.
Ryoji Ikeda, «Data.flux [12 XGA version]», Onassis Stegi, Афины, 2019.
- Test pattern (2008-22)
Описание: Аудиовизуальная система, преобразующая различные данные (звук, текст, изображения) в бинарный код, который отображается в виде интенсивно сменяющихся черно-белых паттернов. Проект существует как в формате инсталляций, так и перформансов.
Визуализация: Визуальный ряд строго минималистичен: монохромные штрихкоды, линии и точки, синхронизированные со звуком. Графика и звук образуют единый поток, где изображение становится прямым отражением цифровых данных [19].
Метод: Объективный. Икэда использует алгоритм, переводящий информацию в двоичные последовательности, которые одновременно определяют и визуальные паттерны, и звуковые колебания. Это создает эффект оптического звука, где визуальное восприятие напрямую влияет на аудиальное.
Редзи Икэда, «Test pattern [№ 14]», 2022 // «Test pattern [№ 12]», 2017 // «Test pattern», 2019. // «Test pattern [№ 13]», 2017 // «Test pattern [№ 12]», 2017 // «Test pattern [№ 11]», 2017.
