Прикосновение как триггер: интерактивные [био]сенсоры в искусстве
[1] концепция
В современном искусстве тактильное взаимодействие человека превращается в полноценный язык, позволяющий не только активировать объект искусства, но и раскрыть эмоциональное и физиологическое состояние зрителя, делая его соавтором происходящего. Интерактивные сенсорные технологии — от простых прикосновений до сложных биосенсоров, реагирующих на температуру, пульс или дыхание, — трансформируют восприятие искусства от простого созерцания в участие. Эти формы взаимодействия становятся пространством для формирования нового уникального диалога между природой, технологиями и человеком.
Как человеку, часто исследующему в последние годы тему взаимосвязи человека и технологий, меня остро интересует искусство, которое перестает быть беззвучным объектом и вступает в тактильный опыт с человечеством настоящего. Мир, в котором мы живём, всё больше уходит в цифровизацию и новые технологии, но вместе с этим возникает «жажда жизни», потребность в телесном, эмпатическом, чувственном диалоге. В интерактивных инсталляциях происходит нечто большее, чем просто игра со зрителем, — осуществляется психофизиология воздействия, активация тела. Для меня является важным исследовать, проанализировать и понять, как современные технологии не отчуждают нас от физического мира, а, наоборот, выступают проводниками к природному, телесному и эмоциональному отклику.
В условиях постпандемического мира мы столкнулись с вынужденной изоляцией, а сенсорное искусство возвращает нам утраченное — контакт.
Это визуальное исследование позволяет переосмыслить, понять, как мы можем чувствовать искусство не только взглядом, но и кожей, пульсом, движением. А также — что происходит, когда осуществляется симбиоз, и искусство начинает чувствовать нас в ответ.
Я подхожу к теме как к пересечению науки, технологии и эмоциональной включенности, отслеживая, как тактильность и сенсорика становятся методами высказывания современного искусства.
В центре проекта — человек, как точка пересечения. Я хочу понять, как далеко мы можем зайти в этом взаимодействии. Если искусство начинает «ощущать» зрителя и реагировать на его биосигналы, где заканчивается объект и начинается субъект?
Ключевой критерий отбора визуального материала строится на сравнении работ, использующих различные типы сенсорных и биосенсорных механизмов: от статичных объектов, реагирующих на прикосновение, до сложных инсталляций, работающих с пульсом, движением, температурой или дыханием. Главный ориентир — наличие телесной активации зрителем и обратной реакции со стороны объекта.
Принцип структурирования исследования основан на типах взаимодействий и сигналах отклика. Исследование делится на разделы: по механизму активации, по способу ответной реакции, а также по степени участия зрителя (от реактивного до нейроинтерфейсного взаимодействия). Такая рубрикация позволит выявить динамику перехода от визуального восприятия к физическому и эмоциональному включению.
Дарик Гилл / Застенчивая машина / 2018
Важным вопросом визуального исследования является процесс, посредством которого прикосновение и другие сенсорные сигналы становятся триггерами для установления взаимодействия между человеком и интерактивным художественным объектом.
Гипотезой выступает идея о том, что благодаря тактильности и сенсорному взаимодействию в современном искусстве происходит активация не только визуального восприятия, но и физиологических, и эмоциональных реакций, что приводит к изменению роли зрителя и превращает его в соавтора процесса, а произведение — в диалоговую систему, реагирующую на присутствие человека.
[2] сенсоры vs биосенсоры
Важное различие между сенсорами и биосенсорами в современном искусстве связано не только с технологией, но прежде всего с принципом взаимодействия: сенсоры реагируют на внешнее действие, тогда как биосенсоры — на внутреннее состояние и процессы человека. Это разделение формирует два разных типа зрительского опыта: от игрового или пространственного участия к эмоциональной и телесной сонастройке.
[сенсоры]
Майрон Крюгер / Видеоплейс / 1973
Первое использование сенсоров в искусстве связывают с художниками направления кинетического и интерактивного искусства 1960-х годов. Тогда художники начали использовать движения зрителя или внешние физические стимулы как часть художественного процесса.
Джеффри Шоу / Небесные врата / 1986
Джеффри Шоу / Небесные врата / 1986
Привилегия сенсоров в искусстве заключается в том, что они позволяют мгновенно включать зрителя в пространство произведения за счёт простых и доступных действий: движения, приближения, прикосновения. Они делают искусство интерактивным и интуитивно понятным, разрушая барьер между человеком и объектом. Сенсоры естественны: они создают моментальный отклик и делают для зрителя участие в искусстве простым, не требующим затрат.
Скотт Сниббе / Пограничные функции / 1998
Скотт Сниббе / Пограничные функции / 1998
Работа Скотта Сниббе показывает, что личное пространство — не нечто стабильное и принадлежащее только нам, а динамическое и даже хрупкое, зависящее от присутствия других людей. Художник делает невидимое — границы между людьми — зримым, используя визуализацию математических моделей (диаграмм Вороного), которые изменяются в реальном времени в ответ на передвижение участников.
Сенсоры движения здесь играют ключевую роль: они фиксируют положение тел в пространстве и запускают визуализацию границ между ними. Без взаимодействия нескольких человек работа не существует — тем самым подчеркивается, что «я» возможно только через «другого».
Рафаэль Лозано-Хеммер и Кшиштоф Водичко / Павильон для увеличения / 2015
В работе «Павильон для увеличения» на стены проецируется изображение с 12 систем видеонаблюдения, которые отслеживают движение людей в пространстве павильона.
Сенсоры движения и камеры преобразуют физическое присутствие зрителя в сигнал, запускающий увеличение, слежение, разделение.
Инсталляция превращает наблюдающего в наблюдаемого. Чем активнее человек себя ведет — тем больше система вторгается в его пространство и дезориентирует.
[биосенсоры]
Биосенсоры — более позднее явление. Они начали использоваться в 1990-х, когда технологии считывания физиологических данных стали доступнее.
Такие системы способны фиксировать внутренние сигналы человека, измерять биологические величины, то есть характеристики живых организмов или биологических процессов.
Скотт Сниббе / Взрыв / 2005
Скотт Сниббе / Взрыв / 2005
«Дыхание является важным атрибутом личности, о существовании которой мы делаем вывод только через другие средства. Мы мысленно называем это свидетельство дыхания „моим дыханием“. Но что отличает „мое дыхание“ от простого воздуха и, кроме того, что отличает мое дыхание от меня?» — Скотт Сниббе
Эксперимент Лизы Парк в проекте Eunoia (2013) заключался в том, чтобы с помощью датчика мозговых волн (EEG) зафиксировать её эмоциональное состояние и превратить невидимую мозговую активность в видимые и слышимые формы.
Лиза Парк / Eunoia / 2013
Электрическая активность мозга переводилась в звуковые волны, которые запускались через колонки с подносами воды, каждая из которых символизировала одну из эмоций — печаль, гнев, ненависть, желание и радость. Вибрации на воде становились отражением её внутреннего состояния.
В основе цели перформанса лежала попытка достичь момента полной неподвижности, внутреннего спокойствия и контроля над сознаниями и мыслями.
Лиза Парк / Eunoia II / 2014
Художница также воссоздала более усовершенствованную версию перфоманса, в котором было задействовано 48 пластинок и динамиков, чтобы представить уже 48 эмоциональных состояний философа Баруха Спинозы.
В обеих работах Парк проявляет свое острое чувство прекрасного. Она демонстрирует искусное использование данных биодатчиков, которые часто бывают неуправляемыми и трудно интерпретируемыми.
«Во время перформанса я думаю о воде как о зеркале моего внутреннего „я“, поэтому моя работа направлена на визуальное отражение вибраций моего разума путем отражения себя на поверхности воды» — Лиза Парк
Лиза Парк / Eunoia II / 2014
Привилегия биосенсоров в искусстве — в их способности работать с внутренними, невидимыми состояниями человека. Биосенсоры переводят пульс, дыхание, мозговую активность в художественные формы, создавая глубоко персонализированный отклик. Они делают зрителя не просто участником, а соавтором, раскрывая телесные и эмоциональные границы восприятия. Это открывает путь к более тонкому, чувственному и философскому взаимодействию между человеком и художественным объектом.
[3] механизмы и сигналы активации
[звук]
В современном искусстве звук является одним из ведущих триггеров, запускающих работу. Через технологические решения звук может быть распознан как команда или импульс, на который художественный объект реагирует. Чаще микрофоны и аудиосенсоры улавливают звук, аудиосигналы преобразуются в цифровые данные с помощью программ и полученные результаты запускают реакцию объекта.
Тарек Атуи — современный художник и композитор, работающий на стыке звука, перформанса, тактильного опыта и новых технологий. В своих проектах он исследует, как звук может быть воспринят не только через слух, но и через тело — как вибрация, движение, давление, воздух. Особенно его интересует идея инклюзивного звукового восприятия, доступного даже для глухих и слабослышащих людей.
Тарек Атуи / Свидетель воды / 2023
Его работы включают в себя сенсоры прикосновения, движения, давления, с помощью которых зритель может взаимодействовать с объектом и тем самым становиться соавтором звучания.
Тарек Атуи / Место, где я хотел бы быть / 2024
Тарек Атуи / Дрейф / 2023
Тарек Атуи / Дрейф / 2023
Атуи разработал серии уникальных музыкальных инструментов в сотрудничестве с инженерами, дизайнерами и участниками с различными уровнями слуха. Эти инструменты активируются через прикосновения, движения и вибрации, позволяя пользователям «ощущать» звук телом, а не привычным слуховым инструментом.
Тарек Атуи / WITHIN / 2017
Проект WITHIN — это художественное исследование, которое переосмысляет восприятие звука, вовлекая в процесс как слышащих, так и глухих участников. Цель проекта — расширить понятие «слушания» за пределы слухового восприятия, включив в него тактильные, визуальные и телесные ощущения.
Тарек Атуи / Волна / 2019
Тарек Атуи / Волна / 2019
[свет]
Сенсорика света основана на использовании датчиков освещённости и фотосенсоров, которые фиксируют изменения уровня освещения в пространстве.
В интерактивных медиа-инсталляциях свет способен служить сенсором присутствия, улавливая движение, тень или приближение зрителя с помощью камер, инфракрасных датчиков и LIDAR-систем.
Дарик Гилл / Застенчивая машина / 2018
Дарик Гилл / Застенчивая машина / 2018
Интерактивная кинетическая световая скульптура, разработанная Дариком Гиллом, представляет собой 12-гранную геометрическую форму, которая открывается и закрывается в зависимости от уровня шума в окружающей среде. При повышении громкости скульптура сжимается и начинает быстро пульсировать разноцветным светом, а при снижении уровня шума — плавно раскрывается, излучая мягкие волны радужного света.
Гилл стремится передать эмоциональные тонкости живых существ, такие как застенчивость, настороженность и адаптивность, через взаимодействие с окружающей средой.
Рафаэль Лозано-Хеммер / Призыв / 2022
Рафаэль Лозано-Хеммер / Призыв / 2022
[пульс]
Пульс — это биометрический маркер, который отражает внутренние состояния организма: стресс, покой, возбуждение, тревогу. В рамках биохудожественных практик и интерактивного медиа-искусства пульс превращается в алгоритмически считываемый сигнал, который может быть использован для активации или модуляции объекта искусства. Современные технологии позволяют с высокой точностью снимать кардиосигналы с помощью фотоплетизмографии, ЭКГ-датчиков или оптических сенсоров, интегрированных, например, в наручные устройства.
Рафаэль Лозано-Хеммер / Импульс Вороного / 2024
Восприятие искусства усиливается, когда оно затрагивает аффективные и телесные уровни сознания. Если объект искусства реагирует на пульс зрителя — изменяет свет, звук, визуальные формы в зависимости от частоты сердечных сокращений — зритель начинает ощущать себя частью живого процесса, в котором его физиология становится выразительным средством.
Каждая лампочка мерцает под пульс другого участника, что способствует соединению. Изготовленные на заказ датчики пульса записывают сердцебиение посетителей; когда новый участник взаимодействует с установкой, его пульс добавляется к навесу записей над ними, при этом новейшая запись заменяет самую старую.
Рафаэль Лозано-Хеммер / Топология импульса / 2024
Рафаэль Лозано-Хеммер / Топология импульса / 2024
[дыхание]
Дыхание, как ритмический, автономный, но управляемый процесс человеческого тела, всё чаще становится в искусстве живым интерфейсом, благодаря которому человек вступает в контакт с произведением. С помощью дыхательных датчиков, акселерометров, пневматических сенсоров или микрофонов, улавливающих изменения давления и звука, дыхание преобразуется в новый сигнал — отклик.
Это можно рассматривать как форму интерактивного биофидбека, где дыхание не только запускает действия объекта, но и возвращает человеку «отражение» его собственного состояния.
«Изменяя пространство, оставляя пространство привычной чувствительности, человек вступает в общение с пространством, которое является психически инновационным. Ведь мы не меняем место, мы меняем свою природу» — Гастон Башелард, «Поэтика пространства»
Чар Дэвис / Осмос / 1995
Смысл проекта «Осмос» заключается в создании иммерсивной виртуальной среды, где пользователь исследует не внешний цифровой мир, а глубины собственного сознания и восприятия через телесное присутствие на основе дыхания и равновесия.
Чар Дэвис / Осмос / 1995
Дыхание становится основным навигационным механизмом — вдох поднимает пользователя вверх, выдох — опускает вниз, а легкие изменения положения тела позволяют двигаться в пространстве. В процессе желание к действию заменяется созерцательным свободным падением. Одиночество становится ключевым аспектом опыта, ведь цель — соединить человека не с другими, а с самим собой.
B reel / Прана / 2015
Используя экспериментальный датчик, обычно встречаемый в медицинских исследованиях, B reel создали светодиодную сферу, которая берет сложную технологию и объединяется с простым человеческим актом захвата дыхания.
Фарзад Каргаран / Аура / 2024
Фарзад Каргаран / Аура / 2024
Аура является дыхательным датчиком, который способен преобразовывать акт дыхания в разную обратную связь: образную, интерактивную, слуховую, тактильную.
Визуальные материалы проекта демонстрируют устройство с минималистичным дизайном, что указывает на стремление к созданию простого и понятного, прежде всего, для человека интерфейса.
Фарзад Каргаран / Аура / 2024
[4] заключение
Подводя итог, можно проследить, как сенсоры и биосенсоры превращают зрителя из наблюдателя в активного участника искусства. С 1960-х годов сенсорные технологии использовались для фиксации движения, а с 1990-х — для считывания биосигналов: дыхания, пульса, мозговой активности. Эти данные становятся явными триггерами, активирующими совершенно разные объекты искусства.
В этом контексте можно утверждать, что тактильность, телесность и эмоциональная включённость, активируемые с помощью технологий, формируют новый язык искусства — язык соприсутствия, эмпатии и взаимного участия. Этот язык сближает три мира — природу, человека и технологии, — оставляя открытым вопрос: где теперь, в настоящем, проходит граница между искусством как объектом и человеком как его зрителем и соавтором?
Gaston Bachelard The Poetics of Space, 1958.
Miranda, E.R., Wanderley, M.M. New Digital Musical Instruments: Control and Interaction Beyond the Keyboard, 2006.
Anna Munster Materializing New Media: Embodiment in Information Aesthetics, 2006.
Edmonds Ernest The Art of Interaction, 2010.
Manovich Lev The Language of New Media, 2001.
Официальный сайт Jeffrey Shaw URL: https://www.jeffreyshawcompendium.com (дата обращения: 19.05.2025).
Официальный сайт Scott Snibbe URL: https://www.snibbe.com (дата обращения: 19.05.2025).
Официальный сайт Atelier Lozano-Hemmer URL: https://www.lozano-hemmer.com (дата обращения: 19.05.2025).
Официальный сайт Farzad Kargaran URL: https://www.farzadkargaran.com (дата обращения: 19.05.2025).
Официальный сайт Char Davies URL: https://www.immersence.com/osmose/ (дата обращения: 19.05.2025).
Официальный сайт Daric Gill URL: https://daricgill.com/ (дата обращения: 19.05.2025).
http://class.danomatika.com/2017/spring/creative/history (Дата обращения: 19.05.2025)
https://www.jeffreyshawcompendium.com/portfolio/heavens-gate-interactive/ (Дата обращения: 19.05.2025)
https://www.snibbe.com/art/boundaryfunctions (Дата обращения: 19.05.2025)
https://www.ntticc.or.jp/en/archive/works/boundary-functions-2/ (Дата обращения: 19.05.2025)
https://www.ntticc.or.jp/en/archive/works/boundary-functions/ (Дата обращения: 19.05.2025)
https://www.snibbe.com/art/blowup (Дата обращения: 19.05.2025)
https://www.lozano-hemmer.com/zoom_pavilion.php (Дата обращения: 19.05.2025)
https://www.thelisapark.com/work/eunoia2 (Дата обращения: 19.05.2025)
https://www.metalocus.es/en/news/eunoia-materializing-thinking (Дата обращения: 19.05.2025)
https://smak.be/en/exhibitions/tarek-atoui (Дата обращения: 19.05.2025)
https://www.crousel.com/en/exhibition/tarek-atoui-within-2017-cin96v/ (Дата обращения: 19.05.2025)
https://www.mca.com.au/media/mca-australia-presents-tarek-atoui-waters-witness-an-immersive-sonic-installation/ (Дата обращения: 19.05.2025)
https://www.crousel.com/en/artist/tarek-atoui-r90lmw/projects/the-wave/ (Дата обращения: 19.05.2025)
https://www.crousel.com/en/news/tarek-atoui-the-drift-2023-10-13/ (Дата обращения: 19.05.2025)
https://www.designboom.com/technology/prana-b-reel-creative-light-breath-08-17-2015/ (Дата обращения: 19.05.2025)
https://www.immersence.com/osmose/ (Дата обращения: 19.05.2025)
https://www.lozano-hemmer.com/summon.php (Дата обращения: 19.05.2025)
https://www.lozano-hemmer.com/pulse_voronoi.php (Дата обращения: 19.05.2025)
https://www.lozano-hemmer.com/pulse_topology.php (Дата обращения: 19.05.2025)
https://www.farzadkargaran.com/projects/aura (Дата обращения: 19.05.2025)
https://daricgill.com/robots/ (Дата обращения: 19.05.2025)
