В 2017 году британская театральная компания 59productions, специализирующаяся на видеодизайне и объёмном мэппинге, открыла VR-проект My Name is Peter Stillman. Это короткометражный виртуальный опыт, нарратив которого основан на первом тексте американского писателя Пола Остера. Проект создан в поддержку спектаклю City of glass, который также был полностью сделан этой компанией и имеет отношение к достижениями в видеомэппинге – в нём используются фанерные «болванки» декораций, которые преображаются от одного пространства к другому при помощи проекции. My Name is Peter Stillman показывается бесплатно перед и после спектакля, как бы вводя в основную историю. Весь контент сводится к тому, что зритель помещается в комнату с анимированным человеком, печатающим текст на машинке. Чем ближе к концу, тем больше лицо человека трансформируется. Другая британская компания Curious Directive, которая заявляет своей основной целью взгляд на искусство через науку, в том же 2017 году поставила спектакль Frogman, который совмещает в себе живое исполнение и некоторые сцены в виртуальной реальности. То есть буквально в какой-то момент спектакля вам предлагают надеть шлемы, и действие продолжается объёмно в пространстве 360. Ещё один британский дуэт – Gibson / Martelli – занимается виртуальной реальностью на стыке с перформативностью. В основном они делают игры и инсталляции, но опыт погружения в проекте 2014 года White Island сравним с театральным. Внутри VR зритель оказывается в корзине воздушного шара, парящего над Арктическим кругом. История этого путешествия воссоздана на основе реальной экспедиции и реального крушения воздушного шара в Арктике в 1897 году.

Добрался VR и до оперы: Национальная опера Уэльса в 2017 году предложила зрителям инсталляцию с VR-гарнитурой, надев которую можно было оказаться в рисованном 3D-мире с персонажами двух опер – «Волшебная флейта» и «Мадам Баттерфляй». Участник инсталляции мог не просто смотреть, но и влиять на перемещение героев. А в мобильной театральной компании Dutch Touring Opera в 2016 году запустили проект Weltatem («Мировое дыхание»). В нём 30 зрителям предлагается надеть VR-гарнитуры и начать петь. Рядом с обычными зрителями расположились профессиональные оперные певцы – все вместе распевают партии из Вагнера, Брамса и Деймона Албарна. В пространстве VR участники могут видеть условные позиции своих ног, от которых при извлечении звука расходятся круги. Круги под ногами и другие фигуры в пространстве управляются непосредственно пением – таким образом зрители превращаются в полноценных исполнителей, но при этом не видят итогового результата спектакля, а могут только быть его частью.

Что касается дополненной реальности (AR, augmented reality), то в каком-то смысле к ней относится всё тот же видеомэппинг – поверхностный цифровой слой прибавляется к физическому пространству. Однако в настоящее время AR принято понимать как медиа, которое воспринимается через экраны мобильных устройств или умные очки. Smart glasses пока не так распространены, чтобы их использование проникло в театр, а вот дополненная реальность для телефонов и планшетов вполне себе используется в перформативных практиках и особенно активно в современном искусстве. Штефан Кэги, один из лидеров швейцарской театральной группы Rimini Protokoll, пионеров мобильного и документального экспериментального театра, в интервью, специально данном для этой книги, говорит, что с AR он связывает гораздо большие надежды, чем с VR. В чём заключается технология дополненной реальности: при помощи компьютерного моделирования и отслеживания координат физических объектов в реальном пространстве, на экране устройства появляется дополнительная информация или виртуальные объекты.

Пионеры мобильного и документального экспериментального театра, Rimini Protokoll, в 2013 году специально для Рурской триеннале сделали проект (его с трудом можно назвать спектаклем в конвенциональном смысле этого слова) Situation Rooms. В искусственно созданном ультрареалистичном помещении, объединяющем несколько комнат, 20 зрителей с айпадами в руках исследуют истории 20 реальных людей, жизнь которых так или иначе была определена войной или оружием. Зрители изредка пересекаются между собой, но в основном перемещаются по комнатам в одиночку. На экране айпадов и в наушниках им транслируются реальные видео, связанные с жизнью этих людей, и даются инструкции по перемещению. Длится всё это дело на протяжении 70 минут и, как все проекты Rimini Protokoll, разрывает границы жанров: ты и на спектакле, где зритель равен исполнителю, и внутри компьютерного шутера, и на журналистском задании одновременно.

Перформанс worlds, сделанный [3] в коллаборации нескольких крупных канадских университетов и показанный в 2015 году в Ванкувере на конференции Международного общества электронного искусства, сочетает технологии AR и real-time motion capture. В одной из сцен перформанса цирковая актриса выполняет акробатическую пластику на обруче, подвешенном к потолку. Перформерка одета в костюм с гиросенсорами, данные с которых фиксируются камерами в реальном времени и передаются на компьютер с программой, моделирующей AR. На экранах мобильных устройств зрителей, которые наводят камеры на актрису, она демонстрируется в миниатюрной копии, без всяких канатов двигающаяся в нарисованной пирамиде.

Есть совсем неожиданные примеры: Британский национальный театр в 2017 году совместно с компаниями Epson и Accenture внедрил для некоторых спектаклей возможность просмотра субтитров прямо поверх самого действия, не отвлекаясь на экраны над или сбоку сцены. Для этого используются очки дополненной реальности Epson Moverio и специальное программное обеспечение, которое выводит текст субтитров. Технология была внедрена для увеличения доступности театра людям с ограничениями или повреждениями слуха.

Технология motion capture начала назревать в 70-х годах и в 80-х получила первое реальное применение. Интересно, что кинематограф добрался до mo-cap несколько позже, чем театр, современный танец и академическая музыка. Так, в 1989 году композитор Марк Кониглио разрабатывает систему MidiDancer, которая в беспроводном формате передаёт на компьютер данные от тензорезисторов (датчиков сгиба или flex sensors), прикреплённые на сгибах конечностей перформера. Информация, считываемая с этих сенсоров, была запрограммирована Кониглио и его коллегами на управление предзаписанными видео-фрагментами, модификацию музыки в онлайн-режиме и регулирование осветительных приборов.

В 1999 году хореограф Мерс Каннингем, которому к тому моменту было уже 80 лет, впервые показал балет BIPED – название дублировало имя одной из программ, использованных при создании спектакля. Этот балет стал одной из тех эпохальных точек, которые обозначили появление цифрового перформанса и ещё сильнее запустили процесс апроприации технологий театром. Спектакль состоял из двух частей – собственно живое исполнение танцовщицами на сцене хореографической партитуры, а также видеопроекция, которая частично включала в себя абстрактные анимированные фигуры, а частично – анимированные видео рисованных танцовщиц, проецирующиеся на прозрачный суперзанавес. Для этой анимации на трёх танцовщиц Каннингема навешали сенсоры в виде белых шаров, которые фиксировали камеры, расставленные по периметру студии, в которой девушки танцевали. Движения, зафиксированные камерами, переводились в 3D-модели человеческих силуэтов, нарисованных карандашными штрихами, а затем выводились на проекционный занавес, вступая в разнообразные отношения с живыми танцорами на сцене – то синхронизируясь с их партиями, то работая в контрапункт.