Трекинг с видеомэппингом в Театре мюзикла

Исходные данные

Знаменитый российско-американский кинорежиссер Андрей Кончаловский приступил к работе над постановкой музыкального спектакля «Преступление и наказание» в сентябре 2014 года, назвав его формат «полижанровым спектаклем-фьюжн». Идея постановки возникла у Кончаловского более 35 лет назад: в 1979 году он написал либретто по произведению Достоевского в соавторстве с режиссером Марком Розовским и поэтом Юрием Ряшенцевым. Автор музыки — композитор Эдуард Артемьев. Декорации созданы по эскизам сценографа Мэтта Дилли, активно сотрудничающего со многими театрами мира.

По задумке режиссёра, действие романа из XIX века перенесено во вневременное пространство. Превратить написанную 5 лет назад оперу на либретто Марка Розовского и Андрея Кончаловского, в музыкальный спектакль было решено ради нового поколения зрителей, не все из которых еще знакомы с произведением Достоевского.

Премьера спектакля состоялась 17 марта 2016 года.

Уникальность проекта

В постановке рок-оперы «Преступление и наказание» впервые в России задействована инновационная система 3D трекинга в реальном времени Black Trax, принесшей славу шоу Мадонны и Cirque du Soleil.

Основные задачи проекта:

• Разработка инновационного аудиовизуального решения
• Создание решения для мэппинга на основе проекционных технологий
• Изыскание возможностей точного позиционирования видео-контента на декорации, движущиеся по сцене без заведомо заданной траектории

Реализация проекта

Для реализации задумки режиссера была выбрана система real-time 3D tracking Black Trax от компании CAST, которая позволяет в реальном времени вести трекинг (позицирование) объекта в пространстве с дальнейшей обработкой данных на видеосервере. Для обработки трекинг-данных был выбран видеосервер от известной британской компании D3 Technologies.

Принцип работы системы

Для отслеживания объектов в пространстве (в данном случае, декораций сцены) специалисты Polymedia интегрировали систему трекинга BlackTrax. На декорации прикрепляются невидимые для человеческого глаза инфракрасные излучатели-маячки, которые сигнализируют о местоположении объектов (декораций), перемещаемых в пространстве. Для считывания сигналов с этих маячков используются специальные высокоскоростные ИК камеры BlackTrax.

Для определения точного местоположения объектов на сцене Polymedia разработала карту расположения ИК камер на местах. Так, при передвижении объектов по сцене система получает полностью отрисованные контуры декораций, что позволяет передавать их координаты на медиасервер d3 для рендеринга всего видео контента в режиме реального времени с последующей проекцией. Также система d3 осуществляет сшивку проекторов, как фронтальной, так и обратной проекции с учетом всего контента, с балансировкой яркости и сопоставлением изображения.

В проекте использовано проекционное оборудование Panasonic: 4 проектора PT-EX16KE с объективами ET-ELW06 и 4 проектора обратной проекции PT-DW11KE с объективами ET-D75LE90. Всего проекторов на сцене 8, в течение спектакля декорации сцены меняют свое положение 36 раз, и 36 раз меняется контент мэппинга.

Интеграция такой интеллектуальной системы и аудиовизуального оборудования сцены создает динамический 3D эффект, только в отличие от 3D фильма, он реализуется онлайн, без монтажа.

Расположение проекционного оборудования на сцене

Сложности в реализации проекта

• Координация контента, накладываемого на декорации, и траектории их движения. Поскольку перемещение декораций осуществляется сотрудниками сцены (не автоматически), то вероятность погрешности всегда есть: визуально они стоят в точках А или В, но каждый раз это расположение относительно точек получается разным. Важно было, независимо от местоположения или траектории, отображать контент точно на определенные объекты без погрешностей. Для этого система трекинга была разработана так, чтобы "вести" декорации в пространстве и сообщать оператору точные координаты для позиционирования контента.
• Интеграция аудиовизуального оборудования со световыми приборами. Компактность сцены и высокая плотность распределения светотехники и театральных конструкций обусловили сложности при размещении ИК-камер системы BlackTrax на декорациях. Для решения этой проблемы Polymedia разработала карту размещения оборудования, которая позволила точно рассчитать схему расположения камер относительно всех декораций сцены. Карта согласована с техническим руководством театра и послужит инструкцией при последующих инсталляциях, монтаже и дальнейшем обслуживании системы в будущих театральных сезонах и на гастролях театра.

Отзыв от заказчика

Художественный руководитель Московского театра мюзикла Михаил Швыдкой говорит:

Все мы стали зрителями уникального действа, и это заслуга не только коллектива нашего театра, блистательной творческой группы, но и команды компании Polymedia, ведь именно благодаря их инженерной мысли рок-опера «Преступление и наказание» Театра мюзикла стала в ряд самых технологичных аудиовизуальных представлений в России