Magic Bench Disney – это AR без шлема и очков. Как это работает?

The Walt Disney Company известна не только своей мультипликацией и парком развлечений «Диснейленд», но и проектом Disney Research, в рамках которого совместно с рядом лабораторий и университетов ведутся научно-исследовательские и опытно-конструкторские разработки, применяемые в дальнейшем на практике различными подразделениями компании. Одним из последних реализованных DR концептов стала «волшебная скамейка» (Magic Bench), предназначенная для многопользовательского доступа к дополненной реальности. Первая информация об устройстве была обнародована в конце июля, а уже в начале августа на международной выставке компьютерной графики и интерактивных технологий SigGraph 2017 все желающие смогли опробовать ее в деле.

В Magic Bench разработчики решили отойти от традиционной концепции дополненной реальности, в которой используются очки, шлем или смартфон. Классический подход направлен на индивидуальный опыт взаимодействия с виртуальным миром, Disney же в своей платформе стремилась сделать его многопользовательским. Для реализации проекта были задействованы бесконтактный сенсорный контроллер Microsoft Kinect, имеющий в своем составе датчики глубины и цветную видеокамеру, большой экран и та самая «волшебная скамейка», снабженная системой тактильного отклика. И если обычные AR-технологии направлены на создание действия от первого лица, то Magic Bench — от третьего.

Работает это так: когда человек попадает в зону восприятия сенсоров и садится на скамейку, система создает его проекцию на расположенном рядом дисплее, добавляя виртуальных героев, с которыми можно тем или иным образом взаимодействовать. В зависимости от того, сколько присутствует участников, используются различные сценарии, делающие опыт более интересным. Особая роль отводится и самой скамейке. Благодаря встроенным датчикам, она определяет количество пользователей, вибромоторы имитируют отклик, когда виртуальные персонажи садятся рядом или происходят другие события, а установленные снизу динамики выводят в непосредственной близости от человек специфическое звуковое сопровождение, тем самым повышая реалистичность переживаний. Применение датчиков глубины также неслучайно. В действии, происходящем на экране, анимация не просто накладывается на видео, а создается полноценное трехмерное пространство, позволяющее участникам перемещаться как слева и справа, так и спереди или сзади виртуальных персонажей.

По словам ведущего художника проекта, Моше Малера:

Magic Bench создает уникальный опыт погружения в дополненную реальность, задействующий различные органы чувств. В нем группа людей может напрямую взаимодействовать с анимированными персонажами, слыша и видя их приближение, а также чувствовать, когда они садятся рядом. Скамейка отвечает не только за тактильную отдачу, но и служит контроллером, информирующим систему о местоположении и количестве участников, что позволяет запускать процесс только после того, как они разместятся на своих местах