«Черная пятница» · 16 ноября – 2 декабряСкидка 12 % на арену, кино и картинг — плюс 2 дополнительные игры или набор карт.
Как устроена иммерсивная виртуальная реальность: архитектура коммерческих систем, кинотеатр «Арена», MR Kart Hero

Как работает иммерсивная виртуальная реальность?



Как устроена иммерсивная виртуальная реальность: архитектура коммерческих систем, кинотеатр «Арена», MR Kart Hero



Как работает иммерсивная виртуальная реальность? Большинство объяснений Что такое виртуальная реальность? начинается и заканчивается с гарнитуры — пары экранов, закрепленных на глазах и отображающих стереоскопические 3D-изображения. Это описание точно подходит для потребительской виртуальной реальности. Человек, сидящий на диване и играющий в VR-игру через Meta Quest или PlayStation VR2, испытывает системы виртуальной реальности В самом простом варианте: шлем виртуальной реальности (HMD), два ручных контроллера и обозначенная игровая зона в гостиной.

Однако коммерческая виртуальная реальность — та, что устанавливается в тематических парках, развлекательных центрах торговых комплексов, городских развлекательных центрах и парках аттракционов, — представляет собой принципиально иную инженерную задачу. Кабина 9D-кинотеатра не просто показывает вам видео; она физически шаги вас в синхронизации с этим видео. Многопользовательская арена со свободным перемещением отслеживает не только одного человека в квадрате размером 2 м × 2 м; она отслеживает двадцать человек одновременно по всей комнате с точностью до миллиметра, с частотой обновления сто раз в секунду. Карт-трек с технологией смешанной реальности не просто имитирует вождение; он объединяет физический транспортный средство, движущееся в реальном пространстве, с наложенным на него цифровым миром в режиме реального времени, причем на одной и той же физико-виртуальной трассе могут одновременно находиться несколько водителей-людей и соперники-ИИ.

В этой статье объясняется Как работает виртуальная реальность? на коммерческом уровне — речь идет не о потребительских гарнитурах, а о трёх инженерных системах, на которых работают VR-аттракционы в заведениях более чем 40 стран. Мы подробно анализируем технологическую архитектуру каждой системы, прослеживаем эволюцию от ранних моделей с проводом до современных беспроводных платформ с возможностью свободного перемещения и рассматриваем коммерческую VR в более широком контексте мета-виртуальная реальность экосистема.



Что на самом деле означает термин “иммерсивный” — три иллюзии

Прежде чем приступить к разбору конкретных систем, нам необходимо дать определение термину, который используют все производители VR, но который мало кто объясняет: погружение. В сфере разработки виртуальной реальности «иммерсия» — это не просто маркетинговое определение. Это измеримый результат одновременного действия трёх различных иллюзий. Если нарушить хотя бы одну из них, мозг перестанет в это верить.

Иллюзия № 1: Визуальное погружение — как обмануть глаза

Зрительную систему человека не так-то просто обмануть. Чтобы создать убедительное ощущение глубины и пространства, VR-гарнитура должна обеспечивать стереоскопические изображения — две слегка смещенные друг относительно друга перспективы, по одной на каждый глаз, — с совокупным разрешением, достаточно высоким для того, чтобы отдельные пиксели не были видны (“эффект сетки”). Он должен обеспечивать поле зрения (FOV) не менее 90–110 градусов по горизонтали, чтобы приблизиться к естественному зрению человека. И всё это устройство должно обеспечивать как минимум 90 кадров в секунду с задержка от движения до появления фотона менее 20 миллисекунд. Если изображение на дисплее отстает от движений головы пользователя более чем на 20 мс, мозг фиксирует несоответствие — и в результате возникает «виртуальная тошнота». Потребительские гарнитуры, такие как Meta Quest 3, обеспечивают это за счет использования «блинных» линз, процессоров Qualcomm Snapdragon XR и системы отслеживания SLAM по принципу «inside-out». Коммерческие VR-системы используют аналоги корпоративного уровня (такие как PICO 4UE с процессором Snapdragon XR2 и повышенной термостойкостью для непрерывной работы), поскольку гарнитура, перегревающаяся через 45 минут, бесполезна в заведениях, работающих по 12 часов в сутки.

Иллюзия № 2: Физическое погружение — как убедить тело

Одного лишь визуального погружения недостаточно. вестибулярная система — механизм равновесия во внутреннем ухе — должен получать сигналы, соответствующие тому, что передают глаза. Когда глаза сообщают: “Я ускоряюсь в повороте”, а внутреннее ухо — “Я сижу неподвижно в кресле”, мозг фиксирует несоответствие, и возникает укачивание. Коммерческие VR-системы решают эту проблему с помощью платформы с механизмом движения: электромеханические приводы (сервомоторы, пневматические цилиндры или гидравлические поршни), которые физически наклоняют, кренят, поднимают и вибрируют сиденье или платформу пользователя в точной синхронизации с действиями на экране. Кинокапсула, которая на видео наклоняется влево, также наклоняет влево всё тело пользователя. Вестибулярный сигнал соответствует визуальному сигналу. Эффект погружения сохраняется. В этом заключается основное техническое отличие между потребительской виртуальной реальностью — где тело пользователя находится в неподвижном состоянии — и коммерческой виртуальной реальностью с подвижной платформой.

Иллюзия № 3: Пространственное погружение — как убедить мозг, что вы “там”

Самый глубокий уровень погружения — это присутствие — субъективное ощущение, что вы смотрите не на виртуальный мир, а оккупационный это. Присутствие требует Отслеживание положения с 6DOF (шесть степеней свободы): система должна знать не только, в каком направлении смотрит пользователь (отслеживание вращения с 3 степенями свободы — наклон, поворот, кренение), но и точное положение его головы в трёхмерном пространстве (координаты X, Y, Z) в каждый момент времени. Если пользователь делает шаг вперёд, а виртуальный мир не движется вместе с ним, ощущение присутствия нарушается. Коммерческие VR-системы достигают этого с помощью одной из двух архитектур отслеживания: отслеживание «снаружи внутрь» (внешние камеры или лазерные базовые станции, установленные на стенах, отслеживают гарнитуру и контроллеры) или отслеживание «изнутри наружу» (Камеры, встроенные в сам шлем, сканируют окружающую среду и вычисляют положение с помощью алгоритмов SLAM). В потребительской VR в основном перешли на отслеживание «изнутри наружу» (inside-out) из соображений удобства. В коммерческой VR — особенно в аренах с свободным перемещением — по-прежнему используется отслеживание «снаружи внутрь» (outside-in), поскольку оно обеспечивает более высокую точность при масштабировании и позволяет одновременно отслеживать нескольких пользователей в общей системе координат.



Технологический стек — что входит в состав коммерческой системы виртуальной реальности

Каждый система виртуальной реальности Реализованные в коммерческих помещениях системы имеют общий пятиуровневый технологический стек. Понимание этих уровней позволяет рассматривать три системные архитектуры — «кино-капсулу», арену свободного перемещения и картинг с смешанной реальностью — как вариации одной темы, а не как не связанные между собой устройства.

1
Слой отображения — шлем виртуальной реальности (HMD)

Две OLED-панели или ЖК-панели с быстрым переключением, по одной на каждый глаз, обеспечивающие стереоскопическое изображение с помощью линз Френеля или «панкейк». HMD коммерческого класса (такие как PICO 4UE, используемые в X-Space VR Arena) отличаются от потребительских HMD тремя особенностями: корпоративной тепловой конструкцией, обеспечивающей непрерывную работу в течение нескольких часов, централизованным управлением устройствами и программной блокировкой в режиме киоска, предотвращающей выход пользователей из виртуальной реальности.

2
Слой отслеживания — определение положения и угла поворота

Комбинация датчиков IMU (инерциальный измерительный блок — акселерометр + гироскоп) для получения данных о вращении в режиме реального времени в сочетании с оптическим слежением (инфракрасные камеры, лазерные базовые станции или камеры SLAM с внутренним ориентированием) для получения данных о положении без дрейфа. Коммерческие системы достигают точности на уровне миллиметров за счёт запуска алгоритмов слияния данных с частотой 100 Гц или выше — вычисляя трёхмерное положение и вращение каждого отслеживаемого объекта сто раз в секунду.

3
Motion Layer — физическая платформа (только для коммерческого использования)

Именно этот уровень отличает коммерческую виртуальную реальность от потребительской. Электромеханические приводы — сервомоторы, пневматические цилиндры или гидравлические цилиндры — преобразуют цифровые команды движения в физические движения. Контроллер движения считывает синхронизированную дорожку данных о движении, закодированную вместе с видеофайлом, и управляет платформой в режиме реального времени. Кинокапсула наклоняется, кренится и вибрирует. Гоночный симулятор обеспечивает рулевое управление с силовой обратной связью и имитацию перегрузок. Карт перемещается в реальном пространстве. Именно этот уровень является основной причиной, по которой коммерческая виртуальная реальность имеет более высокую стоимость за сеанс.

4
Вычислительный уровень — конвейер рендеринга

Графический процессор (GPU) выводит два стереоскопических вида 3D-сцены со скоростью более 90 кадров в секунду, используя данные отслеживания для точного позиционирования виртуальных камер в виртуальном пространстве в соответствии с положением глаз пользователя. В многопользовательской системе свободного перемещения центральный сервер дополнительно обеспечивает сетевую синхронизацию — гарантируя, что когда игрок A видит, как игрок B движется в физическом пространстве, аватар игрока B движется точно так же в общей виртуальной системе координат. Это требует значительных вычислительных ресурсов: 20 игроков × 90 кадров в секунду × 2 ракурса = 3 600 рендерируемых кадров в секунду, положение которых должно быть согласовано для всех участников.

5
Уровень контента — программное обеспечение, которое управляет всем

Сам по себе опыт — созданный на базе игрового движка (как правило, Unity или Unreal Engine), включающий 3D-ресурсы, симуляцию физики, сетевой код, пространственную локализацию звука и скрипты управления платформой движения. В коммерческой VR контентный уровень также включает функциональность облачной ОС для удаленных обновлений OTA (over-the-air), управления библиотекой контента и аналитики использования. Без механизма обновления контента даже самое передовое оборудование превращается в статичный опыт — и, соответственно, снижается показатель повторных посещений заведения.



Эволюция — от привязного режима к беспроводному и к свободному перемещению

Существующие сегодня коммерческие системы виртуальной реальности представляют собой результат развития четырёх различных поколений технологий. Понимание того, что менялось при каждом переходе, позволяет объяснить, почему виртуальная реальность масштаба помещения является коммерчески жизнеспособной сейчас — в то время как десять лет назад это было невозможно.

Бытие 1
1990-е — 2015: с привязкой, однопользовательский режим, в сидячем положении

Ранние коммерческие системы виртуальной реальности (аркадные капсулы «Virtuality», 1991 г.; Sega VR-1, 1994 г.) использовали шлемы виртуальной реальности (HMD), подключенные к внешним компьютерам с помощью тяжёлых соединительных кабелей. Отслеживание ограничивалось вращением в трёх степенях свободы (3DOF) — пользователь мог оглядываться, но не мог ходить. Играть приходилось сидя, в одиночку и в изоляции. Эти системы подтвердили работоспособность концепции, но потерпели коммерческую неудачу: оборудование было дорогостоящим (более 70 000 долларов за установку с несколькими кабинами), графика представляла собой примитивные каркасные модели, а библиотека контента была статичной. Вы покупали аппарат с 3–5 играми, и это навсегда становилось вашей библиотекой.

2-е поколение
2016–2019: отслеживание в масштабе комнаты по принципу «снаружи внутрь»

HTC Vive (2016) представила потребительскую VR-систему с поддержкой «room-scale»: две лазерные базовые станции Lighthouse, установленные на стенах, отслеживали гарнитуру и контроллеры в пределах заданной игровой зоны (~5 м × 5 м). Впервые пользователь мог физически передвигаться по виртуальному пространству. Однако система по-прежнему была привязана к источнику питания — гарнитура соединялась с игровым ПК с помощью кабеля — и предназначалась только для одного пользователя. Тем не менее технология отслеживания подтвердила основную концепцию: лазерное позиционное отслеживание по принципу «снаружи внутрь» с точностью до долей миллиметра. Именно это поколение устройств заложило основу архитектуры отслеживания, которую впоследствии расширили коммерческие системы с полной свободой передвижения.

3-е поколение
2019–2023 гг.: Автономные беспроводные устройства + отслеживание «изнутри наружу»

В Oculus Quest (2019) были устранены как привязка к ПК, так и внешние датчики. Встроенные камеры обеспечивали отслеживание по технологии SLAM «изнутри наружу» — гарнитура в режиме реального времени создавала карту окружающего пространства и вычисляла своё положение относительно нанесённых на карту ориентиров. Чип Qualcomm Snapdragon XR2 (поздних поколений) обеспечивал достаточную вычислительную мощность для рендеринга VR-сцен без использования ПК. Это поколение сделало виртуальную реальность портативной, доступной по цене и доступной для широкого круга пользователей — однако система отслеживания по-прежнему была рассчитана на одного пользователя в небольшом пространстве (максимум ~10 м × 10 м). Для масштабирования отслеживания по принципу «inside-out» до 20 одновременных пользователей в коммерческой среде потребовался следующий этап развития.

4-е поколение
2023 г. — настоящее время: коммерческая система свободного перемещения + смешанная реальность

Это современная граница возможностей. Шлемы корпоративного уровня (PICO 4UE, HTC Vive Focus Vision) сочетают в себе отслеживание «изнутри наружу» с объединением данных внешних датчиков для многопользовательского развертывания на больших площадях. Программно определяемые границы арены заменяют фиксированные физические сетки — оператор площадки настраивает размеры игровой зоны в программном обеспечении, а система сопоставляет виртуальные препятствия с физическими зонами безопасности. Проблема совместного пребывания нескольких пользователей — когда 20 человек находятся в одном физическом пространстве, видят друг друга в виртуальной реальности и не сталкиваются — решается с помощью центрального сервера, который синхронизирует положения всех игроков в единой виртуальной системе координат с частотой 100 Гц. Слои смешанной реальности — цифровые наложения на физический мир с помощью пространственных анкоров — позволяют создавать такие развлечения, как картинг в смешанной реальности, где физические транспортные средства взаимодействуют с виртуальными препятствиями, бонусами и эффектами окружающей среды, сопоставленными с координатами реального мира. Именно это поколение технологий делает современные коммерческие VR-центры экономически жизнеспособными: беспроводные, многопользовательские, крупномасштабные, с контентом, предоставляемым и обновляемым удаленно через облачную ОС.



Система 1: Кинотеатр с движущейся платформой и виртуальной реальностью — как работает 9D-капсула

Архитектура

Симулятор 9D-VR-кинотеатра состоит из четырёх интегрированных подсистем: (1) закрытый кокпит вмещающий от 2 до 9 мест, изготовленный из двухслойного стекловолокна для обеспечения звукоизоляции и жесткости конструкции; (2) VR-гарнитуры для предприятий (по одному на каждое сиденье), обеспечивающие стереоскопическое 3D-изображение и бинауральный пространственный звук; (3) а многоосевая электромеханическая платформа для моделирования движения расположенные под полом кабины, приводимые в действие сервомоторами или пневматическими приводами, способными обеспечивать наклон (наклонение вперед/назад), крены (наклонение из стороны в сторону), подъем и опускание (вертикальное перемещение вверх/вниз), а также вибрацию (высокочастотную тактильную обратную связь); и (4) а система доставки контента — либо локальное хранилище, либо ОС с подключением к облаку — содержащее библиотеку 5–8-минутных кинематографических роликов и обеспечивающее обновления по беспроводной сети.

Как работает функция Motion Sync

Основная инженерная задача при создании кинозала-капсулы заключается в том, чтобы синхронизация движения и видео. Решение получилось изящным: файл с кинематографическим контентом — это не просто видео. Это многоканальный контейнер данных. Наряду с видеопотоком (то, что отображается на дисплее гарнитуры) и аудиопотоком (то, что воспроизводится в наушниках) существует третий канал данных — дорожка команд движения — кодирует последовательность физических движений: в 0,50 секунды — наклон вперед на 12 градусов со скоростью 0,8; в 1,25 секунды — начало цикла вертикального колебания с амплитудой 40 мм при частоте 3 Гц; в 3,10 секунды — запуск крена влево на 8 градусов. Контроллер движения считывает эту дорожку в режиме реального времени, преобразует каждую команду в электрические сигналы и приводит в действие соответствующие сервоприводы или цилиндры. Поскольку траектория движения синхронизирована по времени с тем же тактовым генератором, что и видео, физическое движение гарантированно совпадает с действием на экране — капсула наклоняется точно так же, как наклоняются виртуальные американские горки, сиденье опускается точно так же, как опускается виртуальный лифт. Искусственный интеллект, интерпретирующий видео, отсутствует. Здесь нет алгоритма компенсации задержки. Здесь есть заранее подготовленный сценарий движения с точностью до кадра.

Закрытая кабина выполняет ещё одну, менее очевидную функцию: она исключает внешние визуальные ориентиры. Одной из основных причин «морской болезни» в виртуальной реальности является векция — несоответствие между тем, что видят глаза (движение), и тем, на что ориентируется периферическое зрение (неподвижный пол, стена, другой человек, стоящий на месте). Закрывая пользователя в непрозрачной кабине, кинокапсула устраняет все неподвижные визуальные ориентиры. Единственным визуальным источником информации является дисплей виртуальной реальности, который идеально синхронизирован с подвижной платформой. Мозг воспринимает движение как реальное, поскольку не имеет противоречивых данных.

9d-vr-кинотеатр-архитектура-платформы-с-системой-симуляции-движения-синхронизация-движения-гарнитуры-схема-привода

На практике — «Космический челнок 2.0»
Двухместная капсула 9D-кинотеатра LEKE VR (5,59 кв. м, 651 кг, гарнитуры DEEPOON E3S) содержит более 80 кинематографических фильмов, которые поставляются и обновляются ежеквартально через облачную ОС. Двухслойная конструкция из стекловолокна с глянцевой поверхностью рассчитана на интенсивную коммерческую эксплуатацию — кабина предназначена для непрерывных сеансов в течение 12-часового рабочего дня, семь дней в неделю, а платформа движения рассчитана на совокупную механическую нагрузку в виде тысяч циклов срабатывания в день.



Система 2: Многопользовательский VR с свободным перемещением — как устроена общая арена

Архитектура

Коммерческая VR-арена с возможностью свободного перемещения состоит из пяти подсистем: (1) корпоративные гарнитуры виртуальной реальности которые носит каждый игрок — к ним относятся дисплей, встроенный инерциальный измеритель движения (IMU) и камеры для отслеживания по принципу «inside-out», а также данные внешнего отслеживания; (2) массив оптических датчиков слежения — инфракрасные камеры или лазерные базовые станции, установленные на стенах и потолке и охватывающие всю площадь арены с перекрывающимися зонами отслеживания; (3) а центральный сервер синхронизации которая получает данные о положении от каждого игрока, объединяет их в единую виртуальную систему координат и передаёт объединенные данные обратно на все гарнитуры; (4) определяемые программным обеспечением границы арены — размеры игровой площадки, расположение виртуальных препятствий и зоны безопасности, настраиваемые исключительно с помощью программного обеспечения; и (5) контент-движок — многопользовательский VR-проект, работающий на каждом шлеме и синхронизируемый сервером.

Как работает пространственное отслеживание в больших масштабах

Отслеживание одного человека в виртуальной реальности — это уже решенная задача. А вот одновременное отслеживание двадцати человек в одном физическом помещении с точностью до миллиметра, причем так, чтобы они не сталкивались друг с другом, — вот инженерная задача, которая определяет возможности коммерческих систем свободного перемещения.

В данном решении используется объединение данных с датчиков с использованием двух методов отслеживания. Внутри каждого шлема установлен IMU (акселерометр + гироскоп), обеспечивающий быстрое получение данных о вращении с низкой задержкой — он способен фиксировать поворот головы менее чем за 2 миллисекунды. Однако со временем данные IMU смещаются; после 30 секунд использования погрешность определения положения при использовании исключительно IMU-отслеживания будет измеряться в метрах. Для корректировки этого смещения внешняя система оптического отслеживания обеспечивает абсолютную систему отсчёта положения. Инфракрасные камеры, установленные по периметру игровой зоны, фиксируют положение маркеров или излучателей на каждом гарнитурном устройстве и контроллере. Алгоритм слияния данных — работающий на встроенном процессоре каждого шлема — объединяет быстрые, но подверженные дрейфу данные ИМУ с медленными, но точными оптическими данными, чтобы получить оценку положения, которая является одновременно быстрой (с низкой задержкой) и точной (с погрешностью менее миллиметра), обновляемую с частотой 100 Гц или выше.

Роль центрального сервера заключается в том, чтобы многопользовательское совместное размещение. Гарнитура каждого игрока вычисляет своё положение в собственной локальной системе координат. Сервер принимает все 20 потоков данных о положении, преобразует их в единую систему координат и передаёт объединенные данные обратно на все гарнитуры. Именно так игрок A видит аватар игрока B, стоящего точно там, где физически находится игрок B — не приблизительно, не с задержкой в полсекунды, а с точностью и задержкой, необходимыми для соревновательного игрового процесса. Сервер также управляет предотвращение столкновений: виртуальные препятствия сопоставляются с физическими зонами безопасности. Если в виртуальном мире в точке с координатами (5,2; 3,1) находится стена, система гарантирует, что ни один реальный игрок не сможет оказаться в этой точке, отображая стену в виде видимого, непреодолимого объекта в каждом шлеме виртуальной реальности, а также поддерживая буферную зону безопасности между всеми отслеживаемыми игроками.

схема границ в программном обеспечении для свободного перемещения в VR-арене с пространственным отслеживанием и объединением данных оптических датчиков

На практике — X-Space VR Arena
Многопользовательская платформа LEKE VR с режимом свободного перемещения поддерживает от 1 до 20 и более игроков одновременно, обеспечивая пространственную локализацию с точностью до миллиметра и используя корпоративные гарнитуры PICO 4UE. Границы арены определяются программно — они соответствуют фактическим размерам пола помещения, а не требуют установки фиксированной физической сетки. Система поставляется с 18 тщательно отобранными играми (12 оригинальных, разработанных собственными силами, + 6 постоянно обновляемых игр в формате смешанной реальности), а также библиотекой из более чем 700 игр с ежеквартальными обновлениями по воздуху (OTA), предоставляемыми через проприетарную облачную ОС.



Система 3: Картинг в смешанной реальности — как работает слияние физического и цифрового миров

Архитектура

Картинг в смешанной реальности является самой сложной с архитектурной точки зрения из трёх коммерческих VR-систем, поскольку в ней сочетаются движущееся транспортное средство с цифровая накладка в режиме реального времени с участием нескольких пользователей. Система состоит из: (1) шасси на литиевых батареях без рельсов — физический картинг, который разгоняется, поворачивает и тормозит как обычный электрический картинг, но не имеет фиксированных рельсов или трассы; (2) встроенные датчики положения — датчики вращения колес, инерциальная измерительная система (IMU) и внешние оптические маркеры слежения, которые в совокупности непрерывно передают данные о реальном положении, ориентации, скорости и ускорении картинга; (3) пространственные ориентиры — фиксированные ориентиры в физическом пространстве (отмеченные точки на полу, стенах или потолке), на которые точно накладывается цифровой слой; (4) а гарнитура виртуальной/смешанной реальности который носит водитель и который отображает цифровой мир — препятствия, бонусы, эффекты окружающей среды, гонщиков-НПЦ — в тех же физических координатах, где они “существуют” в реальном пространстве; (5) а сетевой сервер синхронизация всех картингов, управляемых людьми, и гонщиков-НПЦ с ИИ в рамках одной общей гонки.

Как работает слияние физического и цифрового миров

Основная инженерная задача в MR-картинге заключается в том, чтобы пространственная регистрация — обеспечение того, чтобы цифровое препятствие, отображаемое в физических координатах (12,3; 8,7), воспринималось водителем именно в этом месте реального мира, и чтобы картинг физически не мог пройти через эту точку, не “столкнувшись” с препятствием в игре. В решении используются пространственные анкоры: фиксированные ориентиры в физической среде, положения которых известны с точностью до долей миллиметра. При инициализации система сопоставляет каждый пространственный анкор с соответствующей координатой в виртуальном мире. С этого момента бортовая система слежения карта передаёт его положение в реальном мире; движок рендеринга преобразует это положение в виртуальную систему координат с помощью сопоставления с ориентирами; и все цифровые объекты — препятствия, бонусы, карты NPC — отображаются в своих соответствующих координатах физического мира.

Ключевой вывод заключается в том, что физическая дорожка не меняется — меняется только цифровой слой. Единая открытая площадка с набором пространственных ориентиров может вместить шесть совершенно разных виртуальных миров: «Египетский оазис» (песчаная местность, препятствия в виде пирамид, бонусы в виде скарабеев), «Парк Юрского периода» (покрытие джунглей, опасности в виде динозавров, электрифицированные заборы), «Полярная фантазия» (ледяная поверхность, барьеры из снежных заносов, эффекты северного сияния), «Небесный город» (облачная платформа, парящие кольца, физика порывов ветра), «Подводный мир» (коралловый риф, потоки пузырей, механика течения) и «Город кошек» (причудливая городская игровая площадка, препятствия в виде клубочков пряжи, бонусы в виде лазерных указок). Оператор инвестирует средства в одно физическое пространство. Библиотека контента обеспечивает бесконечную реиграбельность.

Сетевой уровень добавляет последнее измерение: человеческие гонщики участвуют в гонке, проходящей в физическом и виртуальном мирах, вместе с ИИ-НПЦ. В часы пик на одной трассе соревнуются несколько картингов, управляемых игроками, и каждый из них видит картинги других участников в виде игровых транспортных средств, расположенных в их реальных физических положениях. Во время одиночной игры вне пиковых часов трассу заполняют интеллектуальные гонщики-НПЦ, управляемые ИИ-движком сервера, с настраиваемыми уровнями сложности, что гарантирует соревновательный характер игры и возможность многократного прохождения независимо от количества реальных гонщиков.

mr-gokart-смешанная-реальность-пространственный-якор-наложение-физического-и-цифрового-контента-схема-объединения

На практике — MR Go-Kart
Система безрельсового картинга в формате смешанной реальности от LEKE VR использует шасси на литиевых батареях с сетевым многопользовательским режимом и гонщиками-НПЦ, управляемыми искусственным интеллектом. Шесть доступных для выбора виртуальных тем отображаются на одной физической площадке с помощью пространственных ориентиров. Главная особенность системы, привлекающая внимание зрителей — физические картинги, которые явно находятся в движении, — превращает прохожих в игроков, выстраивающихся в очередь на расстоянии до 30 метров, что служит встроенным маркетинговым механизмом для всего объекта. Обновления контента предоставляются ежеквартально через облачную ОС.



Место коммерческой виртуальной реальности в экосистеме виртуальной реальности Meta

Термин мета-виртуальная реальность часто путают с Meta (компанией, ранее известной как Facebook). Однако в технической литературе термин “мета”-VR обозначает нечто более широкое: континуум реальности и виртуальности впервые сформулированное Полом Милграмом и Фумио Кисино в 1994 году. Этот континуум располагает все цифровые визуальные технологии на спектре от чисто реального (непосредственная физическая реальность) до чисто виртуального (полностью сгенерированная компьютером среда). Между ними находятся дополненная реальность (AR — цифровые наложения на реальный мир), дополненная виртуальность (AV — элементы реального мира, вставленные в виртуальные среды) и смешанная реальность (MR — физические и цифровые объекты, сосуществующие и взаимодействующие в режиме реального времени).

Каждая из трёх коммерческих систем виртуальной реальности, описанных в этой статье, занимает свою нишу в этом континууме. Капсула 9D-кинотеатра находится в чистая виртуальная реальность Конечная точка: пользователь полностью окружен, полностью погружен в виртуальную реальность и не имеет визуальной связи с физическим миром. Арена для свободного перемещения расположена в Виртуальная реальность с физическим совместным присутствием Суть в том, что виртуальный мир полностью сгенерирован компьютером, но другие игроки существуют в реальном мире и находятся в одном месте — вы видите их аватары, отображаемые в точном соответствии с их физическим положением. MR-картинг занимает место в смешанная реальность Суть в том, что физический картинг, реальный пол и пилот-человек сосуществуют с цифровыми препятствиями, бонусами и гонщиками-НПЦ. Все три элемента представляют собой полноценные, коммерчески реализованные точки на этом континууме — и каждая из них ориентирована на свою аудиторию, модель получения дохода и тип площадки.

Более широкое понятие “метавселенной” — постоянные, общие и взаимосовместимые виртуальные пространства — во многих отношениях уже реализовано в коммерческих VR-центрах. Арена со свободным перемещением, где двадцать незнакомцев делят между собой виртуальное поле битвы, видят реальные движения друг друга, отображаемые в игре, и, покидая зал, получают опыт физического совместного присутствия, который ни одна онлайн-игра не может воспроизвести — вот что такое функциональный момент метавселенной. Разница заключается в том, что коммерческая виртуальная реальность обеспечивает это благодаря пространственному отслеживанию с миллиметровой точностью, аппаратному обеспечению корпоративного уровня и социальному присутствию людей в одном помещении — преимуществам, с которыми чисто онлайн-платформы метавселенной пока не могут сравниться.



Хотите увидеть эти системы в действии?

Три описанные выше архитектуры — 9D-кинокапсулы, многопользовательские арены с свободным перемещением и картинг в смешанной реальности — ежедневно используются в партнерских заведениях LEKE VR в более чем 40 странах. Если вы ищете информацию о системы виртуальной реальности В случае коммерческого проекта посещение объекта или экскурсия по заводу — это самый быстрый способ понять, как данная технология работает в реальных условиях эксплуатации. Каждый запрос сопровождается технической документацией, примерами реализации на объектах и бесплатным индивидуальным CAD-планом помещения.

Чат в WhatsApp — запрос технической документации

WhatsApp: +86-153 6087 7766  |  Электронная почта: [email protected]  |  Ответ: 1 рабочий день (GMT+8)



Часто задаваемые вопросы

Как VR-гарнитура создает ощущение “присутствия”?
▶

Ощущение присутствия — чувство того, что вы находитесь в виртуальном пространстве, а не просто наблюдаете за ним, — создается благодаря одновременному использованию трёх технологий. Стереоскопическое отображение: Два слегка смещенных изображения — по одному для каждого глаза — создают ощущение глубины, идентичное тому, как работает человеческое зрение в реальном мире. Отслеживание положения с 6 степенями свободы: Система отслеживает не только повороты головы (взгляд вверх/вниз/влево/вправо), но и положение головы в трёхмерном пространстве — если вы наклоняетесь вперёд, виртуальный мир перемещается вместе с вами с точностью до долей миллиметра. Низкая задержка между движением и появлением фотона: задержка между физическим движением головы и соответствующим обновлением изображения на экране должна составлять менее 20 миллисекунд; если она будет больше, мозг уловит задержку, что нарушит эффект погружения и может вызвать тошноту. Коммерческие системы виртуальной реальности добавляют четвертый уровень — синхронизация физических движений — когда тело пользователя физически перемещается (с помощью платформы движения, свободного передвижения пешком или шасси транспортного средства) в синхронизации с визуальной информацией, что соответствует ожиданиям вестибулярной системы относительно движения.

В чём заключается разница между VR-системами для потребителей и коммерческими VR-системами?
▶

Потребительские VR-системы (Meta Quest, PlayStation VR2, HTC Vive) предназначены для одного пользователя в небольшом ограниченном пространстве (от ~2 м × 2 м до ~10 м × 10 м), который, как правило, находится в сидячем или стоячем положении; тело пользователя остается неподвижным, а отслеживаются только движения головы и рук. Коммерческие системы виртуальной реальности отличаются по пяти ключевым параметрам: (1) Возможность одновременного использования несколькими пользователями — От 1 до 20 и более игроков, одновременно находящихся в общем физико-виртуальном пространстве. (2) Интеграция физических движений — платформы с эффектом движения, свободное перемещение пешком или шасси транспортных средств, которые физически перемещают тело пользователя синхронно с виртуальным миром. (3) Долговечность предприятия — гарнитуры и оборудование, рассчитанные на непрерывную 12-часовую ежедневную работу, а не на эпизодическое использование в быту. (4) Управление контентом — облачная ОС с удалёнными обновлениями по воздуху (OTA), централизованным управлением библиотекой и программной блокировкой в режиме киоска. (5) Пространственный масштаб — отслеживание объемов, измеряемых в десятках или сотнях квадратных метров, при этом границы арены определяются программно, а не фиксированными физическими сетками.

Как симулятор 9D-VR-кинотеатра синхронизирует движение с видео?
▶

Синхронизация осуществляется посредством многодорожечный файл с контентом. Наряду с видео- и аудиопотоками третья дорожка данных — дорожка команд движения — кодирует хронологию физических движений (тангаж, крены, вертикальные колебания, вибрация) с временной привязкой к тому же тактовому генератору. На 0,50 секунды: наклон вперёд на 12°; на 3,10 секунды: запуск крена влево на 8°. Специализированный контроллер движения считывает эту дорожку в режиме реального времени и приводит в действие соответствующие сервомоторы или пневматические цилиндры на платформе движения, расположенной под кабиной. Поскольку команды движения заранее запрограммированы и точны до кадра — а не генерируются искусственным интеллектом, интерпретирующим видео в реальном времени, — физическое движение гарантированно совпадает с действием на экране без какой-либо задержки интерпретации. Закрытая кабина лишает пользователя внешних визуальных ориентиров (пола, стен, посторонних людей), устраняя сенсорный конфликт, вызывающий тошноту в виртуальной реальности.

Как VR-арены с открытым пространством отслеживают нескольких игроков, не допуская столкновений?
▶

В аренах с свободным перемещением используется архитектура объединения данных с датчиков объединение данных инерциальной измерительной системы (IMU) (быстрых, но подверженных дрейфу) с данными внешнего оптического слежения (медленных, но дающих абсолютные координаты). Инфракрасные камеры или лазерные базовые станции, установленные по периметру арены, фиксируют положение гарнитуры и контроллеров каждого игрока. Алгоритм слияния данных, работающий на каждой гарнитуре, объединяет оба источника данных для получения оценки положения с точностью до долей миллиметра, которая обновляется более 100 раз в секунду. A центральный сервер синхронизации получает потоки данных о положении от всех игроков, преобразует их в единую виртуальную систему координат и передает объединенные данные обратно на каждый шлем виртуальной реальности. Именно так игрок А видит аватар игрока Б в точном физическом местоположении игрока Б в режиме реального времени. Предотвращение столкновений система работает в двух уровнях: виртуальные объекты (стены, препятствия) отображаются по своим соответствующим физическим координатам и являются непреодолимыми в игре; между всеми отслеживаемыми реальными игроками поддерживается буферная зона безопасности, предотвращающая контакт в реальном мире независимо от действий в игре.

Что такое смешанная реальность и чем она отличается от виртуальной реальности?
▶

Виртуальная реальность (VR) полностью заменяет поле зрения пользователя компьютерно-генерируемой средой — вы ничего не видите из реального мира. Дополненная реальность (AR) накладывает цифровую информацию на ваше видение реального мира — вы видите реальное помещение вместе с цифровыми элементами. Смешанная реальность (MR) занимает промежуточное положение: физические и цифровые объекты сосуществуют и взаимодействуют в режиме реального времени. В коммерческом MR-картинге физический картинг, реальная поверхность пола и пилот-человек являются реальными. Препятствия, бонусы, эффекты окружающей среды и гонщики-НПЦ — цифровые. Однако эти два слоя пространственно сопоставлены — цифровое препятствие, отображаемое по физическим координатам (12,3; 8,7), действует как реальное препятствие: картинг не может проехать через него в игре, а гонщик видит его отображённым именно в этом месте в шлеме виртуальной реальности. Ключевым техническим фактором является пространственные ориентиры: фиксированные ориентиры в физической среде, чьи точные координаты обеспечивают сопоставление виртуального мира с реальным пространством. Это позволяет размещать на одном физическом этаже несколько виртуальных тем — физическая трасса остаётся неизменной, а цифровое наложение меняется.

Как развивалась технология виртуальной реальности — от проводных гарнитур до беспроводных устройств с возможностью свободного перемещения?
▶

Коммерческая виртуальная реальность прошла путь развития через четыре поколения технологий. 1-е поколение (1990-е — 2015 г.): HMD с тяжелыми соединительными кабелями, отслеживание вращения только в 3DOF, индивидуальные сеансы в сидячем положении с примитивной графикой. 2-е поколение (2016–2019): отслеживание в масштабе помещения по принципу «снаружи внутрь» с помощью настенных лазерных базовых станций или ИК-камер; пользователи могли передвигаться в пределах зоны размером примерно 5 м × 5 м, но при этом по-прежнему были физически привязаны к компьютеру с помощью кабеля. 3-е поколение (2019–2023): беспроводные автономные гарнитуры с системой отслеживания SLAM по принципу «inside-out» — без ПК и внешних датчиков, но с ограничением по использованию одним пользователем на небольшой площади (~10 м × 10 м). 4-е поколение (2023 г. — настоящее время): Корпоративные многопользовательские системы свободного перемещения и смешанной реальности — массивы оптического отслеживания по принципу «снаружи внутрь», масштабированные до десятков или сотен квадратных метров; синхронизация на центральном сервере от 1 до 20 и более одновременно играющих пользователей с точностью до долей миллиметра; программно-определяемые границы арены; а также наложения смешанной реальности на основе пространственных ориентиров. Каждое поколение устраняло одно ограничение: сначала — привязку, затем — ПК, потом — внешний датчик, далее — ограничение на одного пользователя, а затем — фиксированную физическую планировку. Сегодняшние коммерческие VR-центры работают на уровне 4-го поколения — беспроводные, многопользовательские, крупномасштабные, с возможностью обновления контента через облачную ОС.

Оставить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *