Если коротко:

Passthrough показывает окружающее пространство на внутренних дисплеях гарнитуры с помощью внешних камер. Поверх видеопотока приложение может размещать виртуальные объекты и интерфейс. Картинка проходит цифровую обработку, поэтому возможны задержка и искажения; для контроля реальной опасности полагаться только на неё нельзя.

Что такое passthrough в VR? Это режим, в котором гарнитура показывает окружающее пространство через внешние камеры. Поверх этого изображения система или приложение может нарисовать виртуальные объекты, интерфейс и подсказки. Пользователь видит комнату не сквозь линзы, а на внутренних дисплеях шлема.

Слово часто встречается в настройке границы комнаты, при запуске гарнитуры и в описаниях смешанной реальности. Из-за этого его легко принять за «прозрачный режим». По принципу работы это другое: камеры снимают пространство, система обрабатывает изображение и выводит его перед глазами с небольшой задержкой и неизбежными ограничениями.

Как работает passthrough

На корпусе VR-гарнитуры расположены камеры, направленные наружу. Они передают изображение окружения в систему, а та выводит его на дисплеи для левого и правого глаза. Одновременно XR-композитор собирает итоговый кадр: реальный фон, виртуальные объекты, системные окна и интерфейс приложения.

В простом сценарии passthrough помогает увидеть стену, стол или человека, не снимая шлем. В смешанной реальности он становится фоном для цифрового содержимого. Например, игра может разместить поле на реальном столе, а рабочее приложение — большие виртуальные панели рядом с физическим монитором.

Качество зависит от конкретной гарнитуры, освещения, камер и программной обработки. Цветное изображение и оценка глубины расширяют возможности смешанной реальности, но не превращают шлем в обычные очки.

Чем passthrough отличается от прозрачных линз и естественного зрения

В прозрачных AR-очках пользователь смотрит на мир через оптику. В VR-гарнитуре с passthrough он смотрит на видеопредставление мира. Камера имеет своё поле зрения, экспозицию, разрешение и задержку. Система также может искажать изображение, чтобы оно выглядело комфортнее в гарнитуре.

Поэтому расстояние, форма и границы предметов могут восприниматься не так точно, как без шлема. Meta отдельно предупреждает, что passthrough переводит трёхмерное окружение в отображение с ограничениями глубины и возможными визуальными искажениями. Не стоит идти в нём по лестнице, работать с инструментами, садиться за руль или выполнять задачу, где нужна точная оценка препятствий.

Где используется режим

Настройка пространства

Система показывает комнату, когда пользователь отмечает безопасную зону или приближается к её границе. Это помогает убрать мебель с траектории движения и понять, где заканчивается свободное место. Саму границу нужно настроить заранее: passthrough не отменяет её необходимость.

Смешанная реальность

В MR-приложении реальная комната становится частью сцены. Виртуальный объект можно привязать к полу, столу или стене, а в некоторых сценариях использовать оценку глубины, чтобы реальный предмет визуально оказался перед цифровым. Такой режим нужен играм, учебным приложениям, рабочим панелям и демонстрациям, где важен контекст помещения.

Переход между VR и обычным окружением

Passthrough удобен, когда нужно быстро взять контроллер, найти место для стула или ответить человеку рядом. Это переходный режим, а не безопасная замена нормальному зрению.

Что видит приложение, а что — только система

Обычный режим passthrough не означает, что каждая программа получает видеозапись вашей комнаты. В типовой реализации операционная система сама подставляет слой с изображением камер за виртуальным контентом. Для доступа к исходным кадрам производители предусматривают отдельные API, разрешения и правила обработки данных.

Это важно для разработчика тренажёра или MR-приложения. Нужно заранее разделить задачи: достаточно ли показать окружение пользователю, требуется ли распознать объект камерой и какие разрешения для этого нужны на целевой платформе. Нельзя считать доступ к камерам универсальной функцией любой VR-гарнитуры.

Что проверить пользователю

  1. Настроена ли граница игровой зоны и нет ли в ней мебели, животных или людей.
  2. Достаточно ли света для камер: в темноте и при сложном освещении качество может ухудшиться.
  3. Понимаете ли вы, что видите видеопоток, а не пространство напрямую.
  4. Поддерживает ли ваша гарнитура нужный сценарий: цветной режим, смешанную реальность, работу с глубиной или конкретное приложение.

Подробнее об устройстве камер, линз и трекинга читайте в материале «Как работают VR-очки». С различиями между VR, AR и MR поможет статья «Чем VR отличается от AR и MR».

Частые вопросы

Passthrough — это дополненная реальность?

Сам по себе passthrough — способ показать физическое окружение внутри гарнитуры. Он может быть основой для смешанной реальности, когда приложение размещает цифровые объекты в комнате. Но включённые камеры без такого содержимого ещё не создают AR- или MR-сцену.

Можно ли безопасно ходить в passthrough по квартире?

Не рассчитывайте на это. Изображение с камер отличается от естественного зрения, а поле обзора, глубина и восприятие расстояния ограничены. Для перемещения по комнате лучше снять гарнитуру.

Почему режим выглядит хуже при слабом освещении?

Камеры получают меньше света, поэтому в изображении появляется шум, снижается детализация и трекинг окружения может работать хуже. Это свойство камерной системы, а не признак поломки линз.

Passthrough связан с трекингом рук?

Обе функции используют датчики гарнитуры и часто встречаются в MR-приложениях, но решают разные задачи. Passthrough показывает комнату, а hand tracking определяет положение рук. О нём есть отдельный материал: «Как работает hand tracking».

Поделиться:TelegramВКонтакте

Источники

  1. Meta Horizon OS: Passthrough
  2. Meta Horizon OS: Passthrough design
  3. Meta Horizon OS: Health and safety for immersive experiences
  4. Meta Horizon OS: Passthrough Camera API