Гарнитуры Android XR переймут важную функцию камеры у телефонов Android

Google подтвердила, что Android XR будет иметь разрешения камеры, практически идентичные разрешениям телефонов Android.
Разработчики могут запросить доступ к «задней камере», чтобы контекстуализировать окружающую обстановку и соответствующим образом размещать объекты смешанной реальности.
Они также могут видеть «аватар» вашей «селфи-камеры» в режиме реального времени для отслеживания глаз и лица.
В настоящее время гарнитуры Meta Quest не поддерживают эту функцию, хотя разработчики получат дополнительный доступ где-то в 2025 году.

Проще говоря, при использовании устройства Android приложениям требуется одобрение, прежде чем они смогут получить доступ к вашей камере. Теперь, с Android XR, вы можете лучше контролировать свою конфиденциальность, он может либо защитить вашу конфиденциальность, либо предоставить разработчикам доступ к видеопотоку вашего дома в соответствии с вашим выбором. Такие устройства, как Samsung Project Moohan, будут исследовать обстановку вашей гостиной и корректировать игры и приложения смешанной реальности на основе этого контекста, чтобы улучшить ваш опыт.

Разработчик Скарред Призрак задал вопрос Google через UploadVR: получат ли разработчики доступ к камере Android XR, поскольку в настоящее время гарнитуры Quest 3 не поддерживают эту функцию из-за проблем с конфиденциальностью (раньше это произойдет не ранее 2025 года)?

Представитель Google объяснил, что подобно тому, как любое приложение Android может использовать камеру с согласия пользователя, разработчики имеют возможность включать существующие кадры камеры для целей расширенной реальности (XR).

Приложение запрашивает разрешение как на то, чтобы основная камера была направлена наружу (аналогично задней камере на устройстве Android), так и на то, чтобы фронтальная камера фокусировалась на вашем лице (аналогично фронтальной камере на телефоне Android).

На сайте разработчиков Android подробно описано, что разработчики могут подать заявку на доступ к таким функциям, как «Scene Comprehension», которые включают в себя такие приложения, как оценка освещенности, наложение сквозного пропускания на сетчатые поверхности, проецирование лучей на отслеживаемые объекты в окружающей среде, отслеживание плоскостей и объектов, работа с глубиной для окклюзии и проверки попадания, а также использование постоянных якорей.

В Android XR пользователи будут иметь стандартные функции отслеживания рук, такие как сжатие, тыканье, прицеливание и захват. Разработчики имеют возможность запросить более продвинутые возможности отслеживания с использованием задней камеры, захватывая «положения суставов руки» и «угловые и линейные скорости». Это приводит к реалистичному отображению рук пользователей, усиливая погружение и делая игры VR с отслеживанием рук более захватывающими.

На странице разработчиков Android XR четко указано, что играм может потребоваться разрешение на использование вашей селфи-камеры, чтобы фиксировать «положение и угол ваших глаз» для создания аватаров, «фокусировки глаз и пользовательских вводов», а также для «мониторинга и отображения движений и выражений лица».

Я рад прояснить, что когда вы разрешаете селфи-камеру, это не дает разработчикам прямого доступа к вашим живым выражениям лица или деталям кожи. Вместо этого Android XR будет передавать разработчикам «сгенерированный на устройстве видеопоток аватара».

Как и любое приложение Android, Android XR потребует определенного уровня доверия между вами и его разработчиками, чтобы гарантировать, что ваши домашние данные не будут использованы не по назначению для вредоносных действий. Мы считаем, что Android XR предоставит вам возможность проверять разрешения приложения и проверять панель конфиденциальности, чтобы убедиться, что приложения не получают доступ к камере, когда им это не следует делать.

Почему это так многообещающе для Android XR

В настоящее время игры смешанной реальности на Quest используют границы, которые вы создаете с помощью встроенного программного обеспечения; однако они не обладают способностью различать ваше окружение и творчески интерпретировать данные из того, что вы наблюдаете. Например, он может предложить вам нарисовать область стола для сборки наборов XR LEGO, но он не будет идентифицировать объекты в вашем окружении и использовать эту информацию для улучшения игрового процесса.

Как аналитик, я рад сообщить, что с начала 2025 года гарнитуры Meta Quest представят API Passthrough, предоставляющий разработчикам доступ к данным камеры. Тот факт, что Android XR оснащен этим инструментом с самого начала, является весьма многообещающим.

Как исследователь, я подробно описал свой подход, в котором я использовал нетрадиционный метод — «креативный обходной путь доступа к камере» на Oculus Quest — для прототипирования инновационного приложения ИИ и смешанной реальности (MR). Это приложение призвано помочь людям в проектировании интерьера их домов, что было бы невозможно без разрешений на доступ к камере.

Используя разрешения камеры Android XR, вы можете преобразить свой дом, проецируя голографические рисунки для более стильного внешнего вида, или снимать реальные предметы и виртуально размещать их в своем жилом пространстве.

Проще говоря, игры смешанной реальности, такие как Laser Dance, используют информацию гарнитуры о границах и объектах для создания препятствий XR. Однако наличие точных данных о вашей гостиной позволит решать более творческие задачи, например, распознавать стол как область, под которой вы можете проползти, а не просто видеть его как большой объект, занимающий пространство.

Project Moohan и другие гарнитуры XR, несомненно, получат преимущества, однако именно очки дополненной реальности действительно требуют такого уровня доступа к камере для приложений. Это связано с тем, что вы, скорее всего, будете носить их в течение дня в новой обстановке, что делает возможность анализа окружающей среды ключевой функцией! Такие приложения, как Google Maps и Translate, потребуют доступа к камере. Интересно, что Android XR позволит сторонним приложениям также использовать вашу ленту.

С моей точки зрения как аналитика, приятно узнать, что акцент Android на конфиденциальности распространится и на Android XR. Однако, если вы не совсем уверены в надежности разработчика, может быть разумнее воздержаться от предоставления ему доступа к вашей домашней среде с помощью этой технологии.

Смотрите также

2025-02-11 20:53