Android XR: все, что вам нужно знать

Как технический энтузиаст, который уже несколько лет следит за сценой VR/AR, я должен сказать, что появление Android XR ощущается как глоток свежего воздуха в среде XR, в которой в остальном доминируют мета. Будучи свидетелем взлета и падения Google Glass, интересно видеть, как Google подходит к этому новому предприятию с осторожностью, позволяя своим партнерам сначала зарекомендовать себя, прежде чем прыгнуть с головой.

Android XR — новейшая программная платформа Google, разработанная в сотрудничестве с Samsung и нацеленная на интеграцию искусственного интеллекта и приложений в умные очки, очки дополненной реальности и гарнитуры смешанной реальности. Этот шаг означает возвращение Google в сектор смешанной реальности после перевода Google Glass в корпоративное использование и прекращения поддержки Google Cardboard и Daydream. Как заявил Самир Самат, президент экосистемы Google, они настойчиво работали над технологией XR, несмотря на прошлые неудачи, и «эра Близнецов» сигнализирует о благоприятном моменте для развития XR.

Как исследователь, я изучаю потенциал Google в будущем производстве аппаратного обеспечения Android XR. Однако, похоже, они отдают приоритет разработке программного обеспечения Android XR для других брендов, в частности для Samsung, производящих устройства XR. Это может означать, что такие проекты, как мультимодальный искусственный интеллект Project Astra, могут оставаться внутренними прототипами, уделяя больше внимания программному обеспечению, а не аппаратному обеспечению.

Android XR, возможно, является самой захватывающей версией Android за последние годы, но любой, кто не знаком с VR-гарнитурами или умными очками, может не понять, что такое Android XR и для чего он создан. В этом руководстве будут рассмотрены основы того, чего ожидать, от проекта Samsung Project Moohan до планов Google XR для Gemini.

Что такое Android XR?

Термин «Android XR» относится к специализированной версии операционной системы Android, адаптированной для носимых устройств, во многом похожей на Wear OS. Он имеет некоторые сходства, поскольку разработан совместно с Samsung и оптимизирован для компактных аппаратных решений, например тех, которые используются в умных очках.

Проще говоря, XR (расширенная реальность) относится к собирательному термину, который включает в себя устройства виртуальной, дополненной и смешанной реальности. Обычные очки, такие как умные очки Google, которые имеют только аудиовозможности без какого-либо дисплея, изменяющего реальность, обычно не относятся к этой категории. Однако Google сделал исключение, поскольку в их умных очках будет использоваться тот же фундаментальный помощник Gemini, что и в очках AR (дополненной реальности).

Платформа Android XR служит основой для гарнитур и очков XR, позволяя им использовать приложения из Play Store, функция, которая обычно не встречается в конкурирующих системах, таких как Meta’s Horizon OS на Quest.

Система предлагает некоторые общие функции, такие как отслеживание рук и контроллера с помощью внешних камер или отслеживание глаз с помощью внутренних — возможности, аналогичные тем, которые есть в Apple Vision Pro. Тем не менее, создатели оборудования должны разработать устройства, совместимые с этими технологиями.

Какие приложения будут работать на Android XR?

В основе Android XR лежит технология Google Gemini. Эта технология будет полезна для таких устройств, как гарнитуры или очки, позволяя им воспринимать как цифровой, так и реальный контент через датчики и камеры так же, как и вы. Он также будет слушать ваше окружение, как и вы, реагировать на ваши движения вместе с вашими голосовыми командами.

Используя интерактивный характер Gemini Live и расширенное понимание мультимедийного искусственного интеллекта, Android XR позволяет вам давать естественные голосовые команды для управления пользовательским интерфейсом или задавать вопросы о том, что вы наблюдаете, будь то ваше реальное окружение или приложения XR.

Как энтузиаст технологий, я в восторге от предстоящих функций, о которых Google объявил за пределами Gemini. Вот чего я жду:

Помимо приложений Google, Android XR также поддерживает WebXR и OpenXR, которые являются широко используемыми стандартами для межотраслевых веб-приложений и собственных приложений XR. Проще говоря, это означает, что в значительное количество игр Meta Quest можно играть на совместимых гарнитурах Android XR.

Android XR SDK совместим с Android Studio, ARCore, Jetpack Compose и Unity. Google утверждает, что существующие приложения Android могут без проблем работать на Android XR (при условии, что разработчик включает поддержку), хотя изначально эти приложения будут отображаться в виде плавающего окна в виртуальной среде «безграничного рабочего стола». Разработчикам рекомендуется оптимизировать свое приложение для ОС, чтобы улучшить любые визуальные аспекты 3D. Некоторые разработчики уже создали приложения специально для Android XR, такие как MLB, Calm и Adobe, используя привилегии раннего доступа.

Аппаратное обеспечение Android XR: Project Moohan и другие

Samsung представила свою гарнитуру XR Project Moohan одновременно с Android XR от Google; Название «Мухан», что на корейском означает «Бесконечность», соответствует теме. Samsung намекает на «современные дисплеи, функции Passthrough и интуитивно понятный мультимодальный ввод», но еще не раскрыла характеристики, когда планирует выпустить этот продукт для потребителей в 2025 году.

Проще говоря, ожидается, что в Meta Quest 3 будет использоваться чипсет Snapdragon XR2+ Gen 2, анонсированный в январе 2024 года, который может поддерживать разрешение до 4,3K на глаз и обеспечивает увеличение производительности процессора на 20% и производительность графического процессора на 15%. по сравнению с предыдущей версией. Однако не факт, что производитель Moohan добьется такого разрешения.

С моей точки зрения как энтузиаста технологий, просочившиеся изображения и частные демонстрации предполагают, что будущая гарнитура Samsung XR будет поставляться с комфортным ремешком в стиле Elite, предлагающим более захватывающий опыт виртуальной реальности благодаря съемному светозащитному экрану. Однако для приложений смешанной реальности этот экран можно снять, чтобы минимизировать изоляцию. Ожидается, что устройство также будет оснащено внешними ИК-камерами для отслеживания рук или контроллеров, а также внутренними камерами, предназначенными для отслеживания глаз.

Насколько мы понимаем, хотя устройства Samsung оснащены собственными приложениями и Galaxy AI (на основе Gemini), ожидается, что Android XR (и Moohan) будет поставляться с предустановленными приложениями Google и мультимодальным искусственным интеллектом от Gemini для команд. и навигация. Это предположение основано на информации, которую мы получили от Samsung.

Вполне вероятно, что другие разработчики, работающие над оборудованием Android XR, выберут Snapdragon XR2+ Gen 2, учитывая, что Google объединилась с Qualcomm и настроила платформу специально для своего чипсета. Google также сообщила, что Xreal, Sony и Lynx планируют создать устройства Android XR.

На выставке CES 2024 компания Sony представила гарнитуру XR с микродисплеями XR2+ Gen 2, 4K OLED, оснащенными блинными линзами, которые можно поднимать как козырек, и программным обеспечением для повышения производительности в 3D. Оно считается самым сильным соперником среди устройств Sony Android XR.

Недавно компания Xreal представила пространственные AR-очки с полем обзора до 57 градусов и дополнительную камеру Xreal Eye Camera для записи видео 1080p и передачи данных на ваше устройство для «обработки ИИ в различных формах». Мы предполагаем, что эти очки могут быть несовместимы с Android XR, но камера, похоже, намекает на будущую модель, оснащенную программным обеспечением Google и интеграцией Gemini, использующую ваш телефон Android в качестве источника питания.

Согласно информации, предоставленной UploadVR, вместо обновления модели Lynx R1 они планируют создать совершенно новую гарнитуру Android XR, стремясь решить проблемы и противоречия, связанные с их текущей гарнитурой XR.

Выпустит ли Google устройство Android XR?

На данный момент кажется, что Google отходит от Samsung, когда дело доходит до выпуска реального устройства Android XR, вместо этого сосредотачиваясь в первую очередь на разработке программного обеспечения.

В 2023 году The Information раскрыла подробности о прототипах Google XR, таких как Project Moohan — монокулярное устройство, напоминающее Google Glass по прозвищу «Бетти», производное устройство с двумя дисплеями под названием «Барри» и пара умных очков, разработанных Полом Греко, бывший технический директор Magic Leap и его команда.

Вполне вероятно, что эти устройства представляют собой всего лишь прототипы, предназначенные для тестирования Android XR, а не предназначенные для массового распространения. Тем не менее, Google продемонстрировала свои умные очки Android XR с возможностями мультимодального искусственного интеллекта на таких сайтах, как The Verge, а также предоставила краткий обзор этих очков на I/O 2024 (как показано на скриншоте выше).

Кажется, Google может решить поучаствовать в ажиотаже Android XR, но, похоже, они предпочитают сначала дать своим партнерам шанс вырасти и зарекомендовать себя, прежде чем бросаться в бой. Это напоминает то, как Google сотрудничал с Samsung над последней версией Wear OS в 2021 году, но ждал до конца 2022 года, чтобы выпустить собственные Pixel Watch.

Android XR против ОС Meta Horizon

Самым большим конкурентом Android XR станет Meta Horizon OS, система, лежащая в основе гарнитур Quest. Meta — наиболее авторитетный бренд в сфере XR, и он пытался заставить Google предоставить гарнитурам Quest доступ к Play Store, но Google настоял на том, чтобы Meta использовала Android XR, но Meta отвергла это предложение.

В 2024 году Meta решила расширить доступ к своей операционной системе Meta Horizon для внешних партнеров, сообщив, что Lenovo и ASUS ROG будут разрабатывать гарнитуры XR с программным обеспечением и приложениями Meta. Кроме того, Meta и Xbox совместно работают над специальной версией гарнитуры.

Meta обладает обширной коллекцией игр, которые можно распространять среди своих партнеров вместе с Meta AI. Однако, в отличие от Google, который предлагает доступ к Play Store, наполненному приложениями, и инфраструктуру для преобразования мобильных приложений в приложения Android XR, Meta не имеет в своем распоряжении таких ресурсов. Вместо этого он опирается на Progressive Web Apps и до сих пор работал только с ограниченным числом партнеров по повышению производительности.

Как исследователь, изучающий эти две платформы, я заметил, что они имеют некоторые общие ключевые особенности: обе используют чипсеты Snapdragon, реализуют отслеживание рук и предлагают пользовательские интерфейсы, которые работают в виртуальных пространствах или пространствах смешанной реальности. Примечательно, что одна из этих платформ связана с известными умными очками Ray-Ban, а выпуск AR-очков Meta Orion ожидается в 2027 году. Интересно, что они обе используют схожий интерфейс, напоминающий Quest.

По сути, и Meta Horizon, и Android XR имеют общие цели, подходы и аппаратное обеспечение. Пока преждевременно судить, превзойдет ли Android XR Meta Horizon, отстанет или имитирует его. Однако что действительно имеет значение, так это конкуренция между Meta и Google, поскольку это соперничество потенциально может спровоцировать дальнейший прогресс в секторе расширенной реальности (XR).

Смотрите также

2024-12-24 21:54