Meta внедряет автоматическое сканирование 3D-сцен на Quest

Meta нацелена на значительное обновление системы сканирования сетки сцен для гарнитур Quest, чтобы процесс обновления происходил автоматически при изменениях в окружающей среде.

Изменения в SDK и план развития

В последней версии 72 пакета Meta XR Core SDK, замеченной специалистом по виртуальной реальности Luna, содержится интересное уведомление. Meta сообщает о грядущем отказе от ручного редактирования настроек пространства пользователем к 2025 году. Это означает, что разработчики должны уже сейчас адаптировать свои приложения к новой системе, где сканирование будет высокоточным и сможет адаптироваться даже к изменению сцен.

В современных версиях Quest 3 и Quest 3S уже присутствует функция сканирования пространства для создания 3D-сетки сцены. Эти сетки используются приложениями смешанной реальности для визуальных изменений окружения или для взаимодействия виртуальных объектов с физической геометрией. Однако эти сканирования фиксируют лишь тот момент времени, когда было выполнено сканирование. Это создает определенные ограничения: если, например, в комнате перемещается мебель или добавляются новые объекты, то эти изменения не отобразятся без ручного обновления сетки пользователем.

Проблема статичных сеток и решения конкурентов

В текущем состоянии системы Quest, если во время сканирования в комнате находится человек, его форма также будет «запекаться» в сетке, что может вызвать неудобства. Для сравнения, гарнитуры Apple Vision Pro и Pico 4 Ultra используют непрерывные автоматические сетки сцены, которые динамически обновляются в реальном времени, поскольку эти устройства оснащены активными датчиками глубины, работающими на аппаратном уровне. Это позволяет сканировать окружение постоянно и предоставлять актуальную сетку для текущего приложения.

Quest 3 и Quest 3S, напротив, используют вычислительно сложные алгоритмы компьютерного зрения для создания 3D-сеток, что требует значительных ресурсов и не позволяет работать с таким же уровнем эффективности.

Новая стратегия Meta для 3D-сеток

Судя по обновлениям в v72 SDK, Meta планирует предложить промежуточное решение. Предполагается, что пользователю по-прежнему придется выполнять начальное сканирование пространства вручную, однако система будет автоматически обновлять сетку в фоновом режиме, реагируя на изменения в окружающей среде. Это сделает взаимодействие с физическим пространством более гибким и удобным.

Однако у данного решения могут быть свои недостатки. Поскольку Quest не имеет аппаратных датчиков глубины и использует исключительно вычислительные методы, это нововведение может повлиять на срок службы батареи при работе с приложениями, которые активно используют сетку сцены.

Важность обновлений для смешанной реальности

Meta уже давно разрабатывает технологии смешанной реальности, и новые обновления Horizon OS могут стать значительным шагом вперед в этом направлении. Автоматическое обновление сеток сцены обещает более точное и динамичное взаимодействие между виртуальными объектами и физическим пространством, что значительно улучшит пользовательский опыт.

Мы продолжим внимательно следить за развитием событий и ждать новых подробностей от Meta о внедрении этой функции.