Обновления Pico OS 5.12: новые возможности и улучшения

Pico OS 5.12 привносит целый ряд улучшений, включая зеркалирование экрана телефона, поддержку внешних устройств ввода, улучшенное отслеживание рук и другие важные обновления. Это обновление будет доступно примерно через шесть недель после выпуска Pico 4 Ultra и принесёт одну из ключевых функций устройства — дублирование экрана мобильного телефона.

Зеркалирование экрана телефона

С помощью приложения Pico для iOS или Android пользователи смогут отображать экран своего телефона в VR или смешанной реальности без проводов. Экран мобильного устройства будет отображаться как плавающая 2D-панель. Эта возможность также присутствует в Apple Vision Pro, но работает только с iPhone. В отличие от Meta Quest, где для подключения телефона требуется кабель USB-C и карта захвата.

Улучшения в отслеживании рук

Pico OS 5.12 также включает значительные улучшения в отслеживании движений без контроллеров. ByteDance заявляет, что обновление улучшает «скорость отклика», повышает стабильность при быстром движении и в случае частичной окклюзии, а также делает распознавание движений пальцев более гибким и точным.

Улучшенная сквозная передача

Одним из ключевых обновлений стало улучшение сквозной передачи, которая теперь значительно уменьшает искажения на близких расстояниях и снижает дрожание изображения при ярком солнечном свете. Это особенно важно при использовании устройства на открытом воздухе в условиях яркого освещения.

Основные изменения в Pico OS 5.12

Зеркалирование экрана телефона

• Дублирование экрана на Pico 4 Ultra.
• Поддержка как iPhone, так и Android-устройств.

Сквозная передача

• Уменьшено искажение при близком расстоянии.
• Снижены искажения в сложных сценах с наложением спектров.
• Меньше дрожания на открытом воздухе при ярком солнечном свете.

Отслеживание рук и контроллеров

• Повышена скорость отслеживания рук.
• Улучшено взаимодействие с указателем.
• Устойчивость к окклюзиям и улучшенная стабильность при быстрых движениях.
• Более точное распознавание движений пальцев и уменьшение случайных касаний.
• Улучшена скорость отслеживания контроллера при возвращении в видимость.

Многооконный режим

• Более четкое отображение текста: увеличена частота дискретизации для уменьшения искажений.
• Удобное управление расстоянием и панелями с помощью джойстика.
• Поддержка одновременного открытия нескольких окон в браузере.
• Быстрый доступ к нескольким окнам через Dock.

Поддержка клавиатуры и мыши

• В Home Space добавлена поддержка Bluetooth-клавиатур и мышей.

Улучшения в видеоплеере и фото-галерее

• Возможность просмотра видео в режиме passthrough с настройкой размера окон.
• Новый интерфейс управления воспроизведением и улучшенные визуальные эффекты для пространственных видео.
• Улучшенный переход между фото в Photos.

Обновления для Pico Motion Tracker

• Более точное определение осанки при использовании трекера в положении сидя или лежа.
• Возможность отключения функции обнаружения бездействия для предотвращения перехода в режим сна.

Новые инструменты для разработчиков

• Обновления в Sense Pack для разработки MR-приложений.
• Новая бета-версия Pico Simulator для создания приложений без физического устройства.
• Дополнительные образцы и обновления инструментов для создания AR и MR-приложений.