Quest v76 PTC: виртуальная веб-камера на основе Meta Avatar

Horizon OS v76 PTC для гарнитур Quest представляет инновационную функцию — использование вашего Meta Avatar в качестве виртуальной веб-камеры для видеозвонков.

Что такое Public Test Channel (PTC)?

Свежая версия Public Test Channel (PTC) операционной системы Meta VR/MR реализует поддержку API Android, позволяя получать доступ к селфи-камере. Это обеспечивает приложениям виртуальный видеопоток, передающий ваш Meta Avatar с реалистичной анимацией движений головы, рук и синхронизацией губ, основанной на звуке с микрофона.

В настройках Horizon OS появилась новая вкладка «Селфи-камера», где можно регулировать фоновое изображение и настраивать виртуальное поле зрения. Meta впервые подтвердила разработку этой технологии около двух лет назад, а её интеграция в PTC намекает на возможный релиз уже к концу этого месяца или в апреле.

Как работает виртуальная веб-камера Meta Avatar?

Протестировав новую функцию на Quest 3, я обнаружил, что она успешно работает в большинстве Android-приложений, включая мобильную версию WhatsApp, но, к сожалению, не поддерживается в веб-браузерах.

Функция управления полем зрения уже активна, однако возможность смены фонового изображения пока не реализована. Одним из недостатков текущей версии является отсутствие отслеживания позиционного движения головы — фиксируется только её вращение. Это ограничивает естественное выражение движений тела, делая аватара менее реалистичным в сравнении с традиционной веб-камерой.

Дополнительно стоит отметить, что гарнитуры Meta, за исключением Quest Pro, не поддерживают отслеживание лица и глаз. В результате аватар в видеозвонке выглядит несколько неестественно, особенно для собеседника, использующего обычный экран. В VR и MR пространственный звук и общая виртуальная среда компенсируют недостатки визуализации, но на плоском экране этот эффект теряется. Даже Персоны Apple Vision Pro, созданные с высокой степенью реализма, выглядят странно вне VR, а Meta Avatars пока даже не применяют технологию Audio To Expression, разработанную самой Meta.

Развитие технологии Meta Avatar

Функция селфи-камеры аватара появилась спустя семь месяцев после добавления в Quest возможности транслировать изображение от первого лица во время видеозвонков. Теперь в версии v76 PTC у пользователей есть два варианта отображения себя в виртуальном пространстве.