Referências de rastreamento facial e ocular 'Quest Pro' encontradas no firmware Oculus

usuário Reddit Reggy04 vasculhou o firmware Oculus Quest v32, encontrando strings referentes a 'Quest Pro', bem como rastreamento de rosto e olhos.

Obtivemos o arquivo de firmware Quest v32, descompilamos e pesquisamos com grep para confirmar as afirmações de Reggy.

A referência do Quest Pro parece ser do processo de configuração do Hand Tracking:

O QUEST PRO ESTIMA O TAMANHO DA SUA MÃO E COMO ELAS SE MOVEM PARA QUE VOCÊ AS USE EM VEZ DOS CONTROLES EM VR.

O Quest Pro foi testado pela primeira vez pelo vice-presidente do Facebook Reality Labs, Andrew Bosworth, em uma sessão de fevereiro do Instagram Ask Me Anything. Em abril, Bosworth disse que o Quest Pro poderia “introduzir novas funcionalidades ao fone de ouvido”, mas alertou que não seria lançado este ano.

Rastreamento facial e ocular

Em março, o CEO do Facebook, Mark Zuckerberg, descreveu o rosto e rastreamento ocular como seu recurso mais procurado para futuros headsets Oculus.

O texto de calibração para rastreamento facial e ocular está presente no firmware Oculus. Embora isso não confirme que o Quest Pro terá esses recursos, sugere que o Facebook os está testando em um fone de ouvido autônomo real, não apenas em protótipos de laboratório baseados em PC.

SIGA O ALVO COM O SEU OLHAR

FALHA NA CALIBRAÇÃO DO OLHO

ESTIMATIVA DO MOVIMENTO OCULAR COMPLETA

A calibração de rastreamento de rosto pede para você sorrir, fazer uma cara de raiva, franzir a testa e, em seguida, mostrar uma expressão de surpresa.

Não está claro se o sistema simplesmente detecta esses quatro estados ou se o formato exato do lábio é passado para os aplicativos, como acontece com Rastreador Facial Vive Pro da HTC.

SORRIA NATURALMENTE ATÉ QUE A CALIBRAÇÃO ESTEJA COMPLETA. VOCÊ PODE PRECISAR MANTER ESSA POSTURA POR ALGUNS SEGUNDOS.

MOSTRE UMA EXPRESSÃO DE RAIVA ATÉ QUE A CALIBRAÇÃO ESTEJA COMPLETA. VOCÊ PODE PRECISAR MANTER ESSA POSTURA POR ALGUNS SEGUNDOS.

FROWN NATURALMENTE ATÉ QUE A CALIBRAÇÃO ESTEJA COMPLETA. VOCÊ PODE PRECISAR MANTER ESSA POSTURA POR ALGUNS SEGUNDOS.

MOSTRE UMA EXPRESSÃO DE SURPRESA ATÉ A CALIBRAÇÃO FICAR COMPLETA. VOCÊ PODE PRECISAR MANTER ESSA POSTURA POR ALGUNS SEGUNDOS.

FALHA AO CALIBRAR A EXPRESSÃO. TENTANDO NOVAMENTE…

ESTIMATIVA DE MOVIMENTO FACIAL COMPLETA

Reggy não é o primeiro a descobrir rastreamento ocular e rastreamento facial – YouTuber Basti564 encontrei referências semelhantes em junho.

Ajuste de profundidade da lente

Reggy também encontrou uma referência a um “botão de profundidade” para ajustar a distância longitudinal entre as lentes e seus olhos:

PRESSIONE E SEGURE O BOTÃO DE PROFUNDIDADE E APROXIME OU AFASTE O FONE DE OUVIDO DO SEU ROSTO. AS LENTES DEVEM ESTAR PRÓXIMAS DOS OLHOS, MAS NÃO CAUSAR DESCONFORTO.

AJUSTE A PROFUNDIDADE DA LENTE

O ajuste de profundidade da lente, presente em headsets como o Valve Index, permite ao usuário equilibrar o conforto da pressão com o campo de visão mais amplo proporcionado por lentes mais próximas.

Um botão de profundidade já existia no Rift S baseado em PC, mas este firmware é para a gama Quest baseada em Android.

Fonte: https://uploadvr.com/quest-pro-face-eye-tracking-oculus-firmware/