O que é rastreamento de dentro para fora em RV?

Para que a realidade virtual funcione, a posição do fone de ouvido no espaço 3D é uma informação crucial. O rastreamento de VR de dentro para fora usa câmeras integradas e aprendizado de máquina para realizar essa medição, e está rapidamente se tornando o padrão ouro para rastreamento de cabeças de RV.

Rastreamento Posicional Convencional

Tem havido muitas abordagens diferentes para o rastreamento posicional para RV, mas quando nos referimos ao rastreamento posicional “convencional”, é uma referência à revolução VR moderna , começando em meados da década de 2010, em vez dos primeiros dias de realidade virtual do final dos anos 80 ou início dos anos 90.

O Oculus Rift original estava na vanguarda desta nova geração de fones de ouvido VR. Construído com base em tecnologias desenvolvidas para smartphones, o Rift continha sensores que permitem a detecção precisa de rotação e movimento lateral. Em outras palavras, usando sensores internos, o fone de ouvido pode relatar a rotação e quando está se movendo para frente, para trás ou de um lado para outro. O que ele não pode fazer é relatar a  profundidade. Ou seja, onde dentro do espaço 3D é relativo a outros pontos.

A solução original do Rift era usar uma câmera de rastreamento externa. A câmera vê no espectro infravermelho e na superfície do fone de ouvido há uma série de luzes infravermelhas. A câmera rastreia essas luzes e, como sabe sua escala e padrão exatos, pode descobrir exatamente onde o fone de ouvido está em relação à própria câmera.

Combinados, todos esses dados do sensor oferecem um posicionamento preciso em qualquer lugar dentro do espaço 3D, pelo menos na medida em que o rastreador externo pode ver o fone de ouvido. Mais tarde, produtos como o HTC Vive introduziriam rastreadores em escala de sala baseados em laser. Eles eram montados nas paredes de uma sala e permitiam que as posições dos fones de ouvido fossem rastreadas em qualquer lugar dentro de seu alcance.

Rastreamento de dentro para fora

O rastreamento de dentro para fora inverte o script no método tradicional que acabamos de descrever. O fone de ouvido ainda usa tecnologia de câmera para descobrir onde está no espaço 3D, mas as câmeras estão todas no próprio fone de ouvido.

Não há marcadores de rastreamento externos; em vez disso, um software sofisticado de visão de máquina procura pontos de referência na sala ao seu redor. O software observa o movimento desses pontos de referência e infere o movimento do fone de ouvido.

As câmeras integradas podem fazer ainda mais do que isso. Graças a essa consciência espacial, é possível criar uma barreira virtual baseada em software, para que você não pise acidentalmente em uma parede. Isso também é possível com sistemas de rastreamento em escala de sala, mas não com rastreamento externo de câmera única tradicional.

As câmeras integradas também podem rastrear com precisão a posição de seus controladores VR em relação ao fone de ouvido. Em um desenvolvimento brilhante, agora também é possível usar essas câmeras integradas para rastrear diretamente suas mãos para interação na RV. Não são necessários controladores!

O rastreamento de dentro para fora também pode oferecer uma forma de ” realidade mista “. Ou seja, onde objetos do mundo real e virtuais são combinados como uma experiência. As câmeras de fone de ouvido a bordo podem fazer coisas como permitir que você veja seu teclado do mundo real ao usar um aplicativo como o Virtual Desktop ou trazer sua cadeira do mundo real para o espaço virtual para tornar mais fácil sentar ou levantar.

As vantagens do rastreamento de dentro para fora

O rastreamento de dentro para fora está rapidamente se tornando a norma para fones de ouvido de RV e não é difícil perceber por quê. Essa abordagem tem vários benefícios, mas o mais proeminente é a elegância e a simplicidade.

Em um fone de ouvido como o  Oculus Quest 2 , há apenas o fone de ouvido e os dois controladores. Ao usar o Quest 2 como um fone de ouvido com fio, você só precisa de um único cabo USB. Entrar na RV é rápido e fácil. Você não precisa preparar o equipamento, basta colocar o fone de ouvido e jogar. Mover-se de um local para o outro é igualmente simplificado. Não há desordem nem confusão com cabos, câmeras ou rastreadores que precisam ser montados. (Mesmo se você quiser usar o Oculus Quest 2 como um fone de ouvido PC VR , você pode fazer isso com um único cabo USB – ou sem fio.)

Como mencionamos acima, o rastreamento de dentro para fora também oferece novas oportunidades para aprimorar a RV que vão além do rastreamento posicional. O que começou como uma solução para permitir a verdadeira RV autônoma se tornou o que parece ser o futuro provável de todos os fones de ouvido de RV.

O rastreamento de dentro para fora também resolveu o problema de oclusão, em que a câmera de rastreamento externa não consegue ver seu fone de ouvido ou controladores porque estão obscurecidos. Uma das razões pelas quais existem pelo menos dois rastreadores montados na parede com configurações em escala de sala é para evitar que qualquer coisa seja obstruída de um sensor.

A desvantagem do rastreamento de dentro para fora

O rastreamento de dentro para fora é uma tecnologia impressionante, mas alguns dos produtos VR mais premium, como o Valve Index, ainda usam rastreadores montados externamente. Se o rastreamento de dentro para fora é tão bom, por que não é universal? A principal razão se resume à precisão e exatidão. O software que conduz o rastreamento de dentro para fora tem que fazer muitas “adivinhações”, já que nenhum algoritmo é 100% preciso. Isso é limitado pela quantidade de poder computacional que o headset possui a bordo, uma vez que uma tecnologia de visão de máquina mais precisa e sofisticada precisa de mais poder de processamento. Com o tempo, esse problema é resolvido simplesmente pela marcha do desempenho do computador.

Como resultado, o rastreamento de dentro para fora em fones de ouvido de realidade virtual não é tão preciso ou rápido quanto o rastreamento de fora para dentro, mas está se recuperando rapidamente e já é bom o suficiente para que você provavelmente não notará nenhum problema ao balançar um sabre de luz ou tentando ganhar uma luta de boxe virtual.