Como o rastreamento de corpo inteiro está revolucionando a RV social

Crédito da imagem: Rastreadores HaritoraX da Shiftall

A imersão é um dos componentes mais críticos das experiências de realidade virtual. Com as empresas a exaltar os seus produtos de VR, enfatizando a sua imersão, as expectativas dos consumidores são maiores do que nunca. A realidade virtual, uma indústria de 16,8 mil milhões de dólares , pode criar experiências irreais que não podem ser reproduzidas em nenhum outro meio. No entanto, quanto menos natural parece, mais os tira dessa experiência. Entre os aspectos mais importantes da imersão em RV estão nossos próprios corpos. É aí que entra o rastreamento de corpo inteiro. Vamos falar sobre como o rastreamento e a estimativa de corpo inteiro estão mudando a forma como experimentamos a RV social e o que está por vir.

Onde estão minhas pernas?

Durante o ciclo de hype do Meta, há alguns anos, a imersão era um tópico comumente discutido. O impulso de marketing para o salto da Meta para a realidade virtual prometia um mundo no qual os consumidores poderiam estar totalmente imersos. Depois de subsidiar o custo do Quest 2 para colocá-lo nas mãos de 14,8 milhões de pessoas até junho de 2022, o vale da desilusão da imersão rapidamente instalado.

A pesquisa de hardware VR do Steam de dezembro de 2023 revela que o Oculus Quest 2 é o fone de ouvido mais usado para sua plataforma PC VR.

Além dos gráficos de desenho animado necessários para suportar o hardware independente do Quest 2, o detalhe mais importante para muitas pessoas era a falta de pernas. Com apenas informações das câmeras dos fones de ouvido e das posições do controlador, a estimativa de pose só pode realizar algumas coisas. No entanto, os consumidores naturalmente ansiavam por mais.

Os dados do Google Trends revelam que o interesse na pesquisa por rastreamento de corpo inteiro aumentou muito nos últimos cinco anos. Aumentou e estabilizou repetidamente desde 2022, mostrando que os consumidores estão interessados no tema. Com o rastreamento IMU como o SlimeVR começando a ser enviado aos patrocinadores, agora é um momento crucial para as startups ficarem à frente da concorrência, desenvolvendo e lançando rastreadores para apoiar usuários sociais de VR. No entanto, o que é o rastreamento de corpo inteiro e por que as pessoas o desejam tanto?

O que é rastreamento de corpo inteiro?

Se os entusiastas da RV desejam pernas rastreadas com precisão, eles podem se surpreender ao saber que isso está acessível aos consumidores há muitos anos. A Vive lançou seus primeiros rastreadores habilitados para estação base em 2017. Inicialmente comercializado para permitir o rastreamento de objetos do mundo real em VR, logo foi adotado pelos jogadores para rastrear partes de seus corpos, como pernas, joelhos, cotovelos e peito.

Full Body Tracking (FBT) permite que usuários de VR e artistas de captura de movimento rastreiem o máximo possível de seus corpos. Em ambos os casos, os usuários traduzem os movimentos do mundo real do seu corpo nos movimentos de um avatar. O FBT permite muito mais expressão e linguagem corporal do que os usuários de VR poderiam ter de outra forma. O rastreamento de corpo inteiro é extremamente popular em plataformas sociais de VR como o VRChat.

O rastreamento de corpo inteiro torna atividades como dançar muito mais dinâmicas no VRChat. Fonte da imagem.

Se o objetivo é ter maior liberdade de movimento e imersão em VR, existem três abordagens:

• Rastreamento baseado em farol: Vive, rastreadores Tundra, medidos por estações base externas.

• Rastreamento da Unidade de Medição Inercial (IMU): todas as medições são feitas internamente por sensores integrados.

• Estimativa de corpo inteiro: uma alternativa ao rastreamento de corpo inteiro que calcula as posições mais prováveis do corpo com base em informações limitadas.

  
  

Vamos examinar mais profundamente cada exemplo para ver os prós e os contras e seu potencial.

Rastreamento de Farol

A solução de rastreamento de corpo inteiro mais popular e precisa para VR é o rastreamento de farol. Alimentados por estações base, a posição dos rastreadores presos ao seu corpo é medida pela linha de visão. Vive e Tundra são os principais fabricantes neste espaço e são conhecidos por serem confiáveis e fáceis de usar.

No entanto, o rastreamento baseado em farol é caro. Os consumidores não apenas precisam comprar rastreadores por centenas de dólares cada, mas também precisam de estações base e prateleiras caras para montá-los. O rastreamento baseado em farol pode ser vítima de problemas de oclusão, de modo que os rastreadores não podem ser obscurecidos por roupas ou outros objetos, como cobertores.

Rastreamento da Unidade de Medição Inercial (IMU)

Uma tecnologia que está ganhando popularidade para VR é o rastreamento IMU. Alimentados por sensores individuais, os rastreadores IMU não requerem estações base para funcionar. Eles podem ser totalmente sem fio e operados por bateria. No entanto, eles são mais difíceis de instalar e operar. Os rastreadores IMU são mais difíceis de configurar e estão sujeitos a desvios, exigindo recalibração de tempos em tempos durante as sessões.

Os rastreadores IMU têm a vantagem de não precisar de linha de visão. Isso significa que eles podem ser obstruídos por roupas ou outros objetos. Essa tecnologia de rastreamento é mais barata, mas não existem muitas opções por aí. Os rastreadores Mocopi da Sony já estão disponíveis, mas são muito caros. Apesar disso, os rastreadores Mocopi ainda são mais baratos do que as soluções de rastreamento baseadas em faróis.

SlimeVR possui firmware disponível para ESP-32/8266 e uma variedade de hardware IMU diferente.

A estrela em ascensão do rastreamento IMU é SlimeVR , um projeto de rastreamento corporal completo de código aberto. Com o SlimeVR, é possível que qualquer pessoa crie seu próprio rastreador IMU se tiver o hardware certo. Graças a uma campanha de crowdfunding bem-sucedida, os clientes podem solicitar rastreadores SlimeVR pré-construídos agora mesmo. No entanto, os prazos de envio são longos e levarão meses para serem cumpridos. Existem algumas alternativas que utilizam o protocolo SlimeVR. owoTrack é um aplicativo Android que usa os sensores do seu telefone Android como um rastreador de corpo inteiro.

Estimativa de corpo inteiro (FBE)

Embora não seja verdadeiramente um “rastreamento de corpo inteiro”, a estimativa de corpo inteiro é uma solução alternativa às duas opções anteriores. Em vez de usar rastreadores dedicados para cada parte do seu corpo, o FBE calcula a posição do seu corpo com base nos dados que o programa já possui. Geralmente, isso é feito usando a posição do fone de ouvido e dos controladores de VR. No entanto, diferentes abordagens podem usar algo como um sensor Xbox Kinect ou uma webcam.

Standable é um dos projetos mais populares para estimativa de corpo inteiro compatível com SteamVR. Embora não seja um projeto de código aberto, sua compatibilidade e facilidade de uso são populares entre os usuários, com 74% de suas avaliações no Steam sendo positivas. É uma ótima opção para quem não pode pagar por soluções de rastreamento mais caras ou apenas quer experimentar algo mais preciso para medir seu corpo em VR.

Meta também adotou essa abordagem com o Quest 3 com seu recurso de ‘rastreamento de corpo inteiro de dentro para fora’, que na verdade é apenas FBE.

Qual é o futuro do rastreamento de corpo inteiro?

Com o interesse do consumidor no rastreamento de corpo inteiro aumentando e se estabilizando, fica claro que a demanda do consumidor por rastreamento de corpo inteiro está aumentando. O que está menos claro é como o mercado responderá. Existem três variáveis que impactarão as escolhas de compra do cliente com FBT:

• Dificuldade de configuração

• Custo

• Precisão e desempenho

  
  

A VR como indústria está começando a se recuperar de um período de desilusão. No entanto, para os entusiastas da RV, a tecnologia de rastreamento de corpo inteiro já existe há muito tempo, mas não na forma mais acessível aos consumidores. Os rastreadores mais fáceis e de melhor desempenho exigem um investimento significativo.

No entanto, o surgimento de soluções IMU de código aberto, como o SlimeVR, sugere futuras perturbações no mercado. Se mais empresas entrassem no mercado e vendessem soluções de rastreamento IMU com preços competitivos, alto desempenho e conveniência, haveria muito dinheiro a ser ganho. O mesmo pode ser dito se uma empresa conseguir descobrir como reduzir o custo do rastreamento baseado em farol.

Além das soluções IMU, os métodos de estimativa de corpo inteiro estão melhorando. Talvez a opção mais simples e melhor para a maioria das pessoas seja a ausência de rastreadores. Embora imperfeito, o FBE é um excelente ponto de partida para melhorar a qualidade e a imersão das experiências de RV para a maioria dos usuários.

O tempo dirá como o mercado mudará, mas com os rastreadores financiados por crowdfunding do SlimeVR finalmente começando a ser lançados, estou definitivamente curioso para saber como as empresas responderão à crescente demanda pela capacidade de chutar alguém na cara ou dançar em VR.