Varjo Teleport capta ambientes reais com iPhone para mostrá-los em VR num PC

O Varjo Teleport quer revolucionar a experiência de realidade virtual ao permitir a captura de cenas do mundo real com um iPhone para posteriormente serem vistas em VR.

Este serviço Varjo Teleport está disponível por intermédio de uma subscrição de $30 por mês e utiliza tecnologia Gaussian splatting, um método de machine learning que cria cenas 3D detalhadas a partir de uma sequência de imagens. Ao contrário de concorrentes como o Horizon Hyperscape da Meta, o Varjo Teleport já está disponível e oferece uma forma simples de ligar o mundo físico ao virtual.

O processo é bastante acessível, bastando caminhar pelo local a registar durante 5-10 minutos, usando o iPhone para captar a cena com o máximo de detalhe possível. Depois, esses dados são enviados processamento na cloud da Varjo, podendo demorar entre 30 minutos e 24 horas, dependendo da complexidade da área. Os resultados podem ser visualizados na app do iPhone, num navegador web ou no software para PC do Varjo Teleport, que é compatível com qualquer headset VR que suporte OpenXR, incluindo os Meta Quest.

For $30/month, Varjo Teleport lets you capture real world scenes with your iPhone to view volumetrically in PC VR.

Details here: https://t.co/RvWk7Fmjmq pic.twitter.com/7AluK9nMaJ

— UploadVR (@UploadVR) November 25, 2024

O Varjo Teleport também permite exportar cenas capturadas em ficheiros PLY, possibilitando a sua integração em plataformas como Unity e Unreal Engine. A subscrição standard permite até 15 scans mensais, com planos personalizados disponíveis para empresas que precisem de mais. Para uma visualização fluída em VR, é recomendada pelo menos uma Nvidia RTX 3070 para cenas pequenas e uma RTX 3090 para cenas mais complexas.

Este tipo de tecnologia já vai preparando o que virá a seguir às cenas captadas em "3D" ao estilo do Spatial Video da Apple, permitindo recriar verdadeiros ambientes, ao estilo de um Holodeck, pelos quais se pode passear, ver de qualquer perspectiva e ângulo, e apreciar todos os detalhes. Há até quem já esteja a trabalhar nas versões animadas deste sistema, o que permitiria revisitar cenas dinâmicas e com movimento.