Na WWDC de hoje, a Apple anunciou um novo recurso para seus headsets Apple Vision Pro VR/AR: os usuários em breve poderão criar seus próprios ambientes a partir das fotos panorâmicas que tirarem. A empresa também provocou maior imersão para fotos espaciais. Ambas as melhorias chegarão neste outono.
Os ambientes do Apple Vision Pro – cenários 3D imersivos e detalhados que podem ser ativados e desativados dentro do Vision Pro – são um dos recursos de destaque do fone de ouvido. Você pode controlar o nível de imersão como faria com um dimmer em uma luz, permitindo combinar realidade e virtualidade como achar melhor, e você pode usar seu avatar Vision legal, mas estranho, em bate-papos com outros usuários do Vision Pro em ambientes compartilhados. Presumivelmente, todos esses recursos estarão disponíveis em ambientes criados pelos usuários.
Mas os ambientes “funcionam” porque são mais do que cenários fotográficos. São cenas 3D que abrangem a visão e também apresentam elementos sonoros. A Apple não ofereceu detalhes específicos, mas parece que transformar fotos panorâmicas em ambientes imersivos anda de mãos dadas com o aprimoramento de suas fotos espaciais pela Apple. Transformar instantâneos em fotos 3D já é um recurso do Vision Pro, mas são limitados. O 3D não é muito “profundo” e só pode ser visto do ângulo em que foi tirado. A distância entre essas fotos e ambientes totalmente imersivos (onde você pode ver o que está atrás de você, o que está no chão, o que está no céu, etc.) é grande. Mesmo as fotos panorâmicas do iOS, aquelas fotos de paisagens que você tira girando no lugar, deixam muitos espaços em branco para preencher, como o céu e o chão. É aí que entra a parte da IA.
A reformulação espacial pode ser o passo da Apple em direção ao 3D realista
Embora você não possa criar 3D “real” a menos que capture objetos/locais de diferentes ângulos, a Apple exibiu sua próxima tecnologia de “reenquadramento espacial”, que dá uma dica de como está planejando obter 3D mais imersivo a partir de fotos planas e também como fotos panorâmicas podem se tornar ambientes. Durante a apresentação, o argumento de venda da Apple para reenquadramento espacial foi sobre a capacidade de melhorar seus instantâneos – mas usar IA generativa para preencher as partes da foto que você não capturou é, sem dúvida, como a empresa planeja criar fotos 3D mais profundas e ambientes 360°.
O que você acha até agora?
Gostei tanto das fotos 3D instantâneas do Vision Pro que comecei a criar Gaussian Splats – digitalizações que permitem experimentar 3D real – ou seja, objetos 3D que você pode ver de qualquer ângulo no espaço virtual. Experimentar versões 3D imersivas e realistas de lugares onde você esteve e de pessoas que você conhece é a coisa mais legal que você pode fazer com um fone de ouvido VR. Mas tenho sentimentos contraditórios sobre deixar a IA “melhorar” isso. A tecnologia é alucinante, mas o poder dos Gaussian Splats vem da precisão com que eles recriam as cenas que você captura: minha reação é “sim, isso é exatamente como era estar lá.” Uma criação cheia de IA simplesmente não existiria, e há algo perturbador em deixar a IA alterar o registro de suas memórias pessoais. Mas ainda serei o primeiro da fila para experimentá-lo.