O vídeo espacial do Apple iPhone parece incrível no Vision Pro –

• O autor testa a nova funcao de video espacial do iPhone 15 Pro que grava videos em 3D
• Os videos sao assistidos no headset de realidade virtual Vision Pro da Apple e apresentam alta qualidade e realismo
• Apesar de impressionante, a tecnologia ainda esta restrita aos proprietarios do iPhone 15 Pro e do caro headset Vision Pro

Estou olhando para um prato de sushi flutuando na minha frente em 3D. O chef termina os recheios em rolos de peixe-rei e atum, falando comigo enquanto trabalha. Parece vívido. Parece real. A parte incrível é que eu mesmo gravei esse vídeo instantes atrás, com um iPhone 15 Pro. E agora é uma experiência de realidade virtual que estou assistindo em belo 3D no headset Vision Pro da Apple. Arrasto com os dedos e assito outros vídeos fantasmagóricos fornecidos pela Apple. Famílias em casa, caminhando pela grama. Abraçados. Tudo em 3D realista. Sinto como se estivesse espiando suas vidas, o que é estranho e íntimo. Mas a vivacidade é inegável.

Estou experimentando o novo recurso de câmera de Vídeo Espacial do iPhone, agora disponível na atualização do iOS 17.2 da Apple. Ele permite gravar vídeos em 3D, mas para usá-lo você precisará do melhor smartphone da Apple, o iPhone 15 Pro de US$ 1.000. E para assistir os vídeos em 3D você precisará do headset Vision Pro de US$ 3.500, que será lançado no início do próximo ano.

Os vídeos parecem ótimos e o 3D é convincentemente realista. Eles também são fáceis de gravar e podem ser salvos como vídeos que serão reproduzidos em 2D em um formato de vídeo normal. Mas, em última análise, este recurso foi feito para um produto de 2024 que, a US$ 3.500, é seguro dizer que a maioria das pessoas não comprará tão cedo. Ainda assim, a experiência é impressionante.

Eu usei o Vision Pro pela primeira vez na conferência WWDC da Apple em junho e novamente me lembro de suas extraordinárias capacidades de exibição. Fotos e vídeos parecem fantásticos no headset da Apple. Até diria que o Vision Pro supera qualquer tela que tenho em casa agora. Sim, eu gostaria de ver vídeos e fotos – em 3D ou não – se tivesse um Vision Pro.

Minha segunda incursão no Vision Pro, completa com lentes prescritas que correspondiam às minhas necessidades, me lembra o quão menor o headset era do que me lembrava. E também o quão esforçado é o interface. Configurar o rastreamento ocular foi um processo rápido; olhei para pontos ao redor de um círculo e toquei neles. Também tentei um novo conjunto de gestos de zoom, apertando os dedos e esticando-os para ampliar as fotos. O gesto funciona com o rastreamento ocular, de modo que onde eu olhasse, a imagem se ampliava. Parecia telepatia.

Pude olhar algumas fotos de teste na aplicação Fotos e reproduzir fotos em Memórias. Depois de ter usado um Quest 3 recentemente, as câmeras de passagem e resolução de exibição da Apple estão em outro planeta. Fotos panorâmicas foram uma surpresa. Elas se abriram e envolveram-me, pareciam janelas para outros lugares – quase 3D, na verdade. E vídeos espaciais também parecem bons, com sua reprodução de qualidade quase fantasmagórica que parece tentar uma memória imersiva mais do que uma simples reprodução de vídeo.

Infelizmente, não há capturas do que vi ou gravei aqui: as fotos são todas as fornecidas pela Apple, então você terá que apenas acompanhar e ler sobre minha experiência. As câmeras laterais gravam vídeo 3D a 1080p e 30fps, combinando as informações em um único arquivo que pode ser reproduzido em 2D em qualquer lugar se você não tiver um Vision Pro no próximo ano. Vídeos espaciais precisam ser gravados mantendo o celular horizontalmente.

O iPhone 15 Pro usa suas câmeras principal e ultra grande angular lado a lado no modo paisagem para criar o vídeo 3D. Grava dois vídeos de 1080p, 30fps ao mesmo tempo, resolvendo as diferenças de lente e distância com fotografia computacional. O arquivo é salvo no formato HEVC, semelhante a outros arquivos de vídeo da Apple, com tamanho de armazenamento de aproximadamente 130MB por minuto. Isso não é muito ruim, provavelmente porque os arquivos são limitados a essa relativamente baixa resolução de 1080p e taxa de quadros de 30fps.

Os clipes de vídeo espacial podem ser compartilhados via Mensagens ou AirDrop, mas podem haver casos em que os arquivos sejam compactados em outros aplicativos, perdendo os dados 3D. Ainda assim, os clipes de vídeo devem ser usáveis em qualquer lugar como um arquivo de vídeo comum de qualquer dia, o que é uma ótima notícia para qualquer um que se perguntava (inclusive eu) se teríamos que escolher um “formato especial” de vídeo 3D. Você deve ativar o modo Gravação de Vídeo Espacial, seja nas configurações do aplicativo Câmera da Apple ou com um interruptor de formato de máscara Vision Pro no próprio aplicativo Câmera.

O aplicativo Câmera faz recomendações sobre virar a câmera de lado e ficar a uma certa distância do assunto. Fui informado para ficar entre 3 a 8 pés do que estou gravando para um bom vídeo espacial, mas quando gravei meu teste de gravação de alguém fazendo sushi em uma mesa, cheguei mais perto e ficou perfeitamente bom. Também gravei em um quarto bem iluminado, mas aparentemente o modo de gravação de vídeo espacial impede ajustes de brilho e contraste, o que significa que as gravações de baixa luminosidade podem ficar mais granuladas que vídeos normais.

A Apple incorporou o interruptor de gravação de vídeo espacial no aplicativo Câmera básico, mas você precisa de um iPhone 15 Pro para gravar em 3D. Não há API para o formato de vídeo HEVC 3D da Apple, o que significa que os arquivos não foram projetados para que aplicativos de terceiros possam reconhecê-los ainda. Mas é possível que desenvolvedores de aplicativos encontrem algum tipo de solução.

Também é decepcionante que não haja outra maneira de visualizar os vídeos em 3D além do Vision Pro. A gravação estéreo 3D teoricamente parece um processo que poderia ser adaptado para outros headsets VR como o Meta Quest 3 de US$ 500. É vídeo estéreo simples e não usa lidar ou sensores de profundidade para qualquer tipo de captura de movimento total. Infelizmente, esse não é atualmente o plano da Apple. Não há limite de gravação para os vídeos, então teoricamente você poderia fazer um filme de longa-metragem de formato de vídeo espacial. Mas os clipes só poderão ser recortados no iPhone ou Vision Pro.

O software de edição de vídeo da Apple, o Final Cut Pro, terá suporte para edição de