O que é o EyeSight no fone de ouvido Vision Pro da Apple? Como funciona?

O recurso EyeSight revolucionário do Apple Vision Pro é algo que nunca vimos antes em um fone de ouvido AR/VR. Então, aqui está tudo o que você precisa saber sobre isso.

O headset Vision Pro de US$ 3.499 da Apple tem um recurso revolucionário chamado EyeSight. Integrado ao visionOS, o EyeSight reduz a sensação de isolamento ao usar o fone de ouvido.

O Vision Pro faz você sentir que as pessoas próximas fazem parte da sua experiência de realidade aumentada (AR). Ele também indica aos outros ao seu redor se você pode vê-los ou se está imerso em RA, fornecendo dicas visuais sobre seu foco.

Acompanhe para aprender tudo sobre o EyeSight, incluindo como funciona, os diferentes modos de imersão que suporta e muito mais.

Uma interação de hardware e software, EyeSight é um dos melhores recursos do fone de ouvido Vision Pro. Seu objetivo principal é mostrar aos outros uma versão digital de seus olhos piscando.

“Seus olhos são um indicador crítico de conexão e emoção, então o Vision Pro mostra seus olhos quando alguém está por perto”, disse a Apple durante a palestra da WWDC 2023. O efeito faz com que o dispositivo pareça transparente. Além disso, o EyeSight pode renderizar vários fundos de movimento para informar as pessoas no mundo real em que você está focado no momento.

Em uma postagem na Apple Newsroom, a Apple chama o recurso de “uma inovação extraordinária que ajuda os usuários a permanecerem conectados com as pessoas ao seu redor”. Com certeza, não há nada parecido com o EyeSight em outros fones de ouvido AR/VR.

Um painel OLED voltado para fora na frente do fone de ouvido usa uma lente lenticular que, segundo a Apple, projeta “a perspectiva correta de seus olhos para cada pessoa que olha para você”.

Quando o Vision Pro detecta que você está consumindo mídia ou usando um aplicativo, ele renderizará gráficos apropriados na tela do EyeSight para fornecer dicas visuais. No entanto, quando alguém se aproxima de você, o Vision Pro mostrará seus olhos.

Para mostrar seus olhos de forma realista, o EyeSight usa dados de câmeras infravermelhas internas, duas por olho, para capturar o movimento dos olhos e as expressões faciais. Esses dados são alimentados em um algoritmo de aprendizado de máquina que os combina com sua Persona digital, criada ao configurar o dispositivo usando a câmera TrueDepth frontal.

O que os outros veem é uma representação natural da área ao redor dos seus olhos, e não dos seus olhos reais.

EyeSight oferece suporte a várias dicas visuais para que outras pessoas saibam o que você está fazendo em AR, como totalmente imerso em AR, tirar fotos, etc. EyeSight alterna automaticamente os modos dependendo do que você está fazendo em um determinado momento. Como tal, o recurso EyeSight é uma das aplicações mais interessantes da tecnologia AR na vida cotidiana que vimos até hoje.

Este modo permite que você veja a outra pessoa, revelando seus olhos para ela. Quando os sensores do fone de ouvido detectam uma pessoa se aproximando de você, o EyeSight fará com que ela "invada" temporariamente o seu mundo AR/VR para que você saiba que ela está por perto.

Ao mesmo tempo, o recurso mostrará seus olhos para a pessoa à sua frente, para que ela saiba que tem sua atenção. Quando não houver ninguém na sala, o EyeSight será desligado e não exibirá seus olhos ou qualquer plano de fundo personalizado.

Quando totalmente envolvido em AR ou VR, o EyeSight anima um padrão colorido na tela voltada para fora. O efeito é um pouco semelhante à animação do orbe do Siri, e aqueles ao seu redor saberão que você está ocupado com atividades. O EyeSight também pode tornar seus olhos semitransparentes ao usar um aplicativo, dependendo do nível de imersão.

EyeSight entra neste modo ao tirar fotos espaciais e gravar vídeos usando o fone de ouvido. Um indicador visual do modo de captura de mídia é um padrão branco em forma de neblina que é animado conforme você grava ou pisca quando você tira uma foto.

O indicador visual serve como um indicador de privacidade essencial para as pessoas ao seu redor de que você as está gravando, semelhante ao som do obturador da câmera do seu iPhone.

O que parecia um boato maluco acabou se revelando verdade. Como recurso exclusivo do Vision Pro, o EyeSight é uma das maiores vantagens da Apple em relação aos headsets AR/VR concorrentes. Se o objetivo é tornar o uso de um computador facial um pouco mais humano, o EyeSight oferece.