No meu escritório, há estantes onde guardo meus truques de mágica. Ao lado deles estão janelas panorâmicas com vista para Paris – exceto, na verdade, não. São sobreposições de realidade mista que me cumprimentam quando uso Visão Professional da Apple fone de ouvido, mapeado para minhas janelas reais. Um relógio digital está pendurado na parede.
As estantes são reais; as janelas de Paris e o relógio de parede não. Mas Siri, que invoco como uma esfera brilhante à minha frente, vê todos eles. Quando pergunto o que está na minha frente, a caixa de texto da Siri descreve tudo.
Meus primeiros momentos usando o Imaginative and prescient Professional e testando um Siri AI que tudo vê na visualização do desenvolvedor de Visão OS 27 são surpreendentes, mas muito familiares. Já tive momentos assim em Galaxy XR da Samsung fone de ouvido, que já possui o modo Gemini Reside que pode reconhecer sua sala e os aplicativos virtuais e janelas que estão abertas. Eu também usei muitos óculos inteligentes onde pedi à IA com reconhecimento de câmera que me contasse sobre o mundo enquanto eu caminhava.
Como eu esperavaa Apple tem um novo Siri superalimentado chegando a uma variedade de dispositivos neste outono, de relógios a iPhones e iPads, e está expandindo seus recursos de inteligência visible além do iPhone. O Siri do Imaginative and prescient Professional é o mais fascinante e talvez o mais ambicioso. Ele pode ver tudo em seu campo de visão sob comando, como um companheiro sensorial.
Nem tudo é perfeito nesta versão preliminar, revelada há poucos dias em WWDC da Applemas já funciona bem o suficiente para mostrar o que pode vir a seguir. Sim, óculos que poderiam fazer isso parecem inteiramente possíveis agora. Enquanto isso, as funções assistivas do Imaginative and prescient Professional também ficarão bastante interessantes.
Siri conhece minha estante, minha janela digital de Paris e meu relógio digital.
O orbe brilhante da Siri está pronto para ser visto desde o início
Ao contrário do Inteligência Visible modos no iOS e iPadOS, que são iniciados por meio do aplicativo Câmera, o Siri do Imaginative and prescient Professional pode ver coisas quando você simplesmente diz “Ei, Siri” e faz uma pergunta.
Siri aparece como um orbe brilhante em 3D, manifestando-se em meu quarto como um espírito. Você pode arrastá-lo e soltá-lo em qualquer lugar, mas é authorized ver o mármore brilhante lançando efeitos de luz na minha mesa ou na sala usando o mecanismo de gráficos espaciais do VisionOS.
Consegui dizer: “Ei, Siri, o que está na minha frente?” e acionou a Inteligência Visible, emitindo um novo som e, em seguida, fazendo uma rápida varredura visible ao redor da área que meus olhos estavam olhando, usando rastreamento ocular. Ele lança uma rede ampla: ele pode ver minha estante cheia de livros na minha frente e todos os pequenos bonecos de ação e brinquedos que coloquei lá. Ele leu alguns títulos de livros para mim, como Uzumaki e Wonderbook.
O suggestions da IA vem depois que a câmera tira uma imagem estática do que está à minha frente, seja actual ou digital. É semelhante à cadência de resposta instantânea de outra IA baseada em câmera nos óculos da Meta ou no Galaxy XR da Samsung.
Mas não tem um modo ao vivo como aqueles óculos e fones de ouvido. É um caso de um clique por solicitação.
Minha estante desordenada é reconhecida pela Siri. O orbe da Siri também brilha perto de coisas do mundo actual e pode ser comprimido e arrastado.
Reconhecendo o actual e o digital
Na minha mesa, a Siri conseguiu localizar um fone de ouvido vermelho de realidade digital (Garoto Digital) e um Convés de vaporambos reais. Depois disso, tentei olhar minhas janelas virtuais de Paris, meu widget de relógio de parede e minha estante cheia de magia, e ele também os reconheceu.
Neste beta inicial, o Siri tendia a manter uma visualização específica por um tempo e analisar essa captura, a menos que eu fechasse o Siri ou movesse o orbe para tentar novamente. Ou, eu acho, estou apenas me acostumando.
Mas já estou me perguntando como poderia usar essa consciência visible para lidar rapidamente com o trabalho. Pedi ao Siri para resumir um aplicativo do Notes sobre minha dramaturgia recente, que descobri apenas perguntando (resumiu os pontos principais), e perguntei sobre as janelas do navegador que abri no meu MacBook por meio do show digital. (Ele está me dizendo agora, enquanto trabalho nesta história no Imaginative and prescient Professional através do meu Mac, que tenho uma janela do Google Doc aberta onde estou escrevendo sobre o Siri reconhecendo objetos reais e virtuais.)
Só estou curioso para saber o que o Siri achou do meu Digital Boy e Steam Deck.
Transformando minhas próprias fotos em fundos panorâmicos 3D
Também experimentei o novo efeito de conversão de fotos panorâmicas no VisionOS 27, que permite que qualquer foto panorâmica da sua biblioteca se transforme em um fundo envolvente 3D que você pode usar enquanto trabalha.
Os resultados não são tão envolventes em 3D quanto os próprios ambientes imersivos da Apple e não se movem nem têm efeitos sonoros ambientais. Eles são mais como janelas 3D muito grandes e envolventes, com parte do meu escritório ainda visível nas bordas.
Ficou lindo, embora nem todas as minhas fotos panorâmicas tenham sido convertidas (ainda é muito cedo; tenho certeza que vai dar certo). Peguei uma foto da minha mãe em seu quintal quando a visitei durante a pandemia, e agora ela pode me cumprimentar como se eu estivesse quase lá de novo. Eu adoraria se o Imaginative and prescient Professional adicionasse capturas gaussianas totalmente envolventes de várias fotos, como faço no Meta Quest.
Não consigo deixar de pensar em como os esperados óculos inteligentes da Apple usarão a Siri para fins de assistência. Mas estou me adiantando. No momento, você precisa de um Imaginative and prescient Professional de US$ 3.499 para que isso aconteça. Mas quando a Apple tem óculos AR como Projeto Aura do Google e Xreal são menores e mais acessíveis? E quando outros aplicativos podem se conectar à estrutura do Siri? Será fascinante ver o que acontece a seguir. Eu sinto que estou apenas espiando o que está por vir.
