Meta oferece um vislumbre de seu suposto assassino do iPhone: Orion

Durante anos, Silicon Valley e Wall Street questionaram a decisão de Mark Zuckerberg de investir dezenas de milhares de milhões de dólares em Reality Labs. Esta semana, a divisão de wearables da Meta revelou um protótipo de seus óculos inteligentes Orion, um formato que a empresa acredita que um dia poderá substituir o iPhone. Essa ideia parece maluca… mas talvez um pouco menos maluca do que há uma semana.

Orion é um protótipo de fone de ouvido que combina realidade aumentada, rastreamento ocular e manual, IA generativa e uma pulseira de detecção de gestos. Através de projetores micro LED e lentes de carboneto de silício (que são bastante caras), a Meta parece ter superado um antigo desafio de exibição de AR. A ideia é que você possa olhar através do Orion – você sabe, como um par de óculos – mas também ver janelas de aplicativos projetadas nas lentes que parecem estar incorporadas no mundo ao seu redor. Idealmente, você pode usar as mãos, os olhos e a voz para navegar pelo ambiente.

Meta Órion
Os óculos inteligentes Orion precisam de uma pulseira e um disco de computação sem fio para funcionar. (Meta)
Créditos da imagem: meta

Para ser claro, os óculos inteligentes Orion da Meta são mais robustos do que os leitores médios, supostamente custam US $ 10.000 por unidade e não estarão disponíveis para venda tão cedo. Estamos falando de daqui a alguns anos. Toda a tecnologia em Orion é relativamente nova e precisa ficar mais barata, melhor e menor para chegar a um par de óculos inteligentes que você pode comprar no shopping. Zuckerberg diz que a empresa já trabalha no Orion há 10 anos, mas ainda não há caminho para um produto vendável.

No entanto, a Meta não é a única empresa que tenta colocar um substituto de smartphone no seu rosto.

Este mês, a Snap revelou sua última geração de óculos inteligentes Spectacles, que são maiores que o Orion e têm um campo de visão mais limitado. Um ex-engenheiro do Snap chamou os óculos mais recentes de “obviamente ruins” – embora você possa encomendá-los. O Google deu a entender durante sua conferência I/O em maio que também está trabalhando em um par de óculos inteligentes, talvez uma reformulação de seu experimento fracassado do Google Glass da década passada. A Apple está supostamente trabalhando em óculos AR que se parecem muito com o Orion. E não podemos descartar a nova startup de Jony Ive, LoveFrom, que ele confirmou recentemente que está trabalhando em uma IA vestível com OpenAI (embora não saibamos se são óculos, um alfinete ou algo totalmente diferente).

O que está se formando é uma corrida entre as empresas mais ricas da Big Tech para criar um par elegante de óculos inteligentes que possa fazer tudo o que seu smartphone pode – e, esperançosamente, algo mais. O protótipo do Meta deixou duas coisas claras: há algo ali, mas ainda não estamos “lá”.

Esses dispositivos são um afastamento notável dos fones de ouvido de realidade virtual da Quest que a Meta vem promovendo há anos e do Vision Pro da Apple. Há muitas tecnologias semelhantes envolvidas, como rastreamento ocular e rastreamento manual, mas seu uso é completamente diferente. Os fones de ouvido VR são volumosos, desconfortáveis ​​de usar e deixam as pessoas enjoadas ao olhar para os monitores. Óculos de sol e óculos de grau, por outro lado, são relativamente agradáveis ​​de usar e milhões de americanos os usam todos os dias.

Para crédito de Zuckerberg, ele vem promovendo o formato dos óculos há muito tempo, quando certamente não era popular fazê-lo. Há muito tempo foi relatado que o CEO da Meta odeia que seus populares aplicativos de mídia social tenham que ser acessados ​​através dos telefones da Apple (talvez levando ao malfadado Facebook Phone). Agora, os concorrentes da Meta também estão mergulhando na computação de óculos.

Meta oferece um vislumbre de seu suposto assassino do iPhone: Orion
Andrew Bosworth, CTO da Meta e chefe do Reality Labs, usando um par de óculos inteligentes Orion transparentes. (David Paul Morris/Bloomberg via Getty Images)

O investimento inicial da Meta aqui parece estar valendo a pena. Zuckerberg fez uma apresentação do Orion na quarta-feira que não esqueceremos tão cedo, enchendo uma sala cheia de jornalistas céticos com eletricidade e entusiasmo. O TechCrunch ainda não demonstrou o Orion, mas as análises iniciais foram muito positivas.

O que a Meta oferece hoje é o Ray-Ban Meta: um par de óculos com câmeras, microfones, alto-falantes, sensores, um LLM no dispositivo e a capacidade de conectar-se ao seu telefone e à nuvem. O Ray-Ban Meta é muito mais simples que o Orion, mas relativamente acessível por US$ 299 – na verdade, não muito mais do que um par normal de Ray-Bans. Eles são como os Spectacles 3 que o Snap lançou há alguns anos, embora os óculos Ray-Ban Meta pareçam mais populares.

Apesar das grandes diferenças de preço e capacidades, Orion e Ray-Ban Meta estão mais relacionados do que você imagina.

“Orion é realmente o futuro e, em última análise, queremos buscar a experiência holográfica completa. Você pode pensar no Ray-Ban Meta como nosso primeiro passo”, disse Li-Chen Miller, vice-presidente de produto da Meta que lidera sua equipe de wearables, em entrevista ao TechCrunch. “Nós realmente precisamos acertar as coisas básicas, como garantir que seja confortável, que as pessoas queiram usá-lo e que as pessoas encontrem valor nele todos os dias.”

Uma das coisas que Meta está tentando acertar com Ray-Ban Meta é a IA. Atualmente, os óculos inteligentes usam modelos Llama da Meta para responder perguntas sobre o que você vê à sua frente, tirando fotos e executando-as no sistema de IA junto com as solicitações verbais do usuário. Os recursos de IA do Ray-Ban Meta hoje estão longe de ser perfeitos: a latência é pior do que o modo de voz avançado de sensação natural do OpenAI; Meta AI requer prompts muito específicos para funcionar corretamente; alucina; e não tem uma integração forte com muitos aplicativos, o que o torna menos útil do que apenas pegar meu iPhone (talvez pelo design da Apple). Mas as atualizações do Meta que chegarão ainda este ano tentam resolver esses problemas.

Meta oferece um vislumbre de seu suposto assassino do iPhone: Orion
Li-Chen Miller, vice-presidente de produto durante Meta Connect em 2023. (David Paul Morris/Bloomberg via Getty Images)

A Meta anunciou que em breve lançará processamento de vídeo de IA ao vivo para seus Ray-Bans, o que significa que os óculos inteligentes transmitirão vídeo ao vivo e solicitações verbais em um dos modelos de IA multimodais da Llama e produzirão respostas verbais em tempo real com base nessa entrada. Ele também recebe recursos básicos, como lembretes, além de mais integrações de aplicativos. Isso deve tornar toda a experiência muito mais tranquila, se funcionar. Miller diz que essas melhorias serão filtradas para o Orion, que funciona nos mesmos sistemas generativos de IA.

“Algumas coisas fazem mais sentido para um formato do que para outro, mas certamente estamos fazendo polinização cruzada”, disse Miller.

Da mesma forma, ela diz que alguns dos recursos do Orion podem ser prejudicados à medida que sua equipe se concentra em tornar os óculos AR mais acessíveis. Os vários sensores e rastreadores oculares da Orion não são tecnologias baratas. O problema é que Orion precisa melhorar os dois e mais econômico.

Outro desafio é digitar. Seu smartphone tem teclado, mas seus óculos inteligentes não. Miller trabalhou com teclados na Microsoft por quase 20 anos antes de ingressar na Meta, mas ela diz que a falta de teclado do Orion é “libertadora”. Ela argumenta que usar óculos inteligentes será uma experiência mais natural do que usar um telefone. Você pode simplesmente falar, gesticular com as mãos e olhar as coisas para navegar em Orion; todas as coisas que vêm naturalmente para a maioria das pessoas.

Outro aparelho criticado por não ter teclado foi, ironicamente, o iPhone. O ex-CEO da Microsoft, Steve Ballmer, riu do iPhone em 2007, dizendo que ele não atrairia clientes empresariais porque não tinha um teclado físico. Porém, as pessoas se adaptaram e seus comentários parecem ingênuos mais de 15 anos depois.

Acho que fazer Orion parecer natural é definitivamente mais um objetivo do que uma realidade neste momento. The Verge observa em sua análise prática que as janelas ocasionalmente preenchiam toda a lente dos óculos, obstruindo completamente a visão do usuário sobre o mundo ao seu redor. Isso está longe de ser natural. Para chegar lá, o Meta terá que melhorar sua IA, digitação, AR e uma longa lista de outros recursos.

“Para o Ray-Ban Meta, mantivemos o escopo de algumas coisas e ele as faz muito bem”, disse Miller. “Considerando que, quando você deseja construir uma plataforma de computação nova e futurista (com Orion), temos que fazer muitas coisas, e fazê-las todas muito bem.”

Rolar para cima
Pular para o conteúdo