Quando estendi a mão para tocar no botão holográfico flutuante na frente do meu rosto, não esperava poder senti-lo quando ele era pressionado. Mas foi exatamente isso que a banda sEMG que usei tornou possível. Equipado com um pequeno mecanismo háptico, esse botão virtual flutuante de repente pareceu real quando eu toquei nele. A experiência foi alucinante e eu mal podia esperar para ver o que mais ela poderia fazer!
Laboratórios centrais do Android
Android Central Labs é uma coluna semanal dedicada a análises aprofundadas, experimentos e uma visão focada da tecnologia que você usa. Abrange telefones, tablets e tudo mais.
Praticamente todo filme de ficção científica mostra alguém usando um computador futurista com uma tela holográfica controlada por um aceno de mão. No entanto, o uso prático deste tipo de interface é extremamente limitado sem um dos nossos principais sentidos: o tato. Embora uma banda sEMG torne possível “sentir” botões e objetos virtuais por meio de um mecanismo tátil integrado, o Meta tem uma visão muito mais ampla do que isso.
Trata-se de garantir que o XR seja tão alucinante quanto o iPhone original quando um par adequado de óculos inteligentes AR estiver finalmente disponível comercialmente. Tivemos um vislumbre disso com o Meta Orion na conferência Meta Connect de setembro, e está claro que essa banda é a forma como o Meta planeja que os usuários interajam com todos os futuros óculos AR da empresa.
A pulseira é usada como um smartwatch, mas não é usada para contar as horas ou monitorar sua frequência cardíaca. Em vez disso, ajuda a tornar o rastreamento das mãos mais preciso e, o mais importante, sutil, ao detectar movimentos musculares e traduzi-los em ações.
Mas a banda sEMG não é apenas um método de entrada alternativo. É mais privado do que a entrada de voz – especialmente em locais públicos – e permite que você mantenha sua atenção voltada para frente, em vez de em um dispositivo físico como um telefone ou teclado. Isso é importante num mundo onde as pessoas estão constantemente juntas, mas nunca presente. É a maneira perfeita de controlar o par de óculos inteligentes Meta da próxima geração, e é exatamente isso que o artigo técnico recém-publicado da Meta detalha.
Orion é a Estrela do Norte
Usar um par de óculos inteligentes sem essa pulseira é o mesmo que usar um smartphone sem tela sensível ao toque. Pode funcionar, mas a experiência não é muito boa.
O primeiro grande protótipo de óculos AR da Meta, Meta Orion, usa esse tipo de banda sEMG e a Meta acredita plenamente que é um requisito para verdadeiros produtos de óculos inteligentes AR programados para estrear este ano. Usar um par de óculos inteligentes sem essa pulseira é o mesmo que usar um smartphone sem tela sensível ao toque. Pode funcionar, mas a experiência não é muito boa.
Já vi esse tipo de banda ser chamada de “interface neural” antes, mas acho que isso é um exagero. Sim, a banda pode detectar sinais elétricos nos músculos do braço para entender melhor como você deseja interagir com objetos virtuais, mas não consegue ler sua mente. Na verdade, a interface neural faz a banda parecer assustadora, quando na verdade não é.
Na minha demonstração, consegui rolar as faixas da música quase sem esforço, esfregando o polegar para frente ou para trás no dedo indicador. Parecia quase como se eu estivesse usando algum tipo de rolo de agitação para controlar um iPod, mas nenhum objeto físico estava em minha mão.
Rolar pelo feed do Instagram era igualmente simples, embora isso exigisse um pouco mais de minha atenção do que Meta fala neste white paper.
A banda sEMG é vital para interfaces virtuais de próxima geração porque permite entrada completa sem uma tela sensível ao toque ou um conjunto de câmeras que possam ver suas mãos. Essa segunda parte é mais importante porque, se empresas como a Meta pretendem lançar um par de óculos inteligentes com display de sucesso, elas precisarão cortar o máximo possível de tecnologia “fluff” para tornar os óculos pequenos e confortáveis.
Como Meta aponta no white paper, ser capaz de controlar um par de óculos inteligentes mesmo quando suas mãos estão ocupadas é uma espécie de Santo Graal da entrada do dispositivo. Ele poderia facilmente substituir a experiência do smartphone porque é ainda mais fácil, e todos nós sabemos que as pessoas adoram conveniência e facilidade.
Ser capaz de controlar um par de óculos inteligentes mesmo quando suas mãos estão ocupadas é uma espécie de Santo Graal da entrada do dispositivo.
Como não requer o uso de uma câmera para detectar movimento, não está sujeito ao mesmo tipo de preconceito tecnológico que as câmeras podem sofrer. Houve muitos exemplos de interfaces controladas por câmera ao longo dos anos que não funcionaram tão bem para pessoas com tons de pele mais escuros, mas o sEMG não terá esse problema.
A pulseira sEMG que usei era extremamente confortável, pois era feita de tecido elástico e respirável e se ajustava muito confortavelmente ao meu pulso. Ao contrário dos dispositivos médicos EMG tradicionais, é completamente não invasivo e não é diferente de usar um smartwatch. Na verdade, é mais confortável do que um smartwatch porque o peso é distribuído uniformemente por toda a pulseira.
Como você não está segurando nada na mão, usar uma pulseira sEMG com algo como óculos inteligentes é mais ergonômico do que um smartphone. Há uma razão pela qual o “pescoço de texto” é uma condição médica reconhecida e isso poderia muito bem resolver esse problema completamente.
Como funciona uma banda sEMG
Este não é um “dispositivo de leitura cerebral” e não pode ler seus pensamentos. Também não pode transmitir os pensamentos de Zuck (ou de qualquer outra pessoa) para sua cabeça.
Um par completo de óculos inteligentes como o Meta Orion naturalmente possui câmeras integradas que podem rastrear o ambiente ao seu redor, semelhante a um fone de ouvido VR. Essas câmeras também podem ser usadas para rastreamento manual, mas o rastreamento manual geralmente é um tipo de entrada um pouco mais ativo, já que as câmeras realmente precisam ser capazes de ver suas mãos.
Uma banda sEMG ajuda a aumentar isso, fornecendo uma entrada secundária baseada no movimento muscular do pulso. A banda pode detectar os impulsos elétricos em seus músculos e compreender centenas de gestos diferentes por causa disso. Ele pode até detectar movimentos leves, permitindo que você seja extremamente preciso na entrada. A imagem animada acima mostra uma mão real ao lado do que
Meta enfatiza que este não é um “dispositivo de leitura cerebral” e que não pode ler seus pensamentos. Como eu disse antes, achei um pouco demais quando Mark Zuckerberg se referiu a ela como uma “interface neural” no Connect. Não é. Ele também não pode transmitir os pensamentos de Zuck em sua cabeça, o que, aparentemente, deixou algumas pessoas preocupadas ou não teriam mencionado isso no white paper.
Os sensores entram em contato com a pele e leem sinais elétricos nos músculos do pulso da mesma forma não invasiva que um smartwatch lê seu pulso.
Meta também enfatiza que o sEMG não é invasivo, o que é importante, uma vez que a tecnologia EMG clínica é invasivo. O interior da pulseira se parece muito com um anel inteligente, incluindo sensores ligeiramente salientes. A versão da banda sEMG que usei foi a terceira geração desse tipo e parece substancialmente mais elegante do que as duas primeiras gerações, ambas mais parecidas com um smartwatch do que qualquer outra coisa.
Os sensores entram em contato com a pele e leem sinais elétricos nos músculos do pulso, da mesma forma que um smartwatch lê seu pulso. Eles não fornecem nenhum tipo de estimulação elétrica ou feedback. Em vez disso, eles são usados apenas para ler os movimentos musculares e inferir dados de rastreamento das mãos mais precisos.
Esses tipos de bandas sEMG são mais atraentes para adoção convencional por uma série de razões. Além de serem bonitos e totalmente personalizáveis, eles não parecem em nada diferentes de uma pulseira de tecido ou couro que alguém pode usar para completar o visual de uma roupa.
Também é incrivelmente natural interagir com interfaces virtuais ao usar uma banda sEMG, graças ao mecanismo de feedback tátil interno. Este motor pode vibrar e fornecer feedback físico com base no que você toca, semelhante a como um botão virtual na tela de um smartphone pode parecer mais real quando vibra corretamente.
Tocar em botões flutuantes que não existem pode parecer muito estranho em um fone de ouvido Meta Quest porque não há feedback, mas uma banda sEMG resolve esse problema. É uma grande vitória para o conceito de telas virtuais e UIs flutuantes e seria um substituto legítimo para um tablet em muitos cenários.
Meta não tem um cronograma para quando tal banda chegaria ao mercado, mas estou disposto a apostar que veremos um junto com o lançamento do primeiro par de óculos inteligentes da Meta com display ainda este ano.
