A Qualcomm compartilha sua visão para o futuro dos óculos inteligentes com IA generativa integrada.

A Qualcomm possibilitou o que um de seus executivos chamou de uma conversa estranha e “das mais interessantes – e foi com um par de óculos inteligentes movidos a IA generativa.”

Em uma palestra na Augmented World Expo, Ziad Asghar, vice-presidente sênior de XR e computação espacial na Qualcomm, afirmou que a conversa não foi apenas uma demonstração simples. Foi um vislumbre de como estamos transformando os óculos de IA, que há muito tempo eram considerados um acessório, em um dispositivo autônomo e abrangente.

A empresa também apresentou seu processador Snapdragon AR1+ Gen 1, que é 26% menor do que as gerações anteriores, para alimentar a demonstração.

“Na terça-feira, enquanto estava no palco da AWE USA, a maior conferência de XR do mundo, conversei com um assistente de IA através de um par de óculos inteligentes RayNeo X3 Pro movidos pela tecnologia Snapdragon – com a inferência de IA realizada nos próprios óculos sem depender da nuvem ou de uma conexão com a internet,” disse Ziad Asghar, vice-presidente sênior de XR e computação espacial na Qualcomm, em uma declaração.

Ele disse que a premissa é simples: óculos de IA estão prestes a operar de forma independente, sem necessidade de serem pareadas com um smartphone ou a nuvem.

“No futuro próximo, poderei deixar meu telefone no bolso ou no carro e apenas usar meus óculos inteligentes durante uma ida ao supermercado, como mostrei durante minha demonstração na AWE,” disse Asghar. “Enquanto estava no palco, estava no ‘supermercado’ e pedi ajuda aos meus óculos para fettuccine alfredo que precisava fazer para a festa de aniversário da minha filha.”

Em resposta, o assistente de IA, rodando o Llama 1B, um pequeno modelo de linguagem (SLM), entendeu o pedido específico e me forneceu as informações necessárias através de áudio e texto exibidos na lente dos meus óculos.

Essa demonstração foi um marco mundial: um modelo de IA generativa autoregressiva rodando completamente em um par de óculos inteligentes. Sem telefone. Sem nuvem. Apenas o processador alimentando os próprios óculos. E esse marco da indústria foi realizado diante de uma audiência ao vivo, disse ele.

Para completar, foi anunciada a nossa plataforma Snapdragon AR1+ Gen 1, que é 26% menor que as gerações anteriores e traz qualidade de imagem aprimorada, menor tamanho, melhoria de potência e a capacidade de rodar SLMs. Todas essas características são críticas para óculos inteligentes compactos.

Juntas, elas abrem a porta para uma revolução nos óculos inteligentes de IA, com designs mais finos, leves e variados, aliados a poder suficiente para rodar assistentes de IA diretamente no dispositivo.

Portanto, embora a demonstração tenha sido apenas um exemplo do que você pode fazer com IA totalmente integrada em óculos inteligentes, os benefícios que derivam do trabalho em andamento na Qualcomm são duradouros e massivos.

Expandir e evoluir

Não existe um único caminho que os headsets XR e os óculos inteligentes irão seguir, especialmente porque também oferecemos processadores de realidade mista como o Snapdragon XR2 e o Snapdragon XR2+, que também têm capacidade de inferência significativa no dispositivo.

Asghar disse que antecipa várias formas diferentes, desde óculos autônomos o suficiente para rodar modelos de IA, até armações mais leves ligadas a smartphones ou pequenos “pucks” de computação próximos que podem conectar tudo, desde um carro até um tablet. O que a Qualcomm está fazendo com o portfólio é se preparar para o futuro.

Seja computação em nuvem, no dispositivo, ou um caminho híbrido que incorpore ambos, o aumento das capacidades de IA no dispositivo oferecerá uma experiência de usuário fluida e de ultra-baixa latência que também é focada em segurança. Isso será crítico à medida que os óculos inteligentes movidos a IA encontrarem seu caminho em setores com necessidades críticas e os usuários exigirem mais personalização, mais recursos de privacidade e uma experiência agentiva de ponta a ponta.

“Já vimos um impulso significativo na indústria de XR no último ano. Em dezembro, colaboramos com Google e Samsung para lançar o Android XR, um sistema operacional projetado com IA no núcleo da experiência XR,” disse ele.

Isso ocorre enquanto a indústria continua a se expandir, com os Óculos Ray-Ban da Meta, bem como hardware mais ambicioso, como o Meta Orion, que é anunciado como os primeiros verdadeiros óculos de realidade aumentada da empresa, com sua própria sobreposição digital.

Além disso, Asghar disse que temos visto óculos da Rokid, RayNeo, XREAL e mais. Em março, a BleeqUp lançou um par de óculos esportivos movidos a IA.

Imagine o que essas empresas poderão alcançar com plataformas menores e mais potentes como o Snapdragon AR1+ Gen 1, permitindo formas mais elegantes que não comprometem a capacidade de rodar modelos de IA, disse Asghar.

Mais inteligentes, mais conscientes

Enquanto reduzir o tamanho e o ajuste dos óculos inteligentes é crítico, outro avanço que o Snapdragon AR1+ Gen 1 traz são as capacidades de câmera tipicamente encontradas em smartphones premium, que também são igualmente importantes para onde estão evoluindo.

Essa capacidade de ver o mundo que você vê – com cada detalhe minucioso – abrirá novas avenidas para entradas multimodais. Essa capacidade é crítica para que a IA não apenas entenda melhor o que você vê, mas também conecte os pontos de uma forma que permita oferecer sugestões ou contexto adicional sobre um objeto ou local.

E enquanto os óculos inteligentes poderão rodar SLMs sozinhos, isso não significa que não trabalharão em conjunto com uma constelação de dispositivos ao seu redor, seja seu smartphone ou PC. De fato, vejo relógios inteligentes e novos dispositivos, como anéis inteligentes ou outros sensores wearables, que possibilitarão novas modalidades de entrada enquanto trabalham em conjunto com seus óculos.

Na Qualcomm Technologies, estamos nos preparando para um futuro multifacetado com uma ampla gama de combinações de dispositivos, criando uma arquitetura modular que permite que nossos parceiros acessem a indústria de computação espacial para oferecer uma experiência superior aos consumidores.

É por isso que sei que essa conversa com o assistente de IA dos meus óculos inteligentes é um momento crucial – realmente marcou o início de algo enorme. O trabalho que estamos fazendo está apenas começando a desbloquear o potencial transformador de uma experiência agentiva mais profunda e personalizada.

“Uma demonstração mundial de IA generativa em vidro: a visão da Qualcomm para o futuro dos óculos inteligentes”, disse a Qualcomm. “Nossa demonstração ao vivo de um assistente de IA generativa funcionando completamente em óculos inteligentes – sem a ajuda de um telefone ou da nuvem – e a revelação da nova plataforma Snapdragon AR1+ despertam novas possibilidades para a realidade aumentada.”