Crie para óculos com IA usando a prévia para desenvolvedores 3 do SDK do Android XR e desbloqueie novos recursos para experiências imersivas

Em outubro, a Samsung lançou o Galaxy XR, o primeiro dispositivo com Android XR. E tem sido incrível ver o que alguns de vocês estão criando! Confira o que alguns dos nossos desenvolvedores estão dizendo sobre a jornada no Android XR.

O Android XR nos deu um mundo totalmente novo para criar nosso app. As equipes devem se perguntar: qual é a maior e mais ousada versão da sua experiência que vocês poderiam criar? Esta é sua oportunidade de finalmente colocar em prática o que você sempre quis fazer, porque agora você tem a plataforma que pode tornar isso realidade. - Kristen Coke, gerente de produtos líder do Calm

Também mostramos uma prévia de outros dispositivos que serão lançados e funcionam com o Android XR, como o Project Aura da XREAL e óculos estilosos da Gentle Monster e da Warby Parker.

Para oferecer suporte à crescente variedade de dispositivos XR, anunciamos a prévia para desenvolvedores 3 do SDK do Android XR.

Com a prévia para desenvolvedores 3 do SDK do Android XR, além de criar experiências imersivas para dispositivos como o Galaxy XR, agora você também pode criar experiências aumentadas para os próximos óculos com IA com o Android XR. 

Novas ferramentas e bibliotecas para experiências aumentadas

Com a prévia para desenvolvedores 3, estamos disponibilizando as ferramentas e bibliotecas necessárias para criar experiências aumentadas inteligentes e por comando de voz para óculos com IA. Os óculos com IA são leves e portáteis para uso durante todo o dia. Você pode ampliar seu app para dispositivos móveis para aproveitar os alto-falantes, a câmera e o microfone integrados e oferecer interações novas, úteis e bem pensadas. Com a adição de uma pequena tela nos óculos com IA, é possível apresentar informações de forma particular aos usuários. Os óculos com IA são perfeitos para experiências que podem ajudar a melhorar o foco e a presença do usuário no mundo real.

Para potencializar as experiências aumentadas nos óculos com IA, estamos lançando duas novas bibliotecas criadas especificamente para o SDK do Jetpack XR:

• Jetpack Projected: criado para conectar dispositivos móveis e óculos com IA, com recursos que permitem acessar sensores, alto-falantes e telas nos óculos.
• Jetpack Compose Glimmer: nova linguagem de design e componentes de interface para criar e estilizar suas experiências aumentadas em óculos com IA de tela.

O Jetpack Compose Glimmer é uma demonstração das práticas recomendadas de design para experiências aumentadas ópticas e transparentes. Com componentes de interface otimizados para a modalidade de entrada e os requisitos de estilo dos óculos com IA, o Jetpack Compose Glimmer foi projetado para oferecer clareza, legibilidade e o mínimo de distração.

Para ajudar a visualizar e testar sua interface do Glimmer do Jetpack Compose, estamos lançando o emulador de óculos com IA no Android Studio. O novo emulador de óculos com IA pode simular interações específicas de óculos, como touchpad e entrada de voz. 

Além das novas bibliotecas Jetpack Projected e Jetpack Compose Glimmer, também estamos expandindo o ARCore para Jetpack XR para oferecer suporte a óculos com IA. Estamos começando com o rastreamento de movimento e os recursos geoespaciais para experiências aumentadas, os mesmos recursos que permitem criar experiências de navegação úteis, perfeitas para dispositivos de uso diário, como óculos com IA.

Ampliação do suporte para experiências imersivas

Continuamos investindo nas bibliotecas e ferramentas que oferecem experiências imersivas para headsets XR, como o Samsung Galaxy XR, e óculos XR com fio, como o próximo Project Aura da XREAL. Ouvimos seu feedback e adicionamos vários recursos muito pedidos ao SDK do Jetpack XR desde a prévia para desenvolvedores 2.

O Jetpack SceneCore agora conta com carregamento dinâmico de modelos glTF usando URIs e suporte a materiais aprimorados para criar novos materiais de PBR no momento da execução. Além disso, o componente SurfaceEntity foi aprimorado com suporte completo ao gerenciamento de direitos digitais (DRM, na sigla em inglês) do Widevine e novas formas, permitindo renderizar vídeos em 360 e 180 graus em esferas e hemisférios.

No Jetpack Compose para XR, você vai encontrar novos recursos, como o componente UserSubspace para o comportamento de seguir, garantindo que o conteúdo permaneça na visualização do usuário, não importa para onde ele olhe. Além disso, agora é possível usar animações espaciais para transições suaves, como deslizamento ou esmaecimento. Para oferecer suporte a um ecossistema em expansão de dispositivos imersivos com diversos recursos de exibição, agora é possível especificar tamanhos de layout como frações do campo de visão confortável do usuário.

No Material Design para XR, os novos componentes se adaptam automaticamente ao espaço usando substituições. Isso inclui caixas de diálogo que se elevam espacialmente e barras de navegação, que aparecem em um Orbiter. Além disso, há um novo componente SpaceToggleButton para facilitar a transição de e para o Espaço Ampliado.

E no ARCore para Jetpack XR, novos recursos de percepção foram adicionados, incluindo captura de expressões faciais com 68 valores de blendshape, que desbloqueiam um mundo de gestos faciais. Você também pode usar o acompanhamento ocular para criar avatares virtuais e mapas de profundidade para permitir interações mais realistas com o ambiente do usuário.

Para dispositivos como o Project Aura da XREAL, estamos lançando o emulador de óculos XR no Android Studio. Essa ferramenta essencial foi projetada para oferecer uma visualização precisa do conteúdo, além de corresponder às especificações reais do dispositivo para campo de visão (FoV), resolução e DPI para acelerar o desenvolvimento.

Se você cria experiências imersivas com o Unity, também estamos expandindo seus recursos de percepção no SDK do Android XR para Unity. Além de várias correções de bugs e outras melhorias, estamos expandindo os recursos de rastreamento para incluir: códigos QR e ArUco, imagens planas e rastreamento corporal (experimental). Também estamos lançando um recurso muito solicitado: a malha de cena. Ela permite que você tenha interações muito mais profundas com o ambiente do usuário. Agora, seu conteúdo digital pode se chocar contra paredes e subir em sofás.

E isso é só a ponta do iceberg. Confira nossa página de experiências imersivas para mais informações.

Comece hoje mesmo!

A prévia para desenvolvedores 3 do SDK do Android XR já está disponível. Baixe o Android Studio Canary mais recente (Otter 3, Canary 4 ou mais recente) e faça upgrade para a versão mais recente do emulador (36.4.3 Canary ou mais recente). Depois, acesse developer.android.com/xr para começar a usar as bibliotecas e os exemplos mais recentes necessários para criar para a crescente seleção de dispositivos Android XR. Estamos criando o Android XR com você! Não se esqueça de compartilhar seu feedback, sugestões e ideias com nossa equipe à medida que você avança na sua jornada no Android XR.