Modèles d'IA

Les lunettes d'IA offrent une occasion unique de concevoir de nouvelles interactions grâce à la combinaison d'un nouveau facteur de forme très contextuel et personnel avec des modèles d'IA en constante évolution. Pour les lunettes d'IA, vous aurez accès au matériel et aux fonctionnalités des appareils, y compris à la caméra, au micro et au pavé tactile, afin d'explorer pleinement les nouveaux modes d'interaction entre l'IA, votre application et les lunettes, en gardant à l'esprit les principes de confort et de sécurité des utilisateurs. 

Les lunettes IA offrent des fonctionnalités d'IA aux yeux et aux oreilles de l'utilisateur. Lorsque vous concevez ces expériences, pensez à des modèles qui reconnaissent l'IA comme un assistant avec des visuels consultables en un coup d'œil.

Conversation naturelle

Les modèles d'IA permettent une interaction continue en langage naturel au lieu de transferts courts ou d'arborescences de conversation statiques. Priorisez les conversations utiles en cours avec des agents plutôt que les sessions courtes.

Mettre en pause et arrêter

Permettre à l'utilisateur de faire une pause et d'interrompre la conversation ou la tâche. Il peut s'agir d'un contact physique, d'un geste ou d'une interaction vocale. Votre agent peut continuer à écouter d'autres signaux d'interaction et établir un modèle personnalisé pour continuer en apprenant de l'utilisateur.  Autorisez les utilisateurs à quitter la session en balayant l'écran vers l'arrière sur les lunettes IA sans écran ou vers le bas sur les lunettes IA avec écran.

Multimodal

Les lunettes peuvent utiliser plusieurs fonctionnalités matérielles avec l'IA pour offrir des expériences plus riches. Par exemple, vous pouvez utiliser l'appareil photo pour obtenir une assistance contextuelle en permettant à l'utilisateur de l'activer pendant votre conversation afin de comprendre le monde qui l'entoure.

Les éléments de conception doivent être ancrés en bas du cadre.
L'utilisateur peut activer la caméra pour poser une question à Gemini pendant qu'il fait ses achats.

Ne laissez pas la caméra en marche, car cela a un impact sur les performances de la batterie. Permettez plutôt à l'utilisateur d'activer la caméra pour obtenir des informations supplémentaires.

Les éléments de conception doivent être ancrés en bas du cadre.
L'utilisateur peut réactiver l'application en interagissant avec ses lunettes et invoquer l'agent pour ajouter un article à sa liste de courses.

Sensibilité à l'environnement

Les interactions audio avec l'IA peuvent fournir des informations supplémentaires ou répéter les réponses si nécessaire. Envisagez de fournir des éléments visuels lorsqu'un écran est disponible en tant qu'UI contextuelle qui s'harmonise avec la sortie audio. Permettre à l'utilisateur de rester concentré dans le monde réel, en lui fournissant des informations lisibles en un coup d'œil.

Les éléments de conception doivent être ancrés en bas du cadre.
Dans cet exemple, un professeur de langue combine ces schémas : l'utilisateur peut parler à un rythme conversationnel, utiliser des gestes physiques et la caméra pour interagir et bénéficier d'une expérience d'apprentissage naturelle et immersive.