Modèles d'IA

Les lunettes d'IA offrent une occasion unique de concevoir de nouvelles interactions grâce à la superposition d'un nouveau facteur de forme très contextuel et personnel avec des modèles d'IA en évolution. Pour les lunettes d'IA, vous aurez accès au matériel et aux fonctionnalités des appareils, y compris à l'appareil photo, au micro et au pavé tactile, afin d'explorer pleinement de nouveaux modes d'interaction entre l'IA, votre application et les lunettes, en tenant compte des principes de confort et de sécurité des utilisateurs. 

Les lunettes IA offrent des fonctionnalités d'IA aux yeux et aux oreilles de l'utilisateur. Lorsque vous concevez ces expériences, pensez à des schémas qui reconnaissent l'IA comme un assistant avec des visuels consultables en un coup d'œil.

Conversation naturelle

Les modèles d'IA permettent une interaction continue en langage naturel au lieu de transferts courts ou d'arborescences de conversation statiques. Priorisez les conversations utiles en cours avec des agents plutôt que les sessions courtes.

Mettre en pause et arrêter

Permettre à l'utilisateur de faire une pause et d'interrompre la conversation ou la tâche. Il peut s'agir d'un contact physique, d'un geste ou d'une interaction verbale. Votre agent peut continuer à écouter d'autres signaux d'interaction et établir un modèle personnalisé pour continuer en apprenant de l'utilisateur.  Autorisez les utilisateurs à quitter la session en balayant l'écran vers l'arrière sur les lunettes d'IA sans écran ou en balayant l'écran vers le bas sur les lunettes d'IA avec écran.

Multimodal

Les lunettes peuvent utiliser plusieurs fonctionnalités matérielles avec l'IA pour offrir des expériences plus riches. Par exemple, vous pouvez utiliser l'appareil photo pour obtenir une assistance contextuelle en permettant à l'utilisateur de l'activer pendant la conversation afin de comprendre le monde qui l'entoure.

Les éléments de conception doivent être ancrés en bas du cadre.
L'utilisateur peut activer la caméra pour poser une question à Gemini pendant qu'il fait ses achats.

Ne laissez pas la caméra en marche, car cela a un impact sur les performances de la batterie. Laissez plutôt l'utilisateur activer la caméra pour obtenir des informations supplémentaires.

Les éléments de conception doivent être ancrés en bas du cadre.
L'utilisateur peut réactiver l'application en interagissant avec ses lunettes et invoquer l'agent pour ajouter un article à sa liste de courses.

Sensibilité à l'environnement

Assurez-vous que vos interactions audio avec l'IA peuvent fournir des informations supplémentaires ou répéter des réponses si nécessaire. Envisagez de fournir des éléments visuels lorsqu'un écran est disponible en tant qu'interface utilisateur contextuelle qui s'harmonise avec la sortie audio. Permettre à l'utilisateur de rester concentré dans le monde réel, en lui fournissant des informations lisibles en un coup d'œil.

Les éléments de conception doivent être ancrés en bas du cadre. Dans cet exemple, un professeur de langue combine ces modèles : l'utilisateur peut parler à un rythme conversationnel, utiliser des gestes physiques et la caméra pour interagir et bénéficier d'une expérience d'apprentissage naturelle et immersive.