Los lentes con audio y pantalla brindan una oportunidad única para un nuevo diseño de interacción con la superposición de un nuevo factor de forma personal y altamente contextual con patrones de IA en evolución. Tienes acceso al hardware y las funciones del dispositivo, incluidos la cámara, el micrófono y el panel táctil, para explorar por completo nuevos patrones de interacción entre la IA, tu app y los lentes, teniendo en cuenta los principios de comodidad y seguridad del usuario.
Los lentes con audio y pantalla llevan las funciones de IA a los ojos y oídos de los usuarios. Cuando diseñes estas experiencias, considera patrones que reconozcan a la IA como un asistente con elementos visuales fáciles de ver.
Conversación natural
Los modelos de IA permiten una interacción continua en lenguaje natural en lugar de transferencias cortas o árboles de conversación estáticos. Prioriza las conversaciones útiles y continuas en vivo con los agentes en lugar de las sesiones cortas.
Pausar y detener
Permite que el usuario se tome un descanso y que interrumpa la conversación o la tarea. Puede ser un toque físico, un gesto o una interacción hablada. Tu agente podría seguir escuchando indicadores de interacción adicionales y establecer un patrón personalizado para seguir aprendiendo del usuario. Permite que los usuarios salgan de la sesión deslizando el dedo hacia atrás en los lentes con audio o hacia abajo en los lentes con pantalla.
Multimodal
Los lentes pueden usar varias funciones de hardware junto con la IA para brindar experiencias más enriquecedoras. Por ejemplo, puedes usar la cámara para obtener asistencia contextual permitiendo que el usuario la active durante la conversación para comprender el mundo que lo rodea.
No mantengas la cámara en funcionamiento, ya que esto afecta el rendimiento de la batería. En su lugar, permite que el usuario active la cámara para obtener entradas adicionales.
Conciencia ambiental
Las interacciones de audio de la IA pueden proporcionar información adicional o repetir respuestas según sea necesario. Considera proporcionar elementos visuales cuando haya una pantalla disponible como IU contextual que armonice con la salida de audio. Permite que el usuario se mantenga enfocado en el mundo real y proporciona información legible de un vistazo.
