Android XR היא פלטפורמת Android הראשונה שנבנתה בעידן Gemini, והיא מפעילה מערכת אקולוגית של אוזניות, משקפיים וכל מה שביניהם. Gemini מקל על השימוש באוזניות VR עם Android XR ומוסיף יכולות ייחודיות בכך שהוא עוזר למשתמשים להבין את מה שהם רואים ולבצע פעולות בשמם.
אפשר לגשת אל Gemini APIs באמצעות Firebase AI Logic, שזמין גם לאפליקציות מקוריות ל-Android (עם Kotlin) וגם ל-Unity. אפשר להשתמש בממשקי ה-API האלה כדי ליצור תכונות מבוססות-AI שמשתלבות עם מודלים של Gemini ו-Imagen מבוססי-ענן.
בחירת מודל
כדי להתחיל, משווים בין היכולות של כל מודל שזמין ב-Firebase. אחר כך תוכלו להעריך את התוצאות של הנחיות שונות למודלים שונים ב-AI Studio כדי לקבוע איזה מודל מתאים לתרחיש השימוש שלכם.
דרכים נוספות לשיפור האפליקציה באמצעות Gemini
אחרי שתקבעו את המודל שמתאים לתרחיש השימוש שלכם, כדאי לשקול את הדרכים הבאות לשיפור האפליקציה:
- ממשק קולי: מערכת Android XR משתמשת בקלט טבעי כמו תנועות ידיים, מבט וקול כדי לנווט במערכת. כדי לאפשר למשתמשים לנווט באפליקציה באמצעות הקול שלהם, צריך להשתמש ב-Gemini Live API יחד עם function calling.
- יצירת תמונות עם תמיכה מולטי-מודאלית: יצירת תמונות באמצעות מודלי Gemini או Imagen עם Gemini Developer API.
- שיפור האינטראקציות במשחקים באפליקציות Unity: אפשר ליצור פלט מובנה באמצעות Gemini Developer API או Vertex AI Gemini API.