מערכת ההפעלה החכמה: שיפור היכולות של סוכני AI באפליקציות ל-Android

הציפיות של המשתמשים מ-AI במכשירים שלהם משנות באופן מהותי את האינטראקציה שלהם עם האפליקציות. במקום לפתוח אפליקציות כדי לבצע משימות שלב אחר שלב, הם מבקשים מ-AI לעשות את העבודה הקשה בשבילם. במודל האינטראקציה החדש הזה, ההצלחה כבר לא נמדדת לפי מספר המשתמשים שפותחים את האפליקציה, אלא לפי היכולת של האפליקציה לעזור למשתמשים לבצע את המשימות שלהם בצורה יעילה ומהירה יותר. 

כדי לעזור לכם לפתח את האפליקציות שלכם לקראת העתיד הזה, אנחנו משיקים יכולות למפתחים בשלב מוקדם, שמגשרות על הפער בין האפליקציות שלכם לבין אפליקציות מבוססות-סוכנים ועוזרים אישיים, כמו Google Gemini. אנחנו נמצאים בשלבי בטא מוקדמים של התהליך הזה, אבל אנחנו מתכננים את התכונות האלה עם פרטיות ואבטחה כערכי ליבה, כשלב ראשון בבחינת השינוי הפרדיגמטי הזה כמערכת אקולוגית של אפליקציות.

שיפור האפליקציות באמצעות AppFunctions

‫Android AppFunctions מאפשר לאפליקציות לחשוף נתונים ופונקציונליות ישירות לסוכנים ולעוזרים דיגיטליים מבוססי-AI. באמצעות  AppFunctions Jetpack library ו-platform APIs, מפתחים יכולים ליצור פונקציות עם תיאור עצמי שאפליקציות מבוססות-סוכנים יכולות לגלות ולהפעיל באמצעות שפה טבעית. בדומה לאופן שבו יכולות של קצה עורפי מוצהרות באמצעות שרתי ענן של MCP, ‏ AppFunctions מספק פתרון במכשיר לאפליקציות ל-Android. בדומה ל-WebMCP, היא מריצה את הפונקציות האלה באופן מקומי במכשיר ולא בשרת.

השילוב של Samsung Gallery עם Gemini בסדרת Galaxy S26 מדגים את השימוש ב-AppFunctions. במקום לגלול ידנית באלבומי התמונות, עכשיו אפשר פשוט לבקש מ-Gemini: "תראה לי תמונות של החתול שלי מ-Samsung Gallery". ‫Gemini מקבל את השאילתה של המשתמש, מזהה בצורה חכמה את הפונקציה הנכונה ומפעיל אותה, ומציג את התמונות שהוחזרו מ-Samsung Gallery ישירות באפליקציית Gemini, כך שהמשתמשים לא צריכים לצאת ממנה. החוויה הזו היא מולטימודלית ואפשר לבצע אותה באמצעות הקול או הטקסט. המשתמשים יכולים אפילו להשתמש בתמונות שנוצרו בשיחות המשך, למשל לשלוח אותן לחברים בהודעת טקסט.

השילוב הזה זמין כרגע בסדרת Galaxy S26, ובקרוב הוא יורחב למכשירי סמסונג עם OneUI בגרסה 8.5 ומעלה. באמצעות AppFunctions,‏ Gemini כבר יכול לבצע אוטומציה של משימות בקטגוריות של אפליקציות כמו יומן, פתקים ו-Tasks, במכשירים של יצרנים שונים. המשתמשים יכולים לנהל את הפעילויות היומיומיות במקום אחד, בין אם מדובר בתיאום אירועים ביומן, בארגון הערות או בהגדרת תזכורות למשימות.

הפעלת אפליקציות אקטיביות באמצעות אוטומציה חכמה של ממשקי משתמש

הספרייה AppFunctions מספקת מסגרת מובנית ושליטה רבה יותר לאפליקציות כדי לתקשר עם סוכני AI ועוזרים דיגיטליים מבוססי-AI, אבל אנחנו יודעים שלא לכל אינטראקציה יש עדיין שילוב ייעודי. בנוסף, אנחנו מפתחים מסגרת לאוטומציה של ממשק המשתמש עבור סוכני AI ועוזרים וירטואליים מבוססי-AI, כדי לבצע באופן חכם משימות כלליות באפליקציות שהמשתמשים התקינו, עם שקיפות ושליטה מובנות למשתמשים. הפלטפורמה מבצעת את העבודה הקשה, כך שמפתחים יכולים להגיע לקהל רחב באמצעות סוכנים בלי לכתוב קוד. זו דרך פשוטה להרחיב את טווח ההגעה שלהם בלי להשקיע מאמץ הנדסי משמעותי בשלב הזה. 
 

כדי לקבל משוב בזמן שאנחנו משפרים את המסגרת הזו, אנחנו מתחילים עם גרסת טרום-השקה בסדרת Galaxy S26 ובמכשירי Pixel 10 נבחרים. המשתמשים יוכלו להעביר ל-Gemini משימות מרובות שלבים בלחיצה ארוכה על לחצן ההפעלה. התכונה הזו תושק כגרסת בטא באפליקציית Gemini, ותתמוך בהתחלה במבחר נבחר של אפליקציות בקטגוריות של משלוחי מזון, קניות ומוניות בארה"ב ובקוריאה. בין אם המשתמשים צריכים להזמין פיצה מורכבת בשביל בני המשפחה עם טעמים ספציפיים, לתאם נסיעה משותפת עם כמה עצירות עם עמיתים לעבודה או להזמין מחדש את הקנייה האחרונה שלהם במכולת, Gemini יכול לעזור להם להשלים את המשימות באמצעות ההקשר שכבר זמין מהאפליקציות שלהם, בלי שיהיה צורך בעבודת פיתוח.

המשתמשים שולטים בתהליך בזמן שמשימה מתבצעת ברקע באמצעות אוטומציה של ממשק המשתמש. בכל פעולת אוטומציה, המשתמשים יכולים לעקוב אחרי התקדמות המשימה באמצעות התראות או 'תצוגה בזמן אמת', ולעבור לשליטה ידנית בכל שלב כדי להשתלט על התהליך. בנוסף, Gemini מתוכנן להזהיר את המשתמשים לפני שהוא משלים משימות רגישות, כמו ביצוע רכישה. 

מה צפוי בהמשך

ב-Android 17, אנחנו רוצים להרחיב את היכולות האלה כדי להגיע לעוד משתמשים, מפתחים ויצרני מכשירים.

אנחנו יוצרים כרגע חוויות שימוש עם קבוצה קטנה של מפתחי אפליקציות, ומתמקדים בחוויית משתמש באיכות גבוהה ככל שהמערכת האקולוגית מתפתחת. בהמשך השנה נפרסם פרטים נוספים על השימוש ב-AppFunctions ובאוטומציה של ממשק המשתמש כדי להפעיל שילובים מבוססי-סוכן באפליקציה. נמשיך לעדכן.