Ekspektasi pengguna terhadap AI di perangkat mereka pada dasarnya mengubah cara mereka berinteraksi dengan aplikasi. Alih-alih membuka aplikasi untuk melakukan tugas langkah demi langkah, mereka meminta AI untuk melakukan tugas berat bagi mereka. Dalam model interaksi baru ini, kesuksesan bergeser dari membuat pengguna membuka aplikasi Anda, menjadi berhasil memenuhi tugas mereka dan membantu mereka menyelesaikan lebih banyak tugas dengan lebih cepat. 

Untuk membantu Anda mengembangkan aplikasi untuk masa depan yang didukung agen ini, kami memperkenalkan kemampuan developer tahap awal yang menjembatani kesenjangan antara aplikasi Anda dan aplikasi yang didukung agen serta asisten yang dipersonalisasi, seperti Google Gemini. Meskipun kami masih dalam tahap awal dan beta dari perjalanan ini, kami mendesain fitur ini dengan privasi dan keamanan sebagai intinya sebagai langkah pertama kami dalam menjelajahi perubahan paradigma ini sebagai ekosistem aplikasi.

Memberdayakan aplikasi dengan AppFunctions

AppFunctions Android memungkinkan aplikasi mengekspos data dan fungsi langsung ke agen dan asisten AI. Dengan AppFunctions library Jetpack dan API platform, developer dapat membuat fungsi yang menjelaskan sendiri yang dapat ditemukan dan dieksekusi oleh aplikasi yang didukung agen melalui bahasa alami. Mencerminkan cara kemampuan backend dideklarasikan melalui server cloud MCP, AppFunctions menyediakan solusi di perangkat untuk aplikasi Android. Seperti WebMCP, fungsi ini dieksekusi secara lokal di perangkat, bukan di server.

Integrasi Samsung Gallery dengan Gemini di seri Galaxy S26 menampilkan AppFunctions dalam tindakan. Alih-alih men-scroll album foto secara manual, kini Anda dapat meminta Gemini untuk "Tampilkan foto kucing saya dari Samsung Gallery". Gemini mengambil kueri pengguna, mengidentifikasi dan memicu fungsi yang tepat secara cerdas, serta menampilkan foto yang ditampilkan dari Samsung Gallery langsung di aplikasi Gemini, sehingga pengguna tidak perlu keluar. Pengalaman ini bersifat multimodal dan dapat dilakukan melalui suara atau teks. Pengguna bahkan dapat menggunakan foto yang ditampilkan dalam percakapan lanjutan, seperti mengirimkannya ke teman dalam pesan teks.

Integrasi ini saat ini tersedia di seri Galaxy S26 dan akan segera diperluas ke perangkat Samsung yang menjalankan OneUI 8.5 dan yang lebih tinggi. Melalui AppFunctions, Gemini sudah dapat mengotomatiskan tugas di berbagai kategori aplikasi seperti Kalender, Catatan, dan Tugas, di perangkat dari berbagai produsen. Baik untuk mengoordinasikan acara kalender, mengatur catatan, atau menetapkan pengingat tugas, pengguna dapat menyederhanakan aktivitas harian di satu tempat.

Mengaktifkan aplikasi yang didukung agen dengan otomatisasi UI cerdas

Meskipun AppFunctions menyediakan framework terstruktur dan kontrol yang lebih besar bagi aplikasi untuk berkomunikasi dengan agen dan asisten AI, kami tahu bahwa tidak setiap interaksi memiliki integrasi khusus. Kami juga mengembangkan framework otomatisasi UI untuk agen dan asisten AI agar dapat menjalankan tugas umum secara cerdas di aplikasi yang diinstal pengguna, dengan transparansi dan kontrol pengguna bawaan. Platform ini melakukan tugas berat, sehingga developer dapat menjangkau agen tanpa kode. Cara ini adalah cara yang mudah untuk memperluas jangkauan mereka tanpa perlu melakukan upaya teknik yang besar saat ini. 
 

Untuk mendapatkan masukan saat kami menyempurnakan framework ini, kami memulai dengan pratinjau awal di seri Galaxy S26 dan perangkat Pixel 10 tertentu, tempat pengguna dapat mendelegasikan tugas multilangkah ke Gemini hanya dengan menekan lama tombol daya. Diluncurkan sebagai fitur beta di aplikasi Gemini, fitur ini akan mendukung pilihan aplikasi yang dikurasi dalam kategori pengiriman makanan, bahan makanan, dan transportasi online di Amerika Serikat dan Korea untuk memulai. Baik pengguna perlu melakukan pemesanan pizza yang kompleks untuk anggota keluarga dengan selera tertentu, mengoordinasikan transportasi online multi-tujuan dengan rekan kerja, atau memesan ulang pembelian bahan makanan terakhir, Gemini dapat membantu menyelesaikan tugas menggunakan konteks yang sudah tersedia dari aplikasi Anda, tanpa perlu melakukan pekerjaan developer.

Pengguna memiliki kontrol saat tugas sedang dilakukan di latar belakang melalui otomatisasi UI. Untuk setiap tindakan otomatisasi, pengguna memiliki opsi untuk memantau progres tugas melalui notifikasi atau "tampilan langsung" dan dapat beralih ke kontrol manual kapan saja untuk mengambil alih pengalaman. Gemini juga dirancang untuk memperingatkan pengguna sebelum menyelesaikan tugas sensitif, seperti melakukan pembelian. 

Visi ke depan

Di Android 17, kami ingin memperluas kemampuan ini untuk menjangkau lebih banyak pengguna, developer, dan produsen perangkat.

Saat ini, kami sedang membangun pengalaman dengan sekelompok kecil developer aplikasi, yang berfokus pada pengalaman pengguna berkualitas tinggi seiring dengan perkembangan ekosistem. Kami berencana untuk membagikan detail selengkapnya pada akhir tahun ini tentang cara menggunakan AppFunctions dan otomatisasi UI untuk mengaktifkan integrasi yang didukung agen untuk aplikasi Anda. Nantikan kabar terbarunya.