Dari agen dalam aplikasi hingga sistem kecerdasan Android: Yang baru di aplikasi cerdas di Android Developer Summit

Di era kecerdasan, pengguna tidak lagi hanya mengetuk aplikasi, mereka mengekspresikan sasaran tingkat tinggi dan mengharapkan agen AI seperti Gemini untuk menyelesaikan alur kerja multilangkah, terkadang di beberapa aplikasi di perangkat mereka. Untuk membantu Anda menjangkau pengguna di mana pun mereka berada, kami membuka cara baru untuk membangun pengalaman agentic yang cerdas di aplikasi Android Anda:

• Terhubung dengan sistem kecerdasan Android: Bagikan kemampuan aplikasi Anda kepada agen sistem dengan MCP Android. Untuk mengizinkan pengguna terhubung langsung dengan aplikasi Anda melalui aplikasi Gemini dan Google Penelusuran di Android, bergabunglah dengan program pratinjau Platform Aplikasi Terhubung.
• Hadirkan kecerdasan ke dalam aplikasi Anda: Bangun fitur dan agen cerdas di perangkat dengan API GenAI ML Kit, hadirkan model ML kustom Anda dengan LiteRT di layanan Google Play. Manfaatkan model Gemini di Cloud dengan Firebase AI Logic, dan aktifkan agen Anda untuk membangun UI Compose native dengan perender A2UI Compose.

Anda telah melihat beberapa API dan alat developer baru ini di keynote Android Developer Summit. Sekarang, pelajari referensi pembahasan mendalam baru kami untuk membantu Anda membangun aplikasi cerdas, termasuk 10 sesi on-demand baru seputar pengalaman cerdas baru.

Menghubungkan dengan sistem kecerdasan Android

Sistem kecerdasan Android adalah fondasi sistem yang dirancang untuk melindungi pengguna sekaligus menghubungkan agen AI dengan aplikasi di perangkat Android. Asisten ini memberikan bantuan yang diminta dan bantuan proaktif kepada pengguna di seluruh ekosistem Android yang mencakup ponsel, perangkat wearable, kacamata XR, TV, dan mobil. 

• Bantuan yang diminta: Saat pengguna secara aktif meminta agen untuk memenuhi sasaran (misalnya, "periksa kalender saya, pesan transportasi online, dan kirim pesan ke Jingyu tentang perkiraan waktu kedatangan saya"), agen akan mengorkestrasi alat di berbagai aplikasi untuk menyelesaikannya. Untuk eksekusi tercepat dan paling andal, Anda dapat menggunakan server MCP jarak jauh atau MCP Android lokal. Agen juga dapat beralih menggunakan framework Computer Control Android untuk menyelesaikan tindakan tanpa memerlukan integrasi sisi aplikasi.
• Bantuan proaktif: Sistem mengantisipasi kebutuhan pengguna dan menampilkan chip saran kontekstual langsung di layar kunci, notifikasi, keyboard virtual, dan dalam aplikasi. 

Kami memberi Anda kontrol atas cara aplikasi Anda berintegrasi dengan sistem kecerdasan Android dengan menyediakan API dan alat berdasarkan standar MCP yang sudah dikenal. Android MCP, yang didukung oleh library Jetpack AppFunctions, adalah framework panggilan alat terpadu kami. Fitur ini memungkinkan Anda terhubung dengan agen AI yang memenuhi syarat langsung di perangkat, baik agen sistem maupun agen dalam aplikasi di perangkat Anda sendiri. Server MCP jarak jauh memberi Anda jangkauan lintas platform. 

MCP Android melengkapi MCP jarak jauh sebagai solusi native Android dan merupakan jalur integrasi yang direkomendasikan jika perjalanan pengguna Anda menggunakan enkripsi end-to-end atau data perangkat lokal yang sensitif, memerlukan sensor dan hardware perangkat, perlu dijalankan secara lokal, atau jika tidak ada endpoint server yang tersedia. 

Untuk mempelajari lebih lanjut sistem kecerdasan Android dan berintegrasi dengan Gemini sebagai agen sistem, tonton diskusi ini: 

Menghadirkan kecerdasan ke dalam aplikasi Anda: dari agen di perangkat hingga perender Compose A2UI

Dengan kapabilitas baru yang tersedia di Gemini Nano 4 seperti pemanggilan fungsi, kami memperluas API GenAI ML Kit untuk membangun Agentic Workflows sepenuhnya di perangkat. Kami menyediakan elemen penyusun langsung dengan akses model langsung ML Kit dengan Prompt API dan Agentic API baru yang otomatis menjalankan fungsi untuk Anda, menyimpan histori percakapan, mengelola loop orkestrasi, dan menyertakan guardrail otomatis. Lihat contoh kode Jetpacker di GitHub dan tonton video ini untuk mempelajari lebih lanjut cara mengaktifkan kemampuan agen di aplikasi Anda dengan ML Kit GenAI API: 

Selain Agentic API baru, kami menghadirkan serangkaian kemampuan baru di perangkat:

• Dapatkan ringkasan GenAI API ML Kit di perangkat, mulai dari fitur Prompt API seperti mode penalaran dan petunjuk sistem hingga API alfa baru seperti Embeddings API, yang didukung oleh EmbeddingGemma 2. Anda juga akan mempelajari pengoptimalan sistem Android di balik layar dan melihat kasus penggunaan GenAI di perangkat yang umum dan sudah dalam tahap produksi.
• Pelajari arsitektur model Gemini Nano 4, yang dibangun di atas Gemma 4, secara mendalam. Didukung oleh embedding per lapisan, pelatihan berbasis kuantisasi, dan prediksi multi-token, Gemini Nano 4 memberikan kecepatan inferensi hingga 3x lipat sekaligus mengurangi penggunaan memori hingga 4x lipat dibandingkan dengan versi model Gemini Nano sebelumnya dalam tolok ukur pengujian internal.
• Anda dapat menjalankan model ML kustom dengan performa GPU yang lebih cepat menggunakan LiteRT di layanan Google Play yang menghapus runtime dari APK Anda sehingga ukuran APK Anda menjadi sekitar 8 MB lebih kecil. Kini juga tersedia di Wear OS dan Android Automotive OS. Baik Anda menggunakan API ML Kit siap pakai atau membawa model edge kustom Anda sendiri, baca pengumuman dan tonton presentasi ini.
• Lihat bagaimana API ini digabungkan dalam aplikasi dunia nyata, mulai dari pengajar bahasa XR yang menggunakan API pengenalan ucapan, terjemahan ucapan, dan text-to-speech ML Kit di ponsel dan kacamata pintar, hingga co-driver AI Formula E yang dibuat dengan Gemini Nano, akses model langsung ML Kit, dan Agent Development Kit (ADK). 

Untuk alur kerja yang mencakup pemrosesan cloud dan lokal, Firebase AI Logic menawarkan solusi hybrid yang mudah. Anda dapat memanggil model cloud lanjutan seperti Gemini 4 saat menggunakan inferensi di perangkat dengan Gemini Nano jika tersedia. Untuk melindungi aplikasi Anda dan mengelola biaya dalam produksi, gunakan Firebase App Check, template perintah server baru, dan batas pengeluaran Firebase. 

Seperti yang ditampilkan dalam demo keynote dengan asisten pemesanan langsung Jetpacker, perender A2UI Jetpack Compose kini tersedia dalam versi alfa untuk membantu agen Anda "berinteraksi dengan UI". Agen Anda dapat melakukan streaming UI Compose native yang kaya dan interaktif langsung dari protokol JSON. Mulai gunakan perender A2UI Compose dan berikan masukan Anda kepada kami. Tonton diskusi ini untuk mengetahui cara menerapkannya di aplikasi Anda. 

Menjangkau pengguna di Gemini dan Penelusuran dengan Platform Aplikasi Terhubung

Di berbagai platform Google, pengguna beralih dari mengajukan pertanyaan menjadi mengambil tindakan. Kami memperkenalkan Platform Aplikasi Terhubung agar Anda dapat menjangkau pengguna dengan niat tinggi di Gemini dan Penelusuran, yang menggabungkan MCP Android untuk eksekusi native di perangkat dengan server MCP jarak jauh untuk jangkauan lintas platform. Anda dapat mulai membangun dan menguji secara lokal sekarang juga dengan Mode Developer Aplikasi Gemini. Jika Anda sudah siap untuk produksi, bergabunglah ke daftar tunggu pratinjau; kapasitas pratinjau saat ini terbatas untuk aplikasi siap produksi tertentu dalam kategori yang didukung, dengan akses layanan mandiri yang lebih luas akan hadir nanti. 

Untuk memandu Anda dalam membangun, menguji, dan memublikasikan Aplikasi Terhubung pertama Anda, tonton Perluas aplikasi Anda ke Gemini dan Penelusuran dengan Platform Aplikasi Terhubung.

Mulai membangun aplikasi cerdas dengan update terbaru

Untuk mulai membangun, buat agen di perangkat dengan alur kerja agentic ML Kit bersama akses model langsung dengan kemampuan Android baru.  Pastikan Anda ikut serta dalam program Pratinjau Developer AIcore saat menguji kemampuan baru dalam model pratinjau. Hadirkan fitur cerdas ke aplikasi Anda dengan ML Kit API dan jalankan model ML kustom dengan LiteRT di Layanan Google Play. Jalankan Inferensi dengan model Gemini di cloud dengan Firebase AI Logic secara langsung dan streaming UI Compose native dari JSON menggunakan perender Jetpack Compose A2UI. Terakhir, integrasikan dengan sistem kecerdasan Android, buat prototipe dengan MCP Android menggunakan kemampuan dan agen contoh AppFunctions, dan daftar ke Pratinjau Developer Platform Aplikasi Terhubung.

Kami menantikan karya Anda.