產品最新消息

使用 Android XR SDK 開發人員預覽版 3 建構 AI 眼鏡專用應用程式,並解鎖沉浸式體驗的新功能

4 分鐘小故事
查看 Matthew McCullough 的個人資料
Matthew McCullough Android 開發人員產品管理副總裁

10 月時,Samsung 推出 Galaxy XR,這是首款搭載 Android XR 的裝置。看到各位的開發成果,我們感到非常驚豔!以下是部分開發人員對 Android XR 開發歷程的看法。

Android XR 為我們提供全新的應用程式建構世界。團隊應自問:您能打造的最大膽、最宏偉的體驗版本是什麼?現在您擁有可實現夢想的平台,終於有機會付諸行動。- Kristen Coke,Calm 首席產品經理

我們也分享了其他即將推出的 Android XR 裝置,例如 XREAL 的 Project Aura,以及 Gentle Monster 和 Warby Parker 的時尚眼鏡

為支援更多 XR 裝置,我們宣布推出 Android XR SDK 開發人員預覽版 3!

image.png

除了為 Galaxy XR 等裝置打造沉浸式體驗,您現在還能使用 Android XR SDK 開發人員預覽版 3,為即將推出的 Android XR AI 眼鏡打造擴增體驗

擴增體驗的新工具和程式庫

我們在開發人員預先發布版 3 中,提供您建構 AI 眼鏡智慧免持擴增實境體驗所需的工具和程式庫。AI 眼鏡輕巧好攜帶,適合全天候配戴。您可以擴充現有的行動應用程式,充分運用內建喇叭、攝影機和麥克風,提供貼心實用的全新使用者互動體驗。在 AI 智慧眼鏡上新增小型螢幕後,就能私下向使用者呈現資訊。AI 眼鏡非常適合用來提升使用者在現實世界中的專注力和臨場感。

image.png

為支援 AI 眼鏡的擴增體驗,我們在 Jetpack XR SDK 中推出了兩項專為此用途打造的新程式庫:

Jetpack Compose Glimmer 示範了設計最佳做法,可打造美觀的透視擴增實境體驗。Jetpack Compose Glimmer 專為清晰度、可讀性及減少干擾而設計,提供針對螢幕 AI 眼鏡的輸入模式和樣式需求最佳化的 UI 元件。

image.png

為協助您查看和測試 Jetpack Compose Glimmer UI,我們在 Android Studio 中推出了 AI 眼鏡模擬器。新的 AI 眼鏡模擬器可模擬觸控板和語音輸入等眼鏡專屬互動。

AI Glasses Emulator.gif

除了新的 Jetpack Projected 和 Jetpack Compose Glimmer 程式庫,我們也擴充了 ARCore for Jetpack XR,以支援 AI 眼鏡。我們首先推出動作追蹤地理空間功能,打造擴增實境體驗,這些功能可協助您建立實用的導覽體驗,非常適合全天配戴的裝置,例如 AI 眼鏡。

navigation.webp

擴大支援沉浸式體驗

我們將持續投入心力,開發支援XR 頭戴式裝置 (例如 Samsung Galaxy XR) 和有線 XR 眼鏡 (例如 XREAL 即將推出的 Project Aura) 沉浸式體驗的程式庫和工具。我們參考了大家的意見,並在開發人員預覽版 2 之後,為 Jetpack XR SDK 新增多項熱門功能。

Jetpack SceneCore  現在支援透過 URI 動態載入 glTF 模型,並改善材質支援,可在執行階段建立新的 PBR 材質。此外,SurfaceEntity 元件也強化了 Widevine 數位著作權管理 (DRM) 的完整支援功能和新形狀,可在球體和半球體中算繪 360 度和 180 度影片

Jetpack Compose for XR 中,您會發現新功能,例如用於追蹤行為的 UserSubspace 元件,可確保內容會顯示在使用者視野中,無論他們看向何處。此外,您現在可以使用空間動畫,製作滑動或淡出等流暢的轉場效果。此外,為了支援不斷擴大的沉浸式裝置生態系統,以及各種顯示功能,您現在可以將版面配置大小指定為使用者舒適視野的分數。

XR 專用的 Material Design 中,新元件會透過覆寫自動調整空間。包括可提升空間感的對話方塊,以及會彈出至軌道器的導覽列。此外,我們還提供新的 SpaceToggleButton 元件,方便您輕鬆切換至完整空間。


此外,ARCore for Jetpack XR 也新增了感知功能,包括臉部追蹤,可提供 68 個混合形狀值,解鎖各種臉部動作。您也可以使用眼動追蹤技術來控制虛擬化身,並運用深度地圖,與使用者的環境進行更逼真的互動。

針對 XREAL 的 Project Aura 等裝置,我們在 Android Studio 中推出了 XR 眼鏡模擬器。這項重要工具可準確呈現內容,並比照實際裝置的視野 (FoV)、解析度和 DPI 規格,加快開發速度。

xrglasses-emulator-haxr-cropped.webp

如果您使用 Unity 打造沉浸式體驗,我們也會在 Android XR SDK for Unity 中擴展您的感知能力。除了修正大量錯誤及其他改善項目,我們也擴充了追蹤功能,包括:QR 和 ArUco 碼、平面圖像和身體追蹤 (實驗功能)。我們也將推出眾所期待的場景網格功能。這項技術可讓您與使用者的環境進行更深入的互動,數位內容現在可以從牆壁彈開,還能爬上沙發!

這還只是冰山一角!詳情請參閱沉浸式體驗頁面。

立即踏出第一步!

Android XR SDK 開發人員預覽版 3 今天推出!下載最新 Android Studio Canary (Otter 3、Canary 4 以上版本),並升級至最新模擬器版本 (36.4.3 Canary 以上版本),然後前往 developer.android.com/xr,開始使用最新程式庫和範例,為日益豐富的 Android XR 裝置建構應用程式。我們與您攜手打造 Android XR!在 Android XR 學習歷程中,別忘了與我們的團隊分享意見、建議和想法

撰寫者:
繼續閱讀