作者 / 產(chǎn)品管理副總裁、Android 開發(fā)者 Matthew McCullough

用戶對(duì)設(shè)備上 AI 的期望正在從根本上改變他們與應(yīng)用交互的方式。相較于打開應(yīng)用按部就班地執(zhí)行任務(wù)，用戶現(xiàn)在更傾向于將繁雜的操作交由 AI 代勞。在這種新的交互模式中，成功的定義正在從 "讓用戶打開您的應(yīng)用" 轉(zhuǎn)變?yōu)?"成功完成各種任務(wù)并幫助他們更高效地達(dá)成目標(biāo)"。

為了幫助您打造適應(yīng)智能體未來發(fā)展的應(yīng)用，我們推出了早期開發(fā)者能力，以打通您的應(yīng)用與智能體應(yīng)用以及個(gè)性化助手 (如 Google Gemini) 之間的壁壘。雖然我們正處于這一進(jìn)程的早期測(cè)試階段，在探索應(yīng)用生態(tài)系統(tǒng)這一范式轉(zhuǎn)變的第一步中，我們依然將隱私和安全作為這些設(shè)計(jì)的核心。

使用 AppFunctions 助力應(yīng)用開發(fā)

Android AppFunctions 允許應(yīng)用直接向 AI 智能體和助手開放數(shù)據(jù)和功能。借助 AppFunctions Jetpack 庫(kù)和平臺(tái) API，開發(fā)者可以創(chuàng)建自描述函數(shù)，供智能體應(yīng)用通過自然語言發(fā)現(xiàn)和執(zhí)行。AppFunctions 為 Android 應(yīng)用提供了一套端側(cè)解決方案。它借鑒了 MCP 云服務(wù)器聲明后端能力的機(jī)制，并且與 WebMCP 類似——所有函數(shù)均在設(shè)備本地運(yùn)行，而非依賴服務(wù)器。

Galaxy S26 系列上已集成 Gemini 的 Samsung 相冊(cè)展示了 AppFunctions 的實(shí)際應(yīng)用。比如，您現(xiàn)在無需手動(dòng)瀏覽相冊(cè)，只需對(duì) Gemini 發(fā)出指令 "從 Samsung 相冊(cè)中找找我貓咪的照片"，Gemini 會(huì)接收用戶查詢，智能識(shí)別并觸發(fā)相應(yīng)的函數(shù)，并直接在 Gemini 應(yīng)用中呈現(xiàn)從 Samsung 相冊(cè)返回的照片，這樣用戶就無需離開當(dāng)前界面。這種體驗(yàn)是多模態(tài)的，可以通過語音或文字完成。用戶甚至可以在后續(xù)對(duì)話中使用返回的照片，例如通過短信發(fā)送給朋友。

此集成目前可在 Galaxy S26 系列上使用，并將很快擴(kuò)展到運(yùn)行 OneUI 8.5 及更高版本的 Samsung 設(shè)備。通過 AppFunctions，Gemini 已經(jīng)可以在多個(gè)制造商的設(shè)備上實(shí)現(xiàn)日歷、備忘錄和任務(wù)等應(yīng)用類別的自動(dòng)化操作。無論是協(xié)調(diào)日歷活動(dòng)、整理備忘錄還是設(shè)置待辦事項(xiàng)提醒，用戶都可以集中簡(jiǎn)化日?；顒?dòng)管理。

通過智能界面自動(dòng)化，為智能體應(yīng)用賦能

雖然 AppFunctions 為應(yīng)用與 AI 智能體和助手之間的通信提供了結(jié)構(gòu)化的框架和更多的控制權(quán)，但我們知道，并非所有交互都已擁有專屬的集成方案。我們還在為 AI 智能體和助手開發(fā)一套界面自動(dòng)化框架，以便智能地在用戶安裝的應(yīng)用上執(zhí)行通用任務(wù)，并內(nèi)置了用戶透明度和控制權(quán)機(jī)制。此平臺(tái)承擔(dān)了繁雜的工作，開發(fā)者無需編寫代碼即可實(shí)現(xiàn)各種智能體功能。這是一種低成本的方式，無需在當(dāng)下進(jìn)行大規(guī)模的工程開發(fā)即可擴(kuò)展其覆蓋范圍。

為了在改進(jìn)此框架時(shí)獲得反饋，我們將首先在 Galaxy S26 系列及部分精選的 Pixel 10 設(shè)備上推出早期預(yù)覽版，用戶只需長(zhǎng)按電源按鈕即可將多步驟任務(wù)委托給 Gemini。在 Gemini 應(yīng)用中推出的測(cè)試版功能將率先支持美國(guó)和韓國(guó)地區(qū)在外賣、雜貨及網(wǎng)約車等領(lǐng)域的精選應(yīng)用。無論用戶需要為口味各異的家庭成員訂購(gòu)復(fù)雜的披薩訂單、與同事協(xié)調(diào)有多個(gè)下車點(diǎn)的網(wǎng)約車行程，還是復(fù)購(gòu)上次的雜貨商品，Gemini 都可以利用應(yīng)用中已有的信息來協(xié)助完成任務(wù)，無需開發(fā)者進(jìn)行任何額外工作。

當(dāng)任務(wù)通過界面自動(dòng)化在后臺(tái)執(zhí)行時(shí)，用戶始終擁有控制權(quán)。對(duì)于任何自動(dòng)化操作，用戶都可以選擇通過通知或 "實(shí)時(shí)視圖" 來監(jiān)控任務(wù)的進(jìn)度，并可以隨時(shí)切換到手動(dòng)控制模式以接管任務(wù)。Gemini 也被設(shè)計(jì)為在完成敏感任務(wù) (比如進(jìn)行購(gòu)買) 之前提醒用戶。

展望未來

在 Android 17 中，我們希望擴(kuò)展這些能力，以覆蓋更多用戶、開發(fā)者和設(shè)備制造商。

我們目前正與一些應(yīng)用開發(fā)者協(xié)作打造這些體驗(yàn)，隨著生態(tài)系統(tǒng)的發(fā)展，我們將專注于提供高質(zhì)量的用戶體驗(yàn)，并計(jì)劃在今年晚些時(shí)候分享有關(guān)如何使用 AppFunctions 和界面自動(dòng)化為您的應(yīng)用集成智能體的更多詳細(xì)信息。