不久前,字節跳動(dòng)豆包團隊發(fā)布豆包手機助手技術(shù)預覽版,引發(fā)廣泛關(guān)注。這款與中興通訊合作、搭載于努比亞M153工程樣機的AI助手,能夠跨應用完成訂票、購物比價(jià)、批量投遞簡(jiǎn)歷等復雜任務(wù),試圖將手機助手從“輔助工具"升級為"智能管家"。它到底如何“接管”手機,每一個(gè)環(huán)節是如何操作,用戶(hù)與AI的分工和邊界在哪里?
實(shí)測:AI操作需指令并彈窗授權
測試結果顯示,豆包手機助手的操作能力已超過(guò)傳統語(yǔ)音助手,在用戶(hù)明確指令下,AI可完成大部分操作。在實(shí)測中,首先嘗試了基礎的手機操作指令。當說(shuō)出“在B站搜索并播放‘影視颶風(fēng)’的最新視頻”的語(yǔ)音指令后,手機屏幕上方的靈動(dòng)島位即顯示B站圖標,提示正在執行操作,全程用戶(hù)可觀(guān)看。系統成功搜索到"影視颶風(fēng)"頻道并自動(dòng)播放其最新視頻,整個(gè)過(guò)程無(wú)需手動(dòng)操作。
測試者用更近一步的復雜的場(chǎng)景,再次測試助手的協(xié)同能力。當發(fā)出"下周三上午從成都前往杭州,在某旅行App查找四川航空最便宜的機票"的指令時(shí),豆包手機助手在要求下打開(kāi)該旅行App,填入出發(fā)地“成都”、目的地“杭州”,將日期選擇為“下周三”,并篩選出四川航空的航班列表,最終將最便宜的航班結果彈出展示給用戶(hù)。

涉及到支付等信息,在用戶(hù)確認后,系統可協(xié)助完成預訂流程。這種從“信息檢索”到“事務(wù)處理”的能力,實(shí)現了“指令助手”的定位。
不過(guò)實(shí)測也存在部分局限性。在嘗試讓助手在某主流購物 App 上完成商品比價(jià)下單時(shí),操作在登錄環(huán)節受阻,后續的搜索、比價(jià)流程無(wú)法繼續。
獨立開(kāi)關(guān)及三重機制明確用戶(hù)授權
據介紹,針對AI操作手機可能引發(fā)的授權和安全擔憂(yōu),豆包手機助手建立了"事前-事中-事后"三層授權體系。
事前授權階段,用戶(hù)首次打開(kāi)應用時(shí)將彈窗提示操作及權限使用場(chǎng)景。每次執行具體功能前,系統會(huì )在對話(huà)框詢(xún)問(wèn)用戶(hù),并提供"單次允許""始終允許""拒絕"三種選項。鎖屏狀態(tài)下喚醒助手則需通過(guò)人臉、聲紋或密碼鑒權,防止未經(jīng)授權的訪(fǎng)問(wèn)。此外各個(gè)App均有單獨開(kāi)關(guān),可獨立控制是否使用AI操作手機。

事中的管理機制更為細致。AI執行任務(wù)時(shí),狀態(tài)欄會(huì )通過(guò)"靈動(dòng)島"圖標實(shí)時(shí)展示操作進(jìn)度,用戶(hù)單擊即可進(jìn)入虛擬屏查看具體操作步驟。系統支持三種干預方式:雙擊虛擬屏手動(dòng)接管、點(diǎn)擊"停止"按鈕終止任務(wù)、通過(guò)"補充"按鈕修改需求。特別是在識別到涉及支付密碼、隱私信息修改等高風(fēng)險操作時(shí),系統會(huì )主動(dòng)提示用戶(hù)接管,必須經(jīng)用戶(hù)確認才能繼續執行。
事后管理環(huán)節,任務(wù)完成后系統會(huì )主動(dòng)呈現操作結果,用戶(hù)可隨時(shí)撤回操作權限、調整可操作應用范圍或清除聊天數據。
同時(shí),豆包手機助手官網(wǎng)通過(guò)發(fā)布隱私與數據使用白皮書(shū),對數據使用授權流程及隱私保護相關(guān)細節進(jìn)行了清晰、完整的說(shuō)明,保障用戶(hù)充分知情。
用戶(hù)始終擁有操作最終決策權
實(shí)測表明,豆包手機助手的技術(shù)預覽版在語(yǔ)音交互上十分創(chuàng )新。它一定程度上節省了用戶(hù)在應用間反復切換、填寫(xiě)信息的繁瑣操作。其分級授權與實(shí)時(shí)控制機制,也為AI深度融入系統級操作提供了基礎保障,這也為AI手機的創(chuàng )新發(fā)展提供了基礎。
當然,AI助手幫助用戶(hù)在各類(lèi)App間跳轉操作,意味著(zhù)傳統的行業(yè)邏輯可能會(huì )發(fā)生調整和適配。部分平臺對AI助手登錄的限制,正是這種生態(tài)博弈的早期信號。但長(cháng)期來(lái)看,這是一條必經(jīng)之路。手機AI助手領(lǐng)域"手機廠(chǎng)商+大模型廠(chǎng)商"的深度合作已成趨勢。谷歌Gemini與三星的跨界協(xié)同已為行業(yè)提供參考樣本,豆包也明確表示無(wú)自研手機計劃,將通過(guò)"生態(tài)合作"形式與多家手機廠(chǎng)商和第三方App洽談合作方案。
此前,北京大學(xué)武漢人工智能研究院副院長(cháng)呂鵬在接受采訪(fǎng)時(shí)表示,技術(shù)發(fā)展需堅守“人的主體性”,確保用戶(hù)始終擁有操作的最終決策權。在發(fā)展AI手機助手的過(guò)程中,需要監管方、生產(chǎn)商、App技術(shù)方協(xié)同構建通用智能體的交互協(xié)議,實(shí)現跨App的安全聯(lián)動(dòng)。
豆包手機助手在發(fā)布時(shí)也曾表示,將嚴格保護用戶(hù)隱私,產(chǎn)品仍將持續迭代優(yōu)化。正如測試中所見(jiàn),AI手機助手的"壓力測試"才剛剛開(kāi)始,技術(shù)成熟度、安全邊界、生態(tài)協(xié)同等問(wèn)題仍需時(shí)間解答。
長(cháng)按二維碼關(guān)注精彩內容





