豆包發(fā)布手機(jī)助手技術(shù)預(yù)覽版 正與多家手機(jī)廠商洽談合作

12月1日，字節(jié)跳動(dòng)豆包團(tuán)隊(duì)發(fā)布豆包手機(jī)助手技術(shù)預(yù)覽版。

據(jù)介紹，豆包手機(jī)助手，是在豆包APP的基礎(chǔ)上，和手機(jī)廠商在操作系統(tǒng)層面合作的AI助手軟件。基于豆包大模型的能力和手機(jī)廠商的授權(quán)，豆包手機(jī)助手能夠?yàn)橛脩魩?lái)更方便的交互和更豐富的體驗(yàn)。

豆包大模型能力全面，模型在推理、視覺(jué)理解、圖像創(chuàng)作、視頻生成、語(yǔ)音等方面的性能達(dá)到國(guó)際一流水平，圖形界面操作能力更是在多項(xiàng)權(quán)威評(píng)測(cè)中獲得業(yè)界最佳成績(jī)，可以像人類一樣操作手機(jī)，完成各種復(fù)雜任務(wù)。

在手機(jī)助手的落地路徑上，豆包明確表示沒(méi)有自研手機(jī)計(jì)劃，正與多家手機(jī)廠商洽談，以“生態(tài)合作”形式將豆包手機(jī)助手整合進(jìn)不同品牌機(jī)型中，相關(guān)進(jìn)展將在后續(xù)公布。

現(xiàn)階段，開(kāi)發(fā)者和科技愛(ài)好者可以在豆包與中興合作的工程樣機(jī)nubiaM153上，體驗(yàn)豆包手機(jī)助手的技術(shù)預(yù)覽版本。目前該版本已面向開(kāi)發(fā)者和科技愛(ài)好者少量發(fā)售，售價(jià)3499元。

在豆包手機(jī)助手發(fā)布的技術(shù)預(yù)覽版演示視頻中可以看到，AI助手在與手機(jī)廠商深度合作后，操作手機(jī)能力和便捷調(diào)用大模型能力，成為一大亮點(diǎn)。

視頻顯示，用戶可通過(guò)語(yǔ)音、側(cè)邊鍵或豆包OlaFriend耳機(jī)直接喚醒豆包，實(shí)現(xiàn)更便捷的交互。在任意界面使用手機(jī)時(shí)，用戶都可以直接就屏幕內(nèi)容向豆包手機(jī)助手提問(wèn)以獲取更多信息。同時(shí)，豆包手機(jī)助手也將語(yǔ)音通話、視頻通話和屏幕共享等豆包用戶常用功能嵌入助手中，用戶雙擊側(cè)邊AI鍵即可調(diào)用。

多模態(tài)方面，豆包手機(jī)助手打通了系統(tǒng)原生相冊(cè)，用戶可直接在相冊(cè)內(nèi)通過(guò)語(yǔ)音對(duì)圖片下達(dá)修圖指令，例如刪除人物、清理雜物等。

值得關(guān)注的是，豆包手機(jī)助手的AI操作手機(jī)功能。據(jù)介紹，該功能可根據(jù)用戶指令在多款應(yīng)用間自動(dòng)跳轉(zhuǎn)，幫助用戶完成類似查票訂票、商品下單、批量下載文件、多軟件物流進(jìn)度一鍵查詢等任務(wù)。

以視頻演示的跨平臺(tái)比價(jià)下單場(chǎng)景為例，用戶在社交媒體上被種草商品，只需說(shuō)出“幫我在全平臺(tái)比價(jià)下單”，豆包手機(jī)助手即可在多個(gè)電商平臺(tái)搜索同款商品，對(duì)比價(jià)格和規(guī)格，自動(dòng)領(lǐng)券后選擇最低價(jià)的商品下單。不過(guò)，涉及支付等高敏感環(huán)節(jié)時(shí)，助手會(huì)提示用戶手動(dòng)完成，以降低誤操作及安全風(fēng)險(xiǎn)。AI操作的過(guò)程中，用戶仍可正常使用手機(jī)。

為提升個(gè)性化程度，豆包手機(jī)助手提供記憶功能，支持用戶按需開(kāi)啟，并嚴(yán)格保護(hù)用戶數(shù)據(jù)隱私安全。

基于記憶，豆包手機(jī)助手還上線了操作手機(jī)Pro模式。該模式除調(diào)用GUIAgent（模擬點(diǎn)擊）外，還可直接調(diào)用系統(tǒng)工具，結(jié)合記憶數(shù)據(jù)與更強(qiáng)的推理能力，更高效地幫助用戶完成復(fù)雜任務(wù)。官方視頻舉例稱，在操作手機(jī)Pro模式下，當(dāng)用戶說(shuō)“幫我給女兒推薦幾個(gè)禮物放進(jìn)購(gòu)物車(chē)”時(shí)，若記憶中已存儲(chǔ)女兒的年齡、興趣等信息，助手可直接查詢符合女兒年齡、偏好的方案，無(wú)需用戶逐一交代細(xì)節(jié)。

不過(guò)，豆包手機(jī)助手也在官方視頻的結(jié)尾特別提示，盡管演示內(nèi)容均為真實(shí)錄制，但受限于大模型技術(shù)的不確定性，相關(guān)場(chǎng)景無(wú)法保證百分百?gòu)?fù)現(xiàn)。當(dāng)前產(chǎn)品實(shí)際可用性與團(tuán)隊(duì)預(yù)期仍有差距，未來(lái)仍將持續(xù)迭代優(yōu)化。

有行業(yè)分析指出，大模型行業(yè)發(fā)展迅速，當(dāng)前手機(jī)AI助手領(lǐng)域正呈現(xiàn)"手機(jī)廠商+大模型廠商"深度合作的清晰趨勢(shì)。例如谷歌Gemini與三星的合作探索，已為行業(yè)提供跨界協(xié)同的參考樣本。