實測OPPO大模型手機：路人甲一抹就沒，電話粥一鍵總結(jié)

明敏 發(fā)自 凹非寺

量子位 | 公眾號 QbitAI

都說2024會是AI Agent元年，殺手級應(yīng)用將要出現(xiàn)。

但就在開年，已經(jīng)看到不一樣的思路。

與其做單個Agent應(yīng)用，不如把系統(tǒng)能力提升為Agent級。

不僅讓大模型加持智能助手，還能讓系統(tǒng)工具也具備AIGC能力。

比如一鍵消除照片中的人群：

讓AI總結(jié)打電話內(nèi)容：

而且語音摘要處理全程加密，生成內(nèi)容完全存儲在本地。

如上效果，都來自O(shè)PPO最新發(fā)布的Find X7系列。

它內(nèi)置端側(cè)大模型，整個手機、系統(tǒng)的AI濃度拉滿。

通過端云協(xié)同，首發(fā)了AI大模型語音摘要功能，系統(tǒng)還可直接搞定AI文章摘要、AIGC消除。同時智能助手小布也擁有超過100+AI能力。

具體能力到底如何？我們實測了一把~

手機更像Agent了

結(jié)合發(fā)布來看，這一次Find X7系列主要帶來的新AI能力體現(xiàn)在4個方面，圖文語音都覆蓋了。

• AIGC消除
• AI大模型語音摘要
• AI文章摘要
• 小布助手升級

值得關(guān)注的是，其中有三個方面都體現(xiàn)在系統(tǒng)應(yīng)用上。

AIGC消除內(nèi)置在系統(tǒng)相冊里。只需把想要消除的內(nèi)容圈起來，或者涂抹掉，大模型就能識別、消除。

處理效果非常自然，看不出任何修改的痕跡。

它支持識別與分割的主題超過120類，可以實現(xiàn)發(fā)絲級的分割、高達6個的多主體分離，以及超大面積圖像的填充和自然生成。

第二個升級的系統(tǒng)級AI能力是AI大模型語音摘要。

Find X7系列內(nèi)置端側(cè)大模型，讓手機本身具備了更高理解能力。

打電話時只要點擊“智能摘要”，在結(jié)束通話后即可得到一份總結(jié)。

總結(jié)中不僅包括重點提及的時間、地點、事件，而且會清楚區(qū)分電話雙方分別說了什么內(nèi)容，智能摘取出待辦事項。

與此同時，在端側(cè)大模型支持下，手機本身也具備了文本摘要總結(jié)能力。

在各種網(wǎng)頁、APP中看到的長文，都可以通過雙指按屏、一掃，總結(jié)摘要。

摘要最長可生成14000字，生成速度也非常快。200字首字生成帶來20倍更快響應(yīng)，2000字首字生成可以實現(xiàn)2.5倍更快速度。

而除了這些系統(tǒng)工具更加AI化，小布助手本身也有了重大升級。

它現(xiàn)在具備100多種AI能力，可以覆蓋日常生活、辦公創(chuàng)作等場景。

對話語氣也更加自然，會根據(jù)場景帶入角色和情緒。

如上就是“大模型手機”O(jiān)PPO Find X7系列帶來的最新AIGC能力。

可以看到，在拓展AndesGPT對應(yīng)用、終端的影響上，OPPO的腳步非?？?。距離ODC 2023才過去不到2個月，就又有新能力釋放，而且還給了新思路。

“意料之外”與“情理之中”

有點意外的是，這些新增能力沒有局限于智能助手小布，而是同時把系統(tǒng)功能AI化。

這是一種比較新鮮的嘗試。

當(dāng)下，大模型影響移動終端的終極想象比較統(tǒng)一，就是把系統(tǒng)打造成一個強大的Agent，讓人和手機的交互，變成鋼鐵俠和賈維斯那樣，人類只需發(fā)出指令，所有操作交給系統(tǒng)自己完成。

具體如何走到這一步？

一種通常的思路是，通過大模型不斷加強系統(tǒng)智能助手的能力，直到它能夠自如操作系統(tǒng)。

從OPPO當(dāng)下的動作來看，其實還可以有一種思路：讓系統(tǒng)開始AI化，打造Agent級的系統(tǒng)功能，而且要從最日常的功能開始入手。

相較于前者，這種思路的好處有很多。

一方面，用戶能更快在手機上把AI用起來。而且最先Agent化的功能都是用戶最常用的功能，提升它們的能力，滿足用戶提升體驗的基本要求。

另一方面，廠商也能在這一過程中，逐步積累技術(shù)，基于實踐洞察用戶需求，做更有針對性的創(chuàng)新，慢慢讓操作系統(tǒng)轉(zhuǎn)變?yōu)閺姶蟮腁gent。

這種新思路在2024開年提出，無疑給Agent元年打開新趨勢。

那么問題來了，為什么OPPO會想到這一方向？基于哪些實踐？背后又有哪些思考？

OPPO安第斯大模型的“英雄出處”

想要回答這些問題，還要從OPPO的大模型腳步看起。

梳理來看，主要可分為三個部分：

• 大模型能力積累
• 大模型與系統(tǒng)深度融合
• 軟硬一體，全面賦能智慧交互體驗

首先在基礎(chǔ)能力探索方面，對于OPPO而言，起點不是2023而是2020年。

當(dāng)時OPPO自研出了大模型OBERT。這個模型在架構(gòu)上引入了1+N的多任務(wù)聯(lián)合學(xué)習(xí)機制，可以通過精品知識圖譜不斷增強知識能力。它曾一度躍居中文大規(guī)模知識圖譜問答KgCLUE排行榜首位，同時還能結(jié)合億級用戶交互數(shù)據(jù)進行反饋學(xué)習(xí)，不斷迭代演進。

在早期積累好大模型開發(fā)能力后，趨勢爆發(fā)之時，OPPO便快速行動。

幾個月前，OPPO正式發(fā)布自主訓(xùn)練的最新一代大模型安第斯大模型（AndesGPT）。

它一共有三種參數(shù)規(guī)格，十億至千億不等：

• Andes-Tiny：輕量化模型，支持端側(cè)本地化部署，可以做到用戶隱私數(shù)據(jù)隔離和離網(wǎng)可運行。
• Andes-Turbo：可提供性能和效果均衡的體驗，可以快速支持多場景適配。
• Andes-Titan：千億級參數(shù)規(guī)模，面向高度復(fù)雜的任務(wù)，支持深度推理。

AndesGPT具備的三大技術(shù)特點——對話增強、個性專屬、端云協(xié)同，這也是以用戶為先，OPPO思考手機在落地大模型過程中，最應(yīng)該被關(guān)心的幾個方面。

對話增強方面，OPPO自研的Swapped Attention機制，針對手機場景中的多輪長對話問題。

它通過外部存儲和KV壓縮方式，實現(xiàn)會話級KV緩存。結(jié)合PagedAttention算法一起使用，能帶來50%的首字延遲降低，以及30%的推理吞吐提升。

這樣一來，在和用戶進行多輪對話后，模型的推理速度也不會明顯降低。

個性專屬方面，AndesGPT會深度融合“用戶畫像”和“個人數(shù)據(jù)”，讓小布助手不僅擁有海量知識，還能基于過往對話內(nèi)容和習(xí)慣，提供“千人千面”的服務(wù)。

端云協(xié)同方面，OPPO推出多種模型規(guī)格，輕量級模型負責(zé)處理需要快速響應(yīng)的任務(wù)，云端大模型則負責(zé)深度推理任務(wù)，這樣能保障全場景智能調(diào)度。

很明顯，和基礎(chǔ)大模型廠商的思路不同，OPPO作為深入用戶場景的廠商，在構(gòu)建模型時就遵循用戶為中心的原則。構(gòu)建好基礎(chǔ)大模型，就要開始關(guān)注大模型如何在手機場景落地。

步步為營的AndesGPT

OPPO的做法是先和軟件系統(tǒng)深度融合，然后再推出旗艦硬件。

在發(fā)布Find X7系列之前，ODC 2023上，潘塔納爾和AndesGPT先組合亮相。

它們能夠從用戶情景、上下文對話、正在發(fā)生事件等多維度變量信息中，深度理解用戶當(dāng)前需求。與此同時小布助手升級，能在手機上完成諸多AIGC任務(wù)。

緊接著，OPPO Find X7系列內(nèi)置端側(cè)大模型。借著新機發(fā)布，OPPO也帶來一系列大模型應(yīng)用方面創(chuàng)新，不僅擴充小布能力，也將AI進一步向系統(tǒng)引入。通過軟硬結(jié)合、端云協(xié)同，OPPO Find X7系列能帶來更加完整的大模型體驗。

透過這些實際動作便不難理解，為什么OPPO可以提出趨勢發(fā)展中的新思路。

一方面，OPPO積累了大模型底層技術(shù)，能更準確判斷技術(shù)將會產(chǎn)生何種影響。

目前可以明確的是，大模型將影響人機交互范式。放到手機這一領(lǐng)域，將是系統(tǒng)級的改變，操作系統(tǒng)一定會被大模型重塑。

另一方面，智能手機市場龐大又復(fù)雜，大模型勢可以影響諸多方面，但是先做什么、不做什么，不能僅基于廠商的經(jīng)驗判斷，必須要看用戶的實際需求和反饋。

這就使得在大模型落地手機這件事上，想要做得徹底，就無法急于求成。而另一邊，需求浮現(xiàn)出來就要立刻抓住，才能逐漸鋪開大模型能力。

在找到路線后，具體做法上，OPPO也給出了參考——打造AndesGPT生態(tài)。

在ODC 2023上，OPPO表示AndesGPT的目標是，為每個人打造有用的大模型及智能體。同時開源Agent框架，打造一站式的“智能體開發(fā)平臺”，支持智能體的高效孵化、托管與應(yīng)用。

智能體的開源，能夠讓B端和C端都可以便捷地構(gòu)建自己的應(yīng)用生態(tài)。低代碼、零代碼創(chuàng)建自己的智能體應(yīng)用，則能讓更多人都可以參與到OPPO的大模型應(yīng)用生態(tài)中。

同樣，將系統(tǒng)級能力提升為Agent級，也是為了豐富AndesGPT生態(tài)。

它展示Agent之于手機終端，能夠如何拓展工具邊界、如何調(diào)用和處理數(shù)據(jù)以及如何根據(jù)指令靈活操作。更揭示了將大模型作為內(nèi)核驅(qū)動系統(tǒng)、重塑終端的巨大潛力。

為了積極推動AndesGPT生態(tài)。在前沿算法研究方面，OPPO一手抓產(chǎn)學(xué)研，一手握開發(fā)者。

OPPO已經(jīng)聯(lián)合中國科學(xué)技術(shù)大學(xué)成立智能計算聯(lián)合實驗室；并即將開啟開源計劃，打造面向開發(fā)者開源的智能體開發(fā)平臺，打造Agent Store，支持Agent的高效孵化、托管與應(yīng)用。

另外，OPPO也在傾盡全力加入大模型浪潮。OPPO高級副總裁、首席產(chǎn)品官劉作虎直言，今年手機公司再不布局大模型就沒戲了。

目前OPPO已經(jīng)成立一個AI中心，將公司內(nèi)所有AI相關(guān)的伙伴都集中在一個獨立系統(tǒng)，目的就是為了集中所有資源，作為核心競爭力。

一手打造生態(tài)，一手賦能終端

總結(jié)來看，OPPO當(dāng)下想做的事核心有兩件：

• 打造AndesGPT生態(tài)
• AndesGPT重塑終端

如今行業(yè)內(nèi)已經(jīng)達成共識，只做大模型還不夠，必須要構(gòu)建大模型生態(tài)。

OPPO計劃打造“千人千面”的模型生態(tài)，大模型能夠依據(jù)不同背景、使用方式來決定它的實際價值和使用效果。因此大模型必須要學(xué)會結(jié)合應(yīng)用環(huán)境、滿足個性化需求。

這個過程里，終端是重要載體。

它記錄了用戶的習(xí)慣、喜好、個人知識庫等，能天生為大模型個性化服務(wù)?；诮K端這個重要載體，廠商和開發(fā)者能夠更好挖掘用戶需求，用戶也能及時進行反饋，生態(tài)由此也將更加蓬勃發(fā)展。

與此同時，打造大模型生態(tài)，最終也是為了重塑終端。

手機作為離用戶最近的一塊屏幕，它已經(jīng)成為連接各種智能終端的核心樞紐。種種趨勢都顯示，AI是手機終端發(fā)展的新引擎。上一代手機智能助手打開了大眾對于私人AI助理的想象，現(xiàn)在在大模型加持下，這種想象變得更加確定。

由此也就不難理解OPPO在Agent元年開始，即亮出大動作。

隨著大模型應(yīng)用落地進展加快，今年大模型生態(tài)和大模型終端一定還會發(fā)生更多新故事。而在趨勢發(fā)生早期就已梳理出明確路線的玩家，也更有機會引領(lǐng)趨勢、站上潮頭。

你覺得呢？