把大模型裝進手機，AI幫我打工更容易了

明敏 蕭簫 發(fā)自 凹非寺

量子位 | 公眾號 QbitAI

如今大模型進手機是真的火啊。

各大手機廠商發(fā)布會都標配大模型，而且直接真刀真槍來現(xiàn)場演示。

喏，在ODC 2023大會上現(xiàn)場演示可以看到，ColorOS的一鍵識別屏幕文本，再進行智能摘要。

這誰看了不激動啊喂。

于是我們也來趕緊實測體驗了一把~

它不僅提供各種AI生成能力，比如寫大眾點評：

還能長按圖像閃速摳圖。

而且整個系統(tǒng)都變得“更懂事兒”了。復制地址直接彈出導航窗口、復制英文就彈出翻譯窗口。能它做的事盡量不麻煩你。

這么看，裝入大模型的ColorOS 14真有點個人助理那味兒了。而且其中很多新技能點，都點在了生產(chǎn)力方向。

難道說，讓AI在手機上幫我打工都要成為現(xiàn)實了？

我們用ColorOS 14試了試。

還能這樣手機辦公？

以我們?nèi)粘懚逃崬槔?，一般需要明確提綱、查找資料、理解內(nèi)容，然后進行圖文創(chuàng)作，而且速度要快。

用ColorOS 14輔助的話，畫風是醬嬸兒的：

首先可以讓小布助手幫忙頭腦風暴這篇稿件該如何寫？

感覺提綱有點冗長，能進一步提出要求“寫短一點”。

在有了主體框架后，需要補充細節(jié)。這方面，可以把已有資料喂給小布，讓它找到重點，直接生成可以用的文字。

如果遇到?jīng)]有操作權限的文檔，還能使用小布識屏提取內(nèi)容，復制到中轉(zhuǎn)站暫存。

然后打開小布助手，讓它對剛剛的內(nèi)容總結摘要?？梢蕴岢鲞M一步要求，比如語句簡潔、用三句話表達等。

哪怕是資料是英文都沒關系，只要復制內(nèi)容，就會彈出翻譯窗口，能直接查看中文意思。

一般我們還會準備一些圖片素材豐富文章，有時還要使用ps二次處理圖片，最常用的就是摳圖功能了。

這方面ColorOS 14也能實現(xiàn)。

打開相冊，找到對應圖片，長按想要摳出的部分即可。圖像素材同樣能保存到中轉(zhuǎn)站中備用。

這樣一來，在手機上即可搞定一篇圖文并茂的快訊。

再加上ColorOS 14的文件隨心開支持許多以往在安卓機上無法打開的文件格式，比如psd、iOS生態(tài)的Pages/Numbers等。

中轉(zhuǎn)站功能在同賬號下，能跨設備流轉(zhuǎn)，手機上保存的素材平板上直接用，無需再手動傳輸。

通過PhoneLink，無需下載任何APP，即可在Windows電腦上打開手機應用、接打電話、收發(fā)短信、傳輸文件。

這真的是要把手機生產(chǎn)力拉滿啊。

但還沒完，我們發(fā)現(xiàn)ColorOS 14新增的泛在服務在流體云交互下的全新體驗，還是個出差利器。

外出辦公、趕飛機兩不誤

一般出差途中都需要查看航班/車票具體信息，包括出發(fā)到達時間、座位、航班狀態(tài)等。

但問題是在途中，很可能還要同步辦公（別問我怎么知道）。

這就導致很容易忽略重要的行程信息，或者要手忙腳亂反復確認航班/車次狀態(tài)。

ColorOS 14的流體云，一方面提供了實時提醒的功能，能將航班/車次/網(wǎng)約車/導航狀態(tài)信息“釘”在屏幕上，方便查看；另一方面，它還支持復制車次/航班號快速查看行程，或者是將導航地址直接同步到車端。

同時這些提醒能以不同優(yōu)先級呈現(xiàn)，最重要的信息最明顯，提醒也有強弱之分，更符合大家使用手機的直覺邏輯。

另外還支持多模態(tài)提醒，重要行程信息能在耳機內(nèi)播報。

在未來，當你詢問過小布“可以購買幾點去北京的高鐵票”后，它就能準確捕捉到你的需求，然后推薦適合你的車次、當?shù)靥鞖狻⒆∷扌畔⒌取?/p>

這背后不僅考驗大模型能力，同時也給系統(tǒng)任務編排、復雜意圖理解等能力提出要求。

從最新升級的ColorOS 14來看，OPPO已經(jīng)構建出了實現(xiàn)如上效果的基本底座能力。它們也是這一次ColorOS 14大幅提升手機體驗的關鍵。

具體帶來哪些新技術？往下看。

用大模型更好理解用戶意圖

給ColorOS 14帶來新體驗的核心技術為兩方面：

• AndesGPT大模型
• 潘塔納爾系統(tǒng)

其中，AndesGPT大模型主要提供AIGC能力，如上小布助手中種種智能化體驗，都得益于它。

不僅能基于知識庫、知識圖譜和通用搜索提升回答準確性，70億大模型就支持最高2k tokens的輸入長度；

未來還將支持文生圖、圖生圖，甚至當場來一首歌，從主題風格到元素都能定制。

然而，要想在手機上實現(xiàn)這些能力并不那么容易，光靠手機算力無法運行較大的模型，聯(lián)網(wǎng)運行又無法處理個人隱私信息。

為此，OPPO自主訓練的AndesGPT大模型采用了端云協(xié)同的部署方式，從十億到千億大模型不等，端側(cè)小模型處理個人數(shù)據(jù)，云端大模型負責完成復雜任務指令，如知識查詢等。

為了讓端側(cè)小模型塞進手機的同時保持性能，AndesGPT還采用了4位量化技術，在縮短生成時間的同時確保模型輸出性能。

總結來看，AndesGPT的所有能力，都是為了將手機打造成你的“第二大腦”。

潘塔納爾系統(tǒng)，是OPPO的自研智慧跨端系統(tǒng)。

流體云中的實時提醒、消息按照主次顯示，以及中轉(zhuǎn)站文件跨端流轉(zhuǎn)、文件隨心開、隨身工作臺等功能，都得益于潘塔納爾系統(tǒng)。

兩部分功能對應它的兩大能力：泛在服務和跨端互聯(lián)。

泛在服務，簡單來說就是讓服務無處不在，從人找服務變成服務找人。

例如出門游玩，基于泛在服務可以根據(jù)榜單幫忙規(guī)劃游玩路線、推薦門票購買、預定機票酒店等；機票訂購，會結合天氣和日歷等APP安排時間和出行方式……

跨端互聯(lián)，用ColorOS打通了手機、耳機、TV、PC、甚至Osmo云臺、車機等設備的連接，進一步打破端與端的邊界，給用戶帶去更無縫的跨端體驗。

而且在ColorOS 14上，AndesGPT和潘塔納爾系統(tǒng)首次融合、“無縫協(xié)同”，來解決手機功能繁雜、操作門檻高的問題。

如果原本手機只是一個菜籃子，AndesGPT和潘塔納爾系統(tǒng)就是廚師，用戶提出菜名，它們就能完成準備材料、炒菜和上菜一系列操作，最大程度上降低操作門檻。

不僅如此，潘塔納爾系統(tǒng)升級的情境感知能力，也能進一步幫助AndesGPT做出決策，更好理解用戶意圖。

如今AIGC時代來臨，各行各業(yè)出現(xiàn)新的變革契機。對于終端行業(yè)而言，是否也能基于新發(fā)布的ColorOS 14，歸納出一系列新的標準，來衡量性能和實力？

換言之，AIGC時代下，怎樣的終端設備才能給用戶帶來更好的體驗？

AIGC時代造就怎樣的新終端？

當下，AIGC趨勢和終端市場正在相互成就。

對于終端而言，AIGC是必須要把握的趨勢。它不僅給發(fā)展成熟的手機終端帶來新氣息，更是明確了手機等終端下一步的發(fā)展方向：更智能。

但是在智能手機基本交互邏輯已經(jīng)確定的當下，這種“更智能”并非易事。

因為它根本上是對細節(jié)的考驗。

透過ColorOS 14的發(fā)布可以看到，系統(tǒng)做了600+細節(jié)升級。從UI設計、泛在服務到小布助手，細節(jié)上的改變都是希望更逼近用戶最自然的交互習慣，讓這種升級更加“潤物細無聲”。

由此也傳遞出了一個行業(yè)認知：終端系統(tǒng)的大框架已經(jīng)基本固定，未來操作系統(tǒng)的突破，關鍵看細節(jié)。

以ColorOS 14的革新為例，無論是操作系統(tǒng)還是智能助手，結合產(chǎn)學研等多方力量共同實現(xiàn)了諸多突破，而在突破之下，是對細節(jié)的把控與考量。

在OPPO長期的產(chǎn)學研投入中，這樣的技術細節(jié)迭代帶來的產(chǎn)品革新無處不在。

這些年來，OPPO已經(jīng)與國內(nèi)外90余所高?？蒲袉挝?、600余名專家學者達成科研合作，在核心技術領域開展了500余項科研課題研究，與國內(nèi)15個高校共建了軟件方面的聯(lián)合實驗室。

例如，在ColorOS 14發(fā)布以前，OPPO已經(jīng)早早和在語音對話系統(tǒng)有著深入研究的清華大學計算機系黃民烈教授團隊建立合作，針對AndesGPT大模型在手機上的適配展開研發(fā)，將最新學術成果與OPPO的智能對話系統(tǒng)技術結合起來，從而讓ColorOS 14中的小布助手學到了更復雜的意圖理解能力。

潘塔納爾系統(tǒng)首席科學家李治軍認為操作系統(tǒng)革新最關鍵的細節(jié)之一，正是系統(tǒng)與用戶的交互方式。在ChatGPT爆火后，他馬上跟進大模型研究，并基于團隊已有的成果和大模型技術，將其應用到100多個場景中。

也正是基于這些準備，能讓ColorOS 14上車大模型更加絲滑流暢，進一步提升用戶在辦公、差旅等場景中的體驗，把操作手機變成“和手機打交道”等。

當然，無論應用場景如何豐富、技術如何改善，最終的評判標準，還是要由用戶來定。

隨著ColorOS14 正式推送，OPPO的幾款新機型，如OPPO Find X6 Pro、Find X6、Find N2、Find N2 Flip、Reno9 Pro、一加11，已經(jīng)可以直接玩上了。

你最期待哪些新功能體驗？