“感知不強(qiáng)”又”徒增功耗”?為何今年5G手機(jī)也這么重視AI

曉查 2020-04-24 13:35:11 來源：量子位

曉查 發(fā)自 凹非寺
量子位 報(bào)道 | 公眾號 QbitAI

今年你準(zhǔn)備換手機(jī)了嗎？

小米10、一加8、OPPO Find X2、vivo NEX 3s、iQOO 3、realme X50 Pro……上半年一大波手機(jī)發(fā)布潮依然在繼續(xù)，簡直讓選擇困難癥不知所措。

什么才是你換機(jī)的最大動力？可能絕大部分人都會說是5G。

的確，5G讓手機(jī)的網(wǎng)絡(luò)速度更快，但還有一項(xiàng)指標(biāo)性能的重要性一點(diǎn)不亞于5G。

從去年開始，各大手機(jī)評測開始給手機(jī)加入了一個(gè)新的評測維度——AI跑分。這個(gè)過去從來不受關(guān)注的參數(shù)，如今成為了不少人心中衡量手機(jī)性能必不可少的一項(xiàng)指標(biāo)。

國內(nèi)知名的性能測試軟件魯大師甚至還專門提供了AI跑分測試軟件AImark。

在魯大師最新公布的AImark跑分中，高通驍龍865以11萬的高分拿下芯片榜第一，不僅比高通上一代芯片提升一倍，也把蘋果的A13仿生芯片遠(yuǎn)遠(yuǎn)甩在身后。

高通為何要提升手機(jī)芯片看似“感知不強(qiáng)”的AI能力呢？

AI跑分又是否僅是一個(gè)“徒增功耗”、“方向錯了”的噱頭？

然而你可能不知道的是，至少在拍照這件事情上，如果沒有AI，旗艦手機(jī)今后可能真的無法玩轉(zhuǎn)了。有人也許不禁要問，AI技術(shù)和手機(jī)日常使用有什么關(guān)系？

手機(jī)AI有什么用

要解答這個(gè)問題，我們先來看看魯大師到底給驍龍865測試了什么。

這次高通驍龍865奪冠的魯大師AImark 2.0測試總共包括了4項(xiàng)成績。這4項(xiàng)分別代表手機(jī)在4種不同神經(jīng)網(wǎng)絡(luò)下的運(yùn)算能力。

先看前兩項(xiàng)基本AI能力，ResNet-34和Inception V3。

ResNet是當(dāng)前應(yīng)用最廣的卷積神經(jīng)網(wǎng)絡(luò)（CNN）的特征提取網(wǎng)絡(luò)，多數(shù)處理圖片的AI模型或多或少的使用了ResNet。在神經(jīng)網(wǎng)絡(luò)越來越復(fù)雜的今天，ResNet可以做到在更深的神經(jīng)網(wǎng)絡(luò)上不降低性能。

Inception V3是Google開發(fā)的一個(gè)開源神經(jīng)網(wǎng)絡(luò)模型，進(jìn)一步提高了圖像分類效果。用了Inception之后，神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)的寬度和深度都可擴(kuò)大，能夠帶來2-3倍的性能提升。

如果說前兩項(xiàng)是考察芯片的基礎(chǔ)AI能力，那么后兩項(xiàng)就是靠具體單科能力了。

MobilenetSSD是一種目標(biāo)檢測算法，具有速度快，精度高的特點(diǎn)。所謂目標(biāo)檢測就是讓AI找出圖像中的物體，指出它們的位置和種類。SSD表示一次拍攝即可檢測圖像中的多個(gè)對象。

這種模型目前在手機(jī)AI中有廣泛的應(yīng)用。比如手機(jī)拍照中的場景識別，目標(biāo)能夠知道你拍攝的是美食還是植物。

當(dāng)識別出照片主體的內(nèi)容后，拍照算法就會對畫面做出特定的優(yōu)化，拍出更美的照片。

在實(shí)測中，高通驍龍865能讓整個(gè)識別的過程不到1秒就能完成，真正提升了拍照場景識別的易用性。

Deeplab V3+是目前在手機(jī)設(shè)備上效果最好的圖像語義分割模型之一。

語義分割比目標(biāo)檢測更進(jìn)一步，目標(biāo)檢測僅能識別出物體的大致位置，而語義分割要求對識別出的物體做到像素級的劃分，精確畫出邊緣。

更通俗地說，這一項(xiàng)跑分測試的是手機(jī)AI“摳圖”能力。

由于受到體積所限，手機(jī)攝像頭單靠光學(xué)成像不能做到和單反相機(jī)一樣的背景虛化能力，這時(shí)候就需要語義分割模型的幫助。

不僅如此，今年各家手機(jī)主打超強(qiáng)變焦、8K視頻、超級防抖，都需要AI計(jì)算的支持。

到這里，你還會覺得手機(jī)芯片性能強(qiáng)大的用處只能用來打游戲嗎？

游戲滿幀運(yùn)行對旗艦手機(jī)來說早就不是難事，但是各種新奇拍照玩法直到近兩年才嶄露頭角，最重要的原因就是驍龍系列芯片AI能力的巨大提升。

AI性能翻倍的法寶——張量核心

那么高通又是如何在短短一年內(nèi)將AI性能翻倍的呢？

我們先來看看驍龍865的構(gòu)造：

除去SoC中最基本的CPU、GPU和圖像處理單元ISP，驍龍865中集成的Hexagon處理器中包括一個(gè)專門為AI運(yùn)算加速的Hexagon張量加速器（HTA）。

其實(shí)Hexagon之前是SoC中的數(shù)字信號處理單元，也就是常說的“DSP”，之前主要被用來處理語音和音視頻解碼。但是隨著AI技術(shù)的興起，高通終于給Hexagon升級了。

在去年驍龍855的Hexagon 690中，高通首次引入HTA實(shí)現(xiàn)了專用的可編程的AI加速。作為驍龍865集成的第五代Qualcomm人工智能引擎AI Engine的核心，Hexagon 698的HTA能效比上代提升了35%。

此外，驍龍865還在GPU上改善了浮點(diǎn)運(yùn)算和AI性能，系統(tǒng)整體運(yùn)算能力與前代（7TOPS）相比提升一倍多，實(shí)現(xiàn)高達(dá)每秒15萬億次運(yùn)算（15TOPS）。

這也與AImark的實(shí)際跑分相符，證明了高通AI運(yùn)算能力是實(shí)打?qū)嵉奶嵘?，而非針對跑分軟件做出的特殊?yōu)化。

但手機(jī)AI是需要對整體考量，不是靠堆料就能簡單地實(shí)現(xiàn)性能提升。

手機(jī)和云端AI、PC端AI最大的差異是，需要考慮有限的續(xù)航與散熱能力，也要考慮開發(fā)端口的特殊性。

普通的GPU做的是16位或者32位的浮點(diǎn)運(yùn)算，優(yōu)點(diǎn)當(dāng)然是精確度高、性能強(qiáng)大，但是能耗也更高。

而Hexagon支持的是8位和16位的定點(diǎn)運(yùn)算，這種運(yùn)算更適合壓縮后AI模型，雖然精度有些許損失，但是運(yùn)算量大大減少，在邊緣設(shè)備上應(yīng)用廣泛。

高通和Android開發(fā)商谷歌還對Hexagon上的應(yīng)用開發(fā)做出了定向優(yōu)化。

比如高通的神經(jīng)處理器SDK、Android神經(jīng)網(wǎng)絡(luò)API和高通Math庫等，都可以被開發(fā)者所用，用來快速開發(fā)高效的AI應(yīng)用。

此外，高通還采用了一種深度學(xué)習(xí)帶寬壓縮的技術(shù)，將數(shù)據(jù)量壓縮一半，降低了運(yùn)算能耗。

驍龍865的AI性能提升絕不僅止于此。在處理AI任務(wù)時(shí)，往往有大量的數(shù)據(jù)進(jìn)入到芯片中，而處理這些海量數(shù)據(jù)需要消耗更多電能、增加功耗。

對此，高通開發(fā)了一項(xiàng)全新的專用技術(shù)——深度學(xué)習(xí)帶寬壓縮。這還是一項(xiàng)完全無損的壓縮技術(shù)，也就是說所有數(shù)據(jù)的精度不會有任何損失。

帶寬壓縮能夠?qū)@些海量數(shù)據(jù)進(jìn)行高達(dá)50%的壓縮，以節(jié)省電能、降低功耗。

在一些對AI性能要求極高的情形中，驍龍865與今年最新的LPDDR5高帶寬內(nèi)存相互配合、相得益彰。

總之，驍龍865的AI不僅僅是簡單的加個(gè)神經(jīng)網(wǎng)絡(luò)核心，而是從CPU、GPU、Hexagon處理器（包括張量加速器），再到軟件、內(nèi)存帶寬壓縮等等的一整套AI解決方案。

AI讓手機(jī)真的“智能”了

當(dāng)然，AI性能的提升不僅僅是性能指標(biāo)，也給我們的生活帶來了突變。

高通在去年的AI Demo Day上，和多家手機(jī)廠商、軟件開發(fā)商展示了手機(jī)端AI應(yīng)用的無限前景。

專門開發(fā)拍照算法的虹軟，基于驍龍移動平臺，用AI實(shí)現(xiàn)了更強(qiáng)大的超級夜景和全身塑形美顏。

AI行業(yè)巨頭曠視和商湯在人臉識別和3D建模上玩出了新花樣。

其實(shí)高通驍龍865豈止是在圖像處理上的性能提升，它也讓過去噱頭意味更濃的語音助手有了實(shí)用價(jià)值。

今年的Hexagon處理單元具有了對上下文感知低功耗AI語音助手的支持，對語音識別、聲音傳感器的處理再上一層樓。語音助手會比過去更靈敏，多輪對話也更智能。

在語音翻譯方面，鑒于驍龍865首次支持文本和語音實(shí)時(shí)翻譯的AI特性，網(wǎng)易有道還與高通合作開發(fā)了同聲傳譯的功能，出門再也不怕語言障礙。

過去需要大量運(yùn)算的人工智能技術(shù)在手機(jī)這個(gè)小小的終端上實(shí)現(xiàn)，靠的是驍龍865等一系列芯片在AI性能上質(zhì)變的提升

現(xiàn)在，你還覺得手機(jī)AI只是“感知不強(qiáng)”、“徒增功耗”的宣傳噱頭嗎？