vivo新機(jī)一英寸大底沒跑了，還能數(shù)秒拍出星空

白交 2022-10-26 12:45:01 來源：量子位

楊凈 發(fā)自 凹非寺

量子位 | 公眾號 QbitAI

你敢信，這樣一張沙漠里星河密布的照片，會是手機(jī)秒秒鐘拍出來的？

而像專業(yè)攝影中才有的一些操作，比如白加黑減，如今手機(jī)也可以做到。

（白加黑減：在一些過黑or過白的場景中，相機(jī)智能系統(tǒng)可能會誤認(rèn)為過曝或欠曝，自動調(diào)整曝光度，導(dǎo)致白不是白，黑不是黑，呈現(xiàn)一種摻雜灰色的狀態(tài)，這時候就需要攝影師手動調(diào)整曝光。）

這就是以影像建廠的藍(lán)廠vivo，在最新戰(zhàn)略發(fā)布會上分享的影像技術(shù)，從傳感器到算法、自研芯片，從風(fēng)光到人像……還宛如大型預(yù)熱現(xiàn)場？！

明示一英寸大底、50mm人像鏡頭、自研芯片AI-ISP架構(gòu)升級……

有網(wǎng)友評論：要是下一代X90這些技術(shù)能放下就好了。

但有一說一，這一次vivo，的確將自己的影像深耕由表及里，由內(nèi)而外地講清楚了，還直接攤出自己的秘籍。

這就來帶你一文看盡。

vivo如何思考影像技術(shù)革新？

通常而言，從技術(shù)的維度來看，影像主要有光學(xué)、算力、算法三個方面。

具體到用戶側(cè)，則涵蓋了色彩、夜景、人像、運(yùn)動、視頻等場景去提升體驗。

這次vivo直接一攬子發(fā)布了7大影像技術(shù)矩陣，將其歸納于三個“比肩專業(yè)影像”目標(biāo)當(dāng)中。

• 比肩專業(yè)影像設(shè)備：光學(xué)感知系統(tǒng)、臻彩還原引擎、超清畫質(zhì)引擎、算力加速引擎。
• 比肩專業(yè)攝影團(tuán)隊：環(huán)境理解技術(shù)
• 比肩專業(yè)后期能力：超感人像系統(tǒng)、蒼穹夜景系統(tǒng)。

通過這樣一個技術(shù)矩陣，搭建起真實世界——成像系統(tǒng)——后處理算法的影像通路。

以光學(xué)感知系統(tǒng)為例，則包括與蔡司合作的光學(xué)模組、鍍膜等技術(shù)。此次發(fā)布會全新發(fā)布了一項新技術(shù)——VCS仿生光譜技術(shù)。

據(jù)介紹，光線在進(jìn)入感光元件時會先通過color filter，普通圖像傳感器的color filter光譜，與人眼差異很大，而要繼續(xù)優(yōu)化還原又將影響畫質(zhì)；VCX仿生光譜，就是通過改善Sensor QE光譜，信噪比提升20%和色彩還原能力提升15%，讓傳感器接收的原始信息接近于人眼。

除此之外，會上還提到將對感光元件做一些“升級”——配置更大底的CMO，比GNV提升了77%。

有細(xì)心的網(wǎng)友算了算：一英寸大底沒跑了。

再以超清畫質(zhì)引擎為例，其典型技術(shù)包括光學(xué)超分算法。

據(jù)介紹，手機(jī)因為體積限制，會在光學(xué)上做出一些妥協(xié)，比如潛望攝像頭，原始圖像經(jīng)過鏡頭后會損失約50%的信息。而光學(xué)超分算法通過對鏡頭的缺陷建模分析，可恢復(fù)約35%的損失信息。

引擎中還有Denoise、Demosaic、Deblur等模塊，經(jīng)過1億多次場景訓(xùn)練，深度運(yùn)算能力較上一代提升了10倍。

而且還透露，為了配合下一代長焦硬件升級，超清畫質(zhì)引擎可對5倍以上的焦段，理論最高提升64%的拍攝解析力。

當(dāng)然這不過也只是通過拍攝過程進(jìn)行拆分。

根據(jù)具體的場景，vivo還亮出了特有的技術(shù)矩陣。

就專業(yè)影像而言，場景無非風(fēng)光、人像、視頻以及特定的夜景這幾個類別。

不妨就以競爭最激烈、也是最能體現(xiàn)技術(shù)實力的人像、夜景為例。

vivo的超感人像系統(tǒng)包括三大核心技術(shù)模塊：人像理解、人像美化以及人像氛圍。

人像理解技術(shù)，它可以對人臉進(jìn)行語義重點和輪廓細(xì)節(jié)的提取，建立103個特征點的關(guān)鍵人臉坐標(biāo)；與此同時，還將對皮膚、手勢、肢體關(guān)鍵點進(jìn)行檢測，主體分割I(lǐng)OU的精確度達(dá)到了96.15%。

人像美化，則是基于去年S12微米級煥膚塑顏技術(shù)的升級；還有人像分化融合技術(shù)。

在鏡頭上則是采用50mm人像焦段，還通過深度感知虛化，與蔡司合作還原了多種經(jīng)典鏡頭的效果。

蒼穹夜景系統(tǒng)也進(jìn)行了全面的升級，發(fā)布上公布了三個全新模型：超感光模型、全分割語義模型和臻彩影調(diào)模型。

其中超感光模型，顧名思義，可將感光能力最大提升100%，ISO最高可支持102400。

據(jù)說，這樣就可以拍到銀河了哦~手持星空了解一下。

而為了適應(yīng)像視頻這樣對計算處理能力要求高的場景，vivo自研芯片也有更新。

最大的更新，就是架構(gòu)的升級：從ISP到AI-ISP。

傳統(tǒng)ISP能以低延時處理大量的數(shù)據(jù)流水，但只能理解已知、特定的問題；AI-ISP則相當(dāng)于給傳統(tǒng)ISP芯片加個AI大腦——通過硬件直連的方式，將AI計算直接融入ISP Pipeline中，從而實現(xiàn)處理能力、能效的提升。

基于這樣的升級，下一代芯片在片上內(nèi)存單元（每秒1.3萬億比特的峰值數(shù)據(jù)吞吐速率）、AI計算單元（每瓦16.3萬億次運(yùn)算的峰值能效比）、圖像處理單元*（夜景降噪效果提升20%等）都有相應(yīng)的突破。

兩個影像戰(zhàn)略

好了，說到這里vivo也不瞞了，直接公布了自己的影像戰(zhàn)（mi）略（ji）。

兩大支點：聯(lián)合創(chuàng)新+自主創(chuàng)新。

聯(lián)合創(chuàng)新上，vivo與蔡司及上下游廠商，研發(fā)更好光學(xué)系統(tǒng)。而在自主創(chuàng)新上，則是布局算法和影像芯片的研發(fā)，軟硬件協(xié)同并持續(xù)迭代升級。

不管是合作還是自研，目標(biāo)只有一個——構(gòu)建底層核心能力，從而得以在影像長賽道上持續(xù)深耕。

最后，對于vivo這一波影像秀肌肉，你最期待哪項新技術(shù)呢？