第十二屆北京國(guó)際電影節(jié)公布了展映片單，4K修復(fù)版《大鬧天宮》亮相“修復(fù)經(jīng)典”單元，該版本由西瓜視頻聯(lián)合火山引擎共同修復(fù)，是該片首次經(jīng)由AI技術(shù)實(shí)現(xiàn)4K分辨率級(jí)別復(fù)原，也是4K修復(fù)版本首次亮相大銀幕。

《大鬧天宮》在中國(guó)的百年動(dòng)畫史里是一座讓人嘆為觀止的高峰，日本現(xiàn)代動(dòng)畫制作鼻祖手冢治蟲都是本片導(dǎo)演萬(wàn)籟鳴的“忠實(shí)迷弟”。為完成《大鬧天宮》（上下集）的4K修復(fù)，火山引擎多媒體實(shí)驗(yàn)室基于深度學(xué)習(xí)的視頻增強(qiáng)修復(fù)技術(shù)，改善老舊動(dòng)畫的模糊等畫質(zhì)問題，并輔以人工美學(xué)分析調(diào)優(yōu)，提升視頻主觀感知質(zhì)量的同時(shí)，不破壞原片的藝術(shù)效果。另外，火山引擎音頻技術(shù)團(tuán)隊(duì)還進(jìn)行了音質(zhì)修復(fù)，優(yōu)化了當(dāng)時(shí)拾音環(huán)境、錄制設(shè)備限制帶來的底噪過大、突發(fā)爆音等問題，保障影院中獲得更舒適的聽覺效果。

據(jù)悉，《大鬧天宮》中使用到的畫質(zhì)修復(fù)技術(shù)已集成到火山引擎視頻點(diǎn)播與智能處理產(chǎn)品中對(duì)外服務(wù)。這兩款產(chǎn)品能針對(duì)音視頻質(zhì)量構(gòu)建從畫質(zhì)檢測(cè)、無參評(píng)分、畫質(zhì)評(píng)分、針對(duì)性后處理（畫質(zhì)增強(qiáng)/分轉(zhuǎn)碼檔位/過濾等）、播放回收等實(shí)際反饋數(shù)據(jù)，打造畫質(zhì)提升全鏈路解決方案，并在三大主流場(chǎng)景——老片修復(fù)、低質(zhì)增強(qiáng)、極致高清，分別打磨出最佳實(shí)踐方案，支持快速應(yīng)用賦能企業(yè)客戶。

火山引擎畫質(zhì)提升全鏈路解決方案

目前，畫質(zhì)提升全鏈路解決方案能夠支持在線實(shí)時(shí)處理和離線定制化處理。此次北京國(guó)際電影節(jié)展映的4K修復(fù)《大鬧天宮》，其在老片修復(fù)場(chǎng)景便核心運(yùn)用到了檢測(cè)、增強(qiáng)環(huán)節(jié)的技術(shù)支持。

如何評(píng)估老片畫質(zhì)

火山引擎綜合了市面上客觀評(píng)測(cè)標(biāo)準(zhǔn)及自研VQscore無參考視頻質(zhì)量評(píng)價(jià)指標(biāo)來完成畫質(zhì)檢測(cè)和評(píng)分。其中，VQScore采用了主觀分與細(xì)指標(biāo)融合的方式，并且結(jié)合了神經(jīng)網(wǎng)絡(luò)和經(jīng)典算法，具體內(nèi)容如下：

VQScore架構(gòu)

同時(shí)，其能夠支持包括噪聲、亮度、對(duì)比度等十多種畫質(zhì)相關(guān)的檢測(cè)指標(biāo)，單項(xiàng)或綜合評(píng)分輸出：

評(píng)分檢測(cè)指標(biāo)

針對(duì)老片修復(fù)場(chǎng)景，影響老片觀感體驗(yàn)的，主要是畫質(zhì)。對(duì)于畫質(zhì)，我們一般可以從四個(gè)維度考慮：

? 清晰率低：分辨率是衡量影片清晰程度的重要參數(shù)，老片分辨率一般都是720p、540p甚至更低；另外制作過程中，由于拍攝鏡頭、數(shù)字化掃描、數(shù)字化壓縮存儲(chǔ)等模糊可能會(huì)丟失紋理，導(dǎo)致清晰度更差。

? 流暢度低：影響流暢度的主要是視頻幀率，目前大多影片幀率都在25幀以上，有的能達(dá)到60甚至120幀，但由于制作成本限制，許多老片拍攝或者手繪的幀數(shù)往往低于每秒15幀，觀看時(shí)會(huì)有較強(qiáng)的卡頓感。

? 色彩失真：膠片保存較差，存在物理化學(xué)損傷，這些損傷在數(shù)字化后會(huì)引起各種色彩問題。此外，老片用老的色彩標(biāo)準(zhǔn)制作，亮度動(dòng)態(tài)范圍普遍比較低，所以畫面對(duì)比度也比較差，看起來就很昏暗。

? 瑕疵多：提起老片，很多人會(huì)聯(lián)想到滿屏雪花一般的噪點(diǎn)、大量的黑線和閃動(dòng)。由于保存環(huán)境比較差，或者播放使用不當(dāng)，老片存在物理、化學(xué)損傷，呈現(xiàn)出多種瑕疵。

對(duì)癥下藥，老片煥發(fā)新生

火山引擎視頻點(diǎn)播、智能處理針對(duì)影片的質(zhì)量問題進(jìn)行分析，并在各個(gè)維度上產(chǎn)生對(duì)應(yīng)的個(gè)性化修復(fù)模塊，排列組合調(diào)優(yōu)。

如何實(shí)現(xiàn)老片的畫質(zhì)增強(qiáng)

每一部片子“對(duì)癥下藥”，從而達(dá)到最理想的修復(fù)效果。主要應(yīng)用了以下幾項(xiàng)關(guān)鍵算法：

提升清晰度

采用超分辨率重建和去模糊算法。這兩項(xiàng)技術(shù)是使用機(jī)器學(xué)習(xí)的方式實(shí)現(xiàn)的，火山引擎對(duì)海量高清和低清視頻數(shù)據(jù)進(jìn)行分析，使算法模型可以學(xué)習(xí)到高清視頻特性，從而完成視頻從低清到高清的轉(zhuǎn)換，并且生成缺失的細(xì)節(jié)。這樣一來，分辨率就可以從720P提升到4K，大幅提高清晰程度。

提升流暢度

視頻的卡頓感可以由提升幀率來優(yōu)化。運(yùn)用智能插幀算法，通過對(duì)前后幀的內(nèi)容進(jìn)行分析，生成中間幀內(nèi)容，將原先不足15的幀率，提升至60以上，從而大幅提升流暢度。

色彩增強(qiáng)

首先利用算法對(duì)畫面色偏進(jìn)行自動(dòng)化檢測(cè)和矯正，讓其恢復(fù)原有的觀感；其次，為適應(yīng)最新顯示設(shè)備的色彩標(biāo)準(zhǔn)，對(duì)老片亮度范圍進(jìn)行拓展，色彩空間進(jìn)行轉(zhuǎn)換，用更寬的亮度和更豐富的色彩來顯示老片，讓色彩更豐富，煥然一新。

消除瑕疵

火山引擎結(jié)合傳統(tǒng)信號(hào)處理以及深度學(xué)習(xí)算法：對(duì)于較小的雪花顆粒噪聲，使用傳統(tǒng)算法進(jìn)行處理；對(duì)于較大的壞點(diǎn)和劃痕，使用機(jī)器學(xué)習(xí)算法進(jìn)行識(shí)別和修補(bǔ)。強(qiáng)力地修復(fù)瑕疵的同時(shí)，保留原有紋理不受影響。然而算法也不是萬(wàn)能的。在實(shí)際修復(fù)過程中，如果算法做到100%的處理瑕疵，那么會(huì)很容易將一些藝術(shù)效果也識(shí)別為瑕疵，對(duì)影片造成了破壞。為此火山引擎在老片修復(fù)過程中，算法大概能解決95%以上的瑕疵問題，剩余的瑕疵需要由人工輔助標(biāo)注，再調(diào)整算法做二次優(yōu)化。這樣一來，既可以比較徹底地消除瑕疵，也能保護(hù)影片原有的藝術(shù)風(fēng)格。

火山引擎修復(fù)老片采用增強(qiáng)視頻畫質(zhì)的多媒體技術(shù)，算法經(jīng)過抖音、西瓜視頻等業(yè)務(wù)大規(guī)模驗(yàn)證和持續(xù)迭代。目前火山引擎視頻點(diǎn)播、智能處理的音視頻質(zhì)量增強(qiáng)方面支持閑時(shí)策略，節(jié)省了客戶業(yè)務(wù)70%的成本投入。閑時(shí)策略主要利用機(jī)器資源閑時(shí)，以很低的成本進(jìn)行高價(jià)值音視頻處理任務(wù)，包括智能超分、智能插幀、SDR2HDR增強(qiáng)、單純SDR增強(qiáng) 、音頻降噪、音量/響度均衡等。

在北京電影節(jié)重溫經(jīng)典

本次北京電影節(jié)最新排片已出爐，趕緊把《大鬧天宮》4K修復(fù)版加入觀影日程吧！

? 8.13 周六 18:30 保利國(guó)際影城（凱德MALL·大峽谷店）全景聲激光巨幕廳

? 8.14 周日 15:30 寰映影城（合生匯店）7號(hào)廳

? 8.19 周五 18:30 保利國(guó)際影城（凱德MALL·大峽谷店）全景聲激光巨幕廳

? 8.20 周六 13:00 寰映影城（合生匯店）7號(hào)廳

? 8.21 周日 15:30 紅劇場(chǎng)1廳