“官宣官宣了，我男朋友帥吧”。今天是520網(wǎng)絡(luò)情人節(jié)，數(shù)萬(wàn)人在快手官宣脫單，這是怎么做到的？原來(lái)是快手上線了一款視頻特效，讓單身的小伙伴們瞬間甜蜜分身，“順利脫單”。這是快手為用戶準(zhǔn)備的一系列520特效中的一款，受到用戶歡迎。
“感謝快手送的男朋友，真帥！”，“聽(tīng)說(shuō)兩個(gè)人在一起久了會(huì)越長(zhǎng)越像，我男朋友很像我啊”，“官宣官宣，公布對(duì)象”。這款“變情侶”上線后，快手用戶玩出了各式花樣分身，和對(duì)象一起比心，牽手，玩手指舞，還能一起同框喝奶茶。還有寶媽用這款特效給寶寶拍攝視頻，瞬間可以喜提龍鳳胎。
快手上線的520一系列魔表中還有“變男神”、“變女神”的能夠?qū)崿F(xiàn)變性別效果的特效?！白兡猩瘛弊屌杂脩糇约鹤兩砟猩?，欣賞變身后的帥氣發(fā)型。“變女神”的特效讓男性用戶瞬間變身膚白貌美的女子。
GAN生成對(duì)抗網(wǎng)絡(luò)助力單身狗“順利脫單”
如此好玩新奇的體驗(yàn)背后用到了什么高科技呢，據(jù)快手Y-tech的算法工程師介紹，該效果背后的核心技術(shù)是GAN（Generative Adversarial Network，生成對(duì)抗網(wǎng)絡(luò)）。在用戶原有圖像的基礎(chǔ)上，利用GAN可以生成以假亂真的圖像，即使對(duì)這些圖像仔細(xì)分辨也未必能看出其中假的痕跡。
生成式對(duì)抗網(wǎng)絡(luò)
要想實(shí)現(xiàn)手機(jī)端實(shí)時(shí)的性別變換效果，必須要解決以下三大核心問(wèn)題。
第一，GAN生成的臉部特征與用戶的性別明顯相反，但是同時(shí)要能看出來(lái)與用戶本身很像，具有很近的血緣關(guān)系。將女生變換成男生之后，若男性化特征非常明顯，那么可能會(huì)丟失一些用戶本身的ID信息，使得用戶看著不像自己，趣味性就必然會(huì)下降。因此GAN模型需要在改變性別特征與保留用戶ID之間取得一個(gè)平衡。
第二，GAN生成與目標(biāo)性別匹配的頭發(fā)，且實(shí)時(shí)拍攝時(shí)無(wú)論用戶是什么樣的姿態(tài)，生成的頭發(fā)都需要穩(wěn)定連續(xù)。為了達(dá)到控制生成的發(fā)型的目的，快手Y-tech算法工程師將GAN與圖形學(xué)結(jié)合在一起，充分利用了圖形學(xué)中的3D理論與GAN的紋理學(xué)習(xí)能力。最終的效果給用戶帶來(lái)了新奇驚艷的體驗(yàn)。
在判斷一個(gè)人性別的時(shí)候，頭發(fā)可以起到非常重要的作用，若生成的頭發(fā)不真實(shí)，那么用戶會(huì)第一時(shí)間認(rèn)為此效果不好。與人臉不同的是，頭發(fā)的自由度較高，不同的人甚至是同一個(gè)人的頭發(fā)形狀、顏色、走向都有很多種變化。GAN作為一種AI技術(shù)，是基于數(shù)據(jù)來(lái)學(xué)習(xí)某種分布，那么就需要利用數(shù)據(jù)中多種多樣的頭發(fā)來(lái)學(xué)習(xí)得到一種固定模式的頭發(fā)，從而為所有用戶都生成穩(wěn)定連續(xù)的某種特定發(fā)型。
第三，要在不同型號(hào)不同運(yùn)算能力的手機(jī)端實(shí)時(shí)做到性別變換。GAN模型一般運(yùn)算量都較大，但是快手用戶覆蓋較廣，使用的手機(jī)運(yùn)算能力差別很大。為了能夠讓所有用戶都體驗(yàn)到新技術(shù)帶來(lái)的福利，快手Y-tech采用了一個(gè)系統(tǒng)化的解決方案，從底層引擎的加速到模型的壓縮，再到后處理的優(yōu)化，每一部分都暗含了相當(dāng)大的挑戰(zhàn)和能力。
除了性別變化， 快手Y-tech在其他生成式技術(shù)也做了豐富的積累， 比如變年輕、變老。2019年8月份，快手上線了“變娃娃臉”特效， 這次不僅是國(guó)內(nèi)首個(gè)實(shí)現(xiàn)端上實(shí)時(shí)GAN，也是全球范圍內(nèi)第一次實(shí)現(xiàn)iOS安卓多平臺(tái)、全機(jī)型覆蓋的視頻實(shí)時(shí)GAN。
