原本是用在人臉上的AI，拿去給Emoji提升分辨率，結(jié)果哈哈哈哈哈
鬼栗子 發(fā)自 凹非寺
量子位 報道 | 公眾號 QbitAI
有些AI，原本是用來把模糊的人臉，變成清晰的人臉：
以上杰作，來自韓國科學(xué)技術(shù)院 (KAIST) 的一個人臉對齊網(wǎng)絡(luò) (FAN) ，是超分辨率AI中優(yōu)秀的一員，中選了BMVC 2019。
可偏偏有人不甘平凡，讓這只AI去給Emoji提升分辨率。
結(jié)果意外的成功……
把16×16的表情包 (下圖中間) 交給AI調(diào)教，破壞力頓時×2333：
(左邊是推特Emoji的放大版，以供與右邊對照食用。)
不過，把抽象的臉變成具體的臉，也只是常規(guī)操作。
提高難度，讓草地上的噴水池成個精：
煙熏的眼妝，伏地魔的鼻子，發(fā)型還很時尚。我我我我已經(jīng)沒血了。
這些有毒的成果，來自一個名叫“I Forced A Bot (強(qiáng)人鎖機(jī)) ”的博客。
善良的博主，還提供了線上試玩的Colab。
一天的工夫，Reddit已經(jīng)超過了200點(diǎn)熱度。
有人唱便有人和。一位叫做Michail Rybakov的少年，想起自己一年前曾經(jīng)把Facebook表情包，用扎克伯格的臉定制了一下：
一旦接受了這個設(shè)定，便會深信那就是小扎，和本人一毛一樣 (誤) 。
12小時，Reddit熱度沖到了376分。
還有小伙伴建議他，搞個瀏覽器插件，把所有FB表情包全改成這樣，把原版Emoji都替掉：
想想都覺得，這個世界很美 (gui) 好 (chu) 。
被玩壞的超分辨率
首先介紹一下，韓國小伙伴們開發(fā)的，是一個漸進(jìn)式?(Progressive) 的人臉超分辨率方法：
把訓(xùn)練分成多個小步來走，每一步都比上一步的分辨率高一點(diǎn)點(diǎn)。這樣訓(xùn)練過程會更加穩(wěn)定 (Stable) 。
第二，團(tuán)隊提出了一種新的人臉注意力損失 (Facial Attention Loss) 。把這個損失應(yīng)用到每一步上，讓神經(jīng)網(wǎng)絡(luò)把注意力集中在重要的面部屬性上。
具體就是把像素差別?(Pixel Difference) 和熱圖值?(Heatmap Values) 乘在一起。
第三，研究人員還把當(dāng)前最先進(jìn)的人臉對齊網(wǎng)絡(luò) (FAN) ，用hint-based的方法，壓縮成了一個小網(wǎng)絡(luò)。這樣，就可以提取出有意義的臉部標(biāo)志熱圖了。
那么問題來了，為什么會想到用它來升級Emoji?。?/p>
“強(qiáng)人鎖機(jī)”博主是這樣解釋的：
推特表情包是16×16。
這個算法，剛好是輸入16×16的小圖，生成128×128的大圖。
天衣無縫。
博主還驕傲地向觀眾展示：
披薩上的肉腸，都變成了人類的嘴。
One More Thing
鬼斧神工。就連苦力怕這樣的面癱，也可以擁有熱烈的表情：
所以，各位要不要試試把《我的世界》里的像素人，全體調(diào)教一遍？
Colab試玩?zhèn)魉烷T：
https://gist.github.com/JonathanFly/80b669a72bf624d17b56a1cfec742588#file-progressivefacesuperresolutiondemo-ipynb
超分辨率論文傳送門：
https://arxiv.org/abs/1908.08239
玩壞表情包的博客原文：
ENHANCE! ‘Photo-Realistic’ Emojis and Emotes With Progressive Face Super-Resolution
—?完?—
- 馬云正式卸任后，阿里巴巴開盤跌0.87%2019-09-10
- AI獨(dú)角獸云知聲，已完成一期科創(chuàng)板IPO輔導(dǎo)2019-10-17
- 亞馬遜在華拓展云計算團(tuán)隊，挑戰(zhàn)阿里巴巴和騰訊2019-10-16
- IDC：今年上半年中國公有云服務(wù)市場規(guī)模達(dá)54.2億美元2019-11-07
相關(guān)閱讀
龍媽非主角？AI告訴你下一個誰便當(dāng)：機(jī)器學(xué)習(xí)解讀《冰與火之歌》
數(shù)據(jù)科學(xué)解讀《冰與火之歌》人物關(guān)系
