教練，我想學(xué)跳舞：NBA球星變身“舞王”，都是托機(jī)器學(xué)習(xí)的福
今天，你跳舞了沒(méi)？
栗子舞 發(fā)自 凹非寺
量子位 報(bào)道 | 公眾號(hào) QbitAI
注意屏幕右下角，那隨性的舞步 (↑↑↑) 。
他是杰倫·布倫森，達(dá)拉斯獨(dú)行俠 (小牛) 的新秀控衛(wèi)。幾天前，在主場(chǎng)對(duì)馬刺的比賽上，他砍下了全場(chǎng)最高的34分。
但重點(diǎn)不在比賽，而在中場(chǎng)休息的“Dance Cam”時(shí)間：布倫森出現(xiàn)在大屏一角，和看臺(tái)上的球迷一起“舞蹈”，前所未有。
并且，除了與民同樂(lè)的畫(huà)風(fēng)之外，他也會(huì)“跳”火星哥的舞：
那么，NBA球員是怎樣解鎖這樣精湛的動(dòng)作的？
布倫森先站在綠幕前面，錄下了一些基本動(dòng)作：
然后，回去練球，學(xué)舞的事交給機(jī)器學(xué)習(xí)就好。
捕捉一下姿態(tài)
要學(xué)跳舞，第一步是用姿態(tài)估計(jì)算法，一幀一幀處理錄好的視頻，把布倫森變成火柴人。
卡耐基梅隆大學(xué)出品的OpenPose，就是一個(gè)優(yōu)秀的選擇：
OpenPose會(huì)標(biāo)出人體的18個(gè)關(guān)鍵點(diǎn)：
把這些點(diǎn)連成一個(gè)火柴人，來(lái)表示人物的姿態(tài)。
訓(xùn)練一下舞步
既然是和火星哥學(xué)跳舞，就要用同樣的方法，把火星哥的舞蹈視頻處理一下，變出火柴人。
然后，參照伯克利Everybody Dance Now的做法：
AI會(huì)探索出一種規(guī)則，把兩個(gè)火柴人身上的每個(gè)關(guān)鍵點(diǎn)，一一匹配起來(lái)。
這樣，就算兩人身材比例有差別，舞姿也不會(huì)在傳遞的過(guò)程中走了樣。
(如果下一次，要和另外一位老師學(xué)舞，只要讓AI再找出一套匹配規(guī)則就可以了。)
當(dāng)布倫森的火柴人解鎖了火星哥的舞姿，就要訓(xùn)練一只GAN，把火柴人變成完整的人形。
來(lái)自英偉達(dá) (和伯克利) 的pix2pixHD便可以完成這個(gè)任務(wù)：
GAN的生成器要造出足夠逼真的圖像，讓判別器分辨不出誰(shuí)是真實(shí)視頻的截圖，誰(shuí)是生成器的作品。
最終，布倫森便擁有了火星哥精致的舞步：
其實(shí)，除了布倫森，還有很多人偷偷向火星哥“學(xué)”過(guò)舞：
△ 來(lái)自伯克利，Everybody Dance Now！
One More Thing
那么問(wèn)題來(lái)了，冉冉升起的NBA新星，怎么會(huì)想去“學(xué)跳舞”？
布倫森“練舞”的成果，來(lái)自一間叫做Xpire的AI公司，總部也在達(dá)拉斯。
而他效力的球隊(duì)小牛的老板庫(kù)班，是這間公司的聯(lián)合創(chuàng)始人。
OpenPose：
https://github.com/CMU-Perceptual-Computing-Lab/openpose
Everybody Dance Now論文傳送門(mén)：
https://arxiv.org/pdf/1808.07371.pdf
pix2pixHD項(xiàng)目傳送門(mén)：
https://github.com/NVIDIA/pix2pixHD
—?完?—
誠(chéng)摯招聘
量子位正在招募編輯/記者，工作地點(diǎn)在北京中關(guān)村。期待有才氣、有熱情的同學(xué)加入我們！相關(guān)細(xì)節(jié)，請(qǐng)?jiān)诹孔游还娞?hào)(QbitAI)對(duì)話界面，回復(fù)“招聘”兩個(gè)字。
量子位?QbitAI · 頭條號(hào)簽約作者
?’?’ ? 追蹤AI技術(shù)和產(chǎn)品新動(dòng)態(tài)????
- 馬云正式卸任后，阿里巴巴開(kāi)盤(pán)跌0.87%2019-09-10
- AI獨(dú)角獸云知聲，已完成一期科創(chuàng)板IPO輔導(dǎo)2019-10-17
- 亞馬遜在華拓展云計(jì)算團(tuán)隊(duì)，挑戰(zhàn)阿里巴巴和騰訊2019-10-16
- IDC：今年上半年中國(guó)公有云服務(wù)市場(chǎng)規(guī)模達(dá)54.2億美元2019-11-07
相關(guān)閱讀
標(biāo).png)
華為北大等聯(lián)手打造的Transformer竟在CV領(lǐng)域超過(guò)了CNN：多項(xiàng)底層視覺(jué)任務(wù)達(dá)到SOTA
多種任務(wù)共享一個(gè)Transformer 模塊。
Python之路點(diǎn)燃編程圈：源于不爽C語(yǔ)言，單槍匹馬搞副業(yè)，如今吞噬世界
Python is eating the world.
