上天探索脈沖星，下海保護(hù)白海豚，騰訊這個AI團(tuán)隊(duì)，今年真的有點(diǎn)忙

明敏 發(fā)自 凹非寺

量子位 報道 | 公眾號 QbitAI

貴州大山深處，一個口徑達(dá)500米的龐然大物，靜靜坐落在山洼間，將人類與百億光年外的世界連接在了一起。

它就是世界上最大、最靈敏的單口徑射電望遠(yuǎn)鏡FAST，

也被稱為“中國天眼”。

從FAST被建成以來，它就承載著人類探索宇宙起源和演化以及宇宙深處的脈沖星、快速射電暴跡象的任務(wù)。

2017年10月10日，國家天文臺首次對外宣布FAST發(fā)現(xiàn)脈沖星，之后幾年更是成果不斷。

今年夏天，騰訊聯(lián)合國家天文臺啟動“探星計劃”，利用騰訊的AI技術(shù)能力來處理“中國天眼”每天產(chǎn)生的海量數(shù)據(jù)，助力“中國天眼”的探測能力進(jìn)一步提升。

合作成果是立竿見影的。

據(jù)透露，F(xiàn)AST一周產(chǎn)生的數(shù)據(jù)量，原本需要人工分析一年才能完成，如今縮短至2天就能搞定，處理效率提升180倍。

這一計劃中重要的計算機(jī)視覺技術(shù)，由騰訊優(yōu)圖實(shí)驗(yàn)室提供。該團(tuán)隊(duì)擁有1000余項(xiàng)AI專利、共有300+篇論文入選過國際頂會。

此次幫助FAST探索脈沖星，正是基于他們多年來在AI視覺上的技術(shù)積累。

而在探索星辰大海的同時，騰訊優(yōu)圖實(shí)驗(yàn)室在腳踏實(shí)地處，也有自己的腳步。

從工業(yè)質(zhì)檢到保護(hù)瀕危動物

富馳高科，以生產(chǎn)小型、精密復(fù)雜零部件聞名工業(yè)界，但多年來一直被質(zhì)檢問題困擾。

在它們高速運(yùn)轉(zhuǎn)的機(jī)械化生產(chǎn)線上，到了質(zhì)檢環(huán)節(jié)，總是只能依賴人工。

此前，富馳不是沒想過用先進(jìn)技術(shù)來實(shí)現(xiàn)產(chǎn)品質(zhì)檢的機(jī)械化，但直接從國外廠商那里買來的深度學(xué)習(xí)軟件，卻和自己的生產(chǎn)線不適配。

即便經(jīng)過一年多調(diào)試開發(fā)，其實(shí)際應(yīng)用中的效果也只達(dá)預(yù)期的70%-80%。

這是因?yàn)樵撥浖m然可以準(zhǔn)確識別圖像，但是面對零件質(zhì)檢中所出現(xiàn)的同一缺陷在不同位置遷移時情況卻束手無策。

顯然，零件質(zhì)檢這類工作想要做到正確分辨瑕疵，僅僅可以準(zhǔn)確識別還不夠，能夠基于行業(yè)內(nèi)的要求來判斷問題才是關(guān)鍵。

針對這一問題，騰訊優(yōu)圖實(shí)驗(yàn)室在TNN深度學(xué)習(xí)框架基礎(chǔ)上，為富馳高科研制的AI質(zhì)檢儀定制化了一些功能，比如缺陷遷移、分級標(biāo)光等。

如此一來，許多人眼都難以分辨的瑕疵，機(jī)器都能準(zhǔn)備判斷。

同時還將質(zhì)檢員從枯燥的篩查工作中解放出來，整條生產(chǎn)線的工作效率提升為原來的20倍。

無獨(dú)有偶，騰訊優(yōu)圖實(shí)驗(yàn)室也為國際鋰電池巨頭寧德時代提供了技術(shù)方案。

還是同樣的思路：底層技術(shù)+行業(yè)定制。

并且他們還將聯(lián)手打造數(shù)據(jù)中心、私有云、AI算法平臺等基礎(chǔ)設(shè)施，重點(diǎn)針對新能源質(zhì)檢領(lǐng)域一系列世界級難題進(jìn)行AI技術(shù)攻關(guān)。

在醫(yī)學(xué)方面，騰訊今年啟動了醫(yī)療影像國家新一代人工智能開放創(chuàng)新平臺，主要針對醫(yī)學(xué)影像AI方面展開研究。

這一平臺，正是基于騰訊優(yōu)圖實(shí)驗(yàn)室等頂尖AI實(shí)驗(yàn)室支持的騰訊云機(jī)器學(xué)習(xí)平臺（TI-ONE），它集成了大量的常用算法，包括CNN、RNN、DBN等深度學(xué)習(xí)算法，以及GBDT、FFM等傳統(tǒng)機(jī)器學(xué)習(xí)算法。

用戶可以通過平臺集成的算法自動訓(xùn)練自己的模型，支持業(yè)務(wù)，如圖像識別、語音識別、精準(zhǔn)推薦和實(shí)時風(fēng)控等。

過程也非常簡單易懂，平臺采用“搭積木”的方式，讓用戶在幾分鐘內(nèi)就能構(gòu)建自己的AI算法。

而除了為行業(yè)帶來新的發(fā)展動力，騰訊優(yōu)圖實(shí)驗(yàn)室其實(shí)更加關(guān)注技術(shù)之于人的意義。

這從騰訊公司高級執(zhí)行副總裁、云與智慧產(chǎn)業(yè)事業(yè)群CEO湯道生的觀點(diǎn)中，也有跡可循。

“服務(wù)于人”是人工智能最大的價值。

所以公益也成為騰訊優(yōu)圖實(shí)驗(yàn)室輸出AI技術(shù)的一個重要板塊。

并且他們還將技術(shù)開放給了更為廣泛的人群，即便不懂AI，也能用開放的技術(shù)實(shí)現(xiàn)自己的idea。

比如，中山大學(xué)生物學(xué)博士鄭銳強(qiáng)，便借用騰訊優(yōu)圖以及騰訊云提供的AI技術(shù)，開發(fā)出了一款可以對中華白海豚個體識別的科學(xué)工具，由此極大提升個體識別的運(yùn)算速度。

此前，鄭銳強(qiáng)已經(jīng)在中華白海豚的保育區(qū)拍下了海量照片，但是僅憑人力來處理這些圖像，工作量巨大。

不止于此，向大眾科普、擴(kuò)大宣傳也十分必要。通過鄭銳強(qiáng)一人或幾十位保育員的力量，對于保護(hù)已經(jīng)瀕危的中華白海豚來說，遠(yuǎn)遠(yuǎn)不夠。

去年，在首屆騰訊Light·公益創(chuàng)新挑戰(zhàn)賽的契機(jī)下，鄭銳強(qiáng)想到了用AI來解決困擾自己十余年的問題。

一方面，通過AI技術(shù)識別拍攝下來的海豚照片，可以加快種群數(shù)據(jù)整理速度；另一方面，將這些數(shù)據(jù)放在微信小程序等平臺上，也能向大眾科普白海豚的生存情況，從而進(jìn)行海洋生物多樣性教育。

不久前，該項(xiàng)目還入選了《生物多樣性公約》締約方大會第十五次會議“全球生物多樣性100+案例”。

不只是保護(hù)瀕危動物的生物學(xué)博士，關(guān)懷青少年心理健康的這一團(tuán)隊(duì)，也跨界用上了騰訊優(yōu)圖與騰訊云AI的技術(shù)。

這便是奪得首屆騰訊Light公益創(chuàng)新挑戰(zhàn)賽的一等獎“有光小程序和解憂暖心喵App”。

該團(tuán)隊(duì)原本來自心理公司，他們在長期調(diào)研中發(fā)現(xiàn)，當(dāng)代青少年在激烈的升學(xué)競爭、雞娃風(fēng)氣等外部因素的影響下，產(chǎn)生了各種各樣的心理問題，卻往往沒有合適的渠道來宣泄這種負(fù)面情緒。

于是，他們便想到可以在青少年活躍的微信、QQ平臺上，為他們搭建一個專屬樹洞。

有光小程序集合了AI語音實(shí)時合成技術(shù)，可以實(shí)時讀出“暖心師”回復(fù)的信件內(nèi)容；匿名社交中也加入了AI智能回復(fù)的功能，通過NLP技術(shù)，幫助用戶更快匹配到符合關(guān)鍵詞的回復(fù)。

而在小程序之外，該團(tuán)隊(duì)也在嘗試在自有平臺上，對信件內(nèi)容進(jìn)行智能分析，以為用戶匹配到更加合適的“暖心師”。

自正式上線以來，已經(jīng)有7000多暖心師和100多心理咨詢師，在小程序上為未成年人回復(fù)近10萬封信。

產(chǎn)業(yè)落地背后：一年60篇頂會論文

而以上諸多行業(yè)案例的落地，其實(shí)背后都依賴于優(yōu)圖實(shí)驗(yàn)室深厚扎實(shí)的技術(shù)沉淀。

事實(shí)上，優(yōu)圖實(shí)驗(yàn)室作為業(yè)內(nèi)領(lǐng)先的技術(shù)團(tuán)隊(duì)，在技術(shù)探索上始終走在前線。

每年騰訊優(yōu)圖實(shí)驗(yàn)室都有數(shù)十篇論文入選頂會。就以今年為例，優(yōu)圖入選ICCV、CVPR、AAAI等頂會論文共60篇。

• 入選CVPR 2021論文達(dá)20篇，包含Oral論文4篇。
• 入選ICCV 2021論文有17篇，包含Oral論文2篇。
• 入選ACM MM 2021有9篇，入選AAAI 2022有14篇。

研究成果涵蓋人臉識別、對抗攻擊、視頻動作分割、無監(jiān)督人臉質(zhì)量評估等前沿領(lǐng)域。

其中，框架LAP可以實(shí)現(xiàn)無監(jiān)督的3D人臉建模。

也就是不依賴于任何幾何假設(shè)，直接從一張圖像中重建人臉。而且還能不過度依賴局部顏色表觀，降低噪聲所帶來的干擾。

這一方法能夠讓無監(jiān)督3D人臉建模，有賴于更準(zhǔn)確的人臉結(jié)構(gòu)信息和更高的分辨率。

在公開數(shù)據(jù)庫上的大量實(shí)驗(yàn)表明，與當(dāng)前最優(yōu)方法相比，LAP可以重建更好的或有競爭力的人臉幾何和紋理。

Image Matching是指尋找一張圖片中拍攝的子區(qū)域在另一張圖片中的對應(yīng)位置，廣泛應(yīng)用于包括SFM、SLAM、三維重建、大規(guī)模圖像檢索，缺陷檢測與配準(zhǔn)等領(lǐng)域。

IMW2021是谷歌和英屬哥倫比亞大學(xué)（UBC）聯(lián)合舉辦的Workshop比賽。

在這次比賽中，優(yōu)圖實(shí)驗(yàn)室提出的SS-Fusing方法整合了多種算法。

首先用特征點(diǎn)檢測和描述符提取方法SuperPoint來提取關(guān)鍵點(diǎn)和對應(yīng)描述子，然后用自編碼器（Autoencoder）進(jìn)行特征壓縮，再用基于GNN的特征匹配算法SuperGlue對關(guān)鍵點(diǎn)匹配，最后通過DEGENSAC進(jìn)行離群點(diǎn)過濾。

與此同時，騰訊優(yōu)圖還優(yōu)化了SuperGlue的訓(xùn)練過程和損失函數(shù)，提升了模型在比賽數(shù)據(jù)集下的匹配精度。

在該方法中，騰訊優(yōu)圖提出了針對描述子的特征融合模塊，以提升描述子的表達(dá)能力和尺度魯棒性。

同時，他們還對比了特征融合和平均特征融合的效果，其中橫坐標(biāo)為描述子的cos相似度，縱坐標(biāo)為二者的分布差異，可見該方法在高相似度區(qū)域下的占比明顯高于平均特征，而在低相似度區(qū)域下的占比明顯低于平均特征，從而驗(yàn)證了方法的有效性。

值得一提的是，視覺圖像匹配作為基礎(chǔ)CV能力，可以拓展出多種下游任務(wù)，如圖像檢索、三維重建、視頻軌跡跟蹤等。

而“重學(xué)術(shù)”還只是騰訊優(yōu)圖技術(shù)探索的布局之一，其實(shí)在技術(shù)開源、合作等方面，優(yōu)圖也同樣邁出了自己的腳步。

首先來看技術(shù)合作。作為產(chǎn)業(yè)內(nèi)領(lǐng)先的研發(fā)團(tuán)隊(duì)，騰訊優(yōu)圖實(shí)驗(yàn)室一直十分重視與高校、科研院所的合作。

如上提到的SS-Fusing，就是與廈門大學(xué)紀(jì)榮嶸團(tuán)隊(duì)共同開發(fā)的方法。

6月，騰訊優(yōu)圖實(shí)驗(yàn)室聯(lián)合廈門大學(xué)首次發(fā)布《2021十大人工智能趨勢》，提出3D視覺技術(shù)、數(shù)字內(nèi)容產(chǎn)業(yè)、AI深度學(xué)習(xí)算法、人工智能內(nèi)核芯片等方向的前沿預(yù)測。

其次，優(yōu)圖實(shí)驗(yàn)室多年來始終踐行將技術(shù)開放給更多人的使命。

比如由騰訊優(yōu)圖實(shí)驗(yàn)室主導(dǎo)研發(fā)的深度學(xué)習(xí)推理框架TNN，在今年發(fā)布了全平臺開源版本，可同時支持移動端、桌面端和服務(wù)端。

顯然，騰訊優(yōu)圖一以貫之的不僅僅是用技術(shù)惠及產(chǎn)業(yè)圈，更在用自身所具備的研發(fā)優(yōu)勢來推動學(xué)術(shù)圈、技術(shù)圈的共同進(jìn)步。

新目標(biāo)：讓更多人用技術(shù)創(chuàng)造價值

但只將先進(jìn)技術(shù)帶給產(chǎn)界還遠(yuǎn)遠(yuǎn)不夠，只有調(diào)動更為廣泛的社會力量，才能讓技術(shù)迸發(fā)出更為深遠(yuǎn)的價值。

近日，由全國婦聯(lián)宣傳部指導(dǎo)，騰訊公司聯(lián)合中國兒童中心主辦，企鵝伴成長、騰訊華東總部、騰訊SSV創(chuàng)新辦學(xué)實(shí)驗(yàn)室、企鵝愛地球、騰訊優(yōu)圖實(shí)驗(yàn)室、騰訊云AI、騰訊云微搭承辦的第二屆騰訊Light·公益創(chuàng)新挑戰(zhàn)賽正式啟動。

與首屆大賽賽題數(shù)量一致，今年的挑戰(zhàn)賽仍舊設(shè)置3大賽題，分別是兒童安全保護(hù)/教育、素養(yǎng)教育、生物多樣性保護(hù)/教育。

根據(jù)賽題方向，參賽選手需通過騰訊云微搭低代碼、騰訊優(yōu)圖及騰訊云提供的AI技術(shù)，以小程序、H5或PC Web網(wǎng)站的形式打造創(chuàng)新應(yīng)用，來探索解決對應(yīng)社會問題。

獎金方面，三大賽道共設(shè)置公益創(chuàng)新大獎（1-2名），獎勵為40萬元獎金+40萬騰訊云微搭獎勵（代金券）+40萬騰訊云AI獎勵（資源包）。

優(yōu)勝獎（6名），獎勵為10萬元獎金+10萬騰訊云微搭獎勵（代金券）+10萬騰訊云AI獎勵（資源包）。

入圍獎（21名），獎勵為3000元騰訊云微搭獎勵（代金券）+3000元騰訊云AI獎勵（資源包）。

值得一提的是，與去年相比，今年大賽對作品形式要求更加寬泛、對選手編程能力要求更低，而騰訊優(yōu)圖實(shí)驗(yàn)室將繼續(xù)開放自家技術(shù)供選手免費(fèi)用。

也就是說，騰訊不僅希望自己身體力行用技術(shù)普惠大眾，更愿意將技術(shù)開放給所有人用。

由此，技術(shù)便不只是封存在機(jī)器里的冰冷代碼，更不是隔閡不同行業(yè)之間的巨大鴻溝，反而搖身一變成為眾人傳遞溫暖與愛心的“接力棒”。

最后的最后，如果你對“兒童安全保護(hù)/教育、素養(yǎng)教育、生物多樣性保護(hù)/教育”三大領(lǐng)域有好的idea，歡迎點(diǎn)擊文末鏈接參與大賽報名~

也許你的一個想法，就能點(diǎn)亮他人的生活。

試一試？AI能力直接用，用得好還有獎金拿~