傳奇大神何愷明被曝回歸學界，網(wǎng)友：要成全MIT引用最高的人了

夢晨 2023-03-10 13:28:45 來源：量子位

夢晨 Alex 發(fā)自 凹非寺

量子位 | 公眾號 QbitAI

AI大牛何愷明有了最新動向，而且是回歸學術(shù)界。

MIT CSAIL實驗室發(fā)布公告，3月13日下周一，何愷明將到MIT做學術(shù)演講。

此事引起AI圈廣泛關(guān)注。在相關(guān)知乎問題下，MIT博士@Charles指出，何愷明參加的這個研討會全是Job Talks（求職演講）。

杜克大學教授陳怡然也表示，一直聽說何愷明在尋找教職，現(xiàn)在終于能確認了。

求職演講是學術(shù)界一大傳統(tǒng)，指申請博士或教職者到校做學術(shù)報告，內(nèi)容是他們自己的研究成果，通常正是在每年三四月份集中進行。

并且進入這個階段，就代表何愷明至少已經(jīng)通過了簡歷篩選，研究成果和能力受到了MIT的認可。

有網(wǎng)友預測，鑒于之前李飛飛到MIT演講座無虛席，何愷明這回講座恐怕也會非?；鸨蔀?/span>深度學習大型追星現(xiàn)場。

但也有網(wǎng)友在評論區(qū)補充到，這不代表最終何愷明就會選擇去MIT，也可能會去其他學校，但總之在找教職基本可以確定了。

或成為全MIT引用最高的人

雖然不確定何愷明最終的選擇，但眼尖的網(wǎng)友已經(jīng)發(fā)現(xiàn)，如果他真去了MIT，被引用次數(shù)將成為全校最高。

目前，MIT全校被引用次數(shù)最高的，是化學與生物醫(yī)學工程系的重量級教授Robert Langer，次數(shù)為38萬+。

△圖源：谷歌學術(shù)

而何愷明被引用次數(shù)高達40萬+。

△圖源：谷歌學術(shù)

盡管不同學科無法直接這么對比，但何愷明的引用次數(shù)實在是太引人注目了。

有網(wǎng)友表示，雖然引用量不一定能說明太多問題，不過“引用量是天文數(shù)字的一定是大神”。

要論何愷明最高引研究，必須是ResNet。在2021年底突破10萬大關(guān)，如今已經(jīng)漲到15萬。

ResNet本身雖為計算機視覺領(lǐng)域研究，但其核心思想殘差連接已經(jīng)跨界成為現(xiàn)代深度學習模型的基本組件。

開啟上一次AI熱潮的AlphaGo Zero就是結(jié)合了ResNet+強化學習+蒙特卡洛搜索共同完成。

而開啟最新AI熱潮的ChatGPT，其中的“T”也就是Transformer網(wǎng)絡(luò)中同樣使用了殘差連接。

在計算機視覺上，何愷明的主要貢獻還包括Faster R-CNN及后續(xù)的Mask R-CNN等一系列研究，在很多年都是目標檢測的主流方法。

他的近期主要研究興趣是無監(jiān)督學習，21年底提出的MAE，將語言模型的掩碼預訓練方法用在視覺模型上，為視覺大規(guī)模無監(jiān)督預訓練大模型開路。

最近他還將掩碼方法引入眾多AI繪畫應用的基礎(chǔ)模型CLIP，把訓練速度提升了3.7倍。

在MIT即將進行的演講中，何愷明準備的主題也是“視覺智能”。

包括他在ResNet、目標檢測方面的成果，以視覺無監(jiān)督學習對未來研究的影響。

至于何愷明可能要加入的MIT CSAIL?（麻省理工計算機科學與人工智能實驗室），是麻省理工最大的實驗室，也是世界著名的計算科學和AI實驗室。

這里云集了眾多計算機科學和AI領(lǐng)域的知名人物，包括萬維網(wǎng)發(fā)明人Tim Berners-Lee，分布式計算和并發(fā)算法專家、圖靈獎得主Leslie Lamport和Barbara Liskov等等。

當Meta AI有了產(chǎn)品壓力

何愷明本科就讀于清華大學，博士畢業(yè)于香港中文大學，2011年他加入微軟亞洲研究院。

自2016年起他加入Facebook AI Research，也就是大名鼎鼎的FAIR，繼續(xù)研究計算機視覺。

但就在最近一年之內(nèi)，該部門已發(fā)生兩次重大調(diào)整，都是增強應用型研究，削減基礎(chǔ)研究。

去年6月，受公司轉(zhuǎn)型元宇宙影響，F(xiàn)AIR被降級為元宇宙部門Reality Labs的下屬組織。

同時，支持旗下各大APP的算法團隊轉(zhuǎn)移進產(chǎn)品工程團隊。新架構(gòu)給了產(chǎn)品團隊更大權(quán)限，加速技術(shù)的應用落地。

今年2月底，扎克伯格面對ChatGPT熱潮再次做出調(diào)整，宣布成立頂級AI產(chǎn)品團隊。

把全公司搞AIGC的都集中起來。

多年前，在LeCun卸掉FAIR管理層、就任首席AI科學家時，還在FAIR的田淵棟、吳育昕等研究員都曾表示，在這一部門沒有產(chǎn)品的壓力。

但近期一系列調(diào)整下來，Meta流失不少研究型人才，包括帶領(lǐng)過強化學習研究的Edward Grefenstette等至少4位知名學者離職，甚至位于倫敦的AI實驗室失去了大部分頂級研究者。

從何愷明回歸學術(shù)界的動向來看，他還是更傾向于搞基礎(chǔ)研究。

One More Thing?還有 一 件 事

就在這段時間，關(guān)于學術(shù)界與工業(yè)界的對比再次成了AI圈熱點話題。

一方面，有網(wǎng)友指出工業(yè)界大廠的日子不好過，工程、應用型的崗位增加，研究型的越來越少。

另一方面則是大模型當?shù)溃珹I科研成本指數(shù)級增加，連頂刊Science都在正刊發(fā)文表示：學術(shù)界與工業(yè)界掌握的算力已不在一個數(shù)量級。

兩者夾擊之下，AI大?；貧w學術(shù)界和離開大廠創(chuàng)業(yè)成了同時存在的兩股趨勢。

回歸學術(shù)界的代表除了何愷明，代表人物還有谷歌Tensorflow創(chuàng)始成員Pete Warden。國內(nèi)也有螞蟻金服原副總裁漆遠加盟復旦、商湯原執(zhí)行研究總監(jiān)代季峰加盟清華等。

離開大廠創(chuàng)業(yè)的代表人物則有谷歌Transformer作者們出走成立Adept AI、Character.AI，以及前兩天剛曝出的亞馬遜李沐與Alex Smola攜手創(chuàng)業(yè)。

在《如何看待Kaiming面試MIT教職?》的知乎熱議話題下面，一個高贊回答是：

參考鏈接：

[1]https://www.csail.mit.edu/event/eecs-special-seminar-kaiming-he-pursuit-visual-intelligence
[ 1 ] https ：//www.csail.mit.edu/event/eecs-special-seminar-kaiming-he-pursuit-visual-intelligence
[2]https://weibo.com/2199733231/4877346375735190
[ 2 ] https ：//weibo.com/2199733231/4877346375735190
[3]https://www.zhihu.com/question/588205714
[ 3 ] https ：//www.zhihu.com/question/588205714