LeCun:概率論無(wú)法實(shí)現(xiàn)真正AI,我們要退回原點(diǎn)重新開(kāi)始
LeCun馬庫(kù)斯隔空「開(kāi)戰(zhàn)」
詹士 Pine 發(fā)自 凹非寺
量子位 | 公眾號(hào) QbitAI
馬庫(kù)斯又開(kāi)炮了,直指LeCun最新一篇采訪。
「LeCun所說(shuō)的一切,我之前幾乎逐字逐句都說(shuō)過(guò)?!?/p>
「大部分內(nèi)容就在2018年一篇論文中,而LeCun當(dāng)時(shí)還嘲笑,大部分內(nèi)容是錯(cuò)誤的」。
同樣在Twitter上,馬庫(kù)斯也發(fā)布數(shù)十條相關(guān)主題推文,還是針對(duì)LeCun的這篇內(nèi)容,引發(fā)不少業(yè)內(nèi)人關(guān)注。
目前,相關(guān)媒體ZDNet已注意到馬庫(kù)斯的聲音,并在原報(bào)道中刊出相關(guān)爭(zhēng)議——
但目前LeCun尚未回應(yīng)。
所以,這究竟是怎樣一篇采訪?LeCun又說(shuō)了什么?
往下看。
LeCun:AI現(xiàn)在的路走窄了
事情起因是9月24日商業(yè)技術(shù)媒體ZDNet對(duì)LeCun進(jìn)行了采訪,主題關(guān)于他在6月發(fā)表的一篇探討AI未來(lái)的一篇論文。
該論文中,LeCun披露了自己在未來(lái)十年的研究方向:自主機(jī)器智能(Autonomous Machine Intelligence),更多細(xì)節(jié)之前有過(guò)介紹,請(qǐng)參考這篇文章。
此番采訪,LeCun介紹了更多信息,更對(duì)此前專注的路線予以不小否定。
尤其在深度學(xué)習(xí)研究路徑問(wèn)題上,他表達(dá)了懷疑態(tài)度。
目前GPT-3、Transformer擁護(hù)者們相信,只要將一切標(biāo)記化,再訓(xùn)練出巨大模型來(lái)做離散預(yù)測(cè),AI就會(huì)以某種方式出現(xiàn)。但他認(rèn)為,這還只是未來(lái)智能系統(tǒng)的組成部分之一,但不是關(guān)鍵必要的部分——
而即便是強(qiáng)化學(xué)習(xí),也無(wú)法解決上述問(wèn)題,他解釋道,盡管它們是下棋好手,但仍只是專注于「動(dòng)作」的程序。
LeCun還補(bǔ)充,很多人都聲稱要以某種方式推動(dòng)AI進(jìn)步,但這些想法誤導(dǎo)了我們,目前智能機(jī)器的常識(shí)性甚至還不如一只貓,這也許才是解決問(wèn)題的原點(diǎn)。
由此,LeCun坦誠(chéng),自己已放棄用生成網(wǎng)絡(luò)從這一幀預(yù)測(cè)視頻下一幀的研究——
「這是一次徹底的失敗」他補(bǔ)充道。
LeCun總結(jié)了失敗的原因,概率理論基礎(chǔ)的模型限制了他自己。同時(shí),他譴責(zé)了那些認(rèn)為概率論迷信者。他們認(rèn)為,概率論即解釋機(jī)器學(xué)習(xí)的唯一框架,但事實(shí)上,一個(gè)100%概率構(gòu)建的世界模型雀食難以實(shí)現(xiàn)。
LeCun認(rèn)為,目前所有AI都面臨的基本問(wèn)題是——
如何測(cè)量「信息」。
目前這一底層問(wèn)題他自己也沒(méi)能很好解決,不過(guò),LeCun希望去重新思考并打了個(gè)比方:
「這好比我們要去月球,于是建了個(gè)梯子,但梯子無(wú)法到達(dá)那里,我們需要退回來(lái)重新思考基本原理」。
不止分享學(xué)研觀點(diǎn),LeCun提醒,產(chǎn)業(yè)界也需要重新思考目前AI技術(shù)面臨的問(wèn)題。
尤其在自動(dòng)駕駛領(lǐng)域,他認(rèn)為相關(guān)公司一直都過(guò)于樂(lè)觀,從業(yè)者以為將數(shù)據(jù)扔進(jìn)大型神經(jīng)網(wǎng)絡(luò)就能讓它學(xué)到一切。但事實(shí)上,我們可能會(huì)擁有一個(gè)沒(méi)有常識(shí)的L5自動(dòng)駕駛系統(tǒng),這將使相關(guān)功能變得十分脆弱,仍有很多極端狀況無(wú)法照顧到。
「終極解決方案是一個(gè)能更好理解世界運(yùn)作方式的系統(tǒng)」,LeCun提出了自己的思路。
ZDNet還問(wèn)了LeCun為何此時(shí)又出來(lái)發(fā)聲。
他解釋道,自己很早就在思考監(jiān)督學(xué)習(xí)、強(qiáng)化學(xué)習(xí)的不足,Hinton也是,他感慨「我們不再年輕,時(shí)間不多了」。
值得一提的是,LeCun在采訪中直言不諱聊了聊自己的批評(píng)者,其中就包括紐約大學(xué)教授,加里?馬庫(kù)斯,LeCun評(píng)價(jià)道「從未對(duì)AI做任何貢獻(xiàn)」。
至于另一位常在社交網(wǎng)絡(luò)開(kāi)炮的人,LSTM之父、Dalle Molle人工智能研究所聯(lián)合主任Jürgen Schmidhube,LeCun也小小諷刺了下「提想法容易,有貢獻(xiàn)才難」。
大概正是這些言論,為他招來(lái)了爭(zhēng)議。
馬庫(kù)斯又來(lái)了
不出意外,這篇采訪前腳剛發(fā),后腳馬庫(kù)斯就來(lái)了。
不同于以往的爭(zhēng)辯,這次馬庫(kù)斯發(fā)布篇幅超過(guò)6000個(gè)單詞的長(zhǎng)文,直指LeCun剽竊觀點(diǎn)。
馬庫(kù)斯稱LeCun觀點(diǎn)自己很早之前就已經(jīng)說(shuō)過(guò),并表示:
從來(lái)沒(méi)有人比LeCun在采訪中更嚴(yán)密地重復(fù)我的觀點(diǎn)了。
甚至從采訪中摘出原話,和自己曾經(jīng)的觀點(diǎn)一一作出比對(duì)。
△對(duì)比節(jié)選(共7條)
一直以來(lái),馬庫(kù)斯就對(duì)當(dāng)前人工智能的架構(gòu)不抱期待,稱要實(shí)現(xiàn)通用人工智能還需要引入其他的技術(shù)。
對(duì)馬庫(kù)斯關(guān)于AI的一些觀點(diǎn),LeCun總是認(rèn)為其在博取關(guān)注。此前,他就發(fā)布一篇“如何在推特吸引AI圈眼球”的方法論,在其中,若有所指地羅列道:
- 一再指出深度學(xué)習(xí)的局限性(其實(shí)這是每個(gè)人都知道的)。
- 根據(jù)某人新言論,聲稱他們改變自己的想法,同意自己N(N=5/10/15/20)年前說(shuō)的;
- 利用觀點(diǎn)模糊性,宣稱某人觀點(diǎn)出自自己早年言論,指控對(duì)方剽竊;
- 堅(jiān)持發(fā)推/寫小作文;
…
如前文提及,LeCun也在此次采訪更是專門點(diǎn)名馬庫(kù)斯,「他是一位心理學(xué)家,根本不懂AI」。
不出意外,馬庫(kù)斯做了回應(yīng)。
他引用了LeCun的諷刺原文回應(yīng)稱,ZDNet已經(jīng)在報(bào)道中補(bǔ)充了他的博客,希望LeCun也能作出相應(yīng)的解釋。
值得一提的是,關(guān)于LeCun采訪中提及的那篇論文,LSTM之父Jürgen Schmidhube也表達(dá)過(guò)不滿,稱其沒(méi)有正確引用自己實(shí)驗(yàn)室1990-2015年的成果。
參考鏈接:
[1]https://www.zdnet.com/article/metas-ai-guru-lecun-most-of-todays-ai-approaches-will-never-lead-to-true-intelligence/
[2]https://garymarcus.substack.com/p/how-new-are-yann-lecuns-new-ideas?sd=pf&s=09