明敏 發(fā)自 凹非寺

量子位 | 公眾號 QbitAI

大模型時代一來，AI框架扮演的角色愈加重要。

行業(yè)深諳此理，于是人工智能框架生態(tài)峰會2023為此召開。

參會的成員都是產(chǎn)學(xué)研界耳熟能詳?shù)拿郑荷虾Ｈ斯ぶ悄苎芯吭骸⒅袊茖W(xué)院自動化研究所、上海白玉蘭開源開放研究院、OpenI啟智社區(qū)、華為、昇思MindSpore……

他們齊聚上海的目的只有一個，共建人工智能框架生態(tài)，將中國人工智能產(chǎn)業(yè)推向一個新階段。

具體的動作有：

• 聯(lián)合啟動上海昇思AI框架&大模型創(chuàng)新中心，已入駐20+單位
• 發(fā)布“共建人工智能框架生態(tài)，繁榮中國人工智能產(chǎn)業(yè)”聯(lián)合倡議
• 成立昇思MindSpore開源社區(qū)理事會

總之，是要以AI框架生態(tài)為中心，讓產(chǎn)業(yè)“朋友圈”更牢固。

為什么以AI框架生態(tài)為核心？

想要回答這一問題，要從AI框架的定位和重要性說起。

一直以來，AI框架被視為AI發(fā)展中基建一般的存在。

縱向角度，AI框架在AI全棧體系中處于承上啟下的位置，承擔(dān)著AI技術(shù)生態(tài)中操作系統(tǒng)的角色，對于AI軟件生態(tài)構(gòu)建非常關(guān)鍵。

橫向角度，AI框架是AI學(xué)術(shù)創(chuàng)新與產(chǎn)業(yè)商業(yè)化的重要基礎(chǔ)軟件，對人工智能從理論走向?qū)嵺`、快速進入場景化應(yīng)用時代，有著非常重要的意義。

對于開發(fā)者而言，它能提升開發(fā)能效、簡化開發(fā)流程，同時還提供豐富的功能和工具，加速AI應(yīng)用創(chuàng)新和推廣。

隨著大模型趨勢席卷而來，AI領(lǐng)域內(nèi)的開發(fā)創(chuàng)新工作更加如火如荼，那么AI框架作為核心開發(fā)工具，就顯得尤為重要。

它的底層能力、功能豐富度、生態(tài)完善度，都會影響開發(fā)效率，進而影響新技術(shù)和應(yīng)用創(chuàng)新的速度。

在這幾方面中，生態(tài)構(gòu)建又顯得格外重要。因為它將直接影響框架的能力、功能、以及產(chǎn)業(yè)化應(yīng)用等。

而AI框架生態(tài)的發(fā)展，離不開政產(chǎn)學(xué)研用各界伙伴的大力支持。

一方面需要高校、科研機構(gòu)合作，探索人工智能行業(yè)前沿方向，豐富算子和模型，培養(yǎng)AI人才的同時持續(xù)豐富技術(shù)生態(tài)。

另一方面也需要與商業(yè)伙伴合作，將人工智能技術(shù)廣泛應(yīng)用到千行百業(yè)，推進全球智能化的發(fā)展。

由此也就不難理解，為什么要召開人工智能框架生態(tài)峰會，并且圍繞中國AI框架領(lǐng)軍代表昇思MindSpore，開展一系列生態(tài)共建。

如成立昇思MindSpore開源社區(qū)理事會（下文簡稱昇思社區(qū)理事會），目標(biāo)就是面向產(chǎn)業(yè)、商業(yè)、生態(tài)等各方向吸納對社區(qū)有貢獻、有潛力的企業(yè)，通過理事會加強核心伙伴粘性，助力伙伴商業(yè)生態(tài)成功。

啟動上海昇思AI框架&大模型創(chuàng)新中心，則是抓住大模型趨勢，快速拉起一個產(chǎn)業(yè)“朋友圈”，共同推動國內(nèi)大模型趨勢創(chuàng)新不斷涌現(xiàn)。

當(dāng)然，行業(yè)內(nèi)會如此重視AI框架生態(tài)，除了其身位特殊之外，更直接的原因或許還是因為，多年來AI框架生態(tài)的建設(shè)已經(jīng)為產(chǎn)業(yè)發(fā)展帶來了切實好處。

昇思MindSpore正是代表之一。

昇思MindSpore為構(gòu)建生態(tài)做了哪些事？

昇思MindSpore是華為在2020年開源的全場景AI框架。

昇思MindSpore在技術(shù)層面，基于當(dāng)下產(chǎn)業(yè)的需求和挑戰(zhàn)，提出了自動并行、動靜態(tài)圖結(jié)合、二階優(yōu)化、全場景部署、全棧協(xié)同加速幾大關(guān)鍵特性。

比如自動并行可以降低切分?jǐn)?shù)據(jù)、切分模型等技術(shù)問題門檻，提升開發(fā)能力和效率；全場景協(xié)同支持智能匹配端邊云多樣設(shè)備；面向系統(tǒng)軟硬件co-design能讓昇思MindSpore做到整圖完整卸載，達到與通用GPU硬件對比的程度……

由此，昇思MindSpore即便沒有老牌AI框架的先發(fā)優(yōu)勢，但在解決超大規(guī)模模型訓(xùn)練、AI for Science等產(chǎn)業(yè)實際問題上，已經(jīng)占據(jù)領(lǐng)先身位。

具體技術(shù)架構(gòu)上，昇思MindSpore共分為四層，分別是：

• 模型層：提供開箱即用的功能，主要包含預(yù)置的模型和開發(fā)套件，以及圖神經(jīng)網(wǎng)絡(luò)、深度概率編程、科學(xué)計算庫等拓展庫；
• 表達層（MindExpression）：提供模型開發(fā)、訓(xùn)練、推理的API接口，支持用原生Python語法開發(fā)和調(diào)試神經(jīng)網(wǎng)絡(luò)，特有的動靜態(tài)圖統(tǒng)一能力可以兼顧開發(fā)效率和執(zhí)行性能兩方面需求，同時在生產(chǎn)和部署階段提供全場景統(tǒng)一的C++/Python接口；
• 編譯優(yōu)化（MindCompiler）：這部分是AI框架的核心，以全場景統(tǒng)一中間表達（MindIR）為媒介，將前端表達編譯成執(zhí)行效率更高的底層語言，同時進行全局性能優(yōu)化，包括自動微分、代數(shù)化簡等硬件無關(guān)優(yōu)化，以及圖算融合、算子生成等硬件相關(guān)優(yōu)化；
• 運行時，按照上層編譯優(yōu)化的結(jié)果對接并調(diào)用底層硬件算子，同時通過“端-邊-云”統(tǒng)一的運行時架構(gòu)，支持包括聯(lián)邦學(xué)習(xí)在內(nèi)的“端-邊-云”AI協(xié)同。

如今，基于昇思MindSpore的技術(shù)成果也相繼涌現(xiàn)。

比如今天剛剛正式對外發(fā)布的紫東.太初2.0。

它由中科院自動化所牽頭，基于AI框架昇思MindSpore打造。

作為業(yè)界領(lǐng)先的全模態(tài)大模型，紫東.太初2.0可實現(xiàn)文本、圖片、語音、視頻、3D點云、傳感信號等不同模態(tài)的統(tǒng)一表征和學(xué)習(xí)。其3.8B模型已經(jīng)在昇思MindSpore社區(qū)開源。

此外還有武漢.LuoJia、鵬程.神農(nóng)等產(chǎn)學(xué)研界成果，都是以昇思MindSpore為底座。據(jù)悉，共有400+模型、900+頂會論文基于昇思MindSpore技術(shù)生態(tài)實現(xiàn)。

由此可以看到，昇思MindSpore作為AI框架，不僅鏈接南北向生態(tài)，同時也已構(gòu)建出一個貫穿產(chǎn)學(xué)研的生態(tài)圈。

通過不斷完善、繁榮自身生態(tài)圈，昇思MindSpore不僅成長為國內(nèi)最活躍的開源社區(qū)之一，還更進一步助推產(chǎn)業(yè)技術(shù)創(chuàng)新、人才培養(yǎng)、應(yīng)用落地。

具體可以從技術(shù)生態(tài)、開源生態(tài)和行業(yè)生態(tài)幾個方面看起。

技術(shù)生態(tài)方面，除了如上提到的算法模型方面的成績，昇思打造了大模型開源生態(tài)。

昇思大模型平臺，向全球百萬開發(fā)者提供了包括紫東.太初、鵬程.神農(nóng)、武漢.LuoJia等大模型能力。

該平臺集大模型在線推理、算法選型、創(chuàng)意分享、產(chǎn)學(xué)研專區(qū)為一體，提供免費課程資源、經(jīng)典樣例代碼、企業(yè)落地案例、垂直行業(yè)專區(qū)和多層級挑戰(zhàn)賽。

開源生態(tài)方面，2022年，中國信息通信研究院發(fā)布《AI框架發(fā)展白皮書》，指出昇思MindSpore作為國內(nèi)優(yōu)質(zhì)AI框架代表，在Gitee千萬個開源項目中綜合排名第一，已是國內(nèi)開源社區(qū)最活躍的AI框架。

目前共計有13000+名核心開發(fā)者在昇思MindSpore社區(qū)做出貢獻。

昇思在海內(nèi)外30個地區(qū)成立本地研究小組MindSpore Study Group（簡稱MSG），開展MSG企業(yè)行、MSG高校行、MSG行研會等線上線下活動。

同時，昇思還加入Hugging Face社區(qū)，賦能全球開發(fā)者；每半年舉辦一次MindCon極客周，目前已引導(dǎo)3萬+開發(fā)者參與社區(qū)貢獻；開展從入門到精通的全場景AI實戰(zhàn)線上課程，與290+所高校展開昇思MindSpore教學(xué)合作，設(shè)置初、中、高級別課程，轉(zhuǎn)型全新開源創(chuàng)新實踐課程。

并且已經(jīng)形成清晰明確的高效開發(fā)者成長路徑圖，轉(zhuǎn)化核心技術(shù)貢獻者。現(xiàn)已走進290+所高校。

最后在行業(yè)生態(tài)建設(shè)上，昇思MindSpore目前已服務(wù)5500家企業(yè)，涵蓋數(shù)字政府、金融、制造、交通、能源、終端等端邊云全場景行業(yè)。

總之，參考昇思MindSpore三年以來的發(fā)展可以感受到，在當(dāng)下發(fā)展階段內(nèi)，一個AI框架能帶來的影響早已不局限于提升開發(fā)者的效率和能力，通過構(gòu)建完善的生態(tài)圈，AI框架可以作為中心樞紐將人才、技術(shù)、資源、應(yīng)用場景等緊密聯(lián)結(jié)，加速行業(yè)內(nèi)整體的開發(fā)效率和能力，以此推動產(chǎn)業(yè)向前發(fā)展。

AI框架生態(tài)該怎么做？

那么，昇思MindSpore的發(fā)展，同樣也為AI開源框架生態(tài)構(gòu)建提供一定思考。

簡單總結(jié)有這樣2點：

• 產(chǎn)業(yè)導(dǎo)向
• 開源開放

首先是AI框架的自身定位上，昇思遵循了產(chǎn)業(yè)導(dǎo)向原則。

在TensorFlow、PyTorch憑借先發(fā)優(yōu)勢占據(jù)市場主導(dǎo)位置的情況下，新興的AI框架想要在全球市場中占據(jù)一席之地，差異化競爭是關(guān)鍵。

脫胎于產(chǎn)業(yè)界的昇思，自然從產(chǎn)業(yè)界入手，在工業(yè)化能力上形成差異化，盡可能滿足產(chǎn)業(yè)內(nèi)對開發(fā)門檻、運行效率、部署靈活的要求。

同時深入行業(yè)洞察趨勢，在一些熱門領(lǐng)域內(nèi)形成競爭優(yōu)勢。比如在大模型訓(xùn)練上，昇思已經(jīng)支持了業(yè)界最多的并行模式。

第二，開源開放。

昇思MindSpore開源后，提出“立足中國、放眼世界”的目標(biāo)，基于開放、融合、共享的理念，持續(xù)推動構(gòu)建“南向多芯和北向應(yīng)用生態(tài)”。

“南向”為AI芯片算力提供標(biāo)準(zhǔn)化技術(shù)生態(tài)接口和開發(fā)工具，構(gòu)建自主開源AI框架生態(tài)和人工智能算力多芯生態(tài)；

“北向”為開發(fā)者和算法廠商開展技術(shù)聯(lián)創(chuàng)，圍繞場景創(chuàng)新重大需求開展聯(lián)合攻關(guān)。

以昇思社區(qū)理事會為抓手，在大模型、科學(xué)智能等前沿技術(shù)領(lǐng)域持續(xù)推動創(chuàng)新，構(gòu)筑面向未來的核心競爭力，提取共性能力，沉淀框架和數(shù)據(jù)資產(chǎn)。昇思積極支持與南向芯片廠商的適配，目前已經(jīng)與20+芯片廠商開展適配工作。

此外，他們也是國內(nèi)第一個采用開放治理架構(gòu)的AI框架開源社區(qū)。

在昇思MindSpore社區(qū)，有來自全球18名技術(shù)專家組成的技術(shù)委員會，他們通過公開的討論，公開的會議，把控整個社區(qū)的技術(shù)發(fā)展方向。

在技術(shù)委員會的指導(dǎo)之下，設(shè)立了特殊興趣小組（Special Interest Group），來負(fù)責(zé)各個模塊的開發(fā)；如果需要跨模塊協(xié)作，則成立對應(yīng)的工作組。

昇思還基于自身生態(tài)內(nèi)的力量，盡可能協(xié)同上下游、聯(lián)動產(chǎn)學(xué)研力量，快速推動社區(qū)規(guī)模發(fā)展。

據(jù)公開數(shù)據(jù)，昇思MindSpore首年下載量就突破了10萬，第二年時這一數(shù)字已經(jīng)提升到了102萬，現(xiàn)在總下載量已經(jīng)超過474萬。

結(jié)合當(dāng)下趨勢來看，ChatGPT引爆大模型趨勢后，未來一段時間內(nèi)行業(yè)內(nèi)將保持高速發(fā)展，誰跑得更快、誰就更有優(yōu)勢。

而這種競速并不只是單純地拼人才、拼資源，更大程度上還是拼基礎(chǔ)設(shè)施和生態(tài)。

AI框架始終被視為AI領(lǐng)域的根技術(shù)，是模型的“土壤”。

如何讓這個“土壤”更加肥沃？開源、開放、共建。

《經(jīng)濟日報》發(fā)文中也強調(diào)了算法開源生態(tài)的重要性：要搶占人工智能大模型產(chǎn)業(yè)發(fā)展制高點，必須加強戰(zhàn)略規(guī)劃和深度治理，推進新型算力生態(tài)基礎(chǔ)設(shè)施建設(shè)，打造穩(wěn)定可靠的算法開源生態(tài)。

這也是為什么人工智能框架生態(tài)峰會2023要在此時此刻召開，核心目的就是為了吸引、呼吁更多人，一同共建中國AI框架生態(tài)。

而在新一輪技術(shù)周期的影響和帶動下，中國AI框架生態(tài)會怎樣發(fā)展，也值得我們期待。