華為重塑自動駕駛，純血鴻蒙編程語言亮相，開發(fā)者大會殺瘋了

一凡 2024-06-22 23:12:50 來源：量子位

一凡 發(fā)自 副駕寺

智能車參考 | 公眾號 AI4Auto

精銳盡出，華為殺瘋了。

華為開發(fā)者大會2024 (以下簡稱HDC 2024)震撼開幕，“純血”鴻蒙、盤古大模型5.0、編程語言倉頡、5.5G……新成果接連炸場。

科技春晚全程高能，技術(shù)盛宴干貨滿滿。

尤其是盤古大模型對自動駕駛的變革，引發(fā)行業(yè)關(guān)注。

AI生成視頻如此逼真，自動駕駛不必依賴路測。

華為盤古大模型，重塑自動駕駛

在HDC 2024上，華為官宣盤古大模型升級至5.0，多模態(tài)能力大幅提高。

所謂多模態(tài)，即盤古大模型5.0能更好更精準地理解物理世界，包括文本、圖片、視頻、雷達、紅外和遙感等更多模態(tài)，生成的內(nèi)容更符合現(xiàn)實規(guī)律。

從應用落地來說，聚焦自動駕駛行業(yè)，盤古大模型5.0將支持靈活定制，生成不同路況、不同光照、不同天氣的訓練視頻數(shù)據(jù)，時長最長可達1分鐘。

在現(xiàn)場，華為還對這項能力進行了演示：

可以靈活定制，是要生成一條空的街道，還是多車復雜路況：

天氣情況也能上上強度：

仔細觀察，會發(fā)現(xiàn)當天氣變化時，生成的車輛細節(jié)不一樣：

同一輛車，雨天時車燈是打開的。

如何做到這么逼真且智能的？

背后是創(chuàng)新的可控時空生成技術(shù)(STGC)，核心是數(shù)據(jù)和模型兩個方面。

訓練數(shù)據(jù)，華為采用六個視角相機，覆蓋360度，累計采集和治理20萬幀高質(zhì)量數(shù)據(jù)。

模型方面，華為在視頻生成大模型VAE和DiT架構(gòu)的基礎(chǔ)上，新增了三個輸入模塊：

• 3D邊界框編碼器(3D bounding box Encoder)
• Bev路網(wǎng)編碼器
• 相機軌跡編碼器

然后使用算法處理3D邊界框和BEEV路網(wǎng)圖，使得盤古大模型實現(xiàn)多視角關(guān)聯(lián)學習，學習到多視角空間和時序一致性。，從而生成自動駕駛訓練所需要的場景。

這有助于解決當下自動駕駛的兩個難題：

數(shù)據(jù)集的泛化和邊緣場景生成。

自動駕駛系統(tǒng)的訓練非常復雜，過去依賴路測，部署車隊投入大，路測采集數(shù)據(jù)成本高，時間周期長。

同時自動駕駛的能力成長，受限于遇到的邊緣場景(Corner Case)，比較罕見。

而且遇到邊緣場景，針對性調(diào)整系統(tǒng)后，也不一定能復現(xiàn)出來驗證，畢竟路況車況隨時在變。

而且極端地邊緣場景，比較危險。

對于這些問題，其實業(yè)內(nèi)早前也提出過仿真測試的路線。

只不過過去是，先建模后渲染，構(gòu)造仿真數(shù)據(jù)成本高，精度誤差大。

現(xiàn)在，華為用盤古大模型，實現(xiàn)了建模仿真到AI生成的轉(zhuǎn)變。

有助于自動駕駛擺脫路測依賴，收集數(shù)據(jù)不一定非要上路，降低自動駕駛訓練成本。

邊緣場景可生成可復現(xiàn)，加快自動駕駛終局到來。

此前Wayve和Waabi這類初創(chuàng)公司，就因相關(guān)能力受到關(guān)注，英偉達等巨頭投資。

現(xiàn)在華為正式官宣入場，很可能會把這條賽道推向新高潮。

而自動駕駛，不過是盤古大模型重塑千行萬業(yè)的冰山一角。

盤古大模型，也只是HDC 2024科技盛宴的其中一道主菜。

HDC 2024，重塑、升級與跨越

除了自動駕駛，在現(xiàn)場華為還提及了盤古大模型對各行各業(yè)的賦能，包括工業(yè)設計、建筑設計、具身智能和汽車設計。

華為還特別提到了，盤古大模型對新車造型設計的利好。

盤古大模型可以將原來需要1-2年設計周期大幅縮短，造型設計師可以將自己的靈感，通過對話、畫圖與大模型交互，生成3D數(shù)字模型。

還可進行風格化調(diào)整，以及零部件編輯，變換顏色等。

生成的數(shù)字模型還可以直接輸出成3D文件，支持10幾種主流格式。

設計師可以直接3D打印樣品，減少制作油泥模型的輪次，極大地節(jié)省成本和時間。

除此之外，其實很早以前，盤古大模型的視覺能力，就已經(jīng)用來檢測汽車零部件的缺陷了。

盤古大模型升級炸場，同樣官宣升級的還有5G技術(shù)。

余承東在現(xiàn)場宣布，5.5G的時延更低，連接數(shù)更多，今年會是5.5G商用元年。

在華為官方的預熱視頻中，最新機型Pura 70已經(jīng)出現(xiàn)5.5G的網(wǎng)絡標識，其中意味不言自明。

還是接著聊新升級對智能車和自動駕駛的影響。

據(jù)公開報道，其實從去年，有車企比如長城，就已經(jīng)在試驗“5G-A（5.5G）超可靠低時延汽車柔性產(chǎn)線”，嘗試提高生產(chǎn)效率。

而在自動駕駛領(lǐng)域，無人車每天產(chǎn)生的超海量數(shù)據(jù)，借助5.5G也能夠?qū)崟r傳回后臺算力平臺，加快算法訓練。

相比盤古大模型和5.5G，可能對于普通用戶來說，最關(guān)注也是感受最直接的，還是“純血鴻蒙”，也就是Harmony Next。

新一代鴻蒙操作系統(tǒng)，不僅是內(nèi)核、數(shù)據(jù)庫和文件系統(tǒng)等等自主，還有配套的編譯器、編程語言、開發(fā)IDE和框架。

從最底層的核心硬件，到用戶交互的前端，每個開發(fā)環(huán)節(jié)實現(xiàn)自主，還有9億臺設備支撐的生態(tài)，動搖操作系統(tǒng)兩強格局。

不過在大會現(xiàn)場，談到Harmony Next的升級，華為更多地還是介紹對終端的影響。

但也能從中推測到，未來的鴻蒙車機，流暢度還會繼續(xù)提高，車機交互會有新的想象空間，

以及華為在自動駕駛的實踐，反哺到終端了。

在大會上，余承東用L1-L5的概念，來形容劃分“純血”鴻蒙升級后，語音助手小藝的推理規(guī)劃能力。

他還在現(xiàn)場激動地表示：

今天，鴻蒙大勢已定。

沒有人能熄滅滿天星光。

后一句話，余承東在4年前的華為開發(fā)者大會上就說過：

沒有人能夠熄滅滿天星光，星星之火可以燎原。

如今我們看到，盤古大模型正重塑千行萬業(yè)，5G技術(shù)持續(xù)升級，鴻蒙生態(tài)跨越式進化。

4年前的星火，真的已成燎原之勢，匯成璀璨星河。

風雪傾軋四五年，輕舟已過萬重山。

萬重山后，繼續(xù)領(lǐng)先。