中國率先開源全球首個車路協(xié)同數(shù)據(jù)集 | 百度Apollo×清華AIR研究院
數(shù)據(jù)基于真實場景采集
萬博 發(fā)自 副駕寺
智能車參考 | 公眾號 AI4Auto
全球首個車路協(xié)同自動駕駛數(shù)據(jù)集來了。
清華智能產(chǎn)業(yè)研究院+百度Apollo聯(lián)合發(fā)布。
數(shù)據(jù)集融合路側(cè)+車端感知信息,2D+3D融合標注。
首次實現(xiàn)車路協(xié)同真實場景數(shù)據(jù)應用。
全球首個車路協(xié)同自動駕駛數(shù)據(jù)集發(fā)布
剛剛,百度Apollo聯(lián)合清華智能產(chǎn)業(yè)研究院、智源人工智能研究院以及北京車網(wǎng),發(fā)布了全球首個車路協(xié)同自動駕駛數(shù)據(jù)集:DAIR-V2X。
據(jù)悉,該數(shù)據(jù)集也是首個用于車路協(xié)同自動駕駛研究的大規(guī)模、多模態(tài)、多視角數(shù)據(jù)集,全部數(shù)據(jù)均采集自真實場景,同時融合了2D&3D標注。
據(jù)清華智能產(chǎn)業(yè)研究院首席研究員聶再清介紹,DAIR-V2X,主要有以下幾個特征:
其一,規(guī)模大。
官方資料顯示,DAIR-V2X數(shù)據(jù)集目前總計有71254幀圖像數(shù)據(jù),以及71254幀點云數(shù)據(jù)。
其中包括10084幀圖像+點云路端數(shù)據(jù),22325幀圖像+點云車端數(shù)據(jù),以及38845幀圖像+點云車路協(xié)同數(shù)據(jù)。
其二,多視角+多模態(tài)。
聶再清透露,用于數(shù)據(jù)采集的傳感器,主要來自車端攝像頭、激光雷達以及路側(cè)攝像頭和激光雷達。并且,不同傳感器數(shù)據(jù)高度融合,首次實現(xiàn)了在相同時空下,車端與路端聯(lián)合視角的2D+3D標注。
在多視角數(shù)據(jù)高度融合的前提下,DAIR-V2X數(shù)據(jù)集可以對交通場景障礙物目標,進行全屬性3D標注,精準識別街道常見目標。
可以最大程度解決單車智能長尾問題,延展車輛可運行設計域(ODD)。
其三,真實場景。
DAIR-V2X數(shù)據(jù),采集自北京高級別自動駕駛示范區(qū),10公里城市開放道路+10公里城市高速路,以及28個路口。
采集場景多樣,24小時全時段數(shù)據(jù),包括晴天、雨天、霧天等不同天氣場景。
聶再清表示,DAIR-V2X數(shù)據(jù)集,與僅包含單車端或單路端的數(shù)據(jù)集相比,提供了相同時空下車端與路端聯(lián)合視角的多模態(tài)數(shù)據(jù),并提供了不同傳感器聯(lián)合視角下的融合標注結果。
可以更好地服務車路協(xié)同算法研究和評估。
此外,數(shù)據(jù)集通過半自動自學習車路協(xié)同3D融合標注方法創(chuàng)新,有效地減少了數(shù)據(jù)集構建成本。
數(shù)據(jù)集有什么用?
DAIR-V2X有什么用?
主要有3個方面:
實際應用層面,DAIR-V2X數(shù)據(jù)集,可以為自動駕駛提供前融合、特征級融合、后融合3個層面的決策支持。
簡單來說,就是路側(cè)感知信息,既可以通過數(shù)據(jù)形式,也可以通過虛擬世界坐標的形式為單車自動駕駛提供感知冗余。
增加自動駕駛安全性。
自動駕駛算法迭代方面,數(shù)據(jù)作為人工智能的食糧,是車路協(xié)同自動駕駛技術的關鍵。
百度副總裁尚國斌表示,數(shù)據(jù)是自動駕駛、車路協(xié)同和智能交通等領域取得突破發(fā)展的原動力。
數(shù)據(jù)的有效積累,不僅可以對同等級的算法、算力條件下的效果做質(zhì)的提升,還可以自動化地識別難題、解決難題,形成人工智能“見多識廣、越用越聰明”的正向循環(huán)。
通過DAIR-V2X基于真實場景的多模態(tài)數(shù)據(jù),車路協(xié)同的算法可以更好的得到優(yōu)化,加速自動駕駛系統(tǒng)迭代升級,為高級別自動駕駛的大規(guī)模推廣提供基礎數(shù)據(jù)服務。
對于行業(yè)來說,DAIR-V2X開源共享性,可以推動產(chǎn)業(yè)落地和學術研究進步。
百度在發(fā)布會上披露,DAIR-V2X數(shù)據(jù)集,后續(xù)將逐步發(fā)布便于用戶上手和基準復現(xiàn)的相關工具和代碼。
同時也會開展數(shù)據(jù)集相關使用培訓,以支持學術界開展車路協(xié)同相關研究。
北京高級別自動駕駛示范區(qū)官方透露,DAIR-V2X未來將利用數(shù)據(jù)轉(zhuǎn)化制定一批車路協(xié)同數(shù)據(jù)標準,推動行業(yè)數(shù)據(jù)要素、接口、格式等標準統(tǒng)一,通過數(shù)據(jù)開放,為賽道玩家提供基礎數(shù)據(jù)。
Apollo DAIR項目介紹
據(jù)悉,DAIR-V2X數(shù)據(jù)集,是Apollo AIR計劃的一部分。
該計劃始于去年5月份,由百度Apollo和清華智能產(chǎn)業(yè)研究院(AIR)聯(lián)合推進。
據(jù)悉,Apollo AIR計劃,目前全球唯一僅通過路側(cè)感知就能實現(xiàn)開放道路L4自動駕駛閉環(huán)的技術。
通過Apollo Air技術,車輛可以在沒有車端傳感器、僅借助路端輕量感知和紅綠燈信息的情況下,通過利用V2X、5G等無線通信技術實現(xiàn)車-路-云的信息交互,從而賦能自動駕駛。
據(jù)百度智能駕駛主架構師胡星介紹,為驗證路側(cè)感知可靠性,百度Apollo在僅依靠路側(cè)傳感器的情況下進行路測實驗。
截止到目前,Apollo Air累計閉環(huán)測試里程達到2.5萬公里。
可靠性方面,測試數(shù)據(jù)顯示,Apollo Air路口通過成功率達到99%,MPI增長1200%。
Apollo Air,也成為全球唯一僅通過路側(cè)感知就能實現(xiàn)開放道路L4自動駕駛閉環(huán)的技術。
數(shù)據(jù)集傳送門:
http://air.tsinghua.edu.cn/dair-v2x/