車東西《公眾號:chedongxi》
作者 | Juice
編輯 | 曉寒
如今的汽車正在轉變為智能汽車。
對於智能汽車來說,智駕和智艙非常關鍵,其中智駕是目前競爭最為激烈的領域。
但智駕技術開發是緩慢上升的過程,這就需要企業收集到足夠多的數據,然後再進一步優化自己的產品。
在這個過程中也誕生了一個非常關鍵問題,海量的數據要如何存儲?
事實上,國內已經有多個公司在佈局自動駕駛數據存儲領域,中科曙光就是近年來誕生的黑馬企業之一,憑借著此前多年的技術積累,在數據存儲和智能計算方面都有著非常強的實力。
日前,ICVS中國自動駕駛年會召開,中科曙光就介紹了其數智協同解決方案,為提高自動駕駛訓練效率、促進自動駕駛的最終量產落地提出了自己的思路。
自動駕駛業務流程包括路測數據導入、數據預處理、AI訓練、驗證測試和備份歸檔等多個環節,海量的數據存好用好,確實可以幫助車企更好解決自動駕駛開發過程中遇到的corner case,進一步推動量產落地。
一、數據驅動自動駕駛發展 海量數據需要存儲
在量產車領域,主流車企都在智駕領域發力,大部分新車標配了基礎的L2級智駕功能,而一些更加高階的智駕功能如高速領航輔助駕駛和城市領航輔助駕駛,也在快速推廣。
另一方面,以Waymo、百度等代表的企業直接瞄準了L4級自動駕駛,已經在多個城市佈局了無人駕駛出租車。
▲汽車行業正快速往自動駕駛發展
經過前期的技術積累,自動駕駛已經從技術驅動走向了數據驅動。
因此,車企需要收集大量的數據,持續進行算法迭代。
此前,車企和自動駕駛玩家的規模並不大,收集到的數據並不算多,車企可以本地存儲。
但目前各個自動駕駛玩家已經有了可觀的車隊規模,每日可以收集到海量數據。
在這種情況下,自動駕駛企業就需要采用新的方法來存儲每日產生的數據。
二、數智同步發展 加速自動駕駛量產
為了更好保存和調用自動駕駛數據,一些專門做數據存儲的公司為自動駕駛行業量身打造數據存儲解決方案,中科曙光就是最近兩年出現的黑馬企業。
對於自動駕駛企業來說,在選擇存儲產品的時候,首要考慮的就是性能。
▲中科曙光存儲產品
中科曙光有業界領先的POSIX訪問協議,單節點可提供4GB/s+吞吐能力,支持大規模ETL端及標註客戶端,可為上千個物理及容器應用節點提供超高性能。
全閃節點和混閃節點的配置方式,最大化提升自動駕駛模型訓練和模擬仿真的效率。
由於業務流程的不同,因此對存儲接口協議需求也不同,中科曙光一套存儲支持文件、對象、容器訪問,靈活的配置和自動適應功能,同時滿足自動駕駛各個流程的應用需求,為數據『采、存、管、用』提供系統的、全生命周期的支撐,實現數據靈活流轉和跨平臺間共享。
中科曙光認為自動駕駛數據訓練是從前端采集到之後訓練仿真的全流程,針對數據的訪問頻率,其存儲的要求也不同。
車輛剛采集到的數據對於訓練平臺來說是新鮮的數據,短時間內可能會多次訪問,可以定義為『熱數據』。
一段時間之後,這一數據的訪問頻次下降,變成『溫冷』數據,並將進行歸檔保存,中科曙光為其提供了分級存儲功能。
對於數據來說,還有一點非常重要,那就是數據的安全性。
『汽車行駛過程中產生的數據太敏感,不僅有自己的車輛數據,還有很多感知數據,隱私數據和國家地理信息數據』, 曙光存儲行業推廣總監李國君說道。
為了保證數據安全性,中科曙光主要從四個方面進行了佈局,首先是硬件層面,中科曙光從操作系統、存儲介質都已經做到了自主研發,從硬件層面保證了安全性。
其次是軟件安全,在存儲系統裡,軟件才是核心。
因此中科曙光不采用國外的軟件OEM,或者采用開源軟件進行包裝,而是自主研發的軟件,確保核心技術的自主、安全。
最後則是增強型的安全管理,這主要是針對一些車企的合規性需求。
通過精細化的權限管理,在用戶訪問的時候,針對不同的訪問權限做身份認證和訪問控制,如一部分數據隻能讀,一部分數據隻能看;此外,中科曙光還會對數據進行加密,設置多個管理員,全方位保障數據安全和訪問合規。
『硬件安全、軟件安全、數據安全到增強安全,從底層硬件到上層訪問可以達到這種全方位的安全』上述負責人向車東西介紹。
另外還有非常重要的一點則是高效運維,中科曙光可以提供WEB的監控界面,可以實時監控硬件、核心部件的運行情況,可以始終關注數據的情況,如果有突發情況,還可以直接下發到微信、飛書、短信、電話等。
另一方面,中科曙光方面還支持在線擴容、自動修復等。
而在存儲業務之外,中科曙光還提供5A級智算中心方案,合作運用十餘家算力中心,為自動駕駛行業用戶提供雲端算力支撐。
通過在數據存儲和智能計算兩方面同時發力,中科曙光正在幫助自動駕駛快速量產落地。
三、多年技術積累 已走到行業前列
中科曙光成立於1996年,在全國范圍內共有7個智能工廠,9個研發中心,在存儲和計算方面具備很強的技術能力。
在存儲方面,經過十餘年的積累,中科曙光已經擁有一支數百人的國內一流存儲研發團隊,在北京、天津、成都設有研發中心,圍繞著分佈式存儲架構、融合統一協議支持等關鍵技術領域持續進行研發投入,獲得了300餘項核心技術發明專利。
中科曙光連續9年,在IDC中國區SDS分佈式文件市場排名前二;並率先推出了業界首款分佈式液冷存儲;在國際最權威的存儲性能評測排行榜IO500-SC22排名全球第一,刷新世界紀錄146%。
正因為出色的技術實力,中科曙光也正在為更多的車企、自動駕駛公司、科技公司提供服務,在自動駕駛業務方面快速發展。
結語:數據將會加速自動駕駛落地
汽車行業的百年歷史中,轉變從未像今天這般快速,自動駕駛將會是這一變革中最具突破性的技術代表,而自動駕駛技術的發展並不是一蹴而就的,中間需要一代代產品的不停迭代,這背後的核心則是對於數據的把握能力。
一輛自動駕駛汽車,一天產生的數據量可能會達到近4TB,如何存儲好並用好這些數據非常關鍵。
中科曙光這樣的專業存儲公司可以給自動駕駛開發者提供更多的選擇,也將會成為自動駕駛落地過程中必不可缺的參與者。