Cloudera助力上汽大眾車輛數據實時監測,實現存算性能升級
可信企業AI數據公司Cloudera宣布,成功助力上汽大眾搭建車輛數據監控平臺,通過其車聯網業務滿足收集和監控智能車輛數據的監管要求。上汽大眾通過部署Cloudera Data Platform(CDP)進行車輛數據監控作業,在核心跑批作業性能上實現了顯著提升。同時上汽大眾也實現了數據運營效率的優化,節省了高達 67% 的存儲空間,提升了車輛監控效率并優化了車輛數據管理,進而推動數據運存的降本增效。
近年來,隨著新能源汽車的迅猛增長,車輛監控信息數據量呈現出指數級的增加;同時,國家對于新能源汽車監控信息共享也提出了進一步號召,這就需要車企對相關數據監測有更好的計算能力、存儲、傳輸和應用。
在這樣的背景下,上汽大眾大數據平臺團隊于2017年開始基于大數據技術構建全新用于車輛數據監控的平臺,以賦能新能源車輛關鍵業務發展。2022年,上汽大眾將數據平臺升級,數據存儲及作業性能實現了進一步優化。首先,HBase存儲空間減少了約73TB,節約了67%的空間使用,這得以大大提升其車輛數據監控的作業效率;其次,總集群文件數減少約8千萬,約優化原有文件數的75%。此外,在核心報表及跑批業務上也實現了明顯的性能提升,批量作業性能平均提升2.5倍,最高可達6.6倍。這些性能升級,均保證了上汽大眾對車輛監測數據鏈可以實現完整的存儲和詳細的分析,并且充分滿足國家車輛數據管理相關法律法規的要求。除此以外,上汽大眾還基于此數據平臺搭建了面向車主的上汽大眾APP,為廣大車主帶來更智能的汽車服務,包括遠程查看車輛實時狀態、智能導航服務等。該平臺上線不到兩年?戶已達600萬。
上汽大眾數據庫大數據平臺負責人謝聰表示:“上汽大眾從2017年起開始引入Cloudera的CDH,并在2018年構建了數據湖。在2022年,僅用了六個月的時間,上汽大眾成功將數據平臺升級至CDP,成為國內汽車行業中首批升級的企業。我們所搭建的車輛數據監測平臺能輕松實現海量數據存儲,完善車輛數據監測及分析;而這些數據也將進一步助力我們更好地服務車主,并推動上汽大眾車聯網業務的持續發展。CDP作為成熟的大數據平臺,有效幫助我們解決了日益增長的實時數據存儲、管理、計算等難題。未來,我們也將進一步解決存算分離問題以及計算和存儲增速不一致問題,以實現基于工作負載的變化達到最佳的性能資源平衡。”
Cloudera大中華區副總裁王剛表示:“在車聯網市場大力發展的當下,從國家到行業對智能汽車的數據監測管理都頗為關注。如何存儲、管理海量數據并從中獲得洞察,是汽車企業發展的重要課題。實踐證明,Cloudera為上汽大眾構建的數據平臺助其實現了數據存儲以及批量作業性能的全面優化,為加速構建車聯網生態奠定了堅實基礎。未來,我們將持續支持上汽大眾,為新能源汽車及車聯網發展提供數據驅動力。”
展望未來,上汽大眾還將繼續擴展采用CDP的更多功能,持續利用湖倉一體優勢升級監測數據平臺,為智能網聯汽車服務創新打下堅實的數據基礎。