智能駕駛新戰事:火拼「雷視融合」,五股勢力分頭圍剿
本文轉自雷鋒網,如需轉載請至雷鋒網官網申請授權。
“雷視融合”,這個以往一直存在卻沒有被放大意義的技術名詞,如今開始備受關注。
一方面,諸如宇視這樣的視頻物聯企業,在今年開始將“雷視融合”提高到公司戰略的高度,而另一方面,速騰聚創也向新智駕透露,接下來將積極布局路端的雷視融合產品,同時另一邊,還有智能駕駛企業希迪智駕、科技公司百度、阿里、騰訊等,也手拿雷視融合相關方案,在路端擺陣以待。
“雷視融合”不算是什么解題新路徑,在各領域擅長使用該技巧的玩家也并不少見,新鮮的在于——幾大本不大相干的功夫門派,這次終于要在同一十字路口相遇、混戰了。
互聯網企業、公路行業技術產品供應商、視頻物聯企業、車規級雷達供應商、智能駕駛企業......五股勢力都在拿著同一本名為”雷視一體“的劍宗修煉,當然細看會發現,各家的起步時間并不同,招式也各異。
一個更具誘惑力的胡蘿卜還在于,呼吁已久的車路協同,很有可能因此,就被撕開一個口子,從而擺脫單點智能,開始真正打“聰明的車”+“智慧的路”的配合戰了。
但問題則在于,為什么是現在?為什么是他們?當“雷視一體”方案被遷移至交通領域,是否真的行得通?最后誰又會勝出?
五股勢力
在自動駕駛行業,普遍被認可的是,多傳感器融合是未來自動駕駛感知方向的主要發展趨勢。
同樣的故事走向,如今在智慧交通領域又重演一遍。
感應線圈、截面雷達、地磁釘等是主要的傳統車輛檢測器,但通病在于,它們僅能獲得某一截面或瞬時的車輛所在車道和車速信息。
新一代的智能化車輛檢測器雙雄,則是AI攝像頭和正向交通毫米波雷達,它們可以獲得所有車道全局的實時數據,也可以獲得每一輛車精確的位置和矢量化數據。
但AI攝像頭和交通毫米波雷達也有各自的硬傷,比如攝像頭在惡劣環境下會誤報、漏報,而毫米波雷達雖能在惡劣環境下適用,但卻無法看到清晰的圖像,也無法識別出車輛的車牌、車型、車標和車身顏色等信息。
因此將攝像頭和雷達相融合,優勢互補,各取所長而成的雷視一體產品,就成了近一年交通感知方案中的黑馬挑戰者。
其中具有代表性的一派,就是諸如宇視科技、海康威視、大華股份這樣的視頻物聯企業。
它們原本就長于視頻技術,在To G的交通領域更是耕耘多年,近幾年紛紛轉型,開始以視頻為核心,融合進雷達、大數據、人工智能等技術,在交通領域做整體的場景解決方案。
比如宇視科技,就在今年打出了“雷視融合”的Slogan,并發布了雷視一體機產品和相關的解決方案。
宇視科技雷視產品線總監劉圣寧對新智駕表示,在視頻AI方面,最先落地的就是交通路側領域,比如在城市交通治理中,基于卡口及電子警察的非現場執法系統有效地降低了違章駕駛行為,而針對出入口、路側停車、車位反尋與誘導等靜態交通治理,視頻AI基礎有效的提升了服務效率。
“交通強國戰略以及十四五規劃,強調了在交通基礎設施建設基礎上,進一步提升交通信息化、智能化水平,圍繞秩序、效率、安全三要素構建整體交通網絡,足夠密度的全天候、高精度、多維度的感知路側設備成為建設的關鍵要素,尤其是雷達與視頻的融合,近一年已越來越多地被應用到智慧交通路側領域。”
另一派則是速騰聚創、Ouster、萬集科技這樣的車規級激光雷達供應商,他們正以雷達傳感器為刀,切割出智能駕駛、智慧交通等細分市場。
速騰聚創就對新智駕表示,隨著行業對高精度感知的需求越來越高,激光雷達在智慧交通領域的應用規模也隨之加速增長。
速騰聚創最早在2018年開始提供激光雷達和攝像頭融合的產品,目前它的雷視融合路端項目,已經在廣州、深圳、浙江等多個省市的道路落地。
除此之外,推出雷視融合方案的,還有百度、希迪智駕、華為這樣的智能駕駛企業,早早瞄準了智慧城市的騰訊、阿里巴巴當然也沒有缺席。
可以這么總結,目前以雷視融合為指針,在智慧交通戰場打磨產品或方案的,主要有5股勢力,分別為視頻物聯企業、路側毫米波雷達供應商、智能駕駛相關企業、車規級激光雷達供應商和互聯網企業。
他們有的在交通領域深扎根基,有的精于雷達傳感器,有的則側路搶道,從汽車領域一路殺來。
各有殺手锏
不同門派各自的發家技術不同,殺招當然也會各有側重。
布萊恩•阿瑟在其《技術的本質》一書中提到,技術(所有的技術)都是某種組合,這意味著任何具體技術都是由當下的部件、集成件或系統組件構建或組合而成,同時,技術的每個組件自身也是微縮的技術。
簡單來說,就是新技術產生于已有技術的組合,由已有技術進化而來——而所謂“雷視融合”,要做的也是做好雷達和視頻的融合,這其中的雷達,有毫米波雷達,也有激光雷達。
毫米波雷達主要利用其發射波長為毫米波的電磁波,來實現對目標的探測識別,經過目標反射回來的電磁波,通過公式計算,就可以得出被探測目標相對于雷達位置的距離和相對速度。
目前大多數毫米波雷達輸出信息為點云,是不含高度的二維信息,攝像機獲取的圖像也同樣是二維信息。
而為了實現毫米波雷達和視頻的融合檢測,需要將2個坐標空間進行轉換,比如將毫米波雷達點云由雷達坐標系,轉換到攝像機獲取的圖像坐標系下。
這就需要將二者的底層數據進行融合,這一方面可以達到更好的檢測精度,另一方面也能保證關鍵數據的時間一致性。
劉圣寧表示,前端融合、一體化交付將是雷視融合的主要形式,比如:
-
在特征層可利用雷達為視頻提供更加準確的特征區域信息,也可利用視頻識別來彌補雷達的多徑效應;
-
在數據層通過大量的數據與場景化的算法,來同步進行雷達和視頻的AI模型訓練,適應不同的業務需求。
激光雷達則通過對外部環境進行掃描,利用點云構建出三維空間地圖。
根據速騰聚創的介紹,在傳感器硬件層面,激光雷達和攝像頭融合主要是進行時間和空間的標定,也就是將激光雷達三維點云和攝像頭二維彩色圖像進行空間匹配和時間同步。
“車端和路端都是如此,區別主要在于部署位置和數量不同。與此同時,相比車端,路端還有多基站融合,即要對某一段道路上多個基站的感知結果進行融合。”
主打的技術路線不同,因此也就導致了不同企業間,雷視一體機實際應用效果的差異。
比如煙臺市自2020年開始,就先后與華為、百度、科達三家公司合作,進行全息路口/智慧路口應用測試,并曾對比了三家企業雷視融合方案的實際應用情況。
根據介紹,在華為的全息路口,通過對雷達數據和視頻數據的融合,可以初步實現對道路交通全要素的高精度實時采集,真實還原行人、非機動車和車輛的行駛軌跡。
幫助交通事故快處快賠,通過AI算法對行駛軌跡進行精準判斷、對事故的自動識別預警,減少二次事故和擁堵的發生、配合智慧燈控后臺系統實現信號控制的優化......這些都是能在華為全息路口實現的功能。
再比如科達的智慧路口,從功能側看,就著重兩方面的應用:
一是多種視頻融合方式的呈現,像科達會提供高點視頻和地面視頻的融合,從而實現高點畫面上的動態AR標簽;
二則是強調利用實時車輛位置信息在交通信號控制中產生價值,例如科達會通過將車輛實時位置導入交通仿真,去做路網運行短時預測,從而對交通信號方案進行優化。
煙臺市公安局交通警察支隊科技科副科長孫振興表示,整體來看,華為的全息路口通過采集全量數據,強調軌跡熱力圖在交通安全上的應用;百度傾向于車路協同方向,比較重視與互聯網數據的融合應用;科達則偏向于可視化和實時信號優化。
殺手锏不一,實際上客戶關注的指標也不盡相同。
“價格、檢測精度、施工難易程度這些都是用戶關注的指標,但不同的客戶根據實際應用場景,關注的側重點不同,不能一概而論。”速騰聚創對新智駕表示,比如有的客戶還會關注解決方案的功能性,有的會更加看重感知信息的整體性,有的則會更加看重感知信息的應用能力。
曖昧的邊界:斗爭由來已久
很多時候,為了生存,如今戰場的界線早已曖昧模糊。
在智慧城市的大趨勢下,視頻物聯企業跨界殺入智能駕駛領域,智能駕駛企業邁入交通賽道,而家大業大的互聯網企業在各細分相通領域,四路出擊的動作,更是早已見怪不怪。
比如海康威視的汽車電子業務就是聚焦于智能駕駛領域,路徑則是以視頻傳感器為核心,結合雷達、AI、感知數據分析與處理等技術,試圖成為以視頻技術為核心的車輛安全和智能化產品供應商。
在這方面,早在2016年年中,海康就成立了海康汽車技術,并在當年10月迅速對外展示了行車記錄儀、智能后視鏡、車載監控相機及相關配件。
此外,海康還投資了威視汽車科技,在2017年年中成立了海康汽車軟件,并在2018年年初上線了高級駕駛輔助系統、自動泊車APA+。
值得注意的是,海康還投資了毫米波雷達創企森思泰克,后者由雷達專家秦屹創立,目前已是紅旗、一汽、韓國現代等車企的供應商。
除此之外,海康關于雷達傳感器的研發項目也在熱火朝天建設中,相當看重。
今年3月,海康總投資8.5億元的科技園項目在石家莊開工,根據計劃,海康將在該科技園中建設專業毫米波及激光雷達實驗室20余個,生產及科研設備投入預估2.4億元,研發高品質雷達產品超過50種,涵蓋無人駕駛、車載安全、智能交通領域。
據了解,該項目投產后,海康石家莊科技園將成為國內規模最大、產品市場占有率最高的商用雷達研發和生產基地之一。
而從成果來看,海康汽車的進展飛快,資料顯示,2020年度,海康基于視覺和超聲波雷達融合的全自動泊車產品,已獲得多個車廠的新項目定點。
在2020 年,海康汽車電子的客戶包括上汽乘用車、吉利汽車、長安汽車、長城汽車等,全年累計新量產項目 50 余個,新增項目 60 余個,涉及車型 40 余款。
事實上,由于對基于云邊端的系統整合、交通大數據及物聯網應用的整體整合、推出以視頻技術為核心的感知方案得心應手,因此,對智能駕駛領域信心滿滿的視頻物聯企業除了海康,還有大華股份、商湯、奧比中光、虹軟、曠視、格靈深瞳、的盧深視等一系列玩家。
他們在智能駕駛領域陸續集結,從艙里到艙外,從零部件到整車,從硬件到軟件,均有所涉獵、各有所長,儼然對智能駕駛賽道內的原有玩家,形成了圍堵追趕之勢。
像從大華股份孵化出的零跑汽車,此前就推出了3款量產車型,根據零跑汽車官方數據,截至2021年8月31日,2021年零跑汽車累計訂單已達35662臺。同時,據外媒報道,當前零跑汽車還計劃赴港IPO,集資最少10億美元。
你探我老巢,我取你洞穴,冒犯各自的邊界,將成為這些企業們未來多年的常規動作。
穿越大江大河
云譎波詭,群賢畢至,當各方角色于同一路口會合,就是風云戰場。競爭于同一片領土上,眾人揮刀開路,而隊伍剛剛拔寨開赴,究竟是百家爭鳴還是造出幾大英雄互斗,尚不得而知。
當然最先受益的,則是整個車路協同領域的發展,畢竟“聰明的車”+“智慧的路”的協同配合,構成了車路協同的最基礎主體,而雷視融合路側感知系統,則可同時支持車路協同和自動駕駛的高速應用,實現互相配合。
速騰聚創就對新智駕表示,在大量、豐富、準確的實時信息加持下,在單車智能和路側智能的協同下,智慧交通將能實現從單車智能向智能網聯的全局式跨越,向“聰明的車”+“智慧的路”的全局智能網聯交通構想邁進。
這從近兩年各地政府的招標項目要求變化中,可發現蛛絲馬跡。
比如濮陽市政府采購中心在今年7月發布的智慧交通項目交通信號控制系統項目,除了會采購126套聯網自適應信號機外,同時還會采購120套雷視一體機。
從對雷視一體機的要求看,該項目明確要求產品以雷達監測為主,視頻為輔,像素不低于400萬像素,應不小于1500線,做到可將雷達目標位置和速度信息與視頻圖像疊加。
在功能方面,則需實現對車流量、車道速度、車頭間距、車頭時距、車道時間占有率、車道空間占用率、排隊長度、交通狀態和車輛類型等信息的感知、統計,并能識別出通暢、緩慢及擁堵等交通狀態。
一個具體的應用例子就是“綠波帶”。
所謂綠波帶,指的是通過計算車輛通過某一路段的時間,再對各個路口的紅綠燈信號進行協調,以使車輛在行駛時能連續獲得一路綠燈的技術,這就需要交通后端系統掌握道路上近期的機動車流量變化,以及實時的車輛交通數據。
大華股份智慧交通算法總工梅雨曾對雷峰網表示,雙向綠波的一個優化痛點是排隊長度難以確定,排隊會阻礙綠波帶中的車輛,如果不考慮排隊的影響,綠波會失效。“常說的綠初協調、綠中協調、綠末協調,就是針對于排隊問題進行的經驗化處理。”
而可遠距離采集車流量、排隊長度、車頭時距等交通信息,則是雷視融合產品的最大特點和優勢。
“當前的車路協同技術需要路側提供一定范圍內的交通信息,便于車輛或駕駛員提前決策,雷視融合方案能夠為車輛提供全天候、高精度、超視距、車道級的交通信息,有效提升通行安全及行車效率。即便是單車智能的自動駕駛,在有路側感知系統的加持下也會更具安全性。”劉圣寧如此認為。
不過目前各玩家在路端的雷視融合之路并不平坦。
影響雷視融合的因素主要包括傳感器技術水平、產品穩定性和數據采集的精準性等,而目前這些因素都有待進一步的提升。
就像慧爾視總經理姜榮軍此前在接受采訪時所說的那樣,雷視一體機在進行像素級的融合時,雷達數據與視頻數據會出現同步問題,兩者本身對數據的處理方式不同,會造成二者數據之間具有一定的延時性。
另外還有傳感器采集數據的取舍和平衡問題,當采集數據出現問題,應該選擇和相信哪種方式下的數據信息,這就需要根據實際的場景來完善數據處理的算法等。
海口交警支隊科技科科長陳冬則表示,雷達視頻檢測數據可以代替道路上的檢測器,但無法代替互聯網浮動車數據,如何進行兩個數據的更好融合,仍是一個問題。
除此之外,雷視一體機如何與路口原有的檢測設備相互利用、如何能進一步降低成本、如何提高對靜止目標的探測能力、如何降低產品安裝調試和后期運維復雜度等等,都是尚待解決的問題。
戰事初度,仍有大江大河待跨。
孰勝孰負?
對此,不同派系各有看家本領。
劉圣寧指出,比如互聯網企業擁有海量級的C端客戶入口、基于大數據與云計算的中臺能力及業務層能力比較強,但其硬件產品及整體方案仍需要通過生態來完善,而海康、大華、宇視則在前端數據采集分析、融合計算存儲、場景化工程化等方面具有較強優勢。
事實上,在當下一些城市的交通信號優化服務項目的招標要求中,很多都會提到要利用滴滴、高德、百度、智慧交管大腦等平臺,對交通運行情況進行監測、預測,從而及時發現并解決交通擁堵問題。
還是拿綠波帶舉例,像百度早就在2018年已經向地方交警提供了其浮動車軌跡數據,可協助交警打造信號實時監測評估平臺,進而實現綠波帶的優化。
另外就雷達而言,百度、阿里都是速騰聚創的客戶。
在車路協同激光雷達路側感知系統領域,諸如速騰聚創等車規級雷達供應商的優勢,則主要體現在其擁有高性能的激光雷達硬件、技術積累深厚的點云感知軟件和全國各地的大量應用案例這三方面。
宇視、大華股份等企業,則是在路端的算法上積累功底深厚,對于綠波優化,這些視頻物聯企業是早已入局,對系統和算法打磨已久。
事實上,關于路端感知方案基礎功能的實現并不難,真正難的,是企業對客戶習慣的了解和對復雜生態的建設,那些經年累月攢下的應用場景的算法、文檔,并不是一時一刻就能夠澆筑出來的。
風物長宜放眼量,當然目前關于雷視融合的系統性解決方案產品,仍處于試點的不斷發展過程中,如何滿足更多的智慧交通應用場景,仍需進一步深挖需求。
比如前述提到的雷視一體機如何進一步降低成本問題,就有業內人士對新智駕表示,設備成本受產業鏈和應用規模影響,目前雷視一體機的高成本,主要是由于產品應用剛起步,尚不具有規模效應,“隨著用戶認可度的提升,行業廠商的大力投入,產品成本或將會快速達到用戶的預期”。
而在雷視一體機的安裝部署工程方面,視頻已經非常成熟,雷達也較為成熟,因此廠商在設計雷視一體機時,就需要重點考慮融合設備的易安裝調試性等因素。
總結
實際上,關于雷視融合技術在車路協同領域的作用,還有很長一段路要走,發展到某一階段,或許又會出現多雷達融合、激光與視頻融合等新融合技術。
不過正如劉圣寧所言,就像人臉識別技術在這幾年所獲得了大量成功應用,基于ReID的技術如今很大程度上提升了治安管理效率,“如果時間倒推幾年,這些成果是難以預見的”。
風起于青萍之末,不同派系之間過招的寶劍,如今正在各毫支末節處撞擊,發出清脆的震顫聲。