在本屆CES展會上,地平線發(fā)布名為Matrix的最新自動駕駛計算平臺,該平臺基于地平線BPU2.0處理器架構(伯努利架構),能夠為L3和L4級別的自動駕駛提供高性能的感知系統(tǒng),目前已向世界頂級自動駕駛廠商大規(guī)模供貨。
除此之外,憑借依托Matrix邊緣計算能力,地平線還展出了NavNet眾包高精地圖采集與定位方案,以及地平線激光雷達感知方案。
Matrix自動駕駛計算平臺:高性能、低功耗、低延時
地平線Matrix自動駕駛計算平臺
Matrix平臺利用地平線AI加速IP最大化了嵌入式AI計算性能,可支持激光雷達、毫米波雷達的接入和多傳感器融合。以視覺感知能力為例,該平臺能夠基于稀疏化和定點化神經(jīng)網(wǎng)絡實現(xiàn)8類不同類型物體的目標檢測和多達25類像素級語義分割。
同時,Matrix平臺結合有助于預測和深度估計的三維車輛檢測,能夠更好地理解復雜場景,可輕松應對高度遮擋,且需快速響應場景下的自動駕駛。
而在保證高性能的前提下,其可在31W的低功耗下運行,無需水冷系統(tǒng),滿足了高性能和低功耗的行業(yè)應用級需求,非常適合嵌入式自動駕駛的應用和產(chǎn)品化。依托地平線自主研發(fā)的工具鏈,開發(fā)者可以基于Matrix平臺部署神經(jīng)網(wǎng)絡模型,實現(xiàn)開發(fā)、驗證、優(yōu)化和部署。
兩款配套方案,實現(xiàn)地圖采集與實時建圖
依托Matrix的邊緣計算能力,地平線開發(fā)出NavNet眾包高精地圖采集與定位方案,以及激光雷達感知方案。這些方案在本屆CES上均是首次公開亮相,并搭載到實車,為試乘觀眾現(xiàn)場展示NavNet僅通過單目攝像頭視覺感知即可在車端實現(xiàn)的地圖采集與實時建圖能力,以及激光雷達感知方案的多線360度激光雷達點云3D檢測能力。
地平線NavNet是地平線基于Matrix開發(fā)的眾包高精地圖采集與定位解決方案。該方案將點云建圖過程全部在邊緣進行,輸出建立好的局部三維地圖,進而用以與已有高精地圖進行匹配獲取定位,同時可在無地圖區(qū)域進行自動建圖。
當前,地平線NavNet針對眾包場景,利用深度學習和SLAM技術進行道路場景的語義三維重建,支持16大類地圖元素的重建、識別、矢量化。并且在僅使用單目攝像頭的情況下,便能夠實現(xiàn)重建結果與全局地圖的匹配定位和眾包建圖,并根據(jù)實時重建的局部地圖與云端高精地圖進行關聯(lián)優(yōu)化,持續(xù)提升高精地圖的質量。
而地平線Matrix激光雷達感知方案采用全卷積深度神經(jīng)網(wǎng)絡對柵格化后的點云特征,進行車輛,行人等障礙物的實時檢測,具備高性能,低時延,低功耗的特點,且可基于地平線工具鏈進行自主開發(fā)。
除上述兩項全新方案外,同樣基于Matrix平臺的地平線Matrix前向視覺感知方案、地平線360度視覺感知方案, 以及基于地平線征程處理器的地平線紅外熱成像避障方案等也在本次CES上展出。
XForce計算平臺:密集人群時空結構化方案
除了關于自動駕駛方面的新品與方案外,地平線還展出了基于XForce計算平臺的密集人群時空結構化方案、跨鏡多目標軌跡動線方案以及安防視頻結構化方案等多個嵌入式人工智能解決方案。
地平線密集人群時空結構化方案可以在極低的功耗下實現(xiàn)大規(guī)模人臉和人體的抓拍識別、人體行為分析、視頻結構化等。地平線跨鏡多目標軌跡動線方案融合業(yè)界領先的人體檢測、人體Skeleton、人體單例分割、單目標跟蹤、人體ReID及多目標跟蹤等視覺感知技術,能夠實現(xiàn)對多目標、跨區(qū)域的跟蹤。
地平線安防視頻結構化方案對視頻每一幀中的行人、機動車、非機動車等信息進行檢測、跟蹤、抓取和識別,將非結構化數(shù)據(jù)結構化,以進行視頻數(shù)據(jù)的存儲、分析及后續(xù)應用。
地平線基于XForce打造的系列解決方案可應用于商業(yè)、城市安全、交通等多個場景,如商業(yè)中的客流統(tǒng)計、自動建檔、消費者動線、場景熱力圖、消費者行為分析等;在交通、城市安全等多類城市公共場景中也可以實現(xiàn)高效率的人臉、人頭、人體檢測,以及多人的人體骨骼點和單例分割。
結合“端+云”,則更可實現(xiàn)商業(yè)場景中的智能化識別、管理、服務;以及城市安全、交通等場景下的人臉管控、人員分析,車輛分析等,從而實現(xiàn)各類事件的及時發(fā)現(xiàn),甚至是事先預測。