11月9日,在英偉達(dá)(NVIDIA)GTC大會上,英偉達(dá)創(chuàng)始人兼首席執(zhí)行官黃仁勛(Jensen Huang)宣布了多項(xiàng)新技術(shù),這些技術(shù)有望為萬億美元的產(chǎn)業(yè)帶來改變。具體到自動駕駛領(lǐng)域,英偉達(dá)也新發(fā)布了多項(xiàng)成果。黃仁勛表示,所有移動之物都將實(shí)現(xiàn)完全或近乎完全的自主化?!暗?024年,絕大多數(shù)新電動車都將具備真正的自動駕駛功能。”
一:下一代自動駕駛工具包Hyperion 8
Hyperion 8是端到端英偉達(dá)Drive平臺的最新版本,包括自動駕駛開發(fā)所需的傳感器、計(jì)算和軟件,可幫助汽車制造商、供應(yīng)商和初創(chuàng)公司進(jìn)一步實(shí)現(xiàn)自動駕駛功能。該平臺已于今年4月首次亮相,英偉達(dá)在本次大會上公布了新的細(xì)節(jié),例如該平臺 具有12 個攝像頭、9 個雷達(dá)、12 個超聲波和 1 個前置激光雷達(dá)傳感器。其中,激光雷達(dá)將采用Luminar的Iris激光雷達(dá),Iris的定制激光雷達(dá)架構(gòu)旨在滿足最嚴(yán)格的性能、安全性和汽車級要求,以實(shí)現(xiàn)下一代安全性,以及量產(chǎn)車輛的輔助和自動駕駛功能。雷達(dá)套件包括海拉短程雷達(dá)以及大陸遠(yuǎn)程和成像雷達(dá),實(shí)現(xiàn)了冗余傳感。索尼和法雷奧攝像頭提供了視覺傳感的前沿技術(shù),此外,法雷奧超聲傳感器還可測量物體距離。
(圖片來源:英偉達(dá))
此生產(chǎn)平臺采用模塊化設(shè)計(jì),因此客戶可以輕松地使用所需功能 ———從核心計(jì)算和中間件到 NCAP、L3 級駕駛、L4 級停車和 AI 駕駛艙功能。DRIVE Hyperion 是擴(kuò)展的、開放的,制造商能夠利用 NVIDIA 自己的開發(fā)工作,從而加快自動駕駛行業(yè)的落地速度。黃仁勛在 GTC 上宣布,DRIVE Hyperion 現(xiàn)在可用于 2024 年的車型。
二. 面向自動駕駛汽車、用于DRIVE Sim的Omniverse Replicator
驅(qū)動自動駕駛汽車感知的深層神經(jīng)網(wǎng)絡(luò)通常由兩部分組成:算法模型和用于訓(xùn)練該模型的數(shù)據(jù)。工程師們花了大量的時間來改進(jìn)算法,然而,由于現(xiàn)實(shí)世界數(shù)據(jù)的局限性,數(shù)據(jù)端仍然不發(fā)達(dá),這些數(shù)據(jù)不完整、耗時且收集成本高。算法與數(shù)據(jù)的不平衡通常會導(dǎo)致DNN發(fā)展停滯,阻礙數(shù)據(jù)不能滿足模型需求的進(jìn)展。而通過合成數(shù)據(jù)生成,開發(fā)人員對數(shù)據(jù)開發(fā)有了更多的控制,可以根據(jù)模型的具體需求對其進(jìn)行裁剪。
雖然真實(shí)世界的數(shù)據(jù)是AV訓(xùn)練、測試和驗(yàn)證的關(guān)鍵組成部分,但它也帶來了重大挑戰(zhàn)。用于訓(xùn)練這些網(wǎng)絡(luò)的數(shù)據(jù)是由車隊(duì)中的傳感器在真實(shí)駕駛過程中收集的。一旦捕捉到數(shù)據(jù),就必須以實(shí)際情況進(jìn)行標(biāo)記。注釋是由成千上萬的標(biāo)簽人員手工完成的——這是一個耗時、昂貴且可能不準(zhǔn)確的過程。而使用合成數(shù)據(jù)增強(qiáng)真實(shí)世界的數(shù)據(jù)收集,消除了這些瓶頸,同時允許工程師采用數(shù)據(jù)驅(qū)動的方法進(jìn)行DNN開發(fā),顯著加快了AV開發(fā)。
Omniverse Replicator就是一個基于Omniverse的自動駕駛汽車合成數(shù)據(jù)生成引擎。DRIVE Sim是構(gòu)建在Omniverse上的模擬工具,它利用了該平臺的許多功能。由DRIVE Sim生成的數(shù)據(jù)則被用于訓(xùn)練構(gòu)成自動駕駛汽車感知系統(tǒng)的深度神經(jīng)網(wǎng)絡(luò)。
(圖片來源:英偉達(dá))
通過使用Omniverse Replicator, DRIVE Sim可以生成人類難以或無法識別的地面真相,如速度、深度、遮擋情況、惡劣天氣條件和邊緣情況等。Omniverse Replicator作為一個模塊化的、開放的、可擴(kuò)展的合成數(shù)據(jù)生成平臺,為深度學(xué)習(xí)的工程師帶來了強(qiáng)大的新功能。DRIVE Sim使用這些新特性為AV開發(fā)人員在模擬測試中提供了終極的靈活性和效率,允許工程師創(chuàng)建他們需要的數(shù)據(jù)集來加速他們的工作,其結(jié)果是DNN更精確、開發(fā)時間更短,能更快地將更安全、更高效的自動駕駛技術(shù)應(yīng)用于道路。
三. 提升駕乘體驗(yàn)的DRIVE Concierge 和 ChauFFeur
為了消除日常駕駛途中的繁瑣與壓力,英偉達(dá)推出了兩個AI平臺:NVIDIA DRIVE Concierge 和 DRIVE Chauffeur,這也意味著英偉達(dá)將其自動駕駛技術(shù)的應(yīng)用范圍從駕駛員擴(kuò)展到車內(nèi)數(shù)字體驗(yàn)。
(圖片來源:英偉達(dá))
DRIVE Concierge 用于AI助手,借助 DRIVE Concierge,車輛駕乘人員可以與 AI 進(jìn)行實(shí)時對話,時刻享受智能服務(wù),例如此前需要進(jìn)行物理控制或使用觸控屏的許多功能,現(xiàn)在只需下達(dá)語音命令,即可完成。此外,它還可以按需代客泊車,提出建議、預(yù)訂、撥打電話和發(fā)出提醒(例如,是否有錢包落在了車?yán)铮K梢詾槊课获{駛員和乘客提供個性化服務(wù),為每位車輛駕乘人員提供定制私人禮賓服務(wù)。
DRIVE Chauffeur用于自動駕駛,借助高性能計(jì)算架構(gòu)和 DRIVE Hyperion 8 傳感器集,DRIVE Chauffeur 可以駕車從一地前往另一地。它讓人類駕駛員無需控制車輛,也無需隨時監(jiān)控周圍環(huán)境,節(jié)省了寶貴的時間和精力。
DRIVE Concierge 和 DRIVE Chauffeur 二者緊密結(jié)合,將徹底改變駕駛體驗(yàn)。
四. DRIVE Mapping 集體記憶助力自動駕駛車輛感知環(huán)境
地圖是自動駕駛的基礎(chǔ)支柱,是自動駕駛的集體記憶。高精度地圖提供了對駕駛環(huán)境的基礎(chǔ)理解,并在汽車行駛過程中不斷更新。
在GTC大會上,黃仁勛先生展示了結(jié)合 NVIDIA DRIVE 和 DeepMap 技術(shù)的最新地圖功能。其結(jié)果是高精度的解決方案,能夠?qū)崿F(xiàn)眾包地圖并穩(wěn)定的運(yùn)用于自動駕駛汽車地圖和定位。NVIDIA DRIVE Mapping 使自動駕駛車隊(duì)和單車均能實(shí)現(xiàn)實(shí)時建圖和地圖更新,為全球自動駕駛創(chuàng)建可擴(kuò)展的解決方案。
DRIVE Mapping 為 AI 輔助駕駛功能而制圖的每個區(qū)域都包括攝像頭和雷達(dá)定位層。在惡劣天氣和攝像頭可能被遮擋的光線條件下,雷達(dá)能夠?yàn)槎ㄎ缓婉{駛提供一層冗余。為提高可靠性和準(zhǔn)確性,地圖網(wǎng)絡(luò)使用了經(jīng)過正確數(shù)據(jù)標(biāo)注的地圖來訓(xùn)練。
使用正確的標(biāo)注地圖創(chuàng)建 DRIVE Mapping DNN 的過程(圖片來源:英偉達(dá))
通過運(yùn)用 NVIDIA 在今年早些時候收購的 DeepMap 長期以來在地圖領(lǐng)域積累的專業(yè)知識,DRIVE Mapping 可以在全球范圍進(jìn)行擴(kuò)展,NVIDIA 正在開發(fā)一支專用車隊(duì)來建立全球人口密集區(qū)域的地圖。這些地圖將為未來幾代自動駕駛實(shí)現(xiàn)實(shí)時地圖而提前做好準(zhǔn)備。
英偉達(dá)將在自動駕駛市場占據(jù)更大份額,擴(kuò)大在汽車行業(yè)影響力
自動駕駛市場目前有眾多參與者,包括為乘用車開發(fā)駕駛員輔助系統(tǒng)的供應(yīng)商和汽車制造商,以及致力于部署全自動駕駛汽車(如自動駕駛卡車和自動駕駛出租車)的公司。通過上述新發(fā)布的技術(shù),英偉達(dá)旨在自動駕駛市場占據(jù)更大份額。
近5年來,英偉達(dá)自動駕駛計(jì)算芯片的綜合性能持續(xù)提升。通過采用開放的技術(shù)體系,英偉達(dá)不僅在芯片、計(jì)算平臺、軟件開發(fā)工具、應(yīng)用工具等方面投入巨大,還與車企及Tier1開展深度合作來研發(fā)更高級別的自動駕駛技術(shù)。目前,全球眾多客戶都在使用英偉達(dá)DRIVE Orin計(jì)算機(jī)系統(tǒng)芯片進(jìn)行開發(fā),包括Cruise、梅賽德斯-奔馳、圖森未來、沃爾沃和Zoox等。
使用英偉達(dá)Drive Orin計(jì)算機(jī)系統(tǒng)芯片開發(fā)自動駕駛的車隊(duì)(圖片來源:英偉達(dá))
此次秋季GTC大會中,英偉達(dá)還官宣了與一些中國合作伙伴的合作。其中,輕舟智航(QCraft)將在其Driven-by-QCraft下一代硬件方案中率先使用NVIDIA DRIVE Orin 方案,成為首個使用NVIDIA DRIVE Orin方案的L4級自動駕駛通用方案公司;NVIDIA還將賦能百度第三代自動駕駛平臺ACU產(chǎn)品“三鮮”,后者也將搭載NVIDIA DRIVE Orin;此外,DRIVE Orin車規(guī)級自動駕駛系統(tǒng)級芯片還將落地在高合汽車全新發(fā)布的第二款旗艦Digital GT-HiPhi Z上。
作為全球最大的圖形和人工智能芯片制造商,英偉達(dá)多年來一直在推動將最初為計(jì)算機(jī)游戲和圖形開發(fā)的技術(shù)擴(kuò)展到汽車行業(yè)。隨著一項(xiàng)項(xiàng)新技術(shù)的推出,隨著其“朋友圈”的不斷擴(kuò)容,英偉達(dá)在汽車行業(yè)的影響力也在逐漸擴(kuò)大。