DRIVE Labs 系列文章

終點站：尋找車位與自動泊車

自動駕駛汽車穿梭過大街小巷，平安經(jīng)過了各類型的路口，即將到達終點。但隨著近年來汽車數(shù)量的增加，城市停車場壓力逐漸增大，能否找到合適的停車位并安全駛?cè)胍矊ψ詣玉{駛汽車提出了更高要求。DRIVE Labs“常學(xué)常新”系列是 NVIDIA DRIVE 團隊推出的、以一輛自動駕駛汽車從出發(fā)到最終目的地為線索的系列文章，共分 8 期主題，將為大家詳細(xì)解析自動駕駛汽車如何一路“過關(guān)斬將”，以及 NVIDIA 技術(shù)與產(chǎn)品在不同場景中提供的支持，以便讀者能更好地了解自動駕駛。

本期是第八期“尋找車位與自動泊車”，將為大家介紹自動駕駛汽車如何通過深度神經(jīng)網(wǎng)絡(luò)（DNN）和 AI 來“尋找”合適的停車位并實現(xiàn)自動泊車，幫助自動駕駛汽車安全、高效地完成自動駕駛旅程的最后一項任務(wù)。

上期文章主要介紹了可保護車輛不受碰撞的安全力場（Safety Force Field，SFF）、可守護駕駛員專注前方道路以實現(xiàn)安全行駛的 AI 軟件，以及能夠優(yōu)化夜間行人檢測的主動學(xué)習(xí)方法，本期將為大家介紹可用于識別停車位的 ParkNet DNN 以及可用于提升自動泊車功能的停車標(biāo)志輔助功能。話不多說，一起來看看吧！

自動駕駛克服了道路上的重重挑戰(zhàn)后，來到了駕駛旅程的最終一段—泊車。隨著汽車數(shù)量的增加和城市建設(shè)的限制，尋找合適的車位逐漸成為駕駛員的一大難點。NVIDIA 引入了 AI 和 DNN 以幫助自動駕駛汽車提高車位尋找能力并提升自動泊車的安全與效率水平。

ParkNet DNN 助力“尋找”開放停車位

在尋找停車位？AI 可以提供幫助

任何一個曾經(jīng)在繁忙的停車場或者擁堵街區(qū)繞過圈的人都知道，尋找一個可用的停車位有的時候會很艱難。停車線標(biāo)記不清、由于視野原因而難以判斷車位是否空閑以及與其他正在尋找停車位的人共同“競爭”，都會給自動駕駛汽車帶來考驗。

為了在這些環(huán)境中停車，自動駕駛汽車需要一個視覺感知系統(tǒng)，以在各種條件下檢測可用的停車位以及不同形狀的停車位。NVIDIA 利用在各種條件下收集的攝像頭圖像數(shù)據(jù)，借助 ParkNet DNN 進行深度神經(jīng)網(wǎng)絡(luò)處理，來幫助自動駕駛汽車感知可用停車位（如以上視頻所示）。

ParkNet DNN 可以在各種條件下檢測開放的停車位?，F(xiàn)實中的停車位并非都是完美的矩形，它們可能是傾斜帶有一定角度的四邊形，也可能是垂直或平行的狀態(tài)，為了解決停車位形狀和朝向的幾何多樣性，NVIDIA 訓(xùn)練 ParkNet DNN 以四邊形為標(biāo)準(zhǔn)來識別停車位，包括直角四邊形（也就是長方形）、任意角度的四邊形等，以賦能自動駕駛汽車感知不同朝向的停車位。

ParkNet DNN 還能分辨停車位的“入口線”，即幫助自動駕駛汽車了解應(yīng)該從多邊形的哪條線進入停車位并停車，以為后續(xù)自主泊車提供準(zhǔn)確的信息。此外，ParkNet DNN 還能通過五個攝像頭環(huán)繞感知裝置來區(qū)分可用停車位和已被其他車輛占用的停車位。

借助 ParkNet DNN 通過五個環(huán)繞攝像頭感知裝置來進行停車位的感知。紅線表示四邊形停車位的形狀檢測。綠線表示被定義為停車位入口線的那一側(cè)

自動駕駛汽車還可將通過 ParkNet DNN 獲取的 2D 感知結(jié)果轉(zhuǎn)化為 3D 坐標(biāo)以用于下一階段 — 自主泊車，以實現(xiàn)精確位置預(yù)估。

左圖：2D 圖像形式的 ParkNet 檢測和分類結(jié)果

右圖：將 ParkNet 檢測和分類結(jié)果轉(zhuǎn)換為 3D 坐標(biāo)，并以俯視的視角進行可視化呈現(xiàn)

停車標(biāo)志輔助功能助力優(yōu)化自動代客泊車

使用停車標(biāo)志輔助功能提升自動代客泊車功能

自動泊車涉及一系列復(fù)雜的感知和決策算法，傳統(tǒng)上依賴高精地圖來檢索停車信息。然而，地圖覆蓋率和較差或過時的本地化信息可能會限制此類系統(tǒng)。同時除了像物理標(biāo)志這樣的明確線索外，現(xiàn)實中還存在著許多攜帶停車信息的隱含標(biāo)志，這也會對自動停車系統(tǒng)帶來識別壓力。除此之外，系統(tǒng)還必須理解和解釋不同地區(qū)的停車規(guī)則。

因此，對自動駕駛汽車而言，配備能夠幫助其了解停車規(guī)則的復(fù)雜性并做出相應(yīng)反應(yīng)的停車標(biāo)志輔助（PSA）系統(tǒng)則顯得尤為重要。以上視頻就為大家展示了 NVIDIA DRIVE AV 軟件堆棧如何利用最先進的 DNN 和計算機視覺算法來提高真實場景中自動停車的覆蓋率和魯棒性，以改善現(xiàn)實場景中的自動泊車。

NVIDIA DRIVE AV 軟件堆棧首先利用 WaitNet DNN、wait perception 堆棧以及 SignNet DNN 等技術(shù)實時檢測、跟蹤和分類各種停車交通標(biāo)志和道路交叉口。而后，將這些感知結(jié)果輸入 PSA 系統(tǒng)，PSA 系統(tǒng)接收到檢測到的停車標(biāo)志和道路交叉口后，會將對象抽象為一個“啟動停車標(biāo)志”或“終點停車標(biāo)志”，并形成停車帶：

• 啟動停車標(biāo)志體現(xiàn)了新停車帶的潛在起點

• 終點停車標(biāo)志表示一個或多個現(xiàn)有停車帶的終止位置

形成停車帶

上圖顯示了 PSA 系統(tǒng)如何將標(biāo)志和道路交叉口抽象為停車帶。該圖顯示，單個標(biāo)志可以生成多個虛擬標(biāo)志。例如，中間的符號作為最左邊符號的“結(jié)束”符號，作為最右邊符號的“開始”。此外，PSA 系統(tǒng)還可以利用交通標(biāo)志的語義將停車帶分為禁止停車、禁止停留、允許停車和未知狀態(tài)（如下圖所示）。

禁止停車區(qū)旁的汽車

下圖展示了 PSA 系統(tǒng)的主要功能工作流。在幀 A 中，PSA 系統(tǒng)能檢測到“停車區(qū)開始”標(biāo)志，并創(chuàng)建新的停車帶。汽車行駛一段時間后，能檢測到“停車區(qū)結(jié)束”標(biāo)志，該標(biāo)志與該停車帶的開始標(biāo)志相匹配。最后，PSA 系統(tǒng)將所有激活的停車帶存儲在其存儲器中，并根據(jù)停車帶所隱含的交通規(guī)則向駕駛員發(fā)出當(dāng)前停車狀態(tài)的信號。

PSA 的高水平工作

基于 NVIDIA DRIVE AGX 運行的 PSA 系統(tǒng)僅需幾毫秒，就能夠以驚人的準(zhǔn)確性實現(xiàn)復(fù)雜的決策，以幫助自動駕駛汽車提升自動泊車功能。

以上就是本期全部內(nèi)容。本次的自動駕駛之旅到這里就暫告一段落了，該系列文章是以一輛自動駕駛汽車的出行為導(dǎo)引，為大家介紹了 NVIDIA 在自動駕駛各場景中所提供的解決方案與技術(shù)支持，希望大家喜歡！歡迎大家點擊“閱讀原文”，觀看更多 NVIDIA DRIVE Labs & Dispatch 視頻，持續(xù)關(guān)注 NVIDIA 在自動駕駛領(lǐng)域的技術(shù)進展。