新聞中心

EEPW首頁(yè) > 消費(fèi)電子 > 業(yè)界動(dòng)態(tài) > 無(wú)人駕駛路上:激光雷達(dá)和攝像頭都干了些什么?

無(wú)人駕駛路上:激光雷達(dá)和攝像頭都干了些什么?

作者: 時(shí)間:2016-12-07 來(lái)源:雷鋒網(wǎng) 收藏
編者按:在無(wú)人駕駛汽車(chē)上,激光雷達(dá)和攝像頭相對(duì)于是汽車(chē)的“眼睛”,他們倆各有不同的優(yōu)缺點(diǎn),激光雷達(dá)是獲取高精度地圖非常重要的傳感器,那么無(wú)人駕駛汽車(chē)到底用激光雷達(dá)還是用攝像頭?或者還有其它的解決方案呢?

  對(duì)車(chē)道線的檢測(cè)主要分成三個(gè)步驟:

本文引用地址:http://m.butianyuan.cn/article/201612/341208.htm

  第一步,對(duì)獲取到的圖片預(yù)處理,拿到原始圖像后,先通過(guò)處理變成一張灰度圖,然后做圖像增強(qiáng);

  第二步,對(duì)車(chē)道線進(jìn)行特征提取,首先把經(jīng)過(guò)圖像增強(qiáng)后的圖片進(jìn)行二值化( 將圖像上的像素點(diǎn)的灰度值設(shè)置為 0 或 255,也就是將整個(gè)圖像呈現(xiàn)出明顯的黑白效果),然后做邊緣提取;

  第三步,直線擬合。

  車(chē)道線檢測(cè)難點(diǎn)在于,對(duì)于某些車(chē)道線模糊或車(chē)道線被泥土覆蓋的情況、對(duì)于黑暗環(huán)境或雨雪天氣或者在光線不是特別好的情況下,它對(duì)攝像頭識(shí)別和提取都會(huì)造成一定的難度。


無(wú)人駕駛路上:激光雷達(dá)和攝像頭都干了些什么?


  另一個(gè)是障礙物檢測(cè)。上圖是我們?cè)谑致房谧龅膶?shí)驗(yàn),獲取到原始圖像后,通過(guò)深度學(xué)習(xí)框架對(duì)物體進(jìn)行識(shí)別。在這當(dāng)中,做訓(xùn)練集其實(shí)是主要的難點(diǎn)。


無(wú)人駕駛路上:激光雷達(dá)和攝像頭都干了些什么?


  還有一個(gè)是道路標(biāo)識(shí)的識(shí)別,這一部分的研究比較多,這里不再贅述。


無(wú)人駕駛路上:激光雷達(dá)和攝像頭都干了些什么?


  能夠完成什么工作?

  第一是路沿檢測(cè),也包括車(chē)道線檢測(cè);第二是障礙物識(shí)別,對(duì)靜態(tài)物體和動(dòng)態(tài)物體的識(shí)別;第三是定位以及地圖的創(chuàng)建。


無(wú)人駕駛路上:激光雷達(dá)和攝像頭都干了些什么?


  對(duì)于路沿檢測(cè),分為三個(gè)步驟:拿到原始點(diǎn)云,地面點(diǎn)檢測(cè)、提取路沿點(diǎn),通過(guò)路沿點(diǎn)的直線擬合,可以把路沿檢測(cè)出來(lái)。


無(wú)人駕駛路上:激光雷達(dá)和攝像頭都干了些什么?


  接下來(lái)是障礙物識(shí)別,識(shí)別諸如行人、卡車(chē)和私家車(chē)等以及將路障信息識(shí)別出來(lái)。


無(wú)人駕駛路上:激光雷達(dá)和攝像頭都干了些什么?


  障礙物的識(shí)別有這樣幾步,當(dāng)獲取三維點(diǎn)云數(shù)據(jù)后,我們對(duì)障礙物進(jìn)行一個(gè)聚類(lèi),如上圖紫色包圍框,就是識(shí)別在道路上的障礙物,它可能是動(dòng)態(tài)也可能是靜態(tài)的。

  最難的部分就是把道路上面的障礙物聚類(lèi)后,提取三維物體信息。獲取到新物體之后,會(huì)把這個(gè)物體放到訓(xùn)練集里,然后用 SVM 分類(lèi)器把物體識(shí)別出來(lái)。


無(wú)人駕駛路上:激光雷達(dá)和攝像頭都干了些什么?


  如上圖,左上角、左下角是車(chē)還是人?對(duì)于機(jī)器而言,它是不清楚的。右上角和右下角(上圖)是我們做的訓(xùn)練集。做訓(xùn)練集是最難的,相當(dāng)于要提前把不同物體做人工標(biāo)識(shí),而且這些標(biāo)識(shí)的物體是在不同距離、不同方向上獲取到的。

  我們對(duì)每個(gè)物體,可能會(huì)把它的反射強(qiáng)度、橫向和縱向的寬度以及位置姿態(tài)作為它的特征,進(jìn)行提取,進(jìn)而做出數(shù)據(jù)集,用于訓(xùn)練。最終的車(chē)輛、行人、自行車(chē)等物體的識(shí)別是由SVM分類(lèi)器來(lái)完成。我們用這種方法做出來(lái)的檢測(cè)精確度還是不錯(cuò)的。


無(wú)人駕駛路上:激光雷達(dá)和攝像頭都干了些什么?


  利用進(jìn)行輔助定位。定位理論有兩種:基于已知地圖的定位方法以及基于未知地圖的定位方法。

  基于已知地圖定位方法,顧名思義,就是事先獲取車(chē)的工作環(huán)境地圖(高精度地圖),然后根據(jù)高精度地圖結(jié)合激光雷達(dá)及其它傳感器通過(guò)定位算法獲得準(zhǔn)確的位置估計(jì)?,F(xiàn)在大家普遍采用的是基于已知地圖的定位方法。


無(wú)人駕駛路上:激光雷達(dá)和攝像頭都干了些什么?


  制作高精度地圖也是一件非常困難的事情。舉個(gè)例子,探月車(chē)在月球上,原來(lái)不知道月球的地圖,只能靠機(jī)器人在月球上邊走邊定位,然后感知環(huán)境,相當(dāng)于在過(guò)程中既完成了定位又完成了制圖,也就是我們?cè)跇I(yè)界所說(shuō)的 SLAM 技術(shù)。

  激光雷達(dá)是獲取高精度地圖非常重要的傳感器。通過(guò) GPS、IMU 和 Encoder 對(duì)汽車(chē)做一個(gè)初步位置的估計(jì),然后再結(jié)合激光雷達(dá)和高精度地圖,通過(guò)定位算法最終得到汽車(chē)的位置信息。


上一頁(yè) 1 2 下一頁(yè)

評(píng)論


相關(guān)推薦

技術(shù)專(zhuān)區(qū)

關(guān)閉