自動駕駛需要傳感器融合：攝像頭+雷達vs攝像頭+激光雷達

　　據(jù)麥姆斯咨詢介紹，目前，對于科技公司和汽車廠商的高管和工程師來說，自動駕駛汽車(AV)技術(shù)及其發(fā)展路線圖上還有很多問題有待解決。其中，三個懸而未決的大問題正在突顯。

　　市場研究機構(gòu)IHS Markit汽車信息娛樂和高級駕駛輔助系統(tǒng)(ADAS)研究總監(jiān)Egil Juliussen列出了以下幾個將在2019年困擾汽車行業(yè)的“遺留問題”：

　　1、我們是否真的需要激光雷達(LiDAR)?

　　2、科技/汽車公司是否真的準(zhǔn)備好一起合作追求“網(wǎng)絡(luò)效應(yīng)”，以推動駕駛軟件的發(fā)展?

　　3、業(yè)界能否解決Level 2級到Level 3級駕駛操控權(quán)的移交問題?

　　行業(yè)觀察家已經(jīng)看到科技公司、Tier 1和汽車OEM制造商之間興起的新一輪自動駕駛伙伴關(guān)系。有幾家公司正對Level 2級到Level 3級自動駕駛操控權(quán)的移交問題嘗試新技術(shù)，例如以色列ADAM公司，正在嘗試?yán)萌斯ぶ悄?AI)及算法助力其技術(shù)平臺，以解決人、車駕駛操控權(quán)的移交問題。

　　對于自動駕駛汽車突然將控制權(quán)交回人類駕駛員時的手足無措困境，“預(yù)計下個月在拉斯維加斯舉辦的2019年消費電子展上，Tier 1和汽車OEM制造商對駕駛員監(jiān)控系統(tǒng)的興趣會重新抬頭，”市場研究機構(gòu)Semicast Research首席分析師Colin Barnden表示。

　　但是，ADAS汽車和自動駕駛汽車真的需要激光雷達嗎?Juliussen稱，“我們已經(jīng)聽到很多這樣的市場疑問?！边@個疑問在數(shù)字成像雷達出現(xiàn)之后獲得了更多關(guān)注，“因為，數(shù)字成像雷達相比過去的產(chǎn)品可以提供更多信息，”他解釋道。

　　AEye融合“攝像頭+激光雷達”數(shù)據(jù)

　　在此背景下，位于美國加利福尼亞州普萊森頓的一家名為AEye的創(chuàng)業(yè)公司，近日宣布為ADAS和自動駕駛市場推出了首款商用產(chǎn)品“iDAR”，這是一款融合了高清攝像頭的固態(tài)激光雷達。

　　近一年來，自動駕駛汽車不一定需要激光雷達的聲音一直在科技界回響。這種思路確實很誘人，因為許多汽車OEM制造商都認為激光雷達太昂貴了，他們認為激光雷達技術(shù)距離實際應(yīng)用還遠未成熟。

　　AEye從另一個角度進入了這場“激光雷達是否必要”的市場辯論。該創(chuàng)業(yè)公司認為，汽車OEM制造商不愿意使用現(xiàn)有的激光雷達，除了成本問題，還因為他們目前的解決方案依賴于一系列獨立的傳感器，這些傳感器共同產(chǎn)生了海量數(shù)據(jù)。

　　“這需要漫長的處理時間和龐大的運算能力，通過較準(zhǔn)、分析、校正、下采樣來收集和重組這些傳感器采集的數(shù)據(jù)，并將它們轉(zhuǎn)換為可用于安全引導(dǎo)車輛的可操作信息，”AEye解釋說。

　　但是，如果AEye以某種方式使用人工智能，僅對自動駕駛路徑規(guī)劃有意義的數(shù)據(jù)信息進行區(qū)分采集，而不是為每個像素分配相同的優(yōu)先級呢?“正是這一初衷激發(fā)了AEye開發(fā)iDAR，”AEye營銷副總裁Stephen Lambright解釋道。

　　事實上，AEye的iDAR“深根于最初為國防工業(yè)開發(fā)的技術(shù)”，Lambright表示。該創(chuàng)業(yè)公司首席執(zhí)行官Luis Dussan之前曾致力于為戰(zhàn)斗機設(shè)計監(jiān)控、偵察和防御系統(tǒng)。他創(chuàng)建了AEye公司，“以為自動駕駛汽車提供軍用級別的性能。”

　　據(jù)Lambright稱，驅(qū)動iDAR開發(fā)的是“首席執(zhí)行官Dussan在軍用飛機感知系統(tǒng)中學(xué)到的三個原則”， 1)永遠不錯過任何信息;2)所有物體對象不是平等的，需要給予不同的權(quán)重;3)實時處理。

　　簡而言之，iDAR的目標(biāo)是開發(fā)一種“無需浪費計算周期”的傳感器融合系統(tǒng)。iDAR的構(gòu)建模塊包括1550nm固態(tài)MEMS激光雷達，低光照高清攝像頭和嵌入式AI。該系統(tǒng)旨在整合2D攝像頭“像素”(RGB)和3D激光雷達數(shù)據(jù)“體素”(XYZ)，以提供“一種新的實時傳感器數(shù)據(jù)”，為自動駕駛路徑規(guī)劃系統(tǒng)提供更快速、更準(zhǔn)確、更長距離、更智能的信息。

　　值得注意的是，AEye的iDAR提供的不是各自獨立的攝像頭和激光雷達系統(tǒng)的掃描后融合。而是通過開發(fā)人工智能感知系統(tǒng)，iDAR將固態(tài)激光雷達與高分辨率攝像頭進行物理融合，創(chuàng)建了一種被稱為動態(tài)像素的新數(shù)據(jù)類型。通過捕捉x、y、z、R、G、B數(shù)據(jù)，這種動態(tài)像素“仿生”了人類視覺皮層的數(shù)據(jù)結(jié)構(gòu)。

　　整合片上系統(tǒng)(SoC)

　　近日發(fā)布的新型iDAR系統(tǒng)AE110是AEye公司的第四代原型產(chǎn)品。據(jù)Ratnam介紹，“該系統(tǒng)中包含一個基于賽靈思(Xilinx)Zynq SoC的整合SoC。Zynq將基于ARM的處理器與FPGA集成在一起，旨在實現(xiàn)關(guān)鍵分析和硬件加速，同時在一個器件上集成了CPU、DSP、ASSP和混合信號功能。2019年，AEye計劃為這款整合SoC設(shè)計自己的ASIC?！?/p>

　　“攝像頭+雷達”或“攝像頭+激光雷達”?

　　AEye正在推廣其“攝像頭+激光雷達”整合傳感器系統(tǒng)，而一些高精度毫米波(mmWave)雷達芯片開發(fā)商則推崇“攝像頭+雷達”解決方案。

　　科技行業(yè)研究機構(gòu)Linley Group的高級分析師Mike Demler稱，AEye的攝像頭+激光雷達融合“是一種有趣的方案”。Aeye的方案“可能具有一些獨特的功能”，但Mike Demler也提出，AEye“并不是唯一一家這樣做的公司?！盌emler指出，大陸集團(Continental)也在銷售“攝像頭+激光雷達”的組合單元。但據(jù)推測，大陸集團是將兩個獨立傳感器的數(shù)據(jù)進行預(yù)處理后再進行整合。

　　正如Demler所看到的那樣，AEye解決方案的優(yōu)勢在于“傳感器融合軟件”。實質(zhì)上，“將攝像頭/激光雷達傳感器作為一個集成單元進行處理，可以加速識別目標(biāo)區(qū)域，”Demler指出，“除此之外，兩個傳感器的各自優(yōu)缺點仍然保留?！?/p>

　　Demler表示，AEye采用了MEMS激光雷達，但并沒有公開透露其空間分辨率。他推測，跟Velodyne等機械掃描激光雷達相比，這可能是AEye的一個弱項?！皵z像頭傳感器具有相對最高的分辨率，但它無法應(yīng)對極其明亮或黑暗的場景，并且仍然會受到可能阻擋鏡頭的污垢和沉積物的影響。因此，不能單獨依靠攝像頭來獲得空間分辨率。同樣地，激光雷達在降雨時性能表現(xiàn)也不如雷達，所以在這些條件下不能單獨依靠激光雷達進行物體探測，并且，大多數(shù)激光雷達都不能測量物體的移動速度。”

　　真正的邊緣融合

　　談及AEye，據(jù)VSI Labs創(chuàng)始人Phil Magney透露，VSI Labs被聘請驗證激光雷達的距離和掃描速率。

　　Magney強調(diào)，“iDAR傳感器的獨特之處在于它將攝像頭和激光雷達耦合了在一起，并在中央計算機攝入整合數(shù)據(jù)之前，對兩個傳感器數(shù)據(jù)進行融合?！彼J為，“這是真正的邊緣融合，因為設(shè)備在對采集的數(shù)據(jù)進行任何分類之前，融合了攝像頭數(shù)據(jù)和激光雷達原始數(shù)據(jù)。我們還認識到，其設(shè)備有能力聚焦目標(biāo)主題，而不需要處理整個點云場景。”

　　此外，Magney還承認，AEye的iDAR設(shè)備“由于擁有融合的攝像頭數(shù)據(jù)，因此具有更好的目標(biāo)分類潛力?！彼赋?，“iDAR正在開發(fā)適用于融合數(shù)據(jù)集的分類算法?！?/p>

　　理論上，AEye所謂的動態(tài)像素創(chuàng)建的內(nèi)容“比攝像頭或激光雷達各自產(chǎn)生的內(nèi)容更豐富”，Magney說。但他也提出“基本上每個像素都有一個點，每個點都有一個像素，但需要注意的是攝像頭的分辨率要遠高于激光雷達，因此像素與點的比例不是一對一的?！?/p>

　　Magney承認，“當(dāng)把iDAR與雷達放在一起比較時，確實可以放棄對雷達的需求，因為激光雷達和雷達都是測距設(shè)備?！?/p>

　　他指出，“如果iDAR激光雷達的深度感知能力可以給你足夠的信心，并且又能夠跟蹤目標(biāo)的速度信息，那么完全可能放棄雷達。值得一提的是，與大多數(shù)商用激光雷達產(chǎn)品相比，iDAR的掃描速度是其兩倍(100赫茲)，這是其另一個優(yōu)勢?！?/p>

　　另一方面，在完全自動駕駛汽車實現(xiàn)之前，會有越來越多配備ADAS功能的汽車推出，雷達似乎在ADAS市場比激光雷達(或iDAR)更占優(yōu)勢。

　　“雷達在惡劣天氣下能夠更好地工作，因此最適合ADAS，即使條件不適合自動駕駛，也需要安全系統(tǒng)運行，”Magney說，“但雷達本身在物體分類方面仍然受到限制。這是由雷達設(shè)備的硬件決定的。我們知道雷達在分類方面正在變得越來越好，并且相關(guān)廠商聲稱可以提供更豐富的功能。一些雷達創(chuàng)業(yè)公司也提出了非常吸引眼球的方案?！?/p>

　　VSI近期在AEye最近的性能測試中驗證了iDAR傳感器的探測和方法。Magney表示，該公司驗證了iDAR激光雷達信號能夠探測到道路上距離1000米的卡車，其掃描速率達到了100赫茲。

　　“我們沒有驗證這種傳感器能否帶來更好的性能或安全性，但我們證明它確實有足夠的性能和智能來識別1000米處的物體，”他補充說。

　　在Demler看來，AEye的iDAR并沒有取代雷達。德州儀器(TI)的mmWave成像雷達也并沒有取代激光雷達，Demler解釋說，“大多數(shù)自動駕駛開發(fā)商都使用了這三種傳感技術(shù)，當(dāng)然，事實上它們也在使用其他傳感器，例如，超聲波傳感器、紅外傳感器等等。”

　　Demler說：“自動駕駛的安全性需要傳感器冗余支持，并且需要多種傳感器共同完成，因為沒有一種類型的傳感器可以在所有條件下發(fā)揮最佳性能?！?/p>

　　產(chǎn)業(yè)鏈巨頭看好，Aeye累計完成6000萬美元融資

　　近日，AEye還披露了其二次B輪融資，這使公司的總?cè)谫Y額超過了6000萬美元。

　　AEye表示其B輪投資方包括汽車OEM制造商、Tier 1和Tier 2廠商，以及戰(zhàn)略投資者海拉(Hella Ventures)、斯巴魯(Subaru-SBI)創(chuàng)新基金、LG電子和SK海力士。

　　AEye營銷副總裁Lambright指出了Hella Ventures和LG電子在公司B輪融資中加入的重要意義。AEye將依靠這些Tier 1合作伙伴來提高iDAR產(chǎn)量并降低單位成本。Lambright估計到2021年iDAR的初步單位成本將降到1000美元以下。