自動(dòng)駕駛需要傳感器融合:“攝像頭+雷達(dá)”vs“攝像頭+激光雷達(dá)”
發(fā)布時(shí)間:2019-01-03 責(zé)任編輯:wenwei
【導(dǎo)讀】據(jù)麥姆斯咨詢介紹,目前,對(duì)于科技公司和汽車廠商的高管和工程師來說,自動(dòng)駕駛汽車(AV)技術(shù)及其發(fā)展路線圖上還有很多問題有待解決。其中,三個(gè)懸而未決的大問題正在突顯。
市場研究機(jī)構(gòu)IHS Markit汽車信息娛樂和高級(jí)駕駛輔助系統(tǒng)(ADAS)研究總監(jiān)Egil Juliussen列出了以下幾個(gè)將在2019年困擾汽車行業(yè)的“遺留問題”:
1. 我們是否真的需要激光雷達(dá)(LiDAR)?
2. 科技/汽車公司是否真的準(zhǔn)備好一起合作追求“網(wǎng)絡(luò)效應(yīng)”,以推動(dòng)駕駛軟件的發(fā)展?
3. 業(yè)界能否解決Level 2級(jí)到Level 3級(jí)駕駛操控權(quán)的移交問題?
行業(yè)觀察家已經(jīng)看到科技公司Tier 1和汽車OEM制造商之間興起的新一輪自動(dòng)駕駛伙伴關(guān)系。有幾家公司正對(duì)Level 2級(jí)到Level 3級(jí)自動(dòng)駕駛操控權(quán)的移交問題嘗試新技術(shù),例如以色列ADAM公司,正在嘗試?yán)萌斯ぶ悄埽ˋI)及算法助力其技術(shù)平臺(tái),以解決人、車駕駛操控權(quán)的移交問題。
對(duì)于自動(dòng)駕駛汽車突然將控制權(quán)交回人類駕駛員時(shí)的手足無措困境,“預(yù)計(jì)下個(gè)月在拉斯維加斯舉辦的2019年消費(fèi)電子展上,Tier 1和汽車OEM制造商對(duì)駕駛員監(jiān)控系統(tǒng)的興趣會(huì)重新抬頭。”市場研究機(jī)構(gòu)Semicast Research首席分析師Colin Barnden表示。
但是,ADAS汽車和自動(dòng)駕駛汽車真的需要激光雷達(dá)嗎?Juliussen稱,“我們已經(jīng)聽到很多這樣的市場疑問,這個(gè)疑問在數(shù)字成像雷達(dá)出現(xiàn)之后獲得了更多關(guān)注,因?yàn)椋瑪?shù)字成像雷達(dá)相比過去的產(chǎn)品可以提供更多信息。”他解釋道。
AEye融合“攝像頭+激光雷達(dá)”數(shù)據(jù)
在此背景下,位于美國加利福尼亞州普萊森頓的一家名為AEye的創(chuàng)業(yè)公司,近日宣布為ADAS和自動(dòng)駕駛市場推出了首款商用產(chǎn)品“iDAR”,這是一款融合了高清攝像頭的固態(tài)激光雷達(dá)。
近一年來,自動(dòng)駕駛汽車不一定需要激光雷達(dá)的聲音一直在科技界回響。這種思路確實(shí)很誘人,因?yàn)樵S多汽車OEM制造商都認(rèn)為激光雷達(dá)太昂貴了,他們認(rèn)為激光雷達(dá)技術(shù)距離實(shí)際應(yīng)用還遠(yuǎn)未成熟。
AEye從另一個(gè)角度進(jìn)入了這場“激光雷達(dá)是否必要”的市場辯論。該創(chuàng)業(yè)公司認(rèn)為,汽車OEM制造商不愿意使用現(xiàn)有的激光雷達(dá),除了成本問題,還因?yàn)樗麄兡壳暗慕鉀Q方案依賴于一系列獨(dú)立的傳感器,這些傳感器共同產(chǎn)生了海量數(shù)據(jù)。
AEye解釋說,“這需要漫長的處理時(shí)間和龐大的運(yùn)算能力,通過較準(zhǔn)、分析、校正、下采樣來收集和重組這些傳感器采集的數(shù)據(jù),并將它們轉(zhuǎn)換為可用于安全引導(dǎo)車輛的可操作信息。”
但是,如果AEye以某種方式使用人工智能,僅對(duì)自動(dòng)駕駛路徑規(guī)劃有意義的數(shù)據(jù)信息進(jìn)行區(qū)分采集,而不是為每個(gè)像素分配相同的優(yōu)先級(jí)呢?“正是這一初衷激發(fā)了AEye開發(fā)iDAR”AEye營銷副總裁Stephen Lambright解釋道。
事實(shí)上,AEye的iDAR“深根于最初為國防工業(yè)開發(fā)的技術(shù),”Lambright表示。該創(chuàng)業(yè)公司首席執(zhí)行官Luis Dussan之前曾致力于為戰(zhàn)斗機(jī)設(shè)計(jì)監(jiān)控、偵察和防御系統(tǒng)。他創(chuàng)建了AEye公司,“以為自動(dòng)駕駛汽車提供軍用級(jí)別的性能。”
據(jù)Lambright稱,驅(qū)動(dòng)iDAR開發(fā)的是“首席執(zhí)行官Dussan在軍用飛機(jī)感知系統(tǒng)中學(xué)到的三個(gè)原則”, 1)永遠(yuǎn)不錯(cuò)過任何信息;2)所有物體對(duì)象不是平等的,需要給予不同的權(quán)重;3)實(shí)時(shí)處理。
簡而言之,iDAR的目標(biāo)是開發(fā)一種“無需浪費(fèi)計(jì)算周期”的傳感器融合系統(tǒng)。iDAR的構(gòu)建模塊包括1550nm固態(tài)MEMS激光雷達(dá),低光照高清攝像頭和嵌入式AI。該系統(tǒng)旨在整合2D攝像頭“像素”(RGB)和3D激光雷達(dá)數(shù)據(jù)“體素”(XYZ),以提供“一種新的實(shí)時(shí)傳感器數(shù)據(jù)”為自動(dòng)駕駛路徑規(guī)劃系統(tǒng)提供更快速、更準(zhǔn)確、更長距離、更智能的信息。
值得注意的是,AEye的iDAR提供的不是各自獨(dú)立的攝像頭和激光雷達(dá)系統(tǒng)的掃描后融合。而是通過開發(fā)人工智能感知系統(tǒng),iDAR將固態(tài)激光雷達(dá)與高分辨率攝像頭進(jìn)行物理融合,創(chuàng)建了一種被稱為動(dòng)態(tài)像素的新數(shù)據(jù)類型。通過捕捉x、y、z、R、G、B數(shù)據(jù),這種動(dòng)態(tài)像素“仿生”了人類視覺皮層的數(shù)據(jù)結(jié)構(gòu)。
整合片上系統(tǒng)(SoC)
近日發(fā)布的新型iDAR系統(tǒng)AE110是AEye公司的第四代原型產(chǎn)品。據(jù)Ratnam介紹,“該系統(tǒng)中包含一個(gè)基于賽靈思(Xilinx)Zynq SoC的整合SoC。Zynq將基于ARM的處理器與FPGA集成在一起,旨在實(shí)現(xiàn)關(guān)鍵分析和硬件加速,同時(shí)在一個(gè)器件上集成了CPU、DSP、ASSP和混合信號(hào)功能。2019年,AEye計(jì)劃為這款整合SoC設(shè)計(jì)自己的ASIC。”
“攝像頭+雷達(dá)”或“攝像頭+激光雷達(dá)”?
AEye正在推廣其“攝像頭+激光雷達(dá)”整合傳感器系統(tǒng),而一些高精度毫米波(mmWave)雷達(dá)芯片開發(fā)商則推崇“攝像頭+雷達(dá)”解決方案。
科技行業(yè)研究機(jī)構(gòu)Linley Group的高級(jí)分析師Mike Demler稱,AEye的攝像頭+激光雷達(dá)融合“是一種有趣的方案”。Aeye的方案“可能具有一些獨(dú)特的功能”,但Mike Demler也提出,AEye“并不是唯一一家這樣做的公司”。Demler指出,大陸集團(tuán)(Continental)也在銷售“攝像頭+激光雷達(dá)”的組合單元。但據(jù)推測,大陸集團(tuán)是將兩個(gè)獨(dú)立傳感器的數(shù)據(jù)進(jìn)行預(yù)處理后再進(jìn)行整合。
正如Demler所看到的那樣,AEye解決方案的優(yōu)勢在于“傳感器融合軟件”。實(shí)質(zhì)上,“將攝像頭/激光雷達(dá)傳感器作為一個(gè)集成單元進(jìn)行處理,可以加速識(shí)別目標(biāo)區(qū)域,”Demler指出,“除此之外,兩個(gè)傳感器的各自優(yōu)缺點(diǎn)仍然保留。”
Demler表示,AEye采用了MEMS激光雷達(dá),但并沒有公開透露其空間分辨率。他推測,跟Velodyne等機(jī)械掃描激光雷達(dá)相比,這可能是AEye的一個(gè)弱項(xiàng)。“攝像頭傳感器具有相對(duì)最高的分辨率,但它無法應(yīng)對(duì)極其明亮或黑暗的場景,并且仍然會(huì)受到可能阻擋鏡頭的污垢和沉積物的影響。因此,不能單獨(dú)依靠攝像頭來獲得空間分辨率。同樣地,激光雷達(dá)在降雨時(shí)性能表現(xiàn)也不如雷達(dá),所以在這些條件下不能單獨(dú)依靠激光雷達(dá)進(jìn)行物體探測,并且,大多數(shù)激光雷達(dá)都不能測量物體的移動(dòng)速度。”
真正的邊緣融合
談及AEye,據(jù)VSI Labs創(chuàng)始人Phil Magney透露,VSI Labs被聘請(qǐng)驗(yàn)證激光雷達(dá)的距離和掃描速率。
Magney強(qiáng)調(diào),“iDAR傳感器的獨(dú)特之處在于它將攝像頭和激光雷達(dá)耦合了在一起,并在中央計(jì)算機(jī)攝入整合數(shù)據(jù)之前,對(duì)兩個(gè)傳感器數(shù)據(jù)進(jìn)行融合。”他認(rèn)為,“這是真正的邊緣融合,因?yàn)樵O(shè)備在對(duì)采集的數(shù)據(jù)進(jìn)行任何分類之前,融合了攝像頭數(shù)據(jù)和激光雷達(dá)原始數(shù)據(jù)。我們還認(rèn)識(shí)到,其設(shè)備有能力聚焦目標(biāo)主題,而不需要處理整個(gè)點(diǎn)云場景。”
此外,Magney還承認(rèn),AEye的iDAR設(shè)備“由于擁有融合的攝像頭數(shù)據(jù),因此具有更好的目標(biāo)分類潛力。”他指出,“iDAR正在開發(fā)適用于融合數(shù)據(jù)集的分類算法。”
理論上,AEye所謂的動(dòng)態(tài)像素創(chuàng)建的內(nèi)容“比攝像頭或激光雷達(dá)各自產(chǎn)生的內(nèi)容更豐富”,Magney說。但他也提出“基本上每個(gè)像素都有一個(gè)點(diǎn),每個(gè)點(diǎn)都有一個(gè)像素,但需要注意的是攝像頭的分辨率要遠(yuǎn)高于激光雷達(dá),因此像素與點(diǎn)的比例不是一對(duì)一的。”
Magney承認(rèn),“當(dāng)把iDAR與雷達(dá)放在一起比較時(shí),確實(shí)可以放棄對(duì)雷達(dá)的需求,因?yàn)榧す饫走_(dá)和雷達(dá)都是測距設(shè)備。”
他指出,“如果iDAR激光雷達(dá)的深度感知能力可以給你足夠的信心,并且又能夠跟蹤目標(biāo)的速度信息,那么完全可能放棄雷達(dá)。值得一提的是,與大多數(shù)商用激光雷達(dá)產(chǎn)品相比,iDAR的掃描速度是其兩倍(100赫茲),這是其另一個(gè)優(yōu)勢。”
另一方面,在完全自動(dòng)駕駛汽車實(shí)現(xiàn)之前,會(huì)有越來越多配備ADAS功能的汽車推出,雷達(dá)似乎在ADAS市場比激光雷達(dá)(或iDAR)更占優(yōu)勢。
“雷達(dá)在惡劣天氣下能夠更好地工作,因此最適合ADAS,即使條件不適合自動(dòng)駕駛,也需要安全系統(tǒng)運(yùn)行,”Magney說,“但雷達(dá)本身在物體分類方面仍然受到限制。這是由雷達(dá)設(shè)備的硬件決定的。我們知道雷達(dá)在分類方面正在變得越來越好,并且相關(guān)廠商聲稱可以提供更豐富的功能。一些雷達(dá)創(chuàng)業(yè)公司也提出了非常吸引眼球的方案。”
VSI近期在AEye最近的性能測試中驗(yàn)證了iDAR傳感器的探測和方法。Magney表示,該公司驗(yàn)證了iDAR激光雷達(dá)信號(hào)能夠探測到道路上距離1000米的卡車,其掃描速率達(dá)到了100赫茲。
“我們沒有驗(yàn)證這種傳感器能否帶來更好的性能或安全性,但我們證明它確實(shí)有足夠的性能和智能來識(shí)別1000米處的物體。”他補(bǔ)充說。
在Demler看來,AEye的iDAR并沒有取代雷達(dá)。德州儀器(TI)的mmWave成像雷達(dá)也并沒有取代激光雷達(dá),Demler解釋說,“大多數(shù)自動(dòng)駕駛開發(fā)商都使用了這三種傳感技術(shù),當(dāng)然,事實(shí)上它們也在使用其他傳感器,例如,超聲波傳感器、紅外傳感器等等。”
Demler說:“自動(dòng)駕駛的安全性需要傳感器冗余支持,并且需要多種傳感器共同完成,因?yàn)闆]有一種類型的傳感器可以在所有條件下發(fā)揮最佳性能。”
產(chǎn)業(yè)鏈巨頭看好,Aeye累計(jì)完成6000萬美元融資
近日,AEye還披露了其二次B輪融資,這使公司的總?cè)谫Y額超過了6000萬美元。
AEye表示其B輪投資方包括汽車OEM制造商、Tier 1和Tier 2廠商,以及戰(zhàn)略投資者海拉(Hella Ventures)、斯巴魯(Subaru-SBI)創(chuàng)新基金、LG電子和SK海力士。
AEye營銷副總裁Lambright指出了Hella Ventures和LG電子在公司B輪融資中加入的重要意義。AEye將依靠這些Tier 1合作伙伴來提高iDAR產(chǎn)量并降低單位成本。Lambright估計(jì)到2021年iDAR的初步單位成本將降到1000美元以下。
推薦閱讀:
特別推薦
- AMTS 2025展位預(yù)訂正式開啟——體驗(yàn)科技驅(qū)動(dòng)的未來汽車世界,共迎AMTS 20周年!
- 貿(mào)澤電子攜手安森美和Würth Elektronik推出新一代太陽能和儲(chǔ)能解決方案
- 功率器件熱設(shè)計(jì)基礎(chǔ)(六)——瞬態(tài)熱測量
- 貿(mào)澤開售Nordic Semiconductor nRF9151-DK開發(fā)套件
- TDK推出用于可穿戴設(shè)備的薄膜功率電感器
- 日清紡微電子GNSS兩款新的射頻低噪聲放大器 (LNA) 進(jìn)入量產(chǎn)
- 中微半導(dǎo)推出高性價(jià)比觸控 MCU-CMS79FT72xB系列
技術(shù)文章更多>>
- 意法半導(dǎo)體推出首款超低功耗生物傳感器,成為眾多新型應(yīng)用的核心所在
- 是否存在有關(guān) PCB 走線電感的經(jīng)驗(yàn)法則?
- 智能電池傳感器的兩大關(guān)鍵部件: 車規(guī)級(jí)分流器以及匹配的評(píng)估板
- 功率器件熱設(shè)計(jì)基礎(chǔ)(八)——利用瞬態(tài)熱阻計(jì)算二極管浪涌電流
- AHTE 2025展位預(yù)訂正式開啟——促進(jìn)新技術(shù)新理念應(yīng)用,共探多行業(yè)柔性解決方案
技術(shù)白皮書下載更多>>
- 車規(guī)與基于V2X的車輛協(xié)同主動(dòng)避撞技術(shù)展望
- 數(shù)字隔離助力新能源汽車安全隔離的新挑戰(zhàn)
- 汽車模塊拋負(fù)載的解決方案
- 車用連接器的安全創(chuàng)新應(yīng)用
- Melexis Actuators Business Unit
- Position / Current Sensors - Triaxis Hall
熱門搜索
生產(chǎn)測試
聲表諧振器
聲傳感器
濕度傳感器
石英機(jī)械表
石英石危害
時(shí)間繼電器
時(shí)鐘IC
世強(qiáng)電訊
示波器
視頻IC
視頻監(jiān)控
收發(fā)器
手機(jī)開發(fā)
受話器
數(shù)字家庭
數(shù)字家庭
數(shù)字鎖相環(huán)
雙向可控硅
水泥電阻
絲印設(shè)備
伺服電機(jī)
速度傳感器
鎖相環(huán)
胎壓監(jiān)測
太陽能
太陽能電池
泰科源
鉭電容
碳膜電位器