單目攝像頭和FPGA的ADAS產(chǎn)品原型系統(tǒng)
1月5日-8日拉斯維加斯消費(fèi)電子展(CES)上,地平線機(jī)器人(以下簡(jiǎn)稱(chēng)“地平線”)將與英特爾聯(lián)合展示一款基于單目攝像頭和FPGA的ADAS產(chǎn)品原型系統(tǒng)。
車(chē)輛檢測(cè)結(jié)果
該原型由英特爾和地平線聯(lián)合開(kāi)發(fā)完成,基于地平線最新設(shè)計(jì)的一款低功耗深度神經(jīng)網(wǎng)絡(luò)處理器架構(gòu)IP。分工上,英特爾提供了FPGA硬件平臺(tái),地平線提供了實(shí)現(xiàn)在FPGA上的深度神經(jīng)處理器架構(gòu),深度神經(jīng)網(wǎng)絡(luò)算法,以及整套嵌入式人工智能解決方案。該系統(tǒng)可實(shí)現(xiàn)高速公路和市區(qū)道路場(chǎng)景下的ADAS功能,可對(duì)車(chē)輛、車(chē)道線,行人,以及可行駛區(qū)域等同時(shí)實(shí)時(shí)檢測(cè)和識(shí)別。
現(xiàn)場(chǎng)展示會(huì)盡量還原行車(chē)中視覺(jué)部分實(shí)時(shí)計(jì)算的過(guò)程。使用一個(gè)和硬件平臺(tái)連接的單目攝像頭拍攝路況,并在硬件平臺(tái)中對(duì)交通環(huán)境進(jìn)行處理,模擬行車(chē)時(shí)基于計(jì)算機(jī)視覺(jué)的駕駛輔助功能。受限于室內(nèi)展示無(wú)法提供真實(shí)道路環(huán)境,攝像頭會(huì)拍攝顯示器播放的行車(chē)路況視頻,來(lái)模擬真實(shí)情況中攝像頭從前擋玻璃處觀察前方路況。實(shí)時(shí)運(yùn)算處理的結(jié)果會(huì)由另一個(gè)顯示器輸出,觀眾可在畫(huà)面中看到目標(biāo)檢測(cè)識(shí)別后的結(jié)果,來(lái)演示算法的識(shí)別率和硬件性能。
眾所周知,在基于視覺(jué)的ADAS功能實(shí)現(xiàn)中,圖像相關(guān)算法性能與計(jì)算資源高度相關(guān)。其中基于深度學(xué)習(xí)的圖像處理算法,對(duì)硬件的計(jì)算性能、功耗、以及成本把控都會(huì)提出更高要求。為了減輕對(duì)硬件壓力,算法本身的優(yōu)化將成為重中之重。本次產(chǎn)品原型的展示,不僅能佐證英特爾的硬件平臺(tái)性能,而且對(duì)地平線算法優(yōu)化的功力亦能有所體現(xiàn)。據(jù)披露,這是業(yè)界首次在Intel的FPGA平臺(tái)上展現(xiàn)深度學(xué)習(xí)計(jì)算性能,也是地平線首次向外界展示其處理器架構(gòu)研發(fā)的最新成果。
地平線成立于2015年7月,設(shè)有北京總部和深圳、南京分公司,汽車(chē)業(yè)務(wù)主要針對(duì)自動(dòng)駕駛提供基于深度神經(jīng)網(wǎng)絡(luò)和深度學(xué)習(xí)的嵌入式人工智能解決方案,主要產(chǎn)品是核心處理器架構(gòu),軟件算法和全套技術(shù)解決方案,是一家面向前裝的二級(jí)零部件供應(yīng)商。
目前地平線在軟件算法上提供了基于深度學(xué)習(xí)的整體方案,具有高性能、低運(yùn)算量的特點(diǎn)。在今年智車(chē)優(yōu)行“奇點(diǎn)汽車(chē)”發(fā)布會(huì)上,地平線首次向外界展示了真車(chē)環(huán)境下,利用單目攝像頭同時(shí)實(shí)現(xiàn)行人/車(chē)輛/車(chē)道線檢測(cè)的ADAS產(chǎn)品原型系統(tǒng)。在今年3月份時(shí),地平線已獨(dú)立開(kāi)發(fā)推出了專(zhuān)門(mén)根據(jù)自身深度學(xué)習(xí)算法設(shè)計(jì)的軟硬件解決方案——Hugo1.0平臺(tái)。
英特爾近期重申了進(jìn)入汽車(chē)領(lǐng)域的決心,期待用汽車(chē)業(yè)務(wù)續(xù)寫(xiě)PC時(shí)代的輝煌。公司近兩年通過(guò)一系列收購(gòu)來(lái)為進(jìn)軍汽車(chē)領(lǐng)域積蓄力量,陸續(xù)完成了對(duì)可編程邏輯器件廠商Altera、意大利半導(dǎo)體制造商Yogitech和計(jì)算機(jī)視覺(jué)公司Itseez Inc的收購(gòu)。近期又宣布成立專(zhuān)門(mén)致力于提供自動(dòng)駕駛技術(shù)解決方案的事業(yè)部——自動(dòng)駕駛事業(yè)部(簡(jiǎn)稱(chēng)ADG)。
在汽車(chē)領(lǐng)域,英特爾的合作業(yè)務(wù)已陸續(xù)展開(kāi)。目前這家公司已在聯(lián)合寶馬、Mobileye共同開(kāi)發(fā)無(wú)人駕駛汽車(chē)技術(shù),讓寶馬自動(dòng)駕駛汽車(chē)在2021年上路。此次與地平線的合作,將為英特爾在汽車(chē)領(lǐng)域的研發(fā)探索提供一則全新案例。