瑞薩電子與StradVision合作開發(fā)下一代ADAS智能攝像頭

2019年9月26日，日本東京、美國加州圣何塞訊-全球領(lǐng)先的半導(dǎo)體解決方案供應(yīng)商瑞薩電子株式會社，與具備深度學(xué)習(xí)專業(yè)知識的自動駕駛視覺處理技術(shù)解決方案提供商StradVision今日宣布聯(lián)合開發(fā)基于深度學(xué)習(xí)的視覺處理解決方案，用于下一代高級駕駛輔助系統(tǒng)(ADAS)的智能攝像頭，適用于ADAS Level 2及以上級別。

為了避免在城市地區(qū)發(fā)生的常見危險，下一代ADAS需具備高精度視覺處理能力，能夠檢測出行人和騎行者等所謂弱勢道路使用者(VRU)。同時，對于大眾市場的中低端車輛，這些系統(tǒng)必須實現(xiàn)非常低的功耗。瑞薩與StradVision的全新解決方案同時實現(xiàn)了這兩個目標(biāo)，旨在加速ADAS的廣泛應(yīng)用。

瑞薩電子汽車技術(shù)客戶合作事業(yè)部副總裁吉田直樹表示：“作為視覺處理技術(shù)的領(lǐng)導(dǎo)者，StradVision在應(yīng)用瑞薩R-Car SoC開發(fā)ADAS解決方案方面擁有豐富經(jīng)驗。通過此次合作，我們帶來了量產(chǎn)級解決方案，面向未來打造安全和精準(zhǔn)的移動性能。這一基于深度學(xué)習(xí)的全新合作解決方案針對R-Car SoC進行了優(yōu)化，將有助于下一代ADAS的廣泛采用，并可支持未來幾年內(nèi)不斷提升的視覺傳感器要求?！?/span>

StradVision首席執(zhí)行官Junhwan Kim表示：“StradVision很高興能夠與瑞薩聯(lián)手，幫助開發(fā)人員有效推進ADAS的下一次重大飛躍。這一共同努力不僅可以轉(zhuǎn)化為快速有效的評估方案，而且將大大提升ADAS的性能。未來幾年中，預(yù)計前置攝像頭市場將會大規(guī)模增長，StradVision和瑞薩聯(lián)手打造優(yōu)勢技術(shù)，無疑將保持雙方在該領(lǐng)域的領(lǐng)先地位?！?/span>

StradVision基于深度學(xué)習(xí)的視覺處理軟件為車輛、行人和車道的識別等提供了高性能。該高精度視覺處理軟件已針對瑞薩R-Car汽車片上系統(tǒng)(SoC)產(chǎn)品R-Car V3H和R-Car V3M進行了優(yōu)化，而R-Car系列產(chǎn)品已在量產(chǎn)車型中擁有良好的應(yīng)用業(yè)績。以上R-Car系列產(chǎn)品搭載了CNN-IP(卷積神經(jīng)網(wǎng)絡(luò)知識產(chǎn)權(quán))深度學(xué)習(xí)處理專用引擎，使其能夠以最低功耗高速運行StradVision的SVNet汽車深度學(xué)習(xí)網(wǎng)絡(luò)。此次合作開發(fā)的視覺處理解決方案實現(xiàn)了基于深度學(xué)習(xí)的視覺處理能力，同時保持了低功耗，使其適用于量產(chǎn)車輛，進而推動ADAS的采用。

基于深度學(xué)習(xí)的視覺處理解決方案的關(guān)鍵特性：

(1) 解決方案同時支持早期評估及量產(chǎn)車型

StradVision的SVNet深度學(xué)習(xí)軟件是一款強大的AI感知解決方案，用于量產(chǎn)的ADAS系統(tǒng)。它因在弱光環(huán)境下的識別精度和識別對象被其它物體部分遮擋時的處理能力而備受關(guān)注。R-Car V3H的基本軟件包可同時執(zhí)行車輛、人員與車道的識別，以每秒25幀的速度處理圖像數(shù)據(jù)，實現(xiàn)快速評估和POC開發(fā)。以這些功能作為基礎(chǔ)，如果開發(fā)人員希望通過添加符號、標(biāo)記和其它物體作為識別物體來定制軟件，StradVision可為基于深度學(xué)習(xí)的視覺處理提供支持，面向量產(chǎn)車輛，涵蓋從培訓(xùn)到軟件嵌入的所有步驟。

(2) R-Car V3H和R-Car V3M SoC在降低成本的同時提升了智能攝像頭系統(tǒng)的可靠性

除了CNN-IP專用深度學(xué)習(xí)模塊，瑞薩R-Car V3H和R-Car V3M還搭載了IMP-X5圖像識別引擎。將基于深度學(xué)習(xí)的復(fù)雜物體識別與高度可驗證的圖像識別處理同人為規(guī)則相結(jié)合，使設(shè)計人員能夠構(gòu)建一個強大的系統(tǒng)。此外，方案還設(shè)計了片上圖像信號處理器(ISP)對傳感器信號進行轉(zhuǎn)換，用于圖像渲染和識別處理，從而可以采用無內(nèi)置ISP的低成本攝像頭進行系統(tǒng)配置，以降低BOM成本。

供貨信息

采用全新聯(lián)合開發(fā)的深度學(xué)習(xí)解決方案的瑞薩電子R-Car SoC(包括StradVision的軟件與開發(fā)支持)，計劃于2020年初向開發(fā)人員供貨。