當(dāng)前位置:首頁 > 智能硬件 > 智能硬件
[導(dǎo)讀]在實(shí)際的應(yīng)用系統(tǒng)中,嵌入式視覺技術(shù)可望帶來什么樣的潛力呢?Berkeley Design Technology Inc. (BDTi)公司總裁兼嵌入式視覺聯(lián)盟(Embedded Vision Alliance;EVA)創(chuàng)辦人Jeff Bier在接受《EETimes》的專訪中分享了

在實(shí)際的應(yīng)用系統(tǒng)中,嵌入式視覺技術(shù)可望帶來什么樣的潛力呢?Berkeley Design Technology Inc. (BDTi)公司總裁兼嵌入式視覺聯(lián)盟(Embedded Vision Alliance;EVA)創(chuàng)辦人Jeff Bier在接受《EETimes》的專訪中分享了他的看法。在缺乏共通標(biāo)準(zhǔn)而使嵌入式視覺技術(shù)發(fā)展受阻之際,Jeff Bier強(qiáng)調(diào)唯有一種兼容各層面功能的標(biāo)準(zhǔn),才能真正開啟并普及嵌入式視覺應(yīng)用。

嵌入式視覺系統(tǒng)所用的處理器必須具備什么樣的性能要求?

Jeff Bier:視覺演算法與應(yīng)用大大地延伸了處理器性能要求的范圍。一般來說,雖然以運(yùn)算能力的觀點(diǎn)而言,處理器的性能至關(guān)重要。但當(dāng)你跨越學(xué)術(shù)研究到實(shí)際系統(tǒng)的鴻溝,采用先進(jìn)演算法以即時執(zhí)行視頻輸入時,卻不可避免地會消耗掉許多的處理功率。在許多嵌入式系統(tǒng)中,設(shè)計(jì)人員面臨著尺寸、功耗與成本等嚴(yán)苛的限制條件,因此,能夠以低成本與低功耗提供充份的處理能力是至關(guān)重要的。

而在其它一些要求大量運(yùn)算的嵌入式處理領(lǐng)域──如隨即浮現(xiàn)于我腦海中的消費(fèi)性視頻設(shè)備──在某種程度上而言,演算法是標(biāo)準(zhǔn)化的。這意味著芯片設(shè)計(jì)人員可以使用功能固定的硬件加速器和協(xié)同處理器,以低功耗和低成本提供大量的處理器運(yùn)算性能。

但在視覺應(yīng)用方面,不同的應(yīng)用之間往往采用不同的演算法,甚至是在同一款應(yīng)用中,所用的演算法也可能因設(shè)計(jì)不同或時間不同而異。因此,除了極其少數(shù)的一些大量應(yīng)用以外,功能固定的硬件往往無法作為解決方案。在嵌入式視覺系統(tǒng)中,我們需要的處理器必須能夠以低成本與低功耗,提供每秒數(shù)十億次即時運(yùn)算處理性能,并具有彈性化的可編程性能。過去幾年來,已經(jīng)有這樣的處理器問世,并可協(xié)助嵌入式視覺技術(shù)進(jìn)一步導(dǎo)入主流應(yīng)用中。

傳感器在此所扮演的角色為何?

Bier:很明顯地,圖形傳感器是嵌入式視覺技術(shù)的關(guān)鍵。圖形傳感器在近年來已變得比較不那么昂貴了,這主要可歸功于行動電話普遍且大量且地采用了圖形傳感器。除了傳統(tǒng)的圖形傳感器以外,許多視覺應(yīng)用都可以利用各式各樣的傳感器。例如,3D傳感器在微軟Kinect的應(yīng)用即其一例,3D傳感器可說是許多應(yīng)用的一大福音,因?yàn)橛辛?D影像后確實(shí)簡化了一些視覺任務(wù)。

在深入探索嵌入式系統(tǒng)以前,必須先具備哪些電腦視覺知識呢?

Bier:大多數(shù)的嵌入式系統(tǒng)設(shè)計(jì)工程師并不了解嵌入式視覺技術(shù)具有什么樣的能力。這是因?yàn)?,一直到最近以前,在大多?shù)的嵌入式系統(tǒng)中使用視覺技術(shù)仍不切實(shí)際;它畢竟還是太昂貴了。而今,為一系列廣泛的各種系統(tǒng)進(jìn)一步納入視覺性能,在經(jīng)濟(jì)上已經(jīng)變得較為可行了;因此,對于系統(tǒng)設(shè)計(jì)者而言,熟悉這項(xiàng)技術(shù)、并進(jìn)一步了解這項(xiàng)技術(shù)能做些什么是相當(dāng)重要的。

早期采用視覺技術(shù)的工程師們現(xiàn)在已經(jīng)可以拿出一些令人驚喜的新產(chǎn)品和產(chǎn)品功能了。當(dāng)然,工程師們不僅需要了解視覺技術(shù)能做什么,同時也要學(xué)會如何把視覺技術(shù)整合于自己的產(chǎn)品中。在這方面,目前雖然已經(jīng)累積了一些龐大的出版文獻(xiàn)可供參考,但其中絕大多數(shù)都是學(xué)術(shù)研究出版品,以及一些通常不適合協(xié)助工程師用于構(gòu)建解決方案的文獻(xiàn)。工程師們需要的是更實(shí)際的資訊,如指導(dǎo)方針、設(shè)計(jì)實(shí)例、架構(gòu)圖以及樣本程式碼等。

由BDTi、CEVA、賽靈思(Xilinx)、IMS Research、亞德諾(ADI)、Apical、安富利(Avnet)、Cognivue、飛思卡爾(Freescale)、MathWorks、美商國家儀器(NI)、NVIDIA 、德州儀器(TI)、TEL與XMOS等嵌入式系統(tǒng)處理器晶片商、影像處理業(yè)者、量測廠商與EDA廠商等多家公司共同組成的嵌入式視覺聯(lián)盟(EVA),共同致力于提高人們對于嵌入式視覺技術(shù)的認(rèn)知,并為設(shè)計(jì)工程師提供協(xié)助其使用嵌入式視覺技術(shù)技術(shù)時必備的實(shí)用資訊。目前,EVA聯(lián)盟的第一項(xiàng)計(jì)劃是打造專為工程師提供實(shí)用資訊的網(wǎng)站。

 

1  2  

目前有什么可用的嵌入式視覺系統(tǒng)開發(fā)平臺呢?

Bier:從頭開始打造一款視覺系統(tǒng)或子系統(tǒng),可說是一項(xiàng)龐大且復(fù)雜的工作。你必須從像影像傳感器與處理器等這一類的基本元素開始,以及從無到有著手建立一種演算法。這對于資源的利用而言,并不是非常有效率的作法,特別是因?yàn)樵谝曈X應(yīng)用中還存在著不斷周而復(fù)始出現(xiàn)的共同問題。

工程師們最好不要選擇這種卷土重來的做法,他們應(yīng)該能夠針對特定應(yīng)用的一些共同元素,重新使用業(yè)經(jīng)驗(yàn)證的解決方案,然后再將自己的專才發(fā)揮在其設(shè)計(jì)獨(dú)特之處。我個人認(rèn)為,這意味著我們需要專門針對視覺應(yīng)用的先進(jìn)開發(fā)平臺,例如,其中包括開發(fā)板以及合適的處理器、記憶體、I/O和圖形傳感器的視覺開發(fā)平臺。同時還伴隨有建置一個或多個視覺應(yīng)用案例的應(yīng)用軟件。此外,這一視覺開發(fā)平臺也提供了源代碼,使工程師們能夠參考這些范例應(yīng)用立即開始工作,并對其設(shè)計(jì)進(jìn)行修改,或添加所需的獨(dú)特功能。

這種開發(fā)平臺還將包括強(qiáng)大的開發(fā)工具,讓工程師們在定義所需的功能時,能夠作業(yè)于更高的抽象層,無需犧牲太多性能。同時,完整的開發(fā)平臺還提供一個最佳化視覺建構(gòu)功能的豐富工具庫。

先進(jìn)的開發(fā)平臺將帶來莫大助益,以實(shí)現(xiàn)并加速視覺功能的普及。

嵌入式視覺領(lǐng)域有什么樣的標(biāo)準(zhǔn)需求?

Bier:當(dāng)今的嵌入式視覺技術(shù)正因?yàn)槿狈?biāo)準(zhǔn)使其發(fā)展受阻。對于系統(tǒng)所能提供的一些基本性能適用什么條款,甚至也沒有什么共識。這讓工程師們更難以選擇最佳的技術(shù)與建構(gòu)解決方案,也無法因應(yīng)時間改變需求而調(diào)整其設(shè)計(jì)。

至于嵌入式視覺技術(shù)如何才能發(fā)揮真正的潛力?我認(rèn)為我們將需要一種容納各個層面的標(biāo)準(zhǔn)。例如,如果基于手勢的用戶介面變得普及,對于用戶而言,能夠使用一套具有多種不同機(jī)制的通用手勢功能將會變得十分重要。而如果3D成像成為視覺應(yīng)用的共同工具,那么不管使用什么樣的傳感器,我們都將必須為視覺應(yīng)用找到一個重現(xiàn)3D圖形數(shù)據(jù)的共同方式。

1  2  
本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫?dú)角獸公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數(shù)字化轉(zhuǎn)型技術(shù)解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關(guān)鍵字: AWS AN BSP 數(shù)字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認(rèn)證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時1.5...

關(guān)鍵字: 汽車 人工智能 智能驅(qū)動 BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運(yùn)行,同時企業(yè)卻面臨越來越多業(yè)務(wù)中斷的風(fēng)險(xiǎn),如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報(bào)道,騰訊和網(wǎng)易近期正在縮減他們對日本游戲市場的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導(dǎo)體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機(jī) 衛(wèi)星通信

要點(diǎn): 有效應(yīng)對環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實(shí)提質(zhì)增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競爭力 堅(jiān)持高質(zhì)量發(fā)展策略,塑強(qiáng)核心競爭優(yōu)勢...

關(guān)鍵字: 通信 BSP 電信運(yùn)營商 數(shù)字經(jīng)濟(jì)

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術(shù)學(xué)會聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現(xiàn)場 NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會上,軟通動力信息技術(shù)(集團(tuán))股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉
關(guān)閉