基于多內(nèi)核處理器的高性能視頻系統(tǒng)理論分析與設(shè)計(jì)

時(shí)鐘頻率的提高帶來的高功耗、深亞微米半導(dǎo)體制造工藝漏電流產(chǎn)生的高功耗以及更多的設(shè)計(jì)挑戰(zhàn)促使處理器設(shè)計(jì)制造商開始將思路轉(zhuǎn)向到多內(nèi)核集成的解決方案上來。多核處理器技術(shù)是提高處理器性能的有效方法，因?yàn)樘幚砥鞯膶?shí)際性能是處理器在每個(gè)時(shí)鐘周期內(nèi)所能處理指令數(shù)的總量，因此增加一個(gè)內(nèi)核，處理器每個(gè)時(shí)鐘周期內(nèi)可執(zhí)行的單元數(shù)將增加一倍。上世紀(jì)末期，雙內(nèi)核處理器開始進(jìn)入高端服務(wù)器產(chǎn)品。隨著Intel和AMD公司先后推出雙內(nèi)核CPU以來，多內(nèi)核CPU在個(gè)人電腦中的應(yīng)用已經(jīng)成為無可逆轉(zhuǎn)的趨勢，多內(nèi)核架構(gòu)在處理器性能、低功耗、縮小系統(tǒng)電路面積等方面都表現(xiàn)出了顯著的優(yōu)勢。

從某些方面來說，嵌入式應(yīng)用對處理器的需求更為苛刻，特別是低功耗、低成本方面。為滿足當(dāng)前嵌入式設(shè)備應(yīng)用越來越高的性能需求，并盡可能地降低功耗，在高端嵌入式處理器領(lǐng)域的一個(gè)明顯變化是從頻率越來越高向多內(nèi)核架構(gòu)轉(zhuǎn)變。多內(nèi)核處理器的需求在很多產(chǎn)品領(lǐng)域顯著增加。為加強(qiáng)產(chǎn)品競爭優(yōu)勢，嵌入式處理器提供商在多內(nèi)核的競爭中紛紛祭出高招。

高性能視頻系統(tǒng)需要多核處理器

對于嵌入式系統(tǒng)設(shè)計(jì)工程師來說，多內(nèi)核絕不是一種時(shí)髦或產(chǎn)品營銷時(shí)的噱頭，而是基于產(chǎn)品性能需求、功耗、集成度、成本等多方面的取舍結(jié)果。特別是消費(fèi)電子產(chǎn)品應(yīng)用中，單內(nèi)核處理器依然是絕對的主流。但在部分需要更高處理、控制能力的應(yīng)用中，雙內(nèi)核處理器早已不是陽春白雪，而這類應(yīng)用中多媒體類產(chǎn)品占很大的比重，例如視頻監(jiān)控(特別是具有智能分析功能的監(jiān)控設(shè)備)、視頻會議系統(tǒng)、數(shù)字?jǐn)z像系統(tǒng)、汽車可視化系統(tǒng)等等。

以視頻監(jiān)控應(yīng)用系統(tǒng)為例，隨著視頻監(jiān)控應(yīng)用的規(guī)模化和網(wǎng)絡(luò)化，智能化將是視頻監(jiān)控系統(tǒng)發(fā)展的另外一個(gè)必然趨勢。具有智能分析功能的新一代監(jiān)控系統(tǒng)大大地?cái)U(kuò)展了視頻監(jiān)控的應(yīng)用領(lǐng)域，除了傳統(tǒng)的安防應(yīng)用外，人體行為識別和智能交通也將開辟大量的新興應(yīng)用市場。

智能視頻分析算法的實(shí)現(xiàn)形式絕大部分是軟件實(shí)現(xiàn)，對于嵌入式軟件實(shí)現(xiàn)來說，最終產(chǎn)品表現(xiàn)的性能優(yōu)劣與硬件平臺的關(guān)系很大。畢竟嵌入式平臺的資源是有限的，相對普通的計(jì)算機(jī)平臺而言，嵌入式平臺計(jì)算能力相對低很多，核心芯片緩存相對小，內(nèi)存容量相對小等等。這些都會給智能視頻分析算法嵌入式實(shí)現(xiàn)帶來困難，所以智能視頻分析算法在嵌入式實(shí)現(xiàn)時(shí)都會進(jìn)行一定的優(yōu)化。硬件平臺不同會導(dǎo)致優(yōu)化的策略和程度上有所差異，如果選擇的處理器越高，在底層操作上開放的指令和操作越多，優(yōu)化工具越齊全，則系統(tǒng)整體優(yōu)化的性能會越好。

智能視頻監(jiān)控設(shè)備大部分都是嵌入式設(shè)備。智能視頻監(jiān)控屬于傳統(tǒng)視頻監(jiān)控的擴(kuò)展與延伸，所以傳統(tǒng)的視頻監(jiān)控對硬件平臺的要求，智能視頻監(jiān)控也都必須具備。但智能視頻監(jiān)控與傳統(tǒng)的視頻監(jiān)控相比，用戶的需求更加多樣化，例如：作為地鐵系統(tǒng)用戶，他們需要的功能是檢測是否跨越候車的黃線，人群密度是否過大，是否有可疑的遺留物體等；對于銀行系統(tǒng)用戶來說，他們所需要的是ATM機(jī)的智能監(jiān)控分析包括是否有安裝假鍵盤、安裝吞卡器，在ATM機(jī)是否有暴力行為，是否出現(xiàn)犯罪分子的人臉等。因此，一方面，用戶需求的多樣化可以使算法隨著用戶的需求調(diào)整。另一方面，智能視頻處理要求芯片具有強(qiáng)大的處理能力，有許多算法實(shí)現(xiàn)時(shí)必須采用并行處理。因此，傳統(tǒng)的基于單內(nèi)核微控制器的解決方案面臨很大挑戰(zhàn)，融合MCU及DSP的異構(gòu)雙處理器或多處理器解決方案，以及具有強(qiáng)大運(yùn)算能力的多內(nèi)核處理器是智能視頻監(jiān)控嵌入式平臺的可選方案。

雙內(nèi)核匯聚式處理器——BF561

ADSP BF561處理器是Blackfin產(chǎn)品家族中的一個(gè)具有高性能成員，它包括兩個(gè)獨(dú)立的ADI處理器核，每個(gè)處理器核包含一個(gè)雙乘法累加器信號處理機(jī)，一個(gè)類RISC指令集，每個(gè)內(nèi)核均采用完全的SIMD架構(gòu)，包含用于視頻加速處理和圖像處理的指令。匯聚式處理器的特點(diǎn)是減少或避免了采用單獨(dú)的數(shù)字信號和控制處理器的需求，從而減少了物料成本，同時(shí)極大地簡化了軟硬件開發(fā)任務(wù)。Blackfin處理器同時(shí)提供了全面的電源管理方案，獨(dú)特的低功耗和低電壓設(shè)計(jì)（Blackfin可以由低于2V的外部電壓供電），減少了整體的功耗，這對于全天候運(yùn)行的視頻監(jiān)控來說具有非常重要的意義。

雙內(nèi)核BF561具有兩倍于BF533處理器的處理性能，兩倍的片上存儲器，大大增強(qiáng)了數(shù)據(jù)帶寬，并保持與BF533處理器完全的代碼兼容。BF561處理器自帶328KB片上存儲器提供兩個(gè)并行數(shù)據(jù)端口，可以直接連接并行AD和DA轉(zhuǎn)換器或其他通用外設(shè)。BF561處理器還內(nèi)置了多個(gè)獨(dú)立DMA控制器，支持?jǐn)?shù)據(jù)自動傳輸，從而使處理器內(nèi)核的負(fù)擔(dān)最小化。此外，BF561延續(xù)了Blackfin處理器具有豐富接口的特點(diǎn)，為設(shè)計(jì)帶來極大的便利，例如兩個(gè)雙通道全雙工同步串行口、兩個(gè)支持ITU-R 656視頻數(shù)據(jù)格式的并行外設(shè)接口、SPI端口等。

一直以來，大部分多內(nèi)核處理器是集成多個(gè)DSP和CPU內(nèi)核的異構(gòu)多核處理器，分別將DSP和CPU針對信號處理任務(wù)和控制任務(wù)，適合于任務(wù)劃分簡單的手機(jī)等通信應(yīng)用。而BF561的雙內(nèi)核DSP是一個(gè)例外，每個(gè)內(nèi)核都可以同時(shí)單獨(dú)處理信號處理和控制處理任務(wù)，因此無須將這兩類任務(wù)分別在多個(gè)內(nèi)核之間的分配，設(shè)計(jì)工程師可以隨意地進(jìn)行任務(wù)分配以平衡內(nèi)核之間的任務(wù)處理量。BF561的雙核處理器相互獨(dú)立，工程師可以根據(jù)應(yīng)用分配兩個(gè)處理器內(nèi)核的任務(wù)，兩個(gè)內(nèi)核在執(zhí)行指令上是相同的。兩個(gè)處理器內(nèi)核可以分別用于運(yùn)行嵌入式操作系統(tǒng)（OS）和信號處理；對于信號處理任務(wù)量大的嵌入式系統(tǒng)可以將兩個(gè)內(nèi)核同時(shí)用于信號處理，單獨(dú)采用具有相同內(nèi)核的BF533（或BF536處理器）運(yùn)行嵌入式操作系統(tǒng)。

圖1：匯聚式處理器與異構(gòu)協(xié)處理器的優(yōu)勢特性對比。


圖2：基于BF561的視頻監(jiān)控系統(tǒng)功能框圖。

[!--empirenews.page--]
應(yīng)用案例解析

1. 智能視頻分析

圖3是一款基于BF561平臺開發(fā)的智能視頻監(jiān)控設(shè)備，由博睿視公司獨(dú)立自主研發(fā)，融合了視頻圖像處理技術(shù)、模式識別技術(shù)、嵌入式開發(fā)與設(shè)計(jì)等多種國際先進(jìn)的技術(shù)。硬件設(shè)備外形小巧、性能卓越、功耗低。目前，博睿視科技已將多種智能視頻分析算法成功移植到該硬件平臺上，這些算法包括區(qū)域入侵檢測、拌線檢測、物品遺留檢測、物品移動或被盜檢測、有方向性的區(qū)域入侵檢測、有方向拌線檢測、車流密度檢測、人數(shù)統(tǒng)計(jì)等等。產(chǎn)品性能穩(wěn)定，算法執(zhí)行效率高。

圖3：博睿視ADI DSP智能視頻分析設(shè)備。


該視頻分析儀廣泛適用于軍事、公安、金融、交通、教育、公共設(shè)施、社區(qū)和個(gè)人，以及工業(yè)和商業(yè)領(lǐng)域。在該公司進(jìn)行方案選型中，博睿視公司在以下幾個(gè)方面看中了BF561處理器的獨(dú)特優(yōu)勢：Blackfin DSP在算法并行處理上做的很好，特別是BF561采用雙DSP核，能夠?qū)崿F(xiàn)很復(fù)雜的智能視頻處理算法；Blackfin DSP采用低功耗設(shè)計(jì)，穩(wěn)定性在同價(jià)位DSP中十分出眾；另外，在Blackfin DSP平臺上，ADI提供了許多開發(fā)源碼的程序，可以針對特定應(yīng)用進(jìn)行修改，非常靈活；BF561接口方便、功能強(qiáng)大，具有易于控制兩個(gè)視頻輸入/輸出口（支持ITU-R 656），方便使用的DMA控制器、UART接口，數(shù)量眾多的GPIO等優(yōu)秀性能。

2.最優(yōu)質(zhì)畫面的安保攝像頭

德國Aglaia GmbH公司推出的汽車駕駛員輔助視覺傳感器系統(tǒng)具有防止交通事故發(fā)生和改善交通流量的功能。該公司的實(shí)時(shí)電子眼方案由硬件和軟件組成，它模仿了人類從眼球（圖像捕捉）到大腦（圖像分析和闡釋）的視覺系統(tǒng)，能夠通知駕駛員前方的交通標(biāo)志，對潛在的交通沖突發(fā)出警告、自動限速，當(dāng)駕駛員駛出車道線時(shí)發(fā)出警告，甚至可以提供“疲勞分析”幫助駕駛員避免碰撞。Aglaia的完整解決方案包括攝像頭、圖像傳感器和圖像處理算法，交通分析應(yīng)用程序包括可軟件配置的功能模塊，例如車道線識別、物體識別、交通標(biāo)志識別、頭燈及尾燈識別。

圖4：德國Aglaia GmbH公司開發(fā)的汽車駕駛員輔助視覺傳感器系統(tǒng)。



經(jīng)過對現(xiàn)有解決方案的全面市場調(diào)研，因?yàn)锽lackfin具有高性能、低成本、低功耗和豐富I/O接口的優(yōu)勢，Aglaia最終選擇了BF561處理器。Aglaia系統(tǒng)的核心部分是四個(gè)BF561處理器，需要在大約3A電流左右消耗少于20W的能量，包括嵌入式微控制器和信號處理器的能耗。雙核的BF561器件的1.2V設(shè)計(jì)只消耗不到1A的電流，很容易滿足Aglaia的20W限制的要求。

四個(gè)BF561處理器可以在低階算法上協(xié)同運(yùn)算，比如可以很容易地實(shí)現(xiàn)邊緣檢測，因?yàn)檫@些處理器內(nèi)核屬性相同。這些處理器同樣可以在高階算法上協(xié)同運(yùn)算。同時(shí)還有實(shí)時(shí)算法，如需要根據(jù)攝像頭提取的道路和斑馬線特征計(jì)算出車輛的前方和側(cè)面相對位置，曲線檢測算法可以自動處理由車輛、信號標(biāo)志、光斑、陰影，或者低圖像對比度造成的盲區(qū)，這么復(fù)雜的高強(qiáng)度數(shù)學(xué)運(yùn)算，只有像BF561這樣的高性能信號處理器才可以完成任務(wù)。同樣的，對根據(jù)來自兩個(gè)攝像頭的數(shù)據(jù)三角相關(guān)來檢測道路上的物體和/或在三維空間上相對于車輛的位置的情況，這同樣需要一個(gè)高性能的信號處理器。BF561提供了可伸縮的處理性能用于圖像處理和其他任務(wù)，比如在攝像頭傳感器網(wǎng)絡(luò)之間通過CAN總線和LIN總線通信。Aglaia選擇Blackfin的另外一個(gè)重要原因在于它的I/O、存儲器、并行數(shù)據(jù)端口（PPI）和直接內(nèi)存存?。―MA）特點(diǎn)。Blackfin處理器擁有大容量片上存儲器和I/O接口，能夠滿足高速幀抓取和數(shù)據(jù)傳輸需要，同時(shí)它能夠在惡劣的汽車環(huán)境條件下工作。BF561是Aglaia在這個(gè)價(jià)位上發(fā)現(xiàn)的適于汽車應(yīng)用的第一款處理器。

結(jié)束語

在硬件平臺的選型上如果從成本考慮，在能滿足用戶需求前提下，應(yīng)該選擇成本最低的（這里的成本還包括開發(fā)成本）。另一方面，對于諸如智能視頻監(jiān)控這類復(fù)雜應(yīng)用來說，不同的用戶可能會提新的不同需求，所以在選型時(shí)還得考慮平臺的可擴(kuò)展性，以滿足“將來”的需求。另外，產(chǎn)品開發(fā)時(shí)應(yīng)盡量在已有的資源上進(jìn)行，比如開放的例程，ADI在此提供了非常豐富的例程和資料。由于BF561處理器在代碼上完全與獲得業(yè)界廣泛使用的BF533處理器兼容，因此有非常大的設(shè)計(jì)資源優(yōu)勢。

對于多內(nèi)核處理器的復(fù)雜產(chǎn)品設(shè)計(jì)而言，產(chǎn)品本身的功能和特性只是一個(gè)方面，良好的開發(fā)工具和可用的設(shè)計(jì)資源同樣非常重要。ADI公司提供的容易安裝、使用方便的集成軟件開發(fā)和調(diào)試環(huán)境（IDDE）Visual DSP++幫助工程師從頭至尾高效管理項(xiàng)目的開發(fā)。ADI提供了一個(gè)包含編譯器、連接器和調(diào)試器的超高性能的工具鏈。這些開發(fā)環(huán)境是包括Aglaia這樣的客戶選擇BF561的重要原因。此外，ADI本地第三方設(shè)計(jì)合作公司還提供了針對特定目標(biāo)應(yīng)用而優(yōu)化的參考設(shè)計(jì)、仿真工具以及大量的成熟軟件模塊或庫資源，能有效幫助終端產(chǎn)品開發(fā)企業(yè)快速推出成熟的產(chǎn)品。