當(dāng)前位置:首頁 > 通信技術(shù) > 通信技術(shù)
[導(dǎo)讀]摘要:基于ARM芯片和FPGA的特點,設(shè)計了一種ARM與FPGA人工神經(jīng)網(wǎng)絡(luò)處理器之間的通信方案。該方案采用ARM的ZDMA控制器對數(shù)據(jù)傳輸進行控制,完成ARM與神經(jīng)網(wǎng)絡(luò)處理器的控制寄存器組、分布式存儲器、樣本存儲器等存儲體

摘要:基于ARM芯片和FPGA的特點,設(shè)計了一種ARM與FPGA人工神經(jīng)網(wǎng)絡(luò)處理器之間的通信方案。該方案采用ARM的ZDMA控制器對數(shù)據(jù)傳輸進行控制,完成ARM與神經(jīng)網(wǎng)絡(luò)處理器的控制寄存器組、分布式存儲器、樣本存儲器等存儲體的數(shù)據(jù)交換。

引言

人工神經(jīng)網(wǎng)絡(luò)在很多領(lǐng)域得到了很好的應(yīng)用,尤其是具有分布存儲、并行處理、自學(xué)習(xí)、自組織以及非線性映射等特點的網(wǎng)絡(luò)應(yīng)用更加廣泛。嵌入式便攜設(shè)備也越來越多地得到應(yīng)用,多數(shù)是基于ARM內(nèi)核及現(xiàn)場可編程門陣列FPGA的嵌入式應(yīng)用。某人工神經(jīng)網(wǎng)絡(luò)的FPGA處理器能夠?qū)?shù)據(jù)進行運算處理,為了實現(xiàn)集數(shù)據(jù)通信、操作控制和數(shù)據(jù)處理于一體的便攜式神經(jīng)網(wǎng)絡(luò)處理器,需要設(shè)計一種基于嵌入式ARM內(nèi)核及現(xiàn)場可編程門陣列FPGA的主從結(jié)構(gòu)處理系統(tǒng)滿足要求。

1 人工神經(jīng)網(wǎng)絡(luò)處理器

1.1 人工神經(jīng)網(wǎng)絡(luò)模型

人工神經(jīng)網(wǎng)絡(luò)是基于模仿大腦功能而建立的一種信息處理系統(tǒng)。它實際上是由大量的、很簡單的處理單元(或稱神經(jīng)元),通過廣泛的互相連接而形成的復(fù)雜網(wǎng)絡(luò)系統(tǒng)。最早的神經(jīng)元模型是MP模型,由輸入X、連接權(quán)值W和閾值θ、激活函數(shù)f和輸出O組成,如圖1所示。

神經(jīng)元j的輸出為:

式中:netj是神經(jīng)元j的凈輸入,xi是神經(jīng)元j的輸入,Wij是神經(jīng)元i到神經(jīng)元j的權(quán)值,θj是神經(jīng)元j的閾值,f()是神經(jīng)元凈輸入和輸出之間的變換函數(shù),稱為激活函數(shù)。

后來的各種網(wǎng)絡(luò)模型基本都由這幾個因素構(gòu)成,例如圖2的三層BP神經(jīng)網(wǎng)絡(luò)模型。

三層BP網(wǎng)絡(luò)的標(biāo)準(zhǔn)學(xué)習(xí)算法如下,當(dāng)網(wǎng)絡(luò)輸出與期望輸出不等時,存在輸出誤差E,定義如下:

容易看出,各層權(quán)值調(diào)整公式均由3個因素決定,即學(xué)習(xí)率η、本層輸出的誤差信號δ以及本層出入信號Y(或X)。其中,輸出層誤差信號與網(wǎng)絡(luò)的期望輸出與實際輸出之差有關(guān),直接反映了輸出誤差,而各隱層的誤差信號與前面各層的誤差信號都有關(guān),是從輸出層開始逐層反傳過來的。

神經(jīng)網(wǎng)絡(luò)的訓(xùn)練學(xué)習(xí)的過程就是通過不斷地調(diào)整各個節(jié)點的權(quán)值,使輸出誤差達到最小,最終獲得穩(wěn)定可靠的權(quán)值,實現(xiàn)網(wǎng)絡(luò)的預(yù)定功能。

1.2 人工神經(jīng)網(wǎng)絡(luò)的FPGA實現(xiàn)

算法公式實際隱含著各種運算過程,乘累加計算、激活函數(shù)及其導(dǎo)數(shù)的計算和邏輯運算是3種必不可少的運算,因此FPGA的實現(xiàn)主要是各種運算器的設(shè)計和連接。處理器要處理各種類型的數(shù)據(jù),樣本數(shù)據(jù)X(訓(xùn)練樣本、實際樣本),網(wǎng)絡(luò)參數(shù)(學(xué)習(xí)速率η、每層神經(jīng)元個數(shù)n等)和權(quán)值W是必不可少的。網(wǎng)絡(luò)參數(shù)和初始權(quán)值用來對網(wǎng)絡(luò)初始化,訓(xùn)練樣本用來訓(xùn)練網(wǎng)絡(luò)學(xué)習(xí),最后在網(wǎng)絡(luò)應(yīng)用階段對實際樣本進行處理。

圖3展示的是FPGA神經(jīng)網(wǎng)絡(luò)處理器的主體部分:存儲模塊和運算模塊。根據(jù)網(wǎng)絡(luò)的結(jié)構(gòu)特點,連接權(quán)值處于各個神經(jīng)元節(jié)點的連接處,與各自的權(quán)值運算結(jié)構(gòu)一一對應(yīng),為分布式,所以分布式存儲器WM中存儲權(quán)值數(shù)據(jù);樣本數(shù)據(jù)統(tǒng)一從網(wǎng)絡(luò)的輸入層進入網(wǎng)絡(luò),故DM中存儲樣本數(shù)據(jù);MAE是處理器的運算部分。

2 通信硬件設(shè)計

2.1 系統(tǒng)整體架構(gòu)

系統(tǒng)整體結(jié)構(gòu)框圖如圖4所示,分為ARM端和FPGA端兩個部分。ARM端有兩個功能:一是從內(nèi)存中讀取已有數(shù)據(jù),通過DMA方式下載到FPGA端,按照數(shù)據(jù)類型將數(shù)據(jù)下載到不同的存儲設(shè)備和存儲空間;二是對FPGA進行控制,主要是各種中斷操作。FPGA端的功能是接收ARM傳送的數(shù)據(jù),存儲數(shù)據(jù),并在微程序控制器的控制下進行運算處理,最后把結(jié)果上傳給ARM。

ARM端以S3C44B0X芯片為核心,外部擴展各類設(shè)備構(gòu)成。S3C44B0X是三星公司的16/32位微處理器,片內(nèi)集成了ARM7TDMI核,并在此基礎(chǔ)上集成了豐富的外圍功能模塊,為嵌入式設(shè)備提供一個低成本高性能的方案。

S3C4480X擁有4通道的DMA控制器,兩個ZDMA,連接于SSB(三星系統(tǒng)總線);另外兩個BDMA,連接在SSB和SPB(三星外圍總線)之間的接口層。其中ZDMA可從存儲器到存儲器、存儲器到I/O設(shè)備和I/O設(shè)備到存儲器傳送數(shù)據(jù)。DMA操作由S/W或來自外部請求引腳(nXDREQ0/1)的請求來啟動。

在DMA操作中,通過配置DMA特殊功能寄存器來實現(xiàn)對DMA的控制,如圖5所示。

FPGA端的組成為FPGA芯片和擴展存儲器。按處理數(shù)據(jù)類型的不同設(shè)計不同的存儲結(jié)構(gòu),具體如下所列。神經(jīng)網(wǎng)絡(luò)的結(jié)構(gòu)參數(shù)存放于控制寄存器組,初始權(quán)值、穩(wěn)定權(quán)值存放于分布式存儲器,其他參數(shù)(學(xué)習(xí)速率、學(xué)習(xí)速率調(diào)整因子等)存放于專用寄存器組A中,處理結(jié)果存放于專用寄存器組B中,樣本數(shù)據(jù)存放于擴展存儲器SD卡中。

以上所述的存儲體,除擴展存儲器外其他結(jié)構(gòu)都在FPGA芯片內(nèi)部設(shè)計完成。采用這種設(shè)計是基于FPGA片上存儲資源的使用情況:①FPGA的配置文件占用;②分布式存儲器占用;③各類寄存器組占用。當(dāng)樣本數(shù)據(jù)數(shù)量較大時會占用比較大的空間,F(xiàn)PGA芯片將不能滿足,因此不能把樣本數(shù)據(jù)存儲在片上,而是存儲于擴展存儲器。

2.2 硬件連接

從上面的介紹容易發(fā)現(xiàn),ARM芯片的通信對象是基于SRAM工藝的FPGA芯片上的存儲體。因此,F(xiàn)PGA芯片作為存儲設(shè)備時,ARM芯片可直接與其相連。ARM與FPGA硬件連接示意圖如圖6所示。

ARM與FPGA的片上存儲體的地址總線連接設(shè)置為12位,足夠存儲和尋址需求。

數(shù)據(jù)總線的寬度為28位。神經(jīng)網(wǎng)絡(luò)處理器的數(shù)據(jù)精度為16位,F(xiàn)PGA樣本數(shù)據(jù)寄存器還有12位外部擴展存儲器的地址數(shù)據(jù),因此整個數(shù)據(jù)總線的寬度為二者之和。除樣本數(shù)據(jù)寄存器之外的片上存儲體,數(shù)據(jù)線占用28位數(shù)據(jù)總線中的低16位。

控制總線包括ARM端的片選線nGCS6和讀/寫控制線。對ARM相應(yīng)的寄存器進行配置可激活BANK6(FPGA片上存儲體)和讀/寫數(shù)據(jù)。

根據(jù)數(shù)據(jù)存儲位置的不同,硬件連接可分成兩方面。如圖7所示。

第一,存儲位置為FPGA端的外部擴展存儲器。①ARM與FPGA通過12位地址總線、28位數(shù)據(jù)總線及控制總線直接相連,數(shù)據(jù)寫入樣本數(shù)據(jù)寄存器。②樣本數(shù)據(jù)寄存器的28位數(shù)據(jù)按照12位地址數(shù)據(jù)、16位樣本數(shù)據(jù),通過FPGA與外部擴展存儲器之間的12位地址總線、16位數(shù)據(jù)總線,在存儲控制模塊的控制下,把樣本數(shù)據(jù)寫入擴展存儲器。因此,把樣本數(shù)據(jù)寄存器分為兩部分,低16位為樣本數(shù)據(jù),高12位為該樣本數(shù)據(jù)在外部擴展存儲器的存儲地址,如下所示。

第二,存儲位置為FPGA的片上存儲體。ARM與FPGA通過12位地址總線、28位數(shù)據(jù)總線中的低16位、控制總線直接相連,控制寄存器組、專用寄存器組、分布式存儲器連接在這些總線上面。

片上集成存儲系統(tǒng)采用統(tǒng)一編址的方式,其優(yōu)勢在于可以通過ARM芯片的DMA方式進行數(shù)據(jù)傳輸,既可以提高傳輸速率又能夠釋放CPU。外部擴展存儲器因為只受FPGA控制而采用獨立編址,但地址域的設(shè)計接續(xù)片上集成存儲系統(tǒng)的地址,如此方便操作。

3 ZDMA控制設(shè)計

ARM端與FPGA端的數(shù)據(jù)通信如圖8所示,分為3個階段:

①網(wǎng)絡(luò)初始化階段的數(shù)據(jù)通信:配置網(wǎng)絡(luò)初始化數(shù)據(jù)。a)需對網(wǎng)絡(luò)訓(xùn)練執(zhí)行階段②,b)否則執(zhí)行階段③。

②網(wǎng)絡(luò)訓(xùn)練階段的通信:下載訓(xùn)練樣本數(shù)據(jù),訓(xùn)練完成上傳穩(wěn)定的權(quán)值。

③實際應(yīng)用階段的通信:下載實際樣本數(shù)據(jù),上傳處理結(jié)果。

每一個階段都是在ZDMA的方式下進行。每一個階段完成后都會進入中斷,提示本階段完成并進行下一步操作。

3.1 下載數(shù)據(jù)時ZDMA的配置

按照是否為樣本數(shù)據(jù),通信可分為兩個階段:一是面向FPGA片上集成存儲系統(tǒng)的非樣本數(shù)據(jù)通信,二是面向FPGA片外擴展存儲器的樣本數(shù)據(jù)通信。

本設(shè)計使用ZDMA0、ZDMA1兩個通道中的一個。與ZDMA有關(guān)的特殊功能寄存器有:

ZDMA控制寄存器(①ZDCONn):主要用于對DMA通道進行控制,允許外部DMA請求(nXDREQ)。

ZDMA0/1初始源/目的地址和計數(shù)寄存器、ZDMA0/1當(dāng)前源/目的地址和計數(shù)寄存器。

ZDMAn初始/當(dāng)前源地址寄存器(②ZDISRC、③ZDCSRC):初始源地址為數(shù)據(jù)在ARM芯片內(nèi)存的存放地址;當(dāng)前源地址為即將傳輸?shù)臄?shù)據(jù)的內(nèi)存地址,值為初始源地址+計數(shù)值。

ZDMAn初始/當(dāng)前目的地址寄存器(④ZDIDES、⑤ZDCDES):分為兩個階段:第一階段傳輸非樣本數(shù)據(jù)時初始目的地址為BANK6的起始地址;當(dāng)前目的地址是變化的,為初始目的地址+計數(shù)值。第二階段傳輸樣本數(shù)據(jù)時初始目的地址也是當(dāng)前目的地址,為樣本數(shù)據(jù)寄存器的地址。

ZDMAn初始/當(dāng)前目的計數(shù)寄存器(⑥ZDICNT、⑦ZDCCNT):初始值為0,當(dāng)前值隨著傳輸數(shù)據(jù)的個數(shù)逐一遞增,直至達到所有數(shù)據(jù)的數(shù)量。樣本數(shù)據(jù)和非樣本數(shù)據(jù)的傳輸分兩個階段進行,各自獨立。

從這個過程中可以看出,配置ZDMA時需考慮FPGA端存儲結(jié)構(gòu)體多樣性的問題。

3.2 上傳數(shù)據(jù)時ZDMA的配置

神經(jīng)網(wǎng)絡(luò)處理器的穩(wěn)定權(quán)值和處理結(jié)果存儲在FPGA上統(tǒng)一編址的專用寄存器組B中,不存在存儲結(jié)構(gòu)體多樣性的問題,所以上傳數(shù)據(jù)時ZDMA的配置相對簡單:

初始源地址即專用寄存器組B的起始地址,每傳送一次數(shù)據(jù)專用寄存器組的地址指針+1并作為當(dāng)前源地址。

初始目的地址為要存放數(shù)據(jù)的內(nèi)存塊的起始地址,每傳送一次數(shù)據(jù)內(nèi)存塊地址指針+1并作為當(dāng)前目的地址。

計數(shù)寄存器的初始值為0,每傳送一次數(shù)據(jù)其值+1,達到設(shè)定的目標(biāo)值時數(shù)據(jù)上傳即完成。

結(jié)語

本文首先介紹了人工神經(jīng)網(wǎng)絡(luò)的模型和算法以及FPGA的實現(xiàn),并通過對網(wǎng)絡(luò)結(jié)構(gòu)的分析設(shè)計了FPGA端的數(shù)據(jù)存儲系統(tǒng)。然后分析了ARM端和FPGA端各自的功能,在此基礎(chǔ)上把兩者結(jié)合在一起,設(shè)計了一種利用ARM的ZDMA方式相互通信的方案。

本站聲明: 本文章由作者或相關(guān)機構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內(nèi)容真實性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫毥谦F公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數(shù)字化轉(zhuǎn)型技術(shù)解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關(guān)鍵字: AWS AN BSP 數(shù)字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認(rèn)證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時1.5...

關(guān)鍵字: 汽車 人工智能 智能驅(qū)動 BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運行,同時企業(yè)卻面臨越來越多業(yè)務(wù)中斷的風(fēng)險,如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報道,騰訊和網(wǎng)易近期正在縮減他們對日本游戲市場的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導(dǎo)體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機 衛(wèi)星通信

要點: 有效應(yīng)對環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實提質(zhì)增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競爭力 堅持高質(zhì)量發(fā)展策略,塑強核心競爭優(yōu)勢...

關(guān)鍵字: 通信 BSP 電信運營商 數(shù)字經(jīng)濟

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術(shù)學(xué)會聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現(xiàn)場 NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會上,軟通動力信息技術(shù)(集團)股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉
關(guān)閉