當前位置:首頁 > 嵌入式 > 嵌入式軟件
[導讀]基于DSP和FPGA的機器人聲控系統(tǒng)設計與實現

1 引言
    
     機器人聽覺系統(tǒng)主要是對人的聲音進行語音識別并做出判斷,然后輸出相應的動作指令控制頭部和手臂的動作,傳統(tǒng)的機器人聽覺系統(tǒng)一般是以PC機為平臺對機器人進行控制,其特點是用一臺計算機作為機器人的信息處理核心通過接口電路對機器人進行控制,雖然處理能力比較強大,語音庫比較完備,系統(tǒng)更新以及功能拓展比較容易,但是比較笨重,不利于機器人的小型化和復雜條件下進行工作,此外功耗大、成本高。

     本次設計采用了性價比較高的數字信號處理芯片TMS320VC5509作為語音識別處理器,具有較快的處理速度,使機器人在脫機狀態(tài)下,獨立完成復雜的語音信號處理和動作指令控制,FPGA系統(tǒng)的開發(fā)降低了時序控制電路和邏輯電路在PCB板所占的面積[1],使機器人的"大腦"的語音處理部分微型化、低功耗。一個體積小、低功耗、高速度能完成特定范圍語音識別和動作指令的機器人系統(tǒng)的研制具有很大的實際意義。

2 系統(tǒng)硬件總體設計
 
     系統(tǒng)的硬件功能是實現語音指令的采集和步進電機的驅動控制,為系統(tǒng)軟件提供開發(fā)和調試平臺。如圖1所示。

     系統(tǒng)硬件分為語音信號的采集和播放,基于DSP的語音識別,FPGA動作指令控制、步進電機及其驅動、DSP外接閃存芯片,JTAG口仿真調試和鍵盤控制幾個部分。工作流程是麥克風將人的語音信號轉化為模擬信號,在經過音頻芯片TLV320AIC23量化轉化成數字信號輸入DSP.DSP完成識別后,輸出動作指令。

     FPGA根據DSP輸入的動作指令產生正確的正反轉信號和準確的脈沖給步進電機驅動芯片,驅動芯片提供步進電機的驅動信號,控制步進電機的轉動。片外FLASH用于存儲系統(tǒng)程序和語音庫并完成系統(tǒng)的上電加載。JTAG口用于與PC機進行聯機在線仿真,鍵盤則用于參數調整和功能的切換。

3 語音識別系統(tǒng)設計

3.1 語音信號的特點

     語音信號的頻率成分主要分布在300~3400Hz之間,根據采樣定理選擇信號的采樣率為8 kHz。語音信號的一個特點在于他的"短時性",有時在一個短時段呈現隨機噪聲的特性,而另一段表現周期信號的特性,或二者兼而有之。語音信號的特征是隨時間變化的,只有一段時間內,信號才表現穩(wěn)定一致的特征,一般來說短時段可取5~50 ms,因此語音信號的處理要建立在其"短時性"上[2],系統(tǒng)將語音信號幀長設為20 ms,幀移設為10 ms,則每幀數據為160×16 b。

3.2 語音信號的采集和播放

     語音采集和播放芯片采用的是TI公司生產的TLV320AIC23B,TLV320AIC23B的模數轉換(ADC)和數模轉換(DAC)部件高度集成在芯片內部,芯片采用8 k采樣率,單聲道模擬信號輸入,雙聲道輸出。TLV320AIC23具有可編程特性,DSP可通過控制接口來編輯該器件的控制寄存器,而且能夠編譯SPI,I2C兩種規(guī)格的接口,TLV320AIC23B與DSP5509的電路連接如圖2所示。

     DSP采用I2C口對TLV320AIC23的寄存器進行設置。當MODE=O時,為I2C規(guī)格的接口,DSP采用主發(fā)送模式,通過I2C口對地址為0000000~0001111的11個寄存器進行初始化。I2C模式下,數據是分為3個8 b寫入的。而TLV320AIC23有7位地址和9位數據,也就是說,需要把數據項上面的最高位補充到第二個8 B中的最后一位。

     MCBSP串口通過6個引腳CLKX,CLKR,FSX,FSR,DR和CX與TLV320AIC23相連。數據經MCBSP串口與外設的通信通過DR和DX引腳傳輸,控制同步信號則由CLKX,CLKR,FSX,FSR四個引腳實現。將MCBSP串口設置為DSP Mode模式,然后使串口的接收器和發(fā)送器同步,并且由TLV320AIC23的幀同步信號LRCIN,LRCOUT啟動串口傳輸,同時將發(fā)送接收的數據字長設定為32 b(左聲道16 b,右聲道16 b)單幀模式。

3.3 語音識別程序模塊的設計

     為了實現機器人對非特定人語音指令的識別,系統(tǒng)采用非特定人的孤立詞識別系統(tǒng)。非特定人的語音識別是指語音模型由不同年齡、不同性別、不同口音的人進行訓練,在識別時不需要訓練就可以識別說話人的語音[2]。系統(tǒng)分為預加重和加窗,短點檢測,特征提取,與語音庫的模式匹配和訓練幾個部分。

3.3.1 語音信號的預加重和加窗

     預加重處理主要是去除聲門激勵和口鼻輻射的影響,預加重數字濾波H(Z)=1一KZ-1,其中是為預加重系數,接近1,本系統(tǒng)中k取0.95。對語音序列X(n)進行預加重,得到預加重后的語音序列x(n):x(n)=X(n)一kX(n一1) (1)

    系統(tǒng)采用一個有限長度的漢明窗在語音序列上進行滑動,用以截取幀長為20 ms,幀移設為10 ms的語音信號,采用漢明窗可以有效減少信號特征的丟失。

3.3.2 端點檢測

     端點檢測在詞與詞之間有足夠時間間隙的情況下檢測出詞的首末點,一般采用檢測短時能量分布,方程為:



     其中,x(n)為漢明窗截取語音序列,序列長度為160,所以N取160,為對于無音信號E(n)很小,而對于有音信號E(n)會迅速增大為某一數值,由此可以區(qū)分詞的起始點和結束點。

3.3.3特征向量提取

     特征向量是提取語音信號中的有效信息,用于進一步的分析處理。目前常用的特征參數包括線性預測倒譜系數LPCC、美爾倒譜系數MFCC等。語音信號特征向量采用Mel頻率倒譜系數MFCC(Mel Frequency Cepstrum Coeficient的提取,MFCC參數是基于人的聽覺特性的,他利用人聽覺的臨界帶效應[3],采用MEL倒譜分析技術對語音信號處理得到MEL倒譜系數矢量序列,用MEL倒譜系數表示輸入語音的頻譜。在語音頻譜范圍內設置若干個具有三角形或正弦形濾波特性的帶通濾波器,然后將語音能量譜通過該濾波器組,求各個濾波器輸出,對其取對數,并做離散余弦變換(DCT),即可得到MFCC系數。MFCC系數的變換式可簡化為:


     其中,i為三角濾波器的個數,本系統(tǒng)選P為16,F(k)為各個濾波器的輸出數據,M為數據長度。

3.3.4 語音信號的模式匹配和訓練

     模型訓練即將特征向量進行訓練建立模板,模式匹配即將當前特征向量與語音庫中的模板進行匹配得出結果。語音庫的模式匹配和訓練采用隱馬爾可夫模型HMM(Hidden Markov Models),他是一種統(tǒng)計隨機過程統(tǒng)計特性的概率模型一個雙重隨機過程,因為隱馬爾可夫模型能夠很好地描述語音信號的非平穩(wěn)性和可變性,因此得到廣泛的使用[4]。

     HMM的基本算法有3種:Viterbi算法,前向一后向算法,Baum-Welch算法。本次設計使用Viterbi算法進行狀態(tài)判別,將采集語音的特征向量與語音庫的模型進行模式匹配。Baum-Welch算法用來解決語音信號的訓練,由于模型的觀測特征是幀間獨立的,從而可以使用Baum-Welch算法進行HMM模型的訓練。

3.4 語音識別程序的DSP開發(fā)

     DSP的開發(fā)環(huán)境為CCS3.1及。DSP/BIOS,將語音識別和訓練程序分別做成模塊,定義為不同的函數,在程序中調用。定義語音識別器函數為int Recognizer(int Micin),識別結果輸出函數為int Result(void),語音訓練器函數為int Train(int Tmode,int Audiod),動作指令輸入函數為int Keyin(int Action[5])。

     語音識別器的作用是將當前語音輸入變換成語音特征向量,并對語音庫的模板進行匹配并輸出結果,語音應答輸出函數將獲取的語音識別結果對應的語音應答輸出,語音訓練是將多個不同年齡、不同性別、不同口音的人語音指令輸入轉化為訓練庫的模板。為防止樣本錯誤,每個人的語音指令需要訓練2次,對于2次輸入用用歐氏距離去進行模式匹配,若2次輸入相似度達到95%,則加入樣本集。語音應答輸入函數是為每個語音庫中模板輸入對立的語音輸出,以達到語言應答目的。系統(tǒng)工作狀態(tài)為執(zhí)行語言識別子程序,訓練時執(zhí)行外部中斷,執(zhí)行訓練函數,取得數據庫模板,訓練完畢返回。程序框圖如圖3所示。

4 機器人的動作控制系統(tǒng)設計

4.1 FPGA邏輯設計

     系統(tǒng)通過語音控制機器人頭部動作,頭部運動分為上下和左右運動2個自由度,需要2個步進電機控制,DSF完成語音識別以后,輸出相應的動作指令,動作執(zhí)行結束后,DSP發(fā)出歸零指令,頭部回到初試狀態(tài)。FPGA的作用是提供DSP接口邏輯,設置存儲DSP指令的RAM塊,同時產生步進電機驅動脈沖控制步進電機轉動方向和角度。

     FPGA器件為動作指令控制單元,設計采用FLEXlOKE芯片,接收DSP數據后并行控制2路步進電機。FPGA內部結構邏輯如圖4所示,FPGA內部設置2個元件為電機脈沖發(fā)生器,控制電機的工作脈沖以及正反轉。AO~A7為DSP數據輸入端口,WR為數據寫端口,P1,P2為2個步進電機驅動芯片脈沖輸入口,L1,L2為電機正反轉控制口,ENABLE為使能信號。

     RAM1和RAM2分別為2個步進電機的指令寄存器,電機脈沖發(fā)生器發(fā)出與RAM中相應數量的方波脈沖。DSP通過DO~D8數據端輸出8位指令,其中。D8為RAM選擇,為1時選擇RAM1,為0時選擇RAM0,DO~D7為輸出電機角度,電極上下和左右旋轉角度為120°,精度為1°,初始值都為60°,DO~D7的范圍為00000000~11111000,初始值為00111100。FPGA作為步進脈沖發(fā)生器,通過時鐘周期配置控制電機轉速,與初始值對應坐標決定正反轉。系統(tǒng)動作指令程序如圖5所示。
     其中R1為DSP指令寄存器,R2為當前坐標寄存器,通過DSP的輸出坐標與FPGA的當前坐標進行差值運算來確定步進電機的旋轉方向和旋轉角度,優(yōu)點是可以根據新的輸入指令的變化,結束當前動作以運行新的指令,指令執(zhí)行完畢后,系統(tǒng)清零,步進電機回到初始狀態(tài)。

4.2 FPGA邏輯仿真

     FPGA以MAX-PLUSⅡ開發(fā)平臺,用語言為VHDL語言對上述邏輯功能進行設計,并通過JTAG接口進行了調試,FLEXl0KE芯片能夠根據DSP輸出指令輸出正確的正反轉信號和脈沖波形。

4.3 步進電機驅動設計

     FPGA通過P1,L1,P2,L2輸出控制控制步進電機驅動芯片。步進電機驅動采用的是東芝公司生產的單片正弦細分二相步進電機驅動專用芯片TA8435H,FPGA與TA8435H電路連接如圖6。

     由于FLEX1OKE和TMS320VC5509工作電壓為3.3 V,而TA8435H為5 V和25 V,所以管腳連接使用光電耦合器件TLP521,使兩邊電壓隔離。CLK1為時鐘輸入腳,CW/CCW為正反轉控制腳,A,A,B,B為二相步進電機輸入。

5 結 語

     系統(tǒng)充分利用了DSP的高處理速度和可擴展的片外存儲空間,具有高速、實時、識別率高的特點并支持大的語音庫,FPGA的使用使系統(tǒng)電路獲得簡化,一片FLEXl0KE芯片可以完成2個步進電機的時序控制。雖然在處理速度和語音庫的存儲容量上與PC機系統(tǒng)具有一定的差距,但在機器人的微型化、低功耗和特定功能實現上,以DSPFPGA為核心的嵌入式系統(tǒng)無疑具有廣闊的前景。

本站聲明: 本文章由作者或相關機構授權發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內容真實性等。需要轉載請聯系該專欄作者,如若文章內容侵犯您的權益,請及時聯系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或將催生出更大的獨角獸公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數字化轉型技術解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關鍵字: AWS AN BSP 數字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術公司SODA.Auto推出其旗艦產品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時1.5...

關鍵字: 汽車 人工智能 智能驅動 BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務能7×24不間斷運行,同時企業(yè)卻面臨越來越多業(yè)務中斷的風險,如企業(yè)系統(tǒng)復雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務連續(xù)性,提升韌性,成...

關鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據媒體報道,騰訊和網易近期正在縮減他們對日本游戲市場的投資。

關鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數據產業(yè)博覽會開幕式在貴陽舉行,華為董事、質量流程IT總裁陶景文發(fā)表了演講。

關鍵字: 華為 12nm EDA 半導體

8月28日消息,在2024中國國際大數據產業(yè)博覽會上,華為常務董事、華為云CEO張平安發(fā)表演講稱,數字世界的話語權最終是由生態(tài)的繁榮決定的。

關鍵字: 華為 12nm 手機 衛(wèi)星通信

要點: 有效應對環(huán)境變化,經營業(yè)績穩(wěn)中有升 落實提質增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務引領增長 以科技創(chuàng)新為引領,提升企業(yè)核心競爭力 堅持高質量發(fā)展策略,塑強核心競爭優(yōu)勢...

關鍵字: 通信 BSP 電信運營商 數字經濟

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術學會聯合牽頭組建的NVI技術創(chuàng)新聯盟在BIRTV2024超高清全產業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現場 NVI技術創(chuàng)新聯...

關鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯合招商會上,軟通動力信息技術(集團)股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...

關鍵字: BSP 信息技術
關閉
關閉