當前位置:首頁 > 智能硬件 > 智能硬件
[導讀]本課題采用S3C44BO微處理器的ARM7開發(fā)平臺,驅動USB接口芯片CH374進行視頻數(shù)據(jù)采集,提供了低成本的視頻采集方案。

    現(xiàn)有視頻監(jiān)控系統(tǒng)的設計大都采用USB視頻采集和以太網(wǎng)傳輸,并且需要視頻壓縮方案,通常需要操作系統(tǒng)支持;因此選取的開發(fā)平臺價格昂貴,造成視頻臨控系統(tǒng)的成本居高不下,以致使小型工廠和家庭用戶難以接受。

    本課題采用S3C44BO微處理器的ARM7開發(fā)平臺,驅動USB接口芯片CH374進行視頻數(shù)據(jù)采集,提供了低成本的視頻采集方案。USB視頻采集涉及USB同步傳輸,但是在眾多USB主機芯片的設計中,多以控制傳輸和批量傳輸為主,對同步傳輸?shù)闹v解極為少見。本文提供了USB同步傳輸?shù)脑O計范例。

1 系統(tǒng)工作原理

    典型的USB視頻采集系統(tǒng)如圖1所示。USB系統(tǒng)包含主機和物理設備兩個最基本的元素,一個USB系統(tǒng)只能有一個USB主機,可以連接多個物理設備。本設計中的設備是USB攝像頭,USB主機由USB主機控制器、微處理器及驅動軟件構成。USB系統(tǒng)工作層次分明:USB接口層提供主機控制器和設備的物理連接;設備層中,USB主機調(diào)用驅動程序通過端點0發(fā)送并獲取USB設備的控制信息;功能層進行實際數(shù)據(jù)的傳輸,主機必須選擇合適的接口和端點,調(diào)用底層驅動提供的接口函數(shù)獲取USB攝像頭的視頻數(shù)據(jù)流。

1.1 USB攝像頭SPCA561A

    視頻信號的采集一般選擇USB攝像頭來實現(xiàn)。如圖2所示,USB攝像頭SPCA561A集成了鏡頭、CMOS傳感器、USB圖像處理器以及USB控制器。

    比起直接與微處理器接口的CMOS傳感器,使用USB攝像頭雖然成本偏高,但是易于實現(xiàn),節(jié)省CPU資源,而且驅動支持非常豐富。SPCA561A提供了一種單芯片攝像頭解決方案,它將一個CIF的CMOS傳感器、一個圖像處理器和USB控制器集成于單芯片,從而大大降低了成本和開發(fā)難度;缺點是只有10萬像素,每秒幀數(shù)較少,然而非常適合應用于圖像要求不高的小型監(jiān)控系統(tǒng)。

1.2 USB主機控制器CH374

    CH374是一個嵌入式USB總線的通用接口芯片,支持USB主機方式和USB設備方式,支持低速和全速的控制傳輸、批量傳輸、中斷傳輸以及同步傳輸。在本地端,CH374具有8位數(shù)據(jù)總線和讀、寫、片選控制線以及中斷輸出,可以方便地掛接到DSP/MCU/MPU等控制器的系統(tǒng)總線上。大多數(shù)嵌入式的USB主機接口芯片并不提供同步傳輸模式,而CH374的一大特點就是提供了同步傳輸,使得視頻和音頻流的傳輸成為可能。

    本系統(tǒng)使用CH374作為USB主機控制器,如圖3所示。CH374用總線方式與S3C44B0相連,微控制器通過讀寫CH374寄存器實現(xiàn)USB主機驅動。

1.3 USB同步傳輸原理

    同步傳輸主要用來傳輸音頻或視頻信號。這種信息是周期的,又是實時的,對信息實時性有很高的要求,但是對誤碼率卻可以容忍。所以USB為這種信息保留90%的帶寬,其他類型的傳輸在同步傳輸期間不可以占用。

    為保證數(shù)據(jù)傳輸?shù)膶崟r性,同步傳輸不進行數(shù)據(jù)錯誤的重傳,也不在硬件層次上響應一個握手資料包。同步傳輸?shù)闹鳈C每隔l ms發(fā)送一個SOF同步信號,隨后接收設備發(fā)送的信號,其數(shù)據(jù)流程如圖4所示。

    在同步傳輸中,每一個信包的容量是一定的。拿SPCA56l來說,在啟動同步傳輸之前必須設置相應的接口號。不同的接口號決定將要發(fā)送多大的信包容量,如接口號1每次發(fā)送的信包容量是128字節(jié),接口號6的信包容量是896字節(jié)。接口號通過USB標準設備請求SET_INTERFACE來設置。由于CH374的緩沖區(qū)最大為128字節(jié),所以本設計中使用接口號l,同步傳輸每接收一個信包的大小是128字節(jié)容量的信包。

1.4 視頻數(shù)據(jù)采集過程

    如圖5所示,視頻信號由攝像頭SPCA561A采集得到,經(jīng)過內(nèi)部的圖像處理芯片后編碼為規(guī)定的格式,一般為RGB或者YUV格式,但是SPCA561采用比較特殊的S561圖像格式(類似于RGB格式)。因為一幀圖像的數(shù)據(jù)量很大,無法在一個同步信包內(nèi)傳送,所以將其分割成多個單元,每個單元前添加包頭(包頭的內(nèi)容包括當前包序號和此圖像幀信息),組成多個同步信包,通過FIFO緩沖發(fā)送到USB總線上。主機控制器用同步方式接收每個信包,并去除包頭合并成S561格式的數(shù)據(jù),組成一個完整的圖像幀。最后由軟件將此圖像幀預編碼成為YUV420格式的圖像數(shù)據(jù),以便后續(xù)的壓縮處理。

2 USB攝像頭驅動的實現(xiàn)

    USB攝像頭并非標準的USB外設。與其他USB外設不同的是,每個廠商的攝像頭芯片都有自己定義的設備請求,而這些攝像頭芯片數(shù)據(jù)手冊并不對外公開,所以編寫攝像頭驅動的難度很大,想要驅動支持更多的攝像頭,程序會非常復雜。本文只介紹SPCA561A攝像頭驅動的方法。

2.1 USB攝像頭初始化

    初始化一個USB攝像頭有兩個步驟,第一步是攝像頭的枚舉,第二步是攝像頭的自定義設置。

(1) 設備枚舉

    設備的枚舉就是標準設備請求的過程,這部分內(nèi)容包含于USB協(xié)議第9章。對USB攝像頭來說,枚舉的過程依次如下:

①獲取設備描述符。通過設備描述符得到端點0的負載,也就是最大傳送包容量。

②設置地址。給設備分配一個默認地址0之外的地址。

③獲取配置描述符。這個過程包括兩個階段,第1次獲取的配置描述符的前4個字節(jié)得到配置描述符的真實長度;再以真實長度第2次獲取配置描述符,此描述符包含了設備的配置信息和多個接口信息??梢詮倪@里得到可以使用的接口號和對應的信包負載。

④設置配置信息。設置的主要信息是配置描述符中的第5個字段bConfigurationValue。

⑤設置接口。USB攝像頭不同的接口號對應不同的信包負載。本設計選定的接口號為2,對應信包負載是128字節(jié)。

(2) 自定義設置

    USB攝像頭并不是標準USB外設,需要很多自定義設置,可以稱之為“自定義設備請求”,它是用標準設備請求包方式傳送的,目的是修改內(nèi)部寄存器,對采集圖像和壓縮方式進行配置。標準設備請求和自定義設備請求包的不同內(nèi)容如表1所列。自定義設備請求的內(nèi)容非常豐富,它包含以下幾個方面:

①時序產(chǎn)生設置。包括圖像采集頻率和振蕩器的設置等。

②圖像處理設置。包括圖像窗口大小、壓縮類型、色彩分配等配置屬性。

③存儲器設置。對圖像緩沖進行設置。

④控制及狀態(tài)設置。包括啟動及停止圖像采集、數(shù)據(jù)傳輸方式、當前狀態(tài)等配置屬性。

    程序中的初始化設置有近百條,具體設置請見參考文獻[1]的開源代碼。初始化結束后,可以根據(jù)需要進行圖像格式的設定,SPCA561A支持SQVGA(160×120)、QCIF(176×144)、QVGA(320×240)、CIF(352×288)四種格式。設定結束后啟動攝像頭采集,進行數(shù)據(jù)傳輸。

2.2 同步傳輸和圖像幀處理

    同步傳輸?shù)倪^程非常簡單,甚至不包含握手信息;但是因為同步傳輸對時序的要求很高,所以對同步傳輸數(shù)據(jù)的處理頗困難。此驅動的設計將同步數(shù)據(jù)的接收用中斷服務程序進行處理,同步數(shù)據(jù)的處理放在中斷服務之外執(zhí)行。

①中斷服務程序流程如圖6所示。每次同步中斷發(fā)生時,首先從USB主機控制器的緩沖區(qū)內(nèi)讀取接收到的128字節(jié)同步信包,將數(shù)據(jù)存儲到數(shù)據(jù)處理程序提供的存儲單元中。再發(fā)送PID_IN標志和端點號,設置同步傳輸類型并啟動下一次傳輸。CH374主機會在每1 ms發(fā)送1個SOF同步標志,USB設備接收到SOF標志后,會傳送下一個同步信包。

②同步數(shù)據(jù)處理程序如圖7所示。中斷結束后,執(zhí)行數(shù)據(jù)處理程序,程序讀取同步信包的第一個字節(jié),確認包的序號,此序號的范圍是0~0xFF。如果此序號為0xFF,則說明是無效包,需要丟棄。如果此序號為0,則可能是首次采集得到的第一個同步數(shù)據(jù)包,直接存儲此數(shù)據(jù)到圖像幀;也可能是當前圖像幀結束后開始的下一幀圖像的第一個同步信包,則需要處理已經(jīng)結束的當前幀圖像,同時將當前幀設置為下一幀。至此得到了一幀圖像數(shù)據(jù)。

2.3 圖像數(shù)據(jù)的預編碼

    經(jīng)過處理后的圖像幀為S561格式數(shù)據(jù),它是一種RGB格式的圖像,無法被后續(xù)的圖像編碼器利用。常用的視頻壓縮標準(如H.263、MPEG4等)輸入的視頻數(shù)據(jù)為YUV420格式,所以必須對當前的S56l格式數(shù)據(jù)進行預編碼,使之成為YUV420格式。因為算法比較復雜,在此不詳細敘述,請參考文獻[1]中bayer_decode( )函數(shù)的的源代碼。至此,基于CH374的攝像頭驅動完成。

3 設計心得

    由于此USB主機基于低端嵌入式硬件系統(tǒng),沒有操作系統(tǒng)支持,也沒有BUSHOUND類似的USB數(shù)據(jù)流分析軟件支持,難以找到基于嵌入式平臺USB同步傳輸參考程序,所以設計的難度很大。筆者的設計經(jīng)驗是重在參考程序的選擇。

    此課題的設計可以分成兩個部分:一個是底層的CH374主機控制器驅動,主要包括沒備探測和枚舉(這部分程序的設計可以參考類似主機控制器的驅動程序,如Cypress公司的SL811HS芯片主機驅動程序[3]);另一部分是攝像頭初始化、視頻數(shù)據(jù)讀取及處理程序,僅有的參考資料是Linux下的開源USB攝像頭驅動。在設計過程中首先需要了解Linux設備驅動原理,很好地分析USB攝像頭驅動之后才能有設計思路。

結 語

    將本驅動加到已有的視頻壓縮程序中,通過網(wǎng)絡傳送視頻到PC后播放,在大小為QVGA(160×120)的圖像屬性下,可以達到每秒7幀,基本滿足了實際需要?;贑H374的USB攝像頭驅動,提供了低成本嵌入式平臺實現(xiàn)視頻采集的方案,便利視頻采集系統(tǒng)不再高不可攀,對視頻監(jiān)控的普及起到了積極作用。

本站聲明: 本文章由作者或相關機構授權發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內(nèi)容真實性等。需要轉載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或將催生出更大的獨角獸公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數(shù)字化轉型技術解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關鍵字: AWS AN BSP 數(shù)字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時1.5...

關鍵字: 汽車 人工智能 智能驅動 BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務能7×24不間斷運行,同時企業(yè)卻面臨越來越多業(yè)務中斷的風險,如企業(yè)系統(tǒng)復雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務連續(xù)性,提升韌性,成...

關鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報道,騰訊和網(wǎng)易近期正在縮減他們對日本游戲市場的投資。

關鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關鍵字: 華為 12nm EDA 半導體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會上,華為常務董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權最終是由生態(tài)的繁榮決定的。

關鍵字: 華為 12nm 手機 衛(wèi)星通信

要點: 有效應對環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實提質(zhì)增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務引領增長 以科技創(chuàng)新為引領,提升企業(yè)核心競爭力 堅持高質(zhì)量發(fā)展策略,塑強核心競爭優(yōu)勢...

關鍵字: 通信 BSP 電信運營商 數(shù)字經(jīng)濟

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術學會聯(lián)合牽頭組建的NVI技術創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現(xiàn)場 NVI技術創(chuàng)新聯(lián)...

關鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會上,軟通動力信息技術(集團)股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...

關鍵字: BSP 信息技術
關閉
關閉