當(dāng)前位置:首頁(yè) > 智能硬件 > 智能硬件
[導(dǎo)讀]本文從實(shí)際應(yīng)用的角度出發(fā),采用FPGA作為主控芯片,設(shè)計(jì)了一款數(shù)字視頻接口轉(zhuǎn)換設(shè)備,該設(shè)備針對(duì)于MT9M111這款數(shù)字圖像傳感器產(chǎn)生的ITU-R BT.656格式數(shù)據(jù)進(jìn)行采集、色彩空間變換、分辨率轉(zhuǎn)換等操作

    引言

  本文從實(shí)際應(yīng)用的角度出發(fā),采用FPGA作為主控芯片,設(shè)計(jì)了一款數(shù)字視頻接口轉(zhuǎn)換設(shè)備,該設(shè)備針對(duì)于MT9M111這款數(shù)字圖像傳感器產(chǎn)生的ITU-R BT.656格式數(shù)據(jù)進(jìn)行采集、色彩空間變換、分辨率轉(zhuǎn)換等操作,完成了從ITU-R BT.656格式數(shù)據(jù)到DVI格式數(shù)據(jù)的轉(zhuǎn)換,使得MT9M111數(shù)字圖像傳感器的BT656數(shù)據(jù)格式圖像能夠以1280×960(60Hz)和1280×1024(60Hz)兩種顯示格式在DVI-I接口的顯示器上顯示,并且還具有圖像靜止功能,在系統(tǒng)空閑時(shí)的待機(jī)狀態(tài)實(shí)現(xiàn)了整機(jī)的低功耗,適用于使用移動(dòng)設(shè)備的工業(yè)現(xiàn)場(chǎng)。

  整體方案設(shè)計(jì)

  現(xiàn)實(shí)景物的采集與顯示過(guò)程如圖1所示。圖像傳感器MT9M111采集到現(xiàn)實(shí)景物后,將生成的ITU-R BT.656數(shù)據(jù)流由ITU數(shù)據(jù)輸出端口發(fā)送給視頻轉(zhuǎn)換接口。視頻轉(zhuǎn)換接口將ITU數(shù)據(jù)輸入端口送來(lái)的ITU-R BT.656數(shù)據(jù)流轉(zhuǎn)換成TMDS數(shù)據(jù)流發(fā)送,通過(guò)DVI-I端口發(fā)送給顯示終端顯示。本設(shè)計(jì)方案中,MT9M111輸出圖像的分辨率為1280×960。

系統(tǒng)采集與顯示過(guò)程

  圖1 系統(tǒng)采集與顯示過(guò)程

  在現(xiàn)實(shí)景物的采集與顯示過(guò)程中,視頻轉(zhuǎn)換接口功能的實(shí)現(xiàn)通過(guò)以下步驟來(lái)完成:

  1) 對(duì)收到的ITU-R BT.ITU656數(shù)據(jù)流解交織;

  2) 對(duì)解交織后的數(shù)據(jù)流進(jìn)行色彩空間轉(zhuǎn)換;

  3) 將轉(zhuǎn)換后的每個(gè)像素的RGB值寫(xiě)入存儲(chǔ)器中;

  4) 從存儲(chǔ)器中讀出像素的RGB值,并將其轉(zhuǎn)換成TMDS碼元序列;

  5) 從存儲(chǔ)器中讀出像素的RGB值,并將其轉(zhuǎn)換成VGA模擬信號(hào)值。

  硬件構(gòu)架設(shè)計(jì)

  系統(tǒng)的硬件構(gòu)架框圖如圖2所示。圖像傳感器輸出的ITU信號(hào)(包括YCbCr數(shù)據(jù)流、行場(chǎng)同步信號(hào)和像素時(shí)鐘)經(jīng)ITU輸入接口送入FPGA主控芯片。FPGA主控芯片對(duì)ITU信號(hào)進(jìn)行解交織和色彩空間轉(zhuǎn)換,再將轉(zhuǎn)換后的每個(gè)像素的RGB值寫(xiě)入SDRAM存儲(chǔ)器。再由FPGA主控芯片按照輸出分辨率的要求從SDRAM存儲(chǔ)器中讀出像素的RGB值,并按照VGA的時(shí)序標(biāo)準(zhǔn),將像素的RGB值發(fā)送給TMDS發(fā)送芯片和D/A芯片,由TMDS發(fā)送芯片提供視頻數(shù)據(jù)的數(shù)字通道,由D/A芯片提供視頻數(shù)據(jù)的模擬通道,共同匯集到DVI-I輸出接口,傳送到數(shù)字顯示器或模擬顯示器上顯示。

硬件構(gòu)架框圖

  圖2 硬件構(gòu)架框圖

  輸出圖像的分辨率要求FPGA與TMDS發(fā)送芯片之間傳送數(shù)據(jù)的帶寬在100M(像素/秒)以上,因此要求FPGA的速度足夠快。同時(shí)由于FPGA與外圍器件之間的互聯(lián)比較多,因此要求FPGA的引腳數(shù)足夠多。同時(shí)由于晶振提供的時(shí)鐘頻率為50MHz,滿(mǎn)足不了100M以上的傳輸速度,因此需要FPGA內(nèi)部帶有鎖相環(huán)。另外,為了實(shí)現(xiàn)系統(tǒng)脫機(jī)工作,要求FPGA支持配置芯片。最后,考慮到系統(tǒng)占用的面積和以后版本的升級(jí),要求FPGA的內(nèi)部資源盡量豐富。為此,系統(tǒng)最終選用了Altera公司Cyclone系列FPGA。

  考慮到視頻數(shù)據(jù)的存儲(chǔ)和顯示是同時(shí)進(jìn)行的,而SDRAM存儲(chǔ)器是單端口器件,數(shù)據(jù)的寫(xiě)入和讀出不能同時(shí)進(jìn)行,故需要兩塊SDRAM同時(shí)進(jìn)行乒乓操作來(lái)完成數(shù)據(jù)的連續(xù)讀寫(xiě)。最終選用了MICron公司的型號(hào)為MT48LC2M32B2TG-6的SDRAM存儲(chǔ)器;TMDS發(fā)送芯片選用的是Silicon Image公司的SiI164CT64型號(hào)。由于輸出圖像的分辨率要求FPGA與TMDS發(fā)送芯片之間傳送數(shù)據(jù)的帶寬在100M以上,這一數(shù)據(jù)流同時(shí)又要送入D/A芯片完成數(shù)模轉(zhuǎn)換,因此要求D/A芯片的轉(zhuǎn)換速率在100MHz以上。同時(shí)由于R、G、B的數(shù)據(jù)寬度都為8位,因此需要選用專(zhuān)用的圖像D/A芯片,它需要具有R、G、B三路數(shù)據(jù)通道,每路的寬度至少為8位。根據(jù)以上要求,系統(tǒng)最終選定CSEMIC公司的CSV7123型號(hào)的圖像D/A芯片。

  FPGA功能設(shè)計(jì)

  FPGA作為系統(tǒng)的主控芯片,是軟件設(shè)計(jì)的核心。根據(jù)整體方案的設(shè)計(jì)思路,F(xiàn)PGA主控芯片的工作過(guò)程為:首先接收由圖像傳感器送來(lái)的ITU-R BT.656格式的視頻數(shù)據(jù)流,經(jīng)過(guò)解交織操作,將像素?cái)?shù)據(jù)流中交織在一起的串行YCbCr值解成獨(dú)立的并行YCbCr值。然后對(duì)解交織的YCbCr值進(jìn)行色彩空間轉(zhuǎn)換,轉(zhuǎn)換成對(duì)應(yīng)的RGB值。接著將此RGB值存入一塊SDRAM存儲(chǔ)器。與此同時(shí),從另一塊SDRAM存儲(chǔ)器中讀出像素的RGB值,并發(fā)送給TMDS發(fā)送芯片和D/A芯片,經(jīng)過(guò)數(shù)字通道和模擬通道后,傳送到DVI顯示器或VGA顯示器上顯示。根據(jù)FPGA主控芯片的工作過(guò)程,設(shè)計(jì)的軟件功能框圖如圖3所示。

 軟件功能框圖
                             圖3 軟件功能框圖 

    圖3中FPGA內(nèi)部的工作時(shí)鐘有兩個(gè),以圖中的虛線(xiàn)為界,虛線(xiàn)左側(cè)部分使用的時(shí)鐘為圖像傳感器的54MHz像素時(shí)鐘;虛線(xiàn)右側(cè)使用的時(shí)鐘是經(jīng)過(guò)鎖相環(huán)將晶振的50MHz時(shí)鐘倍頻成108MHz以后的時(shí)鐘,其中108MHz的時(shí)鐘是由輸出圖像的分辨率所決定的。兩個(gè)時(shí)鐘域通過(guò)異步FIFO相連。整個(gè)系統(tǒng)共分成6個(gè)模塊:解交織模塊、YCbCr轉(zhuǎn)RGB模塊、異步FIFO模塊、乒乓操作模塊、SDRAM控制器模塊和VGA發(fā)送模塊。此外,系統(tǒng)還可實(shí)現(xiàn)圖像靜止、系統(tǒng)待機(jī)、模式選擇等功能。

  圖像顯示效果

  圖4是輸出圖像分辨率為1280×960模式下的顯示效果,圖中顯示器檢測(cè)到的視頻圖像分辨率為1280×960

1280×960模式下的顯示效果



圖4 1280×960模式下的顯示效果



 

本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀(guān)點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請(qǐng)聯(lián)系該專(zhuān)欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請(qǐng)及時(shí)聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車(chē)的華為或?qū)⒋呱龈蟮莫?dú)角獸公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

倫敦2024年8月29日 /美通社/ -- 英國(guó)汽車(chē)技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車(chē)工程師從創(chuàng)意到認(rèn)證的所有需求的工具,可用于創(chuàng)建軟件定義汽車(chē)。 SODA V工具的開(kāi)發(fā)耗時(shí)1.5...

關(guān)鍵字: 汽車(chē) 人工智能 智能驅(qū)動(dòng) BSP

北京2024年8月28日 /美通社/ -- 越來(lái)越多用戶(hù)希望企業(yè)業(yè)務(wù)能7×24不間斷運(yùn)行,同時(shí)企業(yè)卻面臨越來(lái)越多業(yè)務(wù)中斷的風(fēng)險(xiǎn),如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報(bào)道,騰訊和網(wǎng)易近期正在縮減他們對(duì)日本游戲市場(chǎng)的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國(guó)國(guó)際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)開(kāi)幕式在貴陽(yáng)舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導(dǎo)體

8月28日消息,在2024中國(guó)國(guó)際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱(chēng),數(shù)字世界的話(huà)語(yǔ)權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機(jī) 衛(wèi)星通信

要點(diǎn): 有效應(yīng)對(duì)環(huán)境變化,經(jīng)營(yíng)業(yè)績(jī)穩(wěn)中有升 落實(shí)提質(zhì)增效舉措,毛利潤(rùn)率延續(xù)升勢(shì) 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長(zhǎng) 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競(jìng)爭(zhēng)力 堅(jiān)持高質(zhì)量發(fā)展策略,塑強(qiáng)核心競(jìng)爭(zhēng)優(yōu)勢(shì)...

關(guān)鍵字: 通信 BSP 電信運(yùn)營(yíng)商 數(shù)字經(jīng)濟(jì)

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺(tái)與中國(guó)電影電視技術(shù)學(xué)會(huì)聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會(huì)上宣布正式成立。 活動(dòng)現(xiàn)場(chǎng) NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長(zhǎng)三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會(huì)上,軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司(以下簡(jiǎn)稱(chēng)"軟通動(dòng)力")與長(zhǎng)三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉
關(guān)閉