當前位置:首頁 > 嵌入式 > 嵌入式硬件

0 引 言

  隨著人們對消費類電子產(chǎn)品(如,,等)需求不斷增加,特別是對高質(zhì)量高清晰多媒體的要求越來越高,因此視頻質(zhì)量已經(jīng)成為廣大消費者關(guān)注的焦點之一。在視頻的格式方面,一些國際組織和大公司分別提出了自己的標準,如ISO組織的一2,一4,微軟的WMV等。

  針對公司的PXA27X處理器(這是一個包含 Wireless MMX技術(shù)基于 Xscale的處理器),以XVID 一4為基礎(chǔ),針對MPEG一4在操作系統(tǒng)中實現(xiàn)視頻的編碼要求。在此首先介紹MPEG一4視頻標準,緊接著闡述視頻標準的關(guān)鍵技術(shù)和MPEG一4視頻編碼軟件部分,最后還介紹了優(yōu)化方法和實際平臺的測試。

  l MPEG一4是視頻標準

  MPEG一4視頻部分是MPEG一4標準的核心內(nèi)容之一。既提供傳統(tǒng)的基于幀的編碼方法又提供基于視頻對象(VO)的編碼方法。在某一時刻,視頻對象以視頻對象平面(VOP)的形式出現(xiàn),圖1所示為MPEG一4編碼的框架。編碼也主要針對該時刻視頻對象的形狀、運動和紋理這三類信息來進行。

  2 MPEG一4視頻編碼關(guān)鍵技術(shù)

  MPEG一4視頻基于VOP的編碼就是針對運動信息、形狀信息和紋理信息等3種信息的編碼技術(shù)。

  2.1 形狀編碼

  MPEG一4首次引入形狀信息的編碼。VO的形狀信息有2類:二值形狀信息和灰度形狀信息。二值形狀信息用0,1表示VOP的形狀。二值信息的編碼采用基于塊的運動補償技術(shù),可以無損或有損編碼?;叶刃螤钚畔⒂?~255之間的數(shù)值表示VOP的透明程度。對灰度形狀信息的編碼是分別對二值形狀及像素亮度值進行編碼。目前對灰度形狀信息的編碼主要采用基于塊的運動補償與DCT方法,在不需要形狀信息的應(yīng)用中(譬如基于規(guī)則矩形框幀的視頻編碼),形狀編碼會被屏蔽掉。這部分編碼是以宏塊為單位進行的。

  2.2 運動估計與補償編碼

  類似于現(xiàn)有的編碼標準,MPEG一4采用運動預(yù)測和運動補償技術(shù)來去除圖像信息中的時間冗余成分,這些運動信息的編碼技術(shù)可視為由現(xiàn)有標準向任意形狀的 VOP的延伸。VOP的編碼有3種模式,即幀內(nèi)編碼模式(I—VOP)、幀間預(yù)測編碼模式(P—VOP)和雙向預(yù)測編碼模式(B—VOP)。在MFEG一 4中運動預(yù)測和運動補償可以是基于16×16宏塊的,也可以是基于8×8子塊的。為了能適應(yīng)任意形狀的VOP,MPEG一4引入了圖像填充技術(shù)和多邊形匹配技術(shù)。圖像填充技術(shù)利用VOP內(nèi)部的像素值外推VOP外的像素值,以此獲得運動預(yù)測的參考值。對于標準宏塊,采用傳統(tǒng)的基于塊的運動估計和補償技術(shù)。

  2.3 紋理編碼

  VOP視頻的紋理信息可以表示為亮度成分Y和兩個色度成分Cr,Cb。幀內(nèi)編碼情況下,紋理信息包含有亮度和色度成分;運動補償情況下,紋理信息表示經(jīng)過運動補償后的殘差。紋理編碼的對象可以是幀內(nèi)編碼模式的I—VOP,也可以是幀間預(yù)測編碼模式B—VOP或P—VOP運動補償后的預(yù)測誤差。在幀內(nèi)編碼模式中,對于完全在VOP內(nèi)的像素塊,采用經(jīng)典DCT方法。對于完全位于VOP之外的像素塊則不進行編碼:對于部分在VOP內(nèi),部分在VOP外的像素塊首先采用圖像填充技術(shù)獲得VOP之外的像素值,之后再進行DCT編碼。在幀間編碼模式中,為了對B—VOP和P—VOP運動補償后的預(yù)測誤差進行編碼,將那些位于VOP區(qū)域之外的像素值設(shè)為128。紋理編碼過程如圖1所示,DCT變換、量化、掃描及變長編碼,這些過程與現(xiàn)有標準基本相同。

  3 MPEG一4是視頻編碼軟件

  MPEG一4是軟件編碼是一個比較大的工程,項目用到的主要函數(shù)有:

  mp4_encoder_:初始化編碼的參數(shù),如視頻大小尺寸、碼流、緩沖大??;

  encode_MPEG一4:編碼調(diào)用的總函數(shù),文本是基本層;

  encode_pvop_MPEG一4對P幀的VOP的編碼的總函數(shù);

  ippiBlockMatcn_Imeger_16x16_MVFAST:運動搜索MVFAST(Motion Vector Field AdaDtive Search Technique)。

  下面是幀間宏塊編碼的函數(shù):

  encode_inter_mb_MPEG一4

  (1)lookup_uvmv_MPEG一4:查找色度圖像塊的運動矢量;

  (2)ippiComputeTextureErrorBlock_SAD_8u16s:計算塊殘余的紋理誤差;

  (3)encode__inter_MPEG一4:DCT變化和量化每塊的系數(shù)。這還得反變化,來重構(gòu)下幀的參考幀;

  (4)create_mb_MPEG一4:得到宏塊編碼的信息;

  (5)ippiEncodeMV_MPEG一4_8u16s:運動矢量和紋理殘余的編碼;

  (6)ippiEncodeVLCZigzag_Inter_MPEG一4_16slu:zigzig掃描和變長編碼。

  IPP的函數(shù)合理使用,可以提高性能。如ip—piBlockMatch_InIeger_16x16_MVFAST這個函數(shù)就比ippiMotionEstimation_16x16_MVFAST減少3倍時間。這個函數(shù)是占正個系統(tǒng)最多的時間之一。

  4 MPEG一4是視頻編碼優(yōu)化和結(jié)果

  這里是針對Intel公司的PXA27X處理器,MPEG一4計算量復(fù)雜,特別是運動搜索,必須對其必要的優(yōu)化,以滿足實時編碼的要求。編譯優(yōu)化是靜態(tài)優(yōu)化,優(yōu)化編譯器可以自動完成程序段和代碼塊范圍內(nèi)的優(yōu)化問題,但由于對算法的流程很難獲取,所以人工優(yōu)化是不必可少的??墒褂脙?nèi)聯(lián)函數(shù),Wireless MMX指令編寫,如WLDRD和WMACS,特別在對數(shù)據(jù)處理時,打包指令是必不可少的指令。合理分配指令周期流水線也是重點,如WLDRD需要4個周期,而WUN—PCKEL只需要1個周期,使用IPP庫函數(shù)將大量節(jié)約開發(fā)時間和提高性能等,按照實際的工程的需要編寫指令。當然對算法的本身優(yōu)化也不必可少,如運動搜索,運動補償算法,將這些函數(shù)優(yōu)化運算時間大量減少。還有對數(shù)據(jù)搬移方面,如何有效應(yīng)用硬件資源也將提高運行的性能,如DMA、緩存、寄存器等。

  這里的試驗平臺是南望信息產(chǎn)業(yè)有限公司,主頻可達624 MHz。視頻大小(480×272)透過大量的試驗,測試表明MPEG一4編碼可以滿足用戶拍視頻需求,速度可達到20幀/s,而且有較高的壓縮率,碼流比較低,質(zhì)量也不錯。圖3,4為實際拍攝2幀圖像。

  

  5 結(jié) 語

  針對Intel公司的PXA27X微處理器開發(fā)平臺,在操作系統(tǒng)中實現(xiàn)視頻編碼的功能。但是消費類產(chǎn)品對視頻的畫面有更高的要求,同時由于視頻編碼需要消耗大量的電源,電源的管理仍是視頻開發(fā)的研究重點。

本站聲明: 本文章由作者或相關(guān)機構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內(nèi)容真實性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫毥谦F公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數(shù)字化轉(zhuǎn)型技術(shù)解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關(guān)鍵字: AWS AN BSP 數(shù)字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時1.5...

關(guān)鍵字: 汽車 人工智能 智能驅(qū)動 BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運行,同時企業(yè)卻面臨越來越多業(yè)務(wù)中斷的風險,如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報道,騰訊和網(wǎng)易近期正在縮減他們對日本游戲市場的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機 衛(wèi)星通信

要點: 有效應(yīng)對環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實提質(zhì)增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競爭力 堅持高質(zhì)量發(fā)展策略,塑強核心競爭優(yōu)勢...

關(guān)鍵字: 通信 BSP 電信運營商 數(shù)字經(jīng)濟

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術(shù)學會聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現(xiàn)場 NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會上,軟通動力信息技術(shù)(集團)股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉
關(guān)閉