0 引言
隨著多媒體技術(shù)、網(wǎng)絡(luò)技術(shù)的迅猛發(fā)展和后PC機時代的到來,利用嵌人式系統(tǒng)實現(xiàn)遠程視頻監(jiān)控、可視電話和視頻會議等應(yīng)用已成為可能。為了實現(xiàn)這些應(yīng)用,實時獲得視頻數(shù)據(jù)是一個重要環(huán)節(jié)。針對這一點本文在嵌入式系統(tǒng)平臺上,基于Video4Linux(簡稱V4L)技術(shù),實現(xiàn)了攝像頭驅(qū)動開發(fā),詳細敘述了V4L技術(shù)和攝像頭在Blackfin536 DSP平臺上的Linux驅(qū)動程序設(shè)計。
1 Video4Linux
V4L是Linux的影像串流系統(tǒng)與嵌入式影像系統(tǒng)的基礎(chǔ)。Linux在TV、多媒體上的應(yīng)用是目前相當熱門的研究領(lǐng)域,而其中最關(guān)鍵的技術(shù)則是Linux的V4L。V4L是Linux kernel里支持影像設(shè)備的一組APIs,配合適當?shù)臄z像頭與攝像頭驅(qū)動程序,可以讓我們實現(xiàn)影像采集、AM/FM無線廣播、影像CODEC、頻道切換等功能;而目前最主要的則是應(yīng)用在影像串流系統(tǒng)與嵌入式影像系統(tǒng)里,其應(yīng)用范圍相當廣泛,例如:遠距離教學系統(tǒng)、遠距離診斷系統(tǒng)、視頻會議等。
目前,V4L這套接口已發(fā)展為V4L 2,前者比后者簡單,但存在兩個不足之處:驅(qū)動程序設(shè)計時不能同時打開多個設(shè)備;現(xiàn)存的V4L API不能很好地支持帶編碼能力的設(shè)備。本文為便于研究攝像頭驅(qū)動開發(fā),還是使用V4L。
V4L主要結(jié)構(gòu)體如下:
camera_open,camera_close是打開和關(guān)閉視頻采集設(shè)備;camera_read,是讀取視頻圖像;視頻驅(qū)動主要的控制接口都是通過 ioctl來實現(xiàn)的,如圖像的格式、亮度、色度等信息都是通過ioctl函數(shù)獲取和設(shè)置的。ioctl命令部分如下:
|
V4L支持兩種方式捕獲圖像:mmap(卻嬗成浞絞?和read(直接讀取方式),本系統(tǒng)采用mmap。需預(yù)先設(shè)置好圖像的大小和深度,接著使用 VIDIOCGMBUF命令,它會返回用于mmap的緩存(buffer)的大小以及每幀緩存的偏移地址(offset)。驅(qū)動程序里的映射函數(shù)為 static intbf536_v411_mmap(Struct file*filp,structvm_area_struct*vma);抓幀完成后,在應(yīng)用程序里通過內(nèi)存映射,讀取圖像數(shù)據(jù)。
2 硬件平臺 本系統(tǒng)采用CMOS模擬傳感器,經(jīng)TI公司的TVP5150A視頻解碼芯片把模擬信號轉(zhuǎn)成 ITU-R BT.656視頻信號,再送給ADI公司的Blackfin536 DSP處理器進行圖像處理,如圖1所示。TVP5150向DSP提供采樣時鐘信號CLK(27MHz),8根數(shù)據(jù)線傳輸內(nèi)嵌同步控制碼流的ITU-R BT.656格式的數(shù)據(jù),DSP通過I2C接口對視頻解碼器進行配置。視頻數(shù)據(jù)由DMA搬運到SDRAM。 3 驅(qū)動程序設(shè)計 3.1 驅(qū)動程序核心結(jié)構(gòu)體的介紹 本系統(tǒng)的軟件平臺是嵌入式uclinux,因此,攝像頭作為一個設(shè)備驅(qū)動加載到uclinux內(nèi)核中。一般而言,每個設(shè)備驅(qū)動都會有它的核心結(jié)構(gòu)體,攝像頭驅(qū)動的核心結(jié)構(gòu)體設(shè)計如下:struct camera device 該結(jié)構(gòu)體儲存了幾乎全部與攝像頭視頻圖像相關(guān)的信息。其中的結(jié)構(gòu)體videoDev和videoV4l1是與V4L相關(guān)聯(lián)的,ppiDev是與ADSP- BF537處理器硬件配置相關(guān)的,而frame[CAMERA_NUMFRAMES]則與采集時當前視頻幀數(shù)據(jù)相關(guān)聯(lián)。此外,camera_device 該核心結(jié)構(gòu)體還定義了表示奇偶場的成員變量frame_field,表示當前幀的抓取狀態(tài)的成員變量grabbing等。 3.2 硬件配置 本系統(tǒng)在開發(fā)過程中,最主要的難點在于硬件的配置,正確配置TVP5150、PPI、DMA需要搞清楚整個攝像頭的工作原理,以及各種圖像格式的基本知識。本文主要給出PPI和DMA的幾個關(guān)鍵配置選項。 3.2.1 PPI配置 TVP5150A視頻解碼芯片把模擬信號轉(zhuǎn)換成ITu-RBT.656視頻信號,ITU-R BT.656是4:2:2并行接口的數(shù)字演播室標準。對于PAL制系統(tǒng)(NTSC系統(tǒng)類似),一幀圖像包括兩場視頻數(shù)據(jù)(奇偶場),每一場圖像由四部分構(gòu)成:有效視頻數(shù)據(jù),水平消隱,垂直消隱以及控制字。而PPI接口在ITU-656輸入模式下可以支持3種數(shù)據(jù)傳輸,若選擇有效視頻數(shù)據(jù),則可以實現(xiàn)PPI 與TVP5150A解碼器的無縫連接。且傳輸?shù)挠行б曨l數(shù)據(jù)就是UYVY422格式,所以配置PPI控制寄存器為ITu-656輸入、傳輸有效視頻數(shù)據(jù)。 PPI傳輸?shù)挠行б曨l數(shù)據(jù)每場都由288行組成,每行有1440個取樣字,其中720個亮度Y取樣字,360個藍色色差Cb,360個紅色色差Cr,按 Cb、Y、Cr、Y的次序排列。而UYVY422格式數(shù)據(jù)是:每個像素點都取亮度值,而藍色色差和紅色色差是每兩個像素點才各取一個,兩者交替取,所以圖像像素是720×576。這樣可以確定ppi frame=576(整幅圖像的行數(shù))。而ppi count不用配置,因為在ITU-R BT.656視頻信號中有H和V信號。 3.2.2 DMA配置 本系統(tǒng)采用二維DMA來提高數(shù)據(jù)的傳輸速度,采用16位傳輸,且傳輸完一場視頻數(shù)據(jù)后產(chǎn)生中斷。dma_x_count=720(相當于每行數(shù)據(jù)需傳輸?shù)拇螖?shù),每行720個像素點,每個像素點2個字節(jié)。每行要傳720×2個字節(jié),而dma是16位傳輸,所以x_count=720)。 dma_x_modify=2(相鄰兩次傳輸數(shù)據(jù)的偏移地址,以字節(jié)為單位,因為是16位傳輸,所以為2)。 由于PAL制視頻數(shù)據(jù)是隔行掃描,每幀分為奇偶兩場,兩場在時域上是分開的,但是在數(shù)據(jù)處理時需要將兩場合成一幀進行處理,因此為了減少CPU的處理時間,可以利用DMA直接進行場合成。在一場的傳輸中,DMA在傳輸完一行數(shù)據(jù)后,預(yù)留下一行的存儲空間,將數(shù)據(jù)存放到第三行的地址。在一場數(shù)據(jù)傳輸完后,下一場的數(shù)據(jù)就填充上一場預(yù)留的存儲空間,也是隔行存儲,這樣兩場數(shù)據(jù)就合成一幀數(shù)據(jù)了。所以,dma_y_modify=1442(一行720像素點,占720×2字節(jié)。而一行末地址到下一行首地址還需2字節(jié)。所以720×2+2=1442)。同時,兩場數(shù)據(jù)存放的起始地址的設(shè)置間隔也是1442字節(jié)。 3.3 中斷服務(wù)子程序 本系統(tǒng)的中斷服務(wù)子程序主要是一場數(shù)據(jù)采集完后,產(chǎn)生中斷,并根據(jù)數(shù)據(jù)的奇偶場做出相應(yīng)的處理。其流程如圖2所示。 4 結(jié)束語 本文介紹了在Blackfin DSP和Linux的平臺下,攝像頭驅(qū)動的體系結(jié)構(gòu)和具體實現(xiàn)。此驅(qū)動由測試程序測試,可以正常工作。此驅(qū)動尚存在不足之處,那就是在驅(qū)動的抓幀過程中沒有采用乒乓操作,但是采用了兩個幀緩存來存取數(shù)據(jù),因此乒乓操作可以在上層應(yīng)用中完成。
|