《電子技術應用》
您所在的位置:首頁 > 模擬設計 > 設計應用 > 嵌入式系統(tǒng)視頻圖像捕獲研究
嵌入式系統(tǒng)視頻圖像捕獲研究
摘要: 本文論述了嵌入式系統(tǒng)相關理論,、嵌入式Linux的基本概念,,主要闡述了采用嵌入式Linux進行視頻圖像數(shù)據(jù)的捕獲、存儲、顯示等,。采用的關鍵技術包括 V4L,、framebuffer,、數(shù)字圖像格式變換等,,提出了圖像數(shù)據(jù)格式的變換方法。同時闡述了具體的實現(xiàn)方法,。
Abstract:
Key words :

本文論述了嵌入式系統(tǒng)相關理論,、嵌入式Linux的基本概念,主要闡述了采用嵌入式Linux進行視頻圖像數(shù)據(jù)的捕獲,、存儲,、顯示等。采用的關鍵技術包括 V4L,、framebuffer,、數(shù)字圖像格式變換等,提出了圖像數(shù)據(jù)格式的變換方法,。同時闡述了具體的實現(xiàn)方法,。

       1 嵌入式系統(tǒng)簡介

      嵌入式系統(tǒng)(Embedded System)是指以應用為中心、以計算機技術為基礎,、軟件硬件可裁剪,、適應應用系統(tǒng)對功能、可靠性,、成本,、體積、功耗嚴格要求的專用計算機系統(tǒng),。根據(jù)IEEE(國際電氣和電子工程師協(xié)會)的定義,,嵌入式系統(tǒng)是“控制、監(jiān)視或者輔助設備,、機器和車間運行的裝置”,這個定義主要是從應用的角度進行定義的,。[1]嵌入式系統(tǒng)的操作系統(tǒng)和功能軟件集成于計算機硬件系統(tǒng)之中,,也就是軟件與硬件的一體化。嵌入式系統(tǒng)目的性或針對性很強,,一般要求較高的實時性,、穩(wěn)定性。

      2  嵌入式Linux操作系統(tǒng)

      嵌入式Linux是Linux操作系統(tǒng)的一個分支,。主要是對通常的Linux進行裁減,。最關鍵的是要進行實時化處理,。在實時性要求不是太高的環(huán)境下采用Linux具有很多優(yōu)勢。使用嵌入式Linux技術開發(fā)嵌入式設備的最大方便是使開發(fā)工作從硬件與匯編程序轉(zhuǎn)移到應用軟件上來,。[2]嵌入式Linux系統(tǒng)架構包括三層:應用程序,、系統(tǒng)共享庫和Linux內(nèi)核。現(xiàn)有各種開源的Linux版本,,包括支持沒有內(nèi)存管理單元的CPU的uCLinux,、實時性非常好的RTAI、QLinux等,。[3]本文所采用的開發(fā)的系統(tǒng)是進行圖像的實時捕獲,。由于實時性要求不高,同時考慮到Linux下使用V4L開發(fā)視頻程序具有很大的優(yōu)越性,,所以采用嵌入式Linux作為開發(fā)環(huán)境,。芯片主要采用三星公司生產(chǎn)的ARM2410, 開發(fā)板采用北京博創(chuàng)公司的板卡。

      3  采用V4L進行數(shù)據(jù)采集

      3.1 采用V4L進行圖像數(shù)據(jù)采集

       V4L是Linux下提供的一套設備驅(qū)動程序文件API,,用于開發(fā)視頻(Video),、音頻(Audio)等領域的應用程序。由于在Linux下設備都作為一個文件進行處理,。所以可以通過打開相應的設備文件來獲取設備的信息,。由于本文是進行視頻程序的開發(fā),所以僅講述有關視頻相關的部分,。

      視頻設備文件一般情況下在/dev/videox,。其中x可以為0~63之間的整數(shù)。一般情況下為/deev/video0,。當在開發(fā)板上通過USB接口將攝像頭接入后,。在程序中對文件video0進行讀的操作就是對攝像頭的操作。

      在使用V4L之前首先需要將頭文件videodev.h引入,,如,。相應的API文檔在/usr /src/linux-2.4/Documentation/video4linux/API.html下。同時在為了同相關的設備進行通信,,需要一些結(jié)構體,、變量和函數(shù),所以需要包含其他的相關文件,。如,、

      ,、 ,、 等,。攝像頭,、V4L、設備驅(qū)動程序,、嵌入式Linux操作系統(tǒng)的關系用圖1表示如下,。

        

                                       圖1

        具體的圖像數(shù)據(jù)的捕獲過程為:打開設備文件、查詢和確認設備性能,、設置捕獲的圖像的寬和高,、設置色深、建立內(nèi)存映射(后文闡述),、讀取圖像數(shù)據(jù),、關閉設備。[4]

        具體的這個過程由于篇幅關系本文將不做具體闡述,,讀者可以查閱本文的參考文獻3,。在上述的過程中主要考慮的問題是內(nèi)存的映射問題。為了讀取數(shù)據(jù)首先需要將顯示設備的地址映射到系統(tǒng)地址上來,,這需要調(diào)用函數(shù)mmap(),。該函數(shù)返回的地址就是存放圖像數(shù)據(jù)的地址。每一幀圖像都偏移固定的長度,。而攝像頭取得圖像會包含若干幀,。這樣通過周而復始的進行就可以將圖像數(shù)據(jù)捕獲下來。具體過程和涉及到的函數(shù)如下所示:

        打開設備文件: int  device = open ("/dev/v4l/video0", O_RDWR);

        內(nèi)存映射:char* memoryMap = (char*)mmap (0, memoryBuffer.size, PROT_READ | PROT_WRITE, MAP_SHARED, device, 0);

        圖像數(shù)據(jù)memoryMap + memoryBuffer.offsets[bufferIndex]
      

                          圖23.2圖像格式的轉(zhuǎn)換,。

 

       通過上文所述取得圖像數(shù)據(jù)后,,實際就是一塊地址。這時就可以進行各種圖像處理或圖像識別,。問題的關鍵是圖像數(shù)據(jù)是如何放置的,。一般情況下,在計算機中一個像素點是由R,、G,、B三種顏色表示的。當然還存在其它的模式如PAL等,。但大多數(shù)為RGB模式,。即使是RGB模式也存在很多種情況,如每一個像素由8個bit組成,,這時R,、G、B三種顏色的位數(shù)分別3,、3、2。如果每一個像素由12個bit組成,,則R,、G、B三種顏色的位數(shù)分別4,、4,、4。如果每一個像素由16個bit組成,,則R,、G、B三種顏色的位數(shù)存在兩種情況分別5,、5,、5,最高位舍棄,,另一種情況為5,、6、5,。最容易處理,、同時也是最常見的是24個bit組成的,這時R,、G,、B三種顏色的位數(shù)分別8、8,、8,。

       在各種圖像處理的程序中往往需要在兩種格式之間轉(zhuǎn)換。由于在筆者所采用的設備中,,采集到的圖像為24位,,而顯示設備為12位,這就需要在兩種格式之間轉(zhuǎn)換,。至于怎樣將圖像數(shù)據(jù)顯示到屏幕上在后文中闡述,,下面將主要闡述如何在24位和12位之間轉(zhuǎn)換。整個過程如圖3所示,。          

 

         圖3

       首先需要明確計算機中處理的數(shù)據(jù)是8位為基本單位的,。所以,一個像素12位的圖象格式可以通過兩個像素24位為基本單位進行描述,。其次,,應該明確的是在從 8位數(shù)據(jù)到4位數(shù)據(jù)的轉(zhuǎn)換中取得8位數(shù)據(jù)中的高4位,frame[index*3]&0xF0),;然后再取得下一個8位的高4位,;左移4位和前面的數(shù)據(jù)取并,frame[index*3]&0xF0)|((frame[index*3+1]&0xF0)>>4。實現(xiàn)的代碼如下:

*(fbp) = (frame[index*3]&0xF0)|((frame[index*3+1]&0xF0)>>4);

                     *(fbp +1) = (frame[index*3+2]&0xF0)|(frame[(index+1)*3]&0xF0>>4);

            *(fbp+2) = (frame[(index+1)*3+1]&0xF0)|(frame[(index+1)*3+2]&0xF0>>4);

       在這段代碼中*(fbp),、*(fbp +1),、*(fbp+2)這三個8位實際上兩個像素的圖像數(shù)據(jù)。這就實現(xiàn)了24位的圖像數(shù)據(jù)到12位的圖像數(shù)據(jù)的轉(zhuǎn)換,。

       4應用framebuffer進行圖像的顯示

       為了將程序中圖像數(shù)據(jù)顯示在設備的液晶屏幕上,需要讀出現(xiàn)實設備的地址并將其映射到系統(tǒng)內(nèi)存空間上,,然后再將圖像數(shù)據(jù)寫到映射后的地址空間上。[5]

        首先需要計算出屏幕內(nèi)存空間的字節(jié)數(shù),,計算公式為: 

  屏幕內(nèi)存空間的字節(jié)數(shù)=像素的個數(shù)╳每個像素占用的字節(jié)

其中像素的個數(shù)是行和列的乘積,,而行和列的數(shù)值以及每個像素占用的字節(jié)數(shù)值可以通過函數(shù)ioctl()取得或設置。下述代碼為打開framebuffer,,讀取屏幕的可設置信息,,并計算屏幕內(nèi)存空間的字節(jié)數(shù)的過程。

struct fb_var_screeninfo vinfo;

int FraBuf= open("/dev/0", O_RDWR);

ioctl(fbfd, FBIOGET_VSCREENINFO, &vinfo);

long int screensize = vinfo.xres * vinfo.yres* vinfo.bits_per_pixel;

       取得屏幕的大小后,,將打開的設備FraBuf得到的內(nèi)存空間映射到系統(tǒng)中,,如下所示,

char *fbp fbp = (char *)mmap(0, screensize, PROT_READ | PROT_WRITE, MAP_SHARED,fbfd, 0);

      然后將前文得到的數(shù)據(jù)賦值即可,。上面的函數(shù)的具體意義,,讀者可以參看相關技術文檔,限于篇幅本文沒有闡述,。這個過程和前文所述的捕獲過程是相反的過程,。5簡單字符的屏幕顯示技術

 

        在數(shù)字圖像處理過程中,為了將處理后結(jié)果或數(shù)字顯示出來,,可以在屏幕上開個區(qū)域進行顯示,。如若字體較多需要字庫,如果僅僅是簡單的數(shù)字可以采用像素描繪的方法,。本文作者就是采用后者輸出了數(shù)字,。如數(shù)字“1”的描繪程序如下:

x=160;

for ( y = 210; y < 230; y++ ) {

location = (x+vinfo.xoffset) * (vinfo.bits_per_pixel/8) +y+vinfo.yoffset) * finfo.line_length;

     *(fbp + location) = 10;

     *(fbp + location + 1) =10;

     *(fbp + location + 2) =10;

}

      其中x、y為屏幕的位置,,而fbp就是前文打開的設備,。

       6 結(jié)束語

       本文采用的設備是基于SAMSUNG公司的ARM9芯片S3C2410,由于篇幅的限制本文沒有具體闡述整個系統(tǒng),集中闡述了視頻圖像數(shù)據(jù)的捕獲和顯示,,在這一過程中存在許多細節(jié)問題,,限于篇幅沒有闡述。

此內(nèi)容為AET網(wǎng)站原創(chuàng),,未經(jīng)授權禁止轉(zhuǎn)載,。