《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 基于Android的MJPEG網絡攝像機設計
基于Android的MJPEG網絡攝像機設計
單片機與嵌入式系統,重慶郵電大學
陳家佳,姚俊
摘要: 針對智能家居場景需求,設計了基于ARM9處理器Linux操作系統的網絡攝像機。深入研究了MJPEG視頻壓縮算法,闡述了算法實現過程,并設計出基于Android操作系統的3G手機網絡攝像機客戶端軟件。本系統通過實地安裝與測試達到了預期效果,突破了傳統網絡攝像機客戶端固定地域的限制,有良好的應用前景。
Abstract:
Key words :

1 系統硬件組成與網絡架構
攝像機硬件核心采用三星公司推出的基于ARM9架構的S3C2440A芯片,該處理器主頻達到400 MHz可以滿足實時壓縮,MJPEG視頻流可以達到320×240分辨率25 fps的性能要求。外圍搭配64 MB SDRAM、256 MBNAND Flash,網絡功能由DM9000以太網MAC控制芯片負責,攝像頭模塊由USB控制器控制,系統供電由3片LM71117組成,分別輸出3.3 V、1.8 V、1.25 V電壓,輔助外圍接口構成攝像機硬件結構。S3C2440A系統硬件框圖如圖1所示。

c.JPG


網絡攝像機是互聯網上的TCP/IP設備,系統網絡拓撲圖如圖2所示。其中在家庭區域內根據安防的特點在大門走廊、客廳內、陽臺區域分別布置攝像機,再由網線連接到路由器,配置路由器參數映射每個攝像機獨立端口與IP地址,即完成Internet接入。遠端由固定位置的PC機,移動位置的3G筆記本和隨身攜帶的3G Android手機組成,PC機可以通過WEB瀏覽器訪問與控制網絡攝像機,Android手機通過客戶端實現實時訪問。

c.JPG

2 系統軟件設計
2.1 網絡攝像機軟件設計
搭建攝像機需要Linux系統環境,首先移植Bootloader,對Linux 2.6.32內核進行裁剪,加載Linux UVC(USB video device class)驅動及相關驅動,將編譯好的Linux系統鏡像燒寫到ARM板Nand Flash中,對Bootloader沒置啟動引導地址,即完成軟件運行環境搭建。
分析網絡攝像機性能需求與拓展性,須滿足下列條件:
視頻監控實時性;
支持多客戶端同時連接;
圖像識別算法或預留接口;
功能模塊化滿足后期開發可擴展。
因此,采用多線程架構與互斥鎖機制來保證實時性、模塊化的思想設計代碼結構。軟件程序主流程如圖3所示。

d.JPG


其中主要實現如下功能。
①初始化Linux V4L2接口,必須按照V4L2標準結構初始化結構體,其中包括struct v412_capability cap;struct v412_format fmt;struct v412_buffer buf;struct v412_requestbuffers rb;struct v412_streamparm setfps。此外將視頻設備名、視頻寬度、視頻高度、幀率、視頻格式和抓取方法傳遞給函數init_videoIn(struct vdIn*vd,char*device,int width,intheight,int fps,int format,int grabmethod)實現初始化。值得注意的是眾多USB camera并不支持JPEG格式視頻流直接抓取,針對YUYV格式抓取卻有廣泛支持。后期進行圖像識別算法操作時直接分析YUYV原始圖像數據,將節省JPEG壓縮數據轉換為原始圖像數據的大量運算開銷,因此采用YUYV抓取模式。
②創建核心圖像處理線程。在該線程內實現:抓取功能。
UVC設備單幀抓取,uvcGrab(struct vdIn*vd)函數實現單幀YUYV格式的原始圖像拷貝到內存,采用高效的mmap內存映射方法讀??;
JPEG核心算法實現,JPEG壓縮算法占用大量CPU時間,下一小節將詳細討論。
③創建套接字接口。為實現多用戶同時連接網絡攝像機,必須采用socket服務線程,每當有新用戶連接同時產生一個新線程與之對應,實現多用戶端同步監控。
④搭建基于Web瀏覽器訪問方式的Web主頁。嵌入式設備資源有限,輕量級的Web Server主要有:Boa、Httpd、Thttpd等。本設計選用開源的Boa、交叉編譯Boa源碼配置boa.conf文件,配置系統etc自啟動shell加入Boa程序,將編寫HTML頁面文件放入系統中對應的www目錄后即可正常工作。
2.2 MJPEG壓縮算法研究與實現
MJPEG(Motion Joint Photographic Experts Group)視頻編碼格式,把運動的視頻序列作為連續的靜止圖像來處理,這種壓縮方式單獨完整地壓縮每一幀,編輯過程中可隨機存儲每一幀,可進行精確到幀的編輯。MJPEG單幀壓縮算法為JPEG(Joint Photographic Experts Group)。人眼視覺生理特性決定眼睛對構成圖像的不同頻率成分具有不同的敏感度。JPEG壓縮是有損壓縮,但損失的部分是人類視覺不容易察覺到的部分,利用眼睛對色彩域中的高頻信息部分不敏感的特點,節省大量需要處理的數據信息。一幀原始圖像數據對其進行JPEG算法編碼過程分兩大部分:
①空間冗余度,去除視覺上的多余信息;
②結構(靜態)冗余度,去除數據本身的多余信息。
JPEG編碼中主要涉及包括:DCT、zigzag編碼、量化、RLE編碼、范式Huffman編碼、DC(直流分量)的編碼。JPEG編碼流程如圖4所示。

e.JPG

DCT(Discrete Cosine Transform)變換,又稱離散余弦變換是可逆的、離散的正交變換。它將原始圖像色彩空問域轉換為頻譜域。由于相鄰兩點像素色彩很多是接近的,壓縮這些不需要的數據必須利用圖像信號的頻譜特性。JPEG壓縮原理的理論依據是圖像信號頻譜線大都分布在0~6 MHz范圍內,而且一幅圖像內大多數為低頻頻譜線,而高頻的譜線只占圖像比例很低的圖像邊緣或者細微紋理細節的信號時才出現。根據這一特性,在做數字圖像處理時對包含信息量大的低頻譜區域分配較多的比特數,相反的對于包含信息量低的高頻譜區域分配較少的比特數,達到圖像壓縮的目的,而圖像質量并沒有肉眼可察覺的降低。除了DCT變換,常用的變化算法還有:Walsh-Hadamard沃爾什哈達瑪變換、哈爾變換、傅氏變換等。
DCT變換公式為:
f.JPG
當u=v≠0時C(u)=1,C(v)=1。f(i,j)經過DCT變換之后,F(0,0)是直流系數,其他參數時為交流系數。經過DCT變換后一幅圖像的DCT系數塊集中在8×8矩陣的左上方,這里直流DC系數幅度最大,這一矩陣區域集中了圖像的大部分低頻頻譜分量,離矩陣左上角越遠的高頻頻譜幾乎不含圖像信息。變換過程本身雖然并不產生壓縮作用,但是變換后的頻率系數卻非常有利于碼率壓縮。
量化是對DCT系數的一個優化過程,利用了肉眼的高頻不敏感特性對數據進行大幅壓縮。整個過程是簡易的把頻率域的每個成份除以對應的常數,并對結果四舍五入取整,整個流程的目的是減少非零的系數以及增加零值系數數目。量化是有損運算,是圖像質量下降的主要因素。對于人眼對亮度與色差的敏感性不一致,分別使用亮度量化表與色度量化表。對量化后的數據采用zigzag蛇形編碼,這是因為交流分量中含有大量的零值,zigzag編碼可以產生更多連續的零值,對下一步使用行程編碼非常有利。
行程編碼(Run Length Coding)是一種根據相同數據連續重復多次的情況簡化表示的算法。例如,5555333333999按照行程編碼表示為(5,4)(3,6)(9,3)可以對數據,尤其是大量的零值壓縮數據長度。
編碼后的數據還須通過Huffman編碼來壓縮,Huffman編碼的最大特點是使出現頻率較高的數字小于8位,而出現頻率低的數字大于8位,這使得數據大幅壓縮。
到此數據的壓縮過程結束,對壓縮后的數據按照JPEG文件格式要求進行保存,加上文件開始標記Start Of Image=FFD8,文件結束標記End Of Image =FFD9,量化表標記Deftne Quanttzation Table=FFDB,霍夫曼編碼表標記Ddfine Huffman Table=FFC4,幀開始標記Star Of Frame=FFC0等標記,再加上圖片識別信息字節標記就最終形成完整的可用于傳輸或存儲的JPEG幀圖像,通過套接字接口不間斷地發送JPEG圖像即形成MJPEG視頻流。
為提高CPU效率,減少進程間切換產生的開銷,將壓縮算法函數集成到單一線程里。JPEG核心壓縮編碼函數MCUcode實現如下:
g.JPG
其中Y1、Y2、Y3、Y4對應水平排列的4像素亮度值,CB、CR是水平排列以2像素為1單位像素的色度值。

3 Android客戶端設計
Android是Google公司推出的針對移動設備的操作系統,底層采用Linux內核,應用程序采用類Java語言編寫,并運行于類JVM虛擬機的Dalvik虛擬機之上。該系統具有開放源碼免費授權的優勢,功能完善和成熟,已獲得廠商的廣泛支持和大量市場份額。eclipse IDE開發環境友善,因此選用Android系統作為物聯網攝像機客戶端開發平臺。

Android程序一般由多個Activity、Intent、Content Provider、Service等程序框架組成,其中最基礎的是Activity活動類,該類相當于軟件運行時的一個頁面,在頁面之上可添加各種控件,如button按鍵、ImageView圖片、Text boxes、Lists列表等。除此以外還負責監聽系統事件,負責啟動其他的Activity類。在多個Activity類之間跳轉就需要用到Intent類,Intent類有兩個重要部分:動作和動作對應的數據。常用的動作有MAIN、VIEW、PICK、EDIT等,動作數據則以URI形式表示。通過Intent類還能傳遞參數,作用類似鏈條串起Activity類,Activity類跳轉圖如圖5所示。

h.JPG


解析視頻流須先由網絡獲取數據流,實現的方法代碼如下:
i.JPG
需要注意的是,在AndroidManifest.xml文件中需加上</  uses-permission>語句,表示程序擁有網絡的完整訪問權限。獲取每幀數據后繼承AndroidSDK中提供的viewr.SurfaceView類與graphic s.Canvas類,將收到的完整幀圖像按隊列順序不間斷地顯示在視窗框架類中,對人眼視覺幀率超過5 fps時即有視頻效果,到25 fps即是電影流暢度。對丁定點定位監控,經過測試出于節省帶寬費用考慮設定5 fps即能滿足基本需求,10 fps是較為合理參數。將編譯后應用程序安裝到手機中,Android實時監控截圖如圖6所示。

b.JPG



結語
本文描述了網絡攝像機的軟件設計與MJPEG算法原理,結合Android移動技術,開發了整套系統;并實際應用于驗證系統,取得了良好結果。期望在后續工作中涉足圖像識別算法、物體追蹤算法、人體行為偵測算法等圖像領域,使網絡攝像機變得更智能。

此內容為AET網站原創,未經授權禁止轉載。
热re99久久精品国产66热_欧美小视频在线观看_日韩成人激情影院_庆余年2免费日韩剧观看大牛_91久久久久久国产精品_国产原创欧美精品_美女999久久久精品视频_欧美大成色www永久网站婷_国产色婷婷国产综合在线理论片a_国产精品电影在线观看_日韩精品视频在线观看网址_97在线观看免费_性欧美亚洲xxxx乳在线观看_久久精品美女视频网站_777国产偷窥盗摄精品视频_在线日韩第一页
  • <strike id="ygamy"></strike>
  • 
    
      • <del id="ygamy"></del>
        <tfoot id="ygamy"></tfoot>
          <strike id="ygamy"></strike>
          免费不卡在线视频| 国产精品丝袜久久久久久app| 在线亚洲一区二区| 亚洲欧美日韩综合aⅴ视频| 国产精品一区二区在线观看| 国产一区视频观看| 国精品一区二区三区| av成人毛片| 亚洲在线播放电影| 亚洲视频精选在线| 久久天天躁夜夜躁狠狠躁2022| 制服丝袜亚洲播放| 国产一区二区三区黄视频| 亚洲人成网站在线观看播放| 欧美日韩免费观看一区三区| 亚洲男人的天堂在线| 国产精品第三页| 欧美一区1区三区3区公司| 99国产精品国产精品久久| 亚洲人成绝费网站色www| 亚洲视频一二| 男人插女人欧美| 欧美精品偷拍| 欧美日韩dvd在线观看| 99re热这里只有精品视频| 亚洲缚视频在线观看| 久久久国产精品亚洲一区| 亚洲精品久久久蜜桃| 亚洲清纯自拍| 国内成人精品视频| 亚洲美女视频网| 欧美乱大交xxxxx| 国产精品中文字幕在线观看| 亚洲无吗在线| 欧美日韩成人一区二区| 激情视频一区二区三区| 亚洲国产专区| 欧美黄色一级视频| 国产精品一区二区久久精品| 国产精品video| 国产精品一区二区你懂得| 国产精品久久久亚洲一区| 欧美日韩国产美女| 日韩写真视频在线观看| 久久偷看各类wc女厕嘘嘘偷窃| 亚洲美女中文字幕| aⅴ色国产欧美| 久久网站热最新地址| 国产综合欧美| 国产日韩视频一区二区三区| 99热在这里有精品免费| 欧美午夜不卡影院在线观看完整版免费| 欧美无砖砖区免费| 久久久久成人网| 亚洲区一区二| 亚洲娇小video精品| 亚洲高清免费视频| 亚洲图片你懂的| 亚洲午夜精品在线| 99热精品在线观看| 欧美日韩国产一级片| 麻豆国产精品va在线观看不卡| 狠狠色狠狠色综合日日小说| 在线观看亚洲视频啊啊啊啊| 亚洲欧美日韩第一区| 狠狠久久综合婷婷不卡| 午夜性色一区二区三区免费视频| 亚洲精品1区| 国产精品无人区| 欧美精品福利| 性欧美xxxx大乳国产app| 欧美精品aa| 欧美激情亚洲自拍| 久久精品成人欧美大片古装| 亚洲六月丁香色婷婷综合久久| 制服丝袜亚洲播放| 亚洲男人的天堂在线aⅴ视频| 久久久久一区二区三区四区| 国产精品自在线| 性欧美1819性猛交| 麻豆成人在线| 免费观看日韩| 欧美日韩亚洲一区二| 国产欧美一级| 欧美一区二区三区视频| 亚洲免费高清视频| 国产精品日日摸夜夜添夜夜av| 欧美刺激性大交免费视频| 蜜桃久久av一区| 欧美二区视频| 欧美黑人多人双交| 久久久久国色av免费看影院| 欧美韩日一区二区三区| 一色屋精品视频在线观看网站| 免费观看欧美在线视频的网站| 欧美国产亚洲视频| 国产亚洲欧美日韩精品| 久久亚洲图片| 欧美激情1区2区3区| 国产精品三区www17con| 亚洲国产日韩欧美在线动漫| 久久亚洲春色中文字幕| 亚洲欧美精品suv| 99亚洲伊人久久精品影院红桃| 欧美另类专区| 亚洲一区二区三区在线播放| 国产在线麻豆精品观看| 欧美国产精品一区| 国产农村妇女精品一区二区| 欧美激情综合色综合啪啪| 麻豆久久精品| 99视频在线精品国自产拍免费观看| 亚洲国产aⅴ天堂久久| 欧美日韩在线视频一区二区| 国产精品日韩欧美大师| 久久精品国产亚洲精品| 午夜影院日韩| 葵司免费一区二区三区四区五区| 在线观看成人小视频| 国产专区欧美专区| 欧美日韩一区高清| 亚洲一区二区三区免费观看| 国产一区二区在线观看免费播放| 欧美日韩18| 亚洲欧洲视频| 国产嫩草一区二区三区在线观看| 国产精品海角社区在线观看| 欧美日韩在线播放| 男人的天堂成人在线| 女生裸体视频一区二区三区| 久久精品女人的天堂av| 夜夜夜精品看看| 亚洲欧洲一区二区三区在线观看| 国产日韩欧美高清免费| 欧美日韩伊人| 99xxxx成人网| 欧美有码在线观看视频| 国产午夜精品久久久| 亚洲午夜性刺激影院| 久久av一区二区| 亚洲日本va午夜在线影院| 欧美人妖在线观看| 蜜乳av另类精品一区二区| 国产日韩欧美电影在线观看| 99视频有精品| 蜜桃精品一区二区三区| 亚洲午夜高清视频| 久久国产日韩| 久久久久久久一区二区三区| 在线中文字幕日韩| 亚洲制服丝袜在线| 国产精品欧美精品| 欧美精品免费在线观看| 开元免费观看欧美电视剧网站| 久久久福利视频| 欧美在线一二三四区| 欧美成人性网| 国产农村妇女毛片精品久久莱园子| 国产精品日韩一区二区| 欧美阿v一级看视频| 在线视频国内自拍亚洲视频| 国产精品日本一区二区| 久久婷婷久久| 欧美三级资源在线| 国产精品国产三级欧美二区| 欧美性事免费在线观看| 久久中文久久字幕| 欧美激情国产日韩精品一区18| 欧美在线一级视频| 久久综合成人精品亚洲另类欧美| 在线视频亚洲| 永久免费精品影视网站| 久久九九99| 国产精品swag| 欧美日韩成人一区二区三区| 国产精品日韩| 欧美日韩黄色一区二区| 午夜在线a亚洲v天堂网2018| 国内伊人久久久久久网站视频| 欧美激情一区二区三区高清视频| 午夜在线一区二区| 久久精品国产亚洲a| 噜噜噜躁狠狠躁狠狠精品视频| 久久免费高清| 久久精品国产2020观看福利| 精品99一区二区三区| 国产女人aaa级久久久级| 久久视频这里只有精品| 国产精品国产三级国产a| 欧美亚州在线观看| 欧美日韩黄色大片| 欧美性一二三区| 国产色爱av资源综合区| 国产精品极品美女粉嫩高清在线| 亚洲一区三区视频在线观看| 国产乱码精品一区二区三区不卡| 国产精品av免费在线观看| 亚洲毛片在线观看| 亚洲国产欧美一区二区三区久久| 久久久久国内| 麻豆成人精品| 欧美久久久久免费| 国产精品免费电影| 国产在线观看91精品一区| 亚洲一区二区三区精品在线观看| 欧美日韩亚洲高清| 国产精品美腿一区在线看| 国产欧美一区二区精品性色| 欧美成人免费在线视频| 激情小说另类小说亚洲欧美| 国产午夜精品全部视频播放| 国产精品theporn88| 欧美成人中文字幕| 欧美电影电视剧在线观看| 99精品福利视频| 亚洲午夜电影在线观看| 一本色道久久综合亚洲精品婷婷| 一区二区视频欧美| 亚洲一区二区三区免费在线观看| 国产精品久久毛片a| 久久久国产精品一区二区三区| 在线观看免费视频综合| 国产麻豆日韩| 两个人的视频www国产精品| 亚洲欧美日韩直播| 欧美日韩在线免费观看| 一区二区三区精品在线| 国产中文一区| 国产精品都在这里| 一本色道久久综合一区| 国产精品乱码人人做人人爱| 国产精品国码视频| 久久在精品线影院精品国产| 久久久久成人精品| 亚洲日本免费| 女人香蕉久久**毛片精品| 欧美天堂亚洲电影院在线观看| 国产精品日韩久久久久| 亚洲理论在线观看| 国产精品wwwwww| 久久久久久97三级| 一区二区三区你懂的| 99精品视频一区| 国产精品视频专区| 亚洲欧美欧美一区二区三区| 久久久久久久激情视频| 欧美日韩免费高清一区色橹橹| 一区二区欧美日韩| 久久激情视频久久| 亚洲午夜精品久久久久久浪潮| 国产精品老牛| 亚洲精品欧美极品| 亚洲少妇中出一区| 正在播放欧美一区| 国产主播精品在线| 一区二区冒白浆视频| 国产一区二区中文字幕免费看| 欧美午夜精品久久久久久久| 国产偷自视频区视频一区二区| 韩国v欧美v日本v亚洲v| 欧美在线3区| 欧美日韩一区三区| 国产日韩久久| 国内精品美女av在线播放| 欧美精品二区| 免费在线一区二区| 有码中文亚洲精品| 国产色婷婷国产综合在线理论片a| 欧美精品一区在线| 国产精品xvideos88| 亚洲视频 欧洲视频| 免费观看成人鲁鲁鲁鲁鲁视频| 国产欧美日本一区二区三区| 亚洲精品国产精品乱码不99按摩| 曰韩精品一区二区| 久久久久欧美精品| 国产精品久久亚洲7777| 国模 一区 二区 三区| 老司机一区二区三区| 欧美日韩不卡一区| 欧美在线一二三区| 日韩一区二区免费看| 久久福利视频导航| 欧美视频专区一二在线观看| 亚洲国产精品专区久久| 91久久久一线二线三线品牌| 国产精品成人aaaaa网站| 亚洲激情视频网站| **网站欧美大片在线观看| 欧美日韩综合网| 久久亚洲欧洲| 久久久久久国产精品mv| 国产精品久久一卡二卡| 欧美精品久久久久久久免费观看| 欧美一二三区在线观看| 国产一区久久| 久久成人av少妇免费| 日韩一级视频免费观看在线| 亚洲图片自拍偷拍| 国产日韩欧美中文| 国产精品亚洲а∨天堂免在线| 欧美亚洲成人网| 亚洲一区二区三区高清| 亚洲国产日韩欧美在线99| 欧美日韩黄视频| 欧美在线精品免播放器视频| 国产情人综合久久777777| 奶水喷射视频一区| 免费观看欧美在线视频的网站| 伊人久久大香线| 亚洲人成亚洲人成在线观看图片| 欧美四级伦理在线| 久久亚洲电影| 亚洲理伦电影| 欧美日韩午夜在线| 国产精品一区二区你懂的| 欧美激情国产日韩精品一区18| 国产精品日韩电影| 亚洲夜晚福利在线观看| 亚洲巨乳在线| 国外成人网址| 美腿丝袜亚洲色图| 亚洲美女色禁图| 亚洲另类一区二区| 国产女优一区| 欧美日韩一区二区三区| 久久国产精品99国产精| 国内精品久久久久伊人av|