《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 基于Android的移動電子穩像系統的研究與實現
基于Android的移動電子穩像系統的研究與實現
來源:電子技術應用2013年第1期
丁 磊, 肖麗萍, 鄧杰航, 林小平
廣東工業大學 計算機學院, 廣東 廣州 510006
摘要: 利用基于Android操作系統的硬件平臺實現了移動電子穩像系統。該系統采用無需人工干預的灰度投影算法,通過行列投影、投影濾波和相關計算獲得運動補償量,根據補償量對視頻進行全局校正。對穩像前后幀的行、列投影及殘差圖像,分析表明,該系統穩像效果良好,且具有攜帶方便的特點,易于推廣到各類移動終端設備。
TP399
文獻標識碼: A
文章編號: 0258-7998(2013)01-0112-04
Research and realization of mobile video stabilization system based on Android
Ding Lei,Xiao Liping,Deng Jiehang, Lin Xiaoping
School of Computers, Guangdong University of Technology, Guangzhou 510006, China
Abstract: A mobile electronic video stabilization system is implemented. It runs on a hardware platform based on Android. This system applies a projection algorithm, which contains three parts: an image gray projection, projection filtering and correlation calculation, to compute the motion offset. According to the offset the video is stabilized at last. In experiments, the comparison of row and column projections between the original frame and the stabilized one, and the analysis of residual images show that the system works well and is easy-carried. It is easy to be extended to other mobile terminals.
Key words : mobile video stabilization; Android; motion estimation; projection algorithm

    對存在抖動的視頻進行高精度圖像拼接、運動目標檢測和跟蹤時,必需對視頻進行穩像處理。視頻的抖動是由于在拍攝時,手的抖動或攝像平臺的不規則運動都會引起視頻圖像序列產生模糊和抖動,嚴重影響了圖像信息的有效利用。穩像技術的目的就是要去除視頻中的抖動,使得視頻播放更連續、穩定。

    近年來,國內外學者在該領域做了大量的研究與努力,并取得了一定的成果。國外對電子穩像技術的研究起步較早,許多發達國家對電子穩像技術在軍事方面的應用進行了較為深入的研究,如美國、加拿大和俄羅斯等國家。美國馬里蘭大學(University of Maryland)主要在軍用穩像技術方面進行研究,開發出了多種穩像方法[1]。中國科學院長春光學精密機械與物理研究所趙紅穎[2]、鐘平[3]等人對電子穩像技術的基本原理和應用范圍進行了初步研究,對船載和機載攝像系統所獲取的圖像序列也進行了穩定的實驗研究,并取得了一定的效果。清華大學朱志剛、楊雨東等人通過采用基于多分辨率金字塔匹配方法的光流法來計算幀間運動矢量,并進行了電子穩像的實驗研究[4]。西安電子科技大學機電工程學院ICIE研究所朱娟娟、郭寶龍等人針對圖像序列的抖動,研究了攝像機的抖動和正常掃描這兩種運動的特點,提出了一種帶運動修正的投影穩像算法[5]。
     但是以上研究都是基于“攝像機—圖像采集卡—計算機”模式進行,存在攜帶不方便的缺點。張博等人研究并設計了基于FPGA的電子穩像專用平臺[6]。該穩像系統是一個專用的穩像系統,難于與目前大多數移動平臺整合在一起,不便推廣。本文根據實際應用中對實時移動電子穩像系統的需求,在以三星公司ARM芯片為核心技術的平板電腦SMDKV210上,基于通用的Android移動操作系統,采用無人工干預的灰度投影算法實現了移動電子穩像系統。
1 電子穩像系統的原理與算法
1.1電子穩像的基本原理
    電子穩像穩定是一個圖像序列,圖像序列的不穩定是由于幀與幀之間圖的像變化,并在圖像顯視器上顯示出來?;谶@種分析,電子穩像所要處理的就是通過求出視頻序列中各幀之間的變化,然后以運動補償的方法去除這種變化,達到整個視頻序列穩定的目的。其原理如圖1所示。

    圖1(a)、圖1(b)分別表示當圖像序列沒有抖動時,當前幀B處圖像和參考幀A處圖像相匹配。但當攝像機固定時,由于攝像機載體的運動,導致參考幀中位置A處的圖像移動到了位置C處。在顯示器上觀察時,就會出現抖動現象,影響觀測效果。而電子穩像就是消除或減弱這種抖動現象,通過一定的運動估計算法,估算出A處圖像塊到C處圖像塊的位移和旋轉等參數,再通過運動補償算法,達到校正抖動的目的。
1.2 電子穩像系統的基本結構
    電子穩像系統基本結構如圖2 所示。系統的三個模塊中,圖像預處理模塊用于濾除圖像噪聲,提高整個系統對外界環境變化的穩定性;運動估計模塊是整個系統的核心,可以得到由于攝像平臺抖動而帶來的幀間全局運動矢量和目標物體的運動矢量;運動補償模塊是在運動估計的基礎上,利用前一幀對當前幀進行補償,采用不同的補償方式對最終輸出的圖像序列會產生不同的影響。

1.3 灰度投影算法
    傳統的塊匹配法[7]存在計算量大的問題,而且需設定目標的初始位置,增加了后續穩像的不確定因素。盡管不斷提出對塊匹配算法的改進,但仍然很難滿足實時性的要求?;叶韧队八惴╗8](Projection Algorithm)充分利用了圖像總體灰度分布的變化規律,無需人工干預,只需要對圖像行列的投影曲線做一次相關運算,就能較準確地獲取當前幀相對于參考幀的運動矢量,大大降低了計算量,而且保證了較高的計算精度。灰度投影算法可分解成圖像灰度映射、投影濾波和相關計算三個主要的步驟。
1.3.1 圖像灰度映射[9]
     輸入圖像序列中的每一幀圖像經過預處理后,將初始的二維圖像信息映射成兩個獨立的一維信息。計算公式為:
     

2 基于Android移動電子穩像系統的實現
2.1 硬件平臺

    系統的硬件平臺為SMDKV210平板電腦。處理器型號ARMv7 Processor rev2(v71),單核;集成370 MB內存,2.5 GB SD卡;屏幕大小764×480像素;Android操作系統版本為4.0.3。上位機為Lenovo公司ThinkPad E40系列;Intel(R)酷睿i3處理器,主頻2.53 GHz;內存容量2 GB。操作系統UBUNTU 11.04(natty)。
2.2 Android的系統架構
    Android平臺[10]自底向上由以下4個層次組成:Linux內核層、Android運行時庫和其他庫層、應用框架層、應用程序層。
    (1)Linux內核層:Android系統基于Linux2.6內核,其核心系統服務(安全性、內存管理、進程管理、網路協議以及驅動模型)都依賴于Linux內核。
    (2)Android運行時庫和其他庫層:Android運行時庫包含一組核心庫(提供了Java語言核心庫內的大部分功能)和Dalvik虛擬機。同時Android提供了其他豐富的庫類支持。

    (3)應用框架層:Android系統開發的基礎,很多核心應用程序通過這一層來實現其核心功能。
   (4)應用程序層:Android平臺不僅僅是操作系統,也包含了許多應用程序,如SMS短信客戶端程序、電話撥號程序、圖片瀏覽器及Web瀏覽器等。
    通過使用 Android Eclipse 插件,可在Eclipse 環境中構建 Android 應用程序[11]。
    依次安裝Sun JDK 7,版本號:1.7.0_03;Eclipse IDE,版本號:3.7.2(indigo);Android SDK,版本號:r17;Android開發插件(ADT);Android NDK,版本號:android-ndk-r8。
2.3 移動電子穩像系統的軟件開發
    Android應用工程目錄下主要包含了src、jni、libs、res 4個文件夾和AndroidManifest.xml全局配置文件,project.properties工程屬性文件等。
    src文件夾下存放著Java應用程序,其中必須包含至少一個activity活動。本文中調用攝像頭捕捉幀視頻等工作都是在這里完成,工作流程圖如圖3所示。res文件夾是應用的資源文件夾(如圖片、xml文件等);libs文件夾包含成功編譯后的本地庫;jni文件夾內包含了應用中用到的C/C++穩像源代碼和NDK的編譯腳本Android.mk、Application.mk。這兩個腳本文件是由Makefile語言所寫,寫明了C++程序的編譯流程,在整個應用中起著至關重要的作用。穩像算法原理流程圖如圖4所示。

3 實驗結果與分析
    本文通過平板電腦上的攝像機采集視頻進行穩像處理。經過測試,其處理圖像的穩像速率達到了15.68 f/s,滿足了實時性的要求。
    為了驗證灰度投影算法在電子穩像中的效果,對連續的多幀圖像進行單子穩像仿真實驗。圖5、圖6分別反映的是穩像前后連續6幀圖像的行投影值曲線從圖中可以清楚地看到穩像前各幀圖像的行投影值曲線形狀接近,但位置在橫坐標方向上有較大的波動差異,而穩像后的行投影值曲線形狀和位置基本一致。說明本文的穩像處理算法能夠準確計算出每幀圖像的位移矢量,并根據位移矢量準確穩定圖像。

    為了進一步驗證本文穩像算法的準確性,針對參考幀與當前幀的殘差幀圖像的區別進行了分析。對參考幀與當前幀做差值運算,結果如圖7(a)所示,圖中標識1為參考幀圖像,標識2為目標公交車的輪廓,可以看出幀圖像的大致輪廓,這是由于車身的抖動,穩像前當前幀與參考幀之間存在位移的偏差。重合區域為黑色區域代表差值像素為零。圖7(b)為穩像后對應兩幀的殘差圖像,圖中標識3為目標公交車的輪廓??梢?,經過穩像處理后,對應兩幀重合區域大。說明穩像效果較好。

 

 

    本文在研究各種電子穩像技術算法的基礎上,基于Android操作系統的移動硬件平臺,實現了移動電子穩像系統。該系統無需人工干預,采用灰度投影、運動補償算法進行穩像處理。穩像后的行列投影和殘差圖像分析表明,該系統在移動平臺上能夠進行穩像處理,其穩像速率達到了15.68 F/s。而且該系統攜帶方便,易于推廣到各類移動終端設備,并為推動穩像技術的應用和后續的視頻拼接,運動目標的識別、跟蹤等提供幫助。
參考文獻
[1] BALAKIRSKY S B, CHELLAPPA R. Performance charac terization of image stabilization algorithms[J]. Real-Time Imaging,1996(2):297-313.
[2] 趙紅穎,金宏,熊經武.電子穩像技術概述[J].光學精密工程,2001,9(4):353-359.
[3] 鐘平.機載電子穩像技術研究[D]. 長春:中國科學院長春光學精密機械與物理研究所,2004.
[4] 楊雨東, 徐光祐, 朱志剛. 2.5維數字圖像序列穩定方法[J].計算機學報,1988,21(z1):277-284.
[5] 朱娟娟,郭寶龍,馮宗哲.一種基于灰度投影算法的電子穩像方法[J].光子學報,2005,34(8):1266-1269.
[6] 張博,吳芝路,張欣宇.基于FPGA的電子穩像平臺的研究[J].電子技術應用,2004,30(5):56-60.
[7] 張國棟, 王明泉, 郭棟.基于灰度投影算法的實時電子穩像研究[J].微電子學與計算機,2010,27(10):53-56.
[8] 張國棟.基于電子穩像技術的視頻穩像研究[D].太原:中北大學,2010.
[9] 孫輝.快速灰度投影算法及其在電子穩像中的應用[J].光學精密工程,2007,15(3):412-416.
[10] 韓超, 梁泉. Android系統原理及開發要點詳解[M]. 北京:電子工業出版社,2009.
[11] Installing the Eclipse Piugin[EB/OL].[2012-09-10]. http://developer.android.com/sdk/instal-ling/installing-adt.html.

此內容為AET網站原創,未經授權禁止轉載。
热re99久久精品国产66热_欧美小视频在线观看_日韩成人激情影院_庆余年2免费日韩剧观看大牛_91久久久久久国产精品_国产原创欧美精品_美女999久久久精品视频_欧美大成色www永久网站婷_国产色婷婷国产综合在线理论片a_国产精品电影在线观看_日韩精品视频在线观看网址_97在线观看免费_性欧美亚洲xxxx乳在线观看_久久精品美女视频网站_777国产偷窥盗摄精品视频_在线日韩第一页
  • <strike id="ygamy"></strike>
  • 
    
      • <del id="ygamy"></del>
        <tfoot id="ygamy"></tfoot>
          <strike id="ygamy"></strike>
          亚洲国产精品va在看黑人| 一本久久综合| 国产美女精品视频免费观看| 99国产精品久久久久久久| 久久综合五月天婷婷伊人| 久久精品视频在线免费观看| 欧美国产一区二区| 久久精品一区二区三区中文字幕| 欧美伊人久久久久久午夜久久久久| 亚洲伦理久久| 久久精品道一区二区三区| 久久综合中文字幕| 蜜桃av一区二区在线观看| 亚洲一区中文| 国产日产高清欧美一区二区三区| 久久久青草青青国产亚洲免观| 欧美在线资源| 亚洲欧美日韩爽爽影院| 国内精品久久久久久久影视麻豆| ●精品国产综合乱码久久久久| 国产亚洲欧美另类一区二区三区| 在线播放不卡| 国产欧美精品一区二区三区介绍| 亚洲在线成人精品| 亚洲国产福利在线| 国产精品久久久久一区| 欧美黄色成人网| 亚洲欧美日韩精品| 老牛嫩草一区二区三区日本| 亚洲激情综合| 欧美日韩国产免费观看| 久久国产精品一区二区三区四区| 欧美视频一区二区三区| 日韩亚洲欧美成人| 一区在线视频| 性欧美1819sex性高清| 亚洲性感激情| 欧美日韩三级一区二区| 欧美中文字幕视频在线观看| 午夜视频在线观看一区| 免费欧美电影| 久久精品免费| 99精品欧美一区二区蜜桃免费| 久久九九国产精品| 一区二区三区波多野结衣在线观看| 国外成人免费视频| 亚洲激情欧美激情| 在线激情影院一区| 欧美一级午夜免费电影| 久久久久久尹人网香蕉| 国产精品久久久免费| 国产精品视频一二三| 亚洲成人影音| 黄色成人免费观看| 欧美一区二区三区在线看| 欧美精品久久一区二区| 久久亚洲影音av资源网| 亚洲在线播放| 久久国产黑丝| 欧美日韩国产麻豆| 亚洲福利电影| 免费国产一区二区| 亚洲国产精品第一区二区三区| 一区二区欧美激情| 欧美日本一区二区视频在线观看| 欧美福利视频一区| 欧美午夜理伦三级在线观看| 欧美国产视频日韩| 欧美三区在线视频| 久久人人爽人人| 亚洲精品欧美激情| 国产精品免费小视频| 欧美日韩国产不卡| 蜜臀av国产精品久久久久| 欧美激情bt| 久久精品2019中文字幕| 国产色爱av资源综合区| 国产精品久久久久999| 欧美激情第一页xxx| 国产一区二区三区av电影| 国产亚洲精品久久久| 一片黄亚洲嫩模| 欧美日本二区| 国产精品嫩草影院一区二区| 久久琪琪电影院| 尤物99国产成人精品视频| 国产一区二区三区久久精品| 久久综合久久综合九色| 麻豆国产精品va在线观看不卡| 国产精品稀缺呦系列在线| 一个色综合av| 国产亚洲成av人片在线观看桃| 亚洲午夜精品一区二区三区他趣| 久久久久久久成人| 欧美大片在线观看一区二区| 一色屋精品亚洲香蕉网站| 国产精品高潮呻吟| 亚洲理伦电影| 一区二区精品| 性做久久久久久久免费看| 欧美日本国产精品| 久久综合福利| 国产精品人人做人人爽| 国产精品入口日韩视频大尺度| 免费观看在线综合色| 亚洲精品小视频在线观看| 国内精品美女av在线播放| 狠狠爱综合网| 久久夜色精品国产| 欧美亚洲综合久久| 国产精品视频导航| 国产精品日韩在线一区| 国产酒店精品激情| 日韩视频永久免费观看| 欧美日韩亚洲天堂| 亚洲国产日韩欧美在线图片| 久久精品一区二区三区不卡| 在线精品视频一区二区| 亚洲一区二区三区视频播放| 亚洲永久精品国产| 国产欧美日韩精品一区| 一本色道久久加勒比精品| 久久免费高清视频| 女同性一区二区三区人了人一| 悠悠资源网亚洲青| 亚洲福利视频一区| 欧美精品在线看| 国产欧美二区| 久久综合久久综合九色| 久久久久这里只有精品| 激情文学一区| 久久xxxx精品视频| 亚洲美女在线观看| 中日韩视频在线观看| 久久精品亚洲乱码伦伦中文| 国产日韩综合一区二区性色av| 久久免费视频这里只有精品| 欧美激情按摩在线| 欧美搞黄网站| 久久久久久久久久看片| 性一交一乱一区二区洋洋av| 99亚洲精品| 久久久久国产精品一区| 欧美一区二区三区在线观看| 亚洲国产一区在线观看| 欧美日韩第一区日日骚| 久久成人免费电影| 在线成人激情| 欧美日韩xxxxx| 国产一区二区无遮挡| 欧美在线观看天堂一区二区三区| 欧美精品一区二区三区蜜桃| 国产人成一区二区三区影院| 欧美香蕉大胸在线视频观看| 久久综合狠狠综合久久综合88| 免费精品99久久国产综合精品| 亚洲图片你懂的| 亚洲日本在线观看| 亚洲午夜黄色| 亚洲欧洲一区二区在线播放| 日韩午夜视频在线观看| 欧美一区二区在线免费观看| 久久久99久久精品女同性| 国产一区激情| 亚洲综合电影一区二区三区| 一区二区亚洲| 国产一本一道久久香蕉| 久久精品欧美日韩精品| 欧美午夜电影网| 精品成人国产在线观看男人呻吟| 亚洲国产精品欧美一二99| 亚洲国产日韩精品| 欧美国产乱视频| 亚洲人午夜精品免费| 午夜精品久久一牛影视| 欧美激情视频在线免费观看 欧美视频免费一| 国产精品99久久99久久久二8| 国产伊人精品| 久久精品91| 国语自产精品视频在线看8查询8| 亚洲欧美国产毛片在线| 亚洲综合国产激情另类一区| 欧美亚洲免费电影| 亚洲影院色无极综合| 蜜桃av综合| 亚洲精品中文字幕在线| 黑人巨大精品欧美一区二区小视频| 激情小说另类小说亚洲欧美| 亚洲免费在线视频| 欧美日韩美女一区二区| 久久久一区二区三区| 欧美日韩1区2区| 尤物网精品视频| 亚洲一区二区三区777| 亚洲电影免费观看高清完整版| 亚洲欧洲一区二区天堂久久| 欧美日韩亚洲一区二区三区在线| 国产精品女主播一区二区三区| 樱桃成人精品视频在线播放| 久久蜜臀精品av| 欧美一级在线亚洲天堂| 狠狠网亚洲精品| 欧美激情一区三区| 久久精品国产久精国产一老狼| 欧美日本亚洲韩国国产| 欧美日韩国内| 国产精品va| 国产日韩一区二区三区在线播放| 亚洲欧美日韩精品一区二区| 国产亚洲成av人片在线观看桃| 欧美日韩久久不卡| 狠狠色香婷婷久久亚洲精品| 国产精品magnet| 91久久精品日日躁夜夜躁欧美| 国产欧美精品国产国产专区| 99精品久久免费看蜜臀剧情介绍| 一区二区视频在线观看| 一区二区日韩欧美| 午夜精品久久久久久久99水蜜桃| 欧美一区二区免费| 亚洲精品久久久久久久久| 激情五月综合色婷婷一区二区| 亚洲精品国精品久久99热| 亚洲精品视频一区二区三区| 在线电影欧美日韩一区二区私密| 亚洲精品婷婷| 亚洲欧美国产一区二区三区| 欧美日韩在线第一页| 合欧美一区二区三区| 亚洲男人的天堂在线aⅴ视频| 这里只有精品在线播放| 亚洲午夜一区二区三区| 亚洲精品视频在线看| 在线观看91精品国产麻豆| 日韩视频第一页| 欧美午夜精品久久久久久久| 在线亚洲一区观看| 国产婷婷色一区二区三区四区| 欧美日韩一区二区三区视频| 欧美视频免费看| 久久精品在线观看| 欧美日韩国内自拍| 久久精品99国产精品| 亚洲黄色在线观看| 欧美性猛片xxxx免费看久爱| 影音先锋日韩精品| 亚洲第一区在线| 亚洲男同1069视频| 欧美国产亚洲另类动漫| 国产一区二区无遮挡| 国产亚洲精品久久久久久| 国产精品白丝黑袜喷水久久久| 国产主播一区二区三区| 黄色亚洲大片免费在线观看| 亚洲欧美韩国| 国产欧美一区二区三区久久| 欧美日韩亚洲一区| 欧美激情中文不卡| 在线不卡中文字幕| 欧美二区在线看| 欧美在线播放一区二区| 欧美视频在线看| 欧美黑人在线播放| 欧美日韩视频在线观看一区二区三区| 欧美日韩国产成人高清视频| 国产农村妇女毛片精品久久莱园子| 伊人久久婷婷色综合98网| 欧美三日本三级少妇三2023| 欧美精品一区二区三区在线看午夜| 国产精品乱子乱xxxx| 欧美肉体xxxx裸体137大胆| 国产欧美 在线欧美| 午夜精品av| 99热免费精品| 国产精品高潮呻吟久久av无限| 欧美一区二视频在线免费观看| 99视频精品| 国产精品www.| 亚洲精品一区在线| 免费看av成人| 在线电影一区| 在线综合+亚洲+欧美中文字幕| 欧美日韩一区二区在线观看视频| 欧美一级成年大片在线观看| 国产欧美日韩一区二区三区在线观看| 国产日韩欧美亚洲一区| 欧美国内亚洲| 午夜精品一区二区三区在线视| 嫩草影视亚洲| 国产日本欧美一区二区三区在线| 在线日韩精品视频| 亚洲人成人99网站| 国产精品久久久久久久久果冻传媒| 一区二区在线免费观看| 在线免费一区三区| 在线一区欧美| 国产精品爱久久久久久久| 狼狼综合久久久久综合网| 美女成人午夜| 亚洲国内在线| 在线观看精品| av不卡免费看| 午夜视频在线观看一区二区三区| 亚洲免费在线观看| 国产欧美日韩亚洲一区二区三区| 久久精品久久99精品久久| 久久米奇亚洲| 国产精品欧美风情| 久久久爽爽爽美女图片| 一区二区在线观看视频在线观看| 久久久久久久久久看片| 99精品国产高清一区二区| 在线视频一区二区| 欧美亚洲成人网| 久久国产手机看片| 欧美在线二区| 久久色在线播放| 免费亚洲婷婷| 亚洲国产一区二区三区青草影视| 欧美日韩久久久久久| 亚洲激情视频在线播放| 国产精品久久久久永久免费观看| 小黄鸭精品密入口导航| 亚洲娇小video精品| 久久香蕉国产线看观看网| 国产女人18毛片水18精品| 在线视频亚洲欧美| 国产精品一级二级三级|