《電子技術應用》
您所在的位置:首頁 > 測試測量 > 設計應用 > 基于全局運動補償的多運動目標檢測方法研究
基于全局運動補償的多運動目標檢測方法研究
來源:電子技術應用2011年第1期
王洪斌1, 趙振涌2, 顧 彪1, 殷永凱1, 賈桂敏1
1. 天津大學 微光機電系統技術教育部重點實驗室,天津300072; 2. 北京自動化控制設備研究所, 北京100074
摘要: 提出了一種動態背景下的對多個運動目標檢測的完整方法。利用基于宏塊匹配的六參數全局運動估計方法進行全局運動補償,有效地消除了攝像機在非穩定運動情況下對目標檢測性能帶來的不利影響。同時在宏塊匹配前進行了預處理,通過預判提取紋理信息豐富的宏塊,并在宏塊匹配的過程中采用九點十字搜索算法取代傳統的三步搜索算法,減少了匹配數據量。通過六參數運動模型計算得到攝像機全局運動參數,然后對運動背景進行全局補償。補償后經過后處理提取運動區域。實驗證明,本方法能夠有效地檢測出動態背景下的運動目標。
中圖分類號: TP391.41
文獻標識碼: A
文章編號: 0258-7998(2011)01-0110-04
Research on multi-moving object detection algorithm based on global motion compensation
Wang Hongbin1, Zhao Zhenyong2, GU Biao1, Yin Yongkai1, Jia Guimin1
1. The Ministry of Education Key Laboratory of Micro-Opto-Electro-Mechanical System Technology, Tianjin University, Tianjin 300072, China; 2. Beijing Institute of Automatic Control Equipment, Beijing 100074, China
Abstract: A multi-moving target detection algorithm is completely proposed. Global motion compensation in image sequences is realized to overcome the detrimental effects of target detection performance when camera motion in unstable situation by six-parameter global motion estimation method via template image matching. At the same time the project extracted the texture of information-rich macro block by macroblock pre-sentence,use nine-point and cross search algorithm to replace the traditional three-step search algorithm in the process of image matching.This approach reduces the amount of data matching. Calculating can obtain the camera global motion parameters,and then globally compensate the motion background by using bilinear interpolation method.Before detecting moving targets eventually,there are lots of steps results show that this method can effectively detect the moving target in dynamic background.
Key words : dynamic background; target detection; global motion compensation; nine-point cross search method


    基于視頻的目標檢測技術是計算機視覺的主要研究方向之一,它是智能監控、移動機器人視覺導航、武器引導、全景戰車等應用的基礎和關鍵技術,具有十分重要的研究價值[1]。
    目標檢測分為多種類型。按照攝像機是否運動可分為兩種情況:靜態背景下的運動目標檢測與跟蹤,通常指攝像機相對背景靜止的狀態,如用于交通路口的安全監控系統;動態背景下的運動目標檢測與跟蹤,通常指攝像機相對背景發生運動的狀態,如利用單攝像機進行全景監控、機載航空相機、彈載的紅外CCD攝像頭[2]。在動態背景下,由于背景和前景都是運動的,相對靜態背景要準確檢測和跟蹤目標要復雜和困難得多。
    本文主要針對復雜動態廣場背景下單攝像機對多個運動目標進行檢測的情況,在傳統方法的基礎上,提出了一套更完善、實時性和魯棒性更優的基于全局運動補償的解決方案。該方法建立了攝像機全局運動參數模型,通過背景補償將動態背景下的檢測問題轉化為在靜態背景下的檢測問題。
1 動態背景下的多目標檢測
    目前在動態背景下解決目標檢測的問題主要有兩大思路:(1)根據基于目標模板特征的方法。這種方法背景是否運動對其影響不是很大,但是在目標特征不明顯的情況下難以做到準確地提取目標;(2)基于背景補償的方法。通過全局運動估計得到的全局運動參數估算攝像機運動模型,在進行差分圖像提取目標前進行背景補償,消除全局運動帶來的影響[3]。本文采用基于全局運動補償的方法實現目標檢測。
1.1 全局運動估計
    全局運動估計是指對視頻序列中造成背景運動的攝像機運動進行估計,其目的是要從視頻序列中找出造成全局運動的攝像機運動的規律,從而將動態序列間的背景對準消除,檢測出前景目標[4]。
    圖1為本文動態背景下基于全局運動補償的運動目標檢測的流程圖。

    首先通過全局運動估計和補償將相鄰幀間背景對準,再通過幀間差分消除動態背景,最后對差分圖像進行二值化以及一系列后處理從而獲取前景運動目標。
1.1.1 常用的攝像機運動模型[5]
    如圖2所示,攝像機把三維空間點(X,Y,Z)映射到二維空間平面點(x,y)上。圖像平面與Z軸垂直,中心坐標為(0,0,f)(f表示攝像機的焦距)。

    在笛卡爾坐標系里,如果三維場景中的物體的運動為
1.1.3 遞歸最小二乘法計算全局運動參數
    為了消除匹配不精確的宏塊所得到的光流場的影響,需要對參數估計進行遞歸計算,將得到的六個參數重新計算各個宏塊的光流場,并與宏塊匹配算法得到的光流場進行比較,將光流計算誤差較大的宏塊進行剔除[6]。利用剩余的宏塊重新估計全局運動參數,如果遞歸反復,則直到(a1,a2,a3,a4,a5,a6)收斂至一個穩定的結果。
1.2 圖像剪裁、紋理提取與宏塊預判
    為了提高運動估計的魯棒性,本文采用了基于宏塊匹配的方法計算參數。把分辨率為320×240的K+1幀圖像分為20×15個宏塊,對第K幀進行匹配。分割宏塊后的圖像如圖3所示。

    為了提高運動估計的實時性,本文從以下幾個方面進行了優化。
1.2.1 圖像剪裁
    當攝像機運動時,相鄰幀的背景不重合,由圖4所示第K+1幀和第K幀圖像的位置關系,第K幀中的S1區域背景在第K+1幀中消失,而第K+1幀中出現新背景S2,由于背景運動在各個方向上都有可能發生,假設相鄰幀的運動范圍不超過L1(>L2),以圖4中所示,樣本宏塊只需在S3區域中選取,而不必全屏宏塊匹配,以縮小計算量。

1.2.2 紋理提取與宏塊預判
    運用遞歸最小二乘法估計全局運動時,光流計算不準確的宏塊不參與最終的參數估計,但在計算光流場時,卻花費了相當一部分的時間來匹配計算光流。而本文在計算光流場之前已提前剔除可能導致不準確光流估計的宏塊,因此,很大程度上降低了計算量,增加了全局運動估計的實時性。
    圖5是原圖像和canny算子紋理提取后結果。圖像紋理提取后,對每個宏塊進行預分析,通過設定閾值,剔除可能導致不準確光流估計的宏塊,只留下紋理信息量較多的宏塊參與光流估計。

    圖6為宏塊預判后的實驗結果,歸一化后閾值T取值為0.2,其分辨率為320×240,4個邊緣各去除掉10個像素后,將圖像分為20×15個宏塊,每個宏塊尺寸為15×15。
    宏塊預判后,宏塊數量得到減少,由原來的300個宏塊減少為105個,約占原來總宏塊數的35%。
1.3 宏塊匹配與九點十字搜索法
1.3.1 宏塊匹配

    宏塊模板匹配法原理圖如圖7所示。宏塊模板匹配法以一個目標圖像為模板,用目標模板與待匹配圖像的各個子區域圖像進行一定的匹配準則計算,找到和目標模板最相似的子圖像位置[7]。本文即從圖4的S3區域里找出宏塊預判后保留的宏塊與其最佳匹配塊之間的相對位移,即為該宏塊的運動向量,參與后續的全局運動估計的計算,S3即為匹配相關區域。

   衡量兩圖像塊間相似性的準則稱為匹配準則。匹配準則的好壞直接影響到搜索過程的復雜性以及運動向量估計的精確性。其中均方誤差定義準則為:
 
    MSE利用差值的平方,可以放大微小差別,本文采用的就是MSE匹配準則。
1.3.2九點十字搜索法
    在進行宏塊匹配時,利用宏塊在待匹配圖像上的搜索區域內滑動,每滑動一次就進行一次匹配計算,以找到最佳匹配。這種方法被稱為全搜索法,精確度高,但計算量大,是一個相當耗時的過程。
    近年來,出現了很多種快速的搜索算法代替全搜索法,比較常用的有:三步搜索法、對數搜索法、鉆石搜索法和一些相應的改進算法。這些快速搜索法在候選的運動矢量位置的預定子集上評測準則函數,檢測點數目會大大少于全搜索法[8]。
    本文結合三步搜索法和鉆石搜索法各自的優點提出了一種九點十字搜索法(E3SS),如圖8所示。搜索窗寬度為5,即搜索范圍是(i±5,j±5)。

    (1)搜索模板上的9個檢測點,如果最小塊誤差MBD
(Minimum Block Distortion)點(MSE值最小的點),在搜索窗口的中心則算法結束。
    (2)如果MBD點位于中心點的4個相鄰點中,移動十字小模板到上一步的MBD點,繼續搜索十字小模板中其他點,直到MBD點是十字中心的點或者十字小模板到達搜索窗口邊緣為止。如圖9(a)所示,點(0,-1)是第一步的MBD點,也是第二階段的MBD點,且位于搜索窗中心,故最終運動矢量就是(0,-1)。圖9中每個點上的數字表示不同階段搜索時的檢測點。

    (3)如果MBD點是大十字中的4點之一,搜索方法同三步搜索法類似,即將步長減半,中心點移到上一步的MBD點,重新在周圍距離步長的4個點處進行塊匹配計算并比較。重復此步驟,直到步長為1,該點所在位置即對應最優運動矢量。如圖9(b)所示,(0,4)是第一步的MBD點,然后以(0,4)為中心點進行第二步搜索,此時搜索半徑已經縮減為2像素,最后以當前MBD點(-2,4)完成第三步搜索,找到最優匹配點。
    利用預測幀的峰值信噪比PSNR來度量搜索的準確性,同時選取多個不同性質的序列圖像來檢測算法的穩定性,選取全搜索算法FS、菱形搜索算法DS,以對比九點十字算法的各項性能,其結果如表1所示。

    從表1可以看出,相對FS和DS算法,九點十字算法(E3SS)在時間上的優勢非常大,在提高了搜索速度的同時也保證了搜索精度,其精度除了比FS算法略低外,比目前流行的DS算法都有細微程度的提高。

 
    雙線性內插值法計算量大,但縮放后圖像質量高,不會出現像素值不連續的情況。
1.5 運動目標區域提取[9]
    此時得到的K的補償幀Kcomp與幀K+1的背景基本對準,對所得圖像進行非線性平滑濾波消除噪聲,然后通過進行幀間差分即可消除背景獲得前景運動區域。但圖中除了運動目標之后,還存在一些小面積的干擾區域以及一些小面積的空洞。本文先對二值化后的圖像進行區域標記,對二值圖像的每個不同的連通域進行不同的編號,通過對各個區域中像素個數的計算獲得各個區域的面積。將面積小于設定閾值的區域剔除。對得到的二值圖像先進行膨脹運算再進行腐蝕運算,從而獲得運動目標的完整輪廓和區域,最終檢測出目標。
2 實驗結果
    圖10為在原圖像上的檢測結果,從中可以看出,其中一個人體目標由于只有頭部和腿部動作比較明顯而被檢測出來,被分成了兩個目標,但是可以在跟蹤過程中通過對目標的顏色特征和運動特性的分析和處理,區別目標,并將本為同一目標的部分合成(由于跟蹤過程不是本文重點,在此處就不再鰲述)。圖11所示為最終的檢測結果。

    本文深入研究了動態背景下對多目標檢測的一種有效方法?;谌诌\動補償消除了背景運動對目標檢測的影響,在宏塊匹配時提出了九點十字搜索法增強了檢測的實時性,通過處理后的結果可以看出,整套算法是行之有效的,并且有很強的魯棒性,為后續跟蹤過程奠定了良好的基礎。
參考文獻
[1] 賈桂敏.基于物體局部信息的跟蹤算法研究[D]. 天津:天津大學精密儀器與光電子工程學院,2008.
[2] 王研.動態背景下目標跟蹤若干技術問題的研究[D].天津:天津大學精密儀器與光電子工程學院,2007.
[3] BEYMER D,MCLAUCHLAN P F,COIFMAN B,et al. A real-time computer vision system for measuring traffic parameters[C]. In Proceeding. of the IEEE Conference. on  Computer     Vision and Pattern Recognition,1997.
[4] HEUER J, KAUP A. Global motion estimation in image sequences using robust motion vector field segmentation[C]. In:Proceeding of the 7th ACM International conference on   ultimedia,Sydney,Australia,1999.
[5] 吳思.視頻運動信息分析技術研究[D].沈陽:中國科學院計算技術研究所,2005.
[6]  張竟.動態圖像序列中運動目標檢測若干技術問題的研究[D].天津:天津大學精密儀器與光電子工程學院,2007.
[7]  陳敏慎.運動目標物體實時追蹤圖像匹配法的研究[D].哈爾濱:哈爾濱工業大學,2003.
[8]  劉海華.雙十字搜索算法的快速塊匹配運動估計[J].計算機研究與發展,2006,43(9):1666-1673.
[9]  劉文耀.光電圖像處理[M].北京:電子工業出版社,2002:122-355.

此內容為AET網站原創,未經授權禁止轉載。
热re99久久精品国产66热_欧美小视频在线观看_日韩成人激情影院_庆余年2免费日韩剧观看大牛_91久久久久久国产精品_国产原创欧美精品_美女999久久久精品视频_欧美大成色www永久网站婷_国产色婷婷国产综合在线理论片a_国产精品电影在线观看_日韩精品视频在线观看网址_97在线观看免费_性欧美亚洲xxxx乳在线观看_久久精品美女视频网站_777国产偷窥盗摄精品视频_在线日韩第一页
  • <strike id="ygamy"></strike>
  • 
    
      • <del id="ygamy"></del>
        <tfoot id="ygamy"></tfoot>
          <strike id="ygamy"></strike>
          国产精品美女www爽爽爽视频| 久久人人爽爽爽人久久久| 亚洲一区在线观看免费观看电影高清| 亚洲性人人天天夜夜摸| 亚洲一区精品视频| 亚洲精品日韩一| 国产在线观看精品一区二区三区| 亚洲高清免费| 国产日韩精品入口| 免费观看在线综合色| 亚洲精品中文字幕在线观看| 欧美一区二区三区免费观看视频| 国产在线视频不卡二| 国产精品自在在线| 欧美一区二区三区在线| 午夜精品一区二区三区在线视| 欧美在线视频免费观看| 小黄鸭视频精品导航| 久久精品水蜜桃av综合天堂| 亚洲综合三区| 国产一区二区在线观看免费| 久久三级福利| 久久久夜精品| 国内综合精品午夜久久资源| 亚洲欧洲一区二区在线观看| 亚洲日本欧美天堂| 亚洲人成网站影音先锋播放| 欧美国产欧美亚州国产日韩mv天天看完整| 中文日韩欧美| 国产亚洲精品bv在线观看| 宅男噜噜噜66国产日韩在线观看| 美国十次了思思久久精品导航| 影音先锋国产精品| 欧美日韩在线免费观看| 免费观看一区| 好吊一区二区三区| 欧美亚洲免费电影| 在线观看国产精品淫| 亚洲国产高清aⅴ视频| 久久国产精品网站| 亚洲激情专区| 精品999在线播放| 国产一区在线视频| 亚洲天堂偷拍| 亚洲欧美日韩一区在线观看| 亚洲国产精品悠悠久久琪琪| 一区在线影院| 久久久人人人| 欧美另类极品videosbest最新版本| 久久精品伊人| 亚洲一区国产一区| 亚洲免费观看高清完整版在线观看熊| 欧美日韩激情小视频| 亚洲一区二区视频在线观看| 欧美日韩国产综合网| 久久久夜色精品亚洲| 国产精品久久久久毛片大屁完整版| 免费看亚洲片| 狠狠久久婷婷| 欧美一级片久久久久久久| 久久本道综合色狠狠五月| 亚洲午夜视频在线| 久久婷婷国产综合尤物精品| 国产农村妇女毛片精品久久莱园子| 欧美一区二区成人6969| 国产欧美日韩亚州综合| 亚洲国产欧美日韩| 亚洲精品国产精品国自产观看浪潮| 一区二区视频免费完整版观看| 亚洲中午字幕| 久久精品国产第一区二区三区最新章节| 欧美gay视频| 亚洲免费中文| 久久久久久综合网天天| 欧美日韩日本视频| 国产日韩欧美精品在线| 在线亚洲伦理| 亚洲福利视频二区| 欧美视频福利| 一区二区电影免费在线观看| 久久视频这里只有精品| 午夜精品久久久久久久99樱桃| 亚洲天堂网在线观看| 老色鬼久久亚洲一区二区| 免费毛片一区二区三区久久久| 午夜精品视频在线观看| 国产精品久久二区| 国产精品婷婷午夜在线观看| 亚洲无限av看| 一区二区三区高清在线观看| 国产精品久久999| 国产精品私人影院| 欧美调教视频| 午夜精品久久久久久99热| 欧美在线www| 国产一区二区主播在线| 亚洲一区二区三区免费观看| 欧美一二三视频| 国产精品中文在线| 国产在线欧美| 国产婷婷色一区二区三区| 老司机67194精品线观看| 怡红院精品视频在线观看极品| 国产一区二区三区日韩| 亚洲影视九九影院在线观看| 久久国产精品亚洲77777| 国产精品欧美一区喷水| 久久www成人_看片免费不卡| 欧美成人免费网站| 能在线观看的日韩av| 欧美不卡在线视频| 在线免费观看日韩欧美| 亚洲香蕉在线观看| 欧美精品免费在线| 欧美中文字幕久久| 性欧美在线看片a免费观看| 久久大综合网| 国产精品捆绑调教| 国产真实精品久久二三区| 快射av在线播放一区| 欧美日韩天天操| 亚洲国产精品久久91精品| 欧美激情1区2区| 国产在线不卡| 国产一区二区三区的电影| 国内外成人免费视频| 黑人中文字幕一区二区三区| 欧美极品在线播放| 久久久亚洲影院你懂的| 欧美午夜片在线观看| 国产精品久久久久久av福利软件| 欧美激情一区二区三区蜜桃视频| 国产精品天天摸av网| 亚洲深夜福利视频| 91久久久久久久久| 国产精品推荐精品| 国产精品美女久久久久av超清| 国产精品99久久久久久宅男| 亚洲一级二级在线| 久久青青草综合| 亚洲欧美日本视频在线观看| 亚洲国产你懂的| 日韩视频在线永久播放| 亚洲国产精品电影在线观看| 亚洲国产精品999| 一区二区三区精品视频| 国产精品免费小视频| 欧美国产在线观看| 中文精品一区二区三区| 国内成+人亚洲+欧美+综合在线| 亚洲电影在线观看| 亚洲高清视频中文字幕| 亚洲精品久久久久久一区二区| 欧美一级电影久久| 国产精品久久久久久久久婷婷| 亚洲电影一级黄| 久久尤物视频| 亚洲欧洲在线看| 久久国产视频网站| 蜜臀av一级做a爰片久久| 欧美影院在线播放| 免费亚洲一区| 欧美黄色一级视频| 欧美日韩极品在线观看一区| 欧美成人亚洲成人日韩成人| 一区二区三区日韩在线观看| 亚洲日韩视频| 性欧美大战久久久久久久免费观看| 黑人巨大精品欧美一区二区小视频| 亚洲一区三区电影在线观看| 欧美精品亚洲| 久久婷婷国产麻豆91天堂| 亚洲天堂av图片| 免费成人性网站| 欧美成人小视频| 欧美一区二视频在线免费观看| 亚洲国产欧美一区二区三区丁香婷| 欧美中文字幕在线观看| 国产精品免费一区二区三区在线观看| 欧美精品久久99久久在免费线| 亚洲制服丝袜在线| 国产精品免费区二区三区观看| 亚洲人成网站777色婷婷| 久久国产综合精品| 亚洲精品免费看| 国产精品自拍网站| 欧美精品一区三区在线观看| 国产日韩av高清| 午夜免费在线观看精品视频| 国产视频亚洲| 日韩小视频在线观看专区| 国产精品视频观看| 一区二区三区色| 91久久在线播放| 欧美高清hd18日本| 亚洲另类在线视频| 久久国产精品毛片| 国产一区观看| 欧美日韩一区二区免费在线观看| 欧美日韩在线看| 亚洲综合色噜噜狠狠| 久久久99精品免费观看不卡| 免费观看30秒视频久久| 亚洲精品国产精品国自产观看浪潮| 亚洲二区免费| 亚洲人成高清| 国产自产女人91一区在线观看| 一本高清dvd不卡在线观看| 久久婷婷亚洲| 亚洲观看高清完整版在线观看| 亚洲美女精品一区| 亚洲第一天堂无码专区| 久久综合伊人77777蜜臀| 久久精品国产视频| 亚洲免费一在线| 欧美国产丝袜视频| 激情婷婷亚洲| 欧美日韩国产在线一区| 亚洲一区精彩视频| 国产精品久久久久久久久久ktv| 欧美在线影院| 久久精品2019中文字幕| 国产欧美日韩亚州综合| 国产喷白浆一区二区三区| 欧美激情一区二区三区高清视频| 噜噜噜噜噜久久久久久91| 国内成人在线| 久久三级福利| 久久成人免费网| 激情综合中文娱乐网| 亚洲婷婷综合久久一本伊一区| 欧美亚洲综合网| 亚洲国产精品尤物yw在线观看| 宅男66日本亚洲欧美视频| 久久精品人人做人人综合| 一本色道久久综合亚洲精品按摩| 欧美日韩国产在线播放网站| 欧美伊人久久久久久午夜久久久久| 国产精品激情电影| 亚洲高清视频在线观看| 一二美女精品欧洲| 免费久久99精品国产自在现线| 尤物网精品视频| 国产女主播在线一区二区| 国产日本欧美一区二区三区在线| 欧美精品激情| 国产色综合天天综合网| 亚洲婷婷综合久久一本伊一区| 99热这里只有精品8| 国产精品久久久久久久久搜平片| 亚洲综合精品| 精东粉嫩av免费一区二区三区| 一级成人国产| 在线免费一区三区| 亚洲精品视频在线播放| 欧美日韩亚洲免费| 亚洲欧美成人一区二区在线电影| 国产一区二区三区成人欧美日韩在线观看| 欧美激情免费观看| 亚洲看片网站| 久久亚洲精品一区二区| 欧美日韩国产片| 韩国在线视频一区| 日韩一区二区精品| 欧美激情一区二区在线| 亚洲伊人一本大道中文字幕| 欧美中文字幕在线播放| 亚洲视频1区| 亚洲国产精品专区久久| 亚洲国产天堂网精品网站| 久久www成人_看片免费不卡| 老妇喷水一区二区三区| 久久久蜜桃精品| 国产亚洲欧美日韩在线一区| 欧美成人免费一级人片100| 亚洲永久免费| 久久久久久久999精品视频| 99视频精品全部免费在线| 亚洲国产婷婷香蕉久久久久久99| 久久亚洲精品网站| 亚洲一区二区视频在线观看| 国产精品福利在线观看网址| 欧美精品一区在线发布| 巨乳诱惑日韩免费av| 久久伊人一区二区| 亚洲三级性片| 国产日产精品一区二区三区四区的观看方式| 国产手机视频一区二区| 久久久久久伊人| 久久久www成人免费无遮挡大片| 国产精品午夜春色av| 欧美激情无毛| 国产欧美一区二区三区国产幕精品| 亚洲国产免费看| 国产精品亚洲综合久久| 韩国视频理论视频久久| 国产精品99久久99久久久二8| 亚洲最新在线视频| 韩国v欧美v日本v亚洲v| 欧美亚洲一区| 99精品免费网| 午夜免费电影一区在线观看| 国产精品九九久久久久久久| 欧美aa在线视频| 亚洲视屏一区| 欧美日韩一区免费| 国产在线拍偷自揄拍精品| 欧美—级a级欧美特级ar全黄| 国产日韩专区在线| 欧美精品日韩三级| 免费观看国产成人| 亚洲欧美精品suv| 欧美激情精品久久久久久免费印度| 国产九九视频一区二区三区| 国产欧美精品在线观看| 欧美激情aaaa| 欧美日韩一区二区三区视频| 亚洲午夜av| 亚洲少妇最新在线视频| 亚洲精品影院在线观看| 亚洲免费中文字幕| 亚洲国产高清一区| 欧美久久久久久| 国产欧美精品日韩区二区麻豆天美| 国产亚洲欧洲| 欧美黑人国产人伦爽爽爽| 欧美在线观看你懂的| 久久久蜜桃精品|