《電子技術應用》
您所在的位置:首頁 > 其他 > 業界動態 > 單目圖像序列中三維信息的提取算法及應用

單目圖像序列中三維信息的提取算法及應用

2008-04-10
作者:方曉瑩1,2,王小君2

  摘 要: 分析了三維信息的提取在視頻監控系統中的重要性,指出了傳統標定算法的局限性。在線性攝像機模型基礎上,提出了一種基于圖像網格的非線性校正算法,完成對攝像機參數的標定,實現三維信息的重建。以實際交通錄像為仿真對象,證明了該算法的有效性。
  關鍵詞: 單目圖像 三維信息 非線性校正 單應性矩陣


  近年來,應用攝像機等視覺傳感器及計算機視覺" title="計算機視覺">計算機視覺理論對車輛進行識別與跟蹤在城市交通監控中有較大的發展。它涉及到視頻信號的采集、視頻信息的處理與分析、計算機人工智能等。其中交通信息的采集與分析是最基礎,也是最重要的環節,需要根據圖像中的二維信息來提取實際空間中的三維信息。許多文獻中都提到了采用攝像機標定" title="攝像機標定">攝像機標定來完成從二維到三維的轉換[1~2],但傳統的標定算法都需要一個高精度的模板和不同角度的圖像。利用模板的精確數據" title="精確數據">精確數據與其圖像數據進行匹配來求得攝像機內外參數的方法有較大的局限性。有些采用雙目方法來恢復三維信息[3~4],但需要在兩幅圖像之間進行相關匹配。如果同一幅圖像上有多處極為相似,則容易出現匹配錯誤,且該算法的耗時會影響監控的實時性。本文提出了一種基于圖像網格的形變校正算法,由此計算單應性矩陣,無需用到標定塊,從而實現在單目圖像序列中提取車輛三維信息。該方法在智能交通系統ITS(Intelligent Traffic System)中有較好的應用。
1 系統概述
  本系統的信息流程圖如圖1所示。將由二維圖像獲取的信息,通過網格非線性校正算法計算從圖像平面到空間平面的變換系數,即二維單應性矩陣,由此進行對攝像機參數的標定,由內外參數矩陣確定三維單應性矩陣,即確定從二維圖像恢復到實際三維信息的變換關系。


2 攝像機成像幾何模型
  假定攝像機的成像模型為經典的小孔成像模型[5],即只考慮線性模型,暫不考慮透鏡引起的畸變,具體的幾何模型如圖2所示。


  由攝像機的光軸" title="光軸">光軸與圖像平面組成的直角坐標系稱為攝像機坐標系。如圖2中的O-XcYcZc為攝像機坐標系,O為光學中心,Zc軸與光軸重合,O1-xy為圖像平面坐標系(坐標原點在圖像中心),O2-uv為以像素點為單位的圖像平面坐標系。在O-XcYcZc坐標系下,O1點的坐標為(0,0,f),f為攝像機的焦距,同時在O2-uv坐標系下O1點的坐標為(u0,v0)。
  設空間一點P在攝像機坐標系下的坐標為(XcYcZc),通過透視投影而在成像平面上生成的對應像點的像素坐標為P′(u,v),兩者之間的比例關系用齊次坐標表示為:
  
  式中的su、sv分別為像素的寬度和高度,f、u0、v0、su、sv稱為攝像機的內參數。
  由于攝像機可以安放在環境中的任何位置,所以應在環境中選擇一個基準坐標系來描述攝像機的位置,該坐標系稱為世界坐標系。攝像機坐標系與世界坐標系之間的關系可以用旋轉矩陣R和平移向量μ來描述,因此空間點P在世界坐標系與攝像機坐標系下的齊次坐標之間有如下關系:
  
  其中,(X,Y,Z)為點P的世界坐標,R為3×3單位矩陣,μ為三維平移向量,OT=(0,0,0)。
  由式(1)、(2)可得點P的世界坐標與投影點P′的像素坐標之間的關系:
  
  M1只與攝像機的內參數有關,稱為內參數矩陣,M2與攝像機的外參數有關,稱為外參數矩陣,則式(3)可表示為:
  
  由上式可知,只要標定了攝像機的內外參數后,即可建立圖像點的像素坐標與實際點的世界坐標之間的關系。
  將外參數矩陣中的旋轉向量R表示為:
  R=[r1,r2,r3]
  其中r1,r2,r3均是3×1的矩陣,則可將式(4)表示為:
  
  在不失問題一般性的情況下,先假設標定物體位于世界坐標系中Z=0的平面內,則上式簡化為:
  
  傳統的標定方法中,在實際場景中設定一個高精度的標定塊,利用標定塊上點的精確數據與其圖像中的數據進行匹配,得到單應性矩陣H。本系統中的單應性矩陣H由基于網格的非線性校正算法求得。
3 基于網格的非線性校正算法
  在所攝取的圖像上建立坐標系,規定圖像的左上角頂點為坐標原點,如圖3所示。根據道路的交通標志" title="交通標志">交通標志線設定圖像中的網格線,對應到實際道路中的網格線和坐標系,如圖4所示。通過在圖像上取點獲取像素坐標可以計算出圖像網格中每條直線的方程,從而可得到各直線的交點坐標。在實際道路中由道路的寬度和交通標志線來確定實際道路網格的交點坐標。這兩類交點坐標之間有一一對應的關系,根據這些點坐標的對應,可以找到一個函數關系來反映圖像中所有點的坐標到實際坐標的映射。


  由于圖像上不同位置的點發生非線性形變的程度不同,如果所有的點都對應同一個映射關系,則不能保證校正的準確性。為了使坐標的變換更為準確,可以在圖像上和實際道路中建立小網格模型。在圖像中的每個網格上取若干個點,分別對應到實際網格的若干個點上,由這些點的坐標對應關系建立每個網格的坐標映射函數。在本算法中,將各網格分成9個小格,取其邊界和中心的16個點進行映射。這樣,在進行非線性坐標變換時,首先判斷被計算點所處的網格位置,再選擇相對應的映射函數進行變換。
  由于精確的函數難以求得,故采用近似的方法盡可能地逼近所求函數。在此校正算法中,采用最小二乘法[6]的曲線進行擬合。這里取基底函數Φ=Span{X,Y,1},所求的逼近函數用矩陣表示為:
  

  
  其中m為網格中的交點數,交點數越多擬合得越精確。
4 攝像機參數的確定
  在上面的算法中已經得到二維單應性矩陣,其中旋轉矩陣的各旋轉分量互相正交[7],所以r1×r2=0,于是可得到:

  要求得攝像機的內參數首先需要確定B的6個變量。對于確定的攝像機,分辨率是已知的,所以成像中心的像素值(u0,v0)可以得到。將矢量b表示為:
  
  所以只要確定兩個未知量就行了。將矩陣H的第i列矢量表示為:

  其中vij為6×1矩陣,各元素由已經求得的單應性矩陣的元素決定:
  
  于是就完成了攝像機參數的標定,確定了三維單應性矩陣,實現由二維信息到三維信息的變換。
5 實驗結果及在視頻監控中的應用
  為了驗證上述算法的有效性,將其應用于交通視頻監控系統中,以準確提取車輛信息。以上海某外環高架路段為測試對象,測試時間為2005年7月26日下午2:20~2:40,所用攝像機分辨率為1024×768。由本算法計算得到的內外參數分別如表1、表2所示。其中,fu、fv分別為攝像機在橫向與縱向上的焦距,(u0,v0)為成像中心點的像素坐標,r1,r2,r3為攝像機外參數中的旋轉向量,μ為外參數中的平移向量。


  由此對進入系統所設定的檢測區域內的車輛計算三維信息,在后續幀中根據這些信息對車輛進行識別與跟蹤。部分跟蹤效果如圖5所示(對尚未進入或已經出了檢測區域的車輛不進行跟蹤)。


  由圖5可以看出,由該算法提取的車輛信息較為準確,能對各車輛進行有效識別與跟蹤,且完全能滿足實時監控的需要。
  本文提出了一種從單目圖像序列中有效提取三維信息的算法,由基于網格的非線性校正算法求得單應性矩陣以完成對攝像機的標定。將該算法應用于實際交通錄像,其實驗結果表明算法具有較高的準確度,且運行速度較快,能滿足視頻監控的實時性要求,在ITS中有較好的應用前景。
參考文獻
1 馬頌德,張正友.計算機視覺——計算理論與算法基礎[M].北京:科學出版社,1998
2 全紅艷,張田文.一種新的利用模板進行攝像機自標定的方法[J].電子學報,2005;33(11):1941~1945
3 蔡健榮,趙杰文.雙目立體視覺系統攝像機標定[J].江蘇大學學報(自然科學版),2006;27(1):6~9
4 張劍清,張春森,賀少軍.雙目序列影像三維運動參數確定[J].武漢大學學報(信息科學版),2006;31(1):43~46
5 Zhang Z.A flexible new technique for camera calibration[J].IEEE Transactions on Pattern Analysis and Machine Intelligence,2000;22(11):1330~1334
6 沈劍華.數值計算基礎[M].上海:同濟大學出版社,1999
7 Meng X Q,Li H,Hu Z Y.A new easy camera calibration technique based on circular points[A].In:Proceedings of the british machine vision conference[C],2000:496~501

本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
热re99久久精品国产66热_欧美小视频在线观看_日韩成人激情影院_庆余年2免费日韩剧观看大牛_91久久久久久国产精品_国产原创欧美精品_美女999久久久精品视频_欧美大成色www永久网站婷_国产色婷婷国产综合在线理论片a_国产精品电影在线观看_日韩精品视频在线观看网址_97在线观看免费_性欧美亚洲xxxx乳在线观看_久久精品美女视频网站_777国产偷窥盗摄精品视频_在线日韩第一页
  • <strike id="ygamy"></strike>
  • 
    
      • <del id="ygamy"></del>
        <tfoot id="ygamy"></tfoot>
          <strike id="ygamy"></strike>
          久久九九久久九九| 亚洲欧美日韩爽爽影院| 先锋影音久久| 久久激情视频免费观看| 在线视频亚洲| 在线成人免费视频| 亚洲欧美综合网| av不卡在线| 国产精品亚洲人在线观看| 欧美精品aa| 久久三级福利| 国产亚洲永久域名| 蜜臀av性久久久久蜜臀aⅴ四虎| 欧美精品一区二区久久婷婷| 欧美激情一区二区在线| 亚洲国产一区在线观看| 欧美交受高潮1| 久久久综合香蕉尹人综合网| 欧美精品国产一区| 午夜精品国产更新| 亚洲一区久久久| 一区二区国产日产| ●精品国产综合乱码久久久久| 亚洲一区二区少妇| 欧美私人啪啪vps| 亚洲三级毛片| 一本一道久久综合狠狠老精东影业| 136国产福利精品导航网址| 亚洲毛片在线观看.| aa国产精品| 午夜老司机精品| 欧美成人第一页| 国产精品免费一区豆花| 母乳一区在线观看| 免费永久网站黄欧美| 国产精品免费福利| av成人老司机| 国产日韩欧美另类| 久久久久成人网| 欧美日韩在线观看一区二区| 国产精品视频一二| 国产一区二区无遮挡| 欧美不卡视频| 黄色成人免费观看| 欧美精品在线看| 亚洲午夜一区二区| 亚洲国产经典视频| 国产在线观看91精品一区| 亚洲国产视频一区二区| 一区二区日韩伦理片| 亚洲国产精品va在看黑人| 亚洲人成在线观看一区二区| 亚洲电影免费在线| 亚洲欧美日韩精品| 国产欧美一区二区精品性| 日韩午夜免费| 亚洲欧美国产高清| 亚洲免费精彩视频| 亚洲免费一区二区| 西瓜成人精品人成网站| 亚洲欧美精品中文字幕在线| 亚洲欧美一级二级三级| 亚洲一区免费观看| 久久精品人人做人人爽电影蜜月| 亚洲第一区中文99精品| 亚洲一区亚洲二区| 久久久高清一区二区三区| 午夜精品久久久久久99热软件| 国产欧美日韩精品a在线观看| 亚洲视频一二三| 午夜精品久久99蜜桃的功能介绍| 亚洲性视频h| 亚洲国产欧美在线人成| 欧美人交a欧美精品| 欧美日韩性视频在线| 免费成人在线观看视频| 激情综合中文娱乐网| 亚洲男人第一网站| 韩日成人在线| 欧美性理论片在线观看片免费| 亚洲自拍偷拍麻豆| 亚洲免费伊人电影在线观看av| 亚洲一区二区三区免费在线观看| 欧美国产激情| 国产精品久久久一区二区| 欧美韩日高清| 欧美日韩精品国产| 亚洲另类视频| 亚洲视频 欧洲视频| 一区二区三区 在线观看视| 欧美精品久久久久久| 麻豆亚洲精品| 性欧美1819性猛交| 一区二区三区国产精华| 欧美日韩999| 欧美国产乱视频| 99精品国产福利在线观看免费| 亚洲高清在线视频| 久久精品免费| 欧美午夜理伦三级在线观看| 日韩一级成人av| 黑人操亚洲美女惩罚| 欧美激情中文字幕一区二区| 欧美性开放视频| 欧美.日韩.国产.一区.二区| 亚洲天堂网站在线观看视频| 另类国产ts人妖高潮视频| 欧美高清视频在线| 欧美日韩一区二区精品| 欧美一区二区黄色| 性欧美1819sex性高清| 亚洲欧美日韩天堂| 激情成人在线视频| 国产精品成人观看视频免费| 欧美日韩另类字幕中文| 亚洲精品日日夜夜| 老司机精品视频网站| 午夜精品久久久久久久99水蜜桃| 国内自拍一区| 老色鬼精品视频在线观看播放| 欧美人在线视频| 欧美一区二区| 欧美日韩亚洲一区二区| 91久久综合| 欧美黄色大片网站| 一区二区在线视频| 欧美黄在线观看| 欧美一区1区三区3区公司| 一区二区三区在线免费播放| 国产精品久久久久国产精品日日| 日韩特黄影片| 在线观看日韩专区| 国产精品国产成人国产三级| 在线观看视频日韩| 亚洲天堂成人在线视频| 在线观看久久av| 欧美激情一区二区三区在线视频观看| 欧美精品日韩一区| 亚洲精选视频在线| 妖精成人www高清在线观看| 国产精品成人播放| 国产精品久久久久久久久免费桃花| 在线观看成人av电影| 亚洲欧美www| 亚洲美女中文字幕| 久久久91精品国产一区二区精品| 国产午夜精品一区二区三区欧美| 亚洲视频axxx| 国产伦精品一区二区三区照片91| 亚洲在线成人| 一区二区激情视频| 欧美国产一区视频在线观看| 国内精品久久久久国产盗摄免费观看完整版| 一区二区三区视频在线看| 一区二区三区日韩在线观看| 欧美一区久久| 亚洲日本一区二区三区| 亚洲欧美中文字幕| 国产精品久久久久久久久久妞妞| 欧美三级视频在线观看| 激情婷婷久久| 久色婷婷小香蕉久久| 欧美日韩在线播放三区| 免费久久99精品国产| 久久久久一区二区| 久久综合色播五月| 久久字幕精品一区| 免费看的黄色欧美网站| 国产视频不卡| 久久精品久久99精品久久| 亚洲国产另类 国产精品国产免费| 欧美精品在欧美一区二区少妇| 亚洲欧美中文日韩v在线观看| 老鸭窝毛片一区二区三区| 欧美日韩久久不卡| 亚洲免费中文字幕| 国产亚洲高清视频| 国产一区欧美| 尤物精品在线| 在线电影欧美日韩一区二区私密| 国产亚洲欧美aaaa| 在线午夜精品自拍| 在线免费不卡视频| 国产一区二区三区丝袜| 怡红院精品视频在线观看极品| 亚洲日韩欧美视频一区| 亚洲亚洲精品三区日韩精品在线视频| 在线观看国产日韩| 欧美视频观看一区| 国产美女高潮久久白浆| 最新日韩在线视频| 在线观看亚洲精品视频| 国外成人在线视频网站| 免费在线日韩av| 中日韩在线视频| 久久全国免费视频| 欧美aⅴ一区二区三区视频| 久久精品夜色噜噜亚洲aⅴ| 欧美一区二区视频在线观看2020| 最新国产乱人伦偷精品免费网站| 午夜欧美电影在线观看| 中文精品99久久国产香蕉| 久久中文精品| 久久国产色av| 亚洲激情电影在线| 欧美激情在线播放| 欧美精品在线免费观看| 欧美国产在线观看| 国内自拍视频一区二区三区| 欧美伦理a级免费电影| 国产一区二区三区在线观看视频| 免费视频一区| 欧美成人激情视频免费观看| 在线日韩av永久免费观看| 国产精品日韩精品欧美在线| 久久精品色图| 中文精品99久久国产香蕉| 欧美在线看片| 日韩视频在线一区| 亚洲精品久久久久久下一站| 欧美日韩综合网| 一本色道久久精品| 欧美视频在线观看视频极品| 欧美久久九九| 国内精品久久久久久久97牛牛| 久热精品视频在线观看一区| 久久精品一区| 日韩视频在线永久播放| 亚洲精品一区二区三区福利| 在线成人小视频| 亚洲欧美经典视频| 99国产精品| 亚洲国产日韩一级| 美腿丝袜亚洲色图| 国产精品99久久99久久久二8| 欧美日韩在线播放| 亚洲一区二区精品| 国产精品自在线| 尤物精品国产第一福利三区| 国产日韩精品入口| 亚洲国产三级在线| 国产日韩专区在线| 久久免费一区| 亚洲午夜在线视频| 欧美专区一区二区三区| 国产一区二区三区精品久久久| 国产精品另类一区| 久久午夜电影| 免费不卡在线视频| 伊人影院久久| 99视频一区二区三区| 一本色道婷婷久久欧美| 亚洲经典一区| 亚洲一区二区影院| 国产精品久久久久久久久久直播| 一区二区三区日韩精品视频| 在线精品一区二区| 99热在这里有精品免费| 午夜激情一区| 久久精品中文字幕免费mv| 精久久久久久久久久久| 久久www免费人成看片高清| 欧美日韩中文字幕| 一区二区三区无毛| 亚洲影视中文字幕| 免费日韩成人| 欧美aⅴ99久久黑人专区| 一区二区三区在线视频观看| 亚洲国产裸拍裸体视频在线观看乱了中文| 亚洲专区在线| 国产精品观看| 在线一区欧美| 久久九九国产精品| 国产精品日韩精品欧美在线| 一区在线视频观看| 狠狠色综合网站久久久久久久| 欧美日韩免费| 亚洲国产精品va在线看黑人动漫| 久久经典综合| 看片网站欧美日韩| 99在线热播精品免费| 国产精品色在线| 一本综合久久| 国产精品久久福利| 中文亚洲免费| 久久亚洲美女| 国产欧美综合在线| 亚洲欧美国产高清| 国产欧美日本一区视频| 欧美在线观看网站| 亚洲国产精品va在线看黑人| 亚洲欧美成人一区二区在线电影| 模特精品裸拍一区| 国产午夜精品一区理论片飘花| 国产精品av久久久久久麻豆网| 在线视频国内自拍亚洲视频| 伊人久久大香线蕉综合热线| 欧美亚洲尤物久久| 1024精品一区二区三区| 亚洲区免费影片| 一区二区三区日韩欧美| 9l视频自拍蝌蚪9l视频成人| 亚洲国产高潮在线观看| 国产精品成人aaaaa网站| 欧美乱在线观看| 极品尤物久久久av免费看| 狠狠狠色丁香婷婷综合久久五月| 欧美日韩和欧美的一区二区| 欧美在线免费看| 亚洲伦理在线观看| 国产精品久久久久天堂| 国产精品老女人精品视频| 亚洲大胆视频| 国产在线精品一区二区夜色| 久久经典综合| 欧美日韩中文字幕在线| 亚洲理伦电影| 99国产精品久久久久久久| 亚洲激情偷拍| 女人香蕉久久**毛片精品| 亚洲人成欧美中文字幕| 久久久久综合一区二区三区| 国产精品www网站| 欧美精品在线视频观看| 国产精品成人一区二区网站软件| 国产精品久久久久久久浪潮网站| 欧美一区二区福利在线| 亚洲黄色成人久久久|