《電子技術(shù)應(yīng)用》
您所在的位置:首頁(yè) > 嵌入式技術(shù) > 設(shè)計(jì)應(yīng)用 > 視差圖提取技術(shù)與OpenGL三維重建
視差圖提取技術(shù)與OpenGL三維重建
來(lái)源:微型機(jī)與應(yīng)用2012年第9期
羅桂娥,陳少華,,劉小群
(中南大學(xué) 信息科學(xué)與工程學(xué)院,,湖南 長(zhǎng)沙 410083)
摘要: 在研究區(qū)域匹配算法和特征匹配算法的基礎(chǔ)上,提出了改進(jìn)的基于視差梯度的區(qū)域匹配算法和基于尺度不變性的Harris角點(diǎn)特征匹配算法,,并進(jìn)一步利用互補(bǔ)策略將兩種算法結(jié)合起來(lái),,提出了一種區(qū)域和特征匹配相結(jié)合的立體匹配算法,該算法具有速度快,、精度高和魯棒性強(qiáng)等優(yōu)點(diǎn),。利用該算法提取視差圖,進(jìn)而提取深度圖,,最后利用OpenGL進(jìn)行三維重建,,獲得了良好的重建效果。
Abstract:
Key words :

摘  要: 在研究區(qū)域匹配算法和特征匹配算法的基礎(chǔ)上,,提出了改進(jìn)的基于視差梯度的區(qū)域匹配算法和基于尺度不變性的Harris角點(diǎn)特征匹配算法,,并進(jìn)一步利用互補(bǔ)策略將兩種算法結(jié)合起來(lái),提出了一種區(qū)域和特征匹配相結(jié)合的立體匹配算法,,該算法具有速度快,、精度高和魯棒性強(qiáng)等優(yōu)點(diǎn)。利用該算法提取視差圖,,進(jìn)而提取深度圖,,最后利用OpenGL進(jìn)行三維重建,獲得了良好的重建效果,。
關(guān)鍵詞: 視差梯度,;尺度不變性;互補(bǔ)策略,;OpenGL

 三維重建技術(shù)是計(jì)算機(jī)視覺(jué),、人工智能、虛擬現(xiàn)實(shí)等前沿領(lǐng)域的熱點(diǎn)和難點(diǎn),,也是人類在基礎(chǔ)研究和應(yīng)用研究中面臨的重大挑戰(zhàn)之一[1],?;陔p目立體視覺(jué)的三維重建技術(shù)在機(jī)器人視覺(jué)、工業(yè)制造以及醫(yī)學(xué)影像診斷等多個(gè)領(lǐng)域具有廣闊的應(yīng)用前景,。
 基于雙目立體視覺(jué)的三維重建技術(shù)的首要條件是對(duì)左右圖像對(duì)進(jìn)行立體匹配從而獲得高質(zhì)量的視差圖像,。在獲取視差圖像后,通過(guò)計(jì)算這些視差圖像上對(duì)應(yīng)點(diǎn)之間的視差提取出場(chǎng)景的深度,,得到反映空間物體縱深關(guān)系的深度圖像,,最后利用OpenGL進(jìn)行三維重建。
 本文在對(duì)經(jīng)典的區(qū)域匹配和特征匹配算法進(jìn)行研究的基礎(chǔ)上對(duì)算法進(jìn)行改進(jìn),,并將兩種算法結(jié)合起來(lái)提出新的立體匹配算法,。利用該算法提取出質(zhì)量較好的視差圖,然后利用平行雙目視覺(jué)三角測(cè)量原理來(lái)計(jì)算物體深度值進(jìn)而獲得物體的深度圖像,,獲得了良好的深度圖像,,最后利用OpenGL對(duì)深度數(shù)據(jù)進(jìn)行三維重建,取得了較好的重建效果,。
1 基于雙目立體視覺(jué)的視差圖像提取
 提取高質(zhì)量的視差圖像是基于雙目立體視覺(jué)的三維重建技術(shù)的首要條件[2],。立體匹配算法的實(shí)質(zhì)是在匹配基元相似性準(zhǔn)則下的最佳搜索問(wèn)題。根據(jù)匹配基元的不同,,目前的立體匹配算法可分為基于區(qū)域的匹配算法,、基于特征的匹配算法和基于相位的匹配算法3類。本文重點(diǎn)研究區(qū)域匹配與特征匹配算法,。
1.1 區(qū)域匹配算法研究及改進(jìn)
 根據(jù)區(qū)域匹配算法的原理可知,,計(jì)算匹配代價(jià)以及對(duì)匹配代價(jià)進(jìn)行累積是區(qū)域匹配算法的重點(diǎn)[3]。本文從測(cè)度函數(shù)以及窗口大小的選擇兩方面進(jìn)行改進(jìn),,提出一種新的基于視差梯度的區(qū)域匹配算法,。
在區(qū)域匹配算法中,當(dāng)圖像對(duì)中存在像素的灰度分布與常態(tài)不同的點(diǎn)或者是有很大的噪聲時(shí),,常用的測(cè)度函數(shù)在匹配中就會(huì)產(chǎn)生誤匹配[4],。本文采用一種新的函數(shù)作為相似性測(cè)度函數(shù)來(lái)解決該問(wèn)題,該函數(shù)的表達(dá)式及其導(dǎo)數(shù)的表達(dá)式為:

 采用改進(jìn)的Harris檢測(cè)算子從位置和尺度上提取具有尺度不變性的角點(diǎn)之后,,接下來(lái)就要為每個(gè)Harris角點(diǎn)構(gòu)造特征描述子即特征向量,。這樣,特征匹配算法就轉(zhuǎn)化為利用測(cè)度函數(shù)來(lái)判斷特征向量的相似程度從而確定所提取的角點(diǎn)是否就是匹配的,。在具體實(shí)現(xiàn)時(shí),,為了進(jìn)一步減少匹配誤差,采用雙向匹配的策略,。
1.3 區(qū)域和特征匹配相結(jié)合算法的研究
 基于視差梯度的區(qū)域匹配算法能夠半自適應(yīng)地選擇匹配窗口,,而且搜索范圍的減少使得匹配的速度提高了,,但是區(qū)域匹配算法的特點(diǎn)還是決定了該算法具有對(duì)輻射畸變及仿射畸變較敏感,、計(jì)算量大以及速度較慢等缺陷,;而基于尺度不變特征的Harris角點(diǎn)特征匹配算法在匹配的穩(wěn)定性以及匹配結(jié)果的精度方面有很大的提高,但是由于特征匹配的特點(diǎn),,得到的視差圖還是稀疏的,。針對(duì)這兩種算法的不足,本文采用互補(bǔ)策略,,充分利用區(qū)域匹配的致密性以及特征匹配的魯棒性,,將兩種算法結(jié)合起來(lái),以彌補(bǔ)相互的缺陷,?;诖怂枷耄岢隽嗽谶吘壓徒屈c(diǎn)提取的基礎(chǔ)上進(jìn)行區(qū)域和特征相結(jié)合的立體匹配算法,。
 區(qū)域和特征相結(jié)合的立體匹配算法的具體實(shí)現(xiàn)步驟是:首先對(duì)左右立體圖像對(duì)進(jìn)行灰度化,、濾波降噪、銳化等預(yù)處理,,然后對(duì)預(yù)處理后的圖像對(duì)運(yùn)用Canny算子提取邊緣特征,,在此基礎(chǔ)上采用改進(jìn)的Harris檢測(cè)算子提取角點(diǎn),再對(duì)提取邊緣后的圖像對(duì)求取視差梯度δd,,對(duì)于1.2<|δd|<2的圖像邊緣點(diǎn)進(jìn)行基于邊緣區(qū)域的特征匹配,,最后借助于區(qū)域的灰度對(duì)特征匹配后得到的圖像對(duì)中視差梯度|δd|<1.2的平滑區(qū)域進(jìn)行基于視差梯度的區(qū)域匹配,從而得到最終的視差圖,。區(qū)域和特征匹配相結(jié)合算法的匹配流程圖如圖1所示,。

 

 

1.4 算法分析
 利用本文提出的算法對(duì)標(biāo)準(zhǔn)的TsuKuba立體圖像對(duì)提取視差圖。標(biāo)準(zhǔn)的TsuKuba立體圖像對(duì)如圖2所示,,相應(yīng)的基于梯度的區(qū)域匹配算法,、基于尺度不變特性的Harris角點(diǎn)特征匹配算法和本文提出的基于區(qū)域和特征匹配相結(jié)合的算法提取的視差圖如圖3所示。實(shí)驗(yàn)結(jié)果表明,,本算法比基于梯度的區(qū)域匹配算法,、尺度不變特性的Harris角點(diǎn)特征匹配算法匹配效果更好。

 本文提出的區(qū)域和特征匹配相結(jié)合算法具有以下優(yōu)勢(shì):(1)較為快速,,因?yàn)樵趨^(qū)域匹配中引入視差梯度,,這樣可以減少匹配時(shí)不必要的搜索從而提高匹配的精度和速度;(2)得到的是較為密集的視差圖,,可以得到高精度的匹配結(jié)果,; (3)由于基于尺度不變特征的Harris角點(diǎn)匹配算法的引入而具有了很好的穩(wěn)定性,提升了算法的魯棒性,。綜合以上特點(diǎn),,本文的算法成功綜合了基于梯度的區(qū)域匹配算法和基于尺度不變特性的Harris角點(diǎn)特征匹配算法的優(yōu)點(diǎn)。
2 基于OpenGL平臺(tái)的物體三維重建
 OpenGL是目前國(guó)際上通用的開(kāi)放式三維圖形標(biāo)準(zhǔn)。OpenGL實(shí)際上是一個(gè)開(kāi)放的三維圖形軟件包,,它獨(dú)立于窗口系統(tǒng)和操作系統(tǒng),,以它為基礎(chǔ)開(kāi)發(fā)的應(yīng)用程序可以十分方便地在各種平臺(tái)間移植,它強(qiáng)大的圖形庫(kù)函數(shù)為圖形圖像的開(kāi)發(fā)提供了方便,。
2.1 OpenGL中深度數(shù)據(jù)的三維重建方法
 由于三角形能保證3個(gè)頂點(diǎn)在同一平面上,,本文采用Delaunay三角剖分方法將所有的數(shù)據(jù)點(diǎn)連成三角網(wǎng)格,很好地重現(xiàn)了原始物體表面的拓?fù)浣Y(jié)構(gòu),,并利用OpenGL實(shí)現(xiàn)三維重建,,其具體步驟如下:
 (1)對(duì)OpenGL進(jìn)行初始化,,即設(shè)置像素格式,,為OpenGL提供繪制風(fēng)格、顏色模式,、顏色位元數(shù)和深度位元數(shù)等信息,。
 (2)根據(jù)基本像素建立景物的三維模型,,并對(duì)模型進(jìn)行數(shù)學(xué)描述,。這里需要利用OpenGL的函數(shù)GL_POLYGON和glVertex3d等函數(shù)。
?。?)把景物放置在三維空間的適當(dāng)位置,,設(shè)置三維透視視覺(jué)體以觀察場(chǎng)景。
?。?)加入光照及光照條件,、材質(zhì)。
?。?)把景物及其顏色信息轉(zhuǎn)化為可在屏幕上顯示的像素信息,。
2.2 三維重建結(jié)果
    重建的三維模型如圖4所示。實(shí)驗(yàn)結(jié)果表明,,重建的三維物體逼真,、真實(shí)感強(qiáng),通過(guò)放大,、縮小,、平移和旋轉(zhuǎn)等方式展示各個(gè)方向的三維模型,視覺(jué)效果令人滿意,。

    本文研究并改進(jìn)了經(jīng)典的區(qū)域匹配和特征匹配算法,,在改進(jìn)的基礎(chǔ)上提出了區(qū)域匹配和特征匹配相結(jié)合的立體匹配算法,該算法充分發(fā)揮了兩種算法的優(yōu)勢(shì),。利用該算法進(jìn)行立體匹配,,獲得了高質(zhì)量的視差圖;然后根據(jù)三角測(cè)量原理利用獲得的視差圖進(jìn)行深度的計(jì)算提取深度圖;最后在基于MFC的OpenGL平臺(tái)下進(jìn)行三維重建,,取得了較好的重建效果,。要想進(jìn)一步提高重建模型的效果,可以在立體匹配算法上進(jìn)行進(jìn)一步研究,,以期獲得更好的視差圖和深度圖。
參考文獻(xiàn)
[1] OKADA K,, INABA M. Integration of real-time binocular stereo vision and whole body information for dynamic walking navigation of humanoid robot[J]. IEEE Conference on Multisensor Fusion and Integration for Intelligence Systems,, 2003:131-136.
[2] 馬頌德,張正友.計(jì)算機(jī)視覺(jué)——計(jì)算理論與算法基礎(chǔ)[M].北京:科學(xué)出版社,,1998.
[3] 周秀芝,,文貢堅(jiān),王潤(rùn)生.自適應(yīng)窗口快速立體匹配[J].中國(guó)圖象圖形學(xué)報(bào),,2006,,29(3):473-479.
[4] 羅小燕.一種基于目標(biāo)區(qū)域綜合特征的圖像檢索方法[J].微計(jì)算機(jī)信息,2005(17):214-216.
[5] 周東翔,,蔡宣平,,孫茂印.一種基于特征約束的立體匹配算法[J].中國(guó)圖象圖形學(xué)報(bào),2001,,6(7):563-656.

此內(nèi)容為AET網(wǎng)站原創(chuàng),,未經(jīng)授權(quán)禁止轉(zhuǎn)載。