專利名稱:監(jiān)測雙目立體視頻視差信息的方法和裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及計(jì)算機(jī)圖像處理領(lǐng)域,特別涉及一種監(jiān)測雙目立體視頻視差信息的方法和裝置。
背景技術(shù):
在雙目立體采集過程中,立體視頻流的視差信息是評估最終立體視頻顯示質(zhì)量的關(guān)鍵指標(biāo),視差信息反映了物體的深度信息,可以用來描述場景的遠(yuǎn)近,另外不同的視差分布還會形成不同的觀看效果。視頻的立體匹配算法一般分為計(jì)算匹配代價、聚合匹配代價、計(jì)算視差和優(yōu)化視差圖四個步驟,可以根據(jù)視差計(jì)算方式的不同分為局部匹配算法和全局匹配算法。其中,全 局匹配算法的目標(biāo)是找到一個函數(shù)使全局能量函數(shù)最小,可利用整個圖像的信息獲取視差圖,但是復(fù)雜度高、計(jì)算量大,很難做到實(shí)時性。局部匹配算法采用WTA(Winner-Take-All)策略選取每個像素點(diǎn)的匹配代價最小的目標(biāo)像素點(diǎn)作為匹配點(diǎn),速度快,對于精度要求不高的實(shí)時監(jiān)測中經(jīng)常采用。但是,目前的局部匹配算法存在以下問題首先,因?yàn)楣铝⒌乜紤]當(dāng)前幀的顏色信息,對于實(shí)際拍攝內(nèi)容的處理存在較多的誤匹配現(xiàn)象,獲取的視差序列不夠穩(wěn)定和連貫,不符合監(jiān)測的要求,其次,隨著輸入視頻分辨率的增加,算法的復(fù)雜度也會迅速增加,難以滿足實(shí)時的要求。
發(fā)明內(nèi)容
本發(fā)明的目的旨在至少解決上述的技術(shù)缺陷之一。為達(dá)到上述目的,本發(fā)明一方面的實(shí)施例提出一種監(jiān)測雙目立體視頻視差信息的方法,包括以下步驟S1 :獲取所述雙目立體視頻的第一視頻幀對;S2 :對所述第一視頻幀對進(jìn)行顏色校正以獲得第二視頻幀對;S3 :對所述第二視頻幀對進(jìn)行局部立體匹配以獲得初始視差圖;S4 :對所述初始視差圖進(jìn)行時間一致性修正以獲得最終視差圖;以及S5 :對所述最終視差圖進(jìn)行直方圖統(tǒng)計(jì)以獲得視差分布信息。根據(jù)本發(fā)明實(shí)施例的方法,根據(jù)顏色校正、局部立體匹配和時間一致性修正等改進(jìn)措施,可以實(shí)現(xiàn)從未經(jīng)幾何校正的雙目立體視頻中獲取穩(wěn)定、準(zhǔn)確的視差圖和視差分布信息,同時可以方便設(shè)計(jì)程序以便于方便實(shí)現(xiàn)視差信息的實(shí)時監(jiān)測。本發(fā)明的一個實(shí)施例中,所述步驟S2具體包括S21 :確定所述第一視頻幀對的公共區(qū)域;S22 :分別對所述第一視頻幀對的左視圖和右視圖在所述公共區(qū)域中的各個顏色分量進(jìn)行直方圖分布統(tǒng)計(jì);S23 :根據(jù)所述直方圖分布分別計(jì)算所述左視圖和所述右視圖的累計(jì)直方圖;S24 :根據(jù)所述累計(jì)直方圖建立直方圖匹配函數(shù);以及S25 :根據(jù)所述直方圖匹配函數(shù)對所述第一視頻幀對進(jìn)行顏色校正以獲得第二視頻幀對。在本發(fā)明的一個實(shí)施例中,在所述步驟S2之后還包括對所述第二視頻幀對進(jìn)行邊緣檢測以獲得梯度圖對,其中,所述邊緣檢測包括sobel濾波。
本發(fā)明的一個實(shí)施例,所述步驟S3具體包括S31 :根據(jù)所述公共區(qū)域確定搜索范圍,其中,所述搜索范圍為矩形區(qū)域;S32 :根據(jù)所述梯度圖對計(jì)算所述公共區(qū)域中基準(zhǔn)圖的每個像素點(diǎn)在參考圖的所述搜索范圍中的多個像素點(diǎn)灰度差絕對值之和SAD ;S33 :根據(jù)所述多個SAD確定最小SAD,并計(jì)算所述最小SAD所對應(yīng)的所述參考圖像素點(diǎn)和所述基準(zhǔn)圖的像素點(diǎn)的橫向距離差以獲得初始視差值;S34 :判斷所述SAD是否符合約束條件;S35 :如果否,則將所述像素點(diǎn)的初始視差值賦值為0 ;S36 :將不在所述公共區(qū)域中的所述基準(zhǔn)圖的像素點(diǎn)的初始視差值賦值為0 ;以及S37 :根據(jù)所述基準(zhǔn)圖的每個像素點(diǎn)的初始視差值獲得所述初始視差圖。在本發(fā)明的一個實(shí)施例中,如果所述左視圖為基準(zhǔn)圖,所述右視圖為參考圖,則所述左視圖的待匹配像素點(diǎn)p(x,y)在所述右視圖中的搜索范圍為(x-ndisp,y±a)和(x,y±a)四點(diǎn)所確定的矩形區(qū)域;如果所述右視圖為基準(zhǔn)圖,所述左視圖為參考圖,則所述右視圖的待匹配像素點(diǎn)q(x,y)在所述左視圖中的搜索范圍為(x+ndisp,y±a)和(x,y±a)四點(diǎn)所確定的矩形區(qū)域,ndisp表示所述公共區(qū)域的寬度值,a表示預(yù)設(shè)值。在本發(fā)明的一個實(shí)施例中,所述約束條件包括局部極小值抑制約束條件和雙向匹 配約束條件。在本發(fā)明的一個實(shí)施例中,所述步驟S4具體包括S41 :獲取所述基準(zhǔn)圖的運(yùn)動區(qū)域和靜止區(qū)域;S42 :對所述靜止區(qū)域的像素點(diǎn)的初始視差值按照以下公式進(jìn)行所述時間一致性修正以獲得所述最終視差圖,mP,k) = PDiP,k-1) + (1-PWiIK幻,P e靜止區(qū)域其
中,/)(/ ,幻表示第k幀中像素點(diǎn)p未加入時間一致性約束時的初始視差值,D(p,k-1)表示k_l幀中像素點(diǎn)p加入時間一致性約束后的初始視差值,P為時間一致性約束因子;以及S43 :對所述最終視差圖進(jìn)行中值濾波。為達(dá)到上述目的,本發(fā)明的實(shí)施例另一方面提出一種監(jiān)測雙目立體視頻的視差信息的裝置,包括獲取模塊,用于獲取所述雙目立體視頻的第一視頻幀對;顏色校正模塊,用于對所述第一視頻幀對進(jìn)行顏色校正以獲得第二視頻幀對;立體匹配模塊,用于對所述第二視頻幀對進(jìn)行局部立體匹配以獲得初始視差圖;修正模塊,用于對所述初始視差圖進(jìn)行時間一致性修正以獲得最終視差圖;以及統(tǒng)計(jì)模塊,用于對所述最終視差圖進(jìn)行直方圖統(tǒng)計(jì)以獲得視差分布信息。根據(jù)本發(fā)明實(shí)施例的監(jiān)測雙目立體視頻的視差信息的裝置,根據(jù)顏色校正、局部立體匹配和時間一致性修正等改進(jìn)措施,可以實(shí)現(xiàn)從未經(jīng)幾何校正的雙目立體視頻中獲取穩(wěn)定、準(zhǔn)確的視差圖和視差分布信息,可以實(shí)現(xiàn)視差信息的實(shí)時監(jiān)測。在本發(fā)明的一個實(shí)施例中,所述顏色校正模塊包括確定單元,用于確定所述第一視頻幀對的公共區(qū)域;統(tǒng)計(jì)單元,用于分別對所述第一視頻幀對的左視圖和右視圖在所述公共區(qū)域中的各個顏色分量進(jìn)行直方圖分布統(tǒng)計(jì);計(jì)算單元,用于根據(jù)所述直方圖分布分別計(jì)算所述左視圖和所述右視圖的累計(jì)直方圖;建立單元,用于根據(jù)所述累計(jì)直方圖建立直方圖匹配函數(shù);以及獲取單元,用于根據(jù)所述直方圖匹配函數(shù)對所述第一視頻幀對進(jìn)行顏色校正以獲得第二視頻幀對。在本發(fā)明的一個實(shí)施例中,所述監(jiān)測雙目立體視頻視差信息的裝置還包括濾波模塊,用于對所述第二視頻幀對進(jìn)行邊緣檢測以獲得梯度圖對,其中,所述邊緣檢測包括sobel濾波。
在本發(fā)明的一個實(shí)施例中,所述立體匹配模塊具體包括確定單元,用于根據(jù)所述公共區(qū)域確定搜索范圍,其中,所述搜索范圍為矩形區(qū)域;第一計(jì)算單元,用于根據(jù)所述梯度圖對計(jì)算所述公共區(qū)域中基準(zhǔn)圖的每個像素點(diǎn)在參考圖的所述搜索范圍中的多個像素點(diǎn)灰度差絕對值之和SAD ;第二計(jì)算單元,用于根據(jù)所述多個SAD確定最小SAD,并計(jì)算所述最小SAD所對應(yīng)的所述參考圖像素點(diǎn)和所述基準(zhǔn)圖的像素點(diǎn)的橫向距離差以獲得初始視差值;判斷單元,用于判斷所述SAD是否符合約束條件;第一賦值單元,當(dāng)不符合約束條件時,將所述像素點(diǎn)的初始視差值賦值為0 ;第二賦值單元,將不在所述公共區(qū)域中的所述基準(zhǔn)圖的像素點(diǎn)的初始視差值賦值為0 ;以及獲取單元,用于根據(jù)所述基準(zhǔn)圖的每個像素點(diǎn)的初始視差值獲得所述初始視差圖。在本發(fā)明的一個實(shí)施例中,如果所述左視圖為基準(zhǔn)圖,所述右視圖為參考圖,則所述左視圖的待匹配像素點(diǎn)P(x,y)在所述右視圖中的搜索范圍為(x-ndisp,y±a)和(x,y±a)四點(diǎn)所確定的矩形區(qū)域;如果所述右視圖為基準(zhǔn)圖,所述左視圖為參考圖,則所述右視圖的待匹配像素點(diǎn)q(x,y)在所述左視圖中的搜索范圍為(x+ndisp,y±a)和(x,y±a)四點(diǎn)所確定的矩形區(qū)域,ndisp表示所述公共區(qū)域的寬度值,a表示預(yù)設(shè)值。 在本發(fā)明的一個實(shí)施例中,所述約束條件包括局部極小值抑制約束條件和雙向匹配約束條件。在本發(fā)明的一個實(shí)施例中,所述修正模塊具體包括獲取單元,用于獲取所述基準(zhǔn)圖的運(yùn)動區(qū)域和靜止區(qū)域;修正單元,用于對所述靜止區(qū)域的像素點(diǎn)的初始視差值按照以下公式進(jìn)行所述時間一致性修正以獲得所述最終視差圖,D{p,k) = j3D(p,k-\) + {\- f3)D(p,k) ^ p G靜止區(qū)域其中,表示第k幀中像素點(diǎn)p未
加入時間一致性約束時的初始視差值,D (p,k-1)表示k-1幀中像素點(diǎn)p加入時間一致性約束后的初始視差值,P為時間一致性約束因子;以及濾波單元,用于對所述最終視差圖進(jìn)行中值濾波。本發(fā)明附加的方面和優(yōu)點(diǎn)將在下面的描述中部分給出,部分將從下面的描述中變得明顯,或通過本發(fā)明的實(shí)踐了解到。
本發(fā)明上述的和/或附加的方面和優(yōu)點(diǎn)從下面結(jié)合附圖對實(shí)施例的描述中將變得明顯和容易理解,其中圖I為本發(fā)明實(shí)施例的監(jiān)測雙目立體視頻視差信息的方法的流程圖;圖2為本發(fā)明實(shí)施例的對第一視頻幀對進(jìn)行顏色校正以獲得第二視頻幀對的流程圖;圖3為本發(fā)明實(shí)施例的立體匹配搜索范圍的示意圖;圖4為本發(fā)明實(shí)施例的實(shí)時監(jiān)測雙目立體視頻視差信息的裝置的框架圖;圖5為本發(fā)明實(shí)施例的顏色校正模塊的框架圖;以及圖6為本發(fā)明實(shí)施例的立體匹配模塊的框架圖。
具體實(shí)施例方式下面詳細(xì)描述本發(fā)明的實(shí)施例,實(shí)施例的示例在附圖中示出,其中自始至終相同或類似的標(biāo)號表示相同或類似的元件或具有相同或類似功能的元件。下面通過參考附圖描述的實(shí)施例是示例性的,僅用于解釋本發(fā)明,而不能解釋為對本發(fā)明的限制。在本發(fā)明的描述中,需要理解的是,術(shù)語“第一”、“第二”、“第三”、“第四”僅用于描述目的,而不能理解為指示或暗示相對重要性或者隱含指明所指示的技術(shù)特征的數(shù)量。由此,限定有“第一”、“第二”、“第三”、“第四”的特征可以明示或者隱含地包括一個或者更多個該特征。在本發(fā)明的描述中,“多個”的含義是兩個或兩個以上,除非另有明確具體的限定。圖I為本發(fā)明實(shí)施例的監(jiān)測雙目立體視頻視差信息的方法的流程圖。如圖I所示,根據(jù)本發(fā)明實(shí)施例的監(jiān)測雙目立體視頻視差信息的方法,包括以下步驟步驟SlOl,獲取雙目立體視頻的第一視頻幀對。具體地,可以從輸入的雙目立體視頻中提取一對視頻幀作為第一視頻幀對,其中,第一視頻幀對為同一時刻兩個雙目相機(jī)所拍攝到的一對視頻幀。
步驟S102,對第一視頻幀對進(jìn)行顏色校正以獲得第二視頻幀對。圖2為本發(fā)明實(shí)施例的對第一視頻幀對進(jìn)行顏色校正以獲得第二視頻幀對的流程圖,具體地,如圖2所示,步驟S102包括以下步驟步驟S211,確定第一視頻幀對的公共區(qū)域。更具體地,由于雙目拍攝系統(tǒng)中左右相機(jī)位置不同,兩個相機(jī)所能拍攝到的場景范圍不同,其中,公共區(qū)域是指兩個相機(jī)中公共的拍攝內(nèi)容,反映到立體視頻幀對中是指左右視圖可以在另一視圖中找到對應(yīng)點(diǎn)的區(qū)域,可以通過人機(jī)交互模式對實(shí)際場景進(jìn)行估計(jì)以給定視差搜索范圍ndisp,則左視圖的公共區(qū)域?yàn)榕c左邊界距離大于ndisp的像素點(diǎn),右視圖的公共區(qū)域?yàn)榕c右邊界距離大于ndisp的像素點(diǎn)。步驟S212,分別對第一視頻幀對的左視圖和右視圖在公共區(qū)域中的各個顏色分量進(jìn)行直方圖分布統(tǒng)計(jì)。更具體地,設(shè)H1Ji)和札, (1)分別表示左右視圖中u顏色分量等于i的像素點(diǎn)占總像素點(diǎn)個數(shù)的比例,Iu(Xj)和Ir,u(x,y)分別表示左右視圖中位于(x,y)位置的像素點(diǎn)U的顏色分量值,對左右視圖中各顏色的所有取值進(jìn)行概率統(tǒng)計(jì),可得到直方圖統(tǒng)計(jì)結(jié)果,具體統(tǒng)計(jì)方法如下公式所示,
IW-I h-l
Lu {w - ndisp)* h
^0039-I '〗w-Lp h-l
{w-ndisp)* h x,=0 v,=0其中,w和h分別表示視圖的寬度和高度,ndisp為給定的視差搜索范圍,函數(shù)O (a,b)的定義如下,
[l,a = bcr(o,6) = ^。
權(quán)利要求
1.一種監(jiān)測雙目立體視頻視差信息的方法,其特征在于,包括以下步驟 Si:獲取所述雙目立體視頻的第一視頻幀對; 52:對所述第一視頻幀對進(jìn)行顏色校正以獲得第二視頻幀對; 53:對所述第二視頻幀對進(jìn)行局部立體匹配以獲得初始視差圖; 54:對所述初始視差圖進(jìn)行時間一致性修正以獲得最終視差圖;以及 55:對所述最終視差圖進(jìn)行直方圖統(tǒng)計(jì)以獲得視差分布信息。
2.根據(jù)權(quán)利要求I所述的監(jiān)測雙目立體視頻視差信息的方法,其特征在于,所述步驟S2具體包括 S21 :確定所述第一視頻幀對的公共區(qū)域; S22:分別對所述第一視頻幀對的左視圖和右視圖在所述公共區(qū)域中的各個顏色分量進(jìn)行直方圖分布統(tǒng)計(jì); 523:根據(jù)所述直方圖分布分別計(jì)算所述左視圖和所述右視圖的累計(jì)直方圖; 524:根據(jù)所述累計(jì)直方圖建立直方圖匹配函數(shù);以及 525:根據(jù)所述直方圖匹配函數(shù)對所述第一視頻幀對進(jìn)行顏色校正以獲得第二視頻幀對。
3.根據(jù)權(quán)利要求2所述的監(jiān)測雙目立體視頻視差信息的方法,其特征在于,在所述步驟S2之后還包括 對所述第二視頻幀對進(jìn)行邊緣檢測以獲得梯度圖對,其中,所述邊緣檢測包括sobel濾波。
4.根據(jù)權(quán)利要求3所述的監(jiān)測雙目立體視頻視差信息的方法,其特征在于,所述步驟S3具體包括 S31 :根據(jù)所述公共區(qū)域確定搜索范圍,其中,所述搜索范圍為矩形區(qū)域; S32:根據(jù)所述梯度圖對計(jì)算所述公共區(qū)域中基準(zhǔn)圖的每個像素點(diǎn)在參考圖的所述搜索范圍中的多個像素點(diǎn)灰度差絕對值之和SAD ; 533:根據(jù)所述多個SAD確定最小SAD,并計(jì)算所述最小SAD所對應(yīng)的所述參考圖像素點(diǎn)和所述基準(zhǔn)圖的像素點(diǎn)的橫向距離差以獲得初始視差值; 534:判斷所述SAD是否符合約束條件; 535:如果否,則將所述像素點(diǎn)的初始視差值賦值為0 ; 536:將不在所述公共區(qū)域中的所述基準(zhǔn)圖的像素點(diǎn)的初始視差值賦值為0 ;以及 537:根據(jù)所述基準(zhǔn)圖的每個像素點(diǎn)的初始視差值獲得所述初始視差圖。
5.根據(jù)權(quán)利要求4所述的監(jiān)測雙目立體視頻視差信息的方法,其特征在于,如果所述左視圖為基準(zhǔn)圖,所述右視圖為參考圖,則所述左視圖的待匹配像素點(diǎn)P(x,y)在所述右視圖中的搜索范圍為(x-ndisp, y±a)和(x,y±a)四點(diǎn)所確定的矩形區(qū)域;如果所述右視圖為基準(zhǔn)圖,所述左視圖為參考圖,則所述右視圖的待匹配像素點(diǎn)q(x,y)在所述左視圖中的搜索范圍為(x+ndisp, y±a)和(x,y±a)四點(diǎn)所確定的矩形區(qū)域,ndisp表示所述公共區(qū)域的寬度值,a表示預(yù)設(shè)值。
6.根據(jù)權(quán)利要求4所述的監(jiān)測雙目立體視頻視差信息的方法,其特征在于,所述約束條件包括局部極小值抑制約束條件和雙向匹配約束條件。
7.根據(jù)權(quán)利要求4所述的方法,其特征在于,所述步驟S4具體包括·541:獲取所述基準(zhǔn)圖的運(yùn)動區(qū)域和靜止區(qū)域; ·542:對所述靜止區(qū)域的像素點(diǎn)的初始視差值按照以下公式進(jìn)行所述時間一致性修正以獲得所述最終視差圖, /)(p.,k) = /J!)(p.,A- - i) + (! - P)/)(p,A-) ^ p G靜止區(qū)域 其中,DCp j)表示第k幀中像素點(diǎn)P未加入時間一致性約束時的初始視差值,D (P,k-1)表示k-1幀中像素點(diǎn)P加入時間一致性約束后的初始視差值,0為時間一致性約束因子;以及 ·543:對所述最終視差圖進(jìn)行中值濾波。
8.—種監(jiān)測雙目立體視頻視差信息的裝置,其特征在于,包括 獲取模塊,用于獲取所述雙目立體視頻的第一視頻幀對; 顏色校正模塊,用于對所述第一視頻幀對進(jìn)行顏色校正以獲得第二視頻幀對; 立體匹配模塊,用于對所述第二視頻幀對進(jìn)行局部立體匹配以獲得初始視差圖; 修正模塊,用于對所述初始視差圖進(jìn)行時間一致性修正以獲得最終視差圖;以及 統(tǒng)計(jì)模塊,用于對所述最終視差圖進(jìn)行直方圖統(tǒng)計(jì)以獲得視差分布信息。
9.根據(jù)權(quán)利要求8所述的監(jiān)測雙目立體視頻視差信息的裝置,其特征在于,所述顏色校正模塊具體包括 確定單元,用于確定所述第一視頻幀對的公共區(qū)域; 統(tǒng)計(jì)單元,用于分別對所述第一視頻幀對的左視圖和右視圖在所述公共區(qū)域中的各個顏色分量進(jìn)行直方圖分布統(tǒng)計(jì); 計(jì)算單元,用于根據(jù)所述直方圖分布分別計(jì)算所述左視圖和所述右視圖的累計(jì)直方圖; 建立單元,用于根據(jù)所述累計(jì)直方圖建立直方圖匹配函數(shù);以及獲取單元,用于根據(jù)所述直方圖匹配函數(shù)對所述第一視頻幀對進(jìn)行顏色校正以獲得第二視頻幀對。
10.根據(jù)權(quán)利要求9所述的監(jiān)測雙目立體視頻視差信息的裝置,其特征在于,還包括 濾波模塊,用于對所述第二視頻幀對進(jìn)行邊緣檢測以獲得梯度圖對,其中,所述邊緣檢測包括sobel濾波。
11.根據(jù)權(quán)利要求10所述的監(jiān)測雙目立體視頻視差信息的裝置,其特征在于,所述立體匹配模塊具體包括 確定單元,用于根據(jù)所述公共區(qū)域確定搜索范圍,其中,所述搜索范圍為矩形區(qū)域;第一計(jì)算單元,用于根據(jù)所述梯度圖對計(jì)算所述公共區(qū)域中基準(zhǔn)圖的每個像素點(diǎn)在參考圖的所述搜索范圍中的多個像素點(diǎn)灰度差絕對值之和SAD ; 第二計(jì)算單元,用于根據(jù)所述多個SAD確定最小SAD,并計(jì)算所述最小SAD所對應(yīng)的所述參考圖像素點(diǎn)和所述基準(zhǔn)圖的像素點(diǎn)的橫向距離差以獲得初始視差值; 判斷單元,用于判斷所述SAD是否符合約束條件; 第一賦值單元,當(dāng)不符合約束條件時,將所述像素點(diǎn)的初始視差值賦值為0 ; 第二賦值單元,將不在所述公共區(qū)域中的所述基準(zhǔn)圖的像素點(diǎn)的初始視差值賦值為0 ;以及 獲取單元,用于根據(jù)所述基準(zhǔn)圖的每個像素點(diǎn)的初始視差值獲得所述初始視差圖。
12.根據(jù)權(quán)利要求11所述的監(jiān)測雙目立體視頻視差信息的裝置,其特征在于,如果所述左視圖為基準(zhǔn)圖,所述右視圖為參考圖,則所述左視圖的待匹配像素點(diǎn)P(x,y)在所述右視圖中的搜索范圍為(x-ndisp, y±a)和(x,y±a)四點(diǎn)所確定的矩形區(qū)域;如果所述右視圖為基準(zhǔn)圖,所述左視圖為參考圖,則所述右視圖的待匹配像素點(diǎn)q(x,y)在所述左視圖中的搜索范圍為(x+ndisp, y±a)和(x,y±a)四點(diǎn)所確定的矩形區(qū)域,ndisp表示所述公共區(qū)域的寬度值,a表示預(yù)設(shè)值。
13.根據(jù)權(quán)利要求11所述的監(jiān)測雙目立體視頻視差信息的裝置,其特征在于,所述約束條件包括局部極小值抑制約束條件和雙向匹配約束條件。
14.根據(jù)權(quán)利要求11所述的監(jiān)測雙目立體視頻視差信息的裝置,其特征在于,所述修正模塊具體包括 獲取單元,用于獲取所述基準(zhǔn)圖的運(yùn)動區(qū)域和靜止區(qū)域; 修正單元,用于對所述靜止區(qū)域的像素點(diǎn)的初始視差值按照以下公式進(jìn)行所述時間一致性修正以獲得所述最終視差圖,/)(/;,k) = mp-a - ) (I-/ )/)(p,/c), p G靜止區(qū)域 其中,夕)表示第k幀中像素點(diǎn)P未加入時間一致性約束時的初始視差值,D (P,k-1)表示k-1幀中像素點(diǎn)p加入時間一致性約束后的初始視差值,P為時間一致性約束因子;以及 濾波單元,用于對所述最終視差圖進(jìn)行中值濾波。
全文摘要
本發(fā)明提出一種監(jiān)測雙目立體視頻視差信息的方法和裝置,其中該方法包括以下步驟獲取雙目立體視頻的第一視頻幀對;對第一視頻幀對進(jìn)行顏色校正以獲得第二視頻幀對;對第二視頻幀對進(jìn)行局部立體匹配以獲得初始視差圖;對初始視差圖進(jìn)行時間一致性修正以獲得最終視差圖;以及對最終視差圖進(jìn)行直方圖統(tǒng)計(jì)以獲得視差分布信息。根據(jù)本發(fā)明實(shí)施例的方法,根據(jù)顏色校正、局部立體匹配和時間一致性修正等改進(jìn)措施,可以實(shí)現(xiàn)從未經(jīng)幾何校正的雙目立體視頻中獲取穩(wěn)定、準(zhǔn)確的視差圖和視差分布信息。
文檔編號H04N17/02GK102802020SQ201210320899
公開日2012年11月28日 申請日期2012年8月31日 優(yōu)先權(quán)日2012年8月31日
發(fā)明者戴瓊海, 趙昱, 邵航 申請人:清華大學(xué)