專利名稱：處理三維立體影像的系統(tǒng)與方法
技術(shù)領(lǐng)域：
本發(fā)明是關(guān)于一種影像處理系統(tǒng)，特別是關(guān)于一種三維(3D)立體影像處理系統(tǒng)。
背景技術(shù)：
為了增加影像的真實感，三維(3D)立體影像技術(shù)越來越多地應(yīng)用在各種領(lǐng)域，例如廣播、游戲、動畫及虛擬實境等。人類所看見的立體視覺是由橫向間隔的左右兩眼產(chǎn)生的像差所造成。由于兩眼的像差，左眼及右眼可分別接收同一景象在兩個不同角度下的影像。然后大腦可結(jié)合所述的兩個影像，以產(chǎn)生3D立體視覺 的深度感。若欲在影像呈現(xiàn)中產(chǎn)生立體感，通常需通過擷取或產(chǎn)生兩組影像，以仿真左眼視野或右眼視野。當(dāng)所述的兩個影像顯示在二維的屏幕上時，可利用一種特殊觀看裝置(例如眼鏡)分離兩個影像，使得兩眼中的每一眼僅可看到其相應(yīng)的影像。然后大腦再將所述的兩個不同的影像結(jié)合，以產(chǎn)生深度感。為了呈現(xiàn)立體影像，可使用兩臺攝影機(jī)擷取在稍微不同角度下的兩個影像。然后使用一種立體影像匹配技術(shù)來找出兩個影像間的像差，并建構(gòu)出與兩個影像的像素相關(guān)的深度值。深度值通常用來代表攝影機(jī)的視角及影像中的多個點(diǎn)之間的距離信息，且可與左視圖及右視圖搭配使用，以合成3D立體影像。依據(jù)計算機(jī)算法的不同，像差圖及深度圖可能儲存不準(zhǔn)確的像差值及深度值。例如，當(dāng)某一特征僅見于一影像并在另一個影像無法找到相應(yīng)的匹配時，將產(chǎn)生遮蔽區(qū)域，其相應(yīng)的像差值及深度值通常難以估計。雖然已知技術(shù)可使用一些更復(fù)雜的算法解決遮蔽的問題，但其提高計算的成本。有鑒于此，目前的需求為一種更有效處理立體影像，并可改善至少上述缺失的系統(tǒng)。

發(fā)明內(nèi)容
本發(fā)明提供一種處理立體影像的系統(tǒng)及方法。依據(jù)本發(fā)明一實施例，該立體影像處理系統(tǒng)包括一接收單元，用以接收一對立體影像；以及一影像處理單元，其中該影像處理單元配置以執(zhí)行以下步驟根據(jù)該立體影像對計算出一第一深度圖；于該第一深度圖中選取一窗口并從該窗口判斷多個極端深度值；根據(jù)該等極端深度值定義出一過濾圖；以及通過結(jié)合該過濾圖及該第一深度圖計算出一第二深度圖。依據(jù)本發(fā)明一實施例，該過濾圖由一個二次函數(shù)定義，該二次函數(shù)為a X2+ β X+ γ , α、β及γ皆為常數(shù)。依據(jù)本發(fā)明一實施例，該等極端深度值包括一最小深度值及一最大深度值，該最小深度值分配的常數(shù)為α及Y，該最大深度值分配的常數(shù)為β。依據(jù)本發(fā)明一實施例，該第二深度圖通過以一第一權(quán)重系數(shù)加重的該第一深度圖、及以一第二權(quán)重系數(shù)加重的該過濾圖相加后取得。依據(jù)本發(fā)明一實施例，該第一權(quán)重系數(shù)與該第二權(quán)重系數(shù)的總和等于I。
依據(jù)本發(fā)明一實施例，該窗口的中心對應(yīng)該第一深度圖的一中央?yún)^(qū)域。依據(jù)本發(fā)明一實施例，該影像處理單元還可利用一雙向立體影像匹配方法計算出該立體影像對的一像差圖，并根據(jù)該像差圖 取得該第一深度圖。依據(jù)本發(fā)明一實施例，該影像處理單元可將該像差圖中的一遮蔽空洞由其鄰近像素區(qū)域的深度值填滿。依據(jù)本發(fā)明一實施例，該影像處理單元可將該像差圖中的一邊界空洞由其鄰近像素區(qū)域的深度值填滿。依據(jù)本發(fā)明另一實施例，提供一種處理立體影像的方法，包括根據(jù)一對立體影像計算出一第一深度圖；產(chǎn)生一對應(yīng)該第一深度圖的過濾圖；以及結(jié)合該第一深度圖及該過濾圖，以得到一第二深度圖。依據(jù)本發(fā)明一實施例，產(chǎn)生該過濾圖的步驟包括從該第一深度圖中選取一窗口 ；從該窗口中判斷多個極端深度值；以及根據(jù)該等極端深度值產(chǎn)生該過濾圖。依據(jù)本發(fā)明一實施例，該過濾圖由一過濾函數(shù)所定義，該過濾函數(shù)F(X)=a X2+ β X+ γ , α、β及γ皆為與該極端深度值有關(guān)的常數(shù)。依據(jù)本發(fā)明一實施例，該極端深度值包括一最小深度值及一最大深度值，該最小深度值分配的常數(shù)為α及Y，該最大深度值分配的常數(shù)為β。 依據(jù)本發(fā)明一實施例，該窗口的中心對應(yīng)于該第一深度圖的中央。依據(jù)本發(fā)明一實施例，結(jié)合該第一深度圖及該過濾圖的步驟包括以一第一權(quán)重系數(shù)加重該第一深度圖；以一第二權(quán)重系數(shù)加重該過濾圖；以及將加重后的該第一深度圖與該過濾圖相加。依據(jù)本發(fā)明一實施例，該第一權(quán)重系數(shù)與該第二權(quán)重系數(shù)的總和等于I。依據(jù)本發(fā)明一實施例，根據(jù)該立體影像對計算出該第一深度圖的步驟包括利用一雙向立體影像匹配方法計算出該立體影像對的一像差圖；以及根據(jù)該像差圖取得該第一深度圖。依據(jù)本發(fā)明一實施例，利用該雙向立體影像匹配方法計算出該立體影像對的該像差圖的步驟還包括將該像差圖中的一遮蔽空洞由其鄰近像素區(qū)域的深度值填滿。依據(jù)本發(fā)明一實施例，利用該雙向立體影像匹配方法計算該立體影像對的該像差圖的步驟包括將該像差圖中的一邊界空洞由其鄰近像素區(qū)域的深度值填滿。


圖I為繪示依據(jù)本發(fā)明一實施例所提供的立體影像處理系統(tǒng)的簡化方塊圖。圖2為繪示依據(jù)本發(fā)明一實施例在立體影像系統(tǒng)中所提供的深度圖擷取單元的方塊圖。圖3繪示依據(jù)本發(fā)明一實施例為產(chǎn)生像差圖dMAP所執(zhí)行的估計像差值的方法的示意圖。圖4繪示依據(jù)本發(fā)明一實施例在像差圖中處理邊界及遮蔽等空洞的方法的示意圖。圖5繪示依據(jù)本發(fā)明一實施例如何產(chǎn)生過濾圖fMAP的示意圖。
圖6繪示依據(jù)本發(fā)明一實施例計算深度圖ZMAP的流程圖。[主要元件標(biāo)號說明]100 3D立體影像處理系統(tǒng)102 接收單元104 影像處理單元106 顯示裝置110 深度圖擷取單元112 3D立體呈現(xiàn)引擎122 估計器124 深度圖產(chǎn)生器125 深度圖過濾單元126 過濾產(chǎn)生器128 組合模塊L左視角影像
·
R 右視角影像dMAP 像差圖fMAP過濾圖zMAP 深度圖ZMAP修正深度圖W1^2權(quán)重系數(shù)BK1、BK2、BK1'、BK2'像素塊Ax、Ax'位移量LB 左側(cè)邊邊界區(qū)域RB右側(cè)邊邊界區(qū)域OBU 0B2 特征202A、204A 遮蔽空洞202B.204B像素區(qū)域206A左側(cè)邊邊界空洞206B 像素區(qū)域208A右側(cè)邊邊界空洞208B 像素區(qū)域dMAP (L)左像差圖dMAP (R) 右像差圖W窗口Zmax 最大深度值Zmin最小深度值
具體實施例方式圖I為繪示依據(jù)本發(fā)明一實施例所提供的立體影像處理系統(tǒng)100的簡化方塊圖。立體影像處理系統(tǒng)100可包括一接收單元102、一影像處理單元104及一顯示裝置106。當(dāng)輸入影像數(shù)據(jù)時，接收單元102可接收影像數(shù)據(jù)，并將影像數(shù)據(jù)轉(zhuǎn)換為適當(dāng)?shù)母袷胶?，再將影像?shù)據(jù)傳送至影像處理單元104。舉例來說，輸入至接收單元102的影像數(shù)據(jù)可包括一左視角影像L(left_view image)以及一右視角影像R(right_view image),左視角影像L及右視角影像R分別代表從兩個攝影機(jī)從兩個不同觀點(diǎn)(perspective)(即左眼及右眼觀點(diǎn))擷取同一景象的二維(2D)影像。接收單元102可調(diào)整左視角影像L及右視角影像R為適當(dāng)?shù)母袷剑缓髠魉妥笠暯怯跋馤及右視角影像R所組成的立體影像對(stereoscopicpair)至影像處理單元104。影像處理單元104可包括一深度圖擷取單元110及一 3D立體呈現(xiàn)引擎112，其中深度圖擷取單元110用以計算與左視角影像L及右視角影像R相關(guān)的一深度圖ZMAP，而3D立體呈現(xiàn)引擎112則用以根據(jù)深度圖ZMAP處理左視角影像L及右視角影像R，以產(chǎn)生顯示于顯示裝置106上的3D立體影像框(3D stereoscopic image frame)。圖2為繪示依據(jù)本發(fā)明一實施例在立體影像系統(tǒng)100中所提供的深度圖擷取單元110的方塊圖。深度圖擷取單元110可包括一像差估計器122、一深度圖產(chǎn)生器124及一深度圖過濾單元125，其中深度圖過濾單元125可包括一過濾產(chǎn)生器126及一組合模塊128。像差估計器122可通過估計左視角影像L及右視角影像R中相對應(yīng)的像素或像素群組之間的位移量(amount of displacement),來針對左視角影像L/右視角影像R中的每個像素計算出一像差值(!(disparity value),且像差估計器122可針對左視角影像L及右視角影像R產(chǎn)生一相對應(yīng)的像差圖dMAP，像差圖dMAP包含所有的像差值d。根據(jù)像差圖dMAP中的像差值d，深度圖產(chǎn)生器124可推得一深度圖zMAP，深度圖zMAP包含與左視角影像L/右視角影像R中的像素或像素群組有關(guān)的深度值z。其中深度值z為景象點(diǎn)及攝影機(jī)之間的距離，其反比于像差值d，并可根據(jù)下列方程式(I)推導(dǎo)得到其中C是一個與兩個攝影機(jī)之間的距離以及攝影機(jī)的焦距有關(guān)的參數(shù)函數(shù)。深度圖過濾單元125可接收來自深度圖產(chǎn)生器124的某些參數(shù)，并可通過過濾產(chǎn)生器126產(chǎn)生一過濾圖fMAP，過濾圖fMAP所包含的深度值可根據(jù)一過濾函數(shù)來定義,其中該過濾函數(shù)為根據(jù)深度圖產(chǎn)生器124所提供的深度圖zMAP的某些特征決定。過濾圖fMAP包含的深度值可用來修正可能出現(xiàn)在深度圖zMAP中的非正確深度值，例如不正確的邊界深度值。組合模塊128可接收來自深度圖產(chǎn)生器124輸出的深度圖zMAP，以及來自過濾產(chǎn)生器126輸出的過濾圖fMAP，并將深度圖zMAP與過濾圖fMAP結(jié)合，以推得修正后的深度圖ZMAP0圖3繪示依據(jù)本發(fā)明一實施例為產(chǎn)生像差圖dMAP所執(zhí)行的估計像差值的方法的示意圖。為計算來自左視角影像L及右視角影像R的像差數(shù)據(jù)，可利用一種雙向立體影像匹配的方法(bidirectional stereo matching approach)測量左視角影像L及右視角影像R中相對應(yīng)的像素或像素群組之間的位移量。雙向立體影像匹配的方法可包括正向及反向的匹配步驟。正向匹配的步驟中，左視角影像L的像素塊BKl中的像素值可視為參考值，可用來與右視角影像R的像素塊BK2中的像素值比較，而且像素塊BK2是從像素塊BKl的位置向右位移一位移量ΛΧ。根據(jù)一實施例，可對于匹配的像素塊BKl與像素塊ΒΚ2計算其像素值間的綜合差別(aggregate of differences),例如通過傳統(tǒng)的絕對值差的和(sumof absolute difference, SAD),以便判斷是否匹配成功。如此,可針對左視角影像L的每一個像素或像素塊BKl估計其像差值,而這些像差值可以灰階值被記錄于像差圖dMAP中。反向匹配的步驟中，右視角影像R的像素塊ΒΚ?？梢暈閰⒖贾?，可用來與左視角影像L的像素塊BK2’比較，而像素塊BK2'是從像素塊BKl'的位置向左位移一位移量Af。當(dāng)像素塊ΒΚΓ與像素塊BK2'的匹配成功時，可針對右視角影像R的每一個像素或像素塊BKl'估計其像差值。通過執(zhí)行前述的雙向立體影像匹配的方法，可得到兩個像差圖，以便精確地檢測對應(yīng)于像差圖中的「空洞(hole)」的邊界(boundary)及遮蔽(occlusion)。圖4為繪示依據(jù)本發(fā)明一實施例在像差圖中處理邊界及遮蔽等空洞的方法的示意圖。一個遮蔽的存在通常系指在被擷取的景象中，一特征OBl (例如遮物)至少遮蔽部分另一個特征0B2(例如開口)，使左視角影像L(或右視角影像R)中的部分特征0B2在進(jìn)行立體影像匹配時，于右視角影像R(或左視角影像L)中找不到任何匹配。藉此，相對應(yīng)的遮蔽空洞202A及204A可分別出現(xiàn)在對應(yīng)左視角影像L及右視角影像R的左像差圖dMAP(L)及右像差圖dMAP(R)(及深度圖)，其中左像差圖dMAP(L)可通過執(zhí)行一正向立體影像匹配步驟而取得，而右像差圖dMAP(R)則可通過執(zhí)行一反向立體影像匹配步驟而取得。另外，側(cè)邊邊界區(qū)域，例如左視角影像L中的左側(cè)邊邊界LB，以及右視角影像R中的右側(cè)邊邊界RB，亦可為沒有匹配的區(qū)域，使左像差圖dMAP(L)及右像差圖dMAP(R)中分別產(chǎn)生相對應(yīng)的側(cè)邊邊界空洞206A及208A。根據(jù)一實施例，像差圖dMAP (L)及dMAP (R)中的遮蔽空洞202A及204A可由其鄰近像素的像差數(shù)據(jù)加以填滿。舉例來說，如圖4所示，左像差圖dMAP (L)中的遮蔽空洞202A可由其左側(cè)邊的鄰近像素區(qū)域202B的像差值填滿，此像素區(qū)域202B可對應(yīng)于顯示在左視角影像L中的部分特征0B2的左側(cè)邊附近的像素區(qū)域。在右像差圖dMAP (R)中，遮蔽空洞204A可類似地由其右側(cè)邊的鄰近像素區(qū)域204B的像差值填滿，此像素區(qū)域204B可對應(yīng)于顯示在右視角影像R中的部分特征0B2的右側(cè)邊附近的像素區(qū)域。相同地，左像差圖dMAP(L)中的左側(cè)邊邊界空洞206A可由其右側(cè)邊的鄰近像素區(qū)域206B的像差值填滿。右像差圖dMAP (R)中的右側(cè)邊邊界空洞208A可由其左側(cè)邊的鄰近像素區(qū)域208B的像差值填滿。當(dāng)左像差圖dMAP(L)中有一個右側(cè)邊邊界空洞，或右像差圖 dMAP(R)中有一個左側(cè)邊邊界空洞時，可類似地使用其鄰近像素區(qū)域的像素值(例如對于左像差圖dMAP (L)中的右側(cè)邊邊界空洞208A為其鄰近左側(cè)邊像素區(qū)域的像素值，對于右像差圖dMAP(R)中的左側(cè)邊邊界空洞206A則是其鄰近右側(cè)邊像素區(qū)域的像素值)填滿這些邊界空洞。利用鄰近像素區(qū)域的像差值填滿對應(yīng)于遮蔽及側(cè)邊邊界的空洞時，便可節(jié)省計算成本及時間。然而，根據(jù)另一個實施例，亦可視需求而運(yùn)用其它方式(例如內(nèi)差法)來填滿空洞。請再次參考圖2，深度圖產(chǎn)生器124可從像差估計器122建立的像差圖dMAP計算出一個或多個深度圖zMAP。實際實施時，產(chǎn)生深度圖的分析可反映出某些深度圖zMAP中在鄰近于側(cè)邊邊界的不連續(xù)區(qū)域可能含有錯誤的最大深度值，這些錯誤的深度值可能導(dǎo)致不正確的立體呈現(xiàn)。為了修正這些異常，過濾產(chǎn)生器126可建立一過濾圖fMAP，并以該過濾圖fMAP修正深度圖zMAP。圖5繪示依據(jù)本發(fā)明一實施例如何產(chǎn)生過濾圖fMAP的示意圖。假設(shè)需呈現(xiàn)為具有深度及立體感的主要物像位于影像的中央?yún)^(qū)域，則可于深度圖zMAP中選取一窗口 W，其中窗口 W的中心對應(yīng)深度圖zMAP的中央?yún)^(qū)域，且在窗口 W內(nèi)估計出最大深度值Zmax及最小深度值Zmin。然后利用最大深度值Zmax及最小深度值Zmin定義出過濾圖fMAP的一過濾函數(shù)。根據(jù)一實施例，過濾函數(shù)可定義為一碗狀或拋物線狀的二次函數(shù)，如下列方程式(2)所示F (X) = a X2+ β X+ Y..........................(2)其中α、β及Υ可為常數(shù)。過濾圖fMAP可具有與深度圖zMAP相同的像素尺寸。此外，過濾圖fMAP中所定義的深度值較佳地介于最大深度值Zmax及最小深度值Zmin之間。根據(jù)一實施例，指定參數(shù)α及Y為最小深度值Zmin (即a = Y =Zmin)，且指定參數(shù)β為最大深度值Zmax (即β =Zmax)。產(chǎn)生過濾函數(shù)后，可通過組合模塊128將過濾圖fMAP與深度圖zMAP組合，以產(chǎn)生修正深度圖ZMAP。根據(jù)一實施例，可根據(jù)下列方程式(3)計算出修正深度圖ZMAP:ZMAP=W1 X zMAP+w2 X fMAP(3)其中W1及W2為權(quán)重系數(shù)，兩者的總和等于I (即Wl+W2=l)。
權(quán)重系數(shù)W1及W2可以是深度圖zMAP中根據(jù)像素位置的函數(shù)，例如權(quán)重系數(shù)W1在接近深度圖zMAP的中央處為較大，在接近深度圖zMAP的邊界處則為較小，而權(quán)重系數(shù)W2在接近深度圖zMAP的中央處為較小，在接近深度圖zMAP的邊界處則為較大。根據(jù)一較簡單的實施例，權(quán)重系數(shù)W1及W2亦可以是固定的常數(shù)系數(shù)，以減少計算成本，例如重系數(shù)W1可以約等于O. 3，權(quán)重系數(shù)W2可以約等于O. 7。圖6繪示依據(jù)本發(fā)明一實施例計算深度圖ZMAP的流程圖。于起始步驟602中，由接收單元102接收一對立體影像，該立體影像對可包括左視角影像L及右視角影像R，左視角影像L及右視角影像R分別代表左眼及右眼的視覺觀點(diǎn)。在步驟604中，深度圖產(chǎn)生器124可根據(jù)左視角影像L及右視角影像R計算出第一深度圖zMAP。如上所述，第一深度圖zMAP可從像差估計器122產(chǎn)生的像差圖dMAP計算出來。特別的是，可運(yùn)用一雙向立體影像匹配方法來估計像差圖dMAP，且像差圖dMAP中因遮蔽而產(chǎn)生的空洞可由其鄰近像素區(qū)域的像差值填滿，如先前圖4所述。在步驟606中，可從第一深度圖zMAP選擇一個窗口 W。根據(jù)一實施例，窗口 W的中 心可對應(yīng)第一深度圖zMAP的中央?yún)^(qū)域。在步驟608中，包括最大深度值Zmax及最小深度值Zmin的極端深度值可從窗口 W擷取出來。在步驟610中，可將這些極端深度值從深度圖產(chǎn)生器124傳送至過濾產(chǎn)生器126，以建立過濾圖fMAP。如上所述，過濾圖fMAP可由具有碗形或拋物線形的二次方程式定義。在步驟612中，組合模塊128可以權(quán)重系數(shù)W1加重深度圖zMAP，并以權(quán)重系數(shù)W2加重過濾圖fMAP后，再將兩者相加，如先前方程式⑶所示，從而運(yùn)用過濾圖fMAP于深度圖zMAP。因此，從組合模塊128輸出的修正深度圖ZMAP (第二深度圖)實質(zhì)上已經(jīng)移除了異常。所述的立體影像處理系統(tǒng)具有至少一優(yōu)點(diǎn)在于，可修正深度圖中的異常深度數(shù)據(jù)及遮蔽空洞，具有成本的效益。因此，可更流暢地顯示3D立體影像?？梢岳斫獾氖?，本發(fā)明所述的元件可以不同形式的硬件、軟件或兩者的組合來實現(xiàn)，可通過專用硬件以及可執(zhí)行軟件的硬件來提供元件的功能。舉例來說，可利用單一的專用處理器、共享處理器或多個獨(dú)立的處理器來執(zhí)行功能。以上敘述依據(jù)本發(fā)明多個不同實施例，其中各項特征可以單一或不同結(jié)合方式實施。因此，本發(fā)明實施方式的揭露為闡明本發(fā)明原則的具體實施例，應(yīng)不拘限本發(fā)明于所揭示的實施例。進(jìn)一步言之，先前敘述及其附圖僅為本發(fā)明示范之用，并不受其限囿。其它元件的變化或組合皆可能，且不悖于本發(fā)明的精神與范圍。
權(quán)利要求
1.一種處理立體影像的系統(tǒng)，包括 一接收單元，用以接收一對立體影像；以及 一影像處理單元，其中該影像處理單元配置以執(zhí)行以下步驟 根據(jù)該立體影像對計算出一第一深度圖； 于該第一深度圖中選取一窗口并從該窗口判斷多個極端深度值； 根據(jù)該多個極端深度值定義出一過濾圖；以及 通過結(jié)合該過濾圖及該第一深度圖計算出一第二深度圖。
2.根據(jù)權(quán)利要求I所述的立體影像處理系統(tǒng)，其中該過濾圖由一個二次函數(shù)定義，該二次函數(shù)為a X2+ β X+ γ，α、β及γ皆為常數(shù)。
3.根據(jù)權(quán)利要求2所述的立體影像處理系統(tǒng)，其中該多個極端深度值包括一最小深度值及一最大深度值，該最小深度值分配的常數(shù)為α及Y，該最大深度值分配的常數(shù)為β。
4.根據(jù)權(quán)利要求I所述的立體影像處理系統(tǒng)，其中該第二深度圖通過以一第一權(quán)重系數(shù)加重的該第一深度圖、及以一第二權(quán)重系數(shù)加重的該過濾圖相加后取得。
5.根據(jù)權(quán)利要求4所述的立體影像處理系統(tǒng)，其中該第一權(quán)重系數(shù)與該第二權(quán)重系數(shù)的總和等于I。
6.根據(jù)權(quán)利要求I所述的立體影像處理系統(tǒng)，其中該窗口的中心對應(yīng)該第一深度圖的一中央?yún)^(qū)域。
7.根據(jù)權(quán)利要求I所述的立體影像處理系統(tǒng)，其中該影像處理單元還可利用一雙向立體影像匹配方法計算出該立體影像對的一像差圖，并根據(jù)該像差圖取得該第一深度圖。
8.根據(jù)權(quán)利要求7所述的立體影像處理系統(tǒng)，其中該影像處理單元可將該像差圖中的一遮蔽空洞由其鄰近像素區(qū)域的深度值填滿。
9.根據(jù)權(quán)利要求7所述的立體影像處理系統(tǒng)，其中該影像處理單元可將該像差圖中的一邊界空洞由其鄰近像素區(qū)域的深度值填滿。
10.一種處理立體影像的方法，包括 根據(jù)一對立體影像計算出一第一深度圖； 產(chǎn)生一對應(yīng)該第一深度圖的過濾圖；以及 結(jié)合該第一深度圖及該過濾圖，以得到一第二深度圖。
11.根據(jù)權(quán)利要求10所述的處理立體影像的方法，其中產(chǎn)生該過濾圖的步驟包括 從該第一深度圖中選取一窗口； 從該窗口中判斷多個極端深度值；以及 根據(jù)該多個極端深度值產(chǎn)生該過濾圖。
12.根據(jù)權(quán)利要求11所述的處理立體影像的方法，其中該過濾圖由一過濾函數(shù)所定義，該過濾函數(shù)F (X) = a X2+β X+γ，α、β及γ皆為與該極端深度值有關(guān)的常數(shù)。
13.根據(jù)權(quán)利要求12所述的處理立體影像的方法，其中該極端深度值包括一最小深度值及一最大深度值，該最小深度值分配的常數(shù)為α及Y，該最大深度值分配的常數(shù)為β。
14.根據(jù)權(quán)利要求11所述的處理立體影像的方法，其中該窗口的中心對應(yīng)于該第一深度圖的中央。
15.根據(jù)權(quán)利要求10所述的處理立體影像的方法，其中結(jié)合該第一深度圖及該過濾圖的步驟包括以一第一權(quán)重系數(shù)加重該第一深度圖； 以一第二權(quán)重系數(shù)加重該過濾圖；以及 將加重后的該第一深度圖與該過濾圖相加。
16.根據(jù)權(quán)利要求15所述的處理立體影像的方法，其中該第一權(quán)重系數(shù)與該第二權(quán)重系數(shù)的總和等于I。
17.根據(jù)權(quán)利要求10所述的處理立體影像的方法，其中根據(jù)該立體影像對計算出該第一深度圖的步驟包括 利用一雙向立體影像匹配方法計算出該立體影像對的一像差圖；以及 根據(jù)該像差圖取得該第一深度圖。
18.根據(jù)權(quán)利要求17所述的處理立體影像的方法，其中利用該雙向立體影像匹配方法計算出該立體影像對的該像差圖的步驟還包括 將該像差圖中的一遮蔽空洞由其鄰近像素區(qū)域的深度值填滿。
19.根據(jù)權(quán)利要求17所述的處理立體影像的方法，其中利用該雙向立體影像匹配方法計算該立體影像對的該像差圖的步驟包括 將該像差圖中的一邊界空洞由其鄰近像素區(qū)域的深度值填滿。
全文摘要
一種立體影像處理系統(tǒng)，包括一接收單元及一影像處理單元，該接收單元可接收一對立體影像，該影像處理單元可根據(jù)該立體影像對計算出一第一深度圖，于該第一深度圖中選取一窗口并從該窗口判斷多個極端深度值，根據(jù)該多個極端深度值定義出一過濾圖，以及通過結(jié)合該過濾圖及該第一深度圖計算出一第二深度圖。
文檔編號H04N13/04GK102957937SQ201210209608
公開日2013年3月6日 申請日期2012年6月20日 優(yōu)先權(quán)日2011年8月12日
發(fā)明者王宗仁 申請人:奇景光電股份有限公司