專利名稱:深度控制方法和裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明有關(guān)于立體顯示(stereoscopic display),且尤其有關(guān)于根據(jù)深度相關(guān)(depth-related)信息圖(information map)的質(zhì)量測(cè)量結(jié)果,調(diào)整深度相關(guān)信息圖(如視差圖(disparity map)或深度圖(depth map))的深度控制方法和相關(guān)裝置。
背景技術(shù):
隨著科技的不斷發(fā)展,高清圖像已無法滿足需求,用戶開始追求立體和更真實(shí)的圖像顯示。目前立體顯示有兩種技術(shù),一種技術(shù)采用視頻顯示裝置并附帶眼鏡,其中眼鏡如紅藍(lán)/紅綠眼鏡(anaglyph glasses)、偏光眼鏡(polarization glasses)或快門眼鏡(shutter glasses);而另一種技術(shù)僅采用視頻顯示裝置,并不需要附帶眼鏡。無論采用哪種技術(shù),立體顯示的主要原理在于使左眼和右眼看到不同的圖像,如此一來,觀看者的大腦就會(huì)將兩只眼睛觀察到的不同圖像視為立體圖像。在一般的二維(two-dimensional,2D)顯不中,焦距(focal distance)/ 焦面(focal plane)與會(huì)聚距離(convergence distance)/會(huì)聚面(convergence plane)相同。而在三維(three-dimensional, 3D)顯示中,焦面位于顯示屏上,會(huì)聚面可能與焦面存在偏差。若存在不恰當(dāng)?shù)氖?,可能?huì)給觀看者帶來不舒適的立體體驗(yàn)。舉例來說,若顯示的3D物體太遠(yuǎn)或者太近,觀看者可能會(huì)有不舒適的立體體驗(yàn)。此外,若3D物體添加過多或過少的立體效應(yīng)(stereo effect),觀看者可能也會(huì)有不舒適的立體體驗(yàn)。因此,為了改進(jìn)立體顯示質(zhì)量,需要一種自適應(yīng)深度調(diào)整方法和裝置,用來動(dòng)態(tài)改變?cè)?D環(huán)境中顯示的圖像的深度/時(shí)差設(shè)置。
發(fā)明內(nèi)容
有鑒于此,本發(fā)明提供一種深度控制方法和深度控制裝置。本發(fā)明一實(shí)施例提供一種深度控制方法,包括:接收對(duì)應(yīng)于不同視圖的多個(gè)輸入圖像;根據(jù)所述輸入圖像生成至少一個(gè)深度相關(guān)信息圖;通過測(cè)量所述至少一個(gè)深度相關(guān)信息圖的質(zhì)量,評(píng)估出置信水平;以及根據(jù)所述置信水平調(diào)整所述至少一個(gè)深度相關(guān)信息圖。通過利用本發(fā)明,觀看者可獲得更好的3D觀看體驗(yàn)。本發(fā)明另一實(shí)施例提供一種深度控制裝置,包括:深度相關(guān)信息圖生成電路,用來對(duì)應(yīng)不同視圖接收多個(gè)輸入圖像,并根據(jù)所述輸入圖像生成至少一個(gè)深度相關(guān)信息圖;質(zhì)量測(cè)量電路,用來通過測(cè)量所述至少一個(gè)深度相關(guān)信息圖的質(zhì)量,評(píng)估出置信水平;以及調(diào)整電路,用來根據(jù)所述置信水平,調(diào)整所述至少一個(gè)深度相關(guān)信息圖。通過利用本發(fā)明,觀看者可獲得更好的3D觀看體驗(yàn)。
圖1是根據(jù)本發(fā)明第一實(shí)施例的深度控制裝置100的方塊示意圖。圖2是根據(jù)本發(fā)明的第一示范性質(zhì)量測(cè)量電路的方塊示意圖。
圖3是質(zhì)量測(cè)量電路200進(jìn)行的置信水平確定的示范性示意圖。圖4是根據(jù)本發(fā)明的第二示范性質(zhì)量測(cè)量電路的方塊示意圖。圖5是質(zhì)量測(cè)量電路400進(jìn)行的置信水平確定的示范性示意圖。圖6是根據(jù)本發(fā)明的第一示范性調(diào)整電路的示意圖。圖7是根據(jù)本發(fā)明的第二示范性調(diào)整電路的示意圖。圖8是置信水平和第二深度控制權(quán)重因子之間示范性映射關(guān)系的示意圖。圖9是原始深度相關(guān)值、局部深度相關(guān)值和全局深度相關(guān)值之間示范性關(guān)系的示意圖。圖10是根據(jù)本發(fā)明一實(shí)施例的深度控制方法的流程圖。圖11是根據(jù)本發(fā)明第二實(shí)施例的深度控制裝置的方塊示意圖。
具體實(shí)施例方式在本專利說明書及權(quán)利要求當(dāng)中使用了某些詞匯來指稱特定的組件。所屬領(lǐng)域中具有通常知識(shí)者應(yīng)可理解,硬件制造商可能會(huì)用不同的名詞來稱呼同一個(gè)組件。本專利說明書及權(quán)利要求并不以名稱的差異來作為區(qū)分組件的方式,而是以組件在功能上的差異來作為區(qū)分的準(zhǔn)則。在通篇說明書及請(qǐng)求項(xiàng)當(dāng)中所提及的“包含”為一開放式的用語,故應(yīng)解釋成“包含但不限定于”。另外,“耦接”一詞在此包含任何直接及間接的電氣連接手段。因此,若文中描述一第一裝置耦接于一第二裝置,則代表該第一裝置可直接電氣連接于該第二裝置,或透過其他裝置或連接手段間接地電氣連接至該第二裝置。圖1是根據(jù)本發(fā)明第一實(shí)施例的深度控制裝置100的方塊示意圖。深度控制裝置包含深度相關(guān)信息圖生成電路102、質(zhì)量測(cè)量電路104和調(diào)整電路106,其中調(diào)整電路106包含調(diào)整值決定單元112和調(diào)整單元114。深度相關(guān)信息圖生成電路102用來對(duì)應(yīng)不同的視圖接收多個(gè)輸入圖像F1-FN,并根據(jù)輸入圖像F1-Fn生成一個(gè)或多個(gè)深度相關(guān)信息圖MAP1-MAPn (如視差圖或深度圖)。舉例來說,輸入圖像F1-Fn可包含成對(duì)的左視像(left-view image)和右視圖(right-view image)圖像,而深度相關(guān)信息圖MAP1-MAPn可包含為左視像生成的一個(gè)視差圖和為右視像生成的另一視差圖。在一實(shí)施例中,輸入圖像F1-Fn可從多視圖(mult1-view)視頻流中獲取,而具有相鄰視角(viewing angle)的兩個(gè)輸入圖像可只生成一個(gè)視差圖。質(zhì)量測(cè)量電路104用來通過測(cè)量深度相關(guān)信息圖(由深度相關(guān)信息圖生成電路102所生成)的質(zhì)量,來評(píng)估出置信水平(Confidence Level, CL)。換句話說,置信水平指示被評(píng)估視差圖/深度圖的質(zhì)量。調(diào)整電路106耦接至深度相關(guān)信息圖生成電路102、質(zhì)量測(cè)量電路104和圖像插值(interpolation)單元101,用來根據(jù)置信水平調(diào)整深度相關(guān)信息圖MAP1-MAPn,并將調(diào)整后的深度相關(guān)信息圖MAP/ -MAP1/ (如調(diào)整后的視差圖或調(diào)整后的深度圖)相應(yīng)輸出到圖像插值單元101。更明確來說,調(diào)整電路106的調(diào)整值決定單元112用來根據(jù)置信水平,決定出深度相關(guān)信息圖(如MAP1-MAPn之一)中包含的每個(gè)深度相關(guān)值的調(diào)整值A(chǔ)DJi,而調(diào)整單元114用來將調(diào)整值A(chǔ)DJiS用到深度相關(guān)信息圖(如MAP1-MAPn之一)中所包含的深度相關(guān)值上。圖像插值單元101用來根據(jù)調(diào)整后的深度相關(guān)信息圖MAP/ -MAP1/,對(duì)輸入圖像F1-Fn進(jìn)行插值,從而產(chǎn)生對(duì)應(yīng)不同視圖的輸出圖像F/ F/。換句話說,基于深度控制裝置100所提供的調(diào)整后的深度相關(guān)信息圖MAP/ -MAP1/,圖像插值單元101用來調(diào)整輸入圖像F1-Fn的深度效應(yīng)(如輸入圖像F1-Fn的立體效應(yīng)),從而經(jīng)過插值產(chǎn)生對(duì)應(yīng)調(diào)整后視圖的輸出圖像F/ -F/。因此,由于輸出圖像F/ -F/經(jīng)過了自適應(yīng)深度調(diào)整,觀看者可獲得更好的3D觀看體驗(yàn)。簡(jiǎn)單來說,由于輸出圖像從輸入圖像和被調(diào)整的深度相關(guān)信息圖中獲取,對(duì)深度相關(guān)信息圖的調(diào)整可獲得深度效應(yīng)的調(diào)整。因此,可通過調(diào)整初始時(shí)生成的深度相關(guān)信息圖MAP1-MAPn的至少一部分(如一部分或全部),對(duì)顯示的輸入圖像F1-Fn進(jìn)行自適應(yīng)深度控制。通過對(duì)深度相關(guān)信息圖MAP1-MAPn的適當(dāng)調(diào)整,輸入圖像F1-Fn可被恰當(dāng)調(diào)整,使得最后的輸出圖像F/ -F/可給觀看者帶來更舒適的3D體驗(yàn)。由于本發(fā)明的重點(diǎn)在于深度控制裝置100所進(jìn)行的自適應(yīng)深度調(diào)整,為簡(jiǎn)便起見,在此省略圖像插值單元101的進(jìn)一步描述。如上面所述,質(zhì)量測(cè)量電路104用來生成指示被評(píng)估視差圖/深度圖質(zhì)量的置信水平。請(qǐng)參照?qǐng)D2,圖2是根據(jù)本發(fā)明的第一示范性質(zhì)量測(cè)量電路的方塊示意圖。在一實(shí)施例中,圖1中所示的質(zhì)量測(cè)量電路104可由圖2中所示的質(zhì)量測(cè)量電路200實(shí)現(xiàn)。質(zhì)量測(cè)量電路200包括比較單元202和質(zhì)量評(píng)估單元204。比較單元202用來對(duì)從輸入圖像F1-Fn中選擇的圖像進(jìn)行比較,并產(chǎn)生相應(yīng)的比較結(jié)果(Comparison Result, CR)。質(zhì)量評(píng)估單元204耦接至比較單元202,用來通過參照比較結(jié)果,評(píng)估出置信水平。圖3是質(zhì)量測(cè)量電路200進(jìn)行的置信水平確定的示范性示意圖。在一實(shí)施例中,輸入圖像F1-Fn包含一對(duì)圖像:左視像MG_L和右視像MG_R。比較單元202通過比較左視像MG_L和右視像MG_R的像素值,檢查左視像MG_L和右視像IMG_R中完美匹配區(qū)域(perfect matchedregion)所占的百分比,并生成比較結(jié)果,以指示完美匹配區(qū)域所占的百分比。若完美匹配區(qū)域所占的百分比較低,則表示存在大塊閉塞區(qū)域(occlusionregion)或存在多塊閉塞/不匹配區(qū)域。也就是說,視差/深度評(píng)估此時(shí)并不可靠。接下來,質(zhì)量評(píng)估單元204參照完美匹配區(qū)域所占的百分比(即比較結(jié)果),設(shè)定置信水平。舉例來說,置信水平可與完美匹配區(qū)域所占的百分比正相關(guān)(positivelycorrelated)。換句話說,若完美匹配區(qū)域所占的百分比較高,則將置信水平設(shè)置為較大值;若完美匹配區(qū)域所占的百分比較低,則將置信水平設(shè)置為較小值。請(qǐng)參照?qǐng)D4,圖4是根據(jù)本發(fā)明的第二示范性質(zhì)量測(cè)量電路的方塊示意圖。在另一實(shí)施例中,圖1中所示的質(zhì)量測(cè)量電路104可由圖4中所示的質(zhì)量測(cè)量電路400實(shí)現(xiàn)。質(zhì)量測(cè)量電路400包含重建單元402、比較單元404和質(zhì)量評(píng)估單元406。重建單元402用來根據(jù)至少一個(gè)深度相關(guān)信息圖MAP1-MAPn和從輸入圖像F1-Fn中所選擇的至少一個(gè)圖像,生成至少一個(gè)重建圖像FR1-FIV比較單元404耦接至重建單元402,用來對(duì)至少一個(gè)重建圖像FR1-FRn和從輸入圖像F1-Fn中所選擇的至少一個(gè)圖像進(jìn)行比較,從而生成相應(yīng)的比較結(jié)果CR’。質(zhì)量評(píng)估單元406耦接至比較單元404,用來通過參照比較結(jié)果CR’,評(píng)估出置信水平。圖5是質(zhì)量測(cè)量電路400進(jìn)行的置信水平確定的示范性示意圖。在一實(shí)施例中,輸入圖像F1-Fn包含一對(duì)圖像:左視像IMG_L和右視像IMG_R。如圖5所示,兩個(gè)輸入圖像IMG_1和IMG_2中的一個(gè)為左視像MG_L,另一個(gè)為右視像IMG_R。若輸入圖像MG_1為左視像MG_L,重建單元402根據(jù)左視像MG_L和左視像MGL的相應(yīng)視差圖/深度圖MAP_L,生成重建圖像IMG_2’ (如重建右視像IMG_R’ )。比較單元404通過比較原始右視像和重建右視像的像素值,檢查初始圖像MG_2(即右視像MG_R)和重建圖像IMG_2’ (即重建右視像IMG_R’ )中有效重建(wellreconstructed)區(qū)域所占的百分比,生成比較結(jié)果CR’,用來指示有效重建區(qū)域所占的百分比。若有效重建區(qū)域所占的百分比較低,則表示存在大塊閉塞區(qū)域或存在多塊閉塞區(qū)域。也就是說,視差/深度評(píng)估此時(shí)并不可靠。接下來,質(zhì)量評(píng)估單元406參照有效重建區(qū)域所占的百分比(即比較結(jié)果CR’),設(shè)定置信水平。舉例來說,置信水平可與有效重建區(qū)域所占的百分比正相關(guān)。換句話說,若有效重建區(qū)域所占的百分比較高,則將置信水平設(shè)置為較大值;若有效重建區(qū)域所占的百分比較低,則將置信水平設(shè)置為較小值。若輸入圖像MG_1為右視像MG_R,重建單元402根據(jù)右視像MG_R和右視像頂G_R的相應(yīng)視差圖/深度圖MAP_R,生成重建圖像IMG_2’ (如重建左視像MG_L’)。比較單元404通過比較原始左視像和重建左視像的像素值,檢查初始圖像MG_2(即左視像MG_L)和重建圖像MG_2’ (即重建左視像MG_L’ )中有效重建區(qū)域所占的百分比,生成比較結(jié)果CR’,用來指示有效重建區(qū)域所占的百分比。接下來,質(zhì)量評(píng)估單元406參照有效重建區(qū)域所占的百分比(即比較結(jié)果CR’),設(shè)定置信水平??扇缟纤?,對(duì)應(yīng)有效重建區(qū)域所占的百分比設(shè)置置信水平。接收到質(zhì)量測(cè)量電路提供的置信水平后,調(diào)整電路106參照接收到的置信水平,對(duì)深度相關(guān)信息圖MAP1-MAPn進(jìn)行自適應(yīng)深度調(diào)整,以對(duì)顯示的輸入圖像F1-Fn進(jìn)行自適應(yīng)深度控制。請(qǐng)參照?qǐng)D6,圖6是根據(jù)本發(fā)明的第一示范性調(diào)整電路的示意圖。在一實(shí)施例中,圖1中所示的調(diào)整電路106可由圖6中所示的調(diào)整電路600實(shí)現(xiàn)。調(diào)整電路600包含調(diào)整值決定單元602和調(diào)整單元604,其中圖1中所示的調(diào)整值決定單元112和調(diào)整單元114可分別由調(diào)整值決定單元602和調(diào)整單元604實(shí)現(xiàn)。在本實(shí)施例中,調(diào)整值決定單元602包含深度控制器606和調(diào)整值決定器608。深度控制器606用來對(duì)應(yīng)置信水平,為不同的深度相關(guān)信息圖(如視差圖或深度圖)MAP1-MAPn設(shè)置多個(gè)深度控制權(quán)重因子(weighting factor)Wd1-Wdn。在一示范例中,深度控制權(quán)重因子Wd1-Wdn可彼此相同。也就是說,深度控制器606可將深度控制權(quán)重因子Wd1-Wdn設(shè)置為相同值。在另一示范例中,某些或全部深度控制權(quán)重因子Wd1-Wdn彼此之間可并不相同。也就是說,深度控制器606可分別對(duì)深度控制權(quán)重因子Wd1-Wdn進(jìn)行設(shè)置。對(duì)于每個(gè)深度控制權(quán)重因子Wd1-Wdn來說,深度控制權(quán)重因子可與置信水平正相關(guān)。舉例來說,若置信水平較高,則將深度控制權(quán)重因子設(shè)置為較大值;若置信水平較低,則將深度控制權(quán)重因子設(shè)置為較小值。調(diào)整值決定器608耦接至深度控制器606,包含多個(gè)乘法器(multiplier) 609_1-609_N,乘法器609_1_609_N分別接收深度控制權(quán)重因子WD1_WDN。每個(gè)乘法器用來將深度控制權(quán)重因子和對(duì)應(yīng)的深度相關(guān)信息圖中包含的每個(gè)深度相關(guān)值(如視差值或深度值)相乘。換句話說,調(diào)整值決定器608為基于像素(pixel-based)的處理電路,用來決定出每個(gè)深度相關(guān)值的調(diào)整值。調(diào)整電路604耦接至調(diào)整值決定器608,包含多個(gè)加法器605_1_605_N,加法器605_1-605_N用來將深度相關(guān)信息圖的深度相關(guān)值減去對(duì)應(yīng)的調(diào)整值,從而生成調(diào)整后的深度相關(guān)信息圖,其中調(diào)整后的深度相關(guān)信息圖包含有調(diào)整后的深度相關(guān)值。如此一來,調(diào)整單元604輸出具有經(jīng)所需視差/深度設(shè)置的調(diào)整后的深度相關(guān)信息圖MAP/ -MAP1/。因此,圖像插值單元101可參照調(diào)整后的深度相關(guān)信息圖MAP1’-MAP/,對(duì)輸入圖像F1-Fn進(jìn)行深度控制,并相應(yīng)生成具有調(diào)整后的深度效應(yīng)的輸出圖像F/ F/。調(diào)整電路600基于像素的操作可按照下列等式進(jìn)行。DAdJusted — DEstimated- a DEstimated(丄)在上述等式⑴中,DAdjusted表示調(diào)整后的視差/深度圖中包含的調(diào)整后的視差/深度值,DEstifflate表示被評(píng)估視差/深度圖中包含的初始視差/深度值,α.DEstifflate表示調(diào)整后的值,α而表示深度控制權(quán)重因子。需注意,同一評(píng)估視差/深度圖中包含的所有視差/深度值可應(yīng)用相同的深度控制權(quán)重因子。若存在大塊閉塞區(qū)域(或存在多塊閉塞區(qū)域),以及/或者評(píng)估視差/深度圖的可靠性較差,可減小深度控制權(quán)重因子,以減少不必要的邊效應(yīng)(sideeffect),從而允許3D顯示調(diào)整到舒適的收斂深度。如此一來,3D顯示的質(zhì)量可得到改進(jìn)。請(qǐng)參照?qǐng)D7,圖7是根據(jù)本發(fā)明的第二示范性調(diào)整電路的示意圖。在另一實(shí)施例中,圖1中所示的調(diào)整電路可由圖7中所示的調(diào)整電路700實(shí)現(xiàn)。調(diào)整電路700包含調(diào)整值決定單元702和調(diào)整單元704,其中圖1中所示的調(diào)整值決定單元112和調(diào)整單元114可分別由調(diào)整值決定單元702和調(diào)整單元704實(shí)現(xiàn)。在本實(shí)施例中,調(diào)整值決定單元702包含深度控制器706、調(diào)整值決定器708、多個(gè)全局(global)深度相關(guān)值提取器(extractor) 711_1-711_N和多個(gè)局部(local)深度相關(guān)值提取器712_1_712_N。深度控制器706用來為不同的深度相關(guān)信息圖(如視差圖或深度圖)MAP1-MAPn設(shè)置多個(gè)第一深度控制權(quán)重因子We1-Wra,并進(jìn)一步為不同的深度相關(guān)信息圖(如視差圖或深度圖)MAP1-MAPn設(shè)置多個(gè)第二深度控制權(quán)重因子wu-wM。在本實(shí)施例中,第二深度控制權(quán)重因子Wu-Wm可對(duì)應(yīng)置信水平進(jìn)行動(dòng)態(tài)設(shè)定,而第一深度控制權(quán)重因子we1-weN在決定每個(gè)深度相關(guān)值的調(diào)整值時(shí)保持不變?;蛘?,第一深度控制權(quán)重因子H和第二深度控制權(quán)重因子Wu-Wm可各自進(jìn)行調(diào)整。第二深度控制權(quán)重因子^^胃^可與置信水平正相關(guān)。舉例來說,若置信水平較高,則將第二深度控制權(quán)重因子設(shè)置為較大值;若置信水平較低,則將第二深度控制權(quán)重因子設(shè)置為較小值。在一實(shí)施例中,置信水平和第二深度控制權(quán)重因子(如局部權(quán)重因子)之間的映射關(guān)系可如圖8所示。上述實(shí)施例僅為說明目的,并無意圖限制本發(fā)明。需注意,根據(jù)實(shí)際的設(shè)計(jì)需求/考慮,第一深度控制權(quán)重因子We1-WeN可彼此相同,也可彼此不同;以及/或者第二深度控制權(quán)重因子Wu-Wm可彼此相通,也可彼此不同。全局深度相關(guān)值提取器711_1_711_N用來根據(jù)相應(yīng)的深度相關(guān)信息圖中所包含的所有深度相關(guān)值,決定出全局深度相關(guān)值(如全局視差/深度值)。換句話說,每個(gè)深度相關(guān)信息圖可僅具有一個(gè)全局深度相關(guān)值。因此,全局深度相關(guān)值提取器711_l-711_N可各自生成全局深度相關(guān)值。局部深度相關(guān)值提取器712_1-712_N用來根據(jù)相應(yīng)的深度相關(guān)信息圖中所獲取的全局深度相關(guān)值,決定出深度相關(guān)信息圖中所包含的每個(gè)深度相關(guān)值的局部深度相關(guān)值(如局部視差/深度值)。換句話說,若深度相關(guān)圖MAP1-MAPn中的某深度相關(guān)圖所包含的深度相關(guān)值的個(gè)數(shù)為N,則該深度相關(guān)圖可具有N個(gè)局部深度相關(guān)值。在一示范例中, 每個(gè)全局深度相關(guān)值提取器根據(jù)對(duì)應(yīng)的深度相關(guān)信息圖中所包含的所有深度相關(guān)值的平均值Datc設(shè)定全局深度相關(guān)值。明確來說,全局深度相關(guān)值可根據(jù)以下等式獲得。
權(quán)利要求
1.一種深度控制方法,其特征在于,包括: 接收對(duì)應(yīng)于不同視圖的多個(gè)輸入圖像; 根據(jù)所述輸入圖像生成至少一個(gè)深度相關(guān)信息圖; 通過測(cè)量所述至少一個(gè)深度相關(guān)信息圖的質(zhì)量,評(píng)估出置信水平;以及 根據(jù)所述置信水平調(diào)整所述至少一個(gè)深度相關(guān)信息圖。
2.如權(quán)利要求1所述的深度控制方法,其特征在于,評(píng)估出所述置信水平的步驟包括:對(duì)從所述輸入圖像中選擇出的圖像進(jìn)行比較,相應(yīng)生成比較結(jié)果;以及通過參照所述比較結(jié)果,評(píng)估出所述置信水平。
3.如權(quán)利要求1所述的深度控制方法,其特征在于,評(píng)估出所述置信水平的步驟包括:根據(jù)所述至少一個(gè)深度相關(guān)信息圖和從所述輸入圖像中選擇出的至少一個(gè)圖像,生成至少一個(gè)重建圖像;對(duì)所述至少一個(gè)重建圖像和從所述輸入圖像中選擇出的至少一個(gè)圖像進(jìn)行比較,相應(yīng)生成比較結(jié)果;以及通過參照所述比較結(jié)果,評(píng)估出所述置信水平。
4.如權(quán)利要求1所述的深度控制方法,其特征在于,調(diào)整所述至少一個(gè)深度相關(guān)信息圖的步驟包括:根據(jù)所述置信水平?jīng)Q定出深度相關(guān)信息圖中所包含的每個(gè)深度相關(guān)值的調(diào)整值;以及將所述調(diào)整值應(yīng)用到所述深度相關(guān)信息圖中所包含的每個(gè)深度相關(guān)值上。
5.如權(quán)利要求4所述的深度控制方法,其特征在于,決定每個(gè)深度相關(guān)值的所述調(diào)整值的步驟包括:對(duì)應(yīng)所述置信水平設(shè)定深度控制權(quán)重因子;以及將所述深度控制權(quán)重因子和每個(gè)深度相關(guān)值相乘,以決定出每個(gè)深度相關(guān)值的所述調(diào)整值。
6.如權(quán)利要求5所述的深度控制方法,其特征在于,所述深度控制權(quán)重因子與所述置 目水平正相關(guān)。
7.如權(quán)利要求4所述的深度控制方法,其特征在于,決定每個(gè)深度相關(guān)值的所述調(diào)整值的步驟包括:根據(jù)所述深度相關(guān)信息圖中所包含的所有深度相關(guān)值決定出全局深度相關(guān)值;根據(jù)所述全局深度相關(guān)值決定出所述深度相關(guān)信息圖中所包含的每個(gè)深度相關(guān)值的局部深度相關(guān)值;設(shè)定第一深度控制權(quán)重因子;對(duì)應(yīng)所述置信水平設(shè)定第二深度控制權(quán)重因子;以及將所述第二深度控制權(quán)重因子與每個(gè)局部深度相關(guān)值相乘,將所述第一深度控制權(quán)重因子與所述全局深度相關(guān)值相乘,以決定出每個(gè)深度相關(guān)值的所述調(diào)整值。
8.如權(quán)利要求7所述的深度控制方法,其特征在于,決定出所述全局深度相關(guān)值的步驟包括:根據(jù)所述深度相關(guān)信息圖中所包含的所有深度相關(guān)值的平均值,設(shè)定所述全局深度相關(guān)值。
9.如權(quán)利要求7所述的深度控制方法,其特征在于,決定出所述全局深度相關(guān)值的步驟包括:根據(jù)所述深度相關(guān)信息圖中所包含的所有深度相關(guān)值的權(quán)重和,設(shè)定所述全局深度相關(guān)值,其中若第一深度相關(guān)值與第二深度相關(guān)值不同,則所述第一深度相關(guān)值的權(quán)重因子與所述第二深度相關(guān)值的權(quán)重因子不同。
10.如權(quán)利要求7所述的深度控制方法,其特征在于,決定出每個(gè)深度相關(guān)值的所述局部深度相關(guān)值的步驟包括:通過將所述深度相關(guān)值減去所述全局深度相關(guān)值,決定出每個(gè)深度相關(guān)值的所述局部深度相關(guān)值。
11.如權(quán)利要求7所述的深度控制方法,其特征在于,所述第二深度控制權(quán)重因子與所述置信水平正相關(guān)。
12.如權(quán)利要求7所述的深度控制方法,其特征在于,每次決定每個(gè)深度相關(guān)值的所述調(diào)整值時(shí),所述第一深度控制權(quán)重因子不發(fā)生改變;或者所述第一深度控制權(quán)重因子和所述第二深度控制權(quán)重因子各自進(jìn)行調(diào)整。
13.一種深度控制裝置,其特征在于,包括: 深度相關(guān)信息圖生成電路,用來對(duì)應(yīng)不同視圖接收多個(gè)輸入圖像,并根據(jù)所述輸入圖像生成至少一個(gè)深度相關(guān)信息圖; 質(zhì)量測(cè)量電路,用來通過測(cè)量所述至少一個(gè)深度相關(guān)信息圖的質(zhì)量,評(píng)估出置信水平;以及 調(diào)整電路,用來根據(jù)所述置信水平,調(diào)整所述至少一個(gè)深度相關(guān)信息圖。
14.如權(quán)利要求13所述的深度控制裝置,其特征在于,所述質(zhì)量測(cè)量電路包括:比較單元,用來對(duì)所述輸入圖像中選擇出的圖像進(jìn)行比較,相應(yīng)生成比較結(jié)果;以及質(zhì)量評(píng)估單元,用來參照所述比較結(jié)果,評(píng)估出所述置信水平。
15.如權(quán)利要求13所述的深度控制裝置,其特征在于,所述質(zhì)量測(cè)量電路包括:重建單元,用來根據(jù)所述至少一個(gè)深度相關(guān)圖和從所述輸入圖像中選擇出的至少一個(gè)圖像,生成時(shí)少一個(gè)重建圖像;比較單元,用來對(duì)所述至少一個(gè)重建圖像和從所述輸入圖像中選擇出的至少一個(gè)圖像進(jìn)行比較,生成比較結(jié)果;以及質(zhì)量評(píng)估單元,用來參照所述比較結(jié)果,評(píng)估出所述置信水平。
16.如權(quán)利要求13所述的深度控制裝置,其特征在于,所述調(diào)整電路包括:調(diào)整值決定單元,用來根據(jù)所述置信水平,決定出深度相關(guān)信息圖中所包含的每個(gè)深度相關(guān)值的調(diào)整值;以及調(diào)整單元,用來將所述調(diào)整值應(yīng)用到所述深度相關(guān)信息圖中所包含的深度相關(guān)值上。
17.如權(quán)利要求16所述的深度控制裝置,其特征在于,所述調(diào)整值決定單元包括:深度控制器,用來對(duì)應(yīng)所述置信水平設(shè)定深度控制權(quán)重因子;以及調(diào)整值決定器,用來將所述深度控制權(quán)重因子和每個(gè)深度相關(guān)值相乘,以決定出每個(gè)深度相關(guān)值的所述調(diào)整值。
18.如權(quán)利要求17所述的深度控制裝置,其特征在于,所述深度控制權(quán)重因子與所述置信水平正相關(guān)。
19.如權(quán)利要求16所述的深度控制裝置,其特征在于,所述調(diào)整值決定器單元包括:深度控制器,用來對(duì)應(yīng)所述置信水平設(shè)定第一深度控制權(quán)重因子和第二深度控制權(quán)重因子;全局深度相關(guān)值提取器,用來根據(jù)所述深度相關(guān)信息圖中所包含的所有深度相關(guān)值,決定出全局深度相關(guān)值;局部深度相關(guān)值提取器,用來根據(jù)所述全局深度相關(guān)值,決定出所述深度相關(guān)信息圖中所包含的每個(gè)深度相關(guān)值的局部深度相關(guān)值;以及調(diào)整值決定器,用來將所述第二深度控制權(quán)重因子和每個(gè)局部深度相關(guān)值相乘,將所述第一深度控制權(quán)重因子和所述全局深度相關(guān)值相乘,以決定出每個(gè)深度相關(guān)值的所述調(diào)整值。
20.如權(quán)利要求19所述的深度控制裝置,其特征在于,所述全局深度相關(guān)值提取器根據(jù)所述深度相關(guān)信息圖中所包含的所有深度相關(guān)值的平均值,設(shè)定所述全局深度相關(guān)值。
21.如權(quán)利要求19所述的深度控制裝置,其特征在于,所述全局深度相關(guān)值提取器根據(jù)所述深度相關(guān)信息圖中所包含的所有深度相關(guān)值的權(quán)重和,設(shè)定所述全局深度相關(guān)值,其中若第一深度相關(guān)值與第二深度相關(guān)值不同,則所述第一深度相關(guān)值的權(quán)重因子與所述第二深度相關(guān)值的權(quán)重因子不同。
22.如權(quán)利要求19所述的深度控制裝置,其特征在于,所述局部深度相關(guān)值提取器通過將所述深度相關(guān)值減去所述全局深度相關(guān)值,設(shè)定每個(gè)深度相關(guān)值的所述局部深度相關(guān)值。
23.如權(quán)利要求19所述的深度控制裝置,其特征在于,所述第二深度控制權(quán)重因子與所述置信水平正相關(guān)。
24.如權(quán)利要求19所述的深度控制裝置,其特征在于,每次決定深度相關(guān)值的所述調(diào)整值時(shí),所述第一深度控制權(quán)重因子保持不變 ;或者所述第一深度控制權(quán)重因子與所述第二深度控制權(quán)重因子各自進(jìn)行調(diào)整。
全文摘要
本發(fā)明提供一種深度控制方法,包括接收對(duì)應(yīng)于不同視圖的多個(gè)輸入圖像;根據(jù)所述輸入圖像生成至少一個(gè)深度相關(guān)信息圖;通過測(cè)量所述至少一個(gè)深度相關(guān)信息圖的質(zhì)量,評(píng)估出置信水平;以及根據(jù)所述置信水平調(diào)整所述至少一個(gè)深度相關(guān)信息圖。通過利用本發(fā)明,觀看者可獲得更好的3D觀看體驗(yàn)。
文檔編號(hào)H04N17/00GK103179414SQ20121053028
公開日2013年6月26日 申請(qǐng)日期2012年12月10日 優(yōu)先權(quán)日2011年12月23日
發(fā)明者鄭朝鐘 申請(qǐng)人:聯(lián)發(fā)科技股份有限公司