亚洲成年人黄色一级片,日本香港三级亚洲三级,黄色成人小视频,国产青草视频,国产一区二区久久精品,91在线免费公开视频,成年轻人网站色直接看

圖像處理方法和設(shè)備的制作方法

文檔序號:7723314閱讀:136來源:國知局

專利名稱::圖像處理方法和設(shè)備的制作方法
技術(shù)領(lǐng)域
:本發(fā)明的各方面涉及一種圖像處理方法和設(shè)備,更具體地講,涉及一種通過使用從元數(shù)據(jù)提取的深度信息產(chǎn)生關(guān)于幀的深度圖的圖像處理方法和設(shè)備。
背景技術(shù)
:由于數(shù)字技術(shù)的發(fā)展,三維圖像技術(shù)已經(jīng)變得越來越普遍。三維圖像技術(shù)旨在通過將深度信息應(yīng)用到二維圖像中以實現(xiàn)逼真的圖像。因為人眼在水平方向上分開預(yù)定距離,所以分別由左眼和右眼觀看的二維圖像彼此不同,從而出現(xiàn)雙目視差。人腦結(jié)合不同的二維圖像,從而產(chǎn)生看起來逼真的三維圖像。三維圖像技術(shù)通常被劃分為圖像產(chǎn)生技術(shù)和圖像轉(zhuǎn)換技術(shù),其中,圖像產(chǎn)生技術(shù)自始就將視頻數(shù)據(jù)作為三維圖像產(chǎn)生,而圖像轉(zhuǎn)換技術(shù)將作為二維圖像產(chǎn)生的視頻數(shù)據(jù)轉(zhuǎn)換為三維圖像。對此,正對這兩項技術(shù)進(jìn)行研究。
發(fā)明內(nèi)容本發(fā)明的各方面提供一種圖像處理方法及設(shè)備,所述方法和設(shè)備基于背景深度信息產(chǎn)生關(guān)于對象的深度圖。根據(jù)本發(fā)明的一方面,提供了一種圖像處理方法。所述方法包括從元數(shù)據(jù)提取鏡頭信息,其中,鏡頭信息將一系列的二維圖像劃分為預(yù)定單元;基于包括在鏡頭信息中的鏡頭類型信息確定劃分為預(yù)定鏡頭的幀是否可被再現(xiàn)為三維圖像;如果被劃分為預(yù)定鏡頭的幀可被再現(xiàn)為三維圖像,則從元數(shù)據(jù)提取背景深度信息,其中,背景深度信息與被劃分為預(yù)定鏡頭的幀的背景相關(guān);基于背景深度信息產(chǎn)生關(guān)于幀的背景的深度圖;如果被劃分為預(yù)定鏡頭的幀包括對象,則從元數(shù)據(jù)提取關(guān)于對象的對象深度信息;基于對象深度信息產(chǎn)生關(guān)于對象的深度圖。根據(jù)本發(fā)明的另一方面,所述圖像處理方法還可包括基于鏡頭信息來計算被劃分為預(yù)定鏡頭的幀需要被輸出的時間。產(chǎn)生關(guān)于背景的深度圖的步驟可包括從背景深度信息提取信息,所述信息包括背景類型信息、表面信息、背景的坐標(biāo)點(diǎn)、背景的每個坐標(biāo)點(diǎn)的深度值和面板位置值,其中,所述背景類型信息表示背景的基本構(gòu)成,所述表面信息用于將深度值應(yīng)用到包括在背景中的表面,所述面板位置值表示屏幕的深度值。根據(jù)本發(fā)明的另一方面,產(chǎn)生關(guān)于背景的深度圖的步驟可包括基于根據(jù)背景類型信息的背景的基本構(gòu)成的深度值和根據(jù)表面信息的表面的深度值產(chǎn)生關(guān)于背景的深度圖。根據(jù)本發(fā)明的另一方面,所述圖像處理方法還可包括如果幀的背景具有相同深度值,則對關(guān)于背景的深度圖進(jìn)行濾波;對關(guān)于背景的深度圖進(jìn)行濾波的步驟包括將半球形濾波器、半圓柱形濾波器或三棱柱形濾波器應(yīng)用到關(guān)于背景的深度圖,以修改關(guān)于背景的深度圖。所述對象深度信息可包括用于將對象的類型識別為二維對象、正常對象或高亮對象的對象類型信息。根據(jù)本發(fā)明的另一方面,如果幀包括多個對象,則對象深度信息可包括優(yōu)先級順序信息,所述優(yōu)先級順序信息表示多個對象的深度圖產(chǎn)生順序;所述產(chǎn)生關(guān)于對象的深度圖的步驟可包括根據(jù)深度圖產(chǎn)生順序依次產(chǎn)生關(guān)于多個對象的深度圖。所述產(chǎn)生關(guān)于對象的深度圖的步驟可包括基于對象深度信息獲得包括該對象的幀需要被輸出的時間。根據(jù)本發(fā)明的另一方面,所述圖像處理方法還可包括從對象深度信息提取用于識別對象區(qū)域的區(qū)域識別信息;其中,所述區(qū)域識別信息與對象區(qū)域被表示為坐標(biāo)點(diǎn)的信息相應(yīng),或者與標(biāo)記對象的形狀的掩模相應(yīng)。如果對象是二維對象,則產(chǎn)生關(guān)于對象的深度圖的步驟可包括基于包括在背景深度信息中的面板位置值產(chǎn)生關(guān)于二維對象的深度圖,其中,基于所述對象區(qū)域的深度值確定關(guān)于二維對象的深度圖。根據(jù)本發(fā)明的另一方面,如果對象是正常對象,并且區(qū)域識別信息對應(yīng)于標(biāo)記對象的形狀的掩模,則對象深度信息還可包括關(guān)于在背景深度信息中包含的背景坐標(biāo)點(diǎn)中的一個或多個背景坐標(biāo)點(diǎn)的信息,所述一個或多個背景坐標(biāo)點(diǎn)等于表示正常對象的區(qū)域的一個或多個坐標(biāo)點(diǎn);產(chǎn)生關(guān)于對象的深度圖的步驟可包括如下所述的操作基于所述一個或多個背景坐標(biāo)點(diǎn)的深度值產(chǎn)生關(guān)于正常對象的深度圖,其中,基于正常對象的區(qū)域的深度值確定所述一個或多個坐標(biāo)點(diǎn)。根據(jù)本發(fā)明的另一方面,如果對象是正常對象,則產(chǎn)生關(guān)于所述對象的深度圖的步驟可包括從包括在背景深度信息中的背景的坐標(biāo)點(diǎn)中獲得等于表示正常對象的區(qū)域的坐標(biāo)點(diǎn)的一個或多個背景坐標(biāo)點(diǎn);基于根據(jù)正常對象的區(qū)域的深度值確定的背景坐標(biāo)點(diǎn)的深度值產(chǎn)生關(guān)于正常對象的深度圖。如果對象是高亮對象,則產(chǎn)生關(guān)于所述對象的深度圖的操作可包括基于包括在背景深度信息中的面板位置值和包括在對象深度信息中的偏移值計算高亮對象的區(qū)域的深度值,并基于高亮對象的區(qū)域的深度值產(chǎn)生關(guān)于高亮對象的深度圖。根據(jù)本發(fā)明的另一方面,圖像處理方法還可包括對關(guān)于對象的深度圖進(jìn)行濾波,所述濾波操作可包括將半球形濾波器、半圓柱形濾波器或三棱柱形濾波器應(yīng)用到關(guān)于對象的深度圖,以修改關(guān)于對象的深度圖。根據(jù)本發(fā)明的另一方面,所述的圖像處理方法還可包括從元數(shù)據(jù)提取標(biāo)題識別信息,其中,所述標(biāo)題識別信息識別包括幀的標(biāo)題,因此確定哪個標(biāo)題與元數(shù)據(jù)相關(guān)。所述圖像處理方法還可包括基于關(guān)于背景的深度圖和關(guān)于對象的深度圖,針對二維圖像產(chǎn)生左眼圖像和右眼圖像;補(bǔ)償左眼圖像和右眼圖像的孔;基于已經(jīng)補(bǔ)償了孔的左眼圖像和右眼圖像產(chǎn)生三維格式的圖像。根據(jù)本發(fā)明的另一方面,提供了一種圖像處理設(shè)備。所述圖像處理設(shè)備包括元數(shù)據(jù)分析單元,基于包括在鏡頭信息中的鏡頭類型信息從元數(shù)據(jù)提取鏡頭信息,所述鏡頭信息將一系列的二維圖像劃分為預(yù)定單元,當(dāng)被劃分為預(yù)定鏡頭的幀可被再現(xiàn)為三維圖像時,從元數(shù)據(jù)提取背景深度信息,所述背景深度信息與被劃分為預(yù)定鏡頭的幀的背景相關(guān),當(dāng)被劃分為預(yù)定鏡頭的幀包括對象時,從元數(shù)據(jù)提取并分析關(guān)于對象的對象深度信息;深度圖產(chǎn)生單元,基于背景深度信息產(chǎn)生關(guān)于幀的背景的深度圖,并基于對象深度信息產(chǎn)生關(guān)于對象的深度圖。根據(jù)本發(fā)明的另一方面,提供了一種存儲執(zhí)行圖像處理方法的計算機(jī)可讀程序的記錄介質(zhì),所述圖像處理方法包括從元數(shù)據(jù)提取鏡頭信息,其中,鏡頭信息將一系列的二維圖像劃分為預(yù)定單元;基于包括在鏡頭信息中的鏡頭類型信息確定劃分為預(yù)定鏡頭的幀是否可被再現(xiàn)為三維圖像;如果被劃分為預(yù)定鏡頭的幀可被再現(xiàn)為三維圖像,則從元數(shù)據(jù)提取背景深度信息,其中,背景深度信息與被劃分為預(yù)定鏡頭的幀的背景相關(guān);基于背景深度信息產(chǎn)生關(guān)于幀的背景的深度圖;如果被劃分為預(yù)定鏡頭的幀包括對象,則從元數(shù)據(jù)提取關(guān)于對象的對象深度信息;基于對象深度信息產(chǎn)生關(guān)于對象的深度圖。將在下面部分地闡述本發(fā)明的另外方面和/或優(yōu)點(diǎn),根據(jù)描述,本發(fā)明的另外方面和/或優(yōu)點(diǎn)的一部分將是顯然的,或者可通過實施本發(fā)明而了解。從下面結(jié)合附圖對實施例的描述中,本發(fā)明的這些和/或其他方面和優(yōu)點(diǎn)將是顯然的并更容易理解,其中圖1示出根據(jù)本發(fā)明實施例的關(guān)于視頻數(shù)據(jù)的元數(shù)據(jù);圖2示出圖1所示的深度信息;圖3A至圖3F示出基于包括在背景深度信息中的背景類型信息和表面信息將深度值賦予背景的方法;圖4示出當(dāng)在屏幕一側(cè)觀看圖像時賦予圖像的深度;圖5示出當(dāng)圖像處理設(shè)備對關(guān)于對象的深度圖或關(guān)于背景的深度圖進(jìn)行濾波時濾波后的圖像的三維效果;圖6示出使用圖1的元數(shù)據(jù)產(chǎn)生深度圖的方法;圖7是根據(jù)本發(fā)明實施例的用于執(zhí)行圖像處理方法的圖像處理設(shè)備的框圖8是圖7的圖像處理設(shè)備中的深度圖產(chǎn)生單元的詳細(xì)示圖9是圖7的圖像處理設(shè)備中的立體渲染單元的詳細(xì)框圖。具體實施例方式現(xiàn)在將詳細(xì)描述本發(fā)明的實施例,其示例在附圖中示出,其中,相同的標(biāo)號始終表示相同的部件。下面將參照附圖來描述實施例以解釋本發(fā)明。圖1是根據(jù)本發(fā)明實施例的關(guān)于視頻數(shù)據(jù)的元數(shù)據(jù)100的示圖。所述元數(shù)據(jù)100包括關(guān)于視頻數(shù)據(jù)的信息。為了表示哪些視頻數(shù)據(jù)與元數(shù)據(jù)100相關(guān),元數(shù)據(jù)100包括用于識別包括視頻數(shù)據(jù)的標(biāo)題的標(biāo)題識別信息。元數(shù)據(jù)100包括關(guān)于包含視頻數(shù)據(jù)的幀的信息。所述關(guān)于幀的信息包括根據(jù)預(yù)定基準(zhǔn)對幀進(jìn)行劃分的信息。一組相似的幀可被稱作"單元",視頻數(shù)據(jù)的幀可被劃分成多個這樣的單元。元數(shù)據(jù)ioo包括用于將視頻數(shù)據(jù)的幀劃分為多個單元的信息。根據(jù)本發(fā)明的各方面,當(dāng)由于先前幀和當(dāng)前幀的構(gòu)成相似,可基于先前幀來估計當(dāng)前幀的構(gòu)成時,具有這種相似構(gòu)成的一系列幀被稱作"鏡頭"(shot)。元數(shù)據(jù)100包括關(guān)于鏡頭的信息,以將二維的視頻數(shù)據(jù)的幀劃分為預(yù)定單元,即鏡頭單元。下面,包括在元數(shù)據(jù)100中的關(guān)于鏡頭的信息被稱作"鏡頭信息"。元數(shù)據(jù)100包括用于一個或多個鏡頭的鏡頭信息。當(dāng)幀的構(gòu)成顯著改變從而當(dāng)前幀的構(gòu)成與先前幀的構(gòu)成不同時,當(dāng)前幀和先前幀被劃分到不同的鏡頭中。鏡頭信息包括鏡頭類型信息,所述鏡頭類型信息與每個鏡頭相關(guān)并表示與鏡頭相應(yīng)的幀是否需要被輸出為二維圖像或三維圖像。當(dāng)關(guān)于鏡頭的鏡頭類型信息表示包括在鏡頭中的幀應(yīng)該被輸出為二維圖像時,圖像處理設(shè)備(未示出)對與鏡頭相應(yīng)的幀解碼,并在圖像處理設(shè)備的屏幕上輸出二維圖像。當(dāng)關(guān)于鏡頭的鏡頭類型信息表示包括在鏡頭中的幀應(yīng)該被輸出為三維圖像時,圖像處理設(shè)備基于包括在元數(shù)據(jù)100中的深度信息將與鏡頭相應(yīng)的幀輸出為三維圖像。鏡頭信息包括用于將二維視頻數(shù)據(jù)與深度信息同步以將二維視頻數(shù)據(jù)輸出為三維圖像的信息。鏡頭信息包括鏡頭開始時間和鏡頭結(jié)束時間。鏡頭開始時間表示輸出鏡頭的第一幀的輸出時間,鏡頭結(jié)束時間表示輸出鏡頭的最后幀的輸出時間。當(dāng)沿著一個時間軸順序再現(xiàn)視頻數(shù)據(jù)或作為一組視頻數(shù)據(jù)的標(biāo)題時,再現(xiàn)視頻數(shù)據(jù)或標(biāo)題的順序時間軸被稱作"總時間軸"。視頻數(shù)據(jù)或標(biāo)題在總時間軸上的呈現(xiàn)時間可被用作鏡頭開始時間和鏡頭結(jié)束時間。鏡頭信息包括表示鏡頭中包括的幀的數(shù)量的信息。因為鏡頭信息包括鏡頭開始時間和鏡頭結(jié)束時間,并且還包括關(guān)于鏡頭中包括的幀的數(shù)量的信息,所以圖像處理設(shè)備在通過從鏡頭結(jié)束時間減去鏡頭開始時間計算得到的時間段內(nèi)按固定的間隔輸出包括在鏡頭中的幀。因此,可計算包括在鏡頭中的每個幀的輸出時間。當(dāng)關(guān)于預(yù)定鏡頭的鏡頭類型信息表示按所述預(yù)定鏡頭劃分的幀應(yīng)該被輸出為三維圖像時,元數(shù)據(jù)100還可包括用于將按所述預(yù)定鏡頭劃分的幀轉(zhuǎn)換為三維圖像的深度信息。為了向二維圖像賦予三維效果,應(yīng)該向二維圖像賦予深度。當(dāng)觀眾觀看屏幕時,在觀眾的眼里形成投射到屏幕上的圖像,為此,在眼里形成的圖像中的兩點(diǎn)之間的距離被稱作"視差",所述視差被分為正視差、零視差和負(fù)視差。正視差表示圖像看起來在屏幕本身內(nèi)。正視差的視差值可小于等于兩眼之間的距離。隨著視差值增加,產(chǎn)生圖像看起來位于屏幕深處的三維效果。當(dāng)在屏幕平面上二維地形成圖像時,視差值是O。當(dāng)視差值是O時,在屏幕平面上形成圖像,從而觀眾沒有體驗三維效果。負(fù)視差表示當(dāng)兩眼的視軸(visualaxis)在屏幕的前面相交時圖像形成在屏幕的前面,造成了圖像看起來從屏幕凸出來的三維效果。為了通過向二維圖像賦予深度來產(chǎn)生三維圖像,本發(fā)明的各方面可采用通過產(chǎn)生關(guān)于幀的深度圖來向幀賦予深度的方法。深度信息表示用于通過向幀賦予深度來將二維圖像轉(zhuǎn)換為三維圖像的信息,并且所述深度信息包括背景深度信息和對象深度信息。背景圖像和除背景外的一個或多個對象圖像共同構(gòu)成幀的圖像。背景深度信息向背景圖像賦予深度。向背景圖像賦予深度是指向構(gòu)成(composition)賦予深度,從而允許背景具有三維效果,其中,所述構(gòu)成包括背景的位置、背景形狀的結(jié)構(gòu)等。對于每一幀,幀的背景可具有各種形式。所述各種形式被劃分為若干類型并被包括在元數(shù)據(jù)100中。元數(shù)據(jù)100還包括背景類型信息,所述背景類型信息用于表示在劃分的構(gòu)成中哪種類型的構(gòu)成與包括在預(yù)定鏡頭中的幀的背景相關(guān)。根據(jù)本發(fā)明的各方面,在由于幀之間的構(gòu)成改變導(dǎo)致當(dāng)前幀的構(gòu)成與先前幀的構(gòu)成不同時,用鏡頭來區(qū)分幀。用鏡頭劃分的幀通常具有相似的構(gòu)成。因此,關(guān)于按鏡頭劃分的幀的背景的深度信息也相似。除了由背景類型信息表示的基本構(gòu)成外,背景深度信息還可包括向背景中包括的表面賦予深度值的表面信息。將參照圖3F來描述所述背景類型信息和表面信息。背景深度信息可包括背景坐標(biāo)點(diǎn)。應(yīng)用到背景的每個坐標(biāo)點(diǎn)的深度值和面板(panel)位置值。坐標(biāo)點(diǎn)的值表示二維圖像幀的背景坐標(biāo)值。深度值表示將向二維圖像的預(yù)定像素賦予的深度,面板位置表示在形成圖像的屏幕中的位置。當(dāng)關(guān)于鏡頭的鏡頭類型信息表示按該鏡頭劃分的幀應(yīng)該被輸出為三維圖像時,可采用背景深度信息來產(chǎn)生關(guān)于包括在該鏡頭中的幀的背景的深度圖。在幀中,除了背景之外的對象表示具有垂直分量(verticalcomponent)的人、建筑等。對象深度信息可被用于產(chǎn)生關(guān)于對象的深度圖。在應(yīng)該將鏡頭中包括的幀作為三維圖像輸出的情況下,背景深度信息將會是必要的,但是鏡頭中的一些幀可能不包括對象,因此,因為三維圖像會需要對象深度信息,所以不需要輸出每個幀。對象深度信息包括對象類型信息。根據(jù)深度值如何應(yīng)用到對象來將對象類型信息劃分為二維對象、正常對象和高亮對象。二維對象識別將被二維輸出的區(qū)域。二維對象的深度值等于屏幕的深度值,即,面板位置值。正常對象是與背景接觸的對象。因此,正常對象具有等于背景的坐標(biāo)點(diǎn)的深度值,所述背景坐標(biāo)點(diǎn)與正常對象接觸。既非二維對象也非正常對象的對象被稱作高亮對象。高亮對象具有等于如下所述的點(diǎn)的值的深度值,所述點(diǎn)相對于面板位置的深度值,位于屏幕向里或向外預(yù)定值的位置。所述對象深度信息包括優(yōu)先級順序信息。當(dāng)幀包括多個對象時,優(yōu)先級順序信息表示所述多個對象的深度圖產(chǎn)生順序。首先針對多個對象中優(yōu)先級最高的對象產(chǎn)生深度圖。優(yōu)先級高的對象是比其他優(yōu)先級低的對象離觀眾近的對象。對象深度信息還可包括關(guān)于輸出幀的時間的信息。所述輸出幀的時間表示這樣的幀輸出時間在所述幀輸出時間,在鏡頭的幀中顯示預(yù)定對象。幀輸出時間包括幀開始時間和幀結(jié)束時間,所述幀開始時間和幀結(jié)束時間分別表示開始輸出包括該預(yù)定對象的幀的時間和停止輸出包括該預(yù)定對象的幀的時間。對象深度信息包括區(qū)域識別信息。所述區(qū)域識別信息識別對象區(qū)域,并可以是坐標(biāo)點(diǎn)。根據(jù)本發(fā)明的另一方面,區(qū)域識別信息可以是標(biāo)記對象區(qū)域的掩模(mask)。在這種情況下,單個掩模被用于單個對象,以識別單個對象區(qū)域。在對象是正常對象并且區(qū)域識別信息是掩模的情況下,對象深度信息還可包括參考信息。所述參考信息與這樣的坐標(biāo)點(diǎn)有關(guān),該坐標(biāo)點(diǎn)與包括在背景深度信息中的表示正常對象區(qū)域的背景坐標(biāo)點(diǎn)相等,該坐標(biāo)點(diǎn)表示正常對象的區(qū)域。如上所述,正常對象表示與背景接觸的對象,從而正常對象在與背景接觸的坐標(biāo)點(diǎn)具有等于背景深度值的對象深度值。然而,如果掩模被用作區(qū)域識別信息,那么可能無法知道對象的哪一部分與背景接觸,從而有必要用參考信息表示對象中與背景接觸的那一部分。在對象是高亮對象的情況下,由于高亮對象的深度值相應(yīng)于面板位置值和偏移值之和或它們之差,所以對象深度信息也會需要包括與偏移值相關(guān)的信息。對象深度信息還可包括濾波器信息。由于對象具有垂直分量,所以對象中所有像素的深度值可在垂直方向上相互一致。例如,由于高亮對象的深度值相應(yīng)于面板位置值和偏移值之和或它們之差,所以高亮對象的所有像素可具有相同的深度值。在這種情況下,濾8波器信息對于將附加深度值與對象的深度值相加以實現(xiàn)三維對象來說將是必要的。圖像處理設(shè)備可基于濾波器信息來對對象進(jìn)行濾波。根據(jù)本發(fā)明的另一方面,背景深度信息可包括濾波器信息。在整個背景具有相同深度值的情況下,可基于濾波器信息對關(guān)于背景的深度圖進(jìn)行濾波,從而可向背景賦予三維效果。將參照圖5來詳細(xì)描述濾波器信息。以這種方式,根據(jù)圖1的實施例的元數(shù)據(jù)100包括用于將二維圖像的視頻數(shù)據(jù)轉(zhuǎn)換為三維圖像的信息,并包括背景深度信息和對象深度信息。圖2示出了圖1的深度信息。根據(jù)本發(fā)明的各方面,深度信息可被用于將深度賦予二維平面的幀。參照圖2,與觀眾觀看屏幕的方向平行的X軸方向表示幀的圖像的深度。根據(jù)本發(fā)明的各方面,深度值可具有0至255之間的值。隨著深度值降低從而接近0,圖像具有大深度,圖像距觀眾越來越遠(yuǎn)。隨著深度值增加從而接近255,圖像距觀眾越來越近。面板位置表示形成圖像的屏幕的位置,面板位置值表示當(dāng)視差是O時(即當(dāng)在屏幕的平面上形成圖像時)的圖像的深度值。如圖2所示,面板位置值可具有0至255之間的深度值。如果面板位置值是255,包括在幀中的圖像的深度值小于等于屏幕的深度值,從而在遠(yuǎn)離觀眾的地方(也即在屏幕內(nèi)部)形成圖像,從而包括在幀中的圖像具有O視差或者正視差。如果面板位置值是O,則包括在幀中的圖像的深度值大于等于屏幕的深度值,從而圖像好像從屏幕凸出來(即屏幕外部),從而包括在幀中的圖像具有零視差或者負(fù)視差。圖3A至圖3F表示基于包括在背景深度信息中的背景類型信息和表面信息來向背景賦予深度值的方法。如上所述,背景類型信息表示包括在幀中的背景的基本構(gòu)成。可大致將背景類型劃分為六種類型。表1在下面列出了這六種背景類型,圖3A至圖3E與根據(jù)背景類型的背景的基本構(gòu)成相應(yīng)。表1<table>tableseeoriginaldocumentpage9</column></row><table>盡管在圖3A至圖3F中沒有示出,但是還可將所述簡單構(gòu)成作為背景類型被包括。所述簡單構(gòu)成與整個背景具有相同深度值的情況相應(yīng)。圖3A中的幀的背景示出了背景類型是基本基線的情況。當(dāng)相對于單條線(比如與背景中頂線(topline)或底線(bottomline)平行的水平線)在上下區(qū)域中沿垂直方向出現(xiàn)深度改變時使用基本基線的構(gòu)成。當(dāng)圖3A中幀的最左上點(diǎn)的坐標(biāo)值是(0,0)時,坐標(biāo)點(diǎn)Pi和p2具有在X軸上不同但在Y軸上相同的坐標(biāo)值。另外,連接坐標(biāo)點(diǎn)pi和p2的直線的像素具有相等的深度值。當(dāng)背景類型是基本基線時,深度信息包括坐標(biāo)點(diǎn)Pi和P2、應(yīng)用到連接坐標(biāo)點(diǎn)pl和P2的直線的深度值以及頂線和底線的深度值。圖3B中的幀的背景表示背景類型是兩點(diǎn)基線的情況。在相對于與背景中的頂線和底線不平行的單條線在上下區(qū)域中沿垂直和水平方向出現(xiàn)深度改變時,使用兩點(diǎn)基線的構(gòu)成。圖3B中坐標(biāo)點(diǎn)p3和p4的坐標(biāo)值在X軸方向和Y軸方向都不同,并且坐標(biāo)點(diǎn)p3和p4的深度值也不同。連接坐標(biāo)點(diǎn)p3和p4的直線的像素各自具有不同的深度值。當(dāng)背景類型是兩點(diǎn)基線時,深度信息包括坐標(biāo)點(diǎn)p3和p4、將被應(yīng)用到坐標(biāo)點(diǎn)p3和p4的深度值和頂點(diǎn)pl、p2、p5和p6的深度值。圖3C中的幀的背景表示背景類型是五點(diǎn)框的情況。在背景中存在形成為平面矩形的相同深度區(qū)域并且相對于該平面矩形向四個外部的點(diǎn)出現(xiàn)深度改變時,使用五點(diǎn)框的構(gòu)成。參考圖3C,給出了坐標(biāo)點(diǎn)p3以及水平長度X和垂直長度Y以表示矩形區(qū)域。當(dāng)背景類型是五點(diǎn)框時,深度信息包括坐標(biāo)點(diǎn)Pl至p5、坐標(biāo)點(diǎn)pl至p5的深度值和平面矩形的水平及垂直長度。圖3D的幀的背景表示背景類型是六點(diǎn)框的情況。當(dāng)在背景中定義在垂直方向上具有不同深度值的兩個特定點(diǎn),并且相對于所述兩個特定點(diǎn)向四個外部的點(diǎn)出現(xiàn)深度改變時,使用六點(diǎn)框的構(gòu)成。當(dāng)背景類型是六點(diǎn)框時,深度信息包括坐標(biāo)點(diǎn)Pl至p6、坐標(biāo)點(diǎn)pl至p6的深度值。圖3E中的幀的背景表示背景類型是8點(diǎn)框的情況。當(dāng)在背景中存在形成為平面四邊形(所述平面四邊形具有四個頂點(diǎn),并且每個頂點(diǎn)具有不同的深度值)的區(qū)域,并且相對于這四個頂點(diǎn)向四個外部的點(diǎn)出現(xiàn)深度改變時,使用八點(diǎn)框的構(gòu)成。當(dāng)背景類型是八點(diǎn)框時,深度信息包括坐標(biāo)點(diǎn)Pl至p8、坐標(biāo)點(diǎn)pl至p8的深度值。圖3F表示根據(jù)表面信息另外將深度值添加到背景的基本構(gòu)成的情況。圖3F表示用于將深度值另外添加到具有兩點(diǎn)基線的背景構(gòu)成的背景中的坐標(biāo)值。所述表面信息包括坐標(biāo)值和用于將深度值另外添加到背景的坐標(biāo)值的深度值。深度信息包括包含坐標(biāo)點(diǎn)Pl至p10的表面信息和坐標(biāo)點(diǎn)pl至p10的深度值。圖4表示當(dāng)在屏幕一側(cè)觀看圖像時向圖像賦予的深度。圖4中示出的屏幕圖像包括二維對象、正常對象和高亮對象。不對圖4的對象執(zhí)行濾波,并且每個對象的像素沿Z軸方向(即,與面板位置平行的方向)具有相同的深度值。當(dāng)在屏幕一側(cè)觀看時,二維對象位于屏幕上,從而二維對象具有等于屏幕的深度值。由于如圖4所示,正常對象豎立,同時與背景接觸,所以正常對象的深度值等于背景和正常對象相互接觸的背景點(diǎn)的深度值。圖4的高亮對象具有相應(yīng)于面板位置和偏移值之和的深度值。由于在圖4中,高亮對象的深度值大于面板位置值,所以觀眾視覺上感覺圖4的高亮對象好像從屏幕凸出來一樣。圖5A至圖5F表示當(dāng)圖像處理設(shè)備對關(guān)于對象的深度圖或關(guān)于背景的深度圖進(jìn)行濾波時濾波的圖像的三維效果。當(dāng)對象是高亮對象并且對象的像素具有相同的深度值時,為了向?qū)ο筚x予三維效果,可對關(guān)于對象的深度圖進(jìn)行濾波。此外,當(dāng)背景的所有像素具有相同的深度值時,為了向簡單的背景賦予三維效果,可對關(guān)于背景的深度圖進(jìn)行濾波。為了便于描述,圖5A至圖5F表示假設(shè)對象或背景具有相同的深度值時對對象或背景進(jìn)行濾波時從一側(cè)觀看的深度。然而,濾波操作并不限于圖5A至圖5F的情況,因此,盡管對象或背景不具有相同的深度值,也可執(zhí)行濾波操作。圖5A和圖5B表示通過半球形濾波器進(jìn)行濾波的深度圖的深度。圖5A和圖5B與如下所述的情況相應(yīng),其中,在關(guān)于對象的深度圖的形狀或關(guān)于背景的深度圖的形狀是通過球體中心的平面時將半球形濾波器應(yīng)用于所述深度圖。例如,如果對象是高亮對象(比如足球),為了向足球賦予三維效果,可用半球形濾波器對關(guān)于足球的深度圖進(jìn)行濾波。此外,如果在幀中人臉被放大,則人臉可被認(rèn)為是單獨(dú)的對象,但是,為便于描述,當(dāng)假定包括人臉的整個幀是背景時,可將半球形濾波器應(yīng)用到關(guān)于人臉的深度圖以向人臉賦予三維效果。圖5C和圖5D表示通過半圓柱形濾波器進(jìn)行濾波的深度圖的深度。圖5C和圖5D與如下所述的情況相應(yīng),其中,當(dāng)關(guān)于對象的深度圖的形狀或關(guān)于背景的深度圖的形狀可以是垂直地將圓柱體一分為二的平面時將半圓柱形濾波器應(yīng)用到深度圖。例如,當(dāng)對象是正常對象并且對象的形狀是電話線桿的形狀時,可使用半圓柱形濾波器以向電話線桿賦予三維效果。圖5E和圖5F與將三棱柱形濾波器應(yīng)用到深度圖像的情況相應(yīng)。如圖5E和圖5F所示,在三棱柱的矩形側(cè)面與深度圖平行的情況下,可將三棱柱形濾波器應(yīng)用到深度圖。這樣做,可修改深度圖。圖6A和圖6B表示通過使用圖1的元數(shù)據(jù)100產(chǎn)生深度圖的方法。圖6A表示二維圖像,圖6B與向圖6A所示的屏幕賦予深度值的情況相應(yīng)。根據(jù)本發(fā)明的各個方面,圖像處理設(shè)備(未示出)將幀劃分為背景和對象,并產(chǎn)生背景深度信息和對象深度信息。參照圖6A,二維圖像的幀包括陸地和天空的背景,對象包括兩棵樹、一個人和一個氣球。所述圖像處理設(shè)備從元數(shù)據(jù)100提取背景深度信息。圖6A的幀具有如下所述的構(gòu)成作為水平線的地平線具有最大的深度。圖像處理設(shè)備使用從元數(shù)據(jù)100提取的背景類型信息,從而識別圖6A的幀具有如圖3A所示的基本基線的背景構(gòu)成。圖像處理設(shè)備基于關(guān)于構(gòu)成類型的信息、背景的坐標(biāo)點(diǎn)值和關(guān)于背景的深度值信息向背景賦予深度值,從而產(chǎn)生如圖6B所示的關(guān)于背景的深度圖。參照圖6B,面板位置的深度值是255。由于面板位置的深度值是最大值,所以幀的圖像呈現(xiàn)了圖像似乎在屏幕內(nèi)側(cè)的三維效果。在圖6B中,天空和陸地相接觸的水平線具有深度值0,從而該水平線距觀眾最遠(yuǎn)。陸地的底線具有深度值255,這就意味著在距觀眾最近的位置形成底線的圖像。圖像處理設(shè)備從區(qū)域識別信息提取坐標(biāo)點(diǎn)信息以識別對象區(qū)域,并基于坐標(biāo)點(diǎn)信息從幀中識別對象。所述區(qū)域識別信息可以是標(biāo)記對象的形狀的掩模,在這種情況下,可基于掩模來識別對象區(qū)域。圖像處理設(shè)備基于包括在對象深度信息中的對象類型信息確定每個對象的對象類型。在圖6A的幀中,對象包括兩棵樹、一個人、一個標(biāo)有NBC的標(biāo)識語和一個氣球。由于11所述的兩棵樹和人與陸地接觸,所以這兩棵樹與人是正常對象。由于打算將標(biāo)有NBC的標(biāo)識語顯示在二維屏幕上,所以該標(biāo)識語是二維對象。由于氣球是漂浮在空中的對象,所以氣球是高亮對象。圖像處理設(shè)備通過使用區(qū)域識別信息來識別每個對象區(qū)域。對于二維對象,圖像處理設(shè)備基于面板位置值產(chǎn)生如圖6B所示的關(guān)于二維對象的深度圖,所述面板位置值包括在背景深度信息中??苫诙S對象的深度值來確定面板位置值。對于正常對象,圖像處理設(shè)備確定正常對象與背景接觸的一個或多個點(diǎn),提取與正常對象和背景接觸的點(diǎn)的坐標(biāo)點(diǎn)值相應(yīng)的背景深度值。對于高亮對象,圖像處理設(shè)備基于這樣的深度值產(chǎn)生關(guān)于高亮對象的深度圖,其中,基于面板位置值和偏移值來計算所述深度值。在產(chǎn)生關(guān)于對象的深度圖之后,圖像處理設(shè)備可對所述深度圖進(jìn)行濾波。例如,圖像處理設(shè)備可通過將半球形濾波器應(yīng)用到氣球來如圖6B所示向氣球賦予三維效果。如上所述,根據(jù)本發(fā)明的各方面,可根據(jù)對象類型基于各種方法向?qū)ο筚x予深度值來產(chǎn)生關(guān)于對象的深度圖。圖7是根據(jù)本發(fā)明實施例的執(zhí)行圖像處理方法的圖像處理設(shè)備700的框圖。所述圖像處理設(shè)備700包括視頻數(shù)據(jù)解碼單元710、元數(shù)據(jù)分析單元720、掩模緩沖器730、深度圖產(chǎn)生單元740和立體渲染單元750。所述圖像處理設(shè)備700還可包括輸出單元760,所述輸出單元760在屏幕上輸出以三維格式形成的三維圖像。根據(jù)本發(fā)明的其他方面,圖像處理設(shè)備可包括另外和/或不同的單元。同樣,上述單元中的兩個或多個單元的功能可集成在一個組件中。視頻數(shù)據(jù)解碼單元710從盤(未示出)或本地存儲器(未示出)讀取視頻數(shù)據(jù),并對視頻數(shù)據(jù)解碼。元數(shù)據(jù)分析單元720從盤或本地存儲器讀取關(guān)于視頻數(shù)據(jù)的元數(shù)據(jù)100,并分析關(guān)于視頻數(shù)據(jù)的元數(shù)據(jù)100。可以以復(fù)用的方式或者獨(dú)立的方式將視頻數(shù)據(jù)和/或關(guān)于視頻數(shù)據(jù)的元數(shù)據(jù)100存儲在服務(wù)器(未示出)中或記錄在盤中。圖像處理設(shè)備700可從服務(wù)器下載視頻數(shù)據(jù)并從盤讀取關(guān)于視頻數(shù)據(jù)的元數(shù)據(jù)ioo,或者可從盤讀取視頻數(shù)據(jù)并從服務(wù)器下載關(guān)于視頻數(shù)據(jù)的元數(shù)據(jù)100。如果在服務(wù)器中存儲視頻數(shù)據(jù)和/或關(guān)于視頻數(shù)據(jù)的元數(shù)據(jù)IOO,則圖像處理設(shè)備700可經(jīng)通信網(wǎng)絡(luò)從服務(wù)器下載視頻數(shù)據(jù)和/或關(guān)于視頻數(shù)據(jù)的元數(shù)據(jù)100,并使用它們??赏ㄟ^內(nèi)容提供方(比如廣播站或普通的內(nèi)容制造公司)來操作服務(wù)器,并且服務(wù)器存儲視頻數(shù)據(jù)和/或關(guān)于視頻數(shù)據(jù)的元數(shù)據(jù)100。服務(wù)器提取用戶請求的內(nèi)容,并向用戶提供所述內(nèi)容。如果圖像處理設(shè)備700經(jīng)通信網(wǎng)絡(luò)從服務(wù)器下載信息,則圖像處理設(shè)備700還可包括通信單元(未示出)和本地存儲器(未示出)。所述通信單元通過有線或無線通信網(wǎng)絡(luò)向服務(wù)器請求視頻數(shù)據(jù)和/或關(guān)于視頻數(shù)據(jù)的元數(shù)據(jù)100,并從服務(wù)器接收視頻數(shù)據(jù)和/或關(guān)于視頻數(shù)據(jù)的元數(shù)據(jù)IOO(下面稱作"元數(shù)據(jù)100")。本地存儲器存儲從服務(wù)器下載的信息。根據(jù)本發(fā)明的本地存儲器存儲通過通信單元從服務(wù)器發(fā)送的視頻數(shù)據(jù)和/或元數(shù)據(jù)100。如果以復(fù)用或者獨(dú)立的方式將視頻數(shù)據(jù)和/或元數(shù)據(jù)100記錄在盤中,則當(dāng)在圖像處理設(shè)備700中加載具有視頻數(shù)據(jù)和/或元數(shù)據(jù)100的盤時,視頻數(shù)據(jù)解碼單元710和12元數(shù)據(jù)分析單元720分別從盤中讀取視頻數(shù)據(jù)和元數(shù)據(jù)100。所述元數(shù)據(jù)100可被記錄在盤的導(dǎo)入?yún)^(qū)、用戶數(shù)據(jù)區(qū)和/或?qū)С鰠^(qū)。如果在盤中記錄視頻數(shù)據(jù),則元數(shù)據(jù)分析單元720從元數(shù)據(jù)100提取用于識別具有視頻數(shù)據(jù)的盤的盤識別符和用于表示盤中包括視頻數(shù)據(jù)的標(biāo)題的標(biāo)題識別符,并基于盤識別符和標(biāo)題識別符來確定哪個視頻數(shù)據(jù)與元數(shù)據(jù)100相關(guān)。元數(shù)據(jù)分析單元720從元數(shù)據(jù)100提取包括對象的幀的輸出時間,并在當(dāng)前幀的輸出時間被包括在包含對象的幀的輸出時間中時,元數(shù)據(jù)分析單元720解析關(guān)于當(dāng)前幀的背景深度信息和對象深度信息,并將背景深度信息和對象深度信息發(fā)送到深度圖產(chǎn)生單元740。當(dāng)關(guān)于掩模的信息被定義為關(guān)于當(dāng)前正輸出的幀中包括的對象的區(qū)域識別信息時,掩模緩沖器730臨時存儲將被應(yīng)用到幀的掩模。所述掩??稍趯ο蟮男螤钪泻蛶谐龑ο蟮男螤钪獾钠溆鄥^(qū)域中具有不同的顏色。在其他情況下,可在掩模中包括沿對象區(qū)域的一系列的孔(hole)。一個對象可需要一個掩模。深度圖產(chǎn)生單元740基于從元數(shù)據(jù)分析單元720接收的背景深度信息和對象深度信息以及從掩模緩沖器730接收的掩模產(chǎn)生關(guān)于幀的深度圖。深度圖產(chǎn)生單元740基于元數(shù)據(jù)IOO產(chǎn)生關(guān)于背景的深度圖和關(guān)于對象的深度圖,并將關(guān)于背景的深度圖和關(guān)于對象的深度圖相結(jié)合,因此產(chǎn)生關(guān)于幀的深度圖。深度圖產(chǎn)生單元740基于包括在對象深度信息中的區(qū)域識別信息識別對象區(qū)域。如上所述,區(qū)域識別信息可以是表示對象區(qū)域的坐標(biāo)點(diǎn)的值,或者可以是標(biāo)記對象的形狀的掩模。深度圖產(chǎn)生單元740基于關(guān)于坐標(biāo)點(diǎn)或者掩模的信息來識別對象的形狀,并向識別的對象賦予深度值。如果對象是正常對象,則深度圖產(chǎn)生單元740從對象區(qū)域中的坐標(biāo)點(diǎn)中提取作為與背景接觸的那部分的坐標(biāo)點(diǎn),并基于與提取的坐標(biāo)點(diǎn)相應(yīng)的深度值產(chǎn)生關(guān)于對象的深度圖。如果對象是二維對象,則深度圖產(chǎn)生單元740基于面板位置值產(chǎn)生關(guān)于二維對象的深度圖。如果對象是高亮對象,則深度圖產(chǎn)生單元740可基于偏移值和面板位置值來產(chǎn)生關(guān)于高亮對象的深度圖。深度圖產(chǎn)生單元740基于關(guān)于背景的深度圖和關(guān)于對象的深度圖產(chǎn)生關(guān)于幀的深度圖。所述深度圖產(chǎn)生單元740將產(chǎn)生的關(guān)于幀的深度圖發(fā)送到立體渲染單元750。立體渲染單元750基于從視頻數(shù)據(jù)解碼單元710接收的視頻圖像和從深度圖產(chǎn)生單元740接收的深度圖產(chǎn)生左眼圖像和右眼圖像,并產(chǎn)生包括左眼圖像和右眼圖像的三維格式的圖像。此外,在圖像處理設(shè)備700中可包括輸出裝置(未示出)。下面,假定輸出裝置作為輸出單元760包括在圖像處理設(shè)備700中。輸出單元760在屏幕上順序地輸出左眼圖像和右眼圖像。針對一只眼,當(dāng)以60Hz的最小幀頻輸出圖像時,觀眾視覺上感覺連續(xù)無縫地再現(xiàn)圖像。因此,為了允許經(jīng)觀眾的左/右眼輸入的圖像相結(jié)合,然后被觀眾識別為三維圖像,輸出單元760應(yīng)該以120Hz的最小幀頻輸出圖像。輸出單元760以1/120秒為單位順序顯示包括在幀中的左眼圖像和右眼圖像。圖8是圖7的圖像處理設(shè)備700中的深度圖產(chǎn)生單元740的詳細(xì)框圖。深度圖產(chǎn)生單元740包括背景深度圖產(chǎn)生單元810、對象深度圖產(chǎn)生單元820、濾波單元830和深度圖緩沖器單元840。背景深度圖產(chǎn)生單元810從元數(shù)據(jù)分析單元720接收背景深度信息。背景深度信息包括背景類型信息、背景坐標(biāo)點(diǎn)、與背景坐標(biāo)點(diǎn)相應(yīng)的深度值和面板位置值。所述背景圖產(chǎn)生單元810基于背景深度信息產(chǎn)生關(guān)于背景的深度圖。背景深度圖產(chǎn)生單元810將關(guān)于背景的深度圖發(fā)送到濾波單元830中。對象深度圖產(chǎn)生單元820從元數(shù)據(jù)分析單元720接收包括區(qū)域識別信息和對象類型信息的對象深度信息,并基于對象深度信息產(chǎn)生關(guān)于對象的深度圖。如果區(qū)域識別信息與掩模相關(guān),則對象深度圖產(chǎn)生單元820從掩模緩沖器730接收將被應(yīng)用到相應(yīng)幀的掩模,并基于掩模產(chǎn)生關(guān)于對象的深度圖。如果對象是正常對象,則對象深度圖產(chǎn)生單元820向背景深度圖產(chǎn)生單元810請求與對象和背景接觸的位置的坐標(biāo)點(diǎn)相應(yīng)的背景深度值。對象深度圖產(chǎn)生單元820從背景深度圖產(chǎn)生單元810接收與對象和背景接觸的位置的坐標(biāo)點(diǎn)相應(yīng)的背景深度值,并基于作為對象的深度值的所述背景深度值產(chǎn)生關(guān)于對象的深度圖。如果對象是二維對象,則對象深度圖產(chǎn)生單元820向背景深度圖產(chǎn)生單元810請求面板位置值,并基于面板位置值產(chǎn)生關(guān)于二維對象的深度圖。如果對象是高亮對象,則對象深度圖產(chǎn)生單元820基于從背景深度圖產(chǎn)生單元810接收的面板位置值和包括在對象深度信息中的偏移值,產(chǎn)生關(guān)于高亮對象的深度圖。如果在幀中包括多個對象,則對象深度產(chǎn)生單元820根據(jù)優(yōu)先級順序信息順序產(chǎn)生關(guān)于多個對象的深度圖。濾波單元830對關(guān)于背景的深度圖和關(guān)于對象的深度圖進(jìn)行濾波。如果對象的像素具有相同的深度值,則濾波單元830可將濾波器應(yīng)用到關(guān)于對象的深度圖,以向?qū)ο蟮南袼刭x予三維效果。如果關(guān)于背景的深度圖的形狀是平面,即如果整個背景具有相同的深度值,則濾波器可被用于向背景賦予三維效果。深度圖緩沖器單元840臨時存儲由濾波單元830濾波的關(guān)于背景的深度圖,并在產(chǎn)生了關(guān)于對象的深度圖時,通過將關(guān)于對象的深度圖與關(guān)于背景的深度圖相加來更新關(guān)于幀的深度圖。如果對象包括多個對象,則深度圖緩沖器單元840順序疊加關(guān)于多個對象的深度圖,因此,更新關(guān)于幀的深度圖。當(dāng)關(guān)于幀的深度圖完成時,深度圖緩沖器單元840將關(guān)于幀的深度圖發(fā)送到立體渲染單元750。圖9是圖7的圖像處理設(shè)備700中的立體渲染單元750的詳細(xì)框圖。立體渲染單元750包括立體圖像產(chǎn)生單元910、孔補(bǔ)償單元920、左眼圖像緩沖器930、右眼圖像緩沖器940和三維格式圖像產(chǎn)生單元950。立體圖像產(chǎn)生單元910基于從視頻數(shù)據(jù)解碼單元710接收的視頻圖像和從深度圖產(chǎn)生單元740接收的關(guān)于幀的深度圖,產(chǎn)生左眼圖像和右眼圖像。立體圖像產(chǎn)生單元910基于關(guān)于幀的深度圖計算二維圖像中的每個像素應(yīng)該在向左和向右移動多遠(yuǎn),并產(chǎn)生這樣的左眼圖像和右眼圖像在左眼圖像和右眼圖像中,每個像素根據(jù)計算結(jié)果而移動并被映射到新的位置。孔補(bǔ)償單元920補(bǔ)償在左眼圖像和右眼圖像中產(chǎn)生的孔。當(dāng)基于二維圖像產(chǎn)生左眼圖像和右眼圖像時,二維圖像的像素被重復(fù)映射到左眼圖像和右眼圖像中的一些位置,同時二維圖像的像素不被映射到一些其他位置,這些位置因此是空的,這些空的位置被稱作孔??籽a(bǔ)償單元920補(bǔ)償左眼圖像和右眼圖像中的這些孔,然后將左眼圖像發(fā)送到左眼14圖像緩沖器930,并將右眼圖像發(fā)送到右眼圖像緩沖器940。左眼圖像緩沖器930和右眼圖像緩沖器940存儲相應(yīng)的左眼圖像和右眼圖像。當(dāng)將輸出圖像時,左眼圖像緩沖器930和右眼圖像緩沖器940將左眼圖像和右眼圖像發(fā)送到三維格式圖像產(chǎn)生單元950。三維格式圖像產(chǎn)生單元950產(chǎn)生三維格式圖像,其中,左眼圖像和右眼圖像中的所有圖像可被包括在三維格式圖像中。三維格式的類型可以是上下格式、并排格式和交錯格式等。三維格式圖像產(chǎn)生單元950將三維格式的圖像發(fā)送到輸出裝置(未示出)。盡管已經(jīng)顯示并描述了本發(fā)明的若干實施例,但是,本領(lǐng)域的技術(shù)人員應(yīng)該理解,在不脫離本發(fā)明的精神和范圍的情況下,可以對實施例進(jìn)行改變,本發(fā)明的范圍由權(quán)利要求及其等同物限定。1權(quán)利要求一種圖像處理方法,包括從元數(shù)據(jù)提取鏡頭信息,其中,鏡頭信息將一系列的二維圖像劃分為預(yù)定單元;基于包括在鏡頭信息中的鏡頭類型信息,確定劃分為預(yù)定鏡頭的幀是否可被再現(xiàn)為三維圖像;如果被劃分為所述預(yù)定鏡頭的幀可被再現(xiàn)為三維圖像,則從元數(shù)據(jù)提取背景深度信息,其中,背景深度信息與被劃分為所述預(yù)定鏡頭的幀的背景相關(guān);基于背景深度信息產(chǎn)生關(guān)于所述幀的背景的深度圖;如果被劃分為所述預(yù)定鏡頭的幀包括對象,則從元數(shù)據(jù)提取關(guān)于對象的對象深度信息;基于對象深度信息產(chǎn)生關(guān)于對象的深度圖。2.如權(quán)利要求1所述的圖像處理方法,還包括基于鏡頭信息來計算需要輸出被劃分為所述預(yù)定鏡頭的幀的時間。3.如權(quán)利要求l所述的圖像處理方法,其中,產(chǎn)生關(guān)于背景的深度圖的步驟包括從背景深度信息提取信息,所述信息包括背景類型信息、表面信息、背景的坐標(biāo)點(diǎn)、背景的每個坐標(biāo)點(diǎn)的深度值和面板位置值,其中,所述背景類型信息表示背景的基本構(gòu)成,所述表面信息用于將深度值應(yīng)用到包括在背景中的表面,所述面板位置值表示屏幕的深度值。4.如權(quán)利要求3所述的圖像處理方法,其中,產(chǎn)生關(guān)于背景的深度圖的步驟包括基于根據(jù)背景類型信息的背景的基本構(gòu)成的深度值和根據(jù)表面信息的表面的深度值產(chǎn)生關(guān)于背景的深度圖。5.如權(quán)利要求3所述的圖像處理方法,還包括如果幀的背景具有相同深度值,則對關(guān)于背景的深度圖進(jìn)行濾波;其中,對關(guān)于背景的深度圖進(jìn)行濾波的步驟包括將半球形濾波器、半圓柱形濾波器或三棱柱形濾波器應(yīng)用到關(guān)于背景的深度圖,以修改關(guān)于背景的深度圖。6.如權(quán)利要求1所述的圖像處理方法,其中,所述對象深度信息包括用于從二維對象、正常對象和高亮對象中識別對象的類型的對象類型信息。7.如權(quán)利要求1所述的圖像處理方法,其中如果幀包括多個對象,則對象深度信息包括優(yōu)先級順序信息,所述優(yōu)先級順序信息表示所述多個對象的深度圖產(chǎn)生順序;所述產(chǎn)生關(guān)于對象的深度圖的步驟包括根據(jù)深度圖產(chǎn)生順序依次產(chǎn)生關(guān)于所述多個對象的深度圖。8.如權(quán)利要求1所述的圖像處理方法,其中,所述產(chǎn)生關(guān)于對象的深度圖的步驟包括基于對象深度信息獲得需要輸出包括該對象的幀的時間。9.如權(quán)利要求1所述的圖像處理方法,還包括從對象深度信息提取用于識別對象區(qū)域的區(qū)域識別信息;其中,所述區(qū)域識別信息與其中對象區(qū)域被表示為坐標(biāo)點(diǎn)的信息相應(yīng),或者與標(biāo)記對象的形狀的掩模相應(yīng)。10.如權(quán)利要求9所述的圖像處理方法,其中,如果對象是高亮對象,則產(chǎn)生關(guān)于對象的深度圖的步驟包括基于包括在背景深度信息中的面板位置值和包括在對象深度信息中的偏移值來計算高亮對象區(qū)域的深度值;基于高亮對象區(qū)域的深度值產(chǎn)生關(guān)于高亮對象的深度圖。11.如權(quán)利要求13所述的圖像處理方法,還包括對關(guān)于對象的深度圖進(jìn)行濾波;其中,對關(guān)于對象的深度圖進(jìn)行濾波的步驟包括將半球形濾波器、半圓柱形濾波器或三棱柱形濾波器應(yīng)用到關(guān)于對象的深度圖,以修改關(guān)于對象的深度圖。12.如權(quán)利要求1所述的圖像處理方法,還包括基于關(guān)于背景的深度圖和關(guān)于對象的深度圖,針對二維圖像產(chǎn)生左眼圖像和右眼圖像;補(bǔ)償左眼圖像和右眼圖像的孔;基于補(bǔ)償?shù)淖笱蹐D像和補(bǔ)償?shù)挠已蹐D像產(chǎn)生三維格式的圖像。13.—種圖像處理設(shè)備,包括元數(shù)據(jù)分析單元,基于包括在鏡頭信息中的鏡頭類型信息從元數(shù)據(jù)提取鏡頭信息,所述鏡頭信息將一系列的二維圖像劃分為預(yù)定單元;當(dāng)被劃分為預(yù)定鏡頭的幀可被再現(xiàn)為三維圖像時,從元數(shù)據(jù)提取背景深度信息,所述背景深度信息與被劃分為所述預(yù)定鏡頭的幀的背景相關(guān);當(dāng)被劃分為所述預(yù)定鏡頭的幀包括對象時,從元數(shù)據(jù)提取并分析關(guān)于對象的對象深度信息;深度圖產(chǎn)生單元,基于背景深度信息產(chǎn)生關(guān)于所述幀的背景的深度圖,并基于對象深度信息產(chǎn)生關(guān)于對象的深度圖。14.一種存儲有執(zhí)行圖像處理方法的計算機(jī)可讀程序的記錄介質(zhì),所述圖像處理方法包括從元數(shù)據(jù)提取鏡頭信息,其中,鏡頭信息將一系列的二維圖像劃分為預(yù)定單元;確定劃分為預(yù)定鏡頭的幀是否可被再現(xiàn)為三維圖像;如果被劃分為預(yù)定鏡頭的幀可被再現(xiàn)為三維圖像,則從元數(shù)據(jù)提取背景深度信息,其中,背景深度信息與被劃分為預(yù)定鏡頭的幀的背景相關(guān);基于背景深度信息產(chǎn)生關(guān)于幀的背景的深度圖;當(dāng)被劃分為預(yù)定鏡頭的幀包括對象時,從元數(shù)據(jù)提取關(guān)于對象的對象深度信息;基于對象深度信息產(chǎn)生關(guān)于對象的深度圖。全文摘要提供了一種圖像處理方法及設(shè)備。所述圖像處理方法包括從元數(shù)據(jù)提取鏡頭信息,其中,鏡頭信息用于將一系列的二維圖像劃分為預(yù)定單元;如果使用包括在鏡頭信息中的鏡頭類型信息確定劃分為預(yù)定鏡頭的幀可被再現(xiàn)為三維圖像,則從元數(shù)據(jù)提取背景深度信息,其中,背景深度信息與被劃分為預(yù)定鏡頭的幀的背景相關(guān);通過使用背景深度信息產(chǎn)生關(guān)于幀的背景的深度圖;如果被劃分為預(yù)定鏡頭的幀包括對象,則從元數(shù)據(jù)提取關(guān)于對象的對象深度信息;通過使用對象深度信息產(chǎn)生關(guān)于對象的深度圖。文檔編號H04N5/91GK101771892SQ20091026526公開日2010年7月7日申請日期2009年12月28日優(yōu)先權(quán)日2008年12月26日發(fā)明者全惠暎,李大鐘,鄭吉洙,鄭鉉權(quán)申請人:三星電子株式會社
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點(diǎn)贊!
1