專利名稱:數(shù)字內(nèi)容的2d轉(zhuǎn)3d的方法及裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及數(shù)字處理技術(shù)領(lǐng)域,尤其涉及數(shù)字內(nèi)容的2D轉(zhuǎn)3D的方法及裝置。
背景技術(shù):
立體視覺一般分為雙眼立體視覺和單眼立體視覺,目前的3D放映基本上都是基于雙眼的視差(Parallax)來形成立體效果。由于兩只眼睛有4_6厘米的距離,因此有輕微不同的視角。而不同視角的圖像被傳送到大腦,其中的輕微不同之處(視差)被解析為深度。3D內(nèi)容的產(chǎn)生基本上也遵循了同樣的原理。3D立體數(shù)字電影的素材來源于雙機(jī)拍攝或多機(jī)拍攝、CGI (Computer GeneratedImage,計(jì)算機(jī)合成圖像)以及2D到3D轉(zhuǎn)換。
雙機(jī)拍攝甚至多機(jī)拍攝均為模仿人的兩只眼鏡對(duì)真實(shí)的三維世界的圖像攝取,例如電影《阿凡達(dá)》以及南非世界杯均采用雙機(jī)立體拍攝。一般采用稱為立體支架(StereoRig)的設(shè)備并在其上安裝兩臺(tái)參數(shù)一致的攝像機(jī)。所謂2D轉(zhuǎn)3D (3D視覺)指從場(chǎng)景的一幅圖像或者一系列圖像中,推導(dǎo)出該場(chǎng)景精確的三維幾何描述,并定量的確定場(chǎng)景中物體的性質(zhì)。將3D視覺分為自下而上(重建)與自上而下(基于模型的視覺)兩大類。由于數(shù)字電影內(nèi)容不可能是基于某種事先預(yù)知的某種模型,因此主要采用自下而上的重建方式。其主要的步驟如下(I)輸入灰度圖(Intensity);(2)生成主輪廓(Primal sketch),表示出圖像中重要物體的邊緣(采用圖像分割技術(shù));(3)生成深度圖(亦稱2. sketch),表示出以觀看者為中心的圖像中各物體的深度;⑷3D呈現(xiàn),表示出圖像中各個(gè)物體的空間幾何結(jié)構(gòu)與關(guān)系。對(duì)于3D影視應(yīng)用而言,最終的3D表示是所謂的3D立體圖像對(duì),即兩幅略微不同的圖像,其中一幅稱為左眼圖像,另一幅稱為右眼圖像。圖I為傳統(tǒng)的2D轉(zhuǎn)3D的方法示意圖。如圖I所示,傳統(tǒng)的方法主要分為三個(gè)步驟1、對(duì)原始2D圖像進(jìn)行圖像分割,從而產(chǎn)生“分割后的2D圖像” ;2、在“分割后的2D圖像”中進(jìn)行深度線索提取并進(jìn)行深度賦值,從而產(chǎn)生“深度圖”;3、結(jié)合“深度圖”與“分割后的2D圖像”,生成視差圖(3D立體圖像對(duì))。這種2D轉(zhuǎn)3D的方法一個(gè)顯著的問題是不同物體之間具有應(yīng)有的深度差異,但因?yàn)閳D像分割是針對(duì)每個(gè)物體的,所以每個(gè)物體看起來均為平面結(jié)構(gòu),并不能反映單獨(dú)個(gè)體的空間3D結(jié)構(gòu)。
發(fā)明內(nèi)容
本發(fā)明實(shí)施例提供ー種數(shù)字內(nèi)容的2D轉(zhuǎn)3D的方法,用以使不同物體之間具有應(yīng)有的深度差異,而且能夠反映單獨(dú)個(gè)體的空間3D結(jié)構(gòu),該方法包括
將原始2D圖像進(jìn)行圖像分割,產(chǎn)生分割后的2D圖像;在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生全局深度圖;將分割后的2D圖像進(jìn)行3D建模,產(chǎn)生3D建模后的圖像;在3D建模后的圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生局部深度圖;將全局深度圖與局部深度圖相結(jié)合,產(chǎn)生合成深度圖;將合成深度圖與分割后的2D圖像相結(jié)合,產(chǎn)生3D立體圖像對(duì)。本發(fā)明實(shí)施例還提供ー種數(shù)字內(nèi)容的2D轉(zhuǎn)3D的裝置,用以使不同物體之間具有應(yīng)有的深度差異,而且能夠反映單獨(dú)個(gè)體的空間3D結(jié)構(gòu),該裝置包括
圖像分割模塊,用于將原始2D圖像進(jìn)行圖像分割,產(chǎn)生分割后的2D圖像;全局深度圖產(chǎn)生模塊,用于在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生全局深度圖;3D建模模塊,用于將分割后的2D圖像進(jìn)行3D建模,產(chǎn)生3D建模后的圖像;局部深度圖產(chǎn)生模塊,用于在3D建模后的圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生局部深度圖;合成深度圖產(chǎn)生模塊,用于將全局深度圖與局部深度圖相結(jié)合,產(chǎn)生合成深度圖;3D立體圖像對(duì)產(chǎn)生模塊,用于將合成深度圖與分割后的2D圖像相結(jié)合,產(chǎn)生3D立體圖像對(duì)。本發(fā)明實(shí)施例中,將原始2D圖像進(jìn)行圖像分割,產(chǎn)生分割后的2D圖像;在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生全局深度圖;將分割后的2D圖像進(jìn)行3D建模,產(chǎn)生3D建模后的圖像;在3D建模后的圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生局部深度圖;將全局深度圖與局部深度圖相結(jié)合,產(chǎn)生合成深度圖;將合成深度圖與分割后的2D圖像相結(jié)合,產(chǎn)生3D立體圖像對(duì);從而不但使不同物體之間具有應(yīng)有的深度差異,而且能夠反映單獨(dú)個(gè)體的空間3D結(jié)構(gòu)。
為了更清楚地說明本發(fā)明實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案,下面將對(duì)實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡(jiǎn)單地介紹,顯而易見地,下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例,對(duì)于本領(lǐng)域普通技術(shù)人員來講,在不付出創(chuàng)造性勞動(dòng)性的前提下,還可以根據(jù)這些附圖獲得其他的附圖。在附圖中圖I為背景技術(shù)中傳統(tǒng)的2D轉(zhuǎn)3D的方法示意圖;圖2為本發(fā)明實(shí)施例中數(shù)字內(nèi)容的2D轉(zhuǎn)3D的方法的處理流程圖;圖3為本發(fā)明實(shí)施例中平移操作的幾何關(guān)系示意圖;圖4為本發(fā)明實(shí)施例中數(shù)字內(nèi)容的2D轉(zhuǎn)3D的方法示意圖;圖5為本發(fā)明實(shí)施例中數(shù)字內(nèi)容的2D轉(zhuǎn)3D的方法與現(xiàn)有技術(shù)的效果比較圖;圖6為本發(fā)明實(shí)施例中數(shù)字內(nèi)容的2D轉(zhuǎn)3D的裝置結(jié)構(gòu)示意圖;圖7、圖8為本發(fā)明實(shí)施例中數(shù)字內(nèi)容的2D轉(zhuǎn)3D的裝置的具體實(shí)例的結(jié)構(gòu)示意圖。
具體實(shí)施例方式為使本發(fā)明實(shí)施例的目的、技術(shù)方案和優(yōu)點(diǎn)更加清楚明白,下面結(jié)合附圖對(duì)本發(fā)明實(shí)施例做進(jìn)ー步詳細(xì)說明。在此,本發(fā)明的示意性實(shí)施例及其說明用于解釋本發(fā)明,但并不作為對(duì)本發(fā)明的限定。如圖2所示,本發(fā)明實(shí)施例中數(shù)字內(nèi)容的2D轉(zhuǎn)3D的方法的處理流程可以包括步驟201、將原始2D圖像進(jìn)行圖像分割,產(chǎn)生分割后的2D圖像;步驟202、在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生全局深度圖;步驟203、將分割后的2D圖像進(jìn)行3D建模,產(chǎn)生3D建模后的圖像;步驟204、在3D建模后的圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生局部深度圖;其中,步驟203、204產(chǎn)生局部深度圖與步驟202產(chǎn)生全局深度圖可以同時(shí)進(jìn)行,也可以先后 進(jìn)行;步驟205、將全局深度圖與局部深度圖相結(jié)合,產(chǎn)生合成深度圖;步驟206、將合成深度圖與分割后的2D圖像相結(jié)合,產(chǎn)生3D立體圖像對(duì)。由圖2所示流程可知,本發(fā)明實(shí)施例將物體3D建模結(jié)合圖像分割,利用圖像分割產(chǎn)生“全局深度圖”,利用3D建模產(chǎn)生“局部深度圖”,并將二者結(jié)合起來從而產(chǎn)生“合成深度圖”,從而在產(chǎn)生3D立體圖像對(duì)時(shí),使不同物體之間具有應(yīng)有的深度差異,而且能夠反映單獨(dú)個(gè)體的空間3D結(jié)構(gòu)。圖像分割的主要目標(biāo)是將圖像劃分為與其中含有的真實(shí)世界的物體或區(qū)域有強(qiáng)相關(guān)性的組成部分。圖像分割方法一般是基于亮度值的兩個(gè)基本特征之一不連續(xù)性和相似性。目前圖像分割方法主要可以劃分為三大類閾值化分割、基于邊緣的分割與基于區(qū)域的分割。本發(fā)明實(shí)施例中,圖像分割產(chǎn)生“全局深度圖”的方法可采用傳統(tǒng)的深度線索方法,但是也可以對(duì)傳統(tǒng)的深度線索方法進(jìn)ー步改進(jìn),例如,在具體實(shí)施時(shí),可建立深度線索優(yōu)先級(jí)和/或深度線索可用度的概念,對(duì)同一幅圖像按照深度線索優(yōu)先級(jí)和/或深度線索可用度執(zhí)行深度。具體的,在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值,可以包括根據(jù)深度線索優(yōu)先級(jí)和/或深度線索可用度,在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值。深度線索優(yōu)先級(jí)反映深度線索的級(jí)別高低,例如有4個(gè)深度線索A、B、C、D,則按深度線索優(yōu)先級(jí)從高到低的順序可以排序?yàn)锳、B、C、D,表示深度線索優(yōu)先級(jí)A > B > C >D。深度線索可用度反映深度線索的可用程度,可以是ー個(gè)百分比的概念,仍假設(shè)有4個(gè)深度線索A、B、C、D,則深度線索可用度可以是A為90%、B為50%、C為30%、D為10%。在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值時(shí),深度線索優(yōu)先級(jí)和深度線索可用度可以單獨(dú)應(yīng)用,也可以結(jié)合應(yīng)用。下面以單獨(dú)應(yīng)用深度線索優(yōu)先級(jí)為例來具體說明。常用的深度線索包括雙目視差、運(yùn)動(dòng)、離焦、焦點(diǎn)、人影、線性透視、大氣散射、陰影、紋理圖案、雙邊對(duì)稱格局、閉塞、統(tǒng)計(jì)模式等。假設(shè)將ー些深度線索定義為DI-A, DI-B, DI-C,DI-D,DI-E,DI-F,DI-G,DI-H ;對(duì)于圖像幀1,可能的深度線索優(yōu)先級(jí)順序?yàn)镈I-B, DI-A, DI-C,DI-D,DI-H,DI-F, DI-E,DI-G ;
對(duì)于圖像幀2,可能的深度線索優(yōu)先級(jí)順序?yàn)镈I-H, DI-A, DI-C,DI-E,DI-F, DI-B,DI-D,DI-G ;如果兩種深度線索搜索并賦值的結(jié)果相同或類似,則是ー個(gè)確認(rèn)或者修正;如果兩種深度線索搜索并賦值的結(jié)果相反,則采用優(yōu)先級(jí)高的結(jié)果,放棄優(yōu)先級(jí)低的結(jié)果。具體實(shí)施時(shí),將合成深度圖與分割后的2D圖像相結(jié)合,分別產(chǎn)生左眼圖像和右眼圖像,二者即為3D立體圖像對(duì)。具體實(shí)施時(shí),將合成深度圖與分割后的2D圖像相結(jié)合,產(chǎn)生3D圖像對(duì),可以包括將分割后的2D圖像中的物體進(jìn)行平移操作,其中平移量根據(jù)如下公式獲得Parallax = B/2*(l_depth_value/255);其中Parallax為平移量,B為人雙眼之間的平均距離,depth_value為以8位灰度值表示的深度值。該平移操作的幾何關(guān)系可以如圖3所示。具體實(shí)施時(shí),可以將產(chǎn)生的3D立體圖像對(duì)進(jìn)行多種應(yīng)用處理,例如,將3D立體圖像對(duì)進(jìn)行紅藍(lán)處理、Sensio (左右拼接)3D處理、Side-By-Side (左右拼接2D)處理、Line-by-Line ( _行拼接)處理、Top-bottom (上下拼接)處理其中之一或任意組合。另外,發(fā)明人考慮到現(xiàn)有技術(shù)的2D轉(zhuǎn)3D方法還由于沒有很好的處理不同角度物體的遮擋問題,會(huì)造成圖像中的“內(nèi)容真空”,故在本發(fā)明實(shí)施例中將產(chǎn)生的3D立體圖像對(duì)進(jìn)行遮擋處理,具體包括將3D立體圖像對(duì)進(jìn)行填充與模糊處理,從而保證了圖像的完整性與最大的3D立體效果。圖4為本發(fā)明實(shí)施例中數(shù)字內(nèi)容的2D轉(zhuǎn)3D的方法示意圖。如圖4所示,本發(fā)明實(shí)施例中,將原始2D圖像進(jìn)行圖像分割,產(chǎn)生分割后的2D圖像;在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生全局深度圖;將分割后的2D圖像進(jìn)行3D建模,產(chǎn)生3D建模后的圖像;在3D建模后的圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生局部深度圖;進(jìn)行深度合成,將全局深度圖與局部深度圖相結(jié)合,產(chǎn)生合成深度圖;將合成深度圖與分割后的2D圖像相結(jié)合,產(chǎn)生視差圖(3D立體圖像對(duì));還進(jìn)行遮擋處理,即將3D立體圖像對(duì)進(jìn)行填充與模糊處理,產(chǎn)生填充與模糊處理后的視差圖(3D立體圖像對(duì))。圖5為本發(fā)明實(shí)施例中數(shù)字內(nèi)容的2D轉(zhuǎn)3D的方法與現(xiàn)有技術(shù)的效果比較圖。如圖5所示,上方的圖即現(xiàn)有技術(shù)的2D轉(zhuǎn)3D表示深度只是全局的,不包含局部的,因此每個(gè)物體都是ー個(gè)平面;而下方的圖即本發(fā)明實(shí)施例中的2D轉(zhuǎn)3D由于結(jié)合了 3D建模處理,包含了全局深度與局部深度,因此每個(gè)物體都是豐滿的3D個(gè)體,并且也處在全局的3D環(huán)境中?;谕话l(fā)明構(gòu)思,本發(fā)明實(shí)施例中還提供了ー種數(shù)字內(nèi)容的2D轉(zhuǎn)3D的裝置,如下面的實(shí)施例所述。由于該裝置解決問題的原理與數(shù)字內(nèi)容的2D轉(zhuǎn)3D的方法相似,因此該裝置的實(shí)施可以參見數(shù)字內(nèi)容的2D轉(zhuǎn)3D的方法的實(shí)施,重復(fù)之處不再贅述。如圖6所示,本發(fā)明實(shí)施例中,數(shù)字內(nèi)容的2D轉(zhuǎn)3D的裝置可以包括圖像分割模塊601,用于將原始2D圖像進(jìn)行圖像分割,產(chǎn)生分割后的2D圖像;全局深度圖產(chǎn)生模塊602,用于在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生全局深度圖;3D建模模塊603,用于將分割后的2D圖像進(jìn)行3D建模,產(chǎn)生3D建模后的圖像;、
局部深度圖產(chǎn)生模塊604,用于在3D建模后的圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生局部深度圖;合成深度圖產(chǎn)生模塊605,用于將全局深度圖與局部深度圖相結(jié)合,產(chǎn)生合成深度圖;3D立體圖像對(duì)產(chǎn)生模塊606,用于將合成深度圖與分割后的2D圖像相結(jié)合,產(chǎn)生3D立體圖像對(duì)。一個(gè)實(shí)施例中,全局深度圖產(chǎn)生模塊602具體可以用于根據(jù)深度線索優(yōu)先級(jí)和/或深度線索可用度,在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值。一個(gè)實(shí)施例中,3D立體圖像對(duì)產(chǎn)生模塊606具體可以用于 將分割后的2D圖像中的物體進(jìn)行平移操作,其中平移量根據(jù)如下公式獲得Parallax = B/2*(l_depth_value/255);其中Parallax為平移量,B為人雙眼之間的平均距離,depth_value為以8位灰度值表示的深度值。如圖7所示,一個(gè)實(shí)施例中,圖6所示的數(shù)字內(nèi)容的2D轉(zhuǎn)3D的裝置還可以包括應(yīng)用處理模塊701,用于將3D立體圖像對(duì)進(jìn)行紅藍(lán)處理、Sensio (左右拼接)3D處理、Side-By-Side (左右拼接2D)處理、Line-by-Line (隔行拼接)處理、Top-bottom (上下拼接)處理其中之一或任意組合。如圖8所示,一個(gè)實(shí)施例中,圖6所示的數(shù)字內(nèi)容的2D轉(zhuǎn)3D的裝置還可以包括遮擋處理模塊801,用于將3D立體圖像對(duì)進(jìn)行填充與模糊處理。另外,遮擋處理模塊801也可以包括在圖7所示的數(shù)字內(nèi)容的2D轉(zhuǎn)3D的裝置中。綜上所述,本發(fā)明實(shí)施例中,將原始2D圖像進(jìn)行圖像分割,產(chǎn)生分割后的2D圖像;在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生全局深度圖;將分割后的2D圖像進(jìn)行3D建模,產(chǎn)生3D建模后的圖像;在3D建模后的圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生局部深度圖;將全局深度圖與局部深度圖相結(jié)合,產(chǎn)生合成深度圖;將合成深度圖與分割后的2D圖像相結(jié)合,產(chǎn)生3D立體圖像對(duì);從而不但使不同物體之間具有應(yīng)有的深度差異,而且能夠反映單獨(dú)個(gè)體的空間3D結(jié)構(gòu)。本發(fā)明實(shí)施例中,在產(chǎn)生3D立體圖像后,還可以將產(chǎn)生的3D立體圖像對(duì)進(jìn)行填充與模糊處理,從而保證了圖像的完整性與最大的3D立體效果,不會(huì)造成圖像中的“內(nèi)容真空,,。本領(lǐng)域內(nèi)的技術(shù)人員應(yīng)明白,本發(fā)明的實(shí)施例可提供為方法、系統(tǒng)、或計(jì)算機(jī)程序產(chǎn)品。因此,本發(fā)明可采用完全硬件實(shí)施例、完全軟件實(shí)施例、或結(jié)合軟件和硬件方面的實(shí)施例的形式。而且,本發(fā)明可采用在一個(gè)或多個(gè)其中包含有計(jì)算機(jī)可用程序代碼的計(jì)算機(jī)可用存儲(chǔ)介質(zhì)(包括但不限于磁盤存儲(chǔ)器、CD-ROM、光學(xué)存儲(chǔ)器等)上實(shí)施的計(jì)算機(jī)程序產(chǎn)品的形式。本發(fā)明是參照根據(jù)本發(fā)明實(shí)施例的方法、設(shè)備(系統(tǒng))、和計(jì)算機(jī)程序產(chǎn)品的流程圖和/或方框圖來描述的。應(yīng)理解可由計(jì)算機(jī)程序指令實(shí)現(xiàn)流程圖和/或方框圖中的每ー流程和/或方框、以及流程圖和/或方框圖中的流程和/或方框的結(jié)合??商峁┻@些計(jì)算機(jī)程序指令到通用計(jì)算機(jī)、專用計(jì)算機(jī)、嵌入式處理機(jī)或其他可編程數(shù)據(jù)處理設(shè)備的處理器以產(chǎn)生ー個(gè)機(jī)器,使得通過計(jì)算機(jī)或其他可編程數(shù)據(jù)處理設(shè)備的處理器執(zhí)行的指令產(chǎn)生用于實(shí)現(xiàn)在流程圖ー個(gè)流程或多個(gè)流程和/或方框圖ー個(gè)方框或多個(gè)方框中指定的功能的裝置。這些計(jì)算機(jī)程序指令也可存儲(chǔ)在能引導(dǎo)計(jì)算機(jī)或其他可編程數(shù)據(jù)處理設(shè)備以特定方式工作的計(jì)算機(jī)可讀存儲(chǔ)器中,使得存儲(chǔ)在該計(jì)算機(jī)可讀存儲(chǔ)器中的指令產(chǎn)生包括指令裝置的制造品,該指令裝置實(shí)現(xiàn)在流程圖ー個(gè)流程或多個(gè)流程和/或方框圖ー個(gè)方框或多個(gè)方框中指定的功能。這些計(jì)算機(jī)程序指令也可裝載到計(jì)算機(jī)或其他可編程數(shù)據(jù)處理設(shè)備上,使得在計(jì)算機(jī)或其他可編程設(shè)備上執(zhí)行一系列操作步驟以產(chǎn)生計(jì)算機(jī)實(shí)現(xiàn)的處理,從而在計(jì)算機(jī)或其他可編程設(shè)備上執(zhí)行的指令提供用于實(shí)現(xiàn)在流程圖ー個(gè)流程或多個(gè)流程和/或方框圖一個(gè)方框或多個(gè)方框中指定的功能的步驟。以上所述的具體實(shí)施例,對(duì)本發(fā)明的目的、技術(shù)方案和有益效果進(jìn)行了進(jìn)ー步詳細(xì)說明,所應(yīng)理解的是,以上所述僅為本發(fā)明的具體實(shí)施例而已,并不用于限定本發(fā)明的保護(hù)范圍,凡在本發(fā)明的精神和原則之內(nèi),所做的任何修改、等同替換、改進(jìn)等,均應(yīng)包含在本 發(fā)明的保護(hù)范圍之內(nèi)。
權(quán)利要求
1.ー種數(shù)字內(nèi)容的2D轉(zhuǎn)3D的方法,其特征在于,該方法包括 將原始2D圖像進(jìn)行圖像分割,產(chǎn)生分割后的2D圖像; 在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生全局深度圖; 將分割后的2D圖像進(jìn)行3D建模,產(chǎn)生3D建模后的圖像; 在3D建模后的圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生局部深度圖; 將全局深度圖與局部深度圖相結(jié)合,產(chǎn)生合成深度圖; 將合成深度圖與分割后的2D圖像相結(jié)合,產(chǎn)生3D立體圖像對(duì)。
2.如權(quán)利要求I所述的方法,其特征在于,所述在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值,包括 根據(jù)深度線索優(yōu)先級(jí)和/或深度線索可用度,在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值。
3.如權(quán)利要求I所述的方法,其特征在于,所述將合成深度圖與分割后的2D圖像相結(jié)合,產(chǎn)生3D立體圖像對(duì),包括 將分割后的2D圖像中的物體進(jìn)行平移操作,其中平移量根據(jù)如下公式獲得Parallax = B/2*(l_depth_value/255); 其中Parallax為平移量,B為人雙眼之間的平均距離,depth_value為以8位灰度值表示的深度值。
4.如權(quán)利要求I所述的方法,其特征在于,還包括 將3D立體圖像對(duì)進(jìn)行紅藍(lán)處理、左右拼接3D處理、左右拼接2D處理、隔行拼接處理、上下拼接處理其中之一或任意組合。
5.如權(quán)利要求I至4任一項(xiàng)所述的方法,其特征在于,還包括 將3D立體圖像對(duì)進(jìn)行填充與模糊處理。
6.ー種數(shù)字內(nèi)容的2D轉(zhuǎn)3D的裝置,其特征在于,該裝置包括 圖像分割模塊,用于將原始2D圖像進(jìn)行圖像分割,產(chǎn)生分割后的2D圖像; 全局深度圖產(chǎn)生模塊,用于在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生全局深度圖; 3D建模模塊,用于將分割后的2D圖像進(jìn)行3D建模,產(chǎn)生3D建模后的圖像; 局部深度圖產(chǎn)生模塊,用于在3D建模后的圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生局部深度圖; 合成深度圖產(chǎn)生模塊,用于將全局深度圖與局部深度圖相結(jié)合,產(chǎn)生合成深度圖; 3D立體圖像對(duì)產(chǎn)生模塊,用于將合成深度圖與分割后的2D圖像相結(jié)合,產(chǎn)生3D立體圖像對(duì)。
7.如權(quán)利要求6所述的裝置,其特征在于,所述全局深度圖產(chǎn)生模塊具體用于 根據(jù)深度線索優(yōu)先級(jí)和/或深度線索可用度,在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值。
8.如權(quán)利要求6所述的裝置,其特征在于,所述3D立體圖像對(duì)產(chǎn)生模塊具體用于 將分割后的2D圖像中的物體進(jìn)行平移操作,其中平移量根據(jù)如下公式獲得Parallax = B/2*(l_depth_value/255); 其中Parallax為平移量,B為人雙眼之間的平均距離,depth_value為以8位灰度值表示的深度值。
9.如權(quán)利要求6所述的裝置,其特征在于,還包括 應(yīng)用處理模塊,用于將3D立體圖像對(duì)進(jìn)行紅藍(lán)處理、左右拼接3D處理、左右拼接2D處理、隔行拼接處理、上下拼接處理其中之一或任意組合。
10.如權(quán)利要求6至9任一項(xiàng)所述的裝置,其特征在于,還包括 遮擋處理模塊,用于將3D立體圖像對(duì)進(jìn)行填充與模糊處理。
全文摘要
本發(fā)明公開了一種數(shù)字內(nèi)容的2D轉(zhuǎn)3D的方法及裝置,包括將原始2D圖像進(jìn)行圖像分割,產(chǎn)生分割后的2D圖像;在分割后的2D圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生全局深度圖;將分割后的2D圖像進(jìn)行3D建模,產(chǎn)生3D建模后的圖像;在3D建模后的圖像中進(jìn)行深度線索提取及深度賦值,產(chǎn)生局部深度圖;將全局深度圖與局部深度圖相結(jié)合,產(chǎn)生合成深度圖;將合成深度圖與分割后的2D圖像相結(jié)合,產(chǎn)生3D立體圖像對(duì)。本發(fā)明不但使不同物體之間具有應(yīng)有的深度差異,而且能夠反映單獨(dú)個(gè)體的空間3D結(jié)構(gòu)。
文檔編號(hào)G06T17/00GK102693552SQ20111007214
公開日2012年9月26日 申請(qǐng)日期2011年3月24日 優(yōu)先權(quán)日2011年3月24日
發(fā)明者肖銳艷, 馬士超 申請(qǐng)人:雷歐尼斯(北京)信息技術(shù)有限公司