用于生成、存儲、傳送、接收和再現(xiàn)深度圖的方法和設(shè)備的制作方法
【專利摘要】本公開內(nèi)容涉及用于生成、存儲、傳送、接收和再現(xiàn)深度圖的方法和設(shè)備。描述了一種用于通過從至少一個深度或差異圖(DM1、DM2)開始而生成由多個分量(Y、U、V)構(gòu)成的顏色圖像的方法，其中，所述至少一個深度或差異圖(DM1、DM2)的第一組像素輸入到所述顏色圖像的亮度分量(Y)中，并且其中，所述至少一個深度或差異圖(DM1、DM2)的第二組和第三組像素輸入到所述顏色圖像的兩個色度分量(U、V)中。
【專利說明】用于生成、存儲、傳送、接收和再現(xiàn)深度圖的方法和設(shè)備

【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及用于通過使用屬于三維視頻流的圖像的顏色分量生成、存儲、傳送、接 收和再現(xiàn)深度圖（depth map)的方法和設(shè)備。

【背景技術(shù)】
[0002] 立體視頻應(yīng)用的發(fā)展在很大程度上依賴于用于表示和壓縮三維視頻信號的高效 格式的可用性。而且，在電視廣播應(yīng)用（3D-TV)中，有必要保持與現(xiàn)有2D系統(tǒng)的最大可能 程度的向后兼容性。
[0003] 對于分布（或傳送）來說，當(dāng)前最廣泛的技術(shù)方案基于所謂的"幀兼容步置"，其 中，與同一時間點有關(guān)的兩個立體視圖被重新擴(kuò)縮并構(gòu)造以形成與現(xiàn)有格式兼容的單個圖 像。在這些方案中，頂?shù)祝╰op-and-bottom)格式、并排（side-by-side)格式和平鋪（tile) 格式是已知的。這些方案允許使用整個現(xiàn)有視頻信號分布構(gòu)架（陸地、衛(wèi)星或電纜廣播、或 者IP網(wǎng)絡(luò)上的流處理），并且不需要用于壓縮視頻流的新標(biāo)準(zhǔn)。另外，當(dāng)前的AVC/H. 264編 碼標(biāo)準(zhǔn)（先進(jìn)視頻編碼）和將來的HEVC標(biāo)準(zhǔn)（高效率視頻編碼）已包括用信號通知這種 類型的組織以允許通過接收器的適當(dāng)?shù)闹貥?gòu)和可視化的可能性。
[0004] 對于顯示來說，兩個當(dāng)前最廣泛的技術(shù)方案基于"幀交替"原理（即在屏幕上在時 間上接連呈現(xiàn)兩個視圖）或"線交替"原理，即兩個視圖以交替的行（即它們是"交錯"的） 布置在屏幕上。在兩種情況下，對于接收對應(yīng)視圖的每只眼睛，觀眾需要使用一副眼鏡，目艮 鏡可以是幀交替情況下的"主動式"眼鏡（即快門式眼鏡），或者可以是線交替情況下的"被 動式"眼鏡（即具有以不同方式偏光的透鏡）。
[0005] 三維可視化的未來將由不需要用戶配戴任何眼鏡（不管是主動式還是被動式眼 鏡）的新的自立體屏幕的擴(kuò)散而確定。這些當(dāng)前仍處于原型階段的3D顯示設(shè)備基于視差 透鏡或屏障的使用，視差透鏡或屏障可導(dǎo)致對于用戶在圍繞屏幕有角度地移動時可處于的 各視點，觀察者察覺到兩個不同的立體視圖。因此，這些設(shè)備可改善3D視覺體驗，但它們需 要生成大量的視圖（幾十倍）。
[0006] 關(guān)于3D視頻表示，管理大量視圖的產(chǎn)生和分布是非常費(fèi)力的任務(wù)。近年來，科學(xué) 團(tuán)體已經(jīng)評估通過使用利用所謂的場景深度圖的已知的基于深度圖像的繪制（DIBR)技術(shù) 創(chuàng)建任意大量的中間視圖的可能性。這些格式也稱為"視頻+深度"（V+D)，其中，各視圖由 稠密深度圖伴隨。稠密深度圖是其中平面坐標(biāo)（x，y)(即列行）中的各像素表示深度值（z) 的圖像，深度值（z)與相應(yīng)視圖的具有相同坐標(biāo)的像素相對應(yīng)。通過從由立體視頻攝像機(jī) 獲得的兩個視圖開始可計算深度圖的值，或者由適當(dāng)?shù)膫鞲衅骺蓪λ鼈冞M(jìn)行測量。一般通 過使用具有通過使用標(biāo)準(zhǔn)技術(shù)壓縮的256個灰度級的圖像表示這樣的值?；谏疃葓D像 的繪制技術(shù)利用這樣的事實，即，給定坐標(biāo)（X，y，z)--即深度平面中的位置加上與各像素 相關(guān)聯(lián)的深度，可以將像素重新投影到與新的視點有關(guān)的另一圖像平面（image plane)上。 最廣泛的應(yīng)用上下文是立體視頻攝像機(jī)的系統(tǒng)，其中，兩個視頻攝像機(jī)以它們兩個光學(xué)中 心之間的距離b而水平放置，具有平行的光軸和共平面的圖像平面。在這樣的配置中，在與 一個像素相關(guān)聯(lián)的深度Z與所謂的差異（disparity) d--即為了獲得在左（或右）視頻 攝像機(jī)的圖像平面中的對應(yīng)位置必須施加于右（或左）視頻攝像機(jī)的圖像的像素的水平平 移--之間存在簡單的關(guān)系。根據(jù)所考慮的視頻攝像機(jī)，差異可以為正或負(fù)（向左或右的 平移）。用f指示兩個視頻攝像機(jī)的焦距，在深度z與差異d之間存在以下的關(guān)系：
[0007] d = f b/z。
[0008] 要得到更多的細(xì)節(jié)，參見文章：Paradiso, V. ;Lucenteforte, Μ·; Grangetto, Μ. , "A novel interpolation method f o r 3 D view synthesis"，3DTV_Conference:The True Vision-Capture, Transmission and Display of3D Video (3DTV-C0N), 2012, vol. no. pp. 1, 4, 15-17, 2012 年 10 月。
[0009] 由于根據(jù)上述的假設(shè)，差異是深度的簡單函數(shù)，因此，深度圖和差異圖攜帶相同的 信息并因此可互換。另外，必須指出，MPEG上下文中的稱為深度圖的圖像表示l/ζ的值，與 映射在0-255間隔中的z相反。以下，術(shù)語"深度圖"將只用于指示深度或差異的任何表示。
[0010] 應(yīng)當(dāng)注意，MPEG標(biāo)準(zhǔn)委員會也已選擇由一對（左和右）圖像和相應(yīng)的深度圖組成 的視頻信號作為使用情況，用于評估將在未來的3D編碼標(biāo)準(zhǔn)中引入的技術(shù)。
[0011] 這導(dǎo)致對高效地管理包括深度圖的電視信號的存儲、傳送、接收和再現(xiàn)的需求。


【發(fā)明內(nèi)容】

[0012] 因此，本發(fā)明的目的是提供用于通過使用圖像的顏色分量生成、存儲、傳送、接收 和再現(xiàn)深度圖的方法和設(shè)備，其可克服本領(lǐng)域中已知的方案中的固有限制。
[0013] 如上面所提及的，深度圖適于表示為灰度圖像，即由每位置（x，y)的單個值構(gòu)成。 以下將使用術(shù)語"像素"以指示圖像的單個要素（或點）；各像素由其位置（x，y)以及由諸 如顏色或強(qiáng)度的值表征，這些值隨使用的表示系統(tǒng)而變。在電視領(lǐng)域中，一般采用稱為亮度 (Y)和色度（U，V)的像素表示系統(tǒng)。一般地，深度圖通過只使用Y分量被表示為數(shù)字視頻。
[0014] 本發(fā)明的基本思想是還利用U和V色度分量以表示深度圖的值，因此創(chuàng)建所謂的 "偽顏色"圖像，這允許更好的圖像精簡。在本上下文中，偽顏色圖像（為了簡潔，以下稱為 "顏色圖像"）是其中色度分量也攜帶有用信息的圖像，但該信息不是顏色信息，在該情況 下，而是與已從Y分量去除的像素有關(guān)的亮度信息。
[0015] 對深度矩陣的要輸入到WXH尺寸的顏色圖像的U和V分量中的像素的選擇以這 樣的方式做出，使得獲得Y、U、V分量之間（即在真實的亮度與這些附加的假想分量之間） 的空間相關(guān)性，空間相關(guān)性用于確保與假定在各種像素的Y、U、V三個分量之間存在相關(guān)的 標(biāo)準(zhǔn)編碼算法（例如MPEG)的運(yùn)算兼容。這也允許使用針對真實的顏色圖像所采用的壓縮 技術(shù)的標(biāo)準(zhǔn)編碼器和解碼器。
[0016] 空間相關(guān)性意味著布置在Y、U、V分量上的值屬于深度圖中的在空間上接近的像 素。
[0017] 優(yōu)選的方案使用用于輸入兩個深度圖的WXH矩形，每個深度圖涉及立體對的相 應(yīng)視頻圖像，因此獲得單個顏色圖像。
[0018] 其它的優(yōu)選方案針對深度圖采用用于電視圖像的格式，這些格式稱為4:2:0或 4:2:2YUV。在通常用于分布的前一種格式中，在偶數(shù)行（0、2、4等）中，只有偶數(shù)列（0、2、4 等）中的像素包含色度信息，而奇數(shù)行中的所有像素包含僅亮度信息：由此得出結(jié)論，總體 上，在四個像素中只有一個像素包含色度信息。在通常用于制作鏈中的后一種格式中，在所 有行中，只有偶數(shù)列中的像素包含色度信息：由此得出結(jié)論，總體上，在兩個像素中由一個 像素包含這樣的信息。
[0019] 通常，參照具有在256個級（即每像素8比特）上表示的值的深度圖。在將在下 面描述的優(yōu)選方案的第一系列的例子中，將參照4:2:0YUV格式，而第二系列的例子將參照 4:2:2YUV 格式。
[0020] 在各種幀填裝系統(tǒng)之中，平鋪格式（在WO 2011/077343-A1中描述）允許在不從與 兩個視圖有關(guān)的圖像扣減空間的情況下輸入深度圖。
[0021] 參照圖1，在平鋪格式中，一對立體圖像L和R輸入到較大的視頻幀（C)中，兩個圖 像中的一個（例如L)在保持不變的狀態(tài)下被重新復(fù)制，并且另一圖像（例如R)分成三個 區(qū)域（R1、R2和R3)。在復(fù)合幀C中，這些區(qū)域布置在由第一圖像留下的可用區(qū)域中；未使 用的區(qū)域仍將保留，具有減半的水平和垂直分辨率的深度圖可輸入到未使用的區(qū)域中。通 過使用由本發(fā)明提出的方法，兩個而不是一個深度圖可輸入到同一區(qū)域中。
[0022] 但是，本創(chuàng)造性想法不限于特定的幀填裝布置，而且其允許將一對深度圖輸入到 具有W列和Η行的一般矩形圖像中。當(dāng)然，WXH區(qū)域可表示用于經(jīng)由幀填裝機(jī)制傳輸3D視 頻的較大的圖像的一部分。
[0023] 作為替換方案，立體視頻流可由若干數(shù)據(jù)流（例如插入到分組類型多路復(fù)用中 的）構(gòu)成，每個數(shù)據(jù)流攜帶一個或多個圖像或者它們的深度圖的信息。
[0024] 在使用本發(fā)明的各種方面的電視制作、分布和實現(xiàn)系統(tǒng)中，出于重構(gòu)深度圖的目 的，在接收時實施的步驟將與在傳送時實施的步驟相逆轉(zhuǎn)。在接收器處，分配給輸入顏色圖 像的Y、U和V分量的深度圖的值以形成初始深度圖的方式被重新定位。為了估計由于在形 成顏色圖像時缺少可用的空間而可能已被舍棄的任何原始深度值，重構(gòu)程序可能利用已知 的濾波和/或內(nèi)插操作。
[0025] 本發(fā)明的一個目的是提供用于通過從至少一個深度圖開始而生成由多個分量構(gòu) 成的顏色圖像的方法及其裝置，其中，所述至少一個深度圖的第一組像素輸入到所述顏色 圖像的亮度分量中，并且其中，所述至少一個深度圖的第二組和第三組像素輸入到所述顏 色圖像的兩個色度分量中。
[0026] 本發(fā)明的另一目的是提供用于生成包括一系列的顏色圖像的視頻流的方法及其 裝置，其中，幀的至少一部分包括通過使用上述的用于生成顏色圖像的方法而獲得的顏色 圖像。
[0027] 本發(fā)明的另一目的是提供用于通過從由多個分量構(gòu)成的顏色圖像開始而重構(gòu)至 少一個深度圖的方法及其裝置，其中，取自亮度分量的第一組像素、取自色度分量中的一個 的第二組像素和取自所述顏色圖像的另一色度分量的第三組像素輸入到所述至少一個深 度圖中。
[0028] 本發(fā)明的另一目的是提供用于通過從立體視頻流開始而重構(gòu)兩個序列的深度圖 的方法及其裝置，其中，在兩個序列的各圖的重構(gòu)期間，上述的用于重構(gòu)至少一個深度圖的 方法被應(yīng)用于流的各幀。
[0029] 本發(fā)明的特別的目的是提供在作為本說明的整體部分的權(quán)利要求中闡述的用于 通過利用顏色圖像的顏色分量生成、存儲、傳送、接收和再現(xiàn)深度圖的方法和設(shè)備。

【專利附圖】

【附圖說明】
[0030] 根據(jù)本發(fā)明的實施例的一些例子的以下的詳細(xì)的描述以及從僅作為非限制性例 子給出的附圖，本發(fā)明的其它目的和優(yōu)點將變得明晰，其中，
[0031] 圖1示出了稱為"平鋪格式"的立體視頻圖像格式；
[0032] 圖2a和2b示出了本發(fā)明的關(guān)于獲取包含根據(jù)4:2:0并排方案的兩個深度圖的顏 色圖像的方式的第一變型的兩個圖形表示；
[0033] 圖3示出了應(yīng)用在接收側(cè)的用于覆蓋在重構(gòu)的深度圖中缺失的某些值的內(nèi)插技 術(shù)的實現(xiàn)的一個例子；
[0034] 圖4示出了本發(fā)明的關(guān)于獲取包含根據(jù)4:2:0并排方案的兩個深度圖的顏色圖像 的方式的第二變型；
[0035] 圖5示出了與通過在4:2:0并排模式中相互緊挨著布置兩個深度圖而獲得的顏色 圖像的Y、U、V分量對應(yīng)的圖像；
[0036] 圖6示出了本發(fā)明的關(guān)于獲取包含根據(jù)4:2:0頂?shù)追桨傅膬蓚€深度圖的顏色圖像 的方式的變型；
[0037] 圖7示出了與通過在4:2:0頂?shù)啄Ｊ街邢嗷ゾo挨著布置兩個深度圖而獲得的顏色 圖像的Y、U、V分量對應(yīng)的圖像；
[0038] 圖8示出了本發(fā)明的關(guān)于獲取包含根據(jù)減小色度分量的4:2:0頂?shù)追桨傅膬蓚€深 度圖的顏色圖像的方式的變型；
[0039] 圖9示出了與通過在減小色度分量的4:2:0頂?shù)啄Ｊ街邢嗷ゾo挨著布置兩個深度 圖而獲得的顏色圖像的Y、U、V分量對應(yīng)的圖像；
[0040] 圖10示出了本發(fā)明的關(guān)于變換深度圖的采樣以獲得包含根據(jù)具有平均和與差的 4:2:0頂?shù)追桨傅膬蓚€深度圖的顏色圖像的方式的變型；
[0041] 圖11示出了與通過相互緊挨著布置在具有平均和與差的4:2:0頂?shù)啄Ｊ街械膬?個深度圖而獲得的顏色圖像的Y、u、v分量對應(yīng)的圖像；
[0042] 圖12示出了與通過相互緊挨著布置通過子帶變換操作預(yù)處理的兩個深度圖而獲 得的顏色圖像的第一例子的Y、U、V分量對應(yīng)的圖像；
[0043] 圖13示出了本發(fā)明的關(guān)于變換深度圖的采樣以獲得包含通過子帶變換操作預(yù)處 理的兩個深度圖的顏色圖像的方式的變型；
[0044] 圖14示出與通過相互緊挨著配置通過子帶變換操作預(yù)處理的兩個深度圖而獲得 的顏色圖像的第二例子的Y、U、V分量對應(yīng)的圖像；
[0045] 圖15示出了本發(fā)明的關(guān)于變換深度圖的采樣以獲得包含根據(jù)4:2:2并排方案的 兩個深度圖的顏色圖像的方式的變型；
[0046] 圖16示出了本發(fā)明的關(guān)于變換深度圖的采樣以獲得包含根據(jù)4:2:2頂?shù)追桨傅?兩個深度圖的顏色圖像的方式的變型；
[0047] 圖17示出了關(guān)于根據(jù)減小色度分量的4:2:2頂?shù)追桨缸儞Q深度圖的采樣以獲得 包含兩個深度圖的顏色圖像的方式的本發(fā)明的變型；
[0048] 圖18示出了本發(fā)明的關(guān)于變換深度圖的采樣以獲得包含通過針對4:2:2格式的 子帶變換操作而預(yù)處理的兩個深度圖的顏色圖像的方式的變型；
[0049] 圖19a和19b示出了根據(jù)的本發(fā)明的分別用于重新生成以及重構(gòu)和顯示三維圖像 的完整系統(tǒng)的實施例的例子的框圖，該系統(tǒng)使用稱為平鋪格式的幀填裝格式以組織一對立 體視頻序列與它們各自的深度圖。
[0050] 在附圖中，相同的附圖標(biāo)記和字母表示相同的要素或分量。

【具體實施方式】
[0051] 以下將描述本發(fā)明基本思想的實現(xiàn)的幾個特定變型，所述實現(xiàn)考慮了兩個深度圖 在具有WXH像素的尺寸的單個顏色圖像中的各種可能的布置（如已解釋的那樣，該單個顏 色圖像又可輸入到還包含與同一立體視頻流有關(guān)的其它圖像的更大的復(fù)合幀中）。
[0052] 讓我們考慮兩個具有WXH分辨率的深度圖，其對應(yīng)于2XWXH個對8比特的采 樣，即2 X W X Η個字節(jié)。所述一對圖要輸入到具有W X Η分辨率的單個4:2:0或4:2: 2YUV"復(fù) 合"顏色圖像中。
[0053] 以下描述的本發(fā)明的各種實施例基于用于使兩個深度圖輸入到WXH尺寸的矩形 中的幀填裝格式的使用。兩個深度圖例如可通過將它們的分辨率減小到WX(H/2)并將它 們分別放置在僅Y分量的上部和下部中而布置在頂?shù)啄Ｊ街?，或者，通過將它們的分辨率 減小到（W/2)XH并將它們分別放置在僅Y分量的左部和右部中而布置在并排模式中。然 后，根據(jù)本發(fā)明，被舍棄的像素被恢復(fù)并輸入到U和V信號中。
[0054] 并排4:2:0方案
[0055] 以下描述采樣在色度分量上的定位方面相互不同的兩種技術(shù)。
[0056] 在圖2a中示出了用于通過從至少一個深度圖開始來獲取顏色圖像的第一技術(shù) (以下稱為A模式）。該圖參照深度圖（例如，與立體視頻的左視圖有關(guān)的深度圖DM1)的 一對行，并且示出了如何使深度值與具有減半的列數(shù)的復(fù)合顏色圖像的Y、U、V分量關(guān)聯(lián)。
[0057] 使用表示法D(j，i)以表示深度圖DM1和DM2的j行和i列的像素，其中j = 0, 1，"·，Η-1，并且i = 0, 1，'W-l。通過使用在圖2a中描述的技術(shù)，深度圖必須被重新組 織到由3個分量構(gòu)成的顏色圖像中：
[0058] -Y(j，i)，其中 j = 0, ...，H-1，并且 i = 0, ...，W/2_1
[0059] _U(j，i)和 V(j，i)，其中 j = 0，...，H-1，并且 i = 0，...，（W/2)-l，其中，由于 4:2:0YUV欠采樣，因此標(biāo)記j和i僅取得偶數(shù)值。
[0060] 通過這些表示法，通過應(yīng)用以下規(guī)則獲得圖2a所示的像素重新組織：
[0061]-對于各像素 D(j，i)，
[0062] 1.如果 i 為偶數(shù)，那么 Y (j，i/2) = D (j，i)。

【權(quán)利要求】
1. 一種用于從至少一個深度或差異圖（DM1、DM2)開始、生成由多個分量（Y、U、V)構(gòu)成 的顏色圖像的方法，其中，所述至少一個深度或差異圖（DM1、DM2)的第一組像素輸入到所 述顏色圖像的亮度分量（Υ)中，并且其中，所述至少一個深度或差異圖（DM1、DM2)的第二組 和第三組像素輸入到所述顏色圖像的兩個色度分量（U、V)中。
2. 根據(jù)權(quán)利要求1的方法，其中，以為了確保所述顏色圖像的亮度分量（Y)和色度分量 (U、V)之間的空間相關(guān)性的方式，做出對所述各組的像素將被輸入到所述亮度分量（Y)和 色度分量（U、V)中的位置的選擇。
3. 根據(jù)權(quán)利要求1或2的方法，其中，所述第一組、第二組和第三組的聯(lián)合包括所述至 少一個深度或差異圖（DM1、DM2)的所有像素。
4. 根據(jù)權(quán)利要求1或2的方法，其中，所述第一組、第二組和第三組僅包括所述至少一 個深度或差異圖（DM1、DM2)的所有像素的一部分。
5. 根據(jù)前面的權(quán)利要求中的任一項的方法，其中，通過使用并排技術(shù)或頂?shù)准夹g(shù)，WXH 尺寸的兩個深度或差異圖（DM1、DM2)輸入到相同尺寸的顏色圖像中。
6. 根據(jù)前面的權(quán)利要求中的任一項的方法，其中，所述第二組和第三組的屬于一個像 素分組的像素用相對于預(yù)測值或內(nèi)插值的差值被替換，所述預(yù)測值或內(nèi)插值從屬于所述第 一組的像素的值獲得。
7. 根據(jù)權(quán)利要求1?4中的任一項的方法，包括以下的步驟：用所述至少一個深度或 差異圖（DM1、DM2)的屬于相連像素（a、b、c、d)分組的像素的和或差（w0、wl、w2、w3)替換 所述至少一個深度或差異圖（DM1、DM2)的屬于相連像素（a、b、c、d)分組的像素，這通過將 所述和放置到亮度分量（Y)中并僅選擇所述差之一（wd)以交替放置到色度分量（U、V)中 來完成。
8. 根據(jù)權(quán)利要求1?4中的任一項的方法，包括以下的步驟：用所述至少一個深度或 差異圖（DM1、DM2)的屬于相連像素（a、b、c、d)分組的像素的和或差（w0、wl、w2、w3)替換 所述至少一個深度或差異圖（DM1、DM2)的屬于相連像素（a、b、c、d)分組的像素，這通過將 所述和放置到亮度分量（Y)中、將兩個差中的第一個差放置到色度分量（U)中并將兩個差 中的第二個差放置到另一色度分量（V)中來完成。
9. 根據(jù)前面的權(quán)利要求中的任一項的方法，包括以下的步驟：在將所述各組的像素輸 入到顏色圖像的所述分量（Y、U、V)中之前使所述至少一個深度或差異圖（DM1、DM2)經(jīng)受 域變換。
10. -種用于生成視頻流的方法，所述視頻流包括通過使用根據(jù)前面的權(quán)利要求中的 一項的方法獲得的顏色圖像的序列。
11. 一種用于根據(jù)權(quán)利要求1?9中的任一項的使用平鋪格式幀填裝格式生成視頻流 的方法，其中，顏色圖像輸入到?jīng)]有與兩個立體視圖有關(guān)的圖像的像素的幀部分中。
12. -種包括圖像處理部件的裝置，所述圖像處理部件適于生成包括通過使用根據(jù)前 面的權(quán)利要求中的一項的方法獲得的顏色圖像的序列的視頻流。
13. -種用于通過從由多個分量（Y、U、V)構(gòu)成的顏色圖像開始來重構(gòu)至少一個深度或 差異圖（DM1、DM2)的方法，其中，通過從亮度分量（Y)開始而獲得的第一組像素、通過從色 度分量中的一個（U)開始而獲得的第二組像素和通過從所述顏色圖像（Y、U、V)的另一色度 分量（V)開始而獲得的第三組像素輸入到所述至少一個深度或差異圖中。
14. 根據(jù)權(quán)利要求13的方法，其中，所述第一組像素取自亮度分量，所述第二組像素取 自色度分量中的一個（U)，并且所述第三組像素取自所述顏色圖像（Y、U、V)的另一色度分 量（V)。
15. 根據(jù)權(quán)利要求13的方法，其中，所述第一組像素取自亮度分量，而所述第二組或第 三組通過對分別取自色度分量中的一個或者另一個的像素的值和基準(zhǔn)值進(jìn)行求和而獲得， 其中，分別取自色度分量中的一個或者另一個的像素的值表示相對于通過從屬于所述第一 組的像素的值的內(nèi)插而獲得的所述基準(zhǔn)值的差。
16. 根據(jù)權(quán)利要求13、14或15的方法，其中，通過獲取所述第一組、第二組和第三組像 素來獲取所述至少一個深度或差異圖（DM1、DM2)的所有像素。
17. 根據(jù)權(quán)利要求13、14或15的方法，其中，通過獲取所述第一組、第二組和第三組像 素來獲取所述至少一個深度或差異圖（DM1、DM2)的一些像素，并且，借助于內(nèi)插操作從重 新復(fù)制的像素獲取缺失的像素。
18. 根據(jù)權(quán)利要求14?17中的任一項的方法，其中，通過獲取所述第一組、第二組和 第三組像素來獲取具有與所述顏色圖像（Y、U、V)相同的尺寸（WXH)的兩個深度或差異圖 (DM1、DM2)。
19. 一種用于通過從由多個分量（Y、U、V)構(gòu)成的顏色圖像開始來重構(gòu)至少一個深度 或差異圖（DM1、DM2)的方法，包括以下的步驟：出于重構(gòu)要被復(fù)制到所述至少一個深度或 差異圖（DM1、DM2)中的值（a、b、c、d)的目的，在接連的位置中線性組合取自所述多個分量 (Y、U、V)的值（w0、wl、wd;w0、wl、w2、w3)。
20. 根據(jù)權(quán)利要求13?19中的任一項的方法，其中，在已經(jīng)從顏色圖像的所述分量 (Y、U、V)獲得所述各組的像素之后，為了獲得所述至少一個深度圖（DM1、DM2)，進(jìn)行和在生 成階段所實施的域變換相逆轉(zhuǎn)的域變換。
21. -種用于根據(jù)權(quán)利要求13?20中的任一項的使用稱為平鋪格式的幀填裝格式重 構(gòu)視頻流的方法，包括以下的步驟：通過從存在于沒有與兩個立體視圖有關(guān)的圖像的像素 的幀部分中的顏色圖像開始來重構(gòu)至少一個深度或差異圖（DM1、DM2)。
22. -種用于通過從由Y、U、V分量構(gòu)成的顏色圖像開始來重構(gòu)至少一個深度或差異圖 (DM1、DM2)的裝置，包括用于實現(xiàn)根據(jù)權(quán)利要求13?21中的任一項的方法的部件。
【文檔編號】H04N15/00GK104243966SQ201410272949
【公開日】2014年12月24日 申請日期:2014年6月18日 優(yōu)先權(quán)日:2013年6月18日
【發(fā)明者】M·格蘭齊托, M·盧森特福特, P·達(dá)馬托 申請人:西斯維爾科技有限公司