象向左移動根據(jù)與屏幕的距離增加的量
[0073]在先前提及的條件下，在深度P和視差D之間存在以下類型的關系:
[0074]D=I*P/(P+P0)
[0075]其中，I是兩眼間的距離，并且PO是觀看者與屏幕的距離。應當注意，對于趨于無限的P，D將趨于I，并且對于P = 0(位于屏幕上的對象)，D將等于O。
[0076]當然，為了重構左圖像和右圖像之間的中間圖像，可以采用與上述相同的過程，但是視差值將需要乘以在O和I之間的系數(shù)C，系數(shù)c為中間視點與參考圖像的視點(在該情況下的左邊的一個)的距離的函數(shù)。
[0077]應當注意的是，當根據(jù)以上描述從左邊的一個開始重構右圖像時，或者當重構中間圖像時，留下一些區(qū)域未被覆蓋，其對應于存在于右圖像但是不存在于左圖像中的對象的像素，因為它們被在它們前面的其他對象所遮蔽(所謂的“阻塞”)。
[0078]為了對中間圖像進行完整的重構，因此將需要具有右圖像和左圖像這兩者以及深度或視差圖這兩者。實際上，用這種方式可以通過從其他圖像取得對應的像素并且將它們移動等于乘以系數(shù)Ι-c的相對視差的量來填充空(阻塞)區(qū)域。
[0079]如可以從以上描述理解到的那樣，本發(fā)明的另一個可能的變型可能需要加入兩個深度或視差圖而不是一個。例如可以通過使用諸如并排或上下的已知的幀封裝技術，將分別涉及左圖像和右圖像的這樣的圖加入到與在前面的情況下加入單個圖的空間相同的空間中。在前者的情況下，將兩個圖的水平分辨率進一步地折半，而在后者的情況下，將垂直分辨率折半。還可以使用在上面被定義為“瓦片格式”的幀封裝技術的進一步的變型。
[0080]用于在產(chǎn)生側加入兩個圖以及在接收側提取兩個圖的過程可以容易地根據(jù)參考單個圖的情況描述的那些過程中得出，明顯的變型對于本領域的技術人員是公知的。
[0081]當然，存在于視頻流中的信令還需要能夠分清存在一個還是兩個圖。因此，所述信令需要包含適于允許在合成幀的以下類型中的至少兩種之間進行區(qū)分的信息:
[0082]I)不帶有深度或視差圖的瓦片格式類型的合成幀(圖1a的情況)；
[0083]2)帶有一個深度或視差圖的瓦片格式類型的合成幀(圖1b的情況)；
[0084]以及還可能:
[0085]3)帶有上下配置的兩個深度或視差圖的瓦片格式類型的合成幀；
[0086]4)帶有并排配置的兩個深度或視差圖的瓦片格式類型的合成幀；
[0087]5)帶有以瓦片格式配置的兩個深度或視差圖的瓦片格式類型的合成幀。
[0088]接收器優(yōu)選地包含適于基于信令信息執(zhí)行以下操作中的一個或多個的一個或多個處理塊:
[0089]-識別正在接收的幀的類型，以便如上所述地適當?shù)刂貥嬋S視頻內(nèi)容的兩個右和左圖像；
[0090]-識別一個或兩個深度或視差圖的存在及其配置的類型；
[0091]-如果存在兩個深度或視差圖，則獲得兩個圖中的每一個；
[0092]-對深度或視差圖執(zhí)行適于使圖的尺寸為等于視頻內(nèi)容的圖像的尺寸的值的操作。這些操作可以是例如與欠采樣相反的類型的操作，例如插值操作。
[0093]其他變型可能涉及本發(fā)明的物理實現(xiàn)方式。例如，可以不同地細分和分配實現(xiàn)上述設備(具體地，設備100和接收器1100)的電子模塊；另外，可以將它們提供為硬件模塊的形式或者作為由處理器(具體地，配備有用于臨時存儲所接收的輸入幀的適合的存儲區(qū)域的視頻處理器)實現(xiàn)的軟件算法。因此，這些模塊可以并行地或串行地執(zhí)行根據(jù)本發(fā)明的圖像復用和解復用方法的一個或多個視頻處理步驟。雖然優(yōu)選實施例涉及將兩個720P視頻流復用成一個1SOp視頻流，但是也可以使用其他的格式，這也是顯然的。
[0094]顯然，執(zhí)行在圖3和6中示出的復用和解復用過程的次序僅僅是示例性的:在不改變本發(fā)明的實質(zhì)的情況下，可以出于任何理由對其進行修改。
[0095]本發(fā)明不限于合成圖像的布置的特定類型，因為用于產(chǎn)生合成圖像的不同的解決方案可以提供特定的優(yōu)點和/或不足。
[0096]本發(fā)明及其所有的變型提出一種用于產(chǎn)生、傳輸和在任何類型的當前的或?qū)淼娘@示器上再現(xiàn)3D內(nèi)容的通用格式。
[0097]在2D再現(xiàn)設備的情況下，再現(xiàn)設備的視頻處理器將簡單地丟棄可能存在于接收器1100的輸出處的圖像R和深度圖(DM或者DMl和DM2)，并且將在關聯(lián)的可視化設備上只顯示(經(jīng)過縮放)圖像L的序列。
[0098]這同樣適用于用戶啟用2D顯示模式的3D再現(xiàn)設備的情況。
[0099]取決于是否可以調(diào)節(jié)(減小)場景的深度，啟用了 3D顯示模式的3D再現(xiàn)設備可以表現(xiàn)出兩種不同的行為。在前者的情況下，視頻處理器將使用圖像L和R的兩個序列來產(chǎn)生三維效果。在后者的情況下，視頻處理器將使用包括在與每對立體圖像R和L關聯(lián)的合成幀C’中的深度圖(一個或兩個)來產(chǎn)生L和R之間的中間視圖，從而獲得具有低于可以從L和R得到的深度的可變深度的三維圖像。
[0100]由自立體播放器來代表后一情況，其需要超大量的視圖(幾十)來為位于顯示器前面的空間中的不同點處的觀看者產(chǎn)生三維效果。在該情況下，視頻處理器將使用包括在合成幀C’中的深度圖(一個或兩個)以及圖像L和R本身來合成一系列的其他圖像。在顯示器的前面，存在大量的透鏡或屏障，使得觀看者將在能夠進行立體視覺的空間中的任何點處只感知一對所述圖像。
[0101]因此，再現(xiàn)設備的視頻處理器可以包含適于向顯示器發(fā)送兩個圖像序列的裝置，這兩個圖像序列中的至少一個包含從所傳送的視圖中的至少一個以及至少一個深度圖開始合成的圖像。在該情況下，還優(yōu)選地包含適于使觀看者能夠選擇與更多的或更少的接近的視點有關的圖像的序列以便改變對深度的感知的裝置。
[0102]再現(xiàn)設備的視頻處理器還可以包含適于產(chǎn)生與另外的視圖對應的另外的圖像，使得位于空間中的不同點處的觀看者可以通過關聯(lián)的自立體顯示器看見不同的圖像序列的
目.ο
[0103]就水平和垂直分辨率的平衡以及針對立體圖像以及關聯(lián)的深度圖的適當?shù)姆直媛史峙涠?，到目前為止所提出的格式均未提供在仍然確保非常好的再現(xiàn)質(zhì)量的同時的這樣的使用的靈活性和寬度。
[0104]可以部分地在接收器設備中以及部分地在顯示設備中進行上述再現(xiàn)操作。
[0105]本發(fā)明可以有利地至少部分地通過計算機程序?qū)崿F(xiàn)，所述計算機程序包含用于在這樣的程序被計算機執(zhí)行時實現(xiàn)上述方法的一個或多個步驟的編碼裝置。因此，要理解的是，保護范圍延伸至所述計算機程序以及包含所記錄的消息的計算機可讀裝置，所述計算機可讀裝置包含用于在所述程序被計算機執(zhí)行時實現(xiàn)上述方法的一個或多個步驟的程序編碼裝置。可以在不脫離本發(fā)明的保護范圍(包括本領域的技術人員已知的所有等效設計)的情況下針對上述實施例示例進行變型。
[0106]可以將在各個優(yōu)選實施例中示出的元素和特征組合在一起，然而這不脫離本發(fā)明的保護范圍。
[0107]根據(jù)以上描述，本領域的技術人員將能夠在不引入任何另外的實現(xiàn)細節(jié)的情況下實現(xiàn)本發(fā)明的目標。
【主權項】
1.一種用于產(chǎn)生包含合成圖像(C)的立體視頻流(101)的方法，所述合成圖像(C)包含關于三維視頻內(nèi)容的右圖像(R)和左圖像(L)的信息，其中， 選擇所述右圖像(R)的像素和所述左圖像(L)的像素，并且 將所選擇的像素加入到所述立體視頻流的合成圖像(C)中， 所述方法的特征在于:通過使得所述兩個圖像之一不變，將另一個圖像分解成總面積等于所述另一個圖像(R)的面積的多個區(qū)域(R1、R2、R3)，并且將所述區(qū)域加入到所述合成圖像(C)中，來將所述右圖像(R)的所有像素以及所述左圖像(L)的所有像素加入到所述合成圖像(C)中， 其中，所述合成圖像(C)具有比加入所述左圖像(L)和右圖像(R)的所有像素所需的尺寸更大的尺寸， 并且其中，在所述加入之后剩余的合成圖像(C)的像素中，加入與所述三維視頻內(nèi)容的像素的深度或視差有關的至少一個深度或視差圖(DM)，所述圖針對在接收時重構未在所述立體流中傳送的圖像。
2.根據(jù)權利要求1所述的方法，其中，將所述至少一個深度或視差圖(DM)編碼為灰度圖像。
3.根據(jù)權利要求2所述的方法，其中，由單個亮度信號而不使用色度信號來傳輸所述至少一個深度或視差圖的視頻信息內(nèi)容。
4.根據(jù)前述權利要求中的任一項所述的方法，其中，所述至少一個深度或視差圖(DM)具有比其原始版本低的分辨率，后者的分辨率等于所述左圖像(L)和右圖像(R)的分辨率。
5.根據(jù)權利要求4所述的方法，其中，通過對所述原始深度圖進行4到I的欠采樣來獲得所述至少一個深度或視差圖(DM)。
6.根據(jù)前述權利要求中的任一項所述的方法，其中，所述