用于多視點(diǎn)視頻編碼/解碼的方法本專利申請是下列專利申請的分案申請：申請?zhí)枺?00980156340.0申請日：2009年12月08日發(fā)明名稱：多視點(diǎn)視頻編碼/解碼方法和設(shè)備技術(shù)領(lǐng)域本發(fā)明的示范實(shí)施例涉及一種多視點(diǎn)（multi-view）視頻編碼/解碼方法和設(shè)備，該方法和設(shè)備使用編碼和解碼的多視點(diǎn)視頻來對與所述多視點(diǎn)視頻對應(yīng)的深度信息視頻進(jìn)行編碼和解碼。

背景技術(shù)：
近年來，已經(jīng)進(jìn)行了用于通過數(shù)字電視（DTV）來對多視點(diǎn)視頻進(jìn)行廣播的研究。為了對與利用人眼所看到的真實(shí)視頻相似的多視點(diǎn)視頻進(jìn)行廣播，應(yīng)該創(chuàng)建和傳送多視點(diǎn)視頻。然后，應(yīng)該通過顯示設(shè)備來接收和再現(xiàn)所述多視點(diǎn)視頻。然而，由于多視點(diǎn)視頻具有大量的數(shù)據(jù)，所以難以按照在當(dāng)前的數(shù)字廣播系統(tǒng)中使用的信道的帶寬來接收多視點(diǎn)視頻。相應(yīng)地，正在對用于對多視點(diǎn)視頻進(jìn)行編碼和解碼的技術(shù)進(jìn)行研究。多視點(diǎn)視頻編碼（MVC）是一種以下技術(shù)，其對從具有不同視圖的多個相機(jī)獲取的多個視頻、以及與所述多個視頻對應(yīng)的多個深度信息視頻（即，多視點(diǎn)視頻）進(jìn)行編碼。針對同一對象，所述多個相機(jī)被布置為根據(jù)距離和方向上的預(yù)定規(guī)則而彼此間隔開。作為結(jié)果，在具有不同視圖并且組成多視點(diǎn)視頻的相應(yīng)視頻之間存在高相關(guān)性。當(dāng)恰當(dāng)?shù)厥褂孟鄳?yīng)視頻之間的高相關(guān)性時，可能顯著地改善MVC的編碼效率。然而，由于從同一對象反射的光可能取決于方向而彼此不同，所以可以考慮所述光以使編碼效率最大化。正在積極地進(jìn)行其標(biāo)準(zhǔn)化的MVC基于H.264/MPEG部分10高級視頻編碼（在下文中，稱作H.264/AVC），該H.264/MPEG部分10高級視頻編碼是現(xiàn)有的國際運(yùn)動圖像編碼標(biāo)準(zhǔn)。在MVC中，考慮多視點(diǎn)視頻的上述特性，以尋找一種用于改善編碼效率的方法。例如，將分級B畫面編碼處理應(yīng)用于視圖內(nèi)預(yù)測編碼，執(zhí)行該分級B畫面編碼處理以支持在H.264/AVC中定義的聯(lián)合可伸縮視頻編碼（JSVC）中的時間可伸縮性。此外，與視圖內(nèi)預(yù)測編碼并排地（sidebyside）執(zhí)行視圖間預(yù)測編碼，以改善MVC中的編碼效率。相應(yīng)地，研究三維（3D）視頻的關(guān)聯(lián)團(tuán)體正在對通過DTV廣播進(jìn)行的3D視頻的接收和傳送進(jìn)行大量研究。當(dāng)前，該研究正針對高清晰度（HD）立體視頻的傳送和接收。HD立體視頻是指具有1920×1080尺寸的隔行視頻或者具有1024×720尺寸的逐行視頻。圖1是解釋了傳統(tǒng)的多視點(diǎn)視頻編碼/解碼系統(tǒng)的框圖。參考圖1，傳統(tǒng)的多視點(diǎn)視頻編碼/解碼系統(tǒng)包括第一視頻編碼單元101、第一視頻解碼單元103、第一深度信息視頻編碼單元105、第一深度信息視頻解碼單元107、第二視頻編碼單元109、第二視頻解碼單元111、第二深度信息視頻編碼單元113、和第二深度視頻信息解碼單元115。分別將第一和第二視頻以及第一和第二深度信息視頻輸入到第一和第二視頻編碼單元101和109以及第一和第二深度信息視頻編碼單元105和113。第一和第二視頻具有彼此不同的視圖，并且第一和第二深度信息視頻分別對應(yīng)于所述第一和第二視頻，并包括深度信息。在傳統(tǒng)的多視點(diǎn)視頻編碼/解碼系統(tǒng)中，可以使用兩個或更多視頻，并且深度信息視頻的數(shù)目可以對應(yīng)于視頻的數(shù)目。此時，可以使用具有不同視圖的視頻來對多視點(diǎn)視頻進(jìn)行編碼。即，在多視點(diǎn)視頻之間存在高相關(guān)性。因此，當(dāng)首先對第一視頻進(jìn)行編碼時，第二視頻編碼單元109可以通過參考編碼的第一視頻來對第二視頻進(jìn)行編碼?？梢园凑障嗤姆绞絹韺ι疃刃畔⒁曨l進(jìn)行編碼。將相應(yīng)的編碼的視頻輸入到第一和第二視頻解碼單元103和111以及第一和第二深度信息視頻解碼單元107和115，并然后進(jìn)行解碼。二維（2D）視頻是通過對編碼的第一或第二視頻進(jìn)行解碼所獲得的視頻，而3D視頻是通過對編碼的第一和第二視頻以及編碼的第一深度信息視頻進(jìn)行解碼所獲得的視頻。第一視頻可以是具有參考視圖的視頻。多視點(diǎn)視頻是通過對編碼的第一和第二視頻以及編碼的第一和第二深度信息視頻進(jìn)行解碼所獲得的視頻。即，在傳統(tǒng)的多視點(diǎn)視頻編碼/解碼系統(tǒng)中，獨(dú)立地執(zhí)行多視點(diǎn)視頻和深度信息視頻的編碼和解碼。

技術(shù)實(shí)現(xiàn)要素：
技術(shù)問題本發(fā)明的實(shí)施例針對一種多視點(diǎn)視頻編碼/解碼方法和設(shè)備，該方法和設(shè)備有效地對與多視點(diǎn)視頻對應(yīng)的深度信息視頻進(jìn)行編碼和解碼，由此有效地對該多視點(diǎn)視頻進(jìn)行編碼和解碼?？梢酝ㄟ^以下描述來理解本發(fā)明的其他目的和優(yōu)點(diǎn)，并且通過參考本發(fā)明的實(shí)施例，它們將變得明顯。同樣，對于本發(fā)明所屬技術(shù)領(lǐng)域的技術(shù)人員來說明顯的是，可以通過所要求保護(hù)的部件及其組合來實(shí)現(xiàn)本發(fā)明的目的和優(yōu)點(diǎn)。技術(shù)解決方案根據(jù)本發(fā)明的實(shí)施例，一種多視點(diǎn)視頻編碼方法包括：通過執(zhí)行幀間預(yù)測（interprediction）和幀內(nèi)預(yù)測（intraprediction）來對多視點(diǎn)視頻進(jìn)行編碼；以及根據(jù)幀間預(yù)測和幀內(nèi)預(yù)測中的至少一個來對與該多視點(diǎn)視頻對應(yīng)的深度信息視頻進(jìn)行編碼。根據(jù)本發(fā)明的另一實(shí)施例，一種多視點(diǎn)視頻編碼方法包括：控制與多視點(diǎn)視頻對應(yīng)的第一和第二深度信息視頻的比例尺（scale），從而使所述比例尺相同；以及通過參考其比例尺被控制的第一深度信息視頻來對其比例尺被控制的第二深度信息視頻進(jìn)行編碼。根據(jù)本發(fā)明的另一實(shí)施例，一種多視點(diǎn)視頻編碼設(shè)備包括：視頻編碼塊，被配置為通過幀間預(yù)測和幀內(nèi)預(yù)測來對多視點(diǎn)視頻進(jìn)行編碼；以及深度信息視頻編碼塊，被配置為使用該視頻編碼塊所生成的幀間預(yù)測信息和幀內(nèi)預(yù)測信息中的一條或多條，來對與該多視點(diǎn)視頻對應(yīng)的深度信息視頻進(jìn)行編碼。根據(jù)本發(fā)明的另一實(shí)施例，一種多視點(diǎn)視頻編碼設(shè)備包括：比例尺控制塊，被配置為控制與多視點(diǎn)視頻對應(yīng)的第一和第二深度信息視頻的比例尺，從而使所述比例尺彼此相等；以及深度信息視頻編碼塊，被配置為通過參考其比例尺被控制的第一深度信息視頻來對其比例尺被控制的第二深度信息視頻進(jìn)行編碼。根據(jù)本發(fā)明的另一實(shí)施例，一種多視點(diǎn)視頻解碼方法包括：接收通過幀間預(yù)測和幀內(nèi)預(yù)測所編碼的多視點(diǎn)視頻、以及通過使用根據(jù)幀間預(yù)測的預(yù)測信息和根據(jù)幀內(nèi)預(yù)測的預(yù)測信息中的一條或多條所編碼的深度信息視頻；對編碼的多視點(diǎn)視頻進(jìn)行解碼；以及使用在深度信息視頻編碼期間所使用的預(yù)測信息來對編碼的深度信息視頻進(jìn)行解碼。具體來講，按照本發(fā)明一個方面，提供了一種用于多視點(diǎn)視頻編碼的方法，該方法包括：控制與多視點(diǎn)視頻對應(yīng)的第一和第二深度信息視頻的比例尺，從而使所述比例尺相同；以及通過參考其比例尺被控制的第一深度信息視頻，來對其比例尺被控制的第二深度信息視頻進(jìn)行編碼。按照本發(fā)明另一方面，提供了一種用于多視點(diǎn)視頻解碼的方法，該方法包括：接收通過幀間預(yù)測和幀內(nèi)預(yù)測中的至少一個所編碼的多視點(diǎn)視頻、通過使用根據(jù)幀間預(yù)測和幀內(nèi)預(yù)測中的至少一個的預(yù)測信息中的一條或多條所編碼的深度信息視頻、以及指示出是否使用了根據(jù)至少一個幀間預(yù)測和幀內(nèi)預(yù)測的預(yù)測信息的標(biāo)志比特，其中根據(jù)幀間預(yù)測的預(yù)測信息包括根據(jù)幀間預(yù)測的運(yùn)動向量；對所編碼的多視點(diǎn)視頻進(jìn)行解碼；使用在深度信息視頻的編碼期間所使用的預(yù)測信息，來對所編碼的深度信息視頻進(jìn)行解碼；以及控制所解碼的深度信息視頻的比例尺，其中通過參考其比例尺被控制的第二深度信息視頻，來對所解碼的深度信息視頻的比例尺進(jìn)行控制。有益效果根據(jù)本發(fā)明的實(shí)施例，當(dāng)對用于多視點(diǎn)視頻的深度信息視頻進(jìn)行編碼時，可以通過使用在多視點(diǎn)視頻編碼期間所生成的預(yù)測信息來執(zhí)行該編碼，這使得可能增加編碼效率。此外，可以在深度信息視頻的解碼期間使用在多視點(diǎn)視頻解碼期間所使用的預(yù)測信息。因此，可能增加用于多視點(diǎn)視頻的解碼效率。附圖說明圖1是解釋了傳統(tǒng)的多視點(diǎn)視頻編碼/解碼系統(tǒng)的框圖。圖2示出了用于解釋根據(jù)本發(fā)明實(shí)施例的多視點(diǎn)視頻編碼方法的構(gòu)思的視頻。圖3是解釋了根據(jù)本發(fā)明另一實(shí)施例的多視點(diǎn)視頻編碼/解碼系統(tǒng)的圖。圖4是解釋了其中在根據(jù)本發(fā)明實(shí)施例的多視點(diǎn)視頻編碼設(shè)備301中使用預(yù)測信息的處理的圖。圖5圖示了根據(jù)本發(fā)明另一實(shí)施例的多視點(diǎn)視頻編碼設(shè)備301。圖6圖示了根據(jù)本發(fā)明另一實(shí)施例的多視點(diǎn)視頻編碼設(shè)備301。圖7圖示了根據(jù)本發(fā)明另一實(shí)施例的多視點(diǎn)視頻編碼方法。圖8圖示了根據(jù)本發(fā)明另一實(shí)施例的多視點(diǎn)視頻編碼方法。圖9圖示了根據(jù)本發(fā)明另一實(shí)施例的多視點(diǎn)視頻解碼方法。具體實(shí)施方式下面，將參考附圖來更加詳細(xì)地描述本發(fā)明的示范實(shí)施例。然而，本發(fā)明可以按照不同的形式來實(shí)施，并且不應(yīng)被構(gòu)造為限于在這里提出的實(shí)施例。相反地，提供這些實(shí)施例，使得本公開將是徹底和完全的，并將向本領(lǐng)域技術(shù)人員充分地傳達(dá)本發(fā)明的范圍。貫穿整個公開中，貫穿本發(fā)明的各個圖和實(shí)施例中，同樣的附圖標(biāo)記表示同樣的部分。附圖不必按照比例尺，并且在一些實(shí)例中，可能已經(jīng)對比例進(jìn)行了擴(kuò)大，以便清楚地圖示所述實(shí)施例的特征。圖2示出了用于解釋根據(jù)本發(fā)明實(shí)施例的多視點(diǎn)視頻編碼方法的構(gòu)思的視頻。在圖2中，第一深度信息視頻203對應(yīng)于第一視頻...