專利名稱：：多視圖視頻編碼方法和裝置的制作方法
技術(shù)領(lǐng)域：
：本發(fā)明總的來說涉及視頻編碼和解碼，更具體地說，涉及在多視圖視頻編碼(multi-viewvideocoding)系統(tǒng)中使用的方法和裝置。
背景技術(shù)：
：在多視圖視頻編碼(MVC)當(dāng)前的實(shí)施方案中，該MVC服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會(IS0/IEC)動畫專家組-4(MPEG-4)部分10高級視頻編碼(AVC)標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段(ITU-T)H.264推薦標(biāo)準(zhǔn)(下文稱之為"MPEG-4AVC標(biāo)準(zhǔn)")，沒有采取措施來識別特定的視圖和將攝像機(jī)參數(shù)以信號表示。由于幾個原因需要這一視圖信息。視圖可擴(kuò)展性、視圖隨機(jī)存取、并行處理、視圖生成和視圖合成都是利用視圖信息的多視圖編碼要求。此外，這些要求中的幾個要求還利用在標(biāo)準(zhǔn)化的進(jìn)程中當(dāng)前上未通過的像機(jī)參數(shù)。已經(jīng)提出一種方法能夠在多視圖壓縮位流中進(jìn)行高效隨機(jī)存取。在所提出的方法中，定義V畫面類型和視圖依賴性補(bǔ)充增強(qiáng)信息(SEI)消息。在提出的V畫面類型中要求的特征是V-pictures畫面對于在同一個攝像機(jī)中的其它畫面不應(yīng)當(dāng)具有時間依賴性(dependency)，并且僅同時可以根據(jù)在其它攝像機(jī)中的畫面預(yù)測。所提出的視圖依賴性補(bǔ)充增強(qiáng)信息消息將精確地描述V畫面以及畫面的在先的和隨后的序列可能依賴于哪些視圖。下面是所提出的變化的細(xì)節(jié)。關(guān)于V畫面語法和語義，關(guān)于MPEG-4AVC標(biāo)準(zhǔn)的特定的語法表擴(kuò)展包含對應(yīng)于V畫面的、類型14的網(wǎng)纟各4由象層(NetworkAbstractionLayer、NAL)單元。此外，將V畫面類型定義具有如下的語義V畫面一種編碼的畫面，其中所有片僅參考具有相同時間索引的片(即，僅在其它視圖中的片而不是在當(dāng)前視圖中的片)。當(dāng)要輸出或顯示V畫面時，其還可以促^f吏解碼處理標(biāo)記來自相同視圖的、不是IDR畫面或V畫面的、并且按照輸出次序超前V畫面的所有畫面，將其標(biāo)記為"未用于基準(zhǔn)"。每個V畫面應(yīng)與在相同NAL中發(fā)生的視圖依賴性(ViewDependancy)SEI消息相關(guān)聯(lián)。關(guān)于視圖依賴性補(bǔ)充增強(qiáng)信息消息和語義，按照如下語法定義視圖依賴性補(bǔ)充增強(qiáng)信息消息view—dependency(payloadSize){num—seq_reference—viewsue(v)seq_reference—view—0ue(v)seq_reference—view—lue(v)S6q_rsference—view—NU6(v)num—pic—reference—viewsue(v)pic一refercnc6一vicw—0ue(v)pic一reference一view—1ue(v)pic—reference—view—Nue(v)其中num—seq—reference—views/num_pic_reference_views代表可以用作當(dāng)前序歹l)/畫面的基準(zhǔn)的潛在#見圖的凄t目，seq—reference—view—i/pic—reference—view—i代表第i個基準(zhǔn)視圖的視圖凄t目。與視圖依賴性補(bǔ)充增強(qiáng)信息消息相關(guān)聯(lián)的畫面將僅參考由pic—reference_view-i描述的指定視圖。類似地，按照那個視圖的輸出次序的所有隨后的畫面，直到在那個視圖的下一個視圖依賴性補(bǔ)充增強(qiáng)信息消息為止，一尋l義參考由seq一reference—view_i4苗述的才旨定^見圖。視圖依賴性補(bǔ)充增強(qiáng)信息消息將與每個瞬時解碼刷新(InstantaneousDecodingRefresh、IDR)畫面和V畫面相關(guān)聯(lián)。這種方法的至少一個缺點(diǎn)是在解碼器中由于遞歸地得到依賴性引起的復(fù)雜性。此外，該方法要求每個V畫面攜帶SEI消息(其是MPEG-4標(biāo)準(zhǔn)的非規(guī)范部分)，導(dǎo)致該依賴性不能用于規(guī)范行為例如基準(zhǔn)畫面選擇。
發(fā)明內(nèi)容由針對在多視圖視頻編碼系統(tǒng)中使用的及方法和裝置的本發(fā)明原理提出在先技術(shù)的這些和其它缺點(diǎn)和不便。按照本發(fā)明原理的一個方面，提供一種裝置。該裝置包含編碼器，用于將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼成為結(jié)果的位流，其中將該結(jié)果的位流編碼以包含視圖特定信息。該視圖特定信息指示在至少兩個視圖中的至少某些視圖之間的解碼相依性。按照本發(fā)明原理的另一個方面，提供一種方法。該方法包含將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼成為結(jié)果的位流，其中將該結(jié)果的位流編碼以包含視圖特定信息。該視圖特定信息指示在至少兩個視圖中的至少某些^L圖之間的解碼相依性(interdependence)。按照本發(fā)明原理的再一個方面，提供一種裝置。該裝置包含解碼器，用于將對應(yīng)于來自位流的多視圖視頻內(nèi)容的至少兩個視圖解碼，其中將該位流解碼以確定其中包含的視圖特定信息，該視圖特定信息指示在至少兩個視圖中的至少某些視圖之間的解碼相依性。按照本發(fā)明原理的再一個方面，提供一種方法。該方法包含將對應(yīng)于來自位流的多視圖視頻內(nèi)容的至少兩個視圖解碼，其中將該位流解碼以確定其中包含的視圖特定信息，該視圖特定信息指示在至少兩個視圖中的至少某些視圖之間的解碼相依性。按照本發(fā)明原理的再一個方面，提供一種裝置。該裝置包含編碼器，用于通過將至少兩個視圖中的對于其解碼獨(dú)立于該至少兩個視圖中的任何其它視圖的任一視圖定義作為基本視圖，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼。按照本發(fā)明原理的再一個方面，提供一種方法。該方法包含通過將至少兩個視圖中的對于其解碼獨(dú)立于該至少兩個視圖中的任何其它視圖的任一視圖定義作為基本視圖，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼。按照本發(fā)明原理的再一個方面，提供一種裝置。該裝置包含解碼器，用于將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖解碼，其中該解碼器確定至少兩個視圖中的哪一個視圖一一如果有的話一一是對于其解碼獨(dú)立于該至少兩個視圖中的任何其它視圖的基本視圖。按照本發(fā)明原理的再一個方面，提供一種方法。該方法包含將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖解碼，其中該解碼步驟確定至少兩個視圖中的哪一個視圖——如果有的話——是對于其解碼獨(dú)立于該至少兩個視圖中的任何其它視圖的基本視圖。按照本發(fā)明原理的再一個方面，提供一種裝置。該裝置包含編碼器，用于通過將至少兩個視圖中的至少一個視圖編碼在結(jié)果的位流中，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼，為了與其的向后兼容性，該結(jié)果的位流的語法服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會(IS0/IEC)動畫專家組-4(MPEG-4)部分10高級視頻編碼(AVC)標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段(ITU-T)H.264推薦標(biāo)準(zhǔn)。按照本發(fā)明原理的再一個方面，提供一種方法。該方法包含通過將至少兩個視圖中的至少一個視圖編碼在結(jié)果的位流中，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼，為了與其的向后兼容性，該結(jié)果的位流的語法服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會(IS0/IEC)動畫專家組-4(MPEG-4)部分10高級視頻編碼(AVC)標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段(ITU-T)H.264推薦標(biāo)準(zhǔn)。按照本發(fā)明原理的再一個方面，提供一種裝置。該裝置包含編碼器，用于將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖解碼，為了與其的向后兼容性，其中至少兩個視圖中的至少一個視圖包含在位流中，該結(jié)果的位流的語法服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會(IS0/IEC)動畫專家組-4(MPEG-4)部分10高級視頻編碼(AVC)標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段(ITU-T)H.264推薦標(biāo)準(zhǔn)。按照本發(fā)明原理的再一個方面，提供一種方法。該方法包含將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖解碼，為了與其的向后兼容性，其中至少兩個視圖中的至少一個視圖包含在位流中，該結(jié)果的位流的語法服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會(IS0/IEC)動畫專家組-4(MPEG-4)部分10高級視頻編碼(AVC)標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段(ITU-T)H.264推薦標(biāo)準(zhǔn)。按照本發(fā)明原理的再一個方面，提供一種裝置。該裝置包含編碼器，用于通過在兩個預(yù)定義的片類型之間選擇其一，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖中的至少一個視圖編碼。按照本發(fā)明原理的再一個方面，提供一種方法。該方法包含通過在兩個預(yù)定義的片類型之間選擇其一，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖中的至少一個^L圖編碼。按照本發(fā)明原理的再一個方面，提供一種裝置。該裝置包含解碼器，用于通過在兩個預(yù)定義的片類型之間確定其一，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個^L圖中的至少一個浮見圖解碼。按照本發(fā)明原理的再一個方面，提供一種方法。該方法包含通過在兩個預(yù)定義的片類型之間確定其一，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖中的至少一個^f見圖解碼。按照本發(fā)明原理的再一個方面，提供一種裝置。該裝置包含編碼器，用于將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼成為位流，其中將結(jié)果的位流編碼以包含對應(yīng)于至少兩個視圖中的至少一個視圖的至少一個攝像機(jī)參數(shù)。按照本發(fā)明原理的再一個方面，提供一種方法。該方法包含將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼成為位流，其中將結(jié)果的位流編碼以包含對應(yīng)于至少兩個視圖中的至少一個視圖的至少一個攝像機(jī)參數(shù)。按照本發(fā)明原理的再一個方面，提供一種裝置。該裝置包含解碼器，用于將對應(yīng)于來自位流的多視圖視頻內(nèi)容的至少兩個視圖解碼，其中解碼該位流以確定其中包含的至少一個攝像機(jī)參數(shù)。該至少一個攝像機(jī)參數(shù)對應(yīng)于至少兩個3見圖中的至少一個4見圖。按照本發(fā)明原理的再一個方面，提供一種方法。該方法包含將對應(yīng)于來自位流的多視圖視頻內(nèi)容的至少兩個視圖解碼，其中解碼該位流以確定其中包含的至少一個攝像機(jī)參數(shù)。該至少一個攝像機(jī)參數(shù)對應(yīng)于至少兩個視圖中的至少一個^L圖。按照本發(fā)明原理的再一個方面，提供一種裝置。該裝置包含編碼器，用于將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼成為結(jié)果的位流，其中將結(jié)果的位流編碼以包含與用于至少兩個視圖中的至少一個視圖的至少一個攝像機(jī)參數(shù)相關(guān)的至少一個語法要素。按照本發(fā)明原理的再一個方面，提供一種方法。該方法包含將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼成為結(jié)果的位流，其中將結(jié)果的位流編碼以包含與用于至少兩個視圖中的至少一個視圖的至少一個攝像機(jī)參數(shù)相關(guān)的至少一個語法要素。按照本發(fā)明原理的再一個方面，提供一種裝置。該裝置包含解碼器，用于將對應(yīng)于來自位流的多視圖視頻內(nèi)容的至少兩個視圖解碼，其中基于包含在位流中的至少一個語法要素，解碼該位流以確定用于至少兩個視圖中的至少一個視圖的至少一個攝像機(jī)參數(shù)。按照本發(fā)明原理的再一個方面，提供一種方法。該方法包含將對應(yīng)于來自位流的多視圖視頻內(nèi)容的至少兩個視圖解碼，其中基于包含在位流中的至少一個語法要素，解碼該位流以確定用于至少兩個視圖中的至少一個視圖的至少一個攝像機(jī)參數(shù)。通過結(jié)合附圖閱讀對于示范性實(shí)施例的如下的詳細(xì)描述，使本發(fā)明原理的這些和其它方面、特征和優(yōu)點(diǎn)將變得更明顯。按照如下示范性的附圖可以更好地理解本發(fā)明的原理，其中明的原理可以應(yīng)用于該^L頻編碼器；明的原理可以應(yīng)用于該視頻解碼器；圖3是^要照本發(fā)明原理的實(shí)施例的、通過利用分級B畫面，基于MPEG-4標(biāo)準(zhǔn)的視圖間時間預(yù)測結(jié)構(gòu)的示意圖，圖4是按照本發(fā)明原理的實(shí)施例的、用于對多視圖視頻內(nèi)容的多視圖編碼的示范性的方法的流程圖5是按照本發(fā)明原理的實(shí)施例的、用于對多視圖視頻內(nèi)容的多視圖解碼的示范性的方法的流程具體實(shí)施例方式本發(fā)明原理針對用在多視圖視頻編碼系統(tǒng)的方法和裝置。本說明書描述本發(fā)明原理。因此，本
技術(shù)領(lǐng)域：
的技術(shù)人員會理解能夠設(shè)計體現(xiàn)本發(fā)明原理并包含在其構(gòu)思和范圍內(nèi)的各種配置，雖然再這里沒有直接明確地描述或表示。這里詳述的所有的實(shí)例和條件性語言意在教學(xué)目的，有助于讀者理解由本發(fā)明人為推廣該技術(shù)而分析的本發(fā)明原理和概念，和所作分析沒有局限于這些具體詳述的實(shí)例和條件。此外，這里對各原理、各方面和本發(fā)明原理的實(shí)施例所有的敘述及其特定實(shí)例，意在包含其結(jié)構(gòu)和功能方面兩者的等效物。另外，意在這些等效物包含當(dāng)前公知的等效物以及將來發(fā)展的等效物，即，所發(fā)展的任何元件執(zhí)行相同的功能，與結(jié)構(gòu)無關(guān)。因此，例如本
技術(shù)領(lǐng)域：
的技術(shù)人員會理解，這里提出的方框圖表示所描述的體現(xiàn)本發(fā)明原理的電路的概念性視圖。類似地，應(yīng)理解，任何流程圖、流程示意圖、狀態(tài)轉(zhuǎn)變示意圖、偽碼等表示各種處理，這些處理主要體現(xiàn)在計算機(jī)可讀介質(zhì)中，和由計算機(jī)或處理器執(zhí)行，而不管這些計算機(jī)和處理器是否直接明確表示。圖中所示的各種元件的功能可以通過使用專用的硬件以及能夠以與適當(dāng)軟件相關(guān)聯(lián)的方式執(zhí)行軟件的硬件來提供。當(dāng)由處理器提供時，可以由單一的專用處理器、由單一的共享處理器或由多個單個的處理器來提供該功能，其中的某些可以共享。此外，明確使用術(shù)語"處理器"或"控制器"不應(yīng)解釋為專指能夠執(zhí)行軟件的硬件，和可以隱含包含，而不局限于，數(shù)字信號處理器("DSP")硬件、用于存儲軟件的只讀存儲器("ROM")、隨機(jī)存取存儲器("RAM")和非易失性存儲裝置。還可以包含其它硬件，傳統(tǒng)的和/或定制的。類似地，在圖中所示的開關(guān)僅是概念性的。它們的功能可以通過程序邏輯的操作、通過專用邏輯電路、通過程序控制和專用邏輯電路的交互作用，或者甚至通過人工實(shí)現(xiàn)，如從上下文更具體地理解通過該實(shí)施方案所選擇的特定技術(shù)。在其權(quán)利要求中，按照用于執(zhí)行指定功能的部件表達(dá)的任何元件，意在包含任何執(zhí)行途徑，其功能包含例如a)執(zhí)行該功能的電路元件的組合，b)任何形式的軟件因此包含固件、微代碼之類，與用于執(zhí)行軟件適當(dāng)?shù)碾娐方M合以執(zhí)行該功能。按照由這些權(quán)利要求限定的本發(fā)明原理在于這樣的事實(shí)，即將由各種所述的部件提供的功能組合并以權(quán)利要求所要求的方式集合。因此這樣看待可以提供那些功能的任何部件等效于這里所示的那些。在說明書中談及本發(fā)明原理的"一個實(shí)施例"或"一實(shí)施例"是指與實(shí)施例相聯(lián)系表述的特定的特征、結(jié)構(gòu)、特性和等等，包含在本發(fā)明原理的至少一個實(shí)施例中。因此，遍及說明書在各個地方出現(xiàn)的"一個實(shí)施例，，或"一實(shí)施例"的詞組不一定全部涉及相同的實(shí)施例。轉(zhuǎn)向圖1，由標(biāo)號100概括地指示可以應(yīng)用示范性本發(fā)明原理的視頻編碼器。在信號通信中視頻編碼器100的輸入端與組合器110的非反相輸入端相連接。在信號通信中組合器11Q的輸出端與變換器/量化器120相連接。在信號通信中變換器/量化器120的輸出端與熵編碼器140相連接。熵編碼器140的輸出端可用作編碼器100的輸出端。在信號通信中變換器/量化器120的輸出端還與逆變換器/量化器150相連接。在信號通信中逆變換器/量化器150的輸出端與解塊濾波器160的輸入端相連接。在信號通信中解塊濾波器160的輸出端與參考畫面存儲器170相連接。在信號通信中參考畫面存儲器170的第一輸出端與運(yùn)動估算器180的第一輸出端相連接。在信號通信中編碼器100的輸入端還與運(yùn)動估算器180的第二輸入端相連接。在信號通信中運(yùn)動估算器180的輸出端與運(yùn)動補(bǔ)償器190的第一輸入端相連接。在信號通信中參考畫面存儲器170的第二輸出端與運(yùn)動補(bǔ)償器190的第二輸入端相連接。在信號通信中運(yùn)動補(bǔ)償器190的輸出端與組合器110的反相輸入端相連接。轉(zhuǎn)向圖2，由標(biāo)號200概括地指示可以應(yīng)用示范性本發(fā)明原理的視頻解碼器。視頻解碼器200包含用于接收視頻序列的熵解碼器210。在信號通信中熵解碼器210的第一輸出端與逆量化器/變換器220的輸入端相連接。在信號通信中逆量化器/變換器220與組合器240^非反相輸入端相連接。在信號通信中組合器240的輸出端與解塊濾波器290的輸入端相連接。在信號通信中解塊濾波器290的輸出端與參考畫面存儲器250的輸入端相連接。在信號通信中參考畫面存儲器250的輸出端與運(yùn)動補(bǔ)償器260的第一輸入端相連接。在信號通信中運(yùn)動補(bǔ)償器260的輸出端與組合器240的第二非反相輸入端相連接。在信號通信中熵解碼器210的第二輸出端與運(yùn)動補(bǔ)償器260的第二輸入端相連接。解塊濾波器290的輸出端可用作視頻解碼器200的輸出端。在本發(fā)明原理的實(shí)施例中，提出一種用于高效處理多視圖序列的高級語法。特別是，我們提出創(chuàng)立稱為視圖參數(shù)組(ViewParameterSet、VPS)的新參數(shù)組，具有其本身的NAL單元類型和另兩個新NAL單元類型以支持多視圖片，其中NAL單元類型包含在NAL首標(biāo)中的視圖識別符(id)，以識別該片屬于哪一個^f見圖。為了^L圖可擴(kuò)展性和與服從MPEG-4AVC標(biāo)準(zhǔn)的解碼器的向后兼容性，我們提出維持一個服從MPEG-4AVC的視圖，我們將該視圖稱為"服乂人MPEG—4AVC的基本4見圖"(MPEG-4AVCcompliantBaseView)。這里所使用的"高級語法"指呈現(xiàn)在位流中的語法，其分級地駐留在宏塊層之上。例如，這里所使用的高級語法可以指但不局限于在片首標(biāo)級、補(bǔ)充增強(qiáng)信息(SEI)級、畫面參數(shù)組級和序列參數(shù)組級的語法。在上述的多視圖視頻編碼系統(tǒng)當(dāng)前的實(shí)施方案中，并沒有措施來識別一特定視圖和將攝像機(jī)參數(shù)以信號表示，不同的視圖交錯以形成單一序列，而非將不同的視圖作為單獨(dú)的視圖處理。正如以上指出的，由于該語法服從MPEG-4AVC標(biāo)準(zhǔn)，目前不可能識別一指定的片屬于哪一個視圖。由于幾個原因需要這一視圖信息。視圖可擴(kuò)展性、視圖隨機(jī)存取、并行處理、視圖生成、和視圖合成都是需要識別視圖的多視圖視頻編碼要求。為了高效地支持視圖隨機(jī)存取和視圖可擴(kuò)展性，重要的是解碼器要了解不同的畫面如何彼此依賴，這樣僅將必須的畫面解碼。對于視圖合成，需要攝像機(jī)參數(shù)。如果將視圖合成最終用在解碼循環(huán)中，需要指定將攝像機(jī)參數(shù)以信號表示的標(biāo)準(zhǔn)方式。按照一實(shí)施例，使用一視圖參數(shù)組。在一實(shí)施例中，假設(shè)需要一個與MPEG-4AVC標(biāo)準(zhǔn)完全向后兼容的視圖，用于支持非MVC兼容的但是MPEG-4AVC可兼容的解碼器。在一個實(shí)施例中，假設(shè)將有可獨(dú)立解碼的幾個視圖，以便于快速視圖隨機(jī)存取。我們稱這些視圖為"基本視圖"?；疽晥D可以與MPEG-4AVC標(biāo)準(zhǔn)相兼容或不相兼容，但是，MPEG-4AVC可兼容的視圖總是一基本視圖。轉(zhuǎn)向圖3，由標(biāo)號300概括地指示利用分級B畫面的基于MPEG-4AVC標(biāo)準(zhǔn)的^L圖間時間預(yù)測結(jié)構(gòu)。在圖3中，變量I^表內(nèi)編碼(intracoded)的畫面，變量P代表預(yù)測編碼的畫面，變量B代表雙預(yù)測編碼的畫面，變量T代表特定畫面的位置，變量S代表特定畫面所對應(yīng)的特定的視圖。按照一個實(shí)施例，定義如下的術(shù)語將nal—ref—idc設(shè)定為3，將錨畫面以信號表示。在圖3中，在位置T0，T8，…，T96和T100的所有畫面是錨畫面的實(shí)例。定義非錨畫面為一不具有對于錨畫面指定的上述限制的畫面。在圖3中，畫面B2、B3和B4是非錨畫面?；疽晥D是不依賴于任何其它視圖的視圖，并可以獨(dú)立地解碼。在圖3中，視圖SO是基本視圖的實(shí)例。此外，在一實(shí)施例中，提出一被稱為視圖參數(shù)組的新的參數(shù)組，該視圖參數(shù)組具有其自身的NAL單元類型和兩個新NAL單元類型以支持多視圖視頻編碼片。我們還改進(jìn)了該片首標(biāo)語法以指示view_id和要使用的視圖參數(shù)組。MPEG-4AVC標(biāo)準(zhǔn)包含如下的兩個參數(shù)組(1)序列參數(shù)組(SequenceParameterSet、SPS)，其包含在整個序列上預(yù)期不會改變的信息；(2)畫面參數(shù)組(PictureParameterSet、PPS),其包含對于每個畫面預(yù)期不會改變的^f言息。由于多視圖視頻編碼具有對于每個視圖特定的附加的信息，我們建立了單獨(dú)的視圖參數(shù)組(VPS),以便發(fā)送這一信息。確定不同視圖之間的依賴性所需的所有信息指示在視圖參數(shù)組中。用于所提出的視圖參數(shù)組的語法表表示在表l(視圖參數(shù)組RBSP語法)中。這一視圖參數(shù)組包含在如表2中所示的新NAL單元類型例如類型14(ML單元類型代碼)中。按照對本發(fā)明的敘述，定義如下的術(shù)語view_parameter-set-id在片首標(biāo)中識另'J所參照的i見頻參凄t組。view-parameter—set—id的值應(yīng)處在0到255的范圍內(nèi)。number—of—minus—1力口1識另'j在為位流中的$見圖的總It，number_of—minus-1的Y直應(yīng)處在O到255的范圍內(nèi)。avc—compatible—view—id指示AVC可兼容的#見圖的view—id。avc—compatible—view-id的值應(yīng)處在O到255的范圍內(nèi)。is-base_view—flag[i]等于1指示該視圖i是基本視圖，并可獨(dú)立解碼。is-base—view—flag[i]等于0指示該視圖i不是基本視圖。對于AVC可兼容的3見圖i,is—base—view—flag[i]的4直應(yīng)等于1。dependency-叩date-flag等于1指示對于這一視圖的依賴性信息在VPS中更新。D印endency-update—flag等于0指示對于這一視圖的依賴性信息不更新并不應(yīng)當(dāng)改變。anchor—picture—dependency—maps[i][j]等于1指示view—id等于j的錨畫面將依賴于view-id等于i的錨畫面。non_anchor_picture—dependency—maps[i][j]等于l指示view—id等于j的非錨畫面將依賴于view-id等于i的非錨畫面。non_anchor_picture—dependency_maps[i][j]僅當(dāng)anchor—picture-dependency—maps[i][j]等于1時出現(xiàn)。如果出現(xiàn)anchor—picture—dependency—maps[i][j]并等于0,貝'Jnon—anchor—picture—dependency』aps[i][j]推斷應(yīng)等于0。表l<table>tableseeoriginaldocumentpage15</column></row><table>表2<table>tableseeoriginaldocumentpage16</column></row><table>在視圖參數(shù)組中的選項參數(shù)包含如下camera—parameter_present-flag等于1指示按照如下將投影矩陣以信號表示。camera—parameters,假設(shè)攝像機(jī)參數(shù)以3x4投影矩陣P的形式的輸送，該參數(shù)可以用于將在3D空間中的點(diǎn)映射到2D圖像坐標(biāo)I=P*[XW:Yw:Zw:1]其中I是無向性坐標(biāo)I=P*[X.Ix:入■I"入]?？梢园凑誌EEE單精度浮點(diǎn)(32位)標(biāo)準(zhǔn)表示每個要素camera—parameter—將這一信息放入單獨(dú)參數(shù)組中的好處是我們?nèi)匀痪S持與MPEG-4AVC標(biāo)準(zhǔn)可兼容的序列參數(shù)組(SPS)和畫面參數(shù)組(PPS)。如果我們將這一信息放入序列參數(shù)組(SPS)或畫面參數(shù)組(PPS)，則對于每個視圖，我們需要發(fā)出單獨(dú)的序列參數(shù)組與畫面參數(shù)組。這就太受約束了。此外，這一信息不能很好地適合序列參數(shù)組或畫面參數(shù)組。另一個理由是由于我們提出具有MPEG-4AVC標(biāo)準(zhǔn)可兼容的基本視圖，對于這樣的視圖，我們就必須使用單獨(dú)的(MPEG-4AVC可兼容的)序列參數(shù)組和畫面參數(shù)組，和對于所有其它的視圖，我們必須使用單獨(dú)的序列參數(shù)組/畫面參數(shù)組(具有視圖特定信息)。在序列的起點(diǎn)將所有的依賴性信息放入單一的視圖參數(shù)組是十分有益的。一旦解碼器接收視圖參數(shù)組，其就可以利用所有的依賴性信息建立映射表。這樣就使得其在接收任何片之前能夠了解對于解碼一特定的視圖那些視圖是需要的。其結(jié)果是我們僅需要分析片首標(biāo)以得到view-id,和確定解碼由用戶指示的目標(biāo)視圖是否需要這一視圖。因此，確定為了解碼一特定的視圖需要那一些幀，我們不需要緩沖任何幀或等待直到某一點(diǎn)。在視圖參數(shù)組中指示依賴性信息和其是否是基本視圖。即使MPEG-4AVC可兼容的基本視圖也與其關(guān)聯(lián)有對于該視圖特定的信息(例如攝像機(jī)參數(shù))。為了包含視圖內(nèi)插/合成的幾個目的這一信息可以由其它視圖使用。我們提出僅支持一個MPEG-4AVC可兼容的視圖，這是由于如果存在多個MPEG-4AVC可兼容的視圖，這就使得難于為每個這樣的片識別其屬于那一個視圖，并且非多視圖視頻編碼的解碼器可能容易混亂。通過將其限制到僅一個這樣的視圖，保證了非多視圖視頻編碼的解碼器將能夠正確地解碼視圖，并且根據(jù)視圖參數(shù)組利用語法avc-compatib1e_view—id,多視圖一見頻編碼的解碼器可以易于識別這樣的視圖。利用is_base—flag可以識別所有的(非MPEG-4AVC可兼容的)其它基本視圖。提出一種用于多視圖視頻編碼片的新片首標(biāo)。為了支持視圖的可擴(kuò)展性、視圖隨機(jī)存取等，我們需要了解當(dāng)前的片依賴于那些視圖。為了視圖合成和視圖內(nèi)插，我們可能還需要攝像機(jī)參數(shù)。這一信息出現(xiàn)在視圖參數(shù)組中，如在以上表l中顯示。利用view_parameter-set-id識別視圖參數(shù)組。我們才是出將view—parameter-set-id添加到所有非MPEG-4AVC可兼容的片的片首標(biāo)中，如表3所示(片首標(biāo)語法)。需要view-id信息用于幾種多視圖視頻編碼需求，包含視圖內(nèi)插/合成、視圖隨機(jī)存取、并行處理等。這一信息還可以用于僅與交叉視圖預(yù)測相關(guān)的特殊編碼模式。為了根據(jù)用于這一視圖的視圖參數(shù)組找到對應(yīng)的參數(shù)，我們需要在片首標(biāo)中傳送view-id。表3<table>tableseeoriginaldocumentpage18</column></row><table>對于新多視圖視頻編碼片，我們提出對于每個片類型(瞬時解碼刷新(IDR)和非IDR)建立新NAL單元類型。我們提出使用用于IDR片的類型22和用于非IDR片的類型23,如在表2中所示。view—parameter—set-id指定4吏用的S見圖參凄t纟且。view—parameter—set—id的值應(yīng)當(dāng)在0到255的范圍內(nèi)。view_id指示當(dāng)前一見圖的4見圖id。view—parameter—set—id的4直應(yīng)當(dāng)在0到255的范圍內(nèi)。現(xiàn)在按照本發(fā)明原理的一實(shí)施例，說明視圖隨機(jī)存取的實(shí)例。視圖隨機(jī)存取是多視圖視頻編碼要求。目標(biāo)是以最小解碼工作量進(jìn)行對任何視圖的存取。讓我們考慮用于圖3所示的預(yù)測結(jié)構(gòu)的視圖隨機(jī)存取的一個實(shí)例。假設(shè)用戶要求解碼視圖S3。從圖3我們可以看出，這一視圖依賴于視圖S0、S2和S4。下面描述視圖參數(shù)組的一個實(shí)例。我們假設(shè)在片首標(biāo)語法中將用于多個視圖的view-id陸續(xù)地從O到7編號，僅出現(xiàn)一個視圖參數(shù)組view-parameter—set等于0。number—of—views—minus—1i殳定5'J7。avc一compatible一view—id可pVU殳定5'J0。對于視圖SO，將is—base-view—flag設(shè)定到1,并對于其它的視圖設(shè)定到0。查看對于SO、Sl、S2、S3和S4的依賴性映射表如在表4A(用于S0的依賴'〖生映射表anchor—picture一dependency.一map)禾口表4B(用于SO的依賴'f生映射表non—anchor-picture一dependency-map)中所顯示的?？梢园聪嗨频姆绞綄懗鲇糜谄渌晥D的依賴性映射表。一旦這一個表在解碼器是可用的，解碼器可以易于確定解碼特定的視圖是否需要其接收的片。解碼器僅需要分析片首標(biāo)以確定當(dāng)前片的view-id,和對于目標(biāo)視圖S3，其可以查看在兩個表(表4A和4B)中的S3列，以確定是否應(yīng)當(dāng)保持當(dāng)前的片。解碼器需要在錨畫面和非錨畫面之間進(jìn)行辨別，這是由于它們可能具有不同的依賴性，如從表4A和4B可以看出的。對于目標(biāo)視圖S3,我們需要將視圖S0、S2和S4的錨畫面解碼，但是僅需要將視圖S2和S4的非一瞄畫面解碼。'<table>tableseeoriginaldocumentpage19</column></row><table>.01010000S300000000S400010100轉(zhuǎn)向圖4，由標(biāo)號400概括地指示用于解碼多視圖視頻內(nèi)容中的多個視圖的示范性的方法。方法400包含開始塊405,其向功能塊410傳遞控制。功能塊410讀出一用于編碼參數(shù)(該參數(shù)用于編碼多個視圖)的配置文件和向功能塊415傳遞控制。該功能塊設(shè)定N等于需編碼的視圖的數(shù)目，并向功能塊420傳遞控制。功能塊420將number—of—view—minus-l設(shè)定等于N-l，設(shè)定avc—compatible—view—id等于MPEG-4AVC可兼容的視圖的view—id,向功能塊"5傳遞控制。功能塊425設(shè)定view—parameter-set-id等于一有效的整數(shù)，將變量i初始化等于0，并向判定塊430傳遞控制。判定塊430確定i是否大于N。如果為是，則將向判定塊435控制傳遞。否則，向功能塊470傳遞控制。判定塊435確定當(dāng)前的視圖是否是基本視圖。如果為是，則向功能塊440傳遞控制。否則，向功能塊480傳遞控制。功能塊440將is-base-view—flag[i]設(shè)定等于1，并向判定塊445傳遞控制。判定塊445確定是否正在更新依賴性。如果為是，則向功能塊450傳遞控制。否則，向功能塊485傳遞控制。功能塊450將d印endency-update-flag設(shè)定等于1，并向功能塊455傳遞控制。功能塊455將變量j設(shè)定等于0，并向判定塊460傳遞控制。判定塊460確定j是否小于N。如果為是，則向功能塊465傳遞控制。否則，向功能塊487傳遞控制。功能塊4651夸anchor—picture—dependency—maps[i][j]和non—anchor-picture—dependency—maps[i][j]i殳定為由酉己置文"f牛指示的《直，并向功能塊467傳遞控制。功能塊467將變量j遞增1，并向判定塊460返回控制。當(dāng)出3見才i/fl4幾參凄t時，功能塊470將camera-parameter-present-flagi殳定等于1,否則4夸camera—parameter—present—flagi殳定等于0，并向判定塊472傳遞4空制。判定塊472確定camera-parameter-present-flag是否等于l。如果為是，則向功能塊432傳遞控制。否則，向功能塊434傳遞控制。功能塊432寫入攝像機(jī)參數(shù)，并向功能塊434傳遞控制。功能塊434寫入視圖參數(shù)組(VPS)或序列參數(shù)組(SPS)，并向終止塊499傳遞控制。功能塊480將is_base—view-flag[i]設(shè)定等于0，并向判定塊445傳遞控制。功能塊485將dependency_update-flag設(shè)定等于0,并向功能塊487傳遞控制。功能塊487將變量i遞增l，并向判定塊判定塊430返回控制。轉(zhuǎn)向圖5，由標(biāo)號500概括地指示用于解碼多視圖視頻內(nèi)容中的多個視圖的示范性的方法。方法500包含開始塊505，其向功能塊510傳遞控制。功能塊510分析序列參凄t組(SPS)或#見圖參數(shù)組(VPS)、view—parameter—set-id、number—of-view—minus_l、avc—compatible—view—id,將變量i和j設(shè)定等于0，將N設(shè)定等于number—of—view-minus-l，并向判定塊515傳遞控制。判定塊515確定i是否小于或等于N。如果為是，則將向功能塊570控制傳遞。否則，向功能塊525傳遞控制。功能塊570分片斤camera-parameter—present—flag,并向判定塊572傳遞4空制。判定塊572確定camera—parameter—present—flag是否等于1。如果為是，則將向功能塊574控制傳遞。否則，向功能塊576傳遞控制。功能塊574分析攝像機(jī)參數(shù)，并向功能塊576傳遞控制。功能塊576繼續(xù)解碼，并向終止塊599傳遞控制。功能塊525.分才斤is_base_view—flag[i]和dependency—update—flag,并向判定塊530傳遞控制。判定塊530確定d印endency—叩date-flag是否等于0。如果為是，則將向功能塊532控制傳遞。否則，向判定塊535傳遞控制。功能塊532將i遞增1,并向判定塊515返回控制。判定塊535確定j是否小于或等于N。如果為是，則將向功能塊540控制傳遞。否則，向功能塊537傳遞控制。功負(fù)fe塊540分析anchor-picture—dependency—maps[i][j]，并向判定塊545返回4空制。判定i夾545確定non_anchor_picture—dependency—maps[i][j]是否等于1。如果為是，則將向功能塊550控制傳遞。否則，向功能塊547傳遞控制。功能塊550分才斤non—anchor—picture—dependency—maps[i][j]并向功能塊547傳遞控制。功能塊547將j遞增1，并向判定塊535返回控制。功能塊537將i遞增1，并向功能塊515返回控制?，F(xiàn)在將說明本發(fā)明的很多附帶優(yōu)點(diǎn)和特征中的某些優(yōu)點(diǎn)和特征，它們中的某一些上面已經(jīng)提到。例如，一個優(yōu)點(diǎn)和特征是該裝置包含一用于將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼成為結(jié)果的位流的編碼器，其中將該結(jié)果的位流編碼以包含視圖特定信息。視圖特定信息指示至少兩個視圖中的至少某些視圖之間的解碼相依性。另一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中該解碼相依性使得至少兩個視圖中的至少一個視圖對應(yīng)的解碼能夠僅利用用于該對應(yīng)的解碼的至少兩個視圖的子組。再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中通過略去與在至少兩個視圖中相對于至少一個視圖作為非相依指示的任何其它視圖相關(guān)的片，將在視圖特定信息中指示的該解碼相依性用于隨機(jī)存取至少兩個視圖中的至少一個視圖。再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中視圖特定信息包含在高級語法中。再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中視圖特定信息包含在服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會(IS0/IEC)動畫專家組-4(MPEG-4)部分10高級視頻編碼(AVC)標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段(ITU-T)H.264推薦標(biāo)準(zhǔn)的參數(shù)組中。再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中視圖特定信息包含在視圖參數(shù)組中。再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中視圖特定信息包含在視圖參數(shù)組中，其中將視圖參數(shù)組指定為僅專用于視圖參數(shù)組的NAL單元類型。再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中將如上所述的視圖參數(shù)組指定為僅專用于^見圖參數(shù)組的NAL單元類型，其中NAL單元類型是14。此外，一個附加的優(yōu)點(diǎn)和特征是該裝置具有該編碼器，其中該視圖特定信息包含至少一個語法要素，用于指示如上所述的視圖參數(shù)組id。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中該視圖特定信息包含至少一個語法要素用于指示如上所述的視圖參數(shù)組id，其中該至少一個語法要素由view—parameter—set一idi吾法要素表示。jt匕夕卜，再——個4尤,泉和4爭征是^亥裝置具有如上所述的編碼器，其中該視圖特定信息包含至少一個語法要素用于指示視圖的數(shù)目。另外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，該視圖特定信息如上所述包含至少一個語法要素用于指示視圖的數(shù)目，其中it至少一個"i吾法要素由number—of-view-minus—1i吾法要素表示。另夕卜，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中當(dāng)至少兩個視圖中的一個特定視圖編碼成為位流時，該視圖特定信息包含用于指示用于至少兩個視圖中的該特定視圖id的至少一個語法要素，該位流服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會(IS0/IEC)動畫專家組-4(MPEG-4)部分10高級視頻編碼(AVC)標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段(ITU-T)H.264推薦標(biāo)準(zhǔn)。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中該視圖特定信息包含用于指示一如上所述用于至少兩個視圖中的至少一個特定視圖id的至少一個語法要素，其中至少一個語法要素由avc—compatible—view-id語法要素表示。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中該視圖特定信息包含至少一個語法要素或是根據(jù)高級語法隱含地導(dǎo)出的，至少一個語法要素和高級用于語法指示至少兩個視圖中的一個特定視圖，該語法服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會(IS0/IEC)動畫專家組-4(MPEG-4)部分10高級視頻編碼(AVC)標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段(ITU-T)H.264推薦標(biāo)準(zhǔn)。另外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中該視圖特定信息包含至少一個語法要素或是如上所述根據(jù)高級語法隱含地導(dǎo)出的，其中至少——個^吾法要素由is—base-view—flagi吾法要素表示。jt匕夕卜，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中該視圖特定信息包含至少一個語法要素，用于指示用于至少兩個視圖中的至少一個^f見圖的信息是否出現(xiàn)在結(jié)果的位流中。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中該視圖特定信息包含至少一個語法要素。用于指示一如上所述用于至少兩個視圖中的至少一個視圖的依賴性信息是否出現(xiàn)在結(jié)果的位流中，其中至少——個^吾'法要素由dependency-update-flagi吾'法要素表示。^匕外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中該視圖特定信息包含至少一個語法要素。用于指示至少兩個視圖中當(dāng)前的一個視圖中的至少一個錨畫面是否用于解碼至少兩個視圖中的任何其它視圖。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中該視圖特定信息包含至少一個語法要素，用于指示至少兩個視圖中當(dāng)前的一個視圖中的至少一個錨畫面是否如上所述用于解碼至少兩個視圖中的任何其它視圖，其中至少一個語法要素由anchor—picture-dependancy—maps[i][j]i吾法要素表示。jt匕夕卜，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中該視圖特定信息包含至少一個語法要素，用于指示至少兩個視圖中當(dāng)前的一個視圖中的至少一個非錨畫面是否用于解碼至少兩個視圖中的任何其它視圖。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中該視圖特定信息包含至少一個語法要素，用于指示至少兩個視圖中當(dāng)前的一個視圖中的至少一個非錨畫面是否如上所述用于解碼至少兩個視圖中的任何其它視圖，其中至少一個語法要素由non-anchor-picture一dependancy-maps[i][j]i吾法要素表示。jt匕外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中將該結(jié)果的位流編碼以包含至少一個語法要素，該語法要素與用于至少兩個視圖中的至少一個視圖的至少一個攝像機(jī)參數(shù)相關(guān)。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中將該結(jié)果的位流編碼以包含至少一個語法要素，該語法要素與用于至少兩個視圖中的至少一個視圖的至少一個攝像機(jī)參數(shù)相關(guān)，其中至少一個語法包含在對應(yīng)于該結(jié)果的位流的參數(shù)組中。此外，再一個優(yōu)點(diǎn)和特征是該裝置包含編碼器，用于通過將至少兩個視圖中于其解碼獨(dú)立于至少兩個視圖中的任何其它視圖的任一視圖定義作為基本視圖，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼。此外，再一個優(yōu)點(diǎn)和特征是該裝置包含編碼器，用于通過將至少兩個視圖中的至少一個視圖編碼在結(jié)果的位流中，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼，為了與其的向后兼容性，該結(jié)果的位流的語法服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會(IS0/IEC)動畫專家組-4(MPEG-4)部分10高級^f見頻編碼(AVC)標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段(ITU-T)H.264推薦標(biāo)準(zhǔn)。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中至少一個視圖是于其解碼獨(dú)立于至少兩個視圖中任何其它視圖的基本視圖。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中avc—compatible-view_id語法要素識別在結(jié)果的位流中編碼的至少一個視圖，該語法服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會(IS0/IEC)動畫專家組-4(MPEG-4)部分IO高級視頻編碼(AVC)標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段(ITU-T)H.264推薦標(biāo)準(zhǔn)，用于向后兼容。此外，再一個優(yōu)點(diǎn)和特征是該裝置包含編碼器，用于通過在兩個預(yù)定義的片類型之間選擇其一，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中兩個預(yù)定義的片類型是瞬時解碼刷新片類型和非瞬時解碼刷新片類型。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有該編碼器，其在如上所述的瞬時解碼刷新片類型和非瞬時解碼刷新片類型之間選擇，其中NAL單元類型22用于瞬時解碼刷新片類型和NAL單元類型23用于非瞬時解碼刷新片類型。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中用于至少兩個片中的至少一個片的片首標(biāo)包含視圖特定語法。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有該編碼器，其中用于至少兩個視圖中的至少一個視圖的片首標(biāo)包含如上所述的視圖特定語法，其中根據(jù)NAL單元類型23和NAL單元類型24調(diào)節(jié)(condition)視圖特定語法。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有該編碼器，其中用于至少兩個視圖中的至少一個視圖的片首標(biāo)包含如上所述的視圖特定語法，其中視圖特定語法包含視圖參數(shù)組識別符和視圖識別符。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有該編碼器，其中視圖特定語法包含如上所述的視圖參數(shù)組識別符和視圖識別符，其中視圖參數(shù)組識別符由view-parameter_set_id語法要素表示，和視圖識別符由view_id語法要素表示。此外，再一個優(yōu)點(diǎn)和特征是這樣一種裝置，其包含編碼器，用于將對應(yīng)于多視圖內(nèi)容的至少兩個視圖編碼成為結(jié)果的位流，其中將結(jié)果的位流編碼以包含對應(yīng)于的至少兩個視圖種的至少一個視圖的至少一個攝像機(jī)參數(shù)。此外，再一個優(yōu)點(diǎn)和特征是這樣一種裝置，其具有如上所述的編碼器，其中將結(jié)果的位流編碼以包含視圖參數(shù)組，和至少一個攝像機(jī)參數(shù)包含在視圖參數(shù)組中。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中由一語法要素指示至少一個攝像機(jī)參數(shù)的出現(xiàn)。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有該編碼器，其中如上所述由一語法要素指示至少一個攝像機(jī)參數(shù)的出J見，其中"i亥i吾'法要素是camera—parameter-present-flagi吾'法要素。jl匕夕卜，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中由camera—parameteri吾法要素表示至少一個才i/f象才幾參l^:。此外，再一個優(yōu)點(diǎn)和特征是這樣一種裝置，其包含編碼器，用于將對應(yīng)于多視圖內(nèi)容的至少兩個視圖編碼成為結(jié)果的位流，其中將結(jié)果的位流編碼以包含與用于至少兩個視圖中的至少一個視圖的至少一個攝像機(jī)參數(shù)相關(guān)的至少一個語法要素。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中至少一個語法是高級語法要素。此外，再一個優(yōu)點(diǎn)和特征是該裝置具有如上所述的編碼器，其中至少一個語法包含在對應(yīng)于結(jié)果的位流的參數(shù)組中。才艮據(jù)這里的論述，本發(fā)明原理的這些和其它特征和優(yōu)點(diǎn)可以易于由所屬
技術(shù)領(lǐng)域：
的普通技術(shù)人員查明。應(yīng)理解，本發(fā)明的論述可以以各種形式的硬件、軟件、固件、專用處理器或它們的組合來實(shí)施。按最優(yōu)選的方式，按照硬件和軟件的組合實(shí)施本發(fā)明原理。此外，可以按照在程序存儲單元上確實(shí)體現(xiàn)的應(yīng)用程序來實(shí)施軟件。應(yīng)用程序可以下載到一包含適當(dāng)結(jié)構(gòu)的機(jī)器并由其執(zhí)行。最好，在具有硬件例如一個或多個中央處理單元("CPU，，)、隨機(jī)存取存儲器("RAM")和輸入/輸出接口的計算機(jī)平臺上實(shí)施該機(jī)器。計算機(jī)平臺還可以包含操作系統(tǒng)和微指令代碼。這里所述的各種處理和功能可以是可以由CPU執(zhí)行的、部分微指令代碼或部分應(yīng)用程序或它們的任意組合。此外，可以將各種其它外圍單元連接到計算機(jī)平臺例如附加的數(shù)據(jù)存儲裝置和打印裝置。還應(yīng)理解，因?yàn)楦綀D中的某些系統(tǒng)組成部分和方法以軟件的方式實(shí)施，系統(tǒng)組成部或處理功能塊之間的實(shí)際的連接可以不同，其依賴于將本發(fā)明原理編程的方式。這里提供的論述，所屬
技術(shù)領(lǐng)域：
的普通技術(shù)人員能夠規(guī)劃這些或類似的實(shí)施方案或本發(fā)明原理的配置。雖然，這里參照附圖已經(jīng)說明各描述性的實(shí)施例，應(yīng)當(dāng)理解本發(fā)明原理并不局限于那些實(shí)施例，所屬
技術(shù)領(lǐng)域：
的普通技術(shù)人員在不脫離本發(fā)明原理的構(gòu)思和范圍的情況下，可以進(jìn)行各種改變和改進(jìn)。所有這些改變和改進(jìn)包含在在所提出的權(quán)利要求所述的本發(fā)明原理的范圍內(nèi)。權(quán)利要求1.一種裝置，包含編碼器(100)，用于通過將至少兩個視圖中的對于其解碼獨(dú)立于該至少兩個視圖中的任何其它視圖的任一視圖定義作為基本視圖，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼。2.—種方法，包含通過將至少兩個視圖中的對于其解碼獨(dú)立于該至少兩個視圖中的任何其它視圖的任一視圖定義作為基本視圖，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼(440)。3.—種裝置，包含解碼器(200)，用于將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖解碼，其中該解碼器確定至少兩個視圖中的哪一個視圖——如果有的話——是對于其解碼獨(dú)立于該至少兩個視圖中的任何其它視圖的基本視圖。4.一種方法，包含將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖解碼，其中該解碼步驟確定至少兩個視圖中的哪一個視圖——如果有的話——是對于其解碼獨(dú)立于該至少兩個視圖中的任何其它視圖的基本視圖(525)。5.—種用于視頻編碼的視頻信號結(jié)構(gòu)，包含對應(yīng)于通過將至少兩個視圖中的對于其解碼獨(dú)立于該至少兩個^L圖中的任何其它視圖的任一視圖定義作為基本視圖而編碼的多視圖視頻內(nèi)容的至少兩個碎見圖。6.—種其上編碼有視頻信號數(shù)據(jù)的存儲介質(zhì)，包含對應(yīng)于通過將至少兩個視圖中的對于其解碼獨(dú)立于該至少兩個^見圖中的任何其它視圖的任一視圖定義作為基本視圖而編碼的多視圖視頻內(nèi)容的至少兩個纟見圖。7.—種裝置，包含編碼器(100)，用于通過將至少兩個視圖中的至少一個視圖編碼在結(jié)果的位流中，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼，為了與其的向后兼容性，該結(jié)果的位流的語法服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會動畫專家組-4部分10高級視頻編碼標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段H.264推薦標(biāo)準(zhǔn)。8.根據(jù)權(quán)利要求7所述的裝置，其中所述至少一個視圖為對于其解碼獨(dú)立于該至少兩個視圖中的任何其它視圖的基本視圖。9.根據(jù)權(quán)利要求7所述的裝置，其中avc_compatible_view—id語法要素識別所述至少一個視圖被編碼到結(jié)果的位流中，為了向后兼容性，該結(jié)果的位流的語法服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會動畫專家組-4部分10高級視頻編碼標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段H.264推薦標(biāo)準(zhǔn)。10.—種方法，包含通過將至少兩個視圖中的至少一個視圖編碼在結(jié)果的位流中，將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼，為了與其的向后兼容性，該結(jié)果的位流的語法服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會動畫專家組-4部分10高級^L頻編碼標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段H.264推薦標(biāo)準(zhǔn)(420)。11.據(jù)權(quán)利要求10的方法，其中所述至少一個視圖為對于其解碼獨(dú)立于該至少兩個視圖中的任何其它視圖的基本視圖(440)。12.才艮據(jù)權(quán)利要求10所述的方法，其中avc-compatible—view—id語法要素識別所述至少一個視圖被編碼到結(jié)果的位流中，為了向后兼容性，該結(jié)果的位流的語法服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會動畫專家組-4部分10高級視頻編碼標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段(ITU-T)H.264推薦標(biāo)準(zhǔn)(420)。13.—種裝置，包含解碼器(200),用于將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖解碼，其中至少兩個視圖中的至少一個視圖被包含在位流中，為了與其的向后兼容性，該位流的語法服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會動畫專家組-4部分10高級視頻編碼標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段H.264推薦標(biāo)準(zhǔn)。14.根據(jù)權(quán)利要求13所述的裝置，其中所述至少一個視圖為對于其解碼獨(dú)立于該至少兩個視圖中的任何其它視圖的基本視圖。15.才艮據(jù)權(quán)利要求13所述的裝置，其中avc一畫patible一view一id語法要素識別所述至少一個視圖被包含在位流中，為了向后兼容性，該位流服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會動畫專家組-4部分10高級視頻編碼標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段H.264推薦標(biāo)準(zhǔn)。16.—種方法，包含將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖解碼，其中至少兩個視圖中的至少一個視圖被包含在位流中，為了與其的向后兼容性，該位流服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會動畫專家組-4部分10高級視頻編碼標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段H.264推薦標(biāo)準(zhǔn)(510)。17.才艮據(jù)權(quán)利要求16所述的方法，其中所述至少一個視圖為對于其解碼獨(dú)立于該至少兩個視圖中的任何其它視圖的基本視圖(525)。18.才艮據(jù)權(quán)利要求17所述的裝置，其中avc_compatible—view_id語法要素識別所述至少一個視圖被包含在位流中，為了向后兼容性，該位流服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會動畫專家組-4部分10高級視頻編碼標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段H.264推薦標(biāo)準(zhǔn)(510)。19.一種用于視頻編碼的視頻信號結(jié)構(gòu)，包含對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖解碼，其中至少兩個視圖中的至少一個視圖被編碼在位流中，為了與其的向后兼容性，該位流服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會動畫專家組-4部分10高級視頻編碼標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段H.264推薦標(biāo)準(zhǔn)。20.—種其上編碼有視頻信號數(shù)據(jù)的存儲介質(zhì)，包含對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖解碼，其中至少兩個視圖中的至少一個^L圖被編碼在位流中，為了與其的向后兼容性，該位流服從國際標(biāo)準(zhǔn)化組織/國際電子技術(shù)委員會動畫專家組-4部分10高級視頻編碼標(biāo)準(zhǔn)/國際通信聯(lián)盟-通信段H.264推薦標(biāo)準(zhǔn)。全文摘要提供在多視圖視頻編碼系統(tǒng)使用的方法和裝置。該裝置包含編碼器(100)，用于將對應(yīng)于多視圖視頻內(nèi)容的至少兩個視圖編碼成為結(jié)果的位流，其中將該結(jié)果的位流編碼以包含視圖特定信息，該視圖特定信息指示至少兩個視圖中的至少某些視圖之間的解碼相依性。文檔編號H04N7/26GK101416518SQ200780011959公開日2009年4月22日申請日期2007年2月27日優(yōu)先權(quán)日2006年3月29日發(fā)明者克里斯蒂娜·戈米拉,吉爾·M·博伊斯,澎尹,珀文·B·潘迪特,蘇野平申請人:湯姆森特許公司