專利名稱：多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置及多視點(diǎn)運(yùn)動(dòng)圖像解碼方法
技術(shù)領(lǐng)域：
本發(fā)明涉及解碼為了立體視而將多個(gè)視點(diǎn)的運(yùn)動(dòng)圖像信息編碼而成的運(yùn)動(dòng)圖像流的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置，特別涉及解碼將1個(gè)視點(diǎn)的運(yùn)動(dòng)圖像信息參照別的視點(diǎn)的運(yùn)動(dòng)圖像信息編碼而成的運(yùn)動(dòng)圖像流的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置。
背景技術(shù)：
作為將運(yùn)動(dòng)圖像信息壓縮編碼的技術(shù)之一，已知有按照MPEG(M0ving Picture Experts Group)標(biāo)準(zhǔn)編碼的技術(shù)。近年來，作為普及的主要的MPEG標(biāo)準(zhǔn)，已知有MPEG2、 MPEG4 及 MPEG4 AVC 等。這些壓縮技術(shù)的主要特征是將編碼對(duì)象的圖片(以下稱作編碼對(duì)象圖片)與已經(jīng)被編碼并被重構(gòu)的圖片(以下稱作參照?qǐng)D片)之差編碼。具體而言，對(duì)編碼對(duì)象圖片與參照?qǐng)D片之差進(jìn)行離散余弦變換(DCT=Discrete Cosine Transform)和量化，對(duì)量化的結(jié)果進(jìn)行可變長(zhǎng)度編碼。以下，說明對(duì)以上述壓縮編碼技術(shù)編碼的圖像數(shù)據(jù)進(jìn)行解碼的情況。例如，以 MPEG2編碼的圖像數(shù)據(jù)由I圖片、P圖片、B圖片這3種圖片構(gòu)成。I圖片是不參照其他圖片而編碼的圖片。因而，在將I圖片解碼時(shí)，能夠以I圖片
單體解碼。P圖片是參照過去的I圖片或P圖片并使用與參照的圖片之差來編碼的圖片。因而，在將P圖片解碼時(shí)，由于參照過去的I圖片或P圖片解碼，所以需要將參照的I圖片或 P圖片預(yù)先解碼。B圖片是參照過去的I圖片或P圖片和未來的I圖片或P圖片并使用與參照的圖片之差來編碼的圖片。因而，在將B圖片解碼時(shí)，由于參照前后的I圖片或P圖片解碼，所以需要將參照的前后的I圖片或P圖片預(yù)先解碼。此外，近年來，已知將從多個(gè)視點(diǎn)分別拍攝的運(yùn)動(dòng)圖像數(shù)據(jù)(多個(gè)通道的運(yùn)動(dòng)圖像數(shù)據(jù))基于H.264/MVC標(biāo)準(zhǔn)編碼的技術(shù)。在H. ^4/MVC標(biāo)準(zhǔn)中，利用多個(gè)運(yùn)動(dòng)圖像數(shù)據(jù)間的相關(guān)關(guān)系提高壓縮率。即，多個(gè)運(yùn)動(dòng)圖像數(shù)據(jù)是通過從多個(gè)視點(diǎn)拍攝被攝體而得到的數(shù)據(jù)，所以具有相互類似的特征。利用該特征，在H. ^4/MVC標(biāo)準(zhǔn)中，參照其他通道的運(yùn)動(dòng)圖像數(shù)據(jù)，將1個(gè)通道的運(yùn)動(dòng)圖像數(shù)據(jù)編碼。H. ^4/MVC標(biāo)準(zhǔn)例如在將視聽者能夠立體地感知的三維影像編碼時(shí)使用。另外，由于在多個(gè)通道的運(yùn)動(dòng)圖像數(shù)據(jù)間有參照關(guān)系，所以可以想到，在被從其他運(yùn)動(dòng)圖像數(shù)據(jù)參照的運(yùn)動(dòng)圖像數(shù)據(jù)發(fā)生了錯(cuò)誤的情況下，不能取得正確的參照?qǐng)D像，不能生成正確的解碼圖像。在此情況下，解碼圖像紊亂。特別是，在由多個(gè)通道構(gòu)成的多視點(diǎn)運(yùn)動(dòng)圖像的情況下，因解碼圖像的紊亂而顯示存在別扭感的三維影像。在專利文獻(xiàn)1中，公開了在發(fā)生錯(cuò)誤的情況下將錯(cuò)誤修復(fù)的數(shù)據(jù)解碼裝置。專利文獻(xiàn)1中公開的數(shù)據(jù)解碼裝置在輸入的編碼數(shù)據(jù)中檢測(cè)到錯(cuò)誤的情況下，利用第1修復(fù)機(jī)構(gòu)及第2修復(fù)機(jī)構(gòu)中的某一個(gè)修復(fù)錯(cuò)誤，該第1修復(fù)機(jī)構(gòu)使用與檢測(cè)到錯(cuò)誤的通道相同通道的數(shù)據(jù)修復(fù)錯(cuò)誤，該第2修復(fù)機(jī)構(gòu)使用與檢測(cè)到錯(cuò)誤的通道不同的通道的數(shù)據(jù)修復(fù)錯(cuò)誤。在專利文獻(xiàn)2中也同樣，公開了在發(fā)生了錯(cuò)誤的情況下修復(fù)錯(cuò)誤的立體運(yùn)動(dòng)圖像再生裝置。專利文獻(xiàn)2中公開的立體運(yùn)動(dòng)圖像再生裝置在圖像數(shù)據(jù)中檢測(cè)到錯(cuò)誤時(shí)，以圖像單位用其他通道的圖像數(shù)據(jù)替代錯(cuò)誤圖像數(shù)據(jù)來進(jìn)行填補(bǔ)。專利文獻(xiàn)1及專利文獻(xiàn)2中公開的這些技術(shù)是MPEG等編碼技術(shù)的特征之一，是利用在今后的解碼處理時(shí)有可能被參照的圖像，置換發(fā)生了錯(cuò)誤的圖像即錯(cuò)誤圖像的錯(cuò)誤修復(fù)技術(shù)。先行技術(shù)文獻(xiàn)專利文獻(xiàn)專利文獻(xiàn)1 特許第3992533號(hào)公報(bào)專利文獻(xiàn)2 特許第3332575號(hào)公報(bào)發(fā)明概要發(fā)明要解決的課題但是，在上述現(xiàn)有技術(shù)中，存在以下課題，S卩不能充分地抑制在發(fā)生了錯(cuò)誤的情況下發(fā)生的解碼圖像的紊亂。如上述那樣，在專利文獻(xiàn)1及專利文獻(xiàn)2所記載的技術(shù)中，在檢測(cè)到錯(cuò)誤的情況下，使用已經(jīng)解碼的圖像數(shù)據(jù)修復(fù)錯(cuò)誤。但是，將已經(jīng)解碼的圖像數(shù)據(jù)作為置換錯(cuò)誤的圖像并不一定總是最適合的。例如，在由左眼用圖像和右眼用圖像構(gòu)成的三維圖像中，作為與左眼用圖像的相關(guān)，有時(shí)與之前或之后的左眼用圖像相比，相同時(shí)刻的右眼用圖像更高。在此情況下，在左眼用圖像中發(fā)生了錯(cuò)誤的情況下，為了修復(fù)錯(cuò)誤而優(yōu)選使用右眼用圖像。但是，在同一時(shí)刻的右眼用圖像在左眼用圖像之后被解碼的情況下，不能在修復(fù)錯(cuò)誤中使用右眼用圖像。如以上那樣，在上述現(xiàn)有技術(shù)中，不能選擇更適合于修復(fù)錯(cuò)誤的圖像，不能充分地抑制解碼圖像的紊亂。

發(fā)明內(nèi)容
所以，本發(fā)明是為了解決上述現(xiàn)有課題而做出的，目的是提供一種即使在發(fā)生了錯(cuò)誤的情況下也能夠充分地抑制解碼圖像的紊亂的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置及多視點(diǎn)運(yùn)動(dòng)圖像解碼方法。用于解決課題的手段為了解決上述課題，本發(fā)明的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置將包含被編碼的第1視點(diǎn)的第1運(yùn)動(dòng)圖像信息、以及與上述第1視點(diǎn)不同的第2視點(diǎn)的被編碼的第2運(yùn)動(dòng)圖像信息的運(yùn)動(dòng)圖像流解碼，具備解碼部，將上述運(yùn)動(dòng)圖像流解碼；錯(cuò)誤檢測(cè)部，從上述運(yùn)動(dòng)圖像流中檢測(cè)錯(cuò)誤；以及錯(cuò)誤修復(fù)部，將由上述錯(cuò)誤檢測(cè)部檢測(cè)到的錯(cuò)誤修復(fù)；上述錯(cuò)誤修復(fù)部具備解碼控制部，在由上述錯(cuò)誤檢測(cè)部在包含于上述第1運(yùn)動(dòng)圖像信息中的第1編碼圖像信息中檢測(cè)到錯(cuò)誤的情況下，控制上述解碼部，以使其將預(yù)定比上述第1編碼圖像信息靠后解碼的、包含在上述第2運(yùn)動(dòng)圖像信息中的第2編碼圖像信息解碼；以及修復(fù)處理部， 使用上述解碼部通過將上述第2編碼圖像信息解碼而生成的解碼圖像信息，將由上述錯(cuò)誤檢測(cè)部檢測(cè)到的錯(cuò)誤修復(fù)。由此，使用按照通常的解碼順序未解碼的解碼圖像信息來修復(fù)錯(cuò)誤，所以能夠選擇更適當(dāng)?shù)膱D像信息，能夠充分地抑制解碼圖像的紊亂。此外，也可以是，上述第2運(yùn)動(dòng)圖像信息被參照上述第1運(yùn)動(dòng)圖像信息編碼；上述錯(cuò)誤修復(fù)部還具備判定部，在上述第1編碼圖像信息中檢測(cè)到錯(cuò)誤的情況下，該判定部判定上述第2編碼圖像信息是否是幀內(nèi)圖像、或者是否需要視差補(bǔ)償處理；上述解碼控制部在由上述判定部判定為上述第2編碼圖像信息是幀內(nèi)圖像、或者不需要視差補(bǔ)償處理的情況下，控制上述解碼部，以使上述解碼部將上述第2編碼圖像信息解碼。由此，不會(huì)參照發(fā)生了錯(cuò)誤的第1編碼圖像信息將第2編碼圖像信息解碼，所以能夠?qū)⒌?編碼圖像信息正確地解碼，能夠選擇更適當(dāng)?shù)膱D像信息。此外，也可以是，上述修復(fù)處理部用作為由上述解碼部解碼上述第2編碼圖像信息而生成的解碼圖像信息的第1修復(fù)圖像信息，置換上述第1編碼圖像信息的解碼結(jié)果。此外，也可以是，上述第2編碼圖像信息是在與上述第1編碼圖像信息相同的時(shí)刻顯示的圖像信息。由此，由于相同時(shí)刻的圖像信息的相關(guān)較高，所以能夠利用相關(guān)較高的圖像信息修復(fù)錯(cuò)誤。此外，也可以是，上述修復(fù)處理部在由上述判定部判定為上述第2編碼圖像信息不是幀內(nèi)圖像、或者需要視差補(bǔ)償處理的情況下，用作為在上述第1編碼圖像信息之前由上述解碼部解碼上述第1運(yùn)動(dòng)圖像信息而生成的解碼圖像信息的第2修復(fù)圖像信息，置換上述第1編碼圖像信息的解碼結(jié)果。由此，即使在參照發(fā)生了錯(cuò)誤的第1編碼圖像信息將第2編碼圖像信息解碼的情況下，也能夠用修復(fù)圖像信息置換第1編碼圖像信息的解碼結(jié)果從而修復(fù)錯(cuò)誤。此外，也可以是，上述解碼控制部在由上述判定部判定為上述第2編碼圖像信息不是幀內(nèi)圖像、或者需要視差補(bǔ)償處理的情況下，控制上述解碼部，以使在由上述修復(fù)處理部修復(fù)錯(cuò)誤后，上述解碼部將上述第2編碼圖像信息解碼；上述解碼部通過基于上述解碼控制部的控制將上述第2編碼圖像信息解碼，生成作為解碼圖像信息的第3修復(fù)圖像信息； 上述判定部還判定上述解碼部在生成上述第3修復(fù)圖像信息時(shí)是否參照了上述第2修復(fù)圖像信息；上述修復(fù)處理部在由上述判定部判定為沒有參照上述第2修復(fù)圖像信息的情況下，用上述第3修復(fù)圖像信息置換上述第2修復(fù)圖像信息。由此，能夠在將第2編碼圖像信息解碼后，再用第2編碼圖像信息的解碼結(jié)果置換用于修復(fù)發(fā)生了錯(cuò)誤的第1編碼圖像信息的第2修復(fù)圖像信息。由于第2編碼圖像信息與第1編碼圖像信息相關(guān)較高，所以能夠使用更適當(dāng)?shù)膱D像修復(fù)錯(cuò)誤。此外，也可以是，上述修復(fù)處理部使用上述解碼部解碼上述第2編碼圖像信息而生成的解碼圖像信息進(jìn)行運(yùn)動(dòng)補(bǔ)償處理，由此生成第4修復(fù)圖像信息，并用上述第4修復(fù)圖像信息置換上述第1編碼圖像信息的解碼結(jié)果。此外，也可以是，上述錯(cuò)誤修復(fù)部以比幀小的處理單位用規(guī)定的圖像信息置換發(fā)生了錯(cuò)誤的圖像信息，由此修復(fù)由上述錯(cuò)誤檢測(cè)部檢測(cè)到的錯(cuò)誤。由此，能夠盡量減少置換圖像信息的區(qū)域，所以能夠使錯(cuò)誤修復(fù)后的圖像成為別扭感較少的圖像。
7
另外，本發(fā)明不僅能夠作為多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置實(shí)現(xiàn)，還能夠作為以構(gòu)成該多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置的處理部為步驟的方法實(shí)現(xiàn)。此外，也可以作為使計(jì)算機(jī)執(zhí)行這些步驟的程序?qū)崿F(xiàn)。進(jìn)而，也可以作為記錄有該程序的計(jì)算機(jī)可讀取的⑶-R0M(CompaCt Disc-Read Only Memory)等記錄介質(zhì)、以及表示該程序的信息、數(shù)據(jù)或信號(hào)實(shí)現(xiàn)。并且，這些程序、信息、數(shù)據(jù)及信號(hào)也可以經(jīng)由因特網(wǎng)等通信網(wǎng)絡(luò)分發(fā)。此外，構(gòu)成上述各多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置的構(gòu)成要素的一部分或全部也可以由 1個(gè)系統(tǒng)LSI (Large Scale htegration 大規(guī)模集成電路)構(gòu)成。系統(tǒng)LSI是將多個(gè)構(gòu)成部集成在1個(gè)芯片上而制造的超多功能LSI，具體而言是包括微處理器、ROM及RAM (Random Access Memory)等而構(gòu)成的計(jì)算機(jī)系統(tǒng)。發(fā)明效果根據(jù)有關(guān)本發(fā)明的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置，即使在發(fā)生了錯(cuò)誤的情況下，也能夠提供可充分抑制解碼圖像的紊亂并減輕別扭感的圖像。


圖1是表示有關(guān)實(shí)施方式1的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置的結(jié)構(gòu)的一例的框圖。圖2是表示有關(guān)實(shí)施方式1的錯(cuò)誤圖像修復(fù)部的結(jié)構(gòu)的一例的框圖。圖3是表示由兩個(gè)通道的運(yùn)動(dòng)圖像信息構(gòu)成的運(yùn)動(dòng)圖像流的一例的圖。圖4是表示有關(guān)實(shí)施方式1的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置的動(dòng)作中的、發(fā)生了錯(cuò)誤的情況下的動(dòng)作的一例的流程圖。圖5A是表示沒有被從其他運(yùn)動(dòng)圖像信息參照的編碼圖片發(fā)生了錯(cuò)誤的情況下的處理的一例的示意圖。圖5B是表示被從其他運(yùn)動(dòng)圖像信息參照的編碼圖片發(fā)生了錯(cuò)誤的情況下的處理的一例的示意圖。圖6是表示有關(guān)實(shí)施方式2的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置的動(dòng)作中的、發(fā)生了錯(cuò)誤的情況下的動(dòng)作的一例的流程圖。圖7是表示具備有關(guān)本發(fā)明的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置的數(shù)字電視機(jī)及數(shù)字視頻記錄器的一例的外觀圖。
具體實(shí)施例方式以下，使用附圖對(duì)有關(guān)本發(fā)明的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置及多視點(diǎn)運(yùn)動(dòng)圖像解碼方法的實(shí)施方式詳細(xì)地說明。(實(shí)施方式1)有關(guān)實(shí)施方式1的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置，是將包含被編碼的第1視點(diǎn)的第1 運(yùn)動(dòng)圖像信息、以及參照該第1運(yùn)動(dòng)圖像信息被編碼的第2視點(diǎn)的第2運(yùn)動(dòng)圖像信息的運(yùn)動(dòng)圖像流解碼的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置，其特征在于，具備解碼部，將運(yùn)動(dòng)圖像流解碼； 錯(cuò)誤檢測(cè)部，從運(yùn)動(dòng)圖像流中檢測(cè)錯(cuò)誤；以及錯(cuò)誤修復(fù)部，將由錯(cuò)誤檢測(cè)部檢測(cè)到的錯(cuò)誤修復(fù)；錯(cuò)誤修復(fù)部具備解碼控制部，在由錯(cuò)誤檢測(cè)部在包含于第1運(yùn)動(dòng)圖像信息中的第1編碼圖像信息中檢測(cè)到錯(cuò)誤的情況下，控制解碼部，以使其將預(yù)定比第1編碼圖像信息靠后解碼的、包含在第2運(yùn)動(dòng)圖像信息中的第2編碼圖像信息解碼；以及修復(fù)處理部，使用解碼部通過將第2編碼圖像信息解碼而生成的解碼圖像信息，修復(fù)由錯(cuò)誤檢測(cè)部檢測(cè)到的錯(cuò)誤。圖1是表示有關(guān)實(shí)施方式1的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100的結(jié)構(gòu)的一例的框圖。多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100將包括分別對(duì)應(yīng)于多個(gè)視點(diǎn)的多個(gè)運(yùn)動(dòng)圖像信息的運(yùn)動(dòng)圖像流解碼。具體而言，多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100從記錄介質(zhì)200讀出運(yùn)動(dòng)圖像流，將所讀出的運(yùn)動(dòng)圖像流解碼，由此生成解碼圖像。所生成的解碼圖像向顯示部210輸出并顯示。多個(gè)運(yùn)動(dòng)圖像信息例如是將通過從相互不同的視點(diǎn)拍攝被攝體而得到的運(yùn)動(dòng)圖像基于規(guī)定的編碼標(biāo)準(zhǔn)編碼而生成的運(yùn)動(dòng)圖像信息。具體而言，多個(gè)運(yùn)動(dòng)圖像信息是第1 視點(diǎn)的第1運(yùn)動(dòng)圖像信息和第2視點(diǎn)的第2運(yùn)動(dòng)圖像信息。例如，第1運(yùn)動(dòng)圖像信息及第2 運(yùn)動(dòng)圖像信息對(duì)應(yīng)于構(gòu)成視聽者能夠立體地感知的三維影像的左眼用影像及右眼用影像。規(guī)定的編碼標(biāo)準(zhǔn)例如是H. 264/MVC標(biāo)準(zhǔn)。第2運(yùn)動(dòng)圖像信息被參照第1運(yùn)動(dòng)圖像信息編碼。即，包含在第2運(yùn)動(dòng)圖像信息中的多個(gè)編碼圖像信息中的至少1個(gè)被參照第1 運(yùn)動(dòng)圖像信息編碼。具體而言，第1運(yùn)動(dòng)圖像信息是基礎(chǔ)視野的運(yùn)動(dòng)圖像信息，第2運(yùn)動(dòng)圖像信息是從屬視野的運(yùn)動(dòng)圖像信息。所謂基礎(chǔ)視野的運(yùn)動(dòng)圖像信息，是不參照其他視點(diǎn)的運(yùn)動(dòng)圖像信息而單獨(dú)編碼的運(yùn)動(dòng)圖像信息，是在將其他視點(diǎn)的運(yùn)動(dòng)圖像信息編碼時(shí)參照的運(yùn)動(dòng)圖像信息。所謂從屬視野的運(yùn)動(dòng)圖像信息，是參照其他運(yùn)動(dòng)圖像信息編碼的運(yùn)動(dòng)圖像信息。以下，作為一例，說明運(yùn)動(dòng)圖像流包括相當(dāng)于左眼用影像的左眼用通道(Lch)的運(yùn)動(dòng)圖像信息、以及相當(dāng)于右眼用影像的右眼用通道(Rch)的運(yùn)動(dòng)圖像信息的情況。進(jìn)而， 設(shè)想Lch的運(yùn)動(dòng)圖像信息是基礎(chǔ)視野的運(yùn)動(dòng)圖像信息、Rch的運(yùn)動(dòng)圖像信息是從屬視野的運(yùn)動(dòng)圖像信息的情況。另外，也可以Lch的運(yùn)動(dòng)圖像信息是從屬視野、Rch的運(yùn)動(dòng)圖像信息是基礎(chǔ)視野。如圖1所示，多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100具備多路分離部110、解碼部120、錯(cuò)誤檢測(cè)部130、以及錯(cuò)誤圖像修復(fù)部140。多路分離部110將運(yùn)動(dòng)圖像流分離為編碼的運(yùn)動(dòng)圖像信息和其他信息。編碼的運(yùn)動(dòng)圖像信息例如包括通過將運(yùn)動(dòng)圖像數(shù)據(jù)所包含的圖像基于H. ^4/MVC標(biāo)準(zhǔn)等編碼而生成的編碼圖像信息。將分離得到的運(yùn)動(dòng)圖像信息向解碼部120輸出。另外，其他信息例如是包含在運(yùn)動(dòng)圖像流中的聲音數(shù)據(jù)及用戶數(shù)據(jù)等。聲音數(shù)據(jù)及用戶數(shù)據(jù)等其他信息與有關(guān)本發(fā)明的特征沒有特別關(guān)系，所以以下省略說明。多路分離部110具體而言從記錄介質(zhì)200讀出運(yùn)動(dòng)圖像流，將讀出的運(yùn)動(dòng)圖像流分離。進(jìn)而，多路分離部110將編碼的運(yùn)動(dòng)圖像信息分離為各通道的運(yùn)動(dòng)圖像信息。即，運(yùn)動(dòng)圖像流包括Lch的運(yùn)動(dòng)圖像信息和Rch的運(yùn)動(dòng)圖像信息，所以多路分離部110分離為L(zhǎng)ch 的運(yùn)動(dòng)圖像信息和Rch的運(yùn)動(dòng)圖像信息。各通道的運(yùn)動(dòng)圖像信息包括編碼圖像信息。編碼圖像信息例如按照?qǐng)D片依次向解碼部120輸出。另外，記錄介質(zhì)200是記錄有運(yùn)動(dòng)圖像流的記錄介質(zhì)，例如是DVD (Digital Versatile Disc)或BD (Blu-ray Disc)等光盤。此外，記錄介質(zhì)200也可以是HDD (Hard Disk Drive)等磁盤、或半導(dǎo)體存儲(chǔ)器。解碼部120將從多路分離部110輸入的編碼圖像信息依次解碼。如圖1所示，解碼部120具備解碼處理部121、矢量計(jì)算部122、補(bǔ)償處理部123、解碼圖像信息構(gòu)成部124、 以及解碼圖像信息保存緩沖器125及126。解碼處理部121將輸入的編碼圖像信息解碼。編碼圖像信息是基于H. 264/MVC標(biāo)準(zhǔn)編碼的圖像數(shù)據(jù)。具體而言，編碼圖像信息是通過將作為對(duì)象圖像與參照?qǐng)D像之差的差信息、以及確定參照?qǐng)D像的信息等解碼處理所需要的控制信息編碼而生成的圖像數(shù)據(jù)。解碼處理部121通過將編碼圖像信息解碼而生成差信息和控制信息。將所生成的差信息向解碼圖像信息構(gòu)成部1 輸出。將所生成的控制信息向矢量計(jì)算部122輸出。矢量計(jì)算部122基于輸入的控制信息，計(jì)算運(yùn)動(dòng)矢量或視差矢量。將計(jì)算出的運(yùn)動(dòng)矢量或視差矢量向補(bǔ)償處理部123輸出。補(bǔ)償處理部123基于輸入的運(yùn)動(dòng)矢量或視差矢量來參照保存在解碼圖像信息保存緩沖器125或1 中的解碼圖像信息，由此生成運(yùn)動(dòng)補(bǔ)償圖像信息或視差補(bǔ)償圖像信息。 將所生成的運(yùn)動(dòng)補(bǔ)償圖像或視差補(bǔ)償圖像向解碼圖像信息構(gòu)成部1 輸出。解碼圖像信息構(gòu)成部IM通過將從解碼處理部121輸入的差信息、與從補(bǔ)償處理部123輸入的運(yùn)動(dòng)補(bǔ)償圖像信息或視差補(bǔ)償圖像信息相加，生成解碼圖像信息。將所生成的解碼圖像信息向解碼圖像信息保存緩沖器125或1 保存。具體而言，解碼圖像信息構(gòu)成部IM在所生成的解碼圖像信息是Lch的圖像信息的情況下，將解碼圖像信息向解碼圖像信息保存緩沖器125保存。此外，解碼圖像信息構(gòu)成部IM在所生成的解碼圖像信息是 Rch的圖像信息的情況下，將解碼圖像信息向解碼圖像信息保存緩沖器1 保存。解碼圖像信息保存緩沖器125是用來保存Lch的解碼圖像信息的緩沖存儲(chǔ)器。解碼圖像信息保存緩沖器1 是用來保存Rch的解碼圖像信息的緩沖存儲(chǔ)器。另外，解碼圖像信息保存緩沖器125及1 既可以是在物理上不同的兩個(gè)緩沖存儲(chǔ)器，也可以是物理上為1個(gè)的緩沖存儲(chǔ)器在邏輯上被區(qū)域分割而成的存儲(chǔ)器區(qū)域。錯(cuò)誤檢測(cè)部130從運(yùn)動(dòng)圖像流中檢測(cè)錯(cuò)誤。具體而言，錯(cuò)誤檢測(cè)部130通過監(jiān)視多路分離部110或解碼部120的動(dòng)作狀態(tài)而檢測(cè)錯(cuò)誤。具體而言，錯(cuò)誤檢測(cè)部130將多路分離部110從記錄介質(zhì)200讀出運(yùn)動(dòng)圖像流失敗的情況、例如讀出的運(yùn)動(dòng)圖像流的一部分缺失的情況檢測(cè)為錯(cuò)誤，將發(fā)生了錯(cuò)誤的情況向錯(cuò)誤圖像修復(fù)部140通知?；蛘?，在解碼處理部121對(duì)編碼圖像信息解碼失敗的情況、例如編碼圖像信息的編碼不符合標(biāo)準(zhǔn)的情況下，錯(cuò)誤檢測(cè)部130設(shè)為檢測(cè)到錯(cuò)誤，將發(fā)生了錯(cuò)誤的情況向錯(cuò)誤圖像修復(fù)部140通知。錯(cuò)誤圖像修復(fù)部140在由錯(cuò)誤檢測(cè)部130檢測(cè)到錯(cuò)誤的情況下，將檢測(cè)到的錯(cuò)誤修復(fù)。具體而言，錯(cuò)誤圖像修復(fù)部140確定發(fā)生了錯(cuò)誤的圖像(以下稱作錯(cuò)誤圖像信息)， 通過用規(guī)定的圖像(以下稱作修復(fù)圖像信息)置換所確定的錯(cuò)誤圖像信息來修復(fù)錯(cuò)誤。圖2是表示有關(guān)實(shí)施方式1的錯(cuò)誤圖像修復(fù)部140的結(jié)構(gòu)的一例的框圖。如圖2 所示，錯(cuò)誤圖像修復(fù)部140具備判定部141、解碼控制部142、以及修復(fù)處理部143。判定部141判定錯(cuò)誤在第1運(yùn)動(dòng)圖像信息及第2運(yùn)動(dòng)圖像信息中的哪個(gè)發(fā)生。換言之，判定部141判定錯(cuò)誤在基礎(chǔ)視野的運(yùn)動(dòng)圖像信息及從屬視野的運(yùn)動(dòng)圖像信息中的哪個(gè)發(fā)生。進(jìn)而，在第1運(yùn)動(dòng)圖像信息發(fā)生錯(cuò)誤的情況下，判定部141判定預(yù)定在發(fā)生了檢測(cè)到的錯(cuò)誤的第1編碼圖像信息之后解碼的、第2運(yùn)動(dòng)圖像信息所包含的第2編碼圖像信息是否是幀內(nèi)圖像、或者是否需要視差補(bǔ)償處理。具體而言，判定部141在基礎(chǔ)視野的運(yùn)動(dòng)圖像信息發(fā)生錯(cuò)誤的情況下，判定預(yù)定在發(fā)生了檢測(cè)到的錯(cuò)誤的第1編碼圖片的下一個(gè)解碼的、從屬視野的運(yùn)動(dòng)圖像信息所包含的第2編碼圖片是否參照發(fā)生了錯(cuò)誤的第1編碼圖片解碼。進(jìn)而，判定部141判定在用規(guī)定的修復(fù)圖像信息置換發(fā)生了錯(cuò)誤的第1編碼圖像信息的解碼結(jié)果后、在解碼部120解碼第2編碼圖像信息而生成解碼圖像信息時(shí)，是否參照了置換后的修復(fù)圖像信息。具體而言，判定部141判定在將第2編碼圖片解碼時(shí)、解碼部 120是否參照了通過解碼發(fā)生了錯(cuò)誤的第1編碼圖片而生成的解碼圖片所包含的錯(cuò)誤圖像 fn息ο解碼控制部142在由錯(cuò)誤檢測(cè)部130在第1編碼圖像信息中檢測(cè)到錯(cuò)誤的情況下，控制解碼部120，以使其將預(yù)定比該第1編碼圖像信息靠后解碼的第2編碼圖像信息解碼。具體而言，解碼控制部142在由判定部141判定為第2編碼圖像信息是幀內(nèi)圖像、 或者不需要視差補(bǔ)償處理的情況下，控制解碼部120，以使解碼部120將第2編碼圖像信息解碼。換言之，解碼控制部142使解碼部120將預(yù)定在基礎(chǔ)視野的運(yùn)動(dòng)圖像信息所包含的發(fā)生了錯(cuò)誤的第1編碼圖片的下一個(gè)解碼的、從屬視野的運(yùn)動(dòng)圖像信息所包含的第2編碼圖片解碼。進(jìn)而，解碼控制部142在由判定部141判定為第2編碼圖像信息不是幀內(nèi)圖像、或者需要視差補(bǔ)償處理的情況下，控制解碼部120，以使在由修復(fù)處理部143修復(fù)錯(cuò)誤后，解碼部120將第2編碼圖像信息解碼。即，解碼控制部142在預(yù)定下一個(gè)解碼的、從屬視野的運(yùn)動(dòng)圖像信息所包含的第2編碼圖片需要視差補(bǔ)償處理的情況下，在將包含在發(fā)生了錯(cuò)誤的基礎(chǔ)視野的第1編碼圖片的解碼結(jié)果中的錯(cuò)誤圖像信息用修復(fù)圖像信息置換后，使解碼部120將從屬視野的第2編碼圖片解碼。修復(fù)處理部143使用解碼部120通過將第2運(yùn)動(dòng)圖像信息解碼而生成的解碼圖像信息，將由錯(cuò)誤檢測(cè)部130檢測(cè)到的錯(cuò)誤修復(fù)。具體而言，修復(fù)處理部143使用通過解碼部 120將第2編碼圖像信息解碼而生成的第2解碼圖像信息，生成第1修復(fù)圖像信息。然后， 修復(fù)處理部143用第1修復(fù)圖像信息置換第1編碼圖像信息的解碼結(jié)果，從而修復(fù)錯(cuò)誤。例如，修復(fù)處理部143在基礎(chǔ)視野的第1編碼圖片中發(fā)生了錯(cuò)誤的情況下，使用從屬視野的第2編碼圖片的解碼結(jié)果生成第1修復(fù)圖像信息。例如，修復(fù)處理部143通過取得作為第2編碼圖片的解碼結(jié)果的第2解碼圖像信息，生成第1修復(fù)圖像信息。并且，修復(fù)處理部143將包含在第1編碼圖片的解碼結(jié)果中的錯(cuò)誤圖像信息用所生成的第1修復(fù)圖像信息置換。此外，修復(fù)處理部143在由判定部141判定為第2編碼圖像信息不是幀內(nèi)圖像、 或者需要視差補(bǔ)償處理的情況下，用作為在發(fā)生了錯(cuò)誤的第1編碼圖像信息之前由解碼部 120解碼第1運(yùn)動(dòng)圖像信息而生成的解碼圖像信息的第2修復(fù)圖像信息，將第1編碼圖像信息的解碼結(jié)果置換。具體而言，修復(fù)處理部143在預(yù)定在發(fā)生了錯(cuò)誤的第1編碼圖片的下一個(gè)解碼的第2編碼圖片參照第1編碼圖片的情況下，通過取得在基礎(chǔ)視野的第1編碼圖像信息之前已解碼的解碼圖像信息，生成第2修復(fù)圖像信息。即，修復(fù)處理部143使用與發(fā)生了錯(cuò)誤的通道相同通道且與發(fā)生了錯(cuò)誤的編碼圖像信息相同時(shí)刻或不同時(shí)刻的編碼圖像信息，生成第2修復(fù)圖像信息。進(jìn)而，由于發(fā)生了錯(cuò)誤，所以在將第1編碼圖像信息的解碼結(jié)果用第2修復(fù)圖像信息置換后，修復(fù)處理部143用解碼部120解碼第2編碼圖像信息而生成的第3修復(fù)圖像信息，來置換第2修復(fù)圖像信息。具體而言，在由判定部141判定為在生成第3修復(fù)圖像信息時(shí)未參照第2修復(fù)圖像信息的情況下，修復(fù)處理部143將第2修復(fù)圖像信息用第3修復(fù)圖像信息置換。第2編碼圖像信息是其解碼結(jié)果在與第1編碼圖像信息相同的時(shí)刻顯示的圖像信息，所以與第1編碼圖像信息的相關(guān)較高。因而，在第1編碼圖像信息中發(fā)生了錯(cuò)誤的情況下，優(yōu)選的是使用第2編碼圖像信息的解碼結(jié)果置換第1編碼圖像信息。如上述那樣，修復(fù)處理部143用第2修復(fù)圖像信息置換第1編碼圖像信息后，用更優(yōu)選的第3修復(fù)圖像信息置換，所以能夠充分地抑制解碼圖像的紊亂。以上，對(duì)有關(guān)實(shí)施方式1的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100的結(jié)構(gòu)進(jìn)行了說明，但也可以是例如適當(dāng)追加了環(huán)路濾波處理等處理的結(jié)構(gòu)。此外，在僅輸入運(yùn)動(dòng)圖像流的情況下、或者在不需要運(yùn)動(dòng)圖像信息的分離的情況下等，多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100也可以不具備多路分離部110。此外，對(duì)多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100具備1個(gè)解碼處理部121的結(jié)構(gòu)進(jìn)行了說明，但也可以按每個(gè)通道具備解碼處理部、矢量計(jì)算部及補(bǔ)償處理部。此外，多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100也可以不具備矢量計(jì)算部122，而代之具備進(jìn)行在運(yùn)動(dòng)補(bǔ)償處理中使用的運(yùn)動(dòng)矢量的計(jì)算的運(yùn)動(dòng)矢量計(jì)算部、以及進(jìn)行在視差補(bǔ)償處理中使用的視差矢量的計(jì)算的視差矢量計(jì)算部。同樣，多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100也可以不具備補(bǔ)償處理部123，而代之具備進(jìn)行運(yùn)動(dòng)補(bǔ)償處理的運(yùn)動(dòng)補(bǔ)償部、以及進(jìn)行視差補(bǔ)償處理的視差補(bǔ)償部。此外，多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100從記錄介質(zhì)200讀出運(yùn)動(dòng)圖像流，但例如也可以經(jīng)由網(wǎng)絡(luò)或廣播波等取得運(yùn)動(dòng)圖像流。圖3是表示由兩個(gè)通道的運(yùn)動(dòng)圖像信息構(gòu)成的運(yùn)動(dòng)圖像流的一例的圖。如圖3所示，Lch的運(yùn)動(dòng)圖像信息是基礎(chǔ)視野，Rch的運(yùn)動(dòng)圖像信息是從屬視野。S卩，在將Rch的運(yùn)動(dòng)圖像信息解碼時(shí)參照Lch的運(yùn)動(dòng)圖像信息。解碼部120在將運(yùn)動(dòng)圖像流解碼時(shí)，如圖3所示，將Lch的編碼圖像信息和Rch的編碼圖像信息以圖片單位交替地解碼。另外，圖3所示的平行四辺形表示圖片，在該圖片內(nèi)記載的號(hào)碼表示解碼順序。在運(yùn)動(dòng)補(bǔ)償時(shí)，參照同一通道內(nèi)的已解碼的圖像信息。例如，如圖3所示，在將基礎(chǔ)視野的圖片3解碼時(shí)，參照?qǐng)D片1。在視差補(bǔ)償時(shí)，參照不同的通道的已解碼的圖像信息。例如，如圖3所示，在將從屬視野的圖片6解碼時(shí)參照?qǐng)D片5。另外，圖片1和圖片2、圖片3和圖片4等是預(yù)定在相同時(shí)刻顯示的圖片(同時(shí)刻的圖片)。即，作為左眼用圖像的圖片1與作為右眼用圖像的圖片2成對(duì)，構(gòu)成視聽者能夠立體地感知的三維圖像。多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100如圖3所示，在將成對(duì)的圖片中的基礎(chǔ)視野的圖片解碼后，將從屬視野的圖片解碼。接著，對(duì)有關(guān)實(shí)施方式1的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100的動(dòng)作進(jìn)行說明。特別
12對(duì)發(fā)生了錯(cuò)誤的情況的動(dòng)作進(jìn)行說明。另外，在沒有發(fā)生錯(cuò)誤的情況下，多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100按照H. 264/MVC標(biāo)準(zhǔn)進(jìn)行解碼，所以省略說明。圖4是表示有關(guān)實(shí)施方式1的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100的動(dòng)作中的、發(fā)生了錯(cuò)誤的情況下的動(dòng)作的一例的流程圖。在錯(cuò)誤檢測(cè)部130在基礎(chǔ)視野的運(yùn)動(dòng)圖像信息中檢測(cè)到錯(cuò)誤的情況下，錯(cuò)誤圖像修復(fù)部140基于來自錯(cuò)誤檢測(cè)部130的錯(cuò)誤通知，將解碼中的基礎(chǔ)視野的編碼圖片的解碼中斷(SlOl)。例如，在圖3所示的圖片5中發(fā)生了錯(cuò)誤的情況下，錯(cuò)誤圖像修復(fù)部140將圖片5的解碼中斷。判定部141判定預(yù)定在中斷的編碼圖片的下一個(gè)解碼的、從屬視野的編碼圖片是否需要視差補(bǔ)償處理(S102)。例如，在圖3所示的圖片5中發(fā)生了錯(cuò)誤的情況下，判定部 141判定圖片6是否是幀內(nèi)圖片、或者圖片6是否需要視差補(bǔ)償處理。另外，在從屬視野的編碼圖片是幀內(nèi)圖片的情況下，不參照其他圖片而解碼該編碼圖片，所以不需要視差補(bǔ)償處理。在從屬視野的編碼圖片不需要視差補(bǔ)償處理的情況下(S102中否)，解碼部120基于解碼控制部142的控制，進(jìn)行從屬視野的解碼(S103)。例如，如圖5A所示，在圖片3中發(fā)生了錯(cuò)誤的情況下，預(yù)定下一個(gè)解碼的圖片4不需要視差補(bǔ)償處理。因此，解碼控制部142控制解碼部120，以使其將圖片4解碼。圖片4 由于不參照發(fā)生了錯(cuò)誤的圖片3，所以解碼部120能夠不受錯(cuò)誤的影響而正確地將圖片4解碼。如果從屬視野的編碼圖片的解碼結(jié)束，則解碼控制部142使基礎(chǔ)視野的編碼圖片的解碼再次開始(S104)。例如，解碼控制部142在從解碼部120接受到表示從屬視野的編碼圖片的解碼結(jié)束的完成通知的情況下，使基礎(chǔ)視野的編碼圖片的解碼再次開始。此時(shí)，解碼部120既可以從發(fā)生了錯(cuò)誤的編碼圖片的最初進(jìn)行解碼，或者也可以從中斷的部位進(jìn)行解碼。例如，如果圖5A所示的圖片4的解碼結(jié)束，則解碼控制部142使發(fā)生了錯(cuò)誤的圖片3的解碼再次開始。修復(fù)處理部143通過取得從屬視野的編碼圖片的解碼結(jié)果，生成第1修復(fù)圖像信息(S105)。具體而言，通過使用在與發(fā)生了錯(cuò)誤的基礎(chǔ)視野的編碼圖像信息相同的時(shí)刻顯示的從屬視野的編碼圖像信息進(jìn)行視差補(bǔ)償處理等，從而生成第1修復(fù)圖像信息。例如，在圖5A所示的圖片3中發(fā)生了錯(cuò)誤的情況下，修復(fù)處理部143通過取得與圖片3同時(shí)刻的圖片4的解碼結(jié)果，從而生成第1修復(fù)圖像信息。然后，修復(fù)處理部143代替基礎(chǔ)視野的編碼圖像信息的解碼結(jié)果而將第1修復(fù)圖像信息保存到解碼圖像信息保存緩沖器125中(S106)。即，修復(fù)處理部143將基礎(chǔ)視野的編碼圖像信息的解碼結(jié)果用第1修復(fù)圖像信息置換。另外，此時(shí)，修復(fù)處理部143只要僅將基礎(chǔ)視野的編碼圖片中的、發(fā)生了錯(cuò)誤的圖像置換就可以。即，修復(fù)處理部143也可以按比幀小的處理單位用規(guī)定的修復(fù)圖像信息置換發(fā)生了錯(cuò)誤的圖像信息。即，修復(fù)處理部143 不需要將1幀或1圖片量的圖像信息全部置換，只要將發(fā)生了錯(cuò)誤的1個(gè)片或1個(gè)宏塊量的數(shù)據(jù)置換就可以。在錯(cuò)誤的修復(fù)結(jié)束后、發(fā)生了錯(cuò)誤的編碼圖片的解碼完成的情況下，開始基礎(chǔ)視野的下個(gè)編碼圖片的解碼(S112)。在圖5A所示的例子中，在圖片3中發(fā)生的錯(cuò)誤的修復(fù)、以及圖片3的解碼結(jié)束的情況下，解碼部120開始圖片5的解碼。在從屬視野的編碼圖片需要視差補(bǔ)償處理的情況下(S102中是)，解碼部120基于解碼控制部142的控制，再次開始基礎(chǔ)視野的解碼(S107)。例如，如圖5B所示，假設(shè)在圖片 5中發(fā)生了錯(cuò)誤的情況下，預(yù)定下一個(gè)解碼的圖片6需要視差補(bǔ)償處理。即，為了將圖片6 解碼而必須得到圖片5的解碼結(jié)果。因而，修復(fù)處理部143使用基礎(chǔ)視野的已解碼的解碼結(jié)果生成第2修復(fù)圖像信息 (S108)。例如，修復(fù)處理部143通過取得與發(fā)生了錯(cuò)誤的編碼圖片在時(shí)間上最接近的圖片的解碼圖像信息、或同一圖片內(nèi)的不同區(qū)域的解碼圖像信息，生成第2修復(fù)圖像信息。在圖 5B所示的例子中，在圖片5中發(fā)生了錯(cuò)誤的情況下，修復(fù)處理部143通過取得圖片3的解碼結(jié)果，生成第2修復(fù)圖像信息。然后，修復(fù)處理部143代替基礎(chǔ)視野的發(fā)生了錯(cuò)誤的編碼圖像信息的解碼結(jié)果而將生成的第2修復(fù)圖像信息保存到解碼圖像信息保存緩沖器125中(S109)。例如，在圖5B 所示的例子中，修復(fù)處理部143代替圖片5的解碼結(jié)果而取得圖片3的解碼結(jié)果，并將所取得的解碼結(jié)果作為第2修復(fù)圖像信息保存到解碼圖像信息保存緩沖器125中。接著，解碼部120將預(yù)定在發(fā)生了錯(cuò)誤的編碼圖片的下一個(gè)解碼的從屬視野的編碼圖片解碼(S110)。具體而言，如圖5B所示，解碼部120基于解碼控制部142的控制進(jìn)行圖片6的解碼(SllO)。此時(shí)，解碼部120—邊參照?qǐng)D片5的解碼結(jié)果(包括第2修復(fù)圖像信息)，一邊進(jìn)行視差補(bǔ)償處理，將圖片6解碼。判定部141在解碼部120將從屬視野的編碼圖片解碼時(shí)，具體而言在視差補(bǔ)償處理時(shí)，判定是否參照了發(fā)生錯(cuò)誤的部位(Slll)。在圖5B所示的例子中，判定部141判定在將圖片6解碼時(shí)是否參照了圖片5的錯(cuò)誤部位、即是否參照了置換的第2修復(fù)圖像信息。這是因?yàn)?，即使修?fù)了錯(cuò)誤，也不一定用第2修復(fù)圖像信息置換了圖片5的全部，也有在圖片 6的解碼時(shí)沒有參照錯(cuò)誤部位的情況。在沒有參照錯(cuò)誤部位的情況下(S111中否)，修復(fù)處理部143通過取得從屬視野的編碼圖片的解碼結(jié)果，生成第3修復(fù)圖像信息(S105)，保存到解碼圖像信息保存緩沖器125 中(S106)。即，在圖5B所示的例子中，通過取得圖片6的解碼結(jié)果，從而用所取得的圖片6 的解碼結(jié)果(第3修復(fù)圖像信息)置換作為圖片5的解碼結(jié)果置換的第2修復(fù)圖像信息。圖片6由于是與圖片5同時(shí)刻的圖片，所以與圖片3相比相關(guān)較高的情況較多。因而，與從圖片3取得的第2修復(fù)圖像信息相比，從圖片6取得的第3修復(fù)圖像信息更適于置換圖片5的解碼結(jié)果。由于在圖片6的解碼結(jié)果中沒有包含錯(cuò)誤的影響(由于在Slll中是否)，所以可以將圖片5的解碼結(jié)果(第2修復(fù)圖像信息)用圖片6的解碼結(jié)果(第3修復(fù)圖像信息)置換。另外，在參照了錯(cuò)誤部位的情況下(S111中是)，開始基礎(chǔ)視野的下個(gè)編碼圖片的解碼(S 112)。此外，在從屬視野的運(yùn)動(dòng)圖像信息發(fā)生錯(cuò)誤的情況下，由于成對(duì)的基礎(chǔ)視野的圖片已經(jīng)解碼，所以修復(fù)處理部143使用成對(duì)的基礎(chǔ)視野的圖片的解碼結(jié)果進(jìn)行修復(fù)。例如， 在圖3所示的圖片2中發(fā)生了錯(cuò)誤的情況下，修復(fù)處理部143將圖片1的解碼結(jié)果作為修復(fù)圖像信息保存到解碼圖像信息保存緩沖器126中。如以上這樣，有關(guān)實(shí)施方式1的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100在解碼第2運(yùn)動(dòng)圖像信息時(shí)參照的第1運(yùn)動(dòng)圖像信息中發(fā)生了錯(cuò)誤的情況下，先進(jìn)行第2運(yùn)動(dòng)圖像信息的解碼，使用該解碼的結(jié)果修復(fù)在第1運(yùn)動(dòng)圖像信息中發(fā)生的錯(cuò)誤。具體而言，多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100在基礎(chǔ)視野的第1編碼圖片中發(fā)生了錯(cuò)誤的情況下，先進(jìn)行從屬視野的第2 編碼圖片的解碼。第2編碼圖片是與第1編碼圖片相同時(shí)刻的編碼圖片，與基礎(chǔ)視野的其他編碼圖片相比，與第1編碼圖片的相關(guān)更高。因而，通過使用第2編碼圖片的解碼結(jié)果修復(fù)在第1編碼圖片中發(fā)生的錯(cuò)誤，能夠進(jìn)行比以往精度更高的錯(cuò)誤修復(fù)處理，能夠充分地抑制解碼圖像的紊亂。(實(shí)施方式2)有關(guān)實(shí)施方式2的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置的特征在于，在被從其他運(yùn)動(dòng)圖像信息參照的運(yùn)動(dòng)圖像信息中發(fā)生了錯(cuò)誤的情況下，將其他運(yùn)動(dòng)圖像信息解碼并對(duì)解碼結(jié)果進(jìn)行運(yùn)動(dòng)補(bǔ)償處理，從而生成修復(fù)圖像信息，用所生成的修復(fù)圖像信息置換錯(cuò)誤圖像信息。另外，有關(guān)實(shí)施方式2的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置的結(jié)構(gòu)與圖1所示的有關(guān)實(shí)施方式1的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100的結(jié)構(gòu)是相同的，所以省略說明。以下，對(duì)有關(guān)實(shí)施方式2的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置的動(dòng)作進(jìn)行說明。圖6是表示有關(guān)實(shí)施方式2的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置的動(dòng)作中的、發(fā)生了錯(cuò)誤的情況下的動(dòng)作的一例的流程圖。另外，對(duì)于與圖4所示的有關(guān)實(shí)施方式1的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置100的動(dòng)作相同的動(dòng)作賦予相同的標(biāo)號(hào)，以下省略說明。在由判定部141判定為預(yù)定在發(fā)生了錯(cuò)誤的基礎(chǔ)視野的編碼圖片的下一個(gè)解碼的從屬視野的編碼圖片不需要視差補(bǔ)償處理的情況下(S102中否)，解碼部120基于解碼控制部142的控制，將從屬視野的編碼圖片解碼(Sl(XB)。并且，解碼控制部142使發(fā)生了錯(cuò)誤的基礎(chǔ)視野的編碼圖片的解碼再次開始(S104)。修復(fù)處理部143通過取得從屬視野的編碼圖片的解碼結(jié)果，并對(duì)所取得的解碼結(jié)果進(jìn)行運(yùn)動(dòng)補(bǔ)償處理，從而生成第4修復(fù)圖像信息(S20O。以后的處理與實(shí)施方式1是同樣的。另一方面，在由判定部141判定為預(yù)定在發(fā)生了錯(cuò)誤的基礎(chǔ)視野的編碼圖片的下一個(gè)解碼的從屬視野的編碼圖片需要視差補(bǔ)償處理的情況下(S102中是)，解碼部120基于解碼控制部142的控制，再次開始基礎(chǔ)視野的解碼(S107)。并且，修復(fù)處理部143取得基礎(chǔ)視野的已解碼的解碼結(jié)果，并對(duì)所取得的解碼結(jié)果進(jìn)行運(yùn)動(dòng)補(bǔ)償處理，由此生成第2修復(fù)圖像信息(S208)。以后的處理與實(shí)施方式1是同樣的。如以上所示，在實(shí)施方式1中，將從屬視野或基礎(chǔ)視野的解碼結(jié)果原樣作為修復(fù)圖像信息使用，相對(duì)于此，在實(shí)施方式2中，將從屬視野或基礎(chǔ)視野的解碼結(jié)果作為運(yùn)動(dòng)補(bǔ)償用的圖像信息使用。以上，有關(guān)實(shí)施方式2的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置在解碼第2運(yùn)動(dòng)圖像信息時(shí)參照的第1運(yùn)動(dòng)圖像信息中發(fā)生了錯(cuò)誤的情況下，通過先進(jìn)行第2運(yùn)動(dòng)圖像信息的解碼，并對(duì)該解碼的結(jié)果進(jìn)行運(yùn)動(dòng)補(bǔ)償處理，由此生成修復(fù)圖像信息，用所生成的修復(fù)圖像信息置換錯(cuò)誤圖像。具體而言，多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置在基礎(chǔ)視野的第1編碼圖片中發(fā)生了錯(cuò)誤的情況下，先進(jìn)行從屬視野的第2編碼圖片的解碼。第2編碼圖片是與第1編碼圖片相同的時(shí)刻的編碼圖片，與基礎(chǔ)視野的其他編碼圖片相比，與第1編碼圖片的相關(guān)更高。
因而，通過對(duì)第2編碼圖片的解碼結(jié)果進(jìn)行運(yùn)動(dòng)補(bǔ)償處理而生成修復(fù)圖像信息， 并用所生成的修復(fù)圖像信息置換錯(cuò)誤圖像，由此能夠進(jìn)行比以往精度更高的錯(cuò)誤修復(fù)處理，能夠充分地抑制解碼圖像的紊亂。另外，修復(fù)處理部143在生成修復(fù)圖像信息時(shí)，也可以對(duì)從屬視野的解碼結(jié)果不僅進(jìn)行運(yùn)動(dòng)補(bǔ)償，而且還進(jìn)行視差補(bǔ)償處理。此外，這些運(yùn)動(dòng)補(bǔ)償處理及視差補(bǔ)償處理既可以由錯(cuò)誤圖像修復(fù)部140內(nèi)的修復(fù)處理部143進(jìn)行，或者也可以由解碼部120具備的補(bǔ)償處理部123進(jìn)行。以上，基于實(shí)施方式對(duì)有關(guān)本發(fā)明的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置及多視點(diǎn)運(yùn)動(dòng)圖像解碼方法進(jìn)行了說明，但本發(fā)明并不限定于這些實(shí)施方式。只要不脫離本發(fā)明的主旨，對(duì)該實(shí)施方式實(shí)施了本領(lǐng)域的技術(shù)人員想到的各種變形后的形態(tài)、或?qū)⒉煌膶?shí)施方式的構(gòu)成單元組合而構(gòu)建的形態(tài)也包含在本發(fā)明的范圍內(nèi)。例如，在上述說明中，舉例說明了基礎(chǔ)視野和從屬視野這兩個(gè)運(yùn)動(dòng)圖像信息，但有關(guān)本發(fā)明的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置也可以將3個(gè)以上的運(yùn)動(dòng)圖像信息解碼。例如，設(shè)想在將包括1個(gè)基礎(chǔ)視野的運(yùn)動(dòng)圖像信息和兩個(gè)從屬視野的運(yùn)動(dòng)圖像信息的運(yùn)動(dòng)圖像流解碼時(shí)，在基礎(chǔ)視野的運(yùn)動(dòng)圖像信息中發(fā)生了錯(cuò)誤的情況。在此情況下，多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置只要使用兩個(gè)從屬視野的某個(gè)生成修復(fù)圖像信息，并將錯(cuò)誤圖像信息用修復(fù)圖像信息置換，從而修復(fù)錯(cuò)誤就可以。此外，在從屬視野中發(fā)生了錯(cuò)誤的情況下也同樣，錯(cuò)誤圖像修復(fù)部140也可以利用基礎(chǔ)視野或從屬視野的解碼結(jié)果修復(fù)錯(cuò)誤圖像信息。例如，在圖3所示的圖片6中發(fā)生了錯(cuò)誤的情況下，錯(cuò)誤圖像修復(fù)部140只要利用圖片5的解碼結(jié)果作為修復(fù)圖像信息就可以?；蛘?，錯(cuò)誤圖像修復(fù)部140也可以控制解碼部120以使其將預(yù)定在圖片6的下一個(gè)解碼的圖片7解碼，并利用圖片7的解碼結(jié)果作為修復(fù)圖像信息。這樣，在從屬視野的編碼圖像信息中發(fā)生了錯(cuò)誤的情況下，也可以將預(yù)定在發(fā)生了錯(cuò)誤的編碼圖像信息的下一個(gè)解碼的包含在基礎(chǔ)視野中的編碼圖像信息解碼，并利用該解碼結(jié)果修復(fù)錯(cuò)誤。由此，例如在與圖片6同時(shí)刻的圖片即圖片5中也發(fā)生了錯(cuò)誤的情況下等、不優(yōu)選了利用圖片5的解碼結(jié)果作為修復(fù)圖像信息的情況下，也能夠?qū)⒃趫D片6中發(fā)生的錯(cuò)誤修
Μ. ο此外，在實(shí)施方式1中，修復(fù)處理部143也可以通過對(duì)所取得的第2解碼圖像信息進(jìn)行視差補(bǔ)償處理來生成第1修復(fù)圖像信息。另外，有關(guān)本發(fā)明的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置例如搭載在圖7所示的數(shù)字電視機(jī) 300、或數(shù)字視頻記錄器/播放器310中。另外，本發(fā)明不僅能夠如上述那樣作為多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置及多視點(diǎn)運(yùn)動(dòng)圖像解碼方法實(shí)現(xiàn)，也可以作為用來使計(jì)算機(jī)執(zhí)行本實(shí)施方式的多視點(diǎn)運(yùn)動(dòng)圖像解碼方法的程序?qū)崿F(xiàn)。此外，也可以作為記錄該程序的計(jì)算機(jī)可讀取的CD-ROM等記錄介質(zhì)實(shí)現(xiàn)。還可以作為表示該程序的信息、數(shù)據(jù)或信號(hào)實(shí)現(xiàn)。并且，這些程序、信息、數(shù)據(jù)及信號(hào)也可以經(jīng)由因特網(wǎng)等通信網(wǎng)絡(luò)分發(fā)。此外，本發(fā)明也可以將構(gòu)成多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置的構(gòu)成要素的一部分或全部由1個(gè)系統(tǒng)LSI構(gòu)成。系統(tǒng)LSI是將多個(gè)構(gòu)成部集成在1個(gè)芯片上而制造的超多功能LSI，具體而言是包括微處理器、ROM及RAM等而構(gòu)成的計(jì)算機(jī)系統(tǒng)。工業(yè)實(shí)用性有關(guān)本發(fā)明的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置及多視點(diǎn)運(yùn)動(dòng)圖像解碼方法具有在發(fā)生了錯(cuò)誤的情況下也能夠充分抑制解碼圖像的紊亂的效果，例如能夠在數(shù)字電視機(jī)、DVD及
BD記錄機(jī)/播放器等數(shù)字設(shè)備中使用。
標(biāo)號(hào)說明
100多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置
110多路分離部
120解碼部
121解碼處理部
122矢量計(jì)算部
123補(bǔ)償處理部
124解碼圖像信息構(gòu)成部
125-.126解碼圖像信息保存緩沖器
130錯(cuò)誤檢測(cè)部
140錯(cuò)誤圖像修復(fù)部
141判定部
142解碼控制部
143修復(fù)處理部
200記錄介質(zhì)
210顯示部
300數(shù)字電視機(jī)
310數(shù)字視頻記錄器/播放器
權(quán)利要求
1.一種多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置，解碼運(yùn)動(dòng)圖像流，該運(yùn)動(dòng)圖像流包含被編碼的第1 視點(diǎn)的第1運(yùn)動(dòng)圖像信息以及與上述第1視點(diǎn)不同的第2視點(diǎn)的被編碼的第2運(yùn)動(dòng)圖像信息，該多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置具備解碼部，解碼上述運(yùn)動(dòng)圖像流； 錯(cuò)誤檢測(cè)部，從上述運(yùn)動(dòng)圖像流中檢測(cè)錯(cuò)誤；以及錯(cuò)誤修復(fù)部，修復(fù)由上述錯(cuò)誤檢測(cè)部檢測(cè)到的錯(cuò)誤； 上述錯(cuò)誤修復(fù)部具備解碼控制部，在由上述錯(cuò)誤檢測(cè)部在上述第1運(yùn)動(dòng)圖像信息所包含的第1編碼圖像信息中檢測(cè)到錯(cuò)誤的情況下，控制上述解碼部以解碼上述第2運(yùn)動(dòng)圖像信息所包含的第2編碼圖像信息，該第2編碼圖像信息預(yù)定比上述第1編碼圖像信息后解碼；以及修復(fù)處理部，使用上述解碼部通過解碼上述第2編碼圖像信息而生成的解碼圖像信息，修復(fù)由上述錯(cuò)誤檢測(cè)部檢測(cè)到的錯(cuò)誤。
2.如權(quán)利要求1所述的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置，其中， 上述第2運(yùn)動(dòng)圖像信息通過參照上述第1運(yùn)動(dòng)圖像信息被編碼；上述錯(cuò)誤修復(fù)部還具備判定部，在上述第1編碼圖像信息中檢測(cè)到錯(cuò)誤的情況下，該判定部判定上述第2編碼圖像信息是否為幀內(nèi)圖像、或者是否需要視差補(bǔ)償處理；在由上述判定部判定為上述第2編碼圖像信息是幀內(nèi)圖像、或者不需要視差補(bǔ)償處理的情況下，上述解碼控制部控制上述解碼部，以使上述解碼部解碼上述第2編碼圖像信息。
3.如權(quán)利要求2所述的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置，其中，上述修復(fù)處理部用第1修復(fù)圖像信息置換上述第1編碼圖像信息的解碼結(jié)果，該第1 修復(fù)圖像信息是由上述解碼部解碼上述第2編碼圖像信息而生成的解碼圖像信息。
4.如權(quán)利要求3所述的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置，其中，上述第2編碼圖像信息是在與上述第1編碼圖像信息相同的時(shí)刻顯示的圖像信息。
5.如權(quán)利要求3或4所述的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置，其中，在由上述判定部判定為上述第2編碼圖像信息不是幀內(nèi)圖像、或者需要視差補(bǔ)償處理的情況下，上述修復(fù)處理部用第2修復(fù)圖像信息置換上述第1編碼圖像信息的解碼結(jié)果，該第2修復(fù)圖像信息是在上述第1編碼圖像信息之前，由上述解碼部解碼上述第1運(yùn)動(dòng)圖像信息而生成的解碼圖像信息。
6.如權(quán)利要求5所述的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置，其中，在由上述判定部判定為上述第2編碼圖像信息不是幀內(nèi)圖像、或者需要視差補(bǔ)償處理的情況下，上述解碼控制部控制上述解碼部，以使在由上述修復(fù)處理部修復(fù)錯(cuò)誤后，上述解碼部解碼上述第2編碼圖像信息；上述解碼部基于上述解碼控制部的控制來解碼上述第2編碼圖像信息，由此生成作為解碼圖像信息的第3修復(fù)圖像信息；上述判定部還判定上述解碼部在生成上述第3修復(fù)圖像信息時(shí)是否參照了上述第2修復(fù)圖像信息；在由上述判定部判定為沒有參照上述第2修復(fù)圖像信息的情況下，上述修復(fù)處理部用上述第3修復(fù)圖像信息置換上述第2修復(fù)圖像信息。
7.如權(quán)利要求2所述的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置，其中，上述修復(fù)處理部使用由上述解碼部解碼上述第2編碼圖像信息而生成的解碼圖像信息來進(jìn)行運(yùn)動(dòng)補(bǔ)償處理，由此生成第4修復(fù)圖像信息，用上述第4修復(fù)圖像信息置換上述第 1編碼圖像信息的解碼結(jié)果。
8.如權(quán)利要求1 7中任一項(xiàng)所述的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置，其中，上述錯(cuò)誤修復(fù)部以比幀小的處理單位，用規(guī)定的圖像信息置換發(fā)生了錯(cuò)誤的圖像信息，由此修復(fù)由上述錯(cuò)誤檢測(cè)部檢測(cè)到的錯(cuò)誤。
9.一種多視點(diǎn)運(yùn)動(dòng)圖像解碼方法，解碼運(yùn)動(dòng)圖像流，該運(yùn)動(dòng)圖像流包含被編碼的第1 視點(diǎn)的第1運(yùn)動(dòng)圖像信息以及與上述第1視點(diǎn)不同的第2視點(diǎn)的被編碼的第2運(yùn)動(dòng)圖像信息，該多視點(diǎn)運(yùn)動(dòng)圖像解碼方法包括解碼步驟，解碼上述運(yùn)動(dòng)圖像流； 錯(cuò)誤檢測(cè)步驟，從上述運(yùn)動(dòng)圖像流中檢測(cè)錯(cuò)誤；以及錯(cuò)誤修復(fù)步驟，修復(fù)上述錯(cuò)誤檢測(cè)步驟中檢測(cè)到的錯(cuò)誤； 在上述解碼步驟中，在上述錯(cuò)誤檢測(cè)步驟在上述第1運(yùn)動(dòng)圖像信息所包含的第1編碼圖像信息中檢測(cè)到錯(cuò)誤的情況下，解碼上述第2運(yùn)動(dòng)圖像信息所包含的第2編碼圖像信息，該第2編碼圖像信息預(yù)定比上述第1編碼圖像信息后解碼； 在上述錯(cuò)誤修復(fù)步驟中，使用通過解碼上述第2編碼圖像信息而生成的解碼圖像信息，修復(fù)上述錯(cuò)誤檢測(cè)步驟中檢測(cè)到的錯(cuò)誤。
10.一種程序，用于使計(jì)算機(jī)執(zhí)行多視點(diǎn)運(yùn)動(dòng)圖像解碼方法，該多視點(diǎn)運(yùn)動(dòng)圖像解碼方法解碼運(yùn)動(dòng)圖像流，該運(yùn)動(dòng)圖像流包含被編碼的第1視點(diǎn)的第1運(yùn)動(dòng)圖像信息以及與上述第1視點(diǎn)不同的第2視點(diǎn)的被編碼的第2運(yùn)動(dòng)圖像信息，上述多視點(diǎn)運(yùn)動(dòng)圖像解碼方法包括 解碼步驟，解碼上述運(yùn)動(dòng)圖像流； 錯(cuò)誤檢測(cè)步驟，從上述運(yùn)動(dòng)圖像流中檢測(cè)錯(cuò)誤；以及錯(cuò)誤修復(fù)步驟，修復(fù)上述錯(cuò)誤檢測(cè)步驟中檢測(cè)到的錯(cuò)誤； 在上述解碼步驟中，在上述錯(cuò)誤檢測(cè)步驟在上述第1運(yùn)動(dòng)圖像信息所包含的第1編碼圖像信息中檢測(cè)到錯(cuò)誤的情況下，解碼上述第2運(yùn)動(dòng)圖像信息所包含的第2編碼圖像信息，該第2編碼圖像信息預(yù)定比上述第1編碼圖像信息后解碼； 在上述錯(cuò)誤修復(fù)步驟中，使用通過解碼上述第2編碼圖像信息而生成的解碼圖像信息，修復(fù)上述錯(cuò)誤檢測(cè)步驟中檢測(cè)到的錯(cuò)誤。
11.一種集成電路，解碼運(yùn)動(dòng)圖像流，該運(yùn)動(dòng)圖像流包含被編碼的第1視點(diǎn)的第1運(yùn)動(dòng)圖像信息以及與上述第1視點(diǎn)不同的第2視點(diǎn)的被編碼的第2運(yùn)動(dòng)圖像信息，該集成電路具備解碼部，解碼上述運(yùn)動(dòng)圖像流； 錯(cuò)誤檢測(cè)部，從上述運(yùn)動(dòng)圖像流中檢測(cè)錯(cuò)誤；以及錯(cuò)誤修復(fù)部，修復(fù)由上述錯(cuò)誤檢測(cè)部檢測(cè)到的錯(cuò)誤；上述錯(cuò)誤修復(fù)部具備解碼控制部，在由上述錯(cuò)誤檢測(cè)部在上述第1運(yùn)動(dòng)圖像信息所包含的第1編碼圖像信息中檢測(cè)到錯(cuò)誤的情況下，控制上述解碼部以解碼上述第2運(yùn)動(dòng)圖像信息所包含的第2編碼圖像信息，該第2編碼圖像信息預(yù)定比上述第1編碼圖像信息后解碼；以及修復(fù)處理部，使用上述解碼部通過解碼上述第2編碼圖像信息而生成的解碼圖像信息，修復(fù)由上述錯(cuò)誤檢測(cè)部檢測(cè)到的錯(cuò)誤。
全文摘要
即使在發(fā)生了錯(cuò)誤的情況下，也能夠充分抑制解碼圖像的紊亂。將包含被編碼的第1視點(diǎn)的第1運(yùn)動(dòng)圖像信息以及被編碼的第2視點(diǎn)的第2運(yùn)動(dòng)圖像信息的運(yùn)動(dòng)圖像流解碼的多視點(diǎn)運(yùn)動(dòng)圖像解碼裝置(100)具備將運(yùn)動(dòng)圖像流解碼的解碼部(120)、從運(yùn)動(dòng)圖像流中檢測(cè)錯(cuò)誤的錯(cuò)誤檢測(cè)部(130)、以及將檢測(cè)到的錯(cuò)誤修復(fù)的錯(cuò)誤圖像修復(fù)部(140)，錯(cuò)誤圖像修復(fù)部(140)具備解碼控制部(142)，在第1運(yùn)動(dòng)圖像信息所包含的第1編碼圖像信息中檢測(cè)到錯(cuò)誤的情況下，控制解碼部(120)以使其將預(yù)定在第1編碼圖像信息之后解碼的、第2運(yùn)動(dòng)圖像信息所包含的第2編碼圖像信息解碼；以及修復(fù)處理部(143)，該修復(fù)處理部(143)使用通過解碼第2編碼圖像信息而生成的解碼圖像信息，修復(fù)檢測(cè)到的錯(cuò)誤。
文檔編號(hào)H04N7/32GK102342117SQ201080009720
公開日2012年2月1日 申請(qǐng)日期2010年7月9日 優(yōu)先權(quán)日2009年11月30日
發(fā)明者谷戶丈志, 重信優(yōu)也 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社