專利名稱：：圖像編碼裝置和圖像編碼方法以及圖像解碼方法
技術領域：
：本發(fā)明涉及對多個顏色分量組成的輸入圖像信號進行壓縮處理的圖像編碼方法和裝置以及輸入對多個顏色分量組成的圖像信號進行了壓縮的比特流并進行解碼處理的圖像解碼方法和裝置、以及圖像編碼比特流及記錄介質。
背景技術：
：以往，在MPEG或ITU-TH.26x等國際標準視頻圖像編碼方式中，主要以被稱之為"4:2:0"格式的輸入信號格式的使用作為前提。4:2:0格式是指將RGB等彩色圖像信號變換成亮度分量(Y)和兩個色差分量(CB、CR)，并使色差分量的采樣數(shù)相對于亮度分量的采樣數(shù)在水平方向/垂直方向上均削減了一半的格式。由于在人們的視覺特性上、色差分量與亮度分量相比識別性較差，所以在以往的國際標準視頻圖像編碼方式中，以通過在進行編碼之前減少色差分量的采樣數(shù)來削減編碼對象的信息量作為前提。另一方面，伴隨著近年來的視頻顯示器的高析像度化/高灰度等級化，還探討研究關于不用對色差分量進行下降采樣而是以與亮度分量的同一采樣來進行編碼的方式。亮度分量與色差分量相同的采樣數(shù)的格式被稱之為"4:4:4"。而且，作為輸入4:4:4格式的編碼方式正在制定"high444profile"(例如，參照非專利文獻1(ISO/IEC14496-10IITU-TH.264規(guī)格(AdvancedVideoCoding:AVC))。在以往的4:2:0格式中以色差分量的下降采樣作為前提，僅僅限定于Y、CB、CR之類的顏色空間，相對于此在4:4:4格式中在顏色分量間沒有采樣比的區(qū)別，所以可以除Y、CB、CR外直接使用R，G，B，或者定義除此以外的顏色空間進行利用。若采用IS0/IEC14496-10|ITU-TH.264(2005)規(guī)格(以下、稱之為AVC)中定義的high444profile,則與以往的編碼方式同樣需要進行以宏塊為單位的編碼處理/解碼處理。S卩，在一個宏塊之中包含有3個顏色分量的數(shù)據，因此就以宏塊單位按順序對各自顏色分量的數(shù)據進行處理，所以不利于使編碼/解碼處理并行化之類的目的。另一方面，在AVC中定義有4:0:0格式。其原本是僅僅以亮度分量的圖像、即單色圖像的編碼處理作為對象。還能夠采用利用該4:0:0格式對4:4:4格式的3個顏色分量分別以4:0:0格式進行編碼處理，由此生成3個獨立的編碼數(shù)據之類的方法。在此情況下，由于對各自顏色分量獨立地進行處理，所以并行處理成為可能。但是，由于對各自顏色分量獨立地進行處理，所以以現(xiàn)在的標準規(guī)格實現(xiàn)在各自顏色分量間使時間信息一致、或者使編碼模式一致這樣的處理是不可能的。因此，就會發(fā)生隨機存取再生(快進或后退等)和圖片單位的編輯處理等無法容易地實現(xiàn)之類的問題。進一步對這一問題進行說明。AVC中所定義的各種數(shù)據以存取單元定界符(AUD)、序列參數(shù)組(SPS)、圖片參數(shù)組(PPS)、圖片數(shù)據的順序得以配置。此外，對于與本發(fā)明沒有關系的數(shù)據在這里省略說明。另外，在AVC中一個存取單元(AU)被定義為由一個圖片(相當于l幀或者l半幀(field))所構成。存取單元的邊界能夠利用存取單元定界符(AUD)來表示。例如，如果是AVC的Baselineprofile，則在各圖片的邊界配置存取單元定界符，所以通過檢測存取單元定界符就能夠獨立且簡單地取出一個存取單元，并可以對一個圖片部分的數(shù)據進行解碼。另一方面，在采用現(xiàn)在的AVC方式以4:0:0格對3個顏色分量進行了編碼的情況下，就按各自顏色分量逐個定義存取單元，一個圖片就是由3個存取單元所構成。因此，僅通過檢測存取單元定界符就無法取出一個圖片部分的數(shù)據，隨機存取再生和圖片單位的編輯處理等就變得無法容易地實現(xiàn)。另外，由于按各自顏色分量逐個獨立地進行編碼處理，所以使時間信息一致，或者使編碼模式一致就變得困難。
發(fā)明內容因而，本發(fā)明的目的是提供一種圖像編碼方法及圖像解碼方法、圖像編碼裝置及圖像解碼裝置、以及圖像編碼比特流及記錄介質，通過擴展AVC，即便在對4:4:4格式的3個顏色分量使用4:0:0格式分別進行了編碼處理的情況下也可以將一幅圖片部分的數(shù)據包含在一個存取單元中，同時還可以在各自顏色分量間使時間信息一致、或者使編碼模式一致。與本發(fā)明有關的圖像編碼方法的特征是在對多個顏色分量組成的輸入圖像信號進行壓縮處理的圖像編碼方式中，將通過對各自顏色分量的輸入圖像信號獨立地進行編碼處理而得到的編碼數(shù)據、和表示上述編碼數(shù)據是針對哪個顏色分量的參數(shù)多路復用于比特流。另外，與本發(fā)明有關的圖像解碼方法的特征是在將多個顏色分量組成的圖像信號經過壓縮的比特流作為輸入來進行解碼處理的圖像解碼方式中，使用表示是針對哪個顏色分量的編碼數(shù)據的參數(shù)來進行各自顏色分量的編碼數(shù)據的解碼處理。另外，與本發(fā)明有關的圖像編碼裝置的特征是在對多個顏色分量組成的輸入圖像信號進行壓縮處理的圖像編碼裝置中，具備將通過對各自顏色分量的輸入圖像信號獨立地進行編碼處理而得到的編碼數(shù)據、和表示上述編碼數(shù)據是針對哪個顏色分量的數(shù)據的參數(shù)多路復用于比特流的多路復用部件。另外，與本發(fā)明有關的圖像解碼裝置的特征是在將多個顏色分量組成的圖像信號經過壓縮的比特流作為輸入來進行解碼處理的圖像解碼裝置中，具備檢測表示是針對哪個顏色分量的編碼數(shù)據的參數(shù)的檢測部件。另外，與本發(fā)明有關的圖像編碼比特流作為對多個顏色分量組成的輸入圖像信號進行壓縮編碼的結果而生成的比特流，其特征是按片單位構成各顏色分量的圖像信號的壓縮數(shù)據，在該片的首標區(qū)域中多路復用了表示該片數(shù)據是否包含某個顏色分量的壓縮數(shù)據的參數(shù)。進而，與本發(fā)明有關的記錄介質記錄了圖像編碼比特流，該圖像編碼比特流作為對多個顏色分量組成的輸入圖像信號進行壓縮編碼的結果而生成的比特流，按片單位構成各顏色分量的圖像信號的壓縮數(shù)據，并在該片的首標區(qū)域中多路復用了表示該片數(shù)據是否包含某個顏色分量的壓縮數(shù)據的參數(shù)。根據本發(fā)明，就可以使用AUD容易地執(zhí)行隨機存取再生或圖片單位的編輯處理，即便在對3個顏色分量使用4:0:0格式分別進行了編碼處理的情況下也可以將一幅圖片部分的數(shù)據包含在一個存取單元中，同時還可以在各自顏色分量間使時間信息一致、或者使編碼模式一致。圖1是從本發(fā)明的圖像編碼裝置生成的編碼比特流的語法之中、抽選出與本發(fā)明有關的部分的圖。圖2是作為確保與現(xiàn)有規(guī)格的互換性的其他方法，有關參數(shù)colour」d之定義的說明圖。圖3是在AUD與AUD之間使構成一幅圖片的全部顏色分量的數(shù)據包含于一個存取單元(AU)的說明圖。圖4是將顏色分量的數(shù)據在一個存取單元之中用Delimiter按各顏色分量區(qū)分并匯總在一起排列的說明圖。圖5是將4:0:0格式和4:4:4格式的編碼模式以任意的單位切換的說明圖。圖6是本發(fā)明實施方式7中的共通編碼處理的說明圖。圖7是本發(fā)明實施方式7中的獨立編碼處理的說明圖。圖8是表示本發(fā)明實施方式7的編碼裝置/解碼裝置中的、圖片間的時間方向的活動預測參照關系的圖。圖9是表示本發(fā)明實施方式7在編碼裝置所生成、解碼裝置設為輸入/解碼處理的對象的比特流之構造的一例的圖。圖10是表示本發(fā)明實施方式7中的共通編碼處理、獨立編碼處理各自情況下的片數(shù)據的比特流構成的圖。圖11是表示本發(fā)明實施方式7所涉及的編碼裝置之概略構成的框圖。圖12是利用圖11所示的多路復用部105經過多路復用而輸出的比特流106的說明圖。圖13是表示圖11所示的第1圖片編碼部102之內部構成的框圖。圖14是表示圖11所示的第2圖片編碼部104之內部構成的框圖。圖15是表示本發(fā)明的實施方式7所涉及的解碼裝置之概略構成的框圖。圖16是表示圖15所示的第1圖片解碼部302之內部構成的框圖。圖17是表示圖15所示的第2圖片解碼部304之內部構成的框圖。圖18是表示圖11所示的編碼裝置之變形例的框圖。圖19是表示圖11所示的編碼裝置之其他變形例的框圖。圖20是表示與圖18所示的編碼裝置對應的解碼裝置的框圖。圖21是表示與圖19所示的編碼裝置對應的解碼裝置的框圖。圖22是表示以往的YUV4:2:0格式的比特流所包含的宏塊首標信息的編碼數(shù)據之構成的圖。圖23是表示確保對于以往的YUV4:2:0格式的比特流的互換性的第1圖片解碼部302的預測部311之內部構成的圖。圖24是表示比特流的構造的其他例子的圖。圖25是表示比特流的構造的進一步其他例子的圖。具體實施方式實施方式1.圖1是從本發(fā)明的圖像編碼裝置生成的編碼比特流的語法之中、抽選出與本發(fā)明有關的部分的圖。在圖1中，(a)是NAL(網絡抽象層)單元的首標信息的語法、(b)是SPS(序列參數(shù)組)的語法、(c)是PPS(圖片參數(shù)組)的語法、(d)是片首標的語法。陰影部分以外是現(xiàn)有的AVC規(guī)格中所規(guī)定的語法，陰影部分是雖然在現(xiàn)有的AVC規(guī)格中有規(guī)定但由本發(fā)明重新追加功能的語法或者在現(xiàn)有的AVC規(guī)格中沒有規(guī)定而由本發(fā)明新追加的語法。以下，就AVC中所定義的參數(shù)簡單地記述。在圖1(a)中，NAL單元的nal_re_idC是表示NAL單元的數(shù)據是否為預測參照所使用的圖像數(shù)據的參數(shù)。另外，nal_unit_type是表示NAL單元的數(shù)據為片數(shù)據、SPS、PPS、存取單元定界符(AUD)中的哪一個的參數(shù)。在圖l(b)中，SPS的profilejdc表示編碼序列的profile，在AVC中定義有baseline、main、high、high444等。另外，seq_paremeter_set_id是表示SPS的ID，在一個編碼序列之中定義多個SPS并用ID分別管理。進而，chroma—formatjdc僅在high444profile時被使用，是表示編碼序列是4:0:0、4:2:0、4:2:2、4:4:4中的某種格式的參數(shù)。在圖1(c)中，PPS的pic_paremter_set_id表示PPS的ID，在一個編碼序列之中定義多個PPS并用ID分別管理。PPS中的seq_paremeter_set」d是表示該PPS屬于哪個SPS的參數(shù)。在圖l(d)中，片首標的firstjnbjruslice是表示片數(shù)據的開頭宏塊數(shù)據處于畫面內的哪個位置的參數(shù)。另外，slice—type是表示片數(shù)據為幀內編碼、單向預測編碼、雙預測編碼中的某一種的參數(shù)。進而，pic—parameter—setjd是表示片數(shù)據屬于哪個PPS的參數(shù)。其次就動作進行說明。在對3個顏色分量的圖像信號采用4:0:0格式將各自顏色分量獨立地進行編碼處理的情況下，在圖1(b)所示的SPS中包含的參數(shù)之一的profile」dc上重新設置表示是采用4:0:0格式將3個顏色分量的數(shù)據獨立地進行編碼的處理的數(shù)據，同時在圖l(d)所示的片首標上重新設置colour」d的參數(shù)，以表示片數(shù)據中包含的編碼數(shù)據是3個顏色分量中的某個。在以現(xiàn)有的4:0:0格式(單色圖像)、4:2:0格式、4:2:2格式、4:4:4格式進行編碼處理的情況下，不使用圖l(d)所示的參數(shù)colour」d，僅在采用由該發(fā)明重新定義的4:0:0格式將3個顏色分量的數(shù)據獨立地進行編碼的模式時，才使用參數(shù)colour」d，由此就能夠不對現(xiàn)有的規(guī)格帶來影響。通過在采用由該發(fā)明重新定義的4:0:0格式將3個顏色分量的數(shù)據獨立地進行編碼的模式時，使用參數(shù)colour」d，就如圖3那樣，使3個顏色分量的數(shù)據包含于一個存取單元(AU)，并在AUD與AUD間放入構成一幅圖片的全部顏色分量的數(shù)據。另外，作為確保與現(xiàn)有規(guī)格的互換性的其他方法，還可以將參數(shù)colour」d采用如圖2那樣的定義。通過這樣定義colourjd，就可以在colourjd=0的情況下表示是如現(xiàn)有規(guī)格那樣以在一個宏塊之中包含3個顏色分量的數(shù)據的形式經過編碼的片數(shù)據。在其他值的情況下表示是以采用本實施方式1中所述的4:0:0格式將3個顏色分量的數(shù)據獨立地進行編碼的處理經過編碼的片數(shù)據。由此，就能夠構成包含現(xiàn)有方式與本實施方式1中所述的方式雙方的比特流，在保證與現(xiàn)有方式的互換性這一點上有用。另外，在片數(shù)變多、參數(shù)colour」d自身的代碼量的附加給編碼效率帶來影響之類的情況下，還可以構成為基于現(xiàn)有方式與本實施方式1中所述的方式中的哪個更易于被選擇之類的判斷基準來進行適當?shù)目勺冮L度編碼，以降低colour」d自身的代碼量。這樣一來，在對多個顏色分量組成的輸入圖像信號進行壓縮處理的圖像編碼方式中，通過將對各自顏色分量的輸入圖像信號獨立地進行編碼處理而得到的編碼數(shù)據、和表示上述編碼數(shù)據是針對哪個顏色分量的數(shù)據的參數(shù)多路復用于比特流，就可以使用AUD容易地執(zhí)行隨機存取再生和圖片單位的編輯處理等。在輸入多個顏色分量組成的圖像信號經過壓縮的比特流并進行解碼處理的圖像解碼方式中，能夠使用表示是針對哪個顏色分量的編碼數(shù)據的參數(shù)容易地進行各自顏色分量的編碼數(shù)據的解碼處理。另外，由于3個顏色分量的數(shù)據被包含在一個存取單元中，所以3個顏色分量的數(shù)據就同時作為IDR(InstantaneousDevodingRefresh)圖片而得以編碼。IDR圖片是在AVC中所定義的、如果來自IDR圖片就可以即刻進行正常的解碼處理的圖片，是假定作為隨機存取再生的開頭來利用而設置的。另外，在僅僅想取出3個顏色分量之中的一個顏色分量的情況下，通過僅抽取具有特定值的colour」d的片數(shù)據就能夠容易地實現(xiàn)。此外，雖然在圖1中將colour」d參數(shù)設置在片首標的開頭，但無需一定配置在開頭，只有包含在片首標之中就可以獲得同樣的效果。實施方式2.與實施方式l同樣，在一個存取單元之中放入3個顏色分量的編碼數(shù)據，但圖3所示的實施方式1是將各自顏色分量的數(shù)據(R，B，G)按順序進行了排列，相對于此還能夠如圖4所示那樣，采取將僅R、僅B、僅G顏色分量匯集起來進行排列的方法。進而，還可以采取通過放入在現(xiàn)在的AVC中未被定義的"Delimiter",而僅僅將規(guī)定的顏色分量的數(shù)據簡單地取出這樣的構成。通過這樣進行處理，就能夠容易地實現(xiàn)例如按各自顏色分量分配不同處理器并行地進行處理。此外，該發(fā)明所示的"Delimiter"還可以通過擴展AVC的SEI(Su卯lementalEnhancementInformation)消息有效負載，而不會對現(xiàn)有的規(guī)格帶來影響地實現(xiàn)。當然、通過除此以外的其他的方法來定義"Delimiter"也可以取得同樣的效果。實施方式3.通過取代片首標的colour」d而在NAL單元的一部分中放入表示顏色分量的參數(shù)也能夠獲得與實施方式1相同的效果。由于在AVC中片首標以及后續(xù)于片首標的片數(shù)據被定義為NAL單元的有效負載，所以擴展NAL單元的nal_unit_type參數(shù)以在該參數(shù)之中表示NAL單元的有效負載所包含的視頻圖像數(shù)據是哪個顏色分量。進而，通過使3個顏色分量的數(shù)據包含于一個存取單元(AU)中，而在AUD與AUD之間放入構成一幅圖片的全部數(shù)據。通過這樣進行處理，與實施方式1同樣，就能夠容易地執(zhí)行隨機存取再生或圖片單位的編輯處理，同時在僅想取出3個顏色分量之中的一個分量的情況下，只用NAL單元的首標數(shù)據進行抽取而不用解析到片首標。實施方式4.在實施方式13時，進一步對3個顏色分量的數(shù)據經過編碼的片首標的first_mb_in_slice參數(shù)設置制約條件以使其始終為同一值。first_mb_in_SliCe參數(shù)表示片數(shù)據的開頭數(shù)據的位置處于畫面內的哪里。在以往的AVC的編碼方式中，片的構造可以采取任意的形式，所以可以在各顏色分量中使片的構造不同，但通過設置這一制約，就可以將三個具有同一firstjiib」ruslice的值的片數(shù)據匯集起來，由此解碼/顯示具有正確的顏色狀態(tài)的圖像的一部分。在不設置制約的情況下若因first_mb_in_sliCe的值在各自顏色分量中不同故無法使用一畫面的全部片數(shù)據來解碼畫面全體則無法合成3個顏色分量而獲得正確的解碼圖像，但通過這樣進行處理，在想顯示畫面的特定部分、例如僅中央部分之類的情況下，就可以不用一畫面全部而僅使用一部分片數(shù)據來進行解碼/顯示處理。另外，在使用各個處理器對各個顏色分量的數(shù)據進行并行處理的情況下，由于各片數(shù)據從同一位置起開始，所以并行處理的管理就變得容易。實施方式5.相對于實施方式4，進一步對各顏色分量的片首標的sliCe_type參數(shù)設置制約條件以使其始終為同一值。slice—type參數(shù)表示后續(xù)于片首標的片數(shù)據是幀內編碼、單向預測編碼、雙預測編碼中的哪一個等。如果是幀內編碼則不使用幀間預測處理，所以可以即刻進行解碼/顯示處理。因而，就處于畫面上同一位置的片數(shù)據而言通過將編碼的類型對全部顏色分量設為共通來進行同一編碼處理，就可以在解碼裝置中，在隨機存取再生時通過僅對幀內編碼的片進行解碼處理而高速地進行解碼/顯示處理。實施方式6.通過采用如前述的實施方式15那樣的構成，就能夠以任意的單位來切換使用新定義的4:0:0格式將3個顏色分量的數(shù)據獨立地進行編碼的模式、和4:4:4格式的編碼模式。例如，如圖5那樣通過對于SPS的seq_parameter_set_id=1設定新定義的4:0:0格式的參數(shù)，而對于seq—parameter—setjd=2則設定4:4:4格式的參數(shù)，以使與各自的seq—parameter—set—id對應的SPS持有不同的seq—parameter—set—id來進行設定，就可以以圖片單位來切換兩者。通過這樣進行處理，就可以選擇編碼效率更好的一方來進行編碼處理，或者根據應用選擇合適的一方來進行編碼處理。此外，雖然在本實施方式5中，設以圖片單位來切換兩者進行了說明，但在AVC的規(guī)格上，還可以通過相同處理來進行片單位下的切換。另外，雖然在該發(fā)明中使用作為活動圖像編碼方式的國際標準的AVC進行了說明，當然使用其他的編碼方式也可以獲得同樣的效果。實施方式7.在本實施方式7中，根據具體的附圖來說明一邊以l幀(或l半幀)的單位來區(qū)分是將3個顏色分量信號用共通的宏塊首標來編碼還是用個別的宏塊首標來編碼一邊進行編碼/解碼的裝置構成/動作。以下，只要沒有特別解釋，在記載為"l幀"的情況下就視為1幀或1半幀的數(shù)據單位。本實施方式7中的宏塊首標包括宏塊類型/子宏塊類型/內部預測模式等編碼/預測模式信息、參照圖像識別編號/活動矢量等活動預測信息、針對變換系數(shù)的量化參數(shù)、變換塊大小指示標志、8X8塊單位下的有效變換系數(shù)有無判定標志等、變換系數(shù)數(shù)據以外的宏塊附加信息。以后，將用共通的宏塊首標來編碼1幀的3個顏色分量信號的處理記為"共通編碼處理"，將用個別的獨立宏塊首標來編碼1幀的3個顏色分量信號的處理記為"獨立編碼處理"。同樣，將從1幀的3個顏色分量信號用共通的宏塊首標經過編碼的比特流來解碼幀圖像數(shù)據的處理記為"共通解碼處理"，將從1幀的3個顏色分量信號用個別的獨立宏塊首標經過編碼的比特流來解碼幀圖像數(shù)據的處理記為"獨立解碼處理"。在本實施方式7中的共通編碼處理中，如圖6所示那樣，將1幀部分的輸入視頻圖像信號分割成把C0分量、Cl分量、C2分量這3個顏色分量匯集起來形式的作為共通編碼處理之對象的宏塊。另一方面，在獨立編碼處理中，如圖7所示那樣，將1幀部分的輸入視頻圖像信號分離成C0分量、Cl分量、C2分量這3個顏色分量，并將它們分割成由單一顏色分量組成的宏塊、也就是作為每個C0分量、Cl分量、C2分量的獨立編碼處理之對象的各宏塊。S卩，作為共通編碼處理之對象的宏塊包含C0、C1、C2這3個顏色分量的采樣，但作為獨立編碼處理之對象的宏塊僅包含C0或Cl或C2分量之中某一個分量的采樣。在圖8中，表示本實施方式7的編碼裝置/解碼裝置中的、圖片間的時間方向的活動預測參照關系。在該例子中，將粗豎直線所示的數(shù)據單位設為圖片，用包圍虛線來表示圖片與存取單元的關系。共通編碼/解碼處理的情況下，一幅圖片是表示3個顏色分量混在一起的1幀部分的視頻圖像信號的數(shù)據，在獨立編碼/解碼處理的情況下，一幅圖片為某一個顏色分量的1幀部分的視頻圖像信號。存取單元是對視頻圖像信號賦予以與音頻/聲音信息等的同步等為目的的時間標記的最小數(shù)據單位，在共通編碼/解碼處理的情況下，在一個存取單元中包含一幅圖片部分的數(shù)據。另一方面，獨立編碼/解碼處理的情況下，在一個存取單元中包含3個圖片。這是因為在獨立編碼/解碼處理的情況下，所有3個顏色分量的同一顯示時刻的圖片齊備后才可得到1幀部分的再生視頻圖像信號的緣故。此外，在各圖片的上部賦予的編號表示圖片的時間方向的編碼/解碼處理順序(作為活動圖像數(shù)據的壓縮編碼方式之標準的AVC:AdvancedVideoCoding的frame_num)。在圖8中，圖片間的箭頭表示活動預測的參照方向。S卩，在獨立編碼/解碼處理的情況下，同一存取單元所包含的圖片之間的活動預測參照、以及不同顏色分量間的活動預測參照不進行，將C0、Cl、C2的各顏色分量的圖片限定于同一顏色分量的信號一邊進行預測參照一邊進行編碼/解碼。通過采用這種構成，在本實施方式7中的獨立編碼/解碼處理的情況下，就能夠使各顏色分量的編碼/解碼完全不依賴于其他顏色分量的編碼/解碼處理地執(zhí)行，并行處理就變得容易。此外，在AVC中自身進行內部編碼，同時設定活動補償預測所用的參照圖像存儲器的內容的IDR(instantaneousdecoderrefresh)圖片被定義。由于IDR圖片可以對其他什么樣的圖片都不依賴地進行解碼所以作為隨機存取點而得以利用。共通編碼處理的情況下的存取單元是一個存取單元=一幅圖片，但在獨立編碼處理的情況下的存取單元中一個存取單元由多個圖片所構成，在某顏色分量圖片是IDR圖片的情況下其他剩余的顏色分量圖片也作為IDR圖片，并定義IDR存取單元，以確保隨機存取功能。以下，在本實施方式7中將表示是進行基于共通編碼處理的編碼、還是進行基于獨立編碼處理的編碼的識別信息(中間預測模式共通化識別標志或宏塊首標共通化識別標志相當?shù)男畔?稱為共通編碼/獨立編碼識別信號。在圖9中表示本實施方式7的編碼裝置所生成、本實施方式7的解碼裝置作為輸入/解碼處理對象的比特流的構造之一例。該圖表示從序列到幀層級的比特流構成，首先，在序列層級的高位首標(在AVC的情況下為SPS(sequenceparameterset)等)上多路復用共通編碼/獨立編碼識別信號。各個幀以存取單元為單位得以編碼。AUD是表示在AVC中用于識別存取單元的縫隙的獨特的NAL單元即AccessUnitDelimiterNAL單元。在共通編碼/獨立編碼識別信號表示"基于共通編碼處理的圖片編碼"的情況下，在存取單元中包含一幅圖片部分的編碼數(shù)據。此時的圖片是表示如前述那樣3個顏色分量混在一起的1幀部分的視頻圖像信號的數(shù)據。此時，第i個存取單元的編碼數(shù)據作為片數(shù)據Slice(i，j)的集合而構成。j是一幅圖片內的片數(shù)據的索引。另一方面，在共通編碼/獨立編碼識別信號表示"基于獨立編碼處理的圖片編碼"的情況下，一幅圖片是某一個顏色分量的1幀部分的視頻圖像信號。此時，第P個存取單元的編碼數(shù)據作為存取單元內的第q個圖片的片數(shù)據Slice(p，q，r)的集合而構成。r是一幅圖片內的片數(shù)據的索引。在如RGB那樣顏色分量由3分量所構成的視頻圖像信號的情況下，q是0，l，2中的某一個。另外，在除3原色組成的視頻圖像信號以外例如還將用于字母混合的透過率信息這樣的附加數(shù)據設為同一存取單元進行編碼/解碼的情況、或將4分量以上的顏色分量(例如，彩色印刷中所使用的YMCK等)構成的視頻圖像信號進行編碼/解碼等情況下，能夠設q〉3來進行處理。本實施方式7中的編碼裝置/解碼裝置，如果選擇獨立編碼處理則完全獨立地對構成視頻圖像信號的各顏色分量進行編碼，所以在原理上能夠自由地變更顏色分量的片數(shù)而不用變更編碼/解碼處理。具有即便在將來，用于視頻圖像信號的顏色表現(xiàn)的信號形式被變更的情況下也可以用本實施方式7中的獨立編碼處理來進行對應的效果。為了實現(xiàn)這種構成，在本實施方式7中，共通編碼/獨立編碼識別信號用"包含在l存取單元內，各自不相互進行活動預測參照而獨立地進行編碼的圖片的個數(shù)"之類的形式來表現(xiàn)。共通編碼/獨立編碼識別信號3以后稱為num_pictures_in_au。也就是說，皿m—pictures_in_au=1表示"共通編碼處理"，num_pictures_in_au=3表示本實施方式7中的"獨立編碼處理"。在顏色分量為4以上的情況下，設定成皿m—picturesjruau>3的值即可。通過進行這種信號傳輸，如果解碼裝置對Mm_pictures_in_au進行解碼、參照則不僅能夠進行基于共通編碼處理的編碼數(shù)據和基于獨立編碼處理的編碼數(shù)據的區(qū)別，還能夠同時得知在一個存取單元內存在多少片單一顏色分量圖片，將來的視頻圖像信號的顏色表現(xiàn)擴展的對應也可以進行，同時還可以在比特流中無縫地處理共通編碼處理和獨立編碼處理。在圖10中表示共通編碼處理、獨立編碼處理各自情況下的片數(shù)據的比特流構成。在通過獨立編碼處理而編碼的比特流中，為了達到后述的效果，在片數(shù)據開頭的首標區(qū)域賦予顏色分量識別標志(color—cha皿eljdc)以便可以識別解碼裝置接收到的片數(shù)據是屬于存取單元內的哪個顏色分量的圖片的片。color_channel_idc將其值相同的片成組化。也就是說，在color_channel_idc的值不同的片間，使其什么樣的編碼/解碼的依賴性(例如，活動預測參照、CABAC(Context-AdaptiveBinaryArithmeticCoding)的上下文建模/發(fā)生概率學習等)都不具有。此外，由于color—channeljdc與圖1(d)所示的實施方式1的colorjd相同，所以是相同語義的信息。通過這樣進行規(guī)定，獨立編碼處理的情況下的存取單元內的各個圖片的獨立性就得以確保。另外，關于各片首標上多路復用的frame—皿m(片所屬的圖片的編碼/解碼處理順序)，在1存取單元內的全部顏色分量圖片中設為同一值。圖11中表示與本實施方式7有關的編碼裝置的概略構成。在同圖中，共通編碼處理在第1圖片編碼部102中得以執(zhí)行，獨立編碼處理在第2圖片編碼部104(準備3個顏色分量分)中得以執(zhí)行。輸入視頻圖像信號1通過開關(SW)100被供給第1圖片編碼部102或顏色分量分離部103以及每個顏色分量的第2圖片編碼部104的某一個。開關100由共通編碼/獨立編碼識別信號101而驅動，將輸入視頻圖像信號1向所指定的總線供給。下面，就共通編碼/獨立編碼識別信號(num_pictures_in_au)101在輸入視頻圖像信號為4:4:4格式的情況下被多路復用于序列參數(shù)組，而作為以序列為單位來選擇共通編碼處理和獨立編碼處理的信號的情況進行說明。由于在使用了共通編碼處理的情況下，需要在解碼裝置側執(zhí)行共通解碼處理，在使用了獨立編碼處理的情況下，需要在解碼裝置側執(zhí)行獨立解碼處理，所以共通編碼/獨立編碼識別信號101需要作為對其指定的信息而多路復用于比特流。因此，共通編碼/獨立編碼識別信號101輸入到多路復用部105。該共通編碼/獨立編碼識別信號101的多路復用單位是序列內的若干圖片群組成的GOP(GroupOfPictures)的單位等、只要是比圖片更高位層次則怎樣的單位均可。11在第1圖片編碼部102中，為了執(zhí)行共通編碼處理，將輸入視頻圖像信號1分割成如圖6所示那樣匯集了3個顏色分量的采樣的形式的宏塊，并以其為單位推進編碼處理。第1圖片編碼部102中的編碼處理后述。在獨立編碼處理被選擇的情況下，輸入視頻圖像信號1在顏色分量分離部103中被分離成C0、C1、C2的1幀部分的數(shù)據，并分別供給對應的第2圖片編碼部104。在第2圖片編碼部104中，將按顏色分量所分離的1幀部分的信號分割成圖7所示的形式的宏塊，并以其為單位推進編碼處理。第2圖片編碼部中的編碼處理進行后述。在第1圖片編碼部102上被輸入3個顏色分量組成的一幅圖片部分的視頻圖像信號，編碼數(shù)據作為比特流133而輸出。在第2圖片編碼部104上被輸入單一顏色分量組成的一幅圖片部分的視頻圖像信號，編碼數(shù)據作為比特流233ac而輸出。這些比特流基于共通編碼/獨立編碼識別信號101的狀態(tài)在多路復用部105中被多路復用成比特流106的形式并輸出。S卩，多路復用部105將通過獨立地編碼各自顏色分量的輸入圖像信號而得到的編碼數(shù)據、和表示編碼數(shù)據是針對哪個顏色分量的數(shù)據的參數(shù)多路復用于比特流。在比特流106的多路復用之際，在經過獨立編碼處理時的存取單元中可以將片數(shù)據的比特流中的多路復用順序、傳送順序在存取單元內的圖片(各顏色分量)間進行交錯。g卩，圖12表示存取單元內的片交錯不可進行的情況(a)和片交錯可以進行的情況(b)。片在交錯不可進行的情況下(a)，在CO分量的編碼完成以前Cl分量的圖片數(shù)據不能多路復用于比特流，在C0，C1分量的編碼完成以前C2分量的圖片數(shù)據不能多路復用于比特流，但在片交錯可以進行的情況下(b)，只要CO分量的1片部分被多路復用于比特流，C1分量就可以立刻多路復用，只要C0，Cl分量的1片部分被多路復用于比特流，C2分量就可以立即多路復用。在此情況下，在解碼裝置側需要識別接收到的片數(shù)據是屬于存取單元內的哪個顏色分量的片。因此，在片數(shù)據開頭的首標區(qū)域如圖io那樣利用將要多路復用的顏色分量識別標志。此外，這里所記載的圖12的片交錯的概念與圖3所公開的概念等價。通過設為這種構成，在編碼裝置如圖11的編碼裝置那樣對3個顏色分量的圖片分別3組使用獨立的第2圖片編碼部6，并通過并行處理來進行編碼的情況下，只要自身的圖片的片數(shù)據能夠準備好就可以立刻送出編碼數(shù)據，而不用等待其他顏色分量圖片的編碼數(shù)據的完成。在AVC中能夠將一個圖片分割成多個片數(shù)據來進行編碼，對于片數(shù)據長度或片內所包含的宏塊的個數(shù)，能夠依照編碼條件靈活地使其變化。在圖像空間上相鄰的片之間，確保片解碼處理的獨立性，所以內部預測或算術編碼等附近上下文無法利用，因此使片數(shù)據長度盡量長的話編碼效率較高。另一方面，當在傳送或記錄的過程中錯誤混入比特流的情況下，片數(shù)據長度越短從錯誤的恢復就越早，越易于抑制品質劣化。若不多路復用顏色分量識別標志而是使片的長度或構成、顏色分量的順序等固定下來，則在編碼裝置中比特流的生成條件將被固定化，就無法靈活地對應多種多樣的編碼要求條件。另外，如果能夠如圖12那樣構成比特流，則能夠在編碼裝置中減少傳送所需要的發(fā)送緩沖器大小、即能夠減小編碼裝置側的處理延遲。圖11中表示其情形。若在跨越圖片的片數(shù)據的多路復用不被許可的情況下，編碼裝置就需要在某特定顏色分量的圖片的編碼結束之前的期間、使其他圖片的編碼數(shù)據緩沖起來。這就意味著發(fā)生圖片層級下的延遲。另一方面，如同圖最下部所示那樣，如果可以在片層級上進行交錯，某特定顏色分量的圖片編碼部就能夠以片數(shù)據為單位將編碼數(shù)據輸出到多路復用部，并能夠抑制延遲。此外，既可以在一個顏色分量圖片內，使其中所包含的片數(shù)據以宏塊的光柵掃描(rasterscan)順序進行傳送，還可以構成為在一個圖片內也進行交錯傳送。以下，對第1圖片編碼部102以及第2圖片編碼部104的動作詳細地進行說明。第1圖片編碼部102的動作概要圖13中表示第1圖片編碼部102的內部構成。在該圖中設輸入視頻圖像信號1以4:4:4格式、且以圖6形式的3個顏色分量匯集起來的宏塊為單位被輸入。首先，在預測部110中，從存儲器111所保存的活動補償預測參照圖像數(shù)據之中選擇參照圖像，并以該宏塊為單位進行活動補償預測處理。在存儲器111中保存著涉及多個時刻的、3個顏色分量所構成的多幅參照圖像數(shù)據，在預測部110從它們之中以宏塊為單位選擇最佳的參照圖像來進行活動預測。存儲器111內的參照圖像數(shù)據的配置既可以對每個顏色分量以面順序分開保存，也可以將各顏色分量的采樣以點順序進行保存。進行活動補償預測的塊大小準備了7種，首先，對宏塊單位能夠選擇16X16、16X8、8X16、8X8中的某種大小。進而，在8X8被選擇的情況下，能夠對各8X8塊逐個選擇8X8、8X4、4X8、4X4中的某種大小。在預測部110中對于16X16、16X8、8X16、8X8的全部或者一部分塊大小/8X8、8X4、4X8、4X4的子塊大小、和規(guī)定搜索范圍的活動矢量以及可以利用的1幅以上的參照圖像按宏塊逐個執(zhí)行活動補償預測處理，并通過活動矢量和預測中所用的參照圖像識別信息112和減法器113，獲得作為活動補償預測單位的每個塊的預測差分信號114。預測差分信號114在編碼模式判定部115中對其預測效率進行評價，并從預測部110所執(zhí)行的預測處理之中輸出獲得對于預測對象的宏塊最佳的預測效率的宏塊類型/子宏塊類型116和活動矢量/參照圖像識別信息112。宏塊類型、子宏塊類型、參照圖像索引、活動矢量等宏塊首標信息全部作為對3個顏色分量共通的首標信息而決定，被使用于編碼并多路復用于比特流。在預測效率的最佳性的評價時，既可以以抑制運算量的目的而僅僅評價針對某規(guī)定顏色分量(例如RGB之中的G分量、YUV之中的Y分量等)的預測誤差量，也可以雖然運算量大但為了獲得最佳的預測性能而綜合評價關于所有顏色分量的預測誤差量。另外，在最終宏塊類型/子宏塊類型116的選定時，有時還添加通過編碼控制部117的判斷而確定的針對各類型的權重系數(shù)118。同樣，在預測部110還執(zhí)行內部預測。在內部預測執(zhí)行時信號112上輸出內部預測模式信息。以后，在不特別對內部預測、活動補償預測進行區(qū)別的情況下，輸出信號112將內部預測模式信息、活動矢量情報、參照圖像識別編號匯集起來稱為預測附加信息。對于內部預測也是既可以評價僅規(guī)定顏色分量的預測誤差量，還可以綜合評價關于全部顏色分量的預測誤差量。最后，將宏塊類型設成內部預測還是設成中間預測，在編碼模式判定部115中根據預測效率或者編碼效率來評價并選定。將所選定的宏塊類型/子宏塊類型116、和通過基于預測附加信息112的內部預測/活動補償預測而得到的預測差分信號114輸出到變換部119。變換部119對所輸入的預測差分信號114進行變換并作為變換系數(shù)輸出到量化部120。此時，還可以從4X4或8X8中的某一個選擇作為進行變換的單位的塊的大小。在可以選擇變換塊大小的情況下，將編碼時所選擇的塊大小反映在變換塊大小指定標志134的值上，并將同一標志多路復用于比特流。量化部120基于由編碼控制部117確定的量化參數(shù)121對所輸入的變換系數(shù)進行量化，并作為已量化變換系數(shù)122輸出到可變長度編碼部123。已量化變換系數(shù)122包含3個顏色分量部分的信息，并在可變長度編碼部123中通過霍夫曼編碼或算術編碼等手段而進行熵編碼。另外，已量化變換系數(shù)122經逆量化部124、逆變換部125被復原成局部解碼預測差分信號126，并通過將所選定的宏塊類型/子宏塊類型116與基于預測附加信息112所生成的預測圖像127在加法器128進行相加而生成局部解碼圖像129。局部解碼圖像129在用解塊濾波器130實施了塊失真除去處理后，為了在以后的活動補償預測處理中使用而被保存到存儲器lll。在可變長度編碼部123上還輸入表示是否對該宏塊實施解塊濾波(de-blockingfilter)的解塊濾波器控制標志131?？勺冮L度編碼部123上所輸入的已量化變換系數(shù)122、宏塊類型/子宏塊類型116、預測附加信息112、量化參數(shù)121按照預定的規(guī)則(語法)作為比特流被排列/整形，并作為以圖6形式的宏塊1個或多個匯集起來的片數(shù)據為單位經過NAL單元化的編碼數(shù)據被輸出到發(fā)送緩沖器132。在發(fā)送緩沖器17中與編碼裝置所連接的傳送線路的頻帶和記錄介質的讀出速度相吻合使比特流平滑化并作為視頻流133進行輸出。另外，依照發(fā)送緩沖器133中的比特流儲存狀況向編碼控制部117實施反饋，以控制以后的視頻圖像幀的編碼中的發(fā)生代碼量。此外，第1圖片編碼部102的輸出是將3分量匯集在一起的單位的片，與將存取單元匯集在一起的單位下的代碼量等價，所以發(fā)送緩沖器132還可以原封不動配置在多路復用部105內。在本實施方式7中的第1圖片編碼部102中，根據共通編碼/獨立編碼識別信號101可以識別序列中的所有片數(shù)據是C0，Cl，C2混合片(即，3個顏色分量的信息混在一起的片)，所以在片首標上顏色分量識別標志不多路復用。第2圖片編碼部104的動作概要圖14中表示第2圖片編碼部104的內部構成。沿用557769JP03的圖1的說明來創(chuàng)建圖H的說明草稿，具有圖號為圖1那樣的地方。在該圖中，設輸入視頻圖像信號la以圖7形式的單一顏色分量的采樣組成的宏塊為單位被輸入。首先，在預測部210中，從存儲器211所保存的活動補償預測參照圖像數(shù)據之中選擇參照圖像，并以該宏塊為單位進行活動補償預測處理。在存儲器211中將涉及多個時刻的、單一顏色分量單一顏色分量設為編碼處理對象是要點。圖H與圖I的外部不同的是存儲器16的面數(shù)。能夠保存所構成的多幅參照圖像數(shù)據，在預測部210中從它們之中以宏塊為單位選擇最佳的參照圖像來進行活動預測。還可以使存儲器211以將3個顏色分量部分匯集在一起的單位與存儲器111共享。在進行活動補償預測的塊大小上準備了7種，首先，對宏塊單位能夠選擇16X16、16X8、8X16、8X8中的某種大小。進而，在選擇了8X8的情況下，能夠對各8X8塊逐個選擇8X8、8X4、4X8、4X4中的某種大小。在預測部210中對于16X16、16X8、8X16、8X8的全部或者一部分塊大小/8X8、8X4、4X8、4X4的子塊大小、和規(guī)定搜索范圍的活動矢量以及可以利用的1幅以上的參照圖像按宏塊逐個執(zhí)行活動補償預測處理，并通過活動矢量和預測中所用的參照圖像索引212和減法器213，獲得作為活動補償預測單位的每個塊的預測差分信號214。預測差分信號214在編碼模式判定部215中對其預測效率進行評價，并從預測部210所執(zhí)行的預測處理之中輸出獲得對于預測對象的宏塊最佳的預測效率的宏塊類型/子宏塊類型216和活動矢量/參照圖像索引212。宏塊類型(macro-blocktypes)、子宏塊類型(sub_macro_blocktypes)、參照圖像索弓l(referenceimageindexes)、活動矢量(motionvectors)等宏塊首標信息全部作為對于輸入視頻圖像信號la的單一顏色分量信號的首標信息而決定，被使用于編碼并多路復用于比特流。在預測效率的最佳性的評價時，僅評價對于作為編碼處理對象的單一顏色分量的預測誤差量。另外，在最終宏塊類型/子宏塊類型216的選定時，有時還添加通過編碼控制部217的判斷而確定的針對各類型的權重系數(shù)218。同樣，在預測部210還執(zhí)行內部預測。將預測部110設為執(zhí)行內部、中間預測雙方的塊。在內部預測執(zhí)行時信號112上輸出內部預測模式信息。以后，在不特別對內部預測、活動補償預測進行區(qū)別的情況下，信號112稱為預測附加信息。對于內部預測也是僅評價對于作為編碼處理對象的單一顏色分量的預測誤差量。最后，將宏塊類型設成內部預測還是設成中間預測，根據預測效率或者編碼效率來評價并選定。將所選定的宏塊類型/子宏塊類型216、和根據預測附加信息212而得到的預測差分信號214輸出到變換部219。變換部219對所輸入的預測差分信號214進行變換并作為變換系數(shù)輸出到量化部220。此時，還可以從4X4或8X8中的某一個選擇作為進行變換的單位的塊的大小。在可以選擇的情況下，將編碼時所選擇的塊大小反映在變換塊大小指定標志234的值上，并將同一標志多路復用于比特流。量化部220基于由編碼控制部217確定的量化參數(shù)221對所輸入的變換系數(shù)進行量化，并作為已量化變換系數(shù)222輸出到可變長度編碼部223。已量化變換系數(shù)222包含單一顏色分量部分的信息，并在可變長度編碼部223中通過霍夫曼編碼或算術編碼等手段而進行熵編碼。另外，已量化變換系數(shù)222經逆量化部224、逆變換部225被復原成局部解碼預測差分信號226，并通過將所選定的宏塊類型/子宏塊類型216與基于預測附加信息212所生成的預測圖像227在加法器228進行相加而生成局部解碼圖像229。局部解碼圖像229在用解塊濾波器230實施了塊失真除去處理后，為了在以后的活動補償預測處理中使用而被保存到存儲器211。在可變長度編碼部223上還輸入表示是否對該宏塊實施解塊濾波的解塊濾波器控制標志231。可變長度編碼部223上所輸入的已量化變換系數(shù)222、宏塊類型/子宏塊類型216、預測附加信息212、量化參數(shù)221按照預定的規(guī)則(語法(syntax))作為比特流被排列/整形，并作為以圖7形式的宏塊1個或多個匯集起來的片數(shù)據為單位經過NAL單元化的編碼數(shù)據被輸出到發(fā)送緩沖器232。在發(fā)送緩沖器232中與編碼裝置所連接的傳送線路的頻帶和記錄介質的讀出速度相吻合使比特流平滑化并作為視頻流233進行輸出。另外，依照發(fā)送緩沖器232中的比特流儲存狀況向編碼控制部217實施反饋，以控制以后的視頻圖像幀的編碼中的發(fā)生代碼此外，還可以構成為在第2圖片編碼部104的輸出是僅單一顏色分量的數(shù)據組成的片，而需要以將存取單元匯集起來的單位進行代碼量控制的情況下，在多路復用部105內設置將全部顏色分量的片進行多路復用的單位的共通發(fā)送緩沖器，并基于該緩沖器的占有量對各顏色分量的編碼控制部217實施反饋。另外，此時既可以僅使用全部顏色分量的發(fā)生信息量來進行編碼控制，還可以增添各顏色分量的發(fā)送緩沖器232的狀態(tài)來進行編碼控制。在僅使用全部顏色分量的發(fā)生信息量來進行編碼控制的情況下，還能夠采用將與發(fā)送緩沖器232相當?shù)墓δ苡枚嗦窂陀貌?05內的共通發(fā)送緩沖器來實現(xiàn)，并省略發(fā)送緩沖器232的構成。在本實施方式7中的第2圖片編碼部104中，可以根據共通編碼/獨立編碼識別信號101來識別序列中的所有片數(shù)據是單一顏色分量片(即，C0片或者Cl片或者C2片)，所以在片首標中始終多路復用顏色分量識別標志，并在解碼裝置側識別哪個片符合存取單元內的哪個圖片數(shù)據。因此，各第2圖片編碼部104能夠將來自各自的發(fā)送緩沖器232的輸出在積攢了1片部分的數(shù)據的時刻送出，而不用積攢一幅圖片部分。此外，第1圖片編碼部102與第2圖片編碼部104僅僅是將宏塊首標信息作為3分量共通的信息來處理還是作為單一顏色分量的信息來處理上不同，以及片數(shù)據的比特流構成不同。圖13或圖14中的預測部和變換部/逆變換部、量化部/逆量化部、解塊濾波器等基本的處理塊大多僅僅在是與3個顏色分量的信息匯集進行處理還是只處理單一顏色分量的信息上不同，在第1圖片編碼部102和第2圖片編碼部104上還能夠用共通的功能塊來實現(xiàn)。從而，不僅能夠作為如圖ll那樣的完全獨立的編碼處理部，還能夠將圖13或圖14的基本構成要素適宜組合起來實現(xiàn)多種多樣的編碼裝置的實裝。另外，只要按面順序持有第1圖片編碼部102中的存儲器111的配置，就能夠在第1圖片編碼部102與第2圖片編碼部104中使參照圖像保存存儲器的構成共通地實現(xiàn)。另外，雖然沒有圖示，在本實施方式中的編碼裝置中，設想對按照圖9、圖10的排列的視頻流106進行緩沖的假想流緩沖器(編碼圖片緩沖器)、和對解碼圖像313a、313b進行緩沖的假想幀存儲器(解碼圖片緩沖器)的存在，并生成視頻流106以使得沒有編碼圖片緩沖器的上溢/下溢、解碼圖片緩沖器的破綻。該控制主要在編碼控制部117、217進行。這樣一來，在解碼裝置中，在按照編碼圖片緩沖器與解碼圖片緩沖器的動作(假想緩沖器模型)對視頻流106進行解碼的情況下，保證在解碼裝置中不發(fā)生破綻。下面規(guī)定假想緩沖器模型。編碼圖片緩沖器的動作以存取單元單位來進行。如上述那樣，在進行共通解碼處理的情況下在1個存取單元中包含一幅圖片部分的編碼數(shù)據，而進行獨立解碼處理的情況下在1個存取單元包含顏色分量數(shù)部分的圖片(如果是3分量則是3圖片部分)的編碼數(shù)據。對于編碼圖片緩沖器所規(guī)定的動作，是存取單元的最初比特和最后比特被輸入編碼圖片緩沖器的時刻和存取單元的比特從編碼圖片緩沖器被讀出的時刻。此外，從編碼圖片緩沖器的讀出規(guī)定為瞬時進行，并設存取單元的所有比特在同一時刻從編碼圖片緩沖器讀出。當存取單元的比特從編碼圖片緩沖器讀出，就被輸入到高位首標解析部，如上述那樣，在第1圖片解碼部或者第2圖片解碼部進行解碼處理，并作為按存取單元單位經過整頓的彩色視頻圖像幀而得以輸出。此外，從編碼圖片緩沖器讀出比特，并作為存取單元單位的彩色視頻圖像幀輸出之前的處理在假想緩沖器模型的規(guī)定上設為瞬時進行。按存取單元單位所構成的彩色視頻圖像幀被輸入到解碼圖片緩沖器，并計算出從解碼圖片緩沖器的輸出時刻。從解碼圖片緩沖器的輸出時刻是將規(guī)定的延遲時間加在從編碼圖片緩沖器的讀出時刻上的值。這一延遲時間可以多路復用于比特流以對解碼裝置進行控制。在延遲時間為0的情況、即從解碼圖片緩沖器的輸出時刻等于從編碼圖片緩沖器的讀出時刻的情況下，在彩色視頻圖像幀被輸入到解碼圖片緩沖器的同時從解碼圖片緩沖器被輸出。在除此以外的情況、即從解碼圖片緩沖器的輸出時刻遲于從編碼圖片緩沖器的讀出時刻的情況下，直到成為從解碼圖片緩沖器的輸出時刻之前彩色視頻圖像幀被保存在解碼圖片緩沖器中。如上述那樣，按存取單元單位來規(guī)定從解碼圖片緩沖器的動作。圖15表示本實施方式7的解碼裝置的概略構成。在該圖中共通解碼處理在第1圖片解碼部302中得以執(zhí)行，獨立解碼處理在顏色分量判定部303與第2圖片解碼部304(準備3個顏色分量部分)中得以執(zhí)行。比特流106在高位首標解析部300中被分割成NAL單元單位，序列參數(shù)組和圖片參數(shù)組等高位首標信息直接進行解碼并保存到解碼裝置內的第1圖片解碼部302、顏色分量判定部303、第2圖片解碼部304可以參照的規(guī)定存儲區(qū)。按序列單位被多路復用的共通編碼/獨立編碼識別信號(num_piCtUres_in_aU)作為高位首標信息的一部分進行解碼/保持。經過解碼的num_pictures_in_au被供給開關(SW)301，開關301如果num_picturesjn—au=1就將每個圖片的片NAL單元供給第1圖片解碼部302，如果num_pictures_in_au=3就供給顏色分量判定部303。SP，如果num_pictures_in_au=1就由第1圖片解碼部302進行共通解碼處理，如果皿m—picturesjn—au=3就由3個第2圖片解碼部304進行獨立解碼處理。第1及第2圖片解碼部的詳細動作后面敘述。顏色分量判定部303構成對表示是針對哪個顏色分量的編碼數(shù)據的參數(shù)進行檢測的檢測手段，根據圖10中所示的顏色分量識別標志的值來識別片NAL單元相當于現(xiàn)在的存取單元內的哪個顏色分量圖片，并向適當?shù)牡?圖片解碼部304分配供給。根據這種解碼裝置的構成就具有即便接收如圖12那樣在存取單元內片交錯得以編碼的比特流，也能夠容易地判別哪個片屬于哪個顏色分量圖片并正確地進行解碼的效果。第1圖片解碼部302的動作概要圖16中表示第1圖片解碼部302的內部構成。第1圖片解碼部302以C0、C1、C2混和片的單位接收從圖11的編碼裝置輸出的按照圖9，圖10的排列的比特流106，并以圖6所示的3個顏色分量的采樣組成的宏塊為單位來進行解碼處理，將輸出視頻圖像幀復原?？勺冮L度解碼部310將比特流106作為輸入，按照規(guī)定的規(guī)則(語法)對比特流106進行解讀，抽取出在3分量部分的已量化變換系數(shù)122、以及3分量中共通使用的宏塊首標信息(宏塊類型/子宏塊類型116、預測附加信息112、變換塊大小指定標志134、量化參數(shù)121)。已量化變換系數(shù)122與量化參數(shù)121—起被輸入到與第1圖片編碼部102進行同樣處理的逆量化部124，進行逆量化處理。接著，該輸出被輸入到與第1圖片編碼部102進行同樣處理的逆變換部125，向局部解碼預測差分信號126復原(如果變換塊大小指定標志134存在于比特流106中，則在逆量化、逆變換處理過程中對其進行參照)。另一方面，預測部311在第1圖片編碼部102中的預測部110之中、僅僅包含參照預測附加信息112而生成預測圖像127的處理，對預測部311輸入宏塊類型/子宏塊類型116、預測附加信息112，得到3分量部分的預測圖像127。在宏塊類型表示內部預測的情況下，按照內部預測模式信息從預測附加信息112得到3分量部分的預測圖像127，在宏塊類型表示中間預測的情況下，按照活動矢量、參照圖像索引從預測附加信息112得到3分量部分的預測圖像127。局部解碼預測差分信號126與預測圖像127通過加法器128進行加法運算，得到3分量部分的暫定解碼圖像129。暫定解碼圖像129被用于以后宏塊的活動補償預測，所以在與第1圖片編碼部102進行同樣處理的解塊濾波器130中對3分量部分的暫定解碼圖像采樣實施了塊失真除去處理以后，作為解碼圖像313得以輸出，同時被保存到存儲器312。此時，基于由可變長度解碼部310經過解讀的解塊濾波器控制標志131的指示使解塊濾波器處理作用于暫定解碼圖像129。在存儲器312中保存涉及多個時刻的、用3個顏色分量構成的多幅參照圖像數(shù)據。在預測部311中，從它們之中選擇以宏塊單位從比特流抽取出的參照圖像索引所示的參照圖像并生成預測圖像生成。存儲器312內的參照圖像數(shù)據的配置既可以對每個顏色分量按面順序分開進行保存，也可以將各顏色分量的采樣按點順序進行保存。解碼圖像313包含3個顏色分量，原封不動成為構成共通解碼處理中的存取單元313a的彩色視頻圖像幀。第2圖片解碼部304的動作概要圖17中表示第2圖片解碼部304的內部構成。第2圖片解碼部304以顏色分量判定部303中分成的CO或、Cl或、C2片NAL單元450的單位接收從圖11的編碼裝置輸出的按照圖9，圖10的排列的比特流106，并以圖7所示的單一顏色分量的采樣組成的宏塊為單位來進行解碼處理，將輸出視頻圖像幀復原。可變長度解碼部410將比特流450作為輸入，按照規(guī)定的規(guī)則(語法)對比特流405進行解讀，抽取出單一顏色分量的已量化變換系數(shù)222、以及適用于單一顏色分量的宏塊首標信息(宏塊類型/子宏塊類型216、預測附加信息212、變換塊大小指定標志234、量化參數(shù)221)。已量化變換系數(shù)222與量化參數(shù)221—起被輸入到與第2圖片編碼部104進行同樣處理的逆量化部224，進行逆量化處理。接著，該輸出被輸入到與第2圖片編碼部104進行同樣處理的逆變換部225，向局部解碼預測差分信號226復原(如果變換塊大小指定標志234存在于比特流450中，則在逆量化、逆變換處理過程中對其進行參照)。另一方面，預測部311在第2圖片編碼部104中的預測部210之中、僅僅包含參照預測附加信息212而生成預測圖像227的處理，對預測部411輸入宏塊類型/子宏塊類型216、預測附加信息212，得到單一顏色分量的預測圖像227。在宏塊類型表示內部預測的情況下，按照內部預測模式信息從預測附加信息212得到單一顏色分量的預測圖像227，在宏塊類型表示中間預測的情況下，按照活動矢量、參照圖像索引從預測附加信息212得到單一顏色分量的預測圖像227。局部解碼預測差分信號226與預測圖像227通過加法器228進行加法運算，得到單一顏色分量宏塊的暫定解碼圖像229。暫定解碼圖像229被用于以后宏塊的活動補償預測，所以在與第2圖片編碼部104進行同樣處理的解塊濾波器230中對單一顏色分量的暫定解碼圖像采樣實施了塊失真除去處理以后，作為解碼圖像451得以輸出，同時被保存到存儲器412。此時，基于由可變長度解碼部410經過解讀的解塊濾波器控制標志231的指示使解塊濾波器處理作用于暫定解碼圖像229。解碼圖像410僅包含單一顏色分量的采樣，通過將圖15中其他經過并行處理的第2圖片解碼部304各自的輸出按存取單元313b的單位進行整頓，作為彩色視頻圖像幀而得以構成。如根據以上說明就可明白那樣，第1圖片解碼部302和第2圖片解碼部304僅僅是將宏塊首標信息作為3分量共通的信息來處理還是作為單一顏色分量的信息來處理上不同，以及片數(shù)據的比特流構成不同，圖13或圖14中的活動補償預測處理和逆變換、逆量化等基本的解碼處理塊的大多能夠在第1圖片解碼部302和第2圖片解碼部304上用共通的功能塊來實現(xiàn)。從而，不僅作為如圖15那樣完全獨立的編碼處理部，還能夠將圖16或圖17的基本構成要素適宜組合起來而實現(xiàn)多種多樣的解碼裝置的實裝。雖然在當前時刻具體的裝置構成沒有記述徹底...，另外，只要按面順序具有第1圖片解碼部302中的存儲器312的配置，就能夠使存儲器312、存儲器412的構成在第1圖片解碼部302與第2圖片解碼部304中共通采用。此外，圖15的解碼裝置當然還可以接收從作為圖11的編碼裝置的其他形態(tài)，將共通編碼/獨立編碼識別信號3始終固定化成"獨立編碼處理"，根本不使用第1圖片編碼部102地對全幀進行獨立編碼這樣構成的編碼裝置所輸出的比特流并進行解碼。另外，作為圖15的解碼裝置的其他形態(tài)，還可以在以共通編碼/獨立編碼識別信號3始終被固定化成"獨立編碼處理"為前提的利用形態(tài)下，作為省略了開關301和第1圖片解碼部302的僅僅進行獨立解碼處理的解碼裝置而構成。進而，如果使第1圖片解碼部302具備將以往的YUV(用亮度信號(Y)、亮度信號與藍色分量之差(U)、亮度信號與紅色分量之差(V)這3個信息來表現(xiàn)顏色的形式的信號)4:2:0格式作為對象并匯集3分量而經過編碼的AVChighprofile基準的比特流的解碼功能，并采用在高位首標解析部300中，參照從比特流106解碼的profile標識符來判定19是以哪種格式經過編碼的比特流，并將判定結果作為共通編碼/獨立編碼識別信號3的信號線的一部分信息傳給開關301和第1圖片解碼部302的構成，則還能夠構成確保針對以往的YUV4:2:0格式的比特流的互換性的解碼裝置。此外，在本實施方式7中的第1圖片編碼部102中，由于3個顏色分量的信息混和存在于片數(shù)據，且對3個顏色分量實施完全相同的內部/中間預測處理，所以有時候在預測誤差信號空間殘留著顏色分量間的信號相關性。作為將其除去的努力，例如，還可以構成為對預測誤差信號實施顏色空間變換處理。在圖18，圖19中表示具有這種構成的第1圖片編碼部102的例子。此外，在圖18，圖19中，顏色空間變換部及逆顏色空間變換部以外與圖13共通。圖18是以進行變換處理之前的像素層級來實施顏色空間變換處理的例子，將顏色空間變換部150a配置在變換部之前，并將逆顏色空間變換部151a配置在逆變換部之后。圖19是一邊適宜選擇處理對象的頻率分量一邊對經過變換處理后所得到的系數(shù)數(shù)據實施顏色空間變換處理的HHI提出的例子，將顏色空間變換部150b配置在變換部之后，并將逆顏色空間變換部151b配置在逆變換部之前。通過限定實施顏色空間變換的頻率分量，就具有能夠抑制特定顏色分量中所包含的高頻噪聲分量傳播給不太包含噪聲的其它顏色分量的效果。在可以適應性選擇作為顏色空間變換處理的對象的頻率分量的情況下，將在解碼側用于判斷編碼時的選擇的信號傳輸信息152aa、152b多路復用于比特流。顏色空間變換處理即可以依照編碼對象的圖像信號的性質按宏塊單位切換使用多個變換方式，也可以構成為以宏塊為單位來判定有無變換。還能夠構成為以序列層級等指定好可選擇的變換方式的類別，并以圖片、片、宏塊等為單位來指定從它們之中選擇哪個。另外，還可構成為可以選擇是在正交變換之前進行實施還是在之后進行實施。在進行這些適應性編碼處理情況下，能夠構成為對于可選擇的所有選擇項，用編碼模式判定部115或者215進行編碼效率的評價以選擇編碼效率最高的選項。在實施這些適應性編碼處理的情況下，將在解碼側用于判斷編碼時的選擇的信號傳輸信息152a、152b多路復用于比特流。這種信號傳輸還可以在與片、圖片、GOP、序列等宏塊不同的層級進行指定。在圖20，圖21中表示與圖18，圖19編碼裝置對應的解碼裝置。此外，在圖20，圖21中，逆顏色空間變換部以外與圖16共通。圖20是對由圖18的編碼裝置在變換處理前進行顏色空間變換而經過編碼的比特流進行解碼的解碼裝置。可變長度解碼部從比特流中解碼出選擇是否在逆顏色空間變換部151a中進行變換的有無變換的信息、和選擇在逆顏色空間變換部中可以執(zhí)行的變換方式的信息152aa，并向逆顏色空間變換部151a供給。圖20的解碼裝置，在逆顏色空間變換部151a中基于這些信息實施針對逆變換后的預測誤差信號的顏色空間變換處理。另外，圖21是對由圖19的編碼裝置通過在變換處理后選擇處理對象的頻率分量進行顏色空間變換而經過編碼的比特流進行解碼的解碼裝置。可變長度解碼部從比特流中解碼出選擇是否在逆顏色空間變換部151b中進行變換的有無變換的信息、選擇在逆顏色空間變換部中所執(zhí)行的變換方式的信息、和包含確定實施顏色空間變換的頻率分量的信息等的識別信息152b并供給逆顏色空間變換部151b。圖21的解碼裝置，在逆顏色空間變換部151b中基于這些信息對逆量化后的變換系數(shù)數(shù)據實施顏色空間變換處理。圖20、圖21的解碼裝置與圖15的解碼裝置相同，如果使第1圖片解碼部302具備將以往的YUV4:2:0格式作為對象并匯集3分量而經過編碼的AVChighprofile基準的比特流的解碼功能，并采用在高位首標解析部300中，參照從比特流106解碼的profile標識符來判定是以哪種格式經過編碼的比特流，并將判定結果作為共通編碼/獨立編碼識別信號101的信號線的一部分信息傳給開關10和第1圖片解碼部302的構成，則還能夠構成確保針對以往的YUV4:2:0格式的比特流的互換性的解碼裝置。圖22中表示以往的YUV4:2:0格式的比特流所包含的宏塊首標信息的編碼數(shù)據的構成。在宏塊類型為內部預測時包含內部色差預測模式500的編碼數(shù)據。在宏塊類型為中間預測時使用宏塊首標信息所包含的參照圖像識別編號、活動矢量信息以與亮度分量不同的方法生成色差分量的活動矢量。就確保針對以往的YUV4:2:0格式的比特流的互換性的解碼裝置的動作進行說明。如上述那樣，設第l圖片解碼部302具備以往的YUV4:2:0格式的比特流的解碼功能。第1圖片解碼部的內部構成與圖16同樣。對具備以往的YUV4:2:0格式的比特流的解碼功能的第1圖片解碼部302的可變長度解碼部310的動作進行說明。當視頻流106被輸入可變長度解碼部310時，對色差格式指示標志進行解碼。色差格式指示標志是被包含在視頻流106的序列參數(shù)首標中，表示輸入視頻圖像格式為4:4:4、4:2:2、4:2:0、4:0:0中的哪種格式的標志。視頻流106的宏塊首標信息的解碼處理根據色差格式指示標志之值來進行切換。在宏塊類型表示內部預測的情況下，色差格式指示標志表示4:2:0或4:2:2的情況下從比特流對內部色差預測模式進行解碼。在色差格式指示標志表示4:4:4的情況下跳過內部色差預測模式的解碼。在色差格式指示標志表示4:0:0的情況下，由于是輸入視頻圖像信號僅由亮度信號所構成的格式(4:0:0格式)，所以跳過內部色差預測模式的解碼。內部色差預測模式以外的宏塊首標信息的解碼處理，與不具備以往的YUV4:2:0格式的比特流的解碼功能的第1圖片解碼部302的可變長度解碼部310相同。通過以上處理，當視頻流106被輸入可變長度解碼部310時，就抽取出色差格式指示標志(未圖示)、3分量部分的已量化變換系數(shù)、宏塊首標信息(宏塊類型/子宏塊類型、預測附加信息、變換塊大小指定標志、量化參數(shù))。在預測部311上輸入色差指示格式指示標志(未圖示)與預測附加信息，并得到3分量部分的預測圖像127。圖23中表示確保針對以往的YUV4:2:0格式的比特流的互換性的第1圖片解碼部302的預測部311的內部構成，并對其動作進行說明。切換部501判別宏塊類型，在宏塊類型表示內部預測的情況下，在切換部502中判別色差格式指示標志之值。在色差格式指示標志之值表示4:2:0或4:2:2中的某一個的情況下，按照內部預測模式信息與內部色差預測模式信息從預測附加信息得到3分量部分的預測圖像127。3分量之中、亮度信號的預測圖像，按照內部預測模式信息通過亮度信號內部預測部而得以生成。色差信號2分量的預測圖像，按照內部色差預測模式信息通過進行與亮度分量不同處理的色差信號內部預測部而得以生成。在色差格式指示標志之值表示4:4:4的情況下，3分量所有的預測圖像按照內部預測模式信息通過亮度信號內部預測部而得以生成。在色差格式指示標志之值表示4:0:0的情況下，由于4:0:0格式僅由亮度信號(1分量)所構成，所以僅亮度信號的預測圖像按照內部預測模式信息通過亮度信號內部預測部而得以生成。當在切換部501中宏塊類型表示中間預測的情況下，通過切換部503對色差格式指示標志之值進行判別。在色差格式指示標志之值表示4:2:0或4:2:2中的某一個的情況下，對于亮度信號，通過亮度信號中間預測部從預測附加信息按照活動矢量、參照圖像索弓l，并按照AVC規(guī)格按照所確定的亮度信號的預測圖像生成方法得以預測圖像。關于色差信號2分量的預測圖像，通過色差信號中間預測部，基于色差格式對從預測附加信息得到的活動矢量進行比例變換而生成色差活動矢量，并從根據預測附加信息得到的參照圖像索引指示的參照圖像，基于上述色差活動矢量按照AVC規(guī)格所確定的方法而生成預測圖像。在色差格式指示標志之值表示4:0:0的情況下，由于4:0:0格式僅由亮度信號(l分量)所構成，所以僅亮度信號的預測圖像按照活動矢量、參照圖像索引通過亮度信號中間預測部而得以生成。如以上那樣，由于設置生成以往的YUV4:2:0格式的色差信號的預測圖像的部件，并依照從比特流經過解碼的色差格式指示標志之值切換3分量的預測圖像的生成所用的部件，所以能夠構成確保針對以往的YUV4:2:0格式的比特流的互換性的解碼裝置。此外，如果對供給圖20，圖21的解碼裝置的比特流106，以序列參數(shù)組等單位賦予表示是否是如圖15的解碼裝置那樣不支持顏色空間變換處理的解碼裝置也可以解碼的比特流的信息，則圖20，圖21、圖15的任意解碼裝置都可以進行依照各自的解碼性能的比特流的解碼，具有易于確保比特流的互換性的效果。實施方式8.在本實施方式8中，就在圖11或圖15等實施方式7的編碼裝置/解碼裝置中，僅作為其輸入輸出對象的比特流之構成不同的其它實施方式進行敘述。本實施方式8中的編碼裝置以圖24所示的比特流構成來進行編碼數(shù)據的多路復用。在圖9構成的比特流中，AUDNAL單元包含primary_pic_type之類的信息作為其要素。這如表所示那樣表示在AUDNAL單元開始的存取單元內的圖片數(shù)據被編碼之際的圖片編碼類型的信息。[表1]Meaningofprimary_pic_type(自規(guī)格摘錄)primary—pic—typeslice—typevaluesthatmaybepresentintheprimarycodedpicture0I1I，P2I，P，B3SI<table>tableseeoriginaldocumentpage23</column></row><table>例如，在primary—pic—type=0的情況下，表示圖片內全部進行內部編碼。在primary_piC_type=1的情況下，表示經過內部編碼的片、和可以僅使用一個參照圖片列表來進行活動補償預測的片能夠在圖片內混和。由于primary_piC_type是規(guī)定一個圖片能夠使用怎樣的編碼模式來進行編碼的信息，所以通過在編碼裝置側對這一信息進行操作，就能夠進行與輸入視頻圖像信號的性質和隨機存取功能等種種條件相適應的編碼。在實施方式7中，primary_pic_type每個存取單元只有一個，所以在進行獨立編碼處理的時的存取單元中設primary_piC_type在3個顏色分量圖片上共通。在本實施方式8中，在進行各顏色分量圖片的獨立編碼情況下，在圖9的AUDNAL單元內依照皿m—pictures_in_au之值通過追加插入剩余2個顏色分量圖片部分的primary_pic_type，還是如圖24的比特流構成那樣，從表示顏色分量圖片之開始的NAL單元(ColorChannelDelimiter)開始各顏色分量圖片的編碼數(shù)據這樣來構成，并在此CCDNAL單元中中包含對應的圖片的primary_pic_type信息這樣來構成。此外，實施方式8的CCDNAL單元的概念與圖4所公開的概念等價。在這一構成中，由于各顏色分量圖片的編碼數(shù)據是一幅圖片部分匯集起來進行多路復用，所以實施方式7中所述的顏色分量識別標志(color—channeljdc)包含在CCDNAL單元中而不是片首標。由此，就能夠將需要針對各片的多路復用的顏色分量識別標志的信息總括在圖片單位的數(shù)據中，具有能夠削減附加信息的效果。另外，檢測作為字節(jié)串而構成的CCDNAL單元對每個顏色分量圖片驗證一次color—cha皿eljdc即可，能夠快速地找到顏色分量圖片的開頭而不用進行可變長度解碼處理，所以在解碼裝置側，因將解碼對象的NAL單元對每個顏色分量分離，故即便不逐一驗證片首標中的color—cha皿el」dc也可，能夠順利地進行向第2圖片解碼部的數(shù)據供給。另一方面，在這種構成中，如實施方式7的圖12所述那樣的、降低編碼裝置的緩沖器大小、處理延遲的效果減弱，所以還可以構成為在更高位的層級(序列或G0P)中對顏色分量識別標志按片單位進行多路復用、還是按顏色分量圖片單位進行多路復用進行信號傳輸。通過采用這種比特流構成，編碼裝置就可以依照其利用形態(tài)進行靈活的實裝。實施方式9.進而，作為其他實施方式，還可以通過圖25所示的比特流構成來進行編碼數(shù)據的多路復用。在該圖中，圖24中包含于CCDNAL單元的color_channel_idc，primary_pic_type包含在各AUD中。在本實施方式9中的比特流構成下，即便在獨立編碼處理的情況下也是在一個存取單元中包含一個(顏色分量)圖片這樣來構成。即，在圖25中定義為1圖片(l顏色分量)=l存取單元。即便在這種構成中，能夠將顏色分量識別標志的信息總括在圖片單位的數(shù)據中而帶來的附加信息的削減效果，另外，檢測作為字節(jié)串而構成的AUDNAL單元對每個圖片驗證一次color—cha皿eljdc即可、并能夠快速地找到顏色分量圖片的開頭而不用進行可變長度解碼處理，所以在解碼裝置側，因將解碼對象的NAL單元對每個顏色分量分離，故能夠順利地進行向第2圖片解碼部的數(shù)據供給而不用逐一驗證片首標中的color—cha皿el」dc。另一方面，由于1幀或1半幀的圖像由3個存取單元所構成，所以需要指定3個存取單元是同一時刻的圖像數(shù)據。因此，還能夠在圖25的比特流構成下，進而在AUD之中賦予各圖片的序列編號(時間方向的編碼/解碼順序等)這樣來構成。根據這種構成，在解碼裝置側就可以驗證各圖片的解碼/顯示順序或顏色分量屬性、IDR的是非等而根本不用對片數(shù)據進行解碼，可以高效率地進行比特流層級的編輯和特殊再生。另外，在圖9、圖24或圖25的比特流構成中，還可以構成為在AUD或CCD的區(qū)域保存指定一個顏色分量圖片所包含的片NAL單元的個數(shù)的信息。此外，對于上述所有的實施方式，變換處理、逆變換處理即可以是如DCT那樣保證正交性的變換，也可以是如AVC那樣的嚴格而言不是諸如DCT的正交變換而是與量化/逆量化處理組合起來近似正交性的變換。另外，還可以是不進行變換地將預測誤差信號作為像素層級的信息來進行編碼這樣的構成。權利要求一種圖像編碼裝置，對4:4:4格式的彩色圖像進行壓縮編碼，生成比特流，所述圖像編碼裝置的特征在于將表示對4:4:4格式的各顏色分量的信號是否作為4:0:0格式的圖片獨立地進行編碼的識別信息多路復用于比特流，并且在該識別信息表示把各顏色分量的信號作為4:0:0格式的圖片獨立地進行編碼的情況下，構成為以共同的圖片編碼類型對屬于同一存取單元的所有顏色分量的信號進行編碼。2.—種圖像編碼方法，對4:4:4格式的彩色圖像進行壓縮編碼，生成比特流，所述圖像編碼方法的特征在于將表示對4:4:4格式的各顏色分量的信號是否作為4:0:0格式的圖片獨立地進行編碼的識別信息多路復用于比特流，并且在該識別信息表示把各顏色分量的信號作為4:0:0格式的圖片獨立地進行編碼的情況下，構成為以共同的圖片編碼類型對屬于同一存取單元的所有顏色分量的信號進行編碼。3.—種圖像解碼方法，對由多個顏色分量組成的圖像信號進行編碼所得到的編碼數(shù)據進行了多路復用的比特流作為輸入來進行解碼處理，所述圖像解碼方法的特征在于使用表示是針對上述比特流中被多路復用的哪個顏色分量的編碼數(shù)據的參數(shù)，來進行各自顏色分量的編碼數(shù)據的解碼處理，并且將上述編碼數(shù)據的編碼的類型設為對全部顏色分量共通。4.一種圖像解碼方法，將由多個顏色分量組成的圖像信號進行編碼所得到的編碼數(shù)據進行了多路復用的比特流作為輸入來進行解碼處理，所述圖像解碼方法的特征在于使用表示是針對上述比特流中被多路復用的哪個顏色分量的編碼數(shù)據的參數(shù)，來進行各自顏色分量的編碼數(shù)據的解碼處理，并且基于上述編碼數(shù)據的序列參數(shù)組的ID中所包含的多個格式的參數(shù)，切換以不同格式進行解碼處理的模式。全文摘要在對3個顏色分量使用4:0:0格式進行了編碼處理的情況下，可以將一幅圖片部分的數(shù)據包含在一個存取單元中，同時還可以在各自顏色分量間使時間信息一致、使編碼模式一致。在對多個顏色分量組成的輸入圖像信號進行壓縮處理的圖像編碼方式中，將通過對各自顏色分量的輸入圖像信號獨立地進行編碼處理而得到的編碼數(shù)據、和表示上述編碼數(shù)據是針對哪個顏色分量的參數(shù)多路復用于比特流。另外，在將多個顏色分量組成的圖像信號經過壓縮的比特流作為輸入來進行解碼處理的圖像解碼方式中，使用表示是針對哪個顏色分量的編碼數(shù)據的參數(shù)來進行各自顏色分量的編碼數(shù)據的解碼處理。文檔編號H04N7/26GK101707713SQ200910222300公開日2010年5月12日申請日期2006年6月19日優(yōu)先權日2005年9月20日發(fā)明者關口俊一,出原優(yōu)一,守屋芳美,山田悅久,杉本和夫,村上篤道,淺井光太郎申請人:三菱電機株式會社