專利名稱：記錄裝置、再現(xiàn)裝置及方法
技術(shù)領(lǐng)域：
本發(fā)明涉及高速拍攝的運(yùn)動圖像的記錄、再現(xiàn)方法及其裝置。
背景技術(shù)：
運(yùn)動圖像的壓縮編碼技術(shù)中有MPEG。近年來，作為普及的主要MPEG標(biāo)準(zhǔn)，有 MPEG2、MPEG4、MPEG4AVC等。該壓縮技術(shù)的主要特征是，在對編碼對象的圖像幀(下面稱作 編碼對象幀)和已經(jīng)編碼并重構(gòu)的圖像幀(下面稱作參考幀)之間的差分進(jìn)行了 DCT(離 散余弦變換)和量化后，進(jìn)行可變長編碼。圖1是表示現(xiàn)有技術(shù)的圖。例如，在通過MPEG的編碼裝置，在如圖1 (a)所示的期間T編碼兩幀的情況下，幀 序號用1 4所示的編碼對象幀與各編碼對象幀的參考幀的關(guān)系以如圖1(a)的各箭頭所 示這種參考關(guān)系(1和2、2和3、3和4有參考關(guān)系)來進(jìn)行編碼。圖2是表示連續(xù)顯示和抽取(間引t )顯示例的圖。在通過MPEG的解碼裝置再現(xiàn)在前述條件下編碼的數(shù)據(jù)的情況下，首先如圖2(a) 所示，在每個期間T連續(xù)再現(xiàn)的情況下，一邊從幀1開始依次進(jìn)行解碼，一邊進(jìn)行再現(xiàn)。另 一方面，如圖2(b)所示，在每個期間T抽取再現(xiàn)幀1、3的情況下，由于幀3與幀2有參考關(guān) 系，所以為再現(xiàn)幀3還需要解碼幀2。即，即使是不需要再現(xiàn)的幀，若該幀是有參考關(guān)系的 幀，也必須解碼該幀。因此，解碼處理的處理量多，對于在期間T中含有的多個幀存在參考 關(guān)系的編碼數(shù)據(jù)，在每個期間T僅有解碼1幀能力的裝置中，有抽取再現(xiàn)困難的問題。針對該問題，在(專利文獻(xiàn)1)中，以圖1(b)的箭頭所示這種參考關(guān)系(1和2、1 和3、3和4有參考關(guān)系)來進(jìn)行編碼。由此，在解碼裝置中抽取再現(xiàn)幀1、3的情況下，可以 跳過幀2的解碼。圖3是表示現(xiàn)有技術(shù)的圖。并且，通過將專利文獻(xiàn)1的技術(shù)適用于高速拍攝時的運(yùn)動圖像幀的編碼，例如在 如圖3(a)所示的期間T中輸入了常規(guī)的4倍幀數(shù)的情況下，可以提供對如圖3(b)所示這 種1/4慢速再現(xiàn)、如圖3 (c)所示這種1/2慢速再現(xiàn)、如圖3 (d)所示這種1/1慢速(等速) 再現(xiàn)抑制了處理負(fù)擔(dān)的增加的再現(xiàn)裝置。但是，對高速拍攝的運(yùn)動圖像的抽取再現(xiàn)相對于再現(xiàn)速度的恰當(dāng)?shù)倪\(yùn)動模糊 (motion blur)不足，有越接近等速再現(xiàn)越會成為不自然的運(yùn)動圖像的問題和因與常規(guī)拍 攝時相比曝光時間短，所以圖像質(zhì)量差的問題。圖4是表示現(xiàn)有的技術(shù)的圖。因此，為了解決這些問題，在專利文獻(xiàn)2中，在如圖4(a)所示的期間T中輸入了常 規(guī)的4倍幀數(shù)的情況下，如圖4(b) (d)所示，對于1/4、1/2、1/1 (等速)，一邊相加幀，一 邊進(jìn)行再現(xiàn)。但是，在邊相加幀邊進(jìn)行再現(xiàn)的情況下，即使是抽取再現(xiàn)，也需要解碼全部幀，所 以再現(xiàn)的速度越接近等速再現(xiàn)，再現(xiàn)裝置的負(fù)擔(dān)越大。
專利文獻(xiàn)1 日本特開2003-299103號公報專利文獻(xiàn)2 日本特開2006-33242號公報現(xiàn)有技術(shù)中，很難同時改善圖像質(zhì)量和處理負(fù)擔(dān)，本發(fā)明提供一種對于高速拍攝 的運(yùn)動圖像，兼顧了良好的圖像質(zhì)量并抑制了處理負(fù)擔(dān)的增加的記錄、再現(xiàn)方法及其裝置。S卩，基于圖3的技術(shù)，通過進(jìn)行圖1(b)的跳過技術(shù)，能夠使處理量成為較少的處理 量，但另一方面圖像質(zhì)量差。另一方面，根據(jù)圖4的技術(shù)，實(shí)現(xiàn)了高圖像質(zhì)量，但是為了得到 相加幀而不能跳過，不能實(shí)現(xiàn)基于圖1(b)技術(shù)的處理量降低，從而處理量較大
發(fā)明內(nèi)容
本發(fā)明鑒于這些方面而完成的，其所要解決的技術(shù)問題是，在進(jìn)行再現(xiàn)2個幀兩 者的常規(guī)再現(xiàn)的情況下，以及在進(jìn)行使常規(guī)再現(xiàn)時通過兩個幀的再現(xiàn)來觀看的顯示內(nèi)容可 以僅通過1個幀的再現(xiàn)來觀看的抽取再現(xiàn)的情況下，都可以兼顧高圖像質(zhì)量和少處理量。本發(fā)明的記錄裝置包含對流中含有的連續(xù)2個幀中的一個幀進(jìn)行編碼的編碼部 和將所述2個幀中的另一個幀與所述一個幀相加的加法部。另外，本發(fā)明的再現(xiàn)裝置包括 解碼部，從一個幀被編碼后的編碼后幀解碼該一個幀；和減法部，從該一個幀和與該一個幀 連續(xù)的另一個幀相加后的加法幀中，減去該一個幀，并將相減后的幀作為所述另一個幀生 成。由此，將通過再現(xiàn)2個幀兩者來觀看的顯示內(nèi)容僅通過再現(xiàn)1個幀來觀看時(抽 取再現(xiàn)時)，加法幀被再現(xiàn)，從而防止了例如運(yùn)動模糊的不足，因此實(shí)現(xiàn)了高圖像質(zhì)量。
并且，在再現(xiàn)加法幀時，僅簡單地解碼加法幀，解碼的幀個數(shù)是一個就夠了，通過 解碼較少個數(shù)的幀就足夠了。由此，處理量為較少的處理量就足夠了。另外，在再現(xiàn)2個幀 兩者時，解碼一個幀和另一個幀這兩個幀，而可將解碼的幀數(shù)維持在較少數(shù)目。這里，若與 幀的解碼處理的處理量相比，則幀的減法處理的處理量相對少。另一方面，在編碼時，也僅 簡單為編碼一個幀并編碼加法幀，而可以將編碼的幀數(shù)目維持在較少數(shù)目。這里，幀的加法 處理的處理量也少。因此，在進(jìn)行常規(guī)再現(xiàn)時和進(jìn)行抽取再現(xiàn)時都可兼顧高圖像質(zhì)量和少處理量。發(fā)明的效果根據(jù)本發(fā)明，可以提供對于高速拍攝的運(yùn)動圖像兼顧了良好的圖像質(zhì)量和抑制了 處理負(fù)擔(dān)的增加的記錄、再現(xiàn)方法及其裝置。


圖1是表示現(xiàn)有技術(shù)的圖；圖2(a)是表示連續(xù)再現(xiàn)的例子的圖，圖2(b)是表示抽取再現(xiàn)的例子的圖；圖3是表示現(xiàn)有技術(shù)的圖；圖4是表示現(xiàn)有技術(shù)的圖；圖5是表示本發(fā)明的實(shí)施方式1的記錄方式的圖；圖6是表示本發(fā)明的實(shí)施方式2的再現(xiàn)方式的圖；圖7是本發(fā)明的實(shí)施方式1的記錄裝置的結(jié)構(gòu)圖；圖8是本發(fā)明的實(shí)施方式1的再現(xiàn)裝置的結(jié)構(gòu)圖9是攝像機(jī)系統(tǒng)的結(jié)構(gòu)圖；圖10是數(shù)字電視系統(tǒng)的結(jié)構(gòu)圖；圖11是表示記錄處理中的現(xiàn)有和本實(shí)施方式的運(yùn)算量的比較圖；
圖12是表示再現(xiàn)處理中的現(xiàn)有和本實(shí)施方式的運(yùn)算量的比較圖；圖13是程序進(jìn)行的處理的流程圖；圖14是再現(xiàn)部進(jìn)行的處理的流程圖；圖15是表示視頻編碼器的結(jié)構(gòu)圖；圖16是表示多路復(fù)用流的圖；圖17是表示視頻解碼器的結(jié)構(gòu)圖；圖18是表示輸入到視頻解碼器的多路復(fù)用流的圖；圖19是表示程序的頭部結(jié)構(gòu)的圖；圖20是表示編碼處理調(diào)用部使其處理開始的編碼處理部的結(jié)構(gòu)圖；圖21是解碼處理調(diào)用部調(diào)用的解碼處理部的結(jié)構(gòu)圖；圖22是表示記錄處理調(diào)用部使其執(zhí)行開始的記錄處理部的結(jié)構(gòu)圖；圖23是表示主要部分的再現(xiàn)處理調(diào)用部調(diào)用的再現(xiàn)處理部的結(jié)構(gòu)圖；圖24是表示程序的主要部分的結(jié)構(gòu)圖；圖25是表示攝像機(jī)系統(tǒng)的動作圖。附圖標(biāo)記的說明500 輸入部501 第1選擇部504 第1編碼部506 第1加法部507 第2選擇部510 第2編碼部512 第2加法部514 第3編碼部516 第2記錄運(yùn)算部
具體實(shí)施例方式下面，參考附圖來說明本發(fā)明的實(shí)施方式。為解決現(xiàn)有問題，本發(fā)明的記錄方法中，對N個(N是2的冪乘數(shù))幀記錄編碼奇 數(shù)幀后的比特流，重復(fù)Log2N(底數(shù)為2的對數(shù))次生成將奇數(shù)幀和偶數(shù)幀相加后的幀并記 錄對所述相加后的幀僅編碼奇數(shù)幀后的比特流，從而生成Log2N+l個比特流。另一方面，在本發(fā)明的再現(xiàn)方法中，第1比特流是對N個(N是2的冪乘數(shù))幀編 碼奇數(shù)幀后得到的，第2到第Log2N+l比特流是通過重復(fù)Log2N(底數(shù)為2的對數(shù))次生成 將所述編碼對象幀的奇數(shù)幀和偶數(shù)幀相加后的幀并記錄對所述相加后的幀僅編碼奇數(shù)幀 后的比特流而得到的，對于所述第1比特流和第2到第Log2N+l比特流，在再現(xiàn)N個幀中的 1幀的情況下，再現(xiàn)解碼第Log2N+l比特流后重構(gòu)的幀，在再現(xiàn)N個幀中的2幀的情況下， 將解碼第Log2N比特流后重構(gòu)的幀作為奇數(shù)幀加以再現(xiàn)，并將由第Log2N+l比特流重構(gòu)的幀減去所述奇數(shù)幀后的幀作為偶數(shù)幀重構(gòu)后加以再現(xiàn)，在再現(xiàn)N個幀中的M個幀(M是3以 上N以下的2的冪乘數(shù))的情況下，將解碼第Log2M+l比特流后重構(gòu)的幀作為奇數(shù)幀加以 再現(xiàn)，并將由第Log2M到第Log2N+l比特流重構(gòu)的M/2幀減去由對應(yīng)的第Log2M+l比特流 重構(gòu)的所述奇數(shù)幀后的幀，作為偶數(shù)幀加以再現(xiàn)。下面，加以詳細(xì)說明。(實(shí)施方式1)圖5是表示本發(fā)明的實(shí)施方式1的記錄方法的圖。下面，為簡化說明，設(shè)高速拍攝時的輸入幀如圖5(la)所示，在期間T(單位時間) 中為4幀。若設(shè)常規(guī)拍攝時在期間T記錄1幀，則成為進(jìn)行4倍速的記錄。首先，使用圖5來說明記錄方法的示意。如圖5 (Ia)所示，在期間T輸入數(shù)量為2的2次冪(4 = 2~k(k = 2、“A~B”表示A 的B次冪))的幀1，2，3，4，在第1記錄步驟中，如圖5(lb)所示，記錄編碼奇數(shù)幀1、3后的 第1比特流。另外，在第1記錄步驟中，如圖5(lc)所示，生成分別將奇數(shù)幀和偶數(shù)幀相加 后的幀1+2、3+4。在第2記錄步驟中(參考后述的圖7的第2記錄運(yùn)算部516)，記錄對所 述相加后的幀編碼奇數(shù)幀即幀1+2后的第2比特流。在第2記錄步驟中，如圖5 (Id)所示， 生成將第1記錄步驟中相加后的幀的奇數(shù)幀和偶數(shù)幀相加后的幀1+2+3+4。并且，在第3記 錄步驟中，記錄編碼所述幀1+2+3+4幀后的第3比特流。圖7是表示記錄部151的結(jié)構(gòu)圖。接著，使用圖7來說明本實(shí)施方式中的記錄裝置(記錄部151、圖9的視頻編碼器 900)。將從輸入部500得到的中貞1，2，3，4 (參考圖5、記錄輸入流IS (圖5、圖15)、第1記 錄運(yùn)算輸入流)通過第1選擇部501分為奇數(shù)幀1，3與偶數(shù)幀2，4，并存儲在各自的存儲 部502、503中。由第1編碼部504編碼存儲部502中存儲的奇數(shù)幀，并將生成的第1比特 流(第1記錄輸出流Val)存儲在存儲部505中。接著，通過第1加法部506從存儲部502和503中存儲的奇數(shù)幀和偶數(shù)幀生成奇 數(shù)幀1+2和偶數(shù)幀3+4。相加后的幀1+2、3+4(第1記錄運(yùn)算輸出流)通過第2選擇部507 分別存儲在存儲部508、509中。由第2編碼部510編碼存儲部508中存儲的奇數(shù)幀，并將 所生成的第2比特流(第2記錄輸出流Va2)存儲到存儲部511中。最后，通過第2加法部512從存儲部508和509中存儲的奇數(shù)幀和偶數(shù)幀生成幀 1+2+3+4(第2記錄運(yùn)算輸出流)。將相加后的幀1+2+3+4存儲在存儲部513中(第3記錄 運(yùn)算輸入流)。通過第3編碼部514編碼存儲部513中存儲的奇數(shù)幀，并將所生成的第3比 特流(第3記錄輸出流Va3)存儲到存儲部515中。本實(shí)施方式中，為簡化說明，以輸入幀數(shù)為4( = 2的2次冪=2"k)為例來進(jìn)行 說明，但在N是2的冪乘數(shù)的情況下，可通過設(shè)置Log2N個(k個)處理塊(第2記錄運(yùn)算 部516)來對應(yīng)。另外，與編碼部514含有的第3記錄運(yùn)算部相一致，記錄運(yùn)算部隨之也有 Log2N+l (= k+1)個。這里，Log2N表示以2為底數(shù)的N的對數(shù)。編碼部504、510、514若滿足性能要求，可以共用。即，可以構(gòu)成實(shí)現(xiàn)編碼部504、 510、514的各功能的一個大功能塊。對于加法部506、512也同樣，若滿足性能要求也可共用。
圖11是表示記錄處理的現(xiàn)有例(圖4的技術(shù))和本發(fā)明的運(yùn)算量比較的圖。根據(jù)該結(jié)構(gòu)，例如在設(shè)編碼部(第1編碼部 第3編碼部)中的1個幀編碼所需 的運(yùn)算量為100、加法部(第1編碼部 第2加法部)的一次加法幀的生成所需的運(yùn)算量 為40的情況下，若比較現(xiàn)有技術(shù)和本實(shí)施方式1的運(yùn)算量，則如圖11所示，本實(shí)施方式1 的運(yùn)算量比現(xiàn)有例的運(yùn)算量僅稍稍多出加法處理的量。但是，在k變大的情況下(圖11的 η變大的情況下)，由于與編碼處理的處理量相比，加法處理的處理量少，所以本實(shí)施方式1 的運(yùn)算量與現(xiàn)有例的運(yùn)算量成為相等。另外，實(shí)施方式的例子中，由于編碼部、加法部等可 由多個構(gòu)成，所以容易并聯(lián)分散化，對于降低耗電量，也比現(xiàn)有例有效。另外，由于并聯(lián)分散 化容易，所以由于并聯(lián)分散化引起的高速化，本實(shí)施方式1的處理中，即使處理量相同，也 可以比現(xiàn)有例更高速地進(jìn)行處理。(實(shí)施方式2)圖6是表示本發(fā)明的實(shí)施方式2中的再現(xiàn)方法的圖。下面，為簡化說明，設(shè)高速拍攝時的輸入幀在如圖6(2a)(圖5(la)所示的記錄輸 入流is)所示的期間T中為4幀。若設(shè)常規(guī)拍攝時在期間T記錄1幀，則成為進(jìn)行4倍速 的記錄。 首先，使用圖6來說明再現(xiàn)方法的示意。如圖6 (2a)所示，對于期間T中數(shù)量為2的2次冪(4 = 2~k個)的幀1，2，3，4，以 對通過實(shí)施方式1中記載的記錄方式生成的第1 第3比特流(圖7所示的第1記錄輸出 流Val 第3記錄輸出流Va3、圖8所示的第1再現(xiàn)輸入流Vb3 第3再現(xiàn)輸入流Vbl)適 用本實(shí)施方式的再現(xiàn)方法為前提。如后所述，第1再現(xiàn)輸入流Vb3 第3再現(xiàn)輸入流Vbl 還稱作第1再現(xiàn)運(yùn)算輸入流Vb3 第3再現(xiàn)運(yùn)算輸入流Vb 1。在如圖6 (2d)所示，再現(xiàn)4幀中的1幀的情況下，即進(jìn)行等速再現(xiàn)(1/1倍的慢速 再現(xiàn)、S卩、1/(2~(L-1))倍(L= 1)的慢速再現(xiàn))的情況下，再現(xiàn)將第3比特流(圖8所示的 第3再現(xiàn)輸入流Vb3)解碼后重構(gòu)的幀DO (幀1+2+3+4)(后述的第3再現(xiàn)輸出流)。在如圖6(2c)所示，再現(xiàn)4幀中的兩幀的情況下、即進(jìn)行1/2倍的低速再現(xiàn)的情況 下(L = 2)，將解碼第2比特流(圖8所示的第2再現(xiàn)輸入流Vb2)后重構(gòu)的幀作為奇數(shù)幀 CO (幀1+2)再現(xiàn)。在L = 2的情況下，將由第3比特流(圖8的第3再現(xiàn)輸入流Vb3)重構(gòu)的幀DO (幀 1+2+3+4)減去所述奇數(shù)幀CO (幀1+2)后的幀Cl (幀3+4)作為偶數(shù)幀重構(gòu)后再現(xiàn)。在L = 3的情況下，即，在如圖6 (2b)所示，再現(xiàn)4幀中的4幀的情況下，即進(jìn)行 1/4慢速再現(xiàn)的情況下，將解碼第1比特流(圖8的第1再現(xiàn)輸入流Vbl)后重構(gòu)的幀作為 奇數(shù)幀1、3再現(xiàn)，生成從由第2比特流(圖8的第2再現(xiàn)輸入流Vb2)重構(gòu)的幀CO減去奇 數(shù)幀1后的幀2，并生成從幀Cl減去奇數(shù)幀3后的幀4，來作為偶數(shù)幀再現(xiàn)。圖8是表示再現(xiàn)部171的結(jié)構(gòu)圖。接著，使用圖8來說明本實(shí)施方式的再現(xiàn)裝置(再現(xiàn)部171、圖9的視頻解碼器 901)。在再現(xiàn)4幀中的1幀的情況下(L = 1的情況下)，即，進(jìn)行等速再現(xiàn)(1/(2~ (L-I) 倍的慢速再現(xiàn)、L=I)的情況下，由第3解碼部601重構(gòu)存儲部600中存儲的第3比特流 (參考第3再現(xiàn)輸入流Vb3、圖6的第3群)，并將重構(gòu)幀存儲到記錄部602中。由此，作為所存儲的重構(gòu)幀形成的流，構(gòu)成作為等速再現(xiàn)用的流的第3記錄輸出流。在再現(xiàn)4幀中的2幀的情況下(L = 2的情況下)，即，進(jìn)行1/2慢速再現(xiàn)的情況 下(1/(2" (2-1)) = 1/(2" (L-I)))，由第2解碼部604重構(gòu)存儲部603中存儲的第2比特 流(第2再現(xiàn)輸入流Vb2)，并將重構(gòu)幀存儲到記錄部605中。并且，通 過第2減法部606， 根據(jù)記錄部602中存儲的幀1+2+3+4和該記錄部605中存儲的幀1+2，來生成幀3+4，并將 所生成的幀3+4存儲到記錄部607中。第2選擇部617將記錄部605中存儲的幀作為奇數(shù) 幀，將記錄部607中存儲的幀作為偶數(shù)幀，來進(jìn)行選擇。由此，作為由第2選擇部617選出 的各幀構(gòu)成的流，構(gòu)成了作為1/2慢速再現(xiàn)用的流的第2記錄輸出流(由圖6(2c)的帶陰 影和沒有陰影的各幀構(gòu)成的流)。在再現(xiàn)4幀中的4幀的情況下(L = 3的情況下)，即進(jìn)行1/4慢速再現(xiàn)的情況下， 通過第1解碼部609重構(gòu)圖8右上所示的存儲部608中存儲的第1比特流(第1再現(xiàn)輸入 流Vbl)，重構(gòu)幀通過選擇部610 (第1選擇部的第1部分)分為奇數(shù)幀、偶數(shù)幀，并分別存 儲在記錄部611、612中。并且，通過減法部613 (第3減法部的第1部分)，根據(jù)記錄部605 中存儲的幀1+2和記錄部611中存儲的幀1，來生成幀2，并將所生成的幀存儲在記錄部614 中。通過減法部615 (第3減法部的第2部分)，根據(jù)記錄部607中存儲的幀3+4和記錄部 612中存儲的幀3，來生成幀4，并將所生成的幀4存儲在記錄部616中。選擇部618 (第1 選擇部的第2部分)將記錄部611中存儲的幀作為幀1、將記錄部614中存儲的幀作為幀 2、將記錄部612中存儲的幀作為幀3、將記錄部616中存儲的幀作為幀4依次進(jìn)行選擇。由 此，構(gòu)成作為1/4慢速再現(xiàn)用的流的第1再現(xiàn)輸出流。選擇部619選擇基于再現(xiàn)速度的幀，并輸出到存儲再現(xiàn)幀的存儲部620中。例如， 更具體的，選擇部619從1 3中確定上述L的值。并且，根據(jù)確定的值L，來進(jìn)行上述的選 擇和輸出。本實(shí)施方式中，為簡化說明，以輸入幀數(shù)為4( = 2的2次冪)為例進(jìn)行了說明(取 k = 2的情形為具體例)，但是在N是2的冪乘數(shù)的情況下，也可通過設(shè)置Log2N個(k個、N =2"k)處理塊(第1再現(xiàn)運(yùn)算部621)來進(jìn)行對應(yīng)。另外，與第3解碼部601包含的第k+1 記錄運(yùn)算部相一致，由k+Ι個記錄運(yùn)算部構(gòu)成。解碼部601、604、609若滿足性能要求，可以共用。對于減法部606、613、615也同
樣，若滿足性能要求，也可以共用。圖12是表示再現(xiàn)處理中的現(xiàn)有例的運(yùn)算量和本實(shí)施方式的運(yùn)算量的比較的圖。例如，在設(shè)各解碼部進(jìn)行的1個幀的解碼(重構(gòu))所需的運(yùn)算量為100、各減法部 進(jìn)行的對1個加法幀的減法所需的運(yùn)算量為40的情況下，比較現(xiàn)有例的運(yùn)算量和本實(shí)施方 式的運(yùn)算量。如圖12所示，可以看出本實(shí)施方式的運(yùn)算量越接近等速再現(xiàn)(圖12中的較 左側(cè)的數(shù)據(jù))，與現(xiàn)有例的運(yùn)算量相比，越大幅減少。這是因為在本實(shí)施方式中，幀的解碼 處理僅進(jìn)行與所再現(xiàn)的幀的數(shù)目相同的次數(shù)(單位時間T中2~ (L-I)次)，但現(xiàn)有例中，不 管再現(xiàn)的速度(參考上述L)如何，而僅簡單地解碼所有與時間T有關(guān)的各幀(解碼21個 幀)，故本實(shí)施方式的解碼次數(shù)比現(xiàn)有例的解碼的次數(shù)少。因此，在處理性能不足的再現(xiàn)裝 置中也可以進(jìn)行再現(xiàn)。另外，在結(jié)構(gòu)簡單的再現(xiàn)裝置中也可進(jìn)行再現(xiàn)等，適用范圍廣。此外， 可以實(shí)現(xiàn)成本降低。對于再現(xiàn)速度，由于提供了基于與其再現(xiàn)速度相配合的適當(dāng)幀相加后的加法幀而形成的運(yùn)動圖像，所以可再現(xiàn)自然的運(yùn)動模糊，并可以基于幀相加補(bǔ)償曝光不充分。由此，可兼顧高圖像質(zhì)量和少處理量。由于解碼部、減法部等分別可以由多個解碼部等構(gòu)成，從而并聯(lián)分散化容易，所以 也有利于降低耗電量。圖9是攝像機(jī)系統(tǒng)1的結(jié)構(gòu)圖。 圖10是數(shù)字電視系統(tǒng)Ia的結(jié)構(gòu)圖。圖9所示的攝像機(jī)系統(tǒng)1是設(shè)置有具有本實(shí)施方式涉及的上述記錄部151的視頻 編碼器(記錄裝置)900和具有再現(xiàn)部171的視頻解碼器(再現(xiàn)裝置)901的運(yùn)動圖像記錄 再現(xiàn)設(shè)備的一例。如圖10所示的數(shù)字電視系統(tǒng)Ia是設(shè)置有具有本實(shí)施方式涉及的記錄 部151的視頻解碼器(再現(xiàn)裝置)1000的運(yùn)動圖像再現(xiàn)設(shè)備的一例。視頻編碼器(記錄裝 置)900可以具有記錄部151，視頻編碼器(記錄裝置)900也可以解釋為是記錄部151構(gòu)成 的塊。同樣，視頻解碼器(再現(xiàn)裝置)901可以具有再現(xiàn)部171，視頻解碼器(再現(xiàn)裝置)901 也可以是再現(xiàn)部171構(gòu)成的塊。視頻解碼器(再現(xiàn)裝置)1000可具有再現(xiàn)部171，視頻解碼 器(再現(xiàn)裝置)1000中也可解釋為是再現(xiàn)部171構(gòu)成的塊。下面，繼續(xù)進(jìn)行說明。其中，下面的說明僅僅是一例。由圖9表示攝像機(jī)系統(tǒng)1的結(jié)構(gòu)。攝像機(jī)系統(tǒng)1包括視頻編碼器900、視頻解碼器901和存儲部902。攝像機(jī)系統(tǒng)1高速拍攝運(yùn)動圖像。這里，所謂高速拍攝是指以比例如作為常規(guī)幀 率的60fps高的幀率進(jìn)行的拍攝。這里，60fps僅僅是常規(guī)的幀率的單純一例。常規(guī)幀率也 可以解釋為基于NTSC標(biāo)準(zhǔn)的29. 97X2 = 59. 94fps。攝像機(jī)系統(tǒng)1高速拍攝的幀率例如是 (60X(2~k))fps(k彡1)。幀率是(60X(2~k))fps的高速拍攝是2~k倍的高速拍攝。高速拍攝的運(yùn)動圖像在通常情況下，越是高速進(jìn)行攝影時，越更慢再現(xiàn)。例如，若 以2~k倍的速度(2~k倍的幀率)進(jìn)行攝影，則進(jìn)行l(wèi)/(2~k)倍的慢速再現(xiàn)。S卩，以短2~k 倍的時間間隔進(jìn)行拍攝的各幀以比其時間間隔長2~k倍的時間間隔來進(jìn)行顯示。由此，將 顯示各幀的時間間隔調(diào)整為適合于人眼視覺的時間間隔。下面，將這種在長2~k倍的時間 間隔下的再現(xiàn)、即l/(2~k)倍的慢速再現(xiàn)稱作標(biāo)準(zhǔn)慢速的再現(xiàn)。視頻編碼器900 (圖9)對高速拍攝的運(yùn)動圖像流進(jìn)行編碼。存儲部902存儲編碼后的編碼后流。視頻解碼器901通過輸入存儲部902中存儲的編碼后流等，輸入高速拍攝的運(yùn)動 圖像的編碼后流，并解碼輸入的編碼后流。由圖15表示視頻編碼器900 (圖9)的結(jié)構(gòu)。視頻編碼器900包括記錄部151 (圖15、圖7)和多路復(fù)用部154。記錄部151輸入高速拍攝的運(yùn)動圖像的記錄輸入流IS(圖15)，生成將輸入的記 錄輸入流IS編碼后的k+Ι個記錄輸出流、即第1記錄輸出流Val 第(k+Ι)的記錄輸出流 Va3(圖15)，并輸出所生成的第1記錄輸出流Val 第(k+Ι)記錄輸出流Va3。這里，在該實(shí)施方式中，將通過攝像機(jī)系統(tǒng)進(jìn)行2~2 = 4倍的高速拍攝的k = 2的 例子作為一例來加以說明。由圖7表示記錄部151的結(jié)構(gòu)。記錄部151包括輸入部500、第1選擇部501、第1編碼部504、第1加法部506、第2選擇部507、第2編碼部510、第2加法部512和第3編碼部514。這里，通過第t選擇部(第2選擇部507等)、第t編碼部(第2編碼部510等) 和第t加法部(第2加法部512等)的整體，構(gòu)成第t記錄運(yùn)算部(第2記錄運(yùn)算部516 等)(1彡t彡k)。由第k+Ι記錄運(yùn)算部構(gòu)成第k+Ι編碼部(第3編碼部514)。第t記錄運(yùn)算部(1 < t彡k+Ι)輸入第t記錄運(yùn)算輸入流。并且，第t記錄運(yùn)算 部根據(jù)所輸入的第t記錄運(yùn)算輸入流，生成第t記錄運(yùn)算輸出流，并輸出所生成的記錄運(yùn)算 輸出流。這里，所輸出的第t記錄運(yùn)算輸出流是前述的記錄部151輸出的第1記錄輸出流 Val 第k十1記錄輸出流(第3記錄輸出流Va3)中的(參考圖15)第t記錄輸出流Vat。由圖5表示第t記錄運(yùn)算輸入流(1彡t彡k+Ι)。 第1記錄運(yùn)算輸入流是輸入到記錄部151的記錄輸入流IS (圖5 (Ia))(圖5 (Ib))。 第1記錄運(yùn)算輸入流包含圖5的第1群的帶陰影的各幀(奇數(shù)幀)和不帶陰影的各幀(偶 數(shù)幀)兩者。并且，第t記錄運(yùn)算輸入流是圖5的第t群的列所示的第t群流。這里，第t記錄 運(yùn)算輸入流(第t群流)包含第t群的各幀中帶陰影的各幀和不帶陰影的各幀兩者。第t記錄運(yùn)算輸入流中，所含有的第a幀是將第t記錄運(yùn)算輸入流的第2Xa幀和 第2Xa+l的幀相加后的加法幀(a是整數(shù))。并且，第t記錄運(yùn)算輸入流中所含有第a幀是 記錄輸入流IS的第a幀。若第1記錄運(yùn)算輸入流以標(biāo)準(zhǔn)慢速來進(jìn)行再現(xiàn)，則進(jìn)行60fps等標(biāo)準(zhǔn)幀率下的運(yùn) 動圖像的再現(xiàn)。并且，若第t記錄運(yùn)算輸入流與標(biāo)準(zhǔn)慢速相比以2~(t-l)倍較快再現(xiàn)，則進(jìn) 行標(biāo)準(zhǔn)幀率下的再現(xiàn)k+Ι)。將這種與標(biāo)準(zhǔn)慢速(l/(2~k)倍的慢速再現(xiàn))相比以 2" (t-Ι)倍較快再現(xiàn)稱作(1/2~ (k-(t-l)))倍的慢速再現(xiàn)(1 < t彡k+Ι)。并且，將與標(biāo)準(zhǔn) 慢速相比以2~((k+l)-l)倍較快再現(xiàn)(以2~k倍較快再現(xiàn))、即1/1 = 1倍速度的再現(xiàn)稱作 等速的再現(xiàn)。高速拍攝的運(yùn)動圖像的記錄輸入流IS在單位時間T中包含2~k個幀。將為了看 到運(yùn)動圖像的單位時間T的顯示內(nèi)容而顯示比2~k個少的個數(shù)的幀的再現(xiàn)稱作抽取再現(xiàn)。 1/(2" (k-1))倍的慢速再現(xiàn)(1/2倍的慢速再現(xiàn)) 1/1倍的慢速再現(xiàn)(等速再現(xiàn))分別是 抽取再現(xiàn)。第t記錄運(yùn)算輸入流是通過進(jìn)行再現(xiàn)而進(jìn)行1/2~ (k-(t-l))倍的慢速再現(xiàn)的流。 這里，再現(xiàn)的各幀是將記錄輸入流IS中的連續(xù)2~t個幀相加的加法幀。因此，與簡單地再 現(xiàn)2~t個幀中的1個的情形(圖3的現(xiàn)有例)相比，防止了運(yùn)動模糊的不足等，從而實(shí)現(xiàn)了 高的圖像質(zhì)量。加法幀更具體的將，也可以是例如對加法幀加上要相加的各幀的單純加法幀。加 法幀也可以是將用所相加的上述各幀中含有的幀的個數(shù)除單純加法幀的值后的值作為其 值而具有的平均加法幀。若加法幀是單純加法幀，則可以避免進(jìn)行除法，可以避免信息丟失 因除法造成的余數(shù)部分的信息。輸入部500對第1記錄運(yùn)算部具有的第1選擇部501輸入向記錄部15輸入的記 錄輸入流IS來作為第1記錄運(yùn)算輸入流。第k+Ι編碼部(第3編碼部514)對第k記錄運(yùn)算部(第2記錄運(yùn)算部516)輸入到第k+1記錄運(yùn)算部的第k+Ι記錄運(yùn)算輸入流中含有的各幀進(jìn)行編碼，并生成包含編碼后 的各幀而構(gòu)成的第k+Ι記錄運(yùn)算輸出流。第k+Ι記錄運(yùn)算輸出流的第a幀是第k+Ι記錄運(yùn) 算輸入流的第a幀被編碼后的第a編碼后幀。這里，第i幀(i是整數(shù))是例如具有對包含該第i幀的流中含有的預(yù)定基準(zhǔn)幀 (例如開頭幀)的地址加上該值i后的地址的幀。例如，第2Xa_l幀是該流的奇數(shù)幀，第 2Xa幀是偶數(shù)幀。第u選擇部(1 < u < k)分別確定輸入到第u記錄運(yùn)算部中的第u記錄運(yùn)算輸入 流中含有的各幀的第2Xa-I幀(一個幀，是圖5的帶陰影的幀)和第2Xa幀(另一個幀， 是圖5的不帶陰影的幀)。第u編碼部(1彡u彡k)對由第u選擇部確定的第2Xa_l幀(圖5的帶陰影的 幀)進(jìn)行編碼。并且，第u編碼部生成具有第2Xa_l幀被編碼后的第a編碼后幀作為第a 幀的第u記錄運(yùn)算輸出流，并輸出所生成的第u記錄運(yùn)算輸出流。圖7中，作為所輸出的第 u記錄運(yùn)算輸出流，圖示了第1記錄運(yùn)算輸出流Val、第2記錄運(yùn)算輸出流Va2。第u加法部將由第u選擇部確定的第2Xa_l幀(圖5的不帶陰影的剩余幀)和 第2Xa幀(圖5的帶陰影幀)相加，生成將這些幀相加后的第a加法幀。圖5中，通過從 第2Xa_l幀(例如幀1)和第2Xa幀(幀2)向?qū)⑦@些幀相加后的第a加法幀(幀1+2) 伸出的箭頭線來表示該加法處理。并且，第u加法部生成將含有這樣生成的第a加法幀作 為第a幀的第u記錄運(yùn)算輸出流。由第u記錄運(yùn)算部將所生成的第u記錄運(yùn)算輸出流作為 第u+1記錄運(yùn)算輸入流輸入到第u+1記錄運(yùn)算部。由此，第1記錄運(yùn)算部 第k+Ι記錄運(yùn)算部分別輸出具有上述結(jié)構(gòu)的第1記錄運(yùn) 算輸出流 第k+Ι記錄運(yùn)算輸出流。并且，記錄部151將這樣輸出的第1記錄運(yùn)算輸出流 第k+Ι記錄運(yùn)算輸出流作 為第1記錄輸出流Val 第k+Ι記錄輸出流Va (k+1)(圖15)輸出到多路復(fù)用部154。聲音編碼部152 (圖15)對進(jìn)行輸入到記錄部151的記錄輸入流IS的高拍攝時由 攝像機(jī)系統(tǒng)1錄音的聲音的聲音數(shù)據(jù)進(jìn)行編碼。聲音編碼部152生成將聲音數(shù)據(jù)編碼后的 編碼聲音數(shù)據(jù)，并將所生成的編碼聲音數(shù)據(jù)輸出到多路復(fù)用部154。多路復(fù)用部154根據(jù)輸出到多路復(fù)用部154的第1記錄輸出流Val 第k+Ι記錄 輸出流Va (k+Ι)和編碼聲音數(shù)據(jù)，生成第1運(yùn)動圖像流1551 第k+Ι運(yùn)動圖像流1553 (多 路復(fù)用流Si)。第1運(yùn)動圖像流1551 第k十1的運(yùn)動圖像流1553分別存儲有由記錄部151輸 出的第1記錄輸出流Val 第k+Ι記錄輸出流Va (k+1)。第1運(yùn)動圖像流1551 第k十1的運(yùn)動圖像流1553分別存儲有聲音編碼部152 生成的編碼聲音數(shù)據(jù)(分別在圖15的第1運(yùn)動圖像流1551等中表示的記號A)。第1運(yùn)動 圖像流1551 第k十1的運(yùn)動圖像流1553中存儲的編碼聲音數(shù)據(jù)的內(nèi)容彼此相同。第1運(yùn)動圖像流1551 第k+Ι運(yùn)動圖像流1553中的一部分或全部的流可以是具 有基于例如MPEG標(biāo)準(zhǔn)等預(yù)定標(biāo)準(zhǔn)的結(jié)構(gòu)的流。基于標(biāo)準(zhǔn)的第t運(yùn)動圖像流通過基于該標(biāo)準(zhǔn)的再現(xiàn)裝置來再現(xiàn)。通用的再現(xiàn)裝置 通過分別再現(xiàn)第u運(yùn)動圖像流中含有的記錄輸出流和編碼聲音數(shù)據(jù)，來再現(xiàn)通過記錄輸入 流IS的高速拍攝而拍攝到的影像和聲音。
若通過通用的再現(xiàn)裝置進(jìn)行第t運(yùn)動圖像流的再現(xiàn)(1≤t≤k+Ι)，則進(jìn)行由 2"(t-l)個幀表示單位時間T的顯示內(nèi)容的再現(xiàn)(參考圖5)。例如，若通過通用的再現(xiàn)裝 置進(jìn)行第1運(yùn)動圖像流的再現(xiàn)，則通過2個幀的再現(xiàn)來顯示單位時間T的顯示內(nèi)容。如后面所詳細(xì)說明的，若通過攝像機(jī)系統(tǒng)1進(jìn)行多路復(fù)用流Sl的再現(xiàn)，則可以進(jìn) 行通過4個幀的再現(xiàn)顯示單位時間T的顯示內(nèi)容的再現(xiàn)等。可以通過攝像機(jī)系統(tǒng)1進(jìn)行更 高圖像質(zhì)量的再現(xiàn)。這樣，根據(jù)該實(shí)施方式，可以在通用的再現(xiàn)裝置中進(jìn)行圖像質(zhì)量較低的再現(xiàn)，從而 由通用的再現(xiàn)裝置也能夠進(jìn)行再現(xiàn)。該實(shí)施方式中如前所述，第1運(yùn)動圖像流1551 第k+Ι運(yùn)動圖像流1553分別存 儲編碼聲音數(shù)據(jù)。因此，即使是通用的再現(xiàn)設(shè)備，也可再現(xiàn)聲音。例如，多路復(fù)用部154使所生成的多路復(fù)用流Sl存儲到存儲部902 (圖9)具有的 存儲介質(zhì)(參考圖15)中。由圖17表示視頻解碼器901 (圖9)的結(jié)構(gòu)。視頻解碼器901包括分離部173、再現(xiàn)部171、以及聲音解碼部172。視頻解碼器901輸入多路復(fù)用流S2。多路復(fù)用流S2例如如上述是視頻編碼器900 生成的多路復(fù)用流Si。多路復(fù)用流S2是具有與多路復(fù)用流Sl所具有的數(shù)據(jù)構(gòu)造相同的 數(shù)據(jù)構(gòu)造的數(shù)據(jù)。視頻解碼器901例如，從存儲部902取得多路復(fù)用部154存儲在存儲部 902中的多路復(fù)用流S2(多路復(fù)用流Si)，并將所取得的多路復(fù)用流S2輸入到該視頻解碼 器901中。分離部173分別確定多路復(fù)用流S2中含有的第1再現(xiàn)運(yùn)算輸入流 第k+Ι再現(xiàn) 運(yùn)算輸入流(參考圖17)。這里，第1再現(xiàn)輸入流Vbl 第k+Ι再現(xiàn)輸入流Vb(k+1)是前述 的圖15所示的第1記錄輸出流Val 第k+Ι記錄輸出流Va(k+1)等。分離部173確定多路復(fù)用流S2中含有的編碼聲音數(shù)據(jù)。更具體的，例如，分離部173通過確定多路復(fù)用流S2中含有的第1存儲部1741 第k+Ι存儲部1743 (圖15的第1存儲部1551 第k+Ι存儲部1553等)，來分別確定所確 定的第1存儲部1741 第k+Ι存儲部1743中含有的第1再現(xiàn)輸入流Vbl 第k十1的再 現(xiàn)輸入流Vb(k+1)。具體的，例如，分離部173確定第1存儲部1741 第k+Ι存儲部1743中的預(yù)定的 一個存儲部中含有的編碼聲音數(shù)據(jù)。分離部173將確定的第1再現(xiàn)輸入流Vbl 第k+Ι再現(xiàn)輸入流Vb (k+Ι)分別輸出 到再現(xiàn)部171。分離部173將確定的編碼聲音數(shù)據(jù)輸出到聲音解碼部172 (圖17)。由圖8表示再現(xiàn)部171的結(jié)構(gòu)。再現(xiàn)部171包括第3解碼部601、第2解碼部604、第2減法部606、第2選擇部 617、第1解碼部609、第1減法部(減法部613和減法部615的整體)、第1選擇部(選擇 部610和選擇部618的整體)和選擇部619。第u再現(xiàn)運(yùn)算部(例如第1再現(xiàn)運(yùn)算部621) (1 < u≤k)由第u解碼部(第1解 碼部609)、第u減法部(第1減法部(減法部613和減法部615的整體))和第u選擇部 (選擇部610、選擇部618)的整體構(gòu)成。
由第k+1解碼部(第3解碼部601)構(gòu)成第k+Ι再現(xiàn)運(yùn)算部(第3再現(xiàn)運(yùn)算部)。第t再現(xiàn)運(yùn)算部k+Ι)通過上述分離部173，將第u再現(xiàn)輸入流Vbt (前 述)作為第u再現(xiàn)運(yùn)算輸入流Vbt輸入，并根據(jù)所輸入的第t再現(xiàn)運(yùn)算輸入流Vbt生成第 t再現(xiàn)運(yùn)算輸出流后，輸出所生成的第t再現(xiàn)運(yùn)算輸出流。輸入到再現(xiàn)部171的第u再現(xiàn) 輸入流Vbt與輸入到第t再現(xiàn)運(yùn)算部的第t再現(xiàn)運(yùn)算輸入流Vbt相同。對這些流都添加了 Vbt的標(biāo)記。第t再現(xiàn)運(yùn)算輸出流(l<t≤k+Ι)是l/2~(k-(t_l))倍的慢速再現(xiàn)用的再現(xiàn)流。 這里，1/2" (k-(t-D)倍的慢速再現(xiàn)在t = k+Ι時是等速的再現(xiàn)，在t = 1時是標(biāo)準(zhǔn)慢速的 再現(xiàn)。再現(xiàn)部171在攝像機(jī)系統(tǒng)1進(jìn)行1/2~ (L-I)倍的慢速再現(xiàn)時，將第t再現(xiàn)運(yùn)算輸 出流(1彡t彡k+Ι)作為再現(xiàn)輸出流OS (圖17)加以選擇(L = k+1-α-Ι))。并且，再現(xiàn)部 171通過將所選擇的第t再現(xiàn)運(yùn)算輸出流作為再現(xiàn)輸出流OS輸出，而使攝像機(jī)系統(tǒng)1再現(xiàn) 所輸出的再現(xiàn)輸出流OS。聲音解碼部172在通過解碼所輸入的編碼聲音數(shù)據(jù)并輸出解碼出的聲音數(shù)據(jù)，從 而再現(xiàn)輸出流OS被再現(xiàn)時，使解碼出的聲音數(shù)據(jù)加以再現(xiàn)。由圖6分別表示第3再現(xiàn)運(yùn)算部輸出的標(biāo)準(zhǔn)慢速再現(xiàn)運(yùn)算輸出流(第1群的流)、 第2再現(xiàn)運(yùn)算部輸出的1/2倍慢速再現(xiàn)運(yùn)算輸出流(第2群的流)和第1再現(xiàn)運(yùn)算部輸出 的等速再現(xiàn)運(yùn)算輸出流(第3群的流)。這里，這3個再現(xiàn)運(yùn)算輸出流分別包含與該再現(xiàn)運(yùn)算輸出流對應(yīng)的群的各幀中帶 陰影的各幀(奇數(shù)幀)和不帶陰影的各幀(偶數(shù)幀)兩者。第t再現(xiàn)運(yùn)算輸入流Vbt (參考圖17、1彡t彡k+Ι)是包含圖6的第t群的各幀 中帶陰影的各幀(奇數(shù)幀)被編碼后的編碼后幀的流。第k+Ι解碼部(第3解碼部601)輸入第k+Ι再現(xiàn)運(yùn)算輸入流(再現(xiàn)輸入流) Vb (k+Ι)，即包含圖5的第3群的帶陰影各幀的編碼后幀的第3再現(xiàn)運(yùn)算輸入流(再現(xiàn)輸入 流)Vb3。并且，第k+1解碼部(第3解碼部601)分別對第3再現(xiàn)輸入流中包含的各編碼 后幀(例如幀1+2+3+4的編碼后幀)進(jìn)行解碼，并生成包含各解碼后幀(幀1+2+3+4)的第 k+Ι再現(xiàn)運(yùn)算輸出流。即，第k+Ι解碼部生成作為第a幀而包含將第3再現(xiàn)輸入流的第a幀 解碼后的第a解碼后幀的第k+Ι再現(xiàn)運(yùn)算輸出流。第t解碼部(第2解碼部604、第1解碼部609、k+l_ (L-1)彡t彡k、L彡2)分別 對第t再現(xiàn)運(yùn)算輸入流Vbt的第2 Xa-I幀(例如幀1+2的編碼后幀)進(jìn)行解碼，并生成作 為第2Xa_l幀而包含解碼后的第a解碼后幀的第t再現(xiàn)運(yùn)算輸出流。第t減法部(第2減法部606、第3減法部(減法部613、減法部615))從通過第 t+Ι再現(xiàn)運(yùn)算部生成的第t+Ι再現(xiàn)運(yùn)算輸出流中含有的第a幀(例如幀1+2+3+4)減去通過 第t解碼部解碼出的第t再現(xiàn)運(yùn)算輸出流的第2Xa-l幀(例如幀1+2)后，生成相減后的 幀(幀3+4)作為第t再現(xiàn)運(yùn)算輸出流的第2Xa幀。第t選擇部(第1選擇部(選擇部610、選擇部618)、第2選擇部617判斷第t再 現(xiàn)運(yùn)算部輸出的第t再現(xiàn)運(yùn)算輸出流的當(dāng)前幀是第2 X a-Ι幀還是第2 X a幀。并且，第t選 擇部在判斷為是第2Xa_l幀的情況下，將通過第t解碼部解碼第t再現(xiàn)運(yùn)算輸入流的當(dāng)前 幀(第a幀)后的解碼后幀作為第t再現(xiàn)運(yùn)算輸出流的當(dāng)前幀(第2Xa_l幀)輸出。另外，第t選擇部在判斷為是第2Xa幀的情況下，將第t減法部進(jìn)行了對第t再現(xiàn)運(yùn)算輸入 流的當(dāng)前幀(第a幀)的減法后的減法后幀作為第t再現(xiàn)運(yùn)算輸出流的當(dāng)前幀(第2Xa 幀)輸出。選擇部619在例如，攝像機(jī)系統(tǒng)1進(jìn)行1/4倍的慢速再現(xiàn)時，將通過第1記錄運(yùn)算 部確定的第1再現(xiàn)運(yùn)算輸出流作為第1再現(xiàn)輸出流0S(圖17)輸出到記錄部161等。艮口， 選擇部619在攝像機(jī)系統(tǒng)1進(jìn)行1/(2~ (L-1))倍的慢速再現(xiàn)時，將通過第k+l-(L-l)的記 錄運(yùn)算部生成的第k+l-(L-l)的再現(xiàn)運(yùn)算輸出流作為第1再現(xiàn)輸出流OS (圖17)輸出。選 擇部619例如取得由用戶輸入到攝像機(jī)系統(tǒng)1的指定上述L值的輸入，并根據(jù)通過所取得 的輸入指定的值L，進(jìn)行再現(xiàn)部171等的動作。攝像機(jī)系統(tǒng)1也可具有計算機(jī)。并且，視頻編碼器900的上述功能(參考圖15等) 也可通過由該計算機(jī)執(zhí)行預(yù)定的程序加以實(shí)現(xiàn)。對于視頻解碼器901的上述功能(參考圖 17等)也相同。由圖19 圖24表示程序P，該程序P示意地表示由計算機(jī)實(shí)現(xiàn)視頻編碼器900的 功能和視頻解碼器901的功能用的程序的一例。在下面的說明中，為說明方便，對于程序P 的細(xì)節(jié)，僅保留基于附圖的說明，而省略復(fù)雜的文章說明。在下面的說明中，將在程序P的 特定部分描述特定處理的情形稱作通過該特定部分，來進(jìn)行該特定處理。圖24是表示程序P的主要部分24的結(jié)構(gòu)圖。主要部分24是執(zhí)行程序P的計算機(jī)在開始執(zhí)行程序P時，最先進(jìn)行處理的程序P 的部分。主要部分24具有記錄處理調(diào)用部24r和再現(xiàn)處理調(diào)用部24p。記錄處理調(diào)用部 24r使計算機(jī)開始記錄處理部22 (圖22)的處理。再現(xiàn)處理調(diào)用部24p使再現(xiàn)處理部23 (圖 23)的執(zhí)行開始。對于主要部分24具有的其他部分僅通過附圖來表示。圖22是表示記錄處理調(diào)用部24r(圖24)使其開始執(zhí)行的記錄處理部22的結(jié)構(gòu) 圖。記錄處理部22包括結(jié)束判斷部22f、幀取得部22p和編碼處理調(diào)用部22e。結(jié)束判斷部22f判斷記錄處理部22是否結(jié)束所拍攝的運(yùn)動圖像的記錄輸入流 IS (圖15等)的各幀中預(yù)定多個幀的處理。并且，結(jié)束判斷部22f在判斷為已結(jié)束之前的 期間使幀取得部22p等的處理持續(xù)。更具體的，結(jié)束判斷部22f判斷例如是否結(jié)束在預(yù)定單 位時間所拍攝的多個幀的處理。在程序P的例子中，具體的，判斷由程序P的頭部(圖19 后述)的MAX_FRAME_NUM的#define語句定義的個數(shù)的幀的處理是否結(jié)束。幀取得部22P在記錄輸入流IS的各幀中的、記錄部151沒有結(jié)束處理的幀中， 確定開頭幀(關(guān)注幀)。并且，具體的，在程序P的例子中，幀取得部22p在預(yù)定存儲區(qū)域 (frame_buf_enc[]的開頭存儲區(qū)域)中存儲所確定的關(guān)注幀。編碼處理調(diào)用部22e使編碼處理部20 (圖20)的處理開始。圖20是表示編碼處理調(diào)用部22e (圖22)使其開始處理的編碼處理部20的結(jié)構(gòu) 圖。編碼處理部20具有開始其處理時的自變量j。自變量j將在開始的處理中編碼 處理部20處理的第t記錄輸出流的t確定為t = j+1。主要部分24(圖24)的記錄處理 調(diào)用部24r使用自變量0 (t = 0+1 = 1)，使編碼處理部20開始處理。另外，編碼處理部將j ^ 1的自變量用于該編碼處理部20的另一個幀處理部22E (后述)，并通過另一個幀處理 部22E，開始其處理。編碼處理部20具有幀判斷部22a、編碼側(cè)幀處理部220和另一個幀處理部22E。幀判斷部22a判斷由幀取得部22p (圖22)確定的關(guān)注幀是否是第t記錄運(yùn)算輸 入流(t = j+1)的各幀(圖5的第t群的帶陰影和不帶陰影的各幀中，第t記錄運(yùn)算輸入 流的奇數(shù)幀(第2Xa-l幀))。更具體的，幀判斷部22a判斷在存儲了第t記錄運(yùn)算輸入 流的各幀的預(yù)定存儲區(qū)域(程序P中的frame_bUf_enc[j])中存儲的幀的個數(shù)是否是奇數(shù) (參考程序P的“frame_buf_enc[j]. size% 2 == 1”的條件式)。另外，圖22的幀取得部 22P在第1記錄運(yùn)算輸入流的該存儲區(qū)域的開頭存儲幀取得部22p確定的關(guān)注幀。并且，幀 判斷部22a在存儲的個數(shù)是奇數(shù)時，判斷為關(guān)注幀是奇數(shù)幀。如后面所詳細(xì)說明的，在刪除 (丟棄)上述預(yù)定的存儲區(qū)域中存儲的幀時，與該幀一起，也刪除與該幀成對的偶數(shù)幀。因 此，不會存在由于該刪除而產(chǎn)生進(jìn)行了錯誤判斷的結(jié)果。編碼側(cè)幀處理部220進(jìn)行在上述幀判斷部22a將關(guān)注幀判斷為是第2Xa_l幀的 情形下的處理。例如，編碼側(cè)幀處理部220在關(guān)注幀是圖5的幀1時，在t = l(j = 0)時， 關(guān)注幀被判斷為是第2Xa-l幀，從而進(jìn)行該處理。編碼側(cè)幀處理部220包括編碼部2201和輸出部2202。編碼部2201對關(guān)注幀(第2Xa-l幀)進(jìn)行編碼。在圖20所示的程序P的編碼 部2201中，示意地構(gòu)成該編碼的處理。輸出部2202將通過編碼部2201編碼后的編碼后幀(frame_0dd)確定為第t記錄 輸出流(t=程序P中的j+1)的當(dāng)前幀。具體的，程序P中，該輸出的處理通過在存儲區(qū)域 bitstream_buf [j]中存儲編碼后的幀的處理來示意地表示。另一個幀處理部22E進(jìn)行在通過上述幀判斷部22a判斷為所取得的幀為偶數(shù)幀 (第2Xa幀)的情形下的處理。另一個幀處理部22E包括另一個幀取得部22E1、編碼側(cè)幀取得部22E2、加法部 22E3和下一流處理調(diào)用部22E4。另一個幀取得部22E1取得判斷出的幀(第2Xa幀)。編碼側(cè)幀取得部22E2取得與判斷出的幀(第2Xa巾貞)成對的奇數(shù)幀(第2Xa_l 幀)。此時，這些另一個幀取得部22E1和編碼側(cè)幀取得部22E2從上述存儲區(qū)域frame_ buf_enc[j]中分別刪除(丟棄)所取得的這些第2Xa幀和第2Xa_l幀。這樣，1組的第 2Xa幀和第2Xa-l幀不是僅被刪除一個，而是兩者同時被刪除。因此，即使這樣刪除幀，幀 判斷部22a進(jìn)行的判斷也不會錯誤(如前所述)。加法部22E3將由另一個幀處理部22E取得的第2Xa_l幀和由編碼側(cè)幀取得部 22E2取得的第2Xa幀相加。在程序P的例子中，示意地表示了該加法的處理。并且，加法部22E3將相加后的加法幀確定為后述的下一流處理調(diào)用部22E4使其 開始的、對第t+1記錄輸出流進(jìn)行的處理的關(guān)注幀。具體的，加法部22E3如圖20所示這樣， 通過在預(yù)定的存儲區(qū)域(frame_bUf_enc[j+l]的開頭)存儲加法幀，來進(jìn)行該確定。下一流處理調(diào)用部22E4使編碼處理部20 (圖20)開始進(jìn)行第t+1記錄輸出流的處 理。因此，下一流處理調(diào)用部22E4在使處理開始時，如圖20所示，將j+1用作自變量。在
18開始的處理中，如上述這樣，通過編碼處理部20進(jìn)行基于之前通過加法部22E3確定的關(guān)注 幀的處理。例如，圖19的MAX_FRAME_NUM的定義可以不是4，而是8。這時，圖6的幀5+6+7+8 是第k+1記錄運(yùn)算輸入流的第二幀(第2Xa幀)。并且，也可以是，另一個幀處理部22E在t = k+1即j+1 = k+1的情況下，不管關(guān)注 幀是第2Xa-l幀還是第2Xa幀，都將關(guān)注幀視為第2Xa_l幀，來進(jìn)行關(guān)注幀是第2Xa_l 幀的判斷。這時，通過編碼側(cè)幀取得部22E2對幀5+6+7+8進(jìn)行編碼。記錄運(yùn)算部的個數(shù)(k+1)在例如高速拍攝的幀率是常規(guī)幀率的N倍時(圖5等的 例子中N = 4)，是k+1 = Log2N個(Log2N是以2為底數(shù)的N的對數(shù))。由此，第k+1記錄 運(yùn)算輸入流包含1個幀。因此，例如，幀5+6+7+8不是第2Xa幀(偶數(shù)幀)，而是第2Xa_l 幀(奇數(shù)幀)。由此，如上這樣，在t = k+1時，另一個幀處理部22E不需要進(jìn)行額外的處 理，可以使處理變得簡單。圖7所示的第1選擇部501和第2選擇部507的整體也可解釋為例如對應(yīng)于幀判 斷部22a(例如，具有相同功能)。圖7的第1加法部506和第2加法部512的整體也可解 釋為例如對應(yīng)于圖20的加法部22E3。圖7的第1編碼部504、第2編碼部510、和第3編碼 部514的整體也可解釋為例如具有與圖20的編碼部2201對應(yīng)的功能。圖13是程序P的處理流程圖。步驟S11 (步驟S15)中，判斷記錄的處理是否中止，若沒有判斷為中止，則重復(fù)執(zhí) 行步驟S12 S15的處理。例如，在將用戶進(jìn)行的中止的預(yù)定輸入輸入到計算機(jī)的情形下， 判斷為進(jìn)行中止。程序P也可具有例如進(jìn)行該步驟S11 (步驟S15)的處理的中止控制部 (圖略)。步驟S12(步驟S16)中，記錄處理部22 (圖22)的重復(fù)控制部(圖22的for (input_ frame-)的部分)使幀取得部22p和編碼處理調(diào)用部22e (圖22)將這些塊的處理執(zhí)行單 位時間(T)的幀個數(shù)(圖19的MAX_FRAME_NUM)的次數(shù)。步驟S13中，幀取得部22p (圖22)確定關(guān)注幀。步驟S14中，編碼處理調(diào)用部22e (圖22)使編碼處理部20 (圖20)對步驟S13中 確定的關(guān)注幀開始進(jìn)行第1記錄運(yùn)算輸出流的處理。步驟S21等表示編碼處理部20進(jìn)行的處理。步驟S21中，幀判斷部22a判斷關(guān)注幀是否是第2 X a~l幀(奇數(shù)幀)。步驟S22a中，在步驟S21中判斷為是第2Xa-l幀(奇數(shù)幀)的情況下(步驟S21 是)，編碼側(cè)幀處理部220的編碼部2201編碼關(guān)注幀。步驟S23a中，輸出部2202將步驟S22a中編碼后的編碼后幀作為第t ( = j+1)的 記錄輸出流(圖5參考)的當(dāng)前輸出幀輸出。步驟S22b中，在步驟S21判斷為關(guān)注幀不是第2Xa-l幀(奇數(shù)幀)的情況下(步 驟S21 否)，即判斷為是第2Xa幀(偶數(shù)幀)的情況下，另一個幀處理部22E如前所述，通 過另一個幀處理部22E的加法部22E3進(jìn)行兩個幀的相加。步驟S23b中，另一個幀處理部22E通過下一流處理調(diào)用部22E4，將步驟S22b中相 加的加法幀作為關(guān)注幀，而使編碼處理部20開始進(jìn)行第t+1記錄運(yùn)算輸出流的輸出處理。圖19是表示程序P的頭部19的結(jié)構(gòu)圖。
頭部19具有再現(xiàn)速度確定部191。再現(xiàn)速度確定部191確定通過攝像機(jī)系統(tǒng)1進(jìn) 行1/2~(L-1)倍的慢速再現(xiàn)(前述)時的如左所標(biāo)記的常數(shù)L。具體上，程序P的例子中， 示意地表示了再現(xiàn)速度確定部191通過ftdefine語句，利用預(yù)處理功能來確定L值的例子。 另外，再現(xiàn)速度確定部191也可采取例如，取得用戶進(jìn)行的指定L值的輸入的結(jié)構(gòu)等。圖23是表示主要部分24的再現(xiàn)處理調(diào)用部24p (圖24)調(diào)用的再現(xiàn)處理部23的 結(jié)構(gòu)圖。再現(xiàn)處理部23具有啟動該處理時的自變量target_stream_number。該自變量 target—stream—number 奪上述 L 值石角定為 L = (k+1) —target—stream—number。艮口,再 現(xiàn)處理部23生成與所確定的L值對應(yīng)的1/2~(L-1)倍的慢速再現(xiàn)用的記錄輸出流(第 k+l-(L-l))的記錄運(yùn)算輸出流，并輸出所生成的記錄輸出流。再現(xiàn)處理部23具有啟動部231和解碼處理調(diào)用部232。啟動部231依次選擇上述第k+l-(L_l)的再現(xiàn)運(yùn)算輸出流的各幀，并使解碼處理 調(diào)用部232開始所選出的幀(關(guān)注幀)的處理。解碼處理調(diào)用部232使解碼處理部21 (圖21)開始對由啟動部231選出的關(guān)注幀 的、第k+l-(L-l)的再現(xiàn)運(yùn)算輸出流的處理。這里，第k+l-(L-l)的再現(xiàn)運(yùn)算輸出流如上所 述，是記錄部161輸出的流。圖21是表示解碼處理調(diào)用部232 (圖23)調(diào)用的解碼處理部21的結(jié)構(gòu)圖。解碼處理調(diào)用部232接受自變量j和自變量f。自變量j將解碼處理調(diào)用部232處理的第t記錄運(yùn)算輸入流確定為第j+1記錄運(yùn) 算輸入流。例如，上述的解碼處理調(diào)用部232為了使第k+l-(L-l)再現(xiàn)運(yùn)算輸出流的處理 開始，而使用自變量 j = {k+l-(L-l)}-l = k+l-L(=圖 23 的 target_stream_number)。自變量f確定關(guān)注幀。具體上，自變量f是關(guān)注幀的第t記錄運(yùn)算輸入流中的地 (順序、幀序號)。解碼處理部21包括幀判斷部21a、解碼側(cè)幀處理部210和另一個幀處理部21E。幀判斷部21a判斷關(guān)注幀是否是解碼處理部21處理的第t記錄運(yùn)算輸入流中的 第2Xa-l幀(奇數(shù)幀)。具體上，幀判斷部21a如圖21所示那樣，通過判斷關(guān)注幀的幀序 號的最低位比特(f & 0x1)是否是0來進(jìn)行判斷。解碼側(cè)幀處理部210在通過上述幀判斷部21a判斷為關(guān)注幀是第2Xa_l幀(奇 數(shù)幀)的情況下(f & 0x1 == 0)，進(jìn)行關(guān)注幀的處理。解碼側(cè)幀處理部210包括取得部2101和解碼部2102。取得部2101取得關(guān)注幀(圖6的帶陰影幀的編碼后幀)。解碼部2102解碼由取得部2101取得的編碼后幀。在該例中，示意地表示了該解 碼的處理。另一個幀處理部21E在判斷為關(guān)注幀是第2Xa幀(偶數(shù)幀)的情況下，進(jìn)行處理。另一個幀處理部21E包括下一流處理調(diào)用部21E1、加法幀取得部21E2、解碼側(cè)幀 取得部21E3、減法部21E4和輸出部21E5。下一流處理調(diào)用部21E1使解碼處理部21開始使用了生成關(guān)注幀(例如圖6的幀 2)的加法幀(幀1+2)的第t+1記錄運(yùn)算輸入流的處理。通過開始的處理，而由解碼處理部 21生成關(guān)注幀的加法幀(幀1+2)。這里，下一流處理調(diào)用部21E1如上所述，使使用第t+1記錄運(yùn)算輸入流的處理開始。因此，下一流處理調(diào)用部21E1使用確定t+1的值(j+1)來作 為自變量j。對應(yīng)于關(guān)注幀是第t記錄運(yùn)算輸入流中的第2Xa幀的情況，所生成的加法幀 是第t+1記錄運(yùn)算輸出流的第a幀。因此，下一流處理調(diào)用部21E1在使處理開始時，使用 確定“a”的值、S卩f/2(f >> 1)來作為自變量f。這里，“f>> 1”是將f 右移1比特后的 值，表示用2除f后的數(shù)。加法幀取得部21E2取得下一流處理調(diào)用部21E1通過使其開始的處理生成的上述 加法幀(例如，圖6的幀1+2)。解碼側(cè)幀取得部21E3取得第t再現(xiàn)運(yùn)算輸入流的第2Xa-l幀被解碼后的解碼后 幀。減法部21E4從由加法幀取得部21E2取得的加法幀中減去由解碼側(cè)幀取得部21E3 取得的解碼后幀，并將相減后的幀確定為關(guān)注幀(第2Xa幀)。輸出部21E5輸出所確定的關(guān)注幀。圖8的第1解碼部609、第2解碼部604、第3解碼部601的整體也可解釋為例如 對應(yīng)于解碼部2102 (圖21)。圖8的第2減法部606和第1減法部(減法部613和減法部 615)的整體也可解釋為例如對應(yīng)于減法部21E4。選擇部617、選擇部610、選擇部618、選擇 部619的整體也可解釋為例如對應(yīng)于幀判斷部21a。圖14是基于程序P的再現(xiàn)部171進(jìn)行的處理的流程圖。步驟S31 (步驟S36)中，由例如上述中止控制部等進(jìn)行判斷是否中止再現(xiàn)處理等 的處理(圖13的步驟S11等)。步驟S32中，再現(xiàn)處理部23 (圖23)取得由再現(xiàn)速度確定部191 (圖19)確定的L 值。具體上，再現(xiàn)處理部23通過取得確定L值的自變量targetstreanuiumber而取得L值。步驟S33(步驟S35)中，啟動部231 (圖23)依次選擇幀，而進(jìn)行所選出的幀(關(guān) 注幀)的處理。步驟S34中，解碼處理調(diào)用部232使解碼處理部21進(jìn)行對步驟S33中選出的關(guān)注 幀的、使用了由步驟S32中確定的L表示的第k+l-(L-l)再現(xiàn)運(yùn)算輸入流的處理。步驟S41等表示解碼處理部21進(jìn)行的處理內(nèi)容。步驟S41中，幀判斷部21a判斷關(guān)注幀是否是第2Xa_l幀。步驟S42a中，在步驟S41中判斷為是第2 X a~l幀(奇數(shù)幀)的情況下(步驟S41 是)，解碼側(cè)幀處理部210進(jìn)行關(guān)注幀的解碼。步驟S43a中，解碼幀處理部210存儲步驟S42a中解碼后的解碼后幀。步驟S42b中，在步驟S41中判斷為關(guān)注幀是第2Xa幀(偶數(shù)幀)的情況下(步 驟S41 否)，下一流處理調(diào)用部21E1使解碼處理部21進(jìn)行生成前述的加法幀的處理。步驟S43b中，根據(jù)步驟S42b中生成的加法幀，加法幀取得部21E2、解碼側(cè)幀取得 部21E3、減法部21E4和輸出部21E5進(jìn)行減法等各種處理。在該例子中，為了說明方便，表示了執(zhí)行遞歸處理的例子，但是也可構(gòu)成不執(zhí)行遞 歸處理的程序。由圖10表示數(shù)字電視系統(tǒng)la。數(shù)字電視系統(tǒng)la具有視頻解碼器1000。視頻解碼器1000具有與前述的視頻解碼器901的功能相同的功能，例如具有圖7的結(jié)構(gòu)。也可實(shí)施基于圖10的數(shù)字電視系統(tǒng)la 的變形例。圖16是表示多路復(fù)用流Sla的圖。多路復(fù)用流Sla具有多個保持部。例如，多路復(fù)用流Sla是通過這多個保持部來 分別保持從多個視點(diǎn)位置看的運(yùn)動圖像而成的流，并且是多場景(多信道、多視角)流。第1保持部 第k+1保持部是多路復(fù)用流S1具有的多個保持部的一部分或全部， 分別保持第1記錄輸出流Val 第k+1記錄輸出流Va(k+1)。第1保持部 第k+1保持部 分別具有例如保持的記錄輸出流的幀的時間戳。時間戳確定與該幀的時刻相同時刻的其他 記錄輸出流的幀。多路復(fù)用流Sla與多個保持部一起具有存儲編碼聲音數(shù)據(jù)的聲音記錄部(參考圖 16的附圖標(biāo)記A)。多路復(fù)用流Sla具體上也可以根據(jù)例如MPEG (Moving Picture ExpertsGroup 運(yùn) 動圖像專家組)的標(biāo)準(zhǔn)具有多場景的形式，且根據(jù)MPEG標(biāo)準(zhǔn)具有上述聲音記錄部。由此，通過再現(xiàn)該多場景形式的流的通用再現(xiàn)裝置，再現(xiàn)第u保持部的記錄輸出 流和編碼聲音數(shù)據(jù)，由此，可以和前述的情形同樣，即使相對圖像質(zhì)量較低，也可以用通用 再現(xiàn)裝置簡單再現(xiàn)運(yùn)動圖像。多路復(fù)用部164從記錄部161輸出的第1記錄輸出流 第k+1記錄輸出流中生成 多路復(fù)用流Sla。圖18是表示輸入到視頻解碼器901 (圖9)的多路復(fù)用流S2a的圖。多路復(fù)用流 S2a作為例如上述多路復(fù)用流Sla等，具有與多路復(fù)用流Sla的數(shù)據(jù)構(gòu)造相同的數(shù)據(jù)構(gòu)造。分離部184從多路復(fù)用流Sla生成第1再現(xiàn)輸入流Vbl 第k+1再現(xiàn)輸入流 Vb (k+1)，并將所生成的第1再現(xiàn)輸入流Vbl 第k+1再現(xiàn)輸入流Vb (k+1)輸入到再現(xiàn)部 181。所生成的第1再現(xiàn)輸入流 第k+1再現(xiàn)輸入流是例如第1記錄輸出流Val 第k+1 記錄輸出流Va(k+1)(參考圖16)。圖25是表示攝像機(jī)系統(tǒng)1的動作圖。圖25中，用圖25的表的第3列表示攝像機(jī) 系統(tǒng)1的動作。圖25的表的第1行表示輸入到第u記錄運(yùn)算部(例如第2記錄運(yùn)算部516)的第 u記錄運(yùn)算輸入流In (1彡u彡k)。第u記錄運(yùn)算輸入流In包含第2 X a-1幀NF (奇數(shù)幀) 和與第2 X a-1連續(xù)的第2 X a幀SF (偶數(shù)幀)。圖25的表的第2行表示第u記錄運(yùn)算部 第k+1記錄運(yùn)算部進(jìn)行的第2 X a_l幀 NF和第2Xa幀SF的處理。在該處理中，第u記錄運(yùn)算部等將第2Xa-l幀NF(例如圖5的幀1)編碼為編碼后 的第2Xa-l幀CF1。圖25中被編碼的幀用帶陰影加以表示。第u記錄運(yùn)算部等進(jìn)行將第 2 X a幀SF (幀2)和第2 X a-1幀NF (幀1)相加的加法處理AP (圖25)，并生成進(jìn)行了基于 加法處理AP的加法后的加法幀Adf (幀1+2)。將所生成的加法幀Adf (幀1+2)通過第u+1 記錄運(yùn)算部等編碼為編碼后的加法幀CF2a。這里，根據(jù)情形，對向加法幀(例如3+4)進(jìn)一 步相加了預(yù)定的幀(幀1+2)后的處理后幀(幀1+2+3+4)進(jìn)行該編碼。這里，加法處理的 處理量比編碼處理的處理量少。現(xiàn)有例1 (參考圖25的表的第1列、圖1 (b))、現(xiàn)有例2 (圖25的表的第2列、圖
224)中不進(jìn)行上述加法處理AP，而僅僅分別對第2 X a-1幀NF和第2 X a幀SF兩個幀進(jìn)行編 碼。并且，如前所述，所進(jìn)行的加法處理的處理量少。由此，攝像機(jī)系統(tǒng)1中進(jìn)行編碼時的 處理量與現(xiàn)有例(現(xiàn)有例1和現(xiàn)有例2)的處理量的不同不過是該較少的處理量部分，實(shí)質(zhì) 上維持為相同(參考圖11)。圖25的表的第3行表示例如分別再現(xiàn)輸入流In的第2 X a-1幀NF和第2 X a幀 SF兩者的情形等利用兩者的幀的利用兩者幀情況下的攝像機(jī)系統(tǒng)1的處理。攝像機(jī)系統(tǒng)1中，對編碼后的編碼后第2 X a-1幀CF1 (例如圖6的幀1)進(jìn)行解 碼。另外，對編碼后的加法幀CF2a(或上述的處理后幀被編碼后的、圖6的幀1+2)進(jìn)行解 碼，并進(jìn)行從解碼后的加法幀CF2a(或上述的處理后幀)減去的減法處理。通過這樣生成 的第2 X a-1幀NF1及第2 X a幀NF2a，來進(jìn)行兩個幀利用。這里，現(xiàn)有例(現(xiàn)有例1和現(xiàn)有例2)中，在不進(jìn)行減法處理方面，與上述處理不 同。并且，這里減法處理的處理量相對少。因此，上述攝像機(jī)系統(tǒng)1中，利用兩個幀時的處 理量與現(xiàn)有例的處理量實(shí)質(zhì)上相同。圖25的表的第4行表示僅通過一個幀的再現(xiàn)來顯示基于第2 X a-1幀NF和第2 X a 幀SF的顯示內(nèi)容的抽取使用的情況下的處理。攝像機(jī)系統(tǒng)1中，對加法幀(例如幀1+2)被編碼后的編碼后幀進(jìn)行解碼。由此， 解碼的幀減少為1個，另一方面，因使用的幀是加法幀，故圖像質(zhì)量高。另一方面，現(xiàn)有例1(參考圖1(b))中，不利用加法幀，從而因運(yùn)動模糊不充分等， 而使圖像質(zhì)量低?，F(xiàn)有例2(參考圖4)中，在上述的抽取使用時，在生成加法幀時，解碼2個以上的 幀。例如，流中含有的所有幀被解碼。因此，根據(jù)數(shù)字電視系統(tǒng)la，與現(xiàn)有例1、現(xiàn)有例2不同，減少了處理量，同時實(shí)現(xiàn) 了高的圖像質(zhì)量，兼顧了少處理量和高圖像質(zhì)量。如上所述，根據(jù)上述實(shí)施方式，分別構(gòu)成下面的各裝置等。(A1)構(gòu)成記錄裝置(視頻編碼器900、記錄部151)，該記錄裝置包括編碼部(第 2編碼部510 (和第1編碼部504、第3編碼部514))，對流(例如，圖5的第2群中的第k 記錄運(yùn)算輸入流處理流)中含有的連續(xù)2個幀(幀1+2、幀3+4 2個處理幀)中的一個幀 (幀1+2)進(jìn)行編碼；以及加法部(第2加法部512 (和第1加法部506、第3加法部512))， 將所述2個幀中的另一個幀與所述一個幀相加。(A2)構(gòu)成記錄裝置，該記錄裝置中，所述編碼部對一個處理流(第k記錄運(yùn)算輸入 流圖5的第2群)中含有的第2Xa-l處理幀(幀1+2)與第2Xa處理幀(幀3+4)中的 一個處理幀(幀1+2)進(jìn)行編碼(a是整數(shù))，并生成編碼后的編碼后幀作為一個輸出流(第 k記錄運(yùn)算輸出流)中含有的第a輸出幀，所述加法部生成所述一個處理流(第k記錄運(yùn)算 輸入流)中含有的所述第2Xa-1處理幀(幀1+2)與所述第2Xa處理幀(幀3+4)相加后 的第a加法幀(幀1+2+3+4)，作為另一個處理流(第k+1記錄運(yùn)算輸入流)中含有的第a 幀。(A3)構(gòu)成記錄裝置，該記錄裝置中，所述一個處理流和所述一個輸出流是第k處 理流(第k記錄運(yùn)算輸入流)和第k輸出流(第k記錄運(yùn)算輸出流)，所述另一個處理流是 第k+1處理流(第k+1記錄運(yùn)算輸入流)(k > 1)，所述編碼部包含第k+1編碼部(第3編碼部514)，分別對第k+1處理流中含有的第2 X a-1幀(例如幀1+2+3+4)和所述第2 X a幀 (幀5+6+7+8)進(jìn)行編碼，并生成編碼后的各編碼后幀作為第k+1輸出流(第k+1記錄運(yùn)算輸 出流)中含有的第2Xa-l輸出幀和第2Xa幀；以及第u編碼部(第2編碼部510、第1編 碼部504) (1 < u < k)，對第u處理流(第u記錄運(yùn)算輸入流)中含有的第2Xa-l幀(幀 1+2)和所述第2Xa幀(幀3+4)中的一個處理幀(幀1+2)進(jìn)行編碼，并生成編碼后的編碼 后幀作為第u輸出流(第u記錄運(yùn)算輸出流)中含有的第2Xa-l輸出幀和第2Xa輸出幀 中的一個輸出幀(第2Xa-l輸出幀)，所述加法部包含第u加法部(第2加法部512、第1 加法部506)，該第u加法部將所述第u處理流(第u記錄運(yùn)算輸入流)中含有的第2 X a-1 幀(幀1+2)和所述第2Xa幀(幀3+4)相加，并生成相加后的加法后幀作為所述第u+1處 理流(第u+1記錄運(yùn)算輸入流)中含有的第a幀。(A4)構(gòu)成記錄裝置，該記錄裝置包括判斷部(第2選擇部507、第1選擇部501)，所 述判斷部判斷第u處理流中含有的處理幀是否是所述一個幀，并通過所述編碼部對判斷為 是所述一個幀的處理幀進(jìn)行編碼，使所述加法部生成判斷為不是所述一個幀的處理幀的所 述加法幀；所述判斷部包括第1判斷部 第k判斷部(第1選擇部501 第2選擇部507)， 所述第u判斷部進(jìn)行對第u處理流的所述判斷。(A5)構(gòu)成記錄裝置，該記錄裝置中，所述編碼部分別對第u處理流中含有的第1 第2~(k十l-u)( = 2~(3-u))的處理幀(A~B表示A的B次冪)中的作為奇數(shù)幀的處理幀 進(jìn)行編碼，并生成包含編碼后的2~(k-u) (2"(2-u))個處理幀的第u輸出流(第u記錄運(yùn)算 輸出流)，所述加法部生成包含由第u處理流的第1 第2~ (k+1-u)處理幀生成的2~ (k-u) 個加法幀的第u+1處理流(第u+1記錄運(yùn)算輸出流)，所生成的第k+1處理流(u = k)(第 k+1 ( = 3)記錄運(yùn)算輸出流)中含有的加法幀是1個(=k-u)(僅幀1+2+3+4)。(A6)構(gòu)成記錄裝置，該記錄裝置的特征在于，包括輸入所述第1處理流中含有的N 個(N = 2"k = 2" (k+1-l))處理幀的輸入單元(輸入部500)和第1記錄處理部 第k+1記 錄處理部(第1記錄運(yùn)算處理部 第k+1記錄運(yùn)算處理部)；所述編碼部包含設(shè)置在所述第 t記錄處理部的第t編碼部(1 < t < k+1)；所述加法部包含設(shè)置在第t記錄處理部的第t 加法部(1 < u < k)；第1記錄處理部，包括存儲由所述輸入單元得到的奇數(shù)幀和偶數(shù)幀的 存儲單元；該第1記錄處理部具有的所述第1編碼部對所存儲的所述奇數(shù)幀進(jìn)行編碼，包括 將由所述第1編碼部得到的比特流作為所述第1輸出流加以存儲的存儲單元，該第1記錄 處理部具有的所述第1加法部將所存儲的所述奇數(shù)幀和所述偶數(shù)幀相加，所述第q記錄處 理部(2 < q < k+1)包括將從所述第q_l加法部得到的奇數(shù)幀和偶數(shù)幀加以存儲的存儲單 元；第q編碼部對由所述第q_l加法部得到并被存儲的奇數(shù)幀進(jìn)行編碼；包括將由所述第q 編碼部得到的比特流作為第q輸出流加以存儲的存儲單元；該第q記錄處理部具有的所述 第q加法部將所存儲的奇數(shù)幀和偶數(shù)幀相加；由所述第1記錄處理部 所述第k+1記錄處 理部構(gòu)成k+1級。(A7)構(gòu)成再現(xiàn)裝置(再現(xiàn)部171、視頻解碼器901)，該再現(xiàn)裝置包括解碼部(第 2解碼部604 (和第3解碼部601、第1解碼部609))，從一個幀(例如幀1+2)被編碼后的編 碼后幀解碼該一個幀；以及減法部(第2減法部606)，從該一個幀和與該一個幀連續(xù)的另 一個幀(幀3+4)相加后的加法幀(幀1+2+3+4)減去該一個幀(幀1+2)，并生成相減后的 幀作為所述另一個幀(幀3+4)。
24
(A8)構(gòu)成再現(xiàn)裝置，該再現(xiàn)裝置中，所述解碼部對一個處理前流(例如，第k再現(xiàn) 運(yùn)算輸入流)中含有的第a處理前幀(例如幀1+2)進(jìn)行解碼(a是整數(shù))，并生成解碼后 的幀作為一個處理后流(第k再現(xiàn)運(yùn)算輸出流)中含有的第2Xa-l處理后幀和第2Xa 處理后幀中的一個幀；所述減法部從作為第a處理后幀而含有所述一個處理后流的所述第 2Xa-l處理后幀(幀1+2)和第2Xa處理后幀(幀3+4)相加后的加法幀(幀1+2+3+4)的 另一個處理后流(第k+1再現(xiàn)運(yùn)算輸入流)中所含有的該第a處理后幀(幀1+2+3+4)，減 去所述一個處理前幀的所述第a處理前幀被解碼后的所述一個幀(幀1+2)，并生成相減后 的幀作為所述一個處理后流(第k再現(xiàn)運(yùn)算輸出流)的所述第2Xa-l處理后幀和所述第 2Xa處理后幀中的另一個幀(幀3+4)。(A9)構(gòu)成再現(xiàn)裝置，該再現(xiàn)裝置中，所述一個處理前流和所述一個處理后流是第 k處理前流(第k再現(xiàn)運(yùn)算輸入流)和第k處理后流(第k再現(xiàn)運(yùn)算輸出流)；所述另一個 處理后流是第k+1處理后流(第k+1再現(xiàn)運(yùn)算輸出流)(k > 1)；所述解碼部包括第k+1 解碼部(第3解碼部601)，對所述第k+1處理前流(第k+1再現(xiàn)運(yùn)算輸入流)中含有的第 a處理前幀進(jìn)行解碼，并生成解碼后的幀(幀1+2+3+4)作為第k+1處理后流(第k+1再現(xiàn) 運(yùn)算輸出流)的第a處理后幀；以及第v解碼部(第2解碼部604)，對所述第v處理前流 (m < v < k)(第v再現(xiàn)運(yùn)算輸入流)中含有的第2Xa-l處理前幀和第2Xa處理前幀中 的一個進(jìn)行解碼，并生成解碼后的幀(例如幀1+2)作為第v處理后流(第v再現(xiàn)運(yùn)算輸出 流)中含有的第2Xa-l處理后幀(幀1+2)和第2Xa處理后幀(幀3+4)中的一個(幀 1+2)；所述減法部包括第v減法部(第2減法部606)，該第v減法部從所述第v+1處理后 流(第k+1再現(xiàn)運(yùn)算輸出流)中含有的第a處理后幀中，減去第v處理后流(第k再現(xiàn)運(yùn) 算輸出流)中含有的第2Xa-l處理后幀和第2Xa處理后幀中的一個處理后幀(幀1+2)， 并生成相減后的幀作為第v處理后流的另一個處理后幀(幀3+4)。(A10)構(gòu)成再現(xiàn)裝置，該再現(xiàn)裝置中，m = 1，包括選擇部(選擇部619)，當(dāng)該再現(xiàn) 裝置在第k+1處理后流的1個幀期間再現(xiàn)2~(L-1)個幀的情況下(l<L<k+l)，所述選擇 部僅通過第k+1解碼部 第k+l-(L-l)解碼部和第k+1減法部 第k+l-(L-l)減法部而僅 生成第k+1處理后流 第k+l-(L-l)處理后流，使該再現(xiàn)裝置進(jìn)行第k+l-(L-l)處理后流 中含有的各處理后流的再現(xiàn)。(All)構(gòu)成再現(xiàn)裝置，該再現(xiàn)裝置包括判斷部(第2選擇部617、第1選擇部(選 擇部610、選擇部618))，該判斷部判斷第v處理后流中含有的處理后幀是否是所述一個幀， 在判斷為是所述一個幀的情況下，選擇通過所述解碼部從該處理后幀被編碼后的編碼后處 理后幀解碼出的幀，作為被判斷的所述處理后幀，在判斷為不是所述一個幀的情況下，選擇 通過所述減法部從被判斷的所述處理后幀作為所述另一個幀進(jìn)行相加而成的加法幀生成 的幀，作為被判斷的該處理后幀；所述判斷部包括第m判斷部 第k判斷部；第v判斷部進(jìn) 行對第v處理后流的所述判斷和選擇。(A12)構(gòu)成再現(xiàn)裝置，該再現(xiàn)裝置的特征在于，第1輸出流是將第1處理流中含有 (N=2~k)處理幀中的奇數(shù)幀編碼后得到的，第2到第k+1輸出流是通過重復(fù)k次
生成所述第u處理流(1 < u < k)的奇數(shù)幀和偶數(shù)幀相加后的加法幀并記錄僅將含有所生 成的各加法幀的中間流的奇數(shù)幀編碼后的第u+1輸出流而得到的(1 < u < k)，所述再現(xiàn) 裝置對作為第1輸出流和第2到第k+1輸出流的第1處理前流 第k+1處理前流進(jìn)行處
25理，包括再現(xiàn)部和第1再現(xiàn)處理部 第k+1再現(xiàn)處理部；所述解碼部包含設(shè)置在第t再現(xiàn) 處理部的第t解碼部(1 < t < k+1)；所述減法部包含設(shè)置在第u再現(xiàn)處理部的第u減法 部(1 < u < k)；第k+1記錄處理部中，該第k+1記錄處理部具有的所述第k+1解碼部將第 k+1處理前流解碼后重構(gòu)，所述再現(xiàn)部在L = 1的情況下，再現(xiàn)從所述第k+1解碼部得到的 幀；第u記錄處理部中，該第u記錄處理部具有的所述第u解碼部將第u處理 前流解碼后重構(gòu)；該第u記錄處理部具有的所述第u減法部分別從由第k+1到第u+1處理 前流重構(gòu)的2~ (k+l-u)/2( = 2" (k-u))中，減去所述第u解碼部從第u+1處理前流重構(gòu)的、 對應(yīng)的所述奇數(shù)幀；所述再現(xiàn)部在！^ > 2的情況下，再現(xiàn)由所述第k+l-(L-l)解碼部得到的 幀作為奇數(shù)幀，并再現(xiàn)從所述第k+1-(L-1)減法部得到的幀作為偶數(shù)幀；由所述第1再現(xiàn)處 理部 所述第k+1再現(xiàn)處理部構(gòu)成k+1級。(A13)構(gòu)成攝像機(jī)系統(tǒng)(參考圖9)，具有CCD外圍部和麥克風(fēng)作為視頻和聲音的 輸入接口，且包括控制自動聚焦部的攝像機(jī)信號處理單元、分別進(jìn)行運(yùn)動圖像的編碼及解 碼與聲音的編碼及解碼的信號處理單元、輸出影像和聲音的接口、以及用于保持記錄數(shù)據(jù) 的接口，其特征在于，具有(A3)記載的記錄裝置和(A9)記載的再現(xiàn)裝置。(A14)構(gòu)成數(shù)字電視系統(tǒng)，包括對來自調(diào)諧器的信號進(jìn)行數(shù)字調(diào)制解調(diào)的單元、 進(jìn)行解擾和傳輸流的解碼的單元、進(jìn)行運(yùn)動圖像解碼和聲音解碼的信號處理單元以及輸出 影像和聲音的單元，其特征在于，具有(A9)記載的再現(xiàn)裝置。此外，構(gòu)成下面的各裝置等(參考圖10)。(B1)構(gòu)成記錄方法，該記錄方法的特征在于，記錄對N個(N是2的冪乘數(shù))幀編 碼了奇數(shù)幀后的比特流，重復(fù)Log2N(底數(shù)為2的對數(shù))次生成將奇數(shù)幀和偶數(shù)幀相加后的幀并記錄對所 述相加后的幀僅編碼奇數(shù)幀后的比特流，從而生成Log2N+l個比特流。(B2)構(gòu)成再現(xiàn)方法，該再現(xiàn)方法的特征在于，第1比特流是對N個(N是2的冪乘 數(shù))幀編碼奇數(shù)幀后得到的，第2到第Log2N+l比特流是通過重復(fù)Log2N(底數(shù)為2的對 數(shù))次生成將所述編碼對象幀的奇數(shù)幀和偶數(shù)幀相加后的幀并記錄對所述相加后的幀僅 編碼奇數(shù)幀后的比特流而得到的，對于所述第1比特流和第2到第Log2N+l比特流，當(dāng)再現(xiàn)N個幀中的1幀的情況下，再現(xiàn)將第Log2N+l比特流解碼后重構(gòu)的幀，在再現(xiàn)N個幀中的2幀的情況下，再現(xiàn)將第Log2N比特流解碼后重構(gòu)的幀作為奇 數(shù)幀，并再現(xiàn)從第Log2N+l比特流重構(gòu)的幀中減去所述奇數(shù)幀后的幀作為偶數(shù)幀重構(gòu)，在再現(xiàn)N個幀中的M個幀(M是3以上N以下的2的冪乘數(shù))的情況下，再現(xiàn)將第 Log2M+l比特流解碼后重構(gòu)的幀作為奇數(shù)幀，再現(xiàn)從第Log2M到第Log2N+l比特流重構(gòu)的 M/2幀中減去由對應(yīng)的第Log2M+l比特流重構(gòu)的所述奇數(shù)幀后的幀作為偶數(shù)幀。(B3)構(gòu)成記錄裝置，該記錄裝置的特征在于，包括第1記錄單元和第2記錄單元， 所述第1記錄單元具有輸入N(N是2的冪乘數(shù))幀的輸入單元、存儲由所述輸入單元得 到的奇數(shù)幀和偶數(shù)幀的存儲單元、對所述奇數(shù)幀進(jìn)行編碼的編碼單元、以及存儲由所述編 碼單元得到的比特流的存儲單元；所述第2記錄單元具有將奇數(shù)幀和偶數(shù)幀相加的加法 單元、存儲由所述加法單元得到的奇數(shù)幀和偶數(shù)幀的存儲單元、對由所述加法單元得到的 奇數(shù)幀進(jìn)行編碼的編碼單元、以及存儲由所述編碼單元得到的比特流的存儲單元；所述第1記錄單元和所述第2記錄單元由Log2N(底數(shù)為2的對數(shù))級構(gòu)成。(B4)構(gòu)成再現(xiàn)裝置，該再現(xiàn)裝置的特征在于，第1比特流是對N個(N是2的冪乘 數(shù))幀編碼奇數(shù)幀后得到的，第2到第Log2N+l比特流是通過重復(fù)Log2N(底數(shù)為2的對 數(shù))次生成將所述編碼對象幀的奇數(shù)幀和偶數(shù)幀相加后的幀并記錄對所述相加后的幀僅 編碼奇數(shù)幀后的比特流而得到的，對于所述第1比特流和第2到第Log2N+l比特流，所述再現(xiàn)裝置包括第1再現(xiàn)單元，具有在再現(xiàn)N個幀中的1幀的情況下將第 Log2N+l比特流解碼后重構(gòu)的解碼單元、和再現(xiàn)從所述解碼單元得到的幀的再現(xiàn)單元；以 及第2再現(xiàn)單元，具有在再現(xiàn)N個幀中的M個幀(M是3以上N以下的2的冪乘數(shù))的情況 下將第Log2M+l比特流解碼后重構(gòu)的解碼單元、將從所述解碼單元得到的幀作為奇數(shù)幀加 以再現(xiàn)的再現(xiàn)單元；從由第Log2M到第Log2N十1比特流重構(gòu)的M/2幀中減去由對應(yīng)的第 Log2M+l比特流重構(gòu)的所述奇數(shù)幀的減法單元和將由所述減法單元得到的幀作為偶數(shù)幀加 以再現(xiàn)的再現(xiàn)單元； 所述第1再現(xiàn)單元和所述第2再現(xiàn)單元由Log2N (底數(shù)為2的對數(shù))級構(gòu)成。(B5)構(gòu)成攝像機(jī)系統(tǒng)，具有CCD外圍部和麥克風(fēng)作為視頻和聲音的輸入接口，且 包括控制自動聚焦部等的攝像機(jī)信號處理單元、分別進(jìn)行運(yùn)動圖像的編碼及解碼與聲音 的編碼及解碼的信號處理單元、輸出影像和聲音的接口、以及用于保持記錄數(shù)據(jù)的接口，其 特征在于，包括在所述運(yùn)動圖像編碼中，記錄對N(N是2的冪乘數(shù))幀編碼了奇數(shù)幀后的比 特流，重復(fù)Log2N(底數(shù)為2的對數(shù))次生成將奇數(shù)幀和偶數(shù)幀相加后的幀并記錄對所述相 加后的幀僅編碼奇數(shù)幀后的比特流，從而生成Log2N+l個比特流的單元；在所述運(yùn)動圖像解碼中，第1比特流是對N個幀編碼奇數(shù)幀后得到的，第2到第 Log2N+l比特流是通過重復(fù)Log2N(底數(shù)為2的對數(shù))次生成將所述編碼對象幀的奇數(shù)幀和 偶數(shù)幀相加后的幀并記錄對所述相加后的幀僅編碼奇數(shù)幀后的比特流而得到的，對于所述 第1比特流和第2到第Log2N+l比特流，包括在再現(xiàn)N個幀中的1幀的情況下，再現(xiàn)將第Log2N+l比特流解碼后重構(gòu)的幀， 在再現(xiàn)N個幀中的2幀的情況下，再現(xiàn)將第Log2N比特流解碼后重構(gòu)的幀作為奇數(shù)幀，重構(gòu) 并再現(xiàn)從由Log2N+l比特流重構(gòu)的幀中減去所述奇數(shù)幀后的幀作為偶數(shù)幀，在再現(xiàn)N個幀 中的M個幀(M是3以上N以下的2的冪乘數(shù))的情況下，再現(xiàn)將第Log2M+l比特流解碼后 重構(gòu)的幀作為奇數(shù)幀，并再現(xiàn)從由第Log2M到第Log2N+l比特流重構(gòu)的M/2幀中減去由對 應(yīng)的第Log2M+l比特流重構(gòu)的所述奇數(shù)幀后的幀作為偶數(shù)幀的單元。(B6)構(gòu)成數(shù)字電視系統(tǒng)，具有對來自調(diào)諧器的信號進(jìn)行數(shù)字調(diào)制解調(diào)的單元、 進(jìn)行解擾和傳輸流的解碼的單元、進(jìn)行運(yùn)動圖像解碼和聲音解碼的信號處理單元以及輸出 影像和聲音的單元，其特征在于，在所述運(yùn)動圖像解碼中，第1比特流是對N個幀編碼奇數(shù)幀后得到的，第2到第 Log2N+l比特流是通過重復(fù)Log2N(底數(shù)為2的對數(shù))次生成將所述編碼對象幀的奇數(shù)幀 和偶數(shù)幀相加后的幀并對所述相加后的幀僅編碼奇數(shù)幀后的比特流而得到的，對于所述第 1比特流和第2到第Log2N+l比特流，包括在再現(xiàn)N個幀中的1幀的情況下，再現(xiàn)將第Log2N+l比特流解碼后重構(gòu)的幀；在再現(xiàn)N個幀中的2幀的情況下，再現(xiàn)將第Log2N比特流解碼后重構(gòu)的幀作為奇數(shù)幀，重構(gòu) 并再現(xiàn)從由Log2N+l比特流重構(gòu)的幀中減去所述奇數(shù)幀后的幀作為偶數(shù)幀，在再現(xiàn)N個幀 中的M個幀(M是3以上N以下的2的冪乘數(shù))的情況下，再現(xiàn)將第Log2M+l比特流解碼后 重構(gòu)的幀作為奇數(shù)幀，再現(xiàn)從由第Log2M到第Log2N+l比特流重構(gòu)的M/2幀中減去由對應(yīng) 的第Log2M+l比特流重構(gòu)的所述奇數(shù)幀后的幀作為偶數(shù)幀的單元。如上所述，連續(xù)2個幀中的一個幀被編碼。這里，被編碼的一個幀也可以不是這2 個幀中前側(cè)的幀(第2Xa-l幀)，而是后側(cè)的幀(第2Xa幀)。并且，如前所述，若被編碼的一個幀是前側(cè)的幀，則可以在可進(jìn)行后側(cè)幀的處理的 時間之前，預(yù)先較早地開始一個幀的編碼處理。因此，可以更早地結(jié)束編碼一個幀的處理和 該處理的后續(xù)處理，可以減少處理延遲。另外，可以分散處理負(fù)擔(dān)，使得不會有較多的處理 在后側(cè)幀的處理成為能夠進(jìn)行的時間之后進(jìn)行。另外，也可以在開始將一個幀(例如幀1)和另一個幀(幀2)相加為加法幀(幀 1+2)的處理之后，開始一個幀的編碼處理。與此相對，如前所述，若在開始加法的處理之前較早地開始一個幀的編碼處理，則 可減少處理延遲，或不存在處理延遲。另外，可以分散處理負(fù)擔(dān)。產(chǎn)業(yè)上的實(shí)用性在本發(fā)明涉及的記錄及再現(xiàn)方法及其裝置中，在再現(xiàn)進(jìn)行高速拍攝的電影和運(yùn)動 圖像的數(shù)字電視中，在處理性能不充分的再現(xiàn)裝置中也可提供良好的圖像質(zhì)量，有利于降 低耗電量和降低成本。
權(quán)利要求
一種記錄裝置，包括編碼部，對流中含有的連續(xù)2個幀中的一個幀進(jìn)行編碼；以及加法部，將所述2個幀中的另一個幀與所述一個幀相加。
2.根據(jù)權(quán)利要求1所述的記錄裝置，所述編碼部對一個處理流中含有的第2Xa_l處理幀和第2Xa處理幀中的一個處理 幀進(jìn)行編碼，并生成編碼后的編碼后幀，作為一個輸出流中含有的第a輸出幀，其中，a是整 數(shù)；所述加法部生成所述一個處理流中含有的所述第2Xa-I處理幀和所述第2Xa處理幀 相加后的第a加法幀，作為另一個處理流中含有的第a幀。
3.根據(jù)權(quán)利要求2所述的記錄裝置，所述一個處理流和所述一個輸出流是第k處理流和第k輸出流；所述另一個處理流是 第k+Ι處理流，其中，k彡1 ； 所述編碼部包含第k+Ι編碼部，分別對第k+Ι處理流中含有的第2Xa-I幀和所述第2Xa幀進(jìn)行編碼， 并生成編碼后的各編碼后幀，作為第k+Ι輸出流中含有的第2 X a-Ι輸出幀和第2 X a幀；以 及第u編碼部，對第u處理流中含有的第2Xa-I幀和所述第2Xa幀中的一個處理幀進(jìn) 行編碼，并生成編碼后的編碼后幀，作為第u輸出流中含有的第2Xa_l輸出幀和第2Xa輸 出幀中的一個輸出幀，其中，1彡u彡k ；所述加法部包含第u加法部，該第u加法部將所述第u處理流中含有的第2 X a-Ι幀和 所述第2Xa幀相加，并生成相加后的加法后幀，作為所述第u+1處理流中含有的第a幀。
4.根據(jù)權(quán)利要求3所述的記錄裝置，包括判斷部，該判斷部判斷第u處理流中含有的處理幀是否是所述一個幀；通過所述 編碼部對判斷為是所述一個幀的處理幀進(jìn)行編碼，使所述加法部生成判斷為不是所述一個 幀的處理幀的所述加法幀；所述判斷部具有第1判斷部 第k判斷部； 所述第u判斷部進(jìn)行對第u處理流的所述判斷。
5.根據(jù)權(quán)利要求2所述的記錄裝置，所述編碼部分別對第u處理流中含有的第1 第2~(k+l-u)處理幀(A~B表示A的B次 冪)中的作為奇數(shù)幀的處理幀進(jìn)行編碼，并生成含有編碼后的2~(k-u)個處理幀的第u輸 出流；所述加法部生成含有由第u處理流的第1 第2~ (k+1-u)處理幀生成的2~ (k-u)個加 法幀的第u+1處理流；所生成的第k+Ι處理流(u = k)中含有的加法幀是1個(=k-u)。
6.根據(jù)權(quán)利要求2所述的記錄裝置，包括輸入單元，輸入所述第1處理流中含有的N個處理幀，其中，N = 2"k = 2"(k+l-l)；以及第1記錄處理部 第k+Ι記錄處理部；所述編碼部包含設(shè)置在所述第t記錄處理部的第t編碼部；所述加法部包含設(shè)置在第t記錄處理部的第t加法部，其中，1≤t≤k+1，1≤u≤k ； 第1記錄處理部，包括將從所述輸入單元得到的奇數(shù)幀和偶數(shù)幀加以存儲的存儲單元； 該第1記錄處理部具有的所述第1編碼部對所存儲的所述奇數(shù)幀進(jìn)行編碼； 包括將由所述第1編碼部得到的比特流作為所述第1輸出流加以存儲的存儲單元； 該第1記錄處理部具有的所述第1加法部將所存儲的所述奇數(shù)幀和所述偶數(shù)幀相加； 所述第q記錄處理部，其中，2≤q≤k+1,包括將從所述第q_l加法部得到的奇數(shù)幀和偶數(shù)幀加以存儲的存儲單元； 第q編碼部對從所述第q_l加法部得到并被存儲的奇數(shù)幀進(jìn)行編碼； 包括將由所述第q編碼部得到的比特流作為第q輸出流加以存儲的存儲單元； 該第q記錄處理部具有的所述第q加法部將所存儲的奇數(shù)幀和偶數(shù)幀相加； 由所述第1記錄處理部 所述第k+Ι記錄處理部構(gòu)成k+Ι級。
7.一種再現(xiàn)裝置，包括解碼部，從一個幀被編碼后的編碼后幀解碼該一個幀；以及減法部，從該一個幀和與該一個幀連續(xù)的另一個幀相加后的加法幀中，減去該一個幀， 并生成相減后的幀作為所述另一個幀。
8.根據(jù)權(quán)利要求7所述的再現(xiàn)裝置，所述解碼部對一個處理前流中含有的第a處理前幀進(jìn)行解碼，并生成解碼后的幀，作 為一個處理后流中含有的第2Xa-I處理后幀和第2Xa處理后幀中的一個幀，其中，a是整 數(shù)；所述減法部從作為第a處理后幀而含有所述一個處理后流的所述第2 Xa-I處理后幀 和第2 X a處理后幀相加后的加法幀的另一個處理后流中所含有的該第a處理后幀中，減去 所述一個處理前幀的所述第a處理前幀被解碼后的所述一個幀，并生成相減后的幀，作為 所述一個處理后流的所述第2Xa-I處理后幀和所述第2Xa處理后幀中的另一個幀。
9.根據(jù)權(quán)利要求8所述的再現(xiàn)裝置，所述一個處理前流和所述一個處理后流是第k處理前流和第k處理后流；所述另一個 處理后流是第k+Ι處理后流，其中，k≤l；所述解碼部包括第k+Ι解碼部，對所述第k+Ι處理前流中含有的第a處理前幀進(jìn)行解 碼，并生成解碼后的幀，作為第k+Ι處理后流的第a處理后幀；以及第ν解碼部，對所述第ν處理前流中含有的第2Xa-I處理前幀和第2Xa處理前幀中 的一個進(jìn)行解碼，并生成解碼后的幀，作為第ν處理后流中含有的第2Xa_l處理后幀和第 2Xa處理后幀中的一個，其中，m≤ν≤k;所述減法部包括第ν減法部，該第ν減法部從所述第v+1處理后流中含有的第a處理 后幀中，減去第ν處理后流中含有的第2Xa-I處理后幀和第2Xa處理后幀中的一個處理 后幀，并生成相減后的幀，作為第ν處理后流的另一個處理后幀。
10.根據(jù)權(quán)利要求9所述的再現(xiàn)裝置， m = 1 ；包括選擇部，當(dāng)該再現(xiàn)裝置在第k+l處理后流的一個幀期間再現(xiàn)2~ (L-I)個幀的情況 下，該選擇部僅通過第k+l解碼部 第k+l-(L-I)解碼部、和第k+l減法部 第k+l-(L-I)減法部而僅生成第k+Ι處理后流 第k+l-(L-l)處理后流，并使該再現(xiàn)裝置進(jìn)行第 k+1-(L-I)處理后流中含有的各處理后流的再現(xiàn)，其中，1彡L彡k+1。
11.根據(jù)權(quán)利要求9所述的再現(xiàn)裝置，包括判斷部，該判斷部判斷第ν處理后流中含有的處理后幀是否是所述一個幀，在判 斷為是所述 一個幀的情況下，選擇通過所述解碼部從該處理后幀被編碼后的編碼后處理后 幀解碼出的幀，作為被判斷的所述處理后幀，在判斷為不是所述一個幀的情況下，選擇通過 所述減法部從將被判斷的所述處理后幀作為所述另一個幀進(jìn)行相加而成的加法幀中生成 的幀，作為被判斷的該處理后幀；所述判斷部具有第m判斷部 第k判斷部； 第V判斷部進(jìn)行對第ν處理后流的所述判斷和選擇。
12.根據(jù)權(quán)利要求10所述的再現(xiàn)裝置，第1輸出流是將第1處理流中含有的N個處理幀中的奇數(shù)幀編碼后得到的，第2到第 k+Ι輸出流是通過重復(fù)k次生成所述第u處理流的奇數(shù)幀和偶數(shù)幀相加后的加法幀并記錄 僅將含有所生成的各加法幀的中間流的奇數(shù)幀編碼后的第u+1輸出流而得到的，所述再現(xiàn) 裝置對作為所述第1輸出流和第2到第k+Ι輸出流的第1處理前流 第k+Ι處理前流進(jìn)行 處理，其中，N = 2~k，l彡u彡k;包括再現(xiàn)部和第1再現(xiàn)處理部 第k+Ι再現(xiàn)處理部； 所述解碼部包含設(shè)置在第t再現(xiàn)處理部的第t解碼部，其中，1 ^ t ^ k+Ι ； 所述減法部包含設(shè)置在第u再現(xiàn)處理部的第u減法部，其中，1 ^u^k； 第k+1記錄處理部中，該第k+Ι記錄處理部具有的所述第k+Ι解碼部將第k+Ι處理前流解碼后重構(gòu)； 所述再現(xiàn)部在L = 1的情況下，再現(xiàn)由所述第k+Ι解碼部得到的幀； 第u記錄處理部中，其中，1 <k，該第u記錄處理部具有的所述第u解碼部將第u處理前幀解碼后重構(gòu)； 該第u記錄處理部具有的所述第u減法部分別從由第k+Ι到第u+1處理前流重構(gòu)的 2" (k+l-u)/2( = 2" (k-u))幀減去所述第u解碼部從第u+1處理前流重構(gòu)的、對應(yīng)的所述奇 數(shù)幀；所述再現(xiàn)部在L ^ 2的情況下，將從所述第k+l-(L-l)解碼部得到的幀作為奇數(shù)幀加 以再現(xiàn)，并將從所述第k+l-(L-l)減法部得到的幀作為偶數(shù)幀加以再現(xiàn)； 由所述第1再現(xiàn)處理部 所述第k+Ι再現(xiàn)處理部構(gòu)成k+Ι級。
13.一種記錄方法，包括編碼步驟，對流中含有的連續(xù)2個幀中的一個幀進(jìn)行編碼；以及 相加步驟，將所述2個幀中的另一個幀與所述一個幀相加。
14.一種再現(xiàn)方法，包括解碼步驟，從一個幀被編碼后的編碼后幀解碼該一個幀；以及 減法步驟，從該一個幀和與該一個幀連續(xù)的另一個幀相加后的加法幀中減去該一個 幀，并生成相減后的幀作為所述另一個幀。
15.一種集成電路，包括編碼部，對流中含有的連續(xù)2個幀中的一個幀進(jìn)行編碼；以及加法部，將所述2個幀中的另一個幀與所述一個幀相加。
16.一種集成電路，包括解碼部，從一個幀被編碼后的編碼后幀解碼該一個幀；以及減法部，從該一個幀和與該一個幀連續(xù)的另一個幀相加后的加法幀中減去該一個幀， 并生成相減后的幀作為所述另一個幀。
17.一種計算機(jī)程序，用于使計算機(jī)實(shí)現(xiàn)編碼部，對流中含有的連續(xù)2個幀中的一個幀進(jìn)行編碼；以及加法部，將所述2個幀中的另一個幀與所述一個幀相加。
18.一種計算機(jī)程序，用于使計算機(jī)實(shí)現(xiàn)解碼部，從一個幀被編碼后的編碼后幀解碼該一個幀；以及減法部，從該一個幀和與該一個幀連續(xù)的另一個幀相加后的加法幀中減去該一個幀， 并生成相減后的幀作為所述另一個幀。
19.一種攝像機(jī)系統(tǒng)，具有CCD外圍部和麥克風(fēng)作為視頻和聲音的輸入接口，且包括 控制自動聚焦部的攝像機(jī)信號處理單元、分別進(jìn)行運(yùn)動圖像的編碼和解碼與聲音的編碼和 解碼的信號處理單元、輸出影像和聲音的接口以及用于保持記錄數(shù)據(jù)的接口，其特征在于，包括權(quán)利要求3所述的記錄裝置和權(quán)利要求9所述的再現(xiàn)裝置。
20.一種數(shù)字電視系統(tǒng)，包括對來自調(diào)諧器的信號進(jìn)行數(shù)字調(diào)制解調(diào)的單元、進(jìn)行解 擾和傳輸流的解碼的單元、進(jìn)行運(yùn)動圖像解碼和聲音解碼的信號處理單元以及輸出影像和 聲音的單元，其特征在于，包括權(quán)利要求9所述的再現(xiàn)裝置。
全文摘要
為了兼顧高圖像質(zhì)量和少處理量，視頻編碼器(900)包括對流(例如，圖5的第2群中的第k記錄運(yùn)算輸入流)中含有的連續(xù)的2個幀(幀1+2、幀3+4)中的一個幀(幀1+2)進(jìn)行編碼的第2編碼部(510)以及將另一個幀(幀3+4)和所述一個幀相加的第2加法部(512)，并通過一個幀和加法幀的編碼來編碼流。
文檔編號H04N5/93GK101843098SQ20098010087
公開日2010年9月22日 申請日期2009年3月3日 優(yōu)先權(quán)日2008年3月3日
發(fā)明者中村剛, 手塚忠則 申請人:松下電器產(chǎn)業(yè)株式會社