專利名稱：動(dòng)畫數(shù)據(jù)解碼裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種基于幀間預(yù)測(cè)來執(zhí)行包含圖片生成的解碼處理的動(dòng) 畫數(shù)據(jù)解碼裝置。
背景技術(shù)：
在對(duì)壓縮動(dòng)畫數(shù)據(jù)進(jìn)行解碼并且顯示圖片的時(shí)候，用于處理缺失圖 片的技術(shù)例如有利用另一圖片對(duì)缺失圖片進(jìn)行補(bǔ)充的方法(參考專利文獻(xiàn)1)和在幀不是IDR (瞬時(shí)解碼器刷新)幀時(shí)基于一幀前的過去數(shù)據(jù)來 執(zhí)行解碼的方法(參考專利文獻(xiàn)2)。[專利文獻(xiàn)l]日本特開第2002-320156號(hào)公報(bào)[專利文獻(xiàn)2]日本特開第2006-17"09號(hào)公報(bào)[專利文獻(xiàn)3]日本特開第2003-134064號(hào)公報(bào)單波段廣播(單波段廣播(one-segment broadcasting))可利用連接到 能夠接收單波段廣播的調(diào)諧器和天線的個(gè)人計(jì)算機(jī)來進(jìn)行音頻/視頻接 收。在此，個(gè)人計(jì)算機(jī)安裝有各種裝置，因此自身生成無線電波(干擾 噪聲)，而所述無線電波在有些情況下干擾了單波段廣播的接收。例如， 當(dāng)對(duì)DVD進(jìn)行讀取和寫入的DVD驅(qū)動(dòng)器開始對(duì)DVD進(jìn)行讀取時(shí)，電 功率瞬時(shí)達(dá)到其峰值，并且在此功率峰值的影響下生成了對(duì)最優(yōu)地接收 所述單波段廣播造成干擾的無線電波。此外，在利用移動(dòng)式裝置，例如 筆記本式個(gè)人計(jì)算機(jī)對(duì)單波段廣播進(jìn)行音頻/視頻接收時(shí)，接收條件依賴 于移動(dòng)和環(huán)境的狀態(tài)而在某些情況下不能達(dá)到可接受的級(jí)別。在這些情況下，視頻數(shù)據(jù)和聲音數(shù)據(jù)未從單波段廣播調(diào)諧器輸出， 從而引起了圖片的部分或整體的缺失，這導(dǎo)致了圖片和聲音被停止或擾 亂的現(xiàn)象。另外，由于不限于來自裝置的干擾無線電波(干擾噪聲)的 影響的一些原因，發(fā)生了缺失圖片的情況，這導(dǎo)致在某些情況下發(fā)生圖片和聲音被停止或擾亂的現(xiàn)象。在此，作為迄今已被采用的解決方法，提出了用另一圖片補(bǔ)充缺失 圖片的方法。然而，所述解決方法存在的問題是只是簡(jiǎn)單地用另一圖 片補(bǔ)充缺失圖片，因而經(jīng)補(bǔ)充的部分成為同一圖片的繼續(xù)。另一方法是， 如果出現(xiàn)了不能接收的狀態(tài)，在幀不是IDR幀時(shí)基于一幀前的過去數(shù)據(jù) 來進(jìn)行解碼。該解決方法存在的問題是盡管未缺失IDR幀本身，但不能處理缺失與IDR幀有關(guān)的圖片數(shù)據(jù)的情況。發(fā)明內(nèi)容鑒于上述問題，本發(fā)明旨在即使在對(duì)單波段廣播等的壓縮動(dòng)畫數(shù)據(jù) 流進(jìn)行解碼和輸出視頻信號(hào)的裝置中發(fā)生了圖片的部分或整體缺失的情 況下，也能輸出使得觀看者不會(huì)感覺不適的視頻信號(hào)。根據(jù)本發(fā)明，為了解決上述問題，對(duì)已經(jīng)解碼的圖片進(jìn)行預(yù)定時(shí)間 段的緩沖，由此即使用于幀間預(yù)測(cè)的參考圖片發(fā)生了缺失，也能夠以從 所緩沖的已解碼圖片中獲取替代參考圖片的方式來生成圖片。具體來說，本發(fā)明是執(zhí)行解碼處理的動(dòng)畫數(shù)據(jù)解碼裝置，所述解碼 處理包括基于壓縮動(dòng)畫數(shù)據(jù)流通過幀間預(yù)測(cè)的圖片生成，所述動(dòng)畫數(shù)據(jù)解碼裝置包括緩沖器，其緩沖通過所述解碼處理解碼的預(yù)定量的已解 碼圖片；和圖片生成單元，其被配置成生成圖片，并且如果用于幀間預(yù)測(cè)的參考圖片缺失，則以從所述緩沖器中緩沖的已解碼圖片中獲取用于 替代缺失圖片的替代參考圖片的方式來執(zhí)行所述圖片生成。在此，壓縮動(dòng)畫數(shù)據(jù)流是經(jīng)由廣播和流式傳輸而接收的動(dòng)畫數(shù)據(jù)的數(shù)據(jù)流，例如為從單波段廣播調(diào)諧器輸出的TS (傳輸流)信號(hào)。如果缺失了參考圖片，則到此為止無法生成圖片，或生成了缺少信息的圖片，然而根據(jù)本發(fā)明，可行的是即使缺失了參考圖片，也可通過使用緩沖的已解碼的圖片作為替代參考圖片，來生成使得觀看者不會(huì)感覺不適的圖片，并且防止了圖片被擾亂和停止。而且，根據(jù)本發(fā)明的動(dòng)畫數(shù)據(jù)解碼裝置還可包括與顯示裝置的接口；和輸出控制單元，其在緩沖有所述預(yù)定量的已分解圖片的狀態(tài)下，以自接收到或者輸入了所述壓縮動(dòng)畫數(shù)據(jù)流時(shí)起的預(yù)定時(shí)間段的延遲向 所述顯示裝置輸出基于己解碼圖片的視頻信號(hào)，其中，如果由于壓縮動(dòng) 畫數(shù)據(jù)流缺少信息缺，出現(xiàn)了缺失圖片的情況，則圖片生成單元可從緩 沖器中緩沖的已解碼圖片中獲取參考圖片或替代參考圖片，接著可執(zhí)行 圖片生成并補(bǔ)充缺失的圖片。根據(jù)本發(fā)明，即使發(fā)生了缺失圖片的情況，通過使用緩沖的已解碼 圖片作為參考圖片的方式也能生成圖片，并且可(利用所生成的圖片) 補(bǔ)充缺失的圖片。注意在生成用于補(bǔ)充的圖片的情況下，如果發(fā)生了缺 失參考圖片的情況，則可使用替代參考圖片。此外，可將本發(fā)明理解為由計(jì)算機(jī)執(zhí)行的方法或使計(jì)算機(jī)執(zhí)行所述 處理的程序。此外，本發(fā)明還可以是可通過計(jì)算機(jī)、其它裝置、機(jī)器等 讀取的記錄有所述程序的記錄介質(zhì)。在此，可通過計(jì)算機(jī)等讀取的記錄 介質(zhì)是指能夠以以電方式、以磁方式、以光方式、以機(jī)械方式或通過化 學(xué)作用存儲(chǔ)可從計(jì)算機(jī)等讀取的諸如數(shù)據(jù)和程序的信息的記錄介質(zhì)。即使在對(duì)單波段廣播等的壓縮動(dòng)畫的數(shù)據(jù)流進(jìn)行解碼和輸出視頻信 號(hào)的裝置中發(fā)生了圖片的部分或整體缺失的情況下，本發(fā)明也能夠輸出 使得觀看者不會(huì)感覺不適的視頻信號(hào)。


圖1是示出H.264/AVC的數(shù)據(jù)結(jié)構(gòu)的圖。圖2是示出如何處理常規(guī)的已解碼圖片的圖。圖3是例示了在發(fā)生缺失圖片的情況下的常規(guī)顯示方法的圖。圖4是例示了在發(fā)生缺失圖片的情況下的常規(guī)顯示方法的圖。圖5是示出根據(jù)本發(fā)明如何處理已解碼圖片的圖。圖6是例示了在發(fā)生缺失圖片的情況下根據(jù)本發(fā)明的顯示方法的圖。圖7是示出根據(jù)實(shí)施方式的個(gè)人計(jì)算機(jī)的配置概要的圖。圖8是示出根據(jù)實(shí)施方式的個(gè)人計(jì)算機(jī)的深入配置示例的圖。圖9是示出整個(gè)圖像數(shù)據(jù)解碼處理的流程的流程圖。圖10是示出基于幀間預(yù)測(cè)生成圖片和補(bǔ)充缺失圖片的處理的流程的流程圖。
具體實(shí)施方式
隨后將參考附圖描述其中根據(jù)本發(fā)明的信息裝置作為個(gè)人計(jì)算機(jī)進(jìn) 行操作的實(shí)施方式。下面的實(shí)施方式中的配置是一個(gè)示例，本發(fā)明不限 于此實(shí)施方式中的配置。<發(fā)明的實(shí)質(zhì)>單波段廣播涉及使用H.264/AVC (高級(jí)視頻編碼)(1.2級(jí)，320X 240像素或者320X180像素，最小幀間隔1/15秒)作為壓縮編碼系統(tǒng)。 該壓縮編碼系統(tǒng)采用基于幀間預(yù)測(cè)的圖片生成方法，作為根據(jù)壓縮動(dòng)畫 (動(dòng)態(tài)圖像)數(shù)據(jù)生成圖片的方法。圖1是示出H.264/AVC的數(shù)據(jù)結(jié)構(gòu)的圖。H.264/AVC的數(shù)據(jù)包括-SPS (序列參數(shù)集)，其被定義為包含關(guān)于整個(gè)序列的碼的信息的頭部； PPS (圖片參數(shù)集)，其被定義為表示整個(gè)圖片的編碼模式的頭部；必要 時(shí)添加的SEI (補(bǔ)充增強(qiáng)信息)；IDR圖片(瞬時(shí)解碼器刷新圖片)等。 在單波段廣播中，根據(jù)三個(gè)或更少的參考圖片來進(jìn)行幀間預(yù)測(cè)，從而生 成P圖片(預(yù)測(cè)圖片)。根據(jù)本實(shí)施方式的個(gè)人計(jì)算機(jī)是包括用于接收單波段廣播的調(diào)諧器 及其解碼裝置的個(gè)人計(jì)算機(jī)，并且使得能夠通過在顯示單元(顯示器) 上顯示基于解碼視頻信號(hào)的圖片來對(duì)單波段廣播進(jìn)行音頻/視頻接收。由 于從設(shè)置在個(gè)人計(jì)算機(jī)中的裝置本身產(chǎn)生了千擾無線電波(干擾噪聲)， 所以認(rèn)為此類個(gè)人計(jì)算機(jī)可能發(fā)生接收幀時(shí)的臨時(shí)失敗，并且可能發(fā)生 缺失圖片的情況。在常規(guī)的單波段廣播音頻/視頻接收器中，順序地從存儲(chǔ)器中刪除過去的編碼圖片(參見圖2)，因此，如果發(fā)生缺失圖片的情況，不能防止 缺乏信息的圖片照原樣輸出并且不能防止所顯示的圖片發(fā)生中斷 (blackout)(參見圖3和4)。在這種情況下，根據(jù)本實(shí)施方式的個(gè)人計(jì)算機(jī)被設(shè)計(jì)為緩沖3秒的己解碼圖片，所述3秒是估算的再現(xiàn)時(shí)間的周期(即，所述個(gè)人計(jì)算機(jī) 被設(shè)計(jì)為不從計(jì)算機(jī)上的存儲(chǔ)器中刪除已解碼的圖片)(參見圖5)。這樣， 如果生成圖片需要的參考圖片缺失，則通過從其中緩存的已解碼圖片獲 取作為替代的參考圖片，來補(bǔ)全必要數(shù)量的參考圖片，并且基于包括替 代參考圖片的參考圖片執(zhí)行使用幀間預(yù)測(cè)的圖片生成(參見圖6)。艮P，根據(jù)本實(shí)施方式的個(gè)人計(jì)算機(jī)能夠自其輸出視頻信號(hào)，使得即 使在缺失了參考圖片的情況下，也能以防止輸出缺少信息的圖片和防止 圖片遭受中斷的方式，來顯示使得觀看所顯示的圖片的觀看者不會(huì)覺得 有不適感覺的圖片。在本實(shí)施方式中，在將要緩沖的已解碼圖片的量轉(zhuǎn)換成將已解碼圖 片顯示為動(dòng)畫所用的時(shí)間周期的情況下，所述要緩沖的已解碼圖片的量 等同于3秒。在單波段廣播中，每秒顯示15幀，因此緩沖大約45幀的 已解碼圖片。此外，根據(jù)本實(shí)施方式的個(gè)人計(jì)算機(jī)通過使用該緩沖器進(jìn)行3秒的 延遲顯示。即，在利用根據(jù)本實(shí)施方式的個(gè)人計(jì)算機(jī)對(duì)單波段廣播進(jìn)行 音頻/視頻接收的情況下，與利用其它普通類型的單波段廣播音頻/視頻接 收器對(duì)單波段廣播進(jìn)行音頻/視頻接收的情況相比，顯示的圖片具有3秒的延遲。所述延遲顯示使得，即使當(dāng)由于TS信號(hào)的信息缺失而發(fā)生了缺 失圖片的情況時(shí)，也可通過利用緩沖的已解碼圖片作為參考圖片來生成 圖片以補(bǔ)充缺失的圖片，而不是原樣輸出缺失了圖片的視頻信號(hào)?？紤]到3秒或更長(zhǎng)時(shí)間之前的圖片可能用作替代參考圖片的可能 性，優(yōu)選地將緩沖器大小和延遲時(shí)間設(shè)置得盡可能大，然而，考慮到當(dāng) 實(shí)際觀看和收聽單波段廣播時(shí)延遲的容許范圍和在個(gè)人計(jì)算機(jī)上可確保 的緩沖區(qū)的大小，在本實(shí)施方式中釆用值"3秒"。然而，優(yōu)選的是，將 緩沖器大小和延遲時(shí)間設(shè)置為適于每個(gè)實(shí)施方式的最優(yōu)值。例如，可想 到的方案是通過以終止駐留的應(yīng)用程序和不必要的應(yīng)用程序的方式而不 是將部分主存儲(chǔ)器用作圖像存儲(chǔ)器的方式(通過提供單獨(dú)的圖像存儲(chǔ)器) 來增加主存儲(chǔ)器的可能確保的容量，從而增加緩沖器大小。<個(gè)人計(jì)算機(jī)配置概要>圖7是根據(jù)本實(shí)施方式的個(gè)人計(jì)算機(jī)10的配置概要的圖。個(gè)人計(jì)算機(jī)10包括操作單元18，其在接收到用戶的操作后操作個(gè)人計(jì)算機(jī)10; 檢測(cè)單元22，其檢測(cè)操作單元18的操作；廣播接收單元14,其接收TV 廣播；動(dòng)畫數(shù)據(jù)解碼裝置IOA，其將基于從廣播接收單元14輸出的TS 信號(hào)而解碼的已解碼圖片輸出到顯示單元40;以及顯示單元40，其基于 輸入的視頻信號(hào)顯示通過廣播接收單元14接收的廣播節(jié)目。
此外，動(dòng)畫數(shù)據(jù)解碼裝置10A包括圖片生成單元23，其解碼從廣 播接收單元14輸出的TS信號(hào)；緩沖單元26，其存儲(chǔ)固定量的由圖片生 成單元23生成的已解碼圖片；以及輸出控制單元21，其將已解碼的圖片 輸出到顯示單元40。
可通過包括CPU、存儲(chǔ)器等的計(jì)算機(jī)和通過在計(jì)算機(jī)上執(zhí)行的程序 實(shí)現(xiàn)這些功能單元。在此，操作單元18例如為計(jì)算機(jī)的輸入裝置、通過組合紅外線檢測(cè) 單元和紅外線遙控器而構(gòu)造的遙控操作單元、用于頻道操作的旋鈕和操 作按鈕。檢測(cè)單元22經(jīng)由操作單元18與CPU之間的接口、處理接口信號(hào)的 裝置驅(qū)動(dòng)器、以及通過所述裝置驅(qū)動(dòng)器向/從操作單元18傳送和接收信號(hào) 的OS (操作系統(tǒng))，來檢測(cè)操作單元18的操作(例如切換接收頻道)。
然而，也可提供專用硬件作為檢測(cè)單元22。例如，可通過提供用于 操作單元的輸入信號(hào)處理電路來分擔(dān)CPU的處理。作為這種類型的處理 電路，已知有鍵盤控制器、鼠標(biāo)控制器等。
此外，例如，可單獨(dú)提供用于處理從操作單元18發(fā)送的信號(hào)的專用 輸入控制處理器。輸入控制處理器將操作單元18的信號(hào)轉(zhuǎn)換為預(yù)定信號(hào) 并且可簡(jiǎn)單地將信號(hào)發(fā)送到輸出控制單元21。
廣播接收單元14是所謂的單波段調(diào)諧器。廣播接收單元14利用天 線接收廣播波并且基于接收到的廣播波輸出壓縮的動(dòng)畫數(shù)據(jù)流(TS信 號(hào))。
圖片生成單元23基于從廣播接收單元14輸出的TS信號(hào)生成集合了 動(dòng)畫的相應(yīng)幀的圖片。在此，本實(shí)施方式涉及執(zhí)行包括基于幀間預(yù)測(cè)的P-圖片生成的圖片生成處理。圖片生成單元23可被配置成在CPU上執(zhí)行 的計(jì)算機(jī)程序。然而，圖片生成單元23還可被構(gòu)造為基于TS信號(hào)生成 圖片并且輸出由此生成的圖片的專用處理器。緩沖單元26緩沖所生成的已解碼圖片。緩沖單元26接受由圖片生 成單元23生成的已解碼圖片的輸入并且對(duì)3秒估計(jì)再現(xiàn)時(shí)間的己解碼圖 片進(jìn)行緩沖。緩沖單元26可被構(gòu)造成記錄介質(zhì)的形式，如通過在CPU 上執(zhí)行的計(jì)算機(jī)程序控制的電力支持的易失性存儲(chǔ)器、類似閃存等的非 易失性存儲(chǔ)器、以及硬盤或便攜式介質(zhì)。然而，緩沖單元26還可被構(gòu)造 為對(duì)所輸入的已解碼圖片進(jìn)行緩沖的專用存儲(chǔ)器。輸入控制單元21具有與顯示單元40的接口，并且控制向顯示單元 40的視頻信號(hào)輸出。輸出控制單元21根據(jù)由檢測(cè)單元22檢測(cè)的信號(hào)， 讀取在緩沖單元26中緩沖的已解碼圖片，隨后將已解碼的圖片轉(zhuǎn)換為視 頻信號(hào)并且將轉(zhuǎn)換的視頻信號(hào)輸出到顯示單元40。在這種情況下，輸出 控制單元21輸出從接收到廣播時(shí)起延遲3秒的視頻信號(hào)。輸出控制單元 21可被設(shè)置為在CPU上執(zhí)行的計(jì)算機(jī)程序。然而，輸出控制單元21還 可被構(gòu)造為在將動(dòng)畫數(shù)據(jù)等轉(zhuǎn)換為針對(duì)顯示單元40的輸出格式后，輸出 視頻信號(hào)的專用處理器。顯示單元40是所謂的監(jiān)視器，其接收從輸出控制單元21輸出的視 頻信號(hào)的輸入并且顯示圖片。<個(gè)人計(jì)算機(jī)的配置>圖8是示出根據(jù)本發(fā)明的一個(gè)實(shí)施方式的個(gè)人計(jì)算機(jī)10的深入配置 示例的圖。如在圖8中，個(gè)人計(jì)算機(jī)10包括的裝置例如有執(zhí)行計(jì)算機(jī)程 序且控制個(gè)人計(jì)算機(jī)10的CPU 11、存儲(chǔ)通過CPU 11執(zhí)行的計(jì)算機(jī)程序 或通過CPU 11處理的數(shù)據(jù)的存儲(chǔ)器12，以及將CPU 11連接到各種裝置 的接口 13，并且所述個(gè)人計(jì)算機(jī)10還包括經(jīng)由接口 13連接(到CPU11) 的一組裝置，如廣播接收單元14、通信單元15、硬盤驅(qū)動(dòng)裝置16、便攜 式介質(zhì)驅(qū)動(dòng)裝置17、操作單元18以及顯示單元40。在此，CPU ll執(zhí)行計(jì)算機(jī)程序，由此控制個(gè)人計(jì)算機(jī)10的相應(yīng)單 元，從而使得個(gè)人計(jì)算機(jī)10用作包括如下功能單元的裝置，所述功能單元例如為檢測(cè)單元22、廣播接收單元14、輸出控制單元21、圖片生成單 元23、緩沖單元26以及輸出控制單元21。存儲(chǔ)器12存儲(chǔ)有通過CPU 11 執(zhí)行的程序和通過CPU 11處理的數(shù)據(jù)。存儲(chǔ)器12包括易失性RAM (隨 機(jī)存取存儲(chǔ)器)和非易失性ROM (只讀存儲(chǔ)器)。ROM包括可重寫半導(dǎo) 體存儲(chǔ)器，如閃存、EPROM (可擦可編程只讀存儲(chǔ)器)、EEPROM (電 可擦可編程只讀存儲(chǔ)器)。接口 13可以是下列接口中的任何一個(gè)諸如USB的串行接口和諸 如PCI (外圍部件互連)的并行接口、 ISA (工業(yè)標(biāo)準(zhǔn)結(jié)構(gòu))、EISA (擴(kuò) 展ISA)、 ATA (AT附件)、IDE (集成驅(qū)動(dòng)電路)、正EE1394以及SCSI (小型計(jì)算機(jī)系統(tǒng)接口)。注意，在圖8中將接口描述為接口 13，然而， CPU11還可經(jīng)由不同的接口連接到各個(gè)裝置。此外，多個(gè)接口可以是橋 接的。廣播接收單元14是用于單波段廣播的TV調(diào)諧器。除了包括具有調(diào) 諧電路和放大器的高頻單元，廣播接收單元14還包括用于數(shù)字信號(hào)的解 碼器(用于OFDM (正交頻分復(fù)用)的解調(diào)器)。在此，高頻單元將高頻電磁波轉(zhuǎn)換為基帶信號(hào)。而且，OFDM解調(diào) 器包括FFT (快速傅立葉變換)處理電路和正交解調(diào)器，并且基于基帶 信號(hào)生成數(shù)字信號(hào)。這些處理可通過執(zhí)行積和操作的專用數(shù)字電路來組 織。此外，這些處理也可通過諸如DSP (數(shù)字信號(hào)處理器)的處理器和 通過程序來組織。此外，還可采用基于TV廣播標(biāo)準(zhǔn)制造且在市場(chǎng)上可得 到的用于解調(diào)的LSI。通信單元15是針對(duì)寬帶網(wǎng)絡(luò)的接口。寬帶網(wǎng)絡(luò)是諸如LAN (局域 網(wǎng))、有線電視網(wǎng)絡(luò)、xDSL (x數(shù)字用戶線)、ADSL (非對(duì)稱數(shù)字用戶線) 以及光學(xué)網(wǎng)絡(luò)的有線纜網(wǎng)，或者諸如無線LAN和固定無線接入(FWA) 的無線接入網(wǎng)絡(luò)。通信單元15獲取例如安裝在硬盤驅(qū)動(dòng)裝置16上的計(jì) 算機(jī)程序、來自網(wǎng)絡(luò)上的服務(wù)器的TV廣播的電子節(jié)目指南(EPG)等。 通常，這些寬帶網(wǎng)絡(luò)可連接到互聯(lián)網(wǎng)。硬盤驅(qū)動(dòng)裝置16存儲(chǔ)要載入到存儲(chǔ)器12的程序。此外，硬盤驅(qū)動(dòng) 裝置16存儲(chǔ)通過CPU 11處理的數(shù)據(jù)。注意，硬盤驅(qū)動(dòng)裝置16不限于單個(gè)裝置，也可提供多個(gè)硬盤驅(qū)動(dòng)裝置16。此外，硬盤驅(qū)動(dòng)裝置16還可以是由另一計(jì)算機(jī)(例如在網(wǎng)絡(luò)上的 盤服務(wù)器)管理的裝置。在此情況下，CPU 11經(jīng)由通信單元15與盤服 務(wù)器通信即可。CPU 11隨后在顯示單元40上顯示從盤服務(wù)器獲取的EPG (電子節(jié)目指南)等就足夠了。便攜式介質(zhì)驅(qū)動(dòng)裝置17是用于例如CD (光盤)、DVD (數(shù)字多媒 體光盤)、HD-DVD (高度DVD)、藍(lán)光盤(Blu-ray disc)等的驅(qū)動(dòng)裝置。 此外，便攜式介質(zhì)驅(qū)動(dòng)裝置17還可以是具有諸如閃存的非易失性存儲(chǔ)器 的卡介質(zhì)的輸入/輸出裝置。通過便攜式介質(zhì)驅(qū)動(dòng)裝置17驅(qū)動(dòng)的介質(zhì)保持 安裝在硬盤驅(qū)動(dòng)裝置16中的計(jì)算機(jī)程序、動(dòng)畫數(shù)據(jù)等。操作單元18是計(jì)算機(jī)的輸入裝置，如鍵盤和定點(diǎn)裝置。而且，操作 單元18包括通過組合紅外線檢測(cè)單元和紅外線遙控器而構(gòu)造的遙控操 作單元、各種開關(guān)、用于頻道操作的旋鈕等。定點(diǎn)裝置不限于特定的類 型，并且對(duì)應(yīng)于所述個(gè)人計(jì)算機(jī)10的特性、用戶的需要等可釆用下列裝 置中的合適裝置鼠標(biāo)、跟蹤球、撥號(hào)型操作單元、在顯示單元40上移 動(dòng)指針的桿型裝置、用于通過靜電電容檢測(cè)用戶的手指操作的裝置、觸 摸板、操縱桿等。鍵盤將與根據(jù)用戶的輸入操作而輸入的鍵相對(duì)應(yīng)的電信號(hào)發(fā)送到未 示出的鍵盤控制器。鍵盤控制器向CPU 11發(fā)送對(duì)應(yīng)于所述電信號(hào)的碼。定點(diǎn)裝置在檢測(cè)到用戶操作時(shí)，將操作信號(hào)發(fā)送給未示出的定點(diǎn)裝 置控制器(例如，未示出的鼠標(biāo)控制器或接口 13等)。接收到該操作信 號(hào)的定點(diǎn)裝置控制器將用于生成操作方向和操作量的信息發(fā)送給CPU 11。 CPU 11的裝置驅(qū)動(dòng)器基于來自定點(diǎn)裝置控制器的操作信號(hào)而在顯示 單元40的屏幕上顯示并且移動(dòng)指針。此外，CPU11的OS確定在屏幕上指針與對(duì)象(窗口、按鈕、菜單、 列表等)之間的位置關(guān)系。接著，將指針?biāo)ㄎ坏奈恢锰幍膶?duì)象設(shè)置為 選定狀態(tài)或聚焦?fàn)顟B(tài)。而且，通過針對(duì)指定裝置的選擇建立操作，例如 通過按壓鼠標(biāo)按鈕來建立對(duì)象的選擇。顯示單元40例如為液晶顯示裝置、等離子顯示板、CRT (陰極射線管)以及電致發(fā)光板。注意，雖然未示出，但顯示單元40包括存儲(chǔ)有圖 像數(shù)據(jù)的RAM和基于RAM中的數(shù)據(jù)對(duì)顯示單元40進(jìn)行驅(qū)動(dòng)的驅(qū)動(dòng)電 路。然而，也可獨(dú)立地提供存儲(chǔ)有圖像數(shù)據(jù)的RAM、驅(qū)動(dòng)顯示單元40 的驅(qū)動(dòng)電路等作為圖像處理板。在此情況下，將組織從CPU11提供的屏 幕信息的數(shù)據(jù)輸入給所述圖像處理板。此外，顯示單元40附裝有揚(yáng)聲器，從所述揚(yáng)聲器輸出通過廣播接收 單元14生成的聲音(語音和語音之外的聲音元素)和從便攜式介質(zhì)驅(qū)動(dòng) 裝置17讀取并通過未示出的語音合成板再現(xiàn)的聲音。所述語音合成板將 例如MP3 (MPEG-l音頻層-3)等的數(shù)字?jǐn)?shù)據(jù)轉(zhuǎn)換為聲音。根據(jù)本發(fā)明的信息裝置可被構(gòu)造為上述的個(gè)人計(jì)算機(jī)IO。然而，根 據(jù)本發(fā)明的信息裝置不限于該個(gè)人計(jì)算機(jī)，而也可以是不同類型的裝置， 例如具有相同功能的電視接收裝置。而且，所述信息裝置可通過下列裝 置來實(shí)現(xiàn)用于接收TV廣播的調(diào)諧器、用于接收TV廣播的機(jī)頂盒、具 有TV廣播接收功能的移動(dòng)電話、具有TV廣播接收功能的移動(dòng)信息終端 (個(gè)人數(shù)字助理(PDA))、具有TV廣播接收功能的游戲機(jī)、具有TV廣 播接收功能的車載裝置等。<處理流程>圖9和10各示出了個(gè)人計(jì)算機(jī)10的處理流程。圖9是示出整個(gè)圖 像數(shù)據(jù)解碼處理的流程的流程圖。在流程圖中示出的圖像數(shù)據(jù)解碼處理 的執(zhí)行是通過下列步驟觸發(fā)的，即，檢測(cè)單元22接收到操作單元18中 的TV觀看開始操作，隨后向輸出控制單元21發(fā)布開始圖像數(shù)據(jù)解碼處 理的指令。在步驟SIOI中，生成基于從廣播接收單元14輸出的數(shù)據(jù)流的圖片。 圖片生成單元23基于從廣播接收單元14輸出的TS信號(hào)，生成顯示動(dòng)畫 所需的各個(gè)幀的圖片。在該情況下，基于需要參考一到三個(gè)已解碼的I-圖片(內(nèi)圖片)或P-圖片(預(yù)測(cè)圖片)的幀間預(yù)測(cè)來生成P-圖片。之后， 處理前進(jìn)到步驟S102。在步驟S102，緩沖3秒的已解碼圖片。緩沖單元26緩沖由圖片生 成單元23生成的估計(jì)再現(xiàn)時(shí)間為3秒的圖片。之后，處理繼續(xù)到步驟S103。在步驟S103，延遲輸出視頻信號(hào)。在緩沖了3秒的已解碼圖片的情 況下，輸出控制單元21以從接收廣播時(shí)起3秒的延遲來讀取已解碼圖片， 并且將讀取的圖片輸出給顯示單元40。 g卩，輸出控制單元21通過利用緩 沖單元26以3秒的延遲輸出圖片。之后，處理繼續(xù)到步驟S104。在步驟S104，監(jiān)視是否有缺失圖片的情況。圖片生成單元23監(jiān)視 在緩沖單元26中緩沖的已解碼圖片是否包括缺少信息或遭受中斷的圖 片，即，是否存在缺失圖片的情況。如果未檢測(cè)到缺失圖片，則重復(fù)步 驟S101所示的圖片生成處理、步驟S102所示的緩沖處理、步驟S103所 示的輸出處理以及步驟S104所示的監(jiān)視處理。而如果檢測(cè)到缺失圖片， 則處理進(jìn)行到步驟S105。在步驟S105，確定是否可從3秒內(nèi)的緩沖數(shù)據(jù)中獲取參考圖片。如 果有缺失圖片的情況，則圖片生成單元23確定是否緩沖了變?yōu)橛糜谏?缺失圖片的參考圖片候選的已解碼圖片。即，緩沖單元26緩沖了3秒的 已解碼圖片，因此，如果生成缺失圖片所需的參考圖片是在過去3秒內(nèi) 的圖片，則能夠從緩沖的已解碼圖片中獲取參考圖片，但如果生成缺失 圖片所需的參考圖片是不在3秒內(nèi)的圖片，則不能從緩沖的已解碼圖片 中獲取參考圖片。當(dāng)確定可獲得參考圖片時(shí)，處理進(jìn)行到步驟S108。當(dāng) 確定不可獲取參考圖片時(shí)，處理進(jìn)行到步驟S106。在步驟S106，對(duì)表明不能正常顯示的消息進(jìn)行顯示。輸出控制單元 21檢測(cè)到圖片生成單元23不能補(bǔ)充缺失的圖片，并且向顯示單元40輸 出包含表明不能正常顯示的消息的視頻信號(hào)。響應(yīng)于該操作，在顯示單 元40上顯示表明不能正常顯示的消息，從而觀看者可以知道由于一些因 素出現(xiàn)了不能觀看的狀態(tài)。之后，處理進(jìn)行到步驟S107。步驟S107涉及執(zhí)行等待處理，直到接收到正常數(shù)據(jù)。當(dāng)廣播接收單 元14接收到正常數(shù)據(jù)時(shí)，處理進(jìn)行到步驟SIOI，在步驟S101中重新開始視頻輸出和視頻顯示。在步驟S108，執(zhí)行缺失圖片補(bǔ)充處理。圖片生成單元23從由緩沖 單元26緩沖的已解碼圖片中獲取參考圖片，并且依靠基于該參考圖片的幀間預(yù)測(cè)來補(bǔ)充缺失的圖片。參考圖10，對(duì)補(bǔ)充處理進(jìn)行深入描述。之 后，處理進(jìn)行到步驟S101。圖10是示出通過幀間預(yù)測(cè)生成圖片并補(bǔ)充缺失圖片的處理流程的 流程圖。該流程圖中示出的缺失圖片補(bǔ)充處理對(duì)應(yīng)于圖9中所示的步驟s亂在步驟S201中，獲取參考圖片。圖片生成單元23獲取緩沖單元26 緩沖的一個(gè)到三個(gè)已解碼圖片作為用于幀間預(yù)測(cè)的參考圖片。此后，處 理進(jìn)入到步驟S202。在步驟S202中，確定獲取的參考圖片是否可用。圖片生成單元23 確定在步驟S201獲取的參考圖片(已解碼圖片〉是否是可用于幀間預(yù)測(cè) 的正常圖片。如果確定獲取的圖片因?yàn)槭窃馐苤袛嗟鹊膱D片而不可用作 參考圖片，則處理進(jìn)行到步驟S203。而如果確定獲取的圖片可用作參考 圖片，則處理進(jìn)行到步驟S204。在步驟S203，獲取替代的參考圖片。圖片生成單元23在緩沖單元 26緩沖的已解碼圖片內(nèi)獲取在缺失的參考圖片的幀前面一個(gè)幀的已解碼 圖片，作為替代參考圖片。為了參考圖6對(duì)其進(jìn)行說明，C13、 C14以及 C15是生成圖片所需要的參考圖片，并且如果缺失的圖片是參考圖片 C13，則獲取參考圖片C12作為替代參考圖片。此后，處理進(jìn)行到步驟 S202，在步驟S202，確定獲取的替代參考圖片是否可以使用。g卩，圖片 生成單元23追蹤緩沖的已解碼圖片，直到獲取了可用的替代參考圖片。 例如，如圖6中所示，必要的參考圖片是圖片C12、 C13以及C14，但是， 如果缺失的圖片是參考圖片C13，則可獲取圖片C10作為替代參考圖片。在步驟S204,確定是否獲取了用于幀間預(yù)測(cè)的必要數(shù)量的參考圖片。 圖片生成單元23確定是否補(bǔ)全包括用于基于幀間預(yù)測(cè)生成圖片的替代參 考圖片的必要數(shù)量的參考圖片。當(dāng)確定獲取了必要數(shù)量的參考圖片時(shí)， 處理進(jìn)行到步驟S205。當(dāng)確定未獲取必要數(shù)量的參考圖片時(shí)，處理進(jìn)行 到步驟S201。 g卩，重復(fù)在步驟S201到S204的處理，直到獲取了必要數(shù) 量的參考圖片(其可包括替代參考圖片)。在步驟S205，基于獲取的參考圖片生成圖片。圖片生成單元23通過基于參考圖片(其可包括替代參考圖片)的幀間預(yù)測(cè)來生成圖片。此后，處理進(jìn)行到步驟S206。在步驟S206,補(bǔ)充缺失的圖片。圖片生成單元23利用在步驟S205 中生成的已解碼圖片來補(bǔ)充缺失的圖片(在S104中檢測(cè)到的缺失圖片)。 而且，緩沖單元26緩沖有該已解碼圖片(參考步驟S102)。注意，輸出 控制單元21以等待3秒延遲處理的方式輸出該圖片(參考步驟S103)。 此后，結(jié)束在本流程圖中示出的處理。<修改例>圖9和10例示了其中通過CPU 11執(zhí)行的程序來實(shí)現(xiàn)由例如圖7中 示出的檢測(cè)單元22、廣播接收單元14、輸出控制單元21、圖片生成單元 23、緩沖單元26以及輸出控制單元21構(gòu)造的個(gè)人計(jì)算機(jī)10的內(nèi)部配置 的示例。如在<個(gè)人計(jì)算機(jī)的配置概要>中描述的那樣，取代這種類型的 配置，可通過不同于CPU 11的處理器、硬件電路等來實(shí)現(xiàn)個(gè)人計(jì)算機(jī) 10的內(nèi)部配置的一個(gè)或多個(gè)部件。即，取決于CPU 11的處理能力和吞 吐量，圖7中的各個(gè)部件可由不同的處理器或數(shù)字電路來構(gòu)造。即使在 包括與CPU 11不同的處理器或數(shù)字電路的情況下，處理過程也與圖9和 10中示出的相同。gp，本實(shí)施方式中的個(gè)人計(jì)算機(jī)可實(shí)現(xiàn)為CPU 11的 程序或可通過專用處理器且進(jìn)一步通過專用數(shù)字電路來實(shí)現(xiàn)。<計(jì)算機(jī)可讀記錄介質(zhì)>用于使計(jì)算機(jī)、其它機(jī)器、裝置(此后稱為計(jì)算機(jī)等)實(shí)現(xiàn)上面給 出的任何一個(gè)功能的程序可記錄在計(jì)算機(jī)等可讀的記錄介質(zhì)上。然后， 使計(jì)算機(jī)等讀取并執(zhí)行在該記錄介質(zhì)上的程序，由此可提供其功能。在此，計(jì)算機(jī)等可讀的記錄介質(zhì)指能夠以電方式、以磁方式、以光 方式、以機(jī)械方式或通過化學(xué)作用存儲(chǔ)可從計(jì)算機(jī)等讀取的信息(如數(shù) 據(jù)和程序)的記錄介質(zhì)。在這些記錄介質(zhì)中，例如，軟盤、磁光盤、 CD-ROM、 CD-R/W、 DVD、 DAT、 8毫米磁帶、存儲(chǔ)卡等是可從計(jì)算機(jī) 等拆卸的記錄介質(zhì)。此外，硬盤、ROM等是固定在計(jì)算機(jī)等內(nèi)的記錄介質(zhì)。
權(quán)利要求
1、一種執(zhí)行解碼處理的動(dòng)畫數(shù)據(jù)解碼裝置，所述解碼處理包括基于壓縮動(dòng)畫數(shù)據(jù)流通過幀間預(yù)測(cè)進(jìn)行的圖片生成，所述動(dòng)畫數(shù)據(jù)解碼裝置包括緩沖器，其對(duì)經(jīng)所述解碼處理解碼的預(yù)定量的已解碼圖片進(jìn)行緩沖；和圖片生成單元，其被配置為生成圖片，并且如果存在缺失用于幀間預(yù)測(cè)的參考圖片的情況，則以從所述緩沖器中緩沖的已解碼圖片中獲取用于替代缺失的圖片的替代參考圖片的方式來執(zhí)行圖片生成。
2、 根據(jù)權(quán)利要求1所述的動(dòng)畫數(shù)據(jù)解碼裝置，所述動(dòng)畫數(shù)據(jù)解碼裝 置還包括與顯示裝置的接口；以及輸出控制單元，其在緩沖了所述預(yù)定量的已解碼圖片的狀態(tài)下，以 自接收到或者輸入所述壓縮動(dòng)畫數(shù)據(jù)流時(shí)起的預(yù)定時(shí)間段的延遲，向所 述顯示裝置輸出基于已解碼圖片的視頻信號(hào)，其中，如果由于所述壓縮動(dòng)畫數(shù)據(jù)流缺少信息，出現(xiàn)了缺失圖片的 情況，則所述圖片生成單元從所述緩沖器中緩沖的已解碼圖片中獲取參 考圖片或替代參考圖片，隨后執(zhí)行圖片生成并補(bǔ)充缺失的圖片。
3、 一種執(zhí)行解碼處理的信息裝置，所述解碼處理包括基于壓縮動(dòng)畫 數(shù)據(jù)流通過幀間預(yù)測(cè)進(jìn)行的圖片生成，所述信息裝置包括緩沖器，其對(duì)經(jīng)所述解碼處理解碼的預(yù)定量的已解碼圖片進(jìn)行緩沖；圖片生成單元，其被配置為生成圖片，并且如果存在缺失用于幀間 預(yù)測(cè)的參考圖片的情況，則以從所述緩沖器中緩沖的已解碼圖片中獲取 用于替代缺失的參考圖片的替代參考圖片的方式來執(zhí)行圖片生成；輸出控制單元，其在緩沖了所述預(yù)定量的已解碼圖片的狀態(tài)下，以 自接收到或者輸入所述壓縮動(dòng)畫數(shù)據(jù)流時(shí)起的預(yù)定時(shí)間段的延遲，向所述顯示裝置輸出基于已解碼圖片的視頻信號(hào)；以及顯示單元，其顯示基于通過所述輸出控制單元輸出的視頻信號(hào)的圖片，其中，如果由于所述壓縮動(dòng)畫數(shù)據(jù)流缺少信息，出現(xiàn)了缺失圖片的 情況，則所述圖片生成單元從所述緩沖器中緩沖的已解碼圖片中獲取參 考圖片或替代參考圖片，隨后執(zhí)行圖片生成并補(bǔ)充缺失的圖片。
4、 一種執(zhí)行解碼處理的動(dòng)畫數(shù)據(jù)解碼方法，所述解碼處理包括基于 壓縮動(dòng)畫數(shù)據(jù)流通過幀間預(yù)測(cè)進(jìn)行的圖片生成，所述動(dòng)畫數(shù)據(jù)解碼方法使計(jì)算機(jī)執(zhí)行以下步驟緩沖步驟，其緩沖由所述解碼處理解碼的預(yù)定量的已解碼圖片；和 圖片生成步驟，其生成圖片，并且如果存在缺失用于幀間預(yù)測(cè)的參 考圖片的情況，則以從在所述緩沖步驟中緩沖的已解碼圖片中獲取用于 替代缺失的參考圖片的替代參考圖片的方式來執(zhí)行圖片生成。
5、 根據(jù)權(quán)利要求4所述的動(dòng)畫數(shù)據(jù)解碼方法，其中，所述計(jì)算機(jī)還 執(zhí)行輸出控制步驟，所述輸出控制步驟在已緩沖了所述預(yù)定量的已解碼 圖片的狀態(tài)下，以自接收到或者輸入所述壓縮動(dòng)畫數(shù)據(jù)流時(shí)起的預(yù)定時(shí) 間段的延遲，向顯示裝置輸出基于所述已解碼圖片的視頻信號(hào)，并且所述圖片生成步驟包括以下步驟如果由于所述壓縮動(dòng)畫數(shù)據(jù)流缺 少信息，出現(xiàn)了缺失圖片的情況，則從在所述緩沖步驟中緩沖的已解碼 圖片中獲取參考圖片或替代參考圖片，隨后執(zhí)行圖片生成并且補(bǔ)充缺失 的圖片。
6、 一種記錄有動(dòng)畫數(shù)據(jù)解碼程序的計(jì)算機(jī)可讀記錄介質(zhì)，所述動(dòng)畫 數(shù)據(jù)解碼程序用于執(zhí)行解碼處理，所述解碼處理包括基于壓縮動(dòng)畫數(shù)據(jù) 流通過幀間預(yù)測(cè)進(jìn)行的圖片生成，所述動(dòng)畫數(shù)據(jù)解碼程序使計(jì)算機(jī)執(zhí)行 以下步驟-緩沖步驟，其緩沖由所述解碼處理解碼的預(yù)定量的已解碼圖片；和 圖片生成步驟，其生成圖片，并且如果存在缺失用于幀間預(yù)測(cè)的參 考圖片的情況，則以從在所述緩沖步驟中緩沖的已解碼圖片中獲取用于 替代缺失的參考圖片的替代參考圖片的方式來執(zhí)行圖片生成。
7、 根據(jù)權(quán)利要求6所述的記錄有動(dòng)畫數(shù)據(jù)解碼程序的計(jì)算機(jī)可讀記 錄介質(zhì)，其中，還使得所述計(jì)算機(jī)執(zhí)行輸出控制步驟，所述輸出控制步驟在已緩沖了所述預(yù)定量的已解碼圖片的狀態(tài)下，以自接收到或者輸入 所述壓縮動(dòng)畫數(shù)據(jù)流時(shí)起的預(yù)定時(shí)間段的延遲，來向顯示裝置輸出基于 所述已解碼圖片的視頻信號(hào)，并且所述圖片生成步驟包括以下步驟如果由于所述壓縮動(dòng)畫數(shù)據(jù)流缺 少信息，出現(xiàn)了缺失圖片的情況，則從在所述緩沖步驟中緩沖的已解碼 圖片中獲取參考圖片或替代參考圖片，隨后執(zhí)行圖片生成并且補(bǔ)充缺失 的圖片。
全文摘要
本發(fā)明涉及動(dòng)畫數(shù)據(jù)解碼裝置。本發(fā)明的目的在于，即使在對(duì)單波段廣播等的壓縮動(dòng)畫數(shù)據(jù)流進(jìn)行解碼并輸出視頻信號(hào)的裝置中發(fā)生了圖片的部分或整體的缺失，也能輸出使得觀看者不會(huì)感覺不適的視頻信號(hào)。動(dòng)畫數(shù)據(jù)解碼裝置包括緩沖單元26，其緩沖通過解碼處理解碼的預(yù)定量的已解碼圖片；和圖片生成單元23，其被配置為生成圖片，并且如果存在缺失用于幀間預(yù)測(cè)的圖片的情況(S202)，則以從緩沖單元26中所緩沖的已解碼圖片中獲取用于代替缺失的圖片的替代參考圖片的方式(S203)來執(zhí)行圖片生成(S205)。
文檔編號(hào)H04N7/26GK101227609SQ200810001529
公開日2008年7月23日 申請(qǐng)日期2008年1月4日 優(yōu)先權(quán)日2007年1月19日
發(fā)明者大柜敏郎 申請(qǐng)人:富士通株式會(huì)社