專利名稱：再生裝置的制作方法
技術領域：
本發(fā)明涉及一種可在再生由多個軌道組成的影像數(shù)據(jù)的場合下，按對應于自己的再生處理能力的軌道數(shù)來再生的再生裝置。
背景技術：
在影像內(nèi)容的制作中，為了提供多個信息，或使畫面轉(zhuǎn)換具有變化性，或保護畫面上的私密性，而使用特殊效果。施行該特殊效果的編輯有以下方法即，將施行了特殊效果后的影像數(shù)據(jù)記錄到記錄媒體的方法、按原樣來記錄原圖像數(shù)據(jù)，此外還記錄特殊效果的處理順序，在再生時按照該特殊效果的處理順序，來處理原圖像數(shù)據(jù)，由此來再現(xiàn)特殊效果的方法。后者被專稱為非破壞編輯，可以用Quick Time(快時，以下簡稱為「QT」。)等應用軟件來編輯。
在采用了QT的非破壞編輯中，不僅是針對圖像的特殊效果，文字及圖形的疊印也可按QT文件形式來記述。即，特殊效果·文字·圖形的區(qū)別，以及開始時間、結(jié)束時間及附加了特殊效果等的影像ID等以QT文件形式被記錄于記錄媒體，在再生時，按所指定的時間，對所指定的圖像，進行指定種類的特殊效果等處理，然后在顯示裝置上顯示，這樣，編輯者可以使具有與在編輯中所附加的效果相同的特殊效果的影像再生。
不過，在這種非破壞編輯中，在有的場合下將多個特殊效果及文字等疊加到原圖像數(shù)據(jù)。在這種場合下，由于應同時疊加到原圖像的特殊效果等有多個，因而可能超過再生裝置在單位時間內(nèi)的再生處理能力極限。如果再生裝置欲使對原圖像施行的特殊效果等全部再生，便會發(fā)生再生影像不圓滑，或漏幀的問題。
為此，本發(fā)明的目的在于提供一種可在再生處理能力范圍內(nèi)，按優(yōu)先順序來有選擇地聚焦應同時疊加于原圖像的特殊效果等，由此在再生處理能力范圍內(nèi)適當?shù)卦偕跋駭?shù)據(jù)的再生裝置。

發(fā)明內(nèi)容
如上所述，本發(fā)明涉及的再生裝置，由于在其再生能力范圍內(nèi)使影像數(shù)據(jù)中的軌道再生，因而可平滑地不漏幀地再生影像。


圖1是表示實施方式1中再生裝置構成的框圖。
圖2是實施方式1中輸入數(shù)據(jù)的一例。
圖3是表示實施方式1中再生裝置動作的流程圖。
圖4A及圖4B是表示實施方式1中優(yōu)先級表的附圖。
圖5是表示實施方式2中再生裝置構成的框圖。
圖6是實施方式2中輸入數(shù)據(jù)的一例。
圖7是表示實施方式2中優(yōu)先級表的附圖。
圖8是表示實施方式3中再生裝置構成的框圖。
圖9是表示實施方式3中優(yōu)先級表的附圖。
圖10是表示實施方式3中文本數(shù)據(jù)選擇部動作的流程圖。
圖11是表示實施方式4中再生裝置構成的框圖。
圖12是表示實施方式4中優(yōu)先級表的附圖。
圖13是表示實施方式4中數(shù)據(jù)選擇部動作的流程圖。
圖14是表示實施方式5中數(shù)據(jù)選擇部動作的流程圖。
圖15是表示實施方式6中數(shù)據(jù)選擇部動作的流程圖。
圖16是表示實施方式7中數(shù)據(jù)選擇部動作的流程圖。
圖17是表示再生開始時的軌道選擇動作的流程圖。
圖18是表示Rt的再計算的流程圖。
具體實施例方式
以下基于附圖，對本發(fā)明的實施方式作以說明。對各圖中的相同構成，附加同一符號，省略其說明。
實施方式1實施方式1是一種在對原圖像施行了各種圖形的場合下，按再生裝置的再生處理能力來選擇與原圖像同時再生的圖形，以使影像再生的再生裝置的實施方式。
圖1是表示實施方式1中再生裝置構成的框圖。
圖1中，實施方式1中的再生裝置10構成為具有輸入數(shù)據(jù)接口11、輸入數(shù)據(jù)解析部12、優(yōu)先級表寄存部13、優(yōu)先級判別部14、圖像解碼部15、圖形解碼部16、聲響解碼部17、圖像處理部18、圖像輸出部19以及聲響輸出部20。
輸入數(shù)據(jù)接口11是連接外部設備與本再生設備10的接口，從外部輸入影像數(shù)據(jù)。所輸入的影像數(shù)據(jù)被輸出到輸入數(shù)據(jù)解析部12。外部設備是從比如盤狀記錄媒體讀入所記錄的影像數(shù)據(jù)的驅(qū)動裝置、從CD-ROM讀入影像數(shù)據(jù)的CD驅(qū)動裝置、從DVD讀入影像數(shù)據(jù)的DVD驅(qū)動裝置以及硬盤驅(qū)動裝置等。
輸入數(shù)據(jù)解析部12判別所輸入的影像數(shù)據(jù)的數(shù)據(jù)內(nèi)容，即判別是視頻數(shù)據(jù)、音頻數(shù)據(jù)、圖形數(shù)據(jù)(名稱)、圖形數(shù)據(jù)(幀)，還是圖形數(shù)據(jù)(暗影)等，并將判別結(jié)果與影像數(shù)據(jù)一起輸出到優(yōu)先級判別部14。
優(yōu)先級判別部14基于判別結(jié)果，參照優(yōu)先級表寄存部13中寄存的優(yōu)先級表，由此根據(jù)預先設定的閾值，來決定所輸入的影像數(shù)據(jù)的再生優(yōu)先順序。優(yōu)先級判別部14按照所決定的再生優(yōu)先順序，來廢棄該影像數(shù)據(jù)，或者輸出到圖像解碼部15或圖形解碼部16。再生優(yōu)先順序是在從多個軌道中選擇了任意2個軌道后，在不能同時使雙方軌道再生，只能再生任意一方軌道的場合下，應再生軌道的優(yōu)劣。
這里，再生裝置的設計者及制造者等基于再生裝置10中硬件的再生處理能力，來預先決定閾值，并設定到優(yōu)先級判別部14。此外也可以將該閾值預先存儲到優(yōu)先級表寄存部13，必要時讀入到優(yōu)先級判別部14。
優(yōu)先級表寄存部13是比如EEPROM(electrically erasableprogrammable read-only memory)之類的可擦除只讀存儲器，存儲后述的優(yōu)先級表。
圖像解碼部15對所輸入的影像數(shù)據(jù)(視頻數(shù)據(jù))進行解碼，然后輸出到圖像處理部18。
圖形解碼部16對所輸入的影像數(shù)據(jù)(圖形數(shù)據(jù))進行解碼，然后輸出到圖像處理部18。
圖像處理部18基于所輸入的視頻數(shù)據(jù)及圖形數(shù)據(jù)，對原圖像施行規(guī)定的圖形處理，然后將影像數(shù)據(jù)輸出到圖像輸出部19。
圖像輸出部19結(jié)合外部的顯示裝置，對影像數(shù)據(jù)進行信號處理，然后輸出影像數(shù)據(jù)。
另一方面，聲響解碼部17對所輸入的聲響數(shù)據(jù)(音頻數(shù)據(jù))進行解碼，然后輸出到聲響輸出部20。
聲響輸出部20結(jié)合外部的聲響再生裝置，對聲響數(shù)據(jù)進行信號處理，然后輸出聲響數(shù)據(jù)。
接下來，對實施方式1中再生裝置的動作作以說明。
圖2是表示實施方式1中輸入數(shù)據(jù)一例的附圖。
圖3是表示實施方式1中再生裝置動作的流程圖。
圖4A、圖4B是表示實施方式1中優(yōu)先級表的附圖。圖4A是優(yōu)先級表的第1例，圖4B是優(yōu)先級表的第2例。
首先，通過輸入數(shù)據(jù)接口11，輸入數(shù)據(jù)被輸入到輸入數(shù)據(jù)解析部12。輸入數(shù)據(jù)是具有視頻數(shù)據(jù)、音頻數(shù)據(jù)、多種圖形數(shù)據(jù)的影像數(shù)據(jù)，各數(shù)據(jù)中包含表示軌道類別的識別符，由該軌道類別來表示數(shù)據(jù)內(nèi)容的區(qū)別。多個種類的圖形數(shù)據(jù)是比如表示影像標題的名稱(Title)、容納畫面的幀(Frame)、為私密保護等而用陰影遮蓋部分畫面的暗影(Shade)、為使畫面中的某部分引人注目而附加的箭頭等標志(Mark)、為強調(diào)畫面中的某個部分而附加的加重(Accent)、為強調(diào)字幕及臺詞等而顯示的吹出等提示(Notice)。
這種輸入數(shù)據(jù)按比如QT格式來構成。QT是沿時間軸來管理各種數(shù)據(jù)的軟件，是一種用于不采用特殊硬件來使運動畫面、聲響、文本等同步再生的OS擴展功能。QT文件中，基本的數(shù)據(jù)單元稱為原子(atom)，QT由資源原子和數(shù)據(jù)原子來構成。資源原子是寄存再生該文件所必需的信息及參照實際數(shù)據(jù)所必需的信息的部分。數(shù)據(jù)原子是寄存視頻及音頻等實際數(shù)據(jù)的部分。各原子除了該數(shù)據(jù)，還包含尺寸及類型信息。QT中，數(shù)據(jù)的最小單位被作為樣本來處理，作為樣本集合來定義塊。QT在比如「INSIDE MACINTOSHQuickTime(日語版)(アジソンウエスレス)」等中有介紹。
比如，輸入數(shù)據(jù)如圖2所示，由資源原子101、數(shù)據(jù)原子102來構成。數(shù)據(jù)原子102構成為具有視頻數(shù)據(jù)121、音頻數(shù)據(jù)122、名稱的圖形數(shù)據(jù)即圖形數(shù)據(jù)(名稱)123、幀的圖形數(shù)據(jù)即圖形數(shù)據(jù)(幀124)、暗影的圖形數(shù)據(jù)即圖形數(shù)據(jù)(暗影)125、標志的圖形數(shù)據(jù)即圖形數(shù)據(jù)(標志)126、加重的圖形數(shù)據(jù)即圖形數(shù)據(jù)(加重)127、提示的圖形數(shù)據(jù)即圖形數(shù)據(jù)(提示)128的各實際數(shù)據(jù)。為了使各實際數(shù)據(jù)在時間軸上相關聯(lián)來管理，資源原子101構成為具有軌道原子(視頻)111、軌道原子(音頻)112、軌道原子(名稱)113、軌道原子(幀)114、軌道原子(暗影)115、軌道原子(標志)116、軌道原子(加重)117、軌道原子(提示)118。用于判別實際數(shù)據(jù)的軌道類別的識別符在記述與實際數(shù)據(jù)對應的軌道原子內(nèi)的用戶數(shù)據(jù)原子中設置的軌道屬性的原子(軌道特性原子)中被記述。用戶數(shù)據(jù)原子是一種作為記述用戶定義數(shù)據(jù)的原子來準備了QT的原子。
輸入數(shù)據(jù)解析部12參照該軌道特性原子內(nèi)記述的識別符，來判別實際數(shù)據(jù)的軌道類別，并將判別結(jié)果輸出到優(yōu)先級判別部14。
圖3中，輸入判別結(jié)果及實際數(shù)據(jù)后，優(yōu)先級判別部14訪問優(yōu)先級表寄存部13，由此來獲得優(yōu)先順序(S11)。
關于優(yōu)先順序，對在原圖像應實施的所有圖形類別，以序列號來分配。比如，如圖4A所示，名稱的優(yōu)先順序為1，幀的優(yōu)先順序為5，暗影的優(yōu)先順序為2，標志的優(yōu)先順序為6，加重的優(yōu)先順序為4，提示的優(yōu)先順序為3。數(shù)值越小，優(yōu)先順序越高，數(shù)值越大，優(yōu)先順序越低。這里，視頻數(shù)據(jù)121及音頻數(shù)據(jù)122的優(yōu)先順序最高為1，這一點未圖示。
接下來，優(yōu)先級判別部14根據(jù)判別結(jié)果，來判別所輸入的實際數(shù)據(jù)是何種實際數(shù)據(jù)。優(yōu)先級判別部14通過參照所獲得的優(yōu)先順序，來識別該實際數(shù)據(jù)的優(yōu)先順序，并對該實際數(shù)據(jù)的優(yōu)先順序與閾值進行比較(S12)。
在比較結(jié)果是該實際數(shù)據(jù)的優(yōu)先順序的優(yōu)先級高于閾值的場合下，優(yōu)先級判別部14根據(jù)實際數(shù)據(jù)的類別，將該實際數(shù)據(jù)輸出到圖像解碼部15、圖形解碼部16或聲響解碼部17。另一方面，在比較結(jié)果是該實際數(shù)據(jù)的優(yōu)先順序的優(yōu)先級低于閾值的場合下，優(yōu)先級判別部14廢棄該實際數(shù)據(jù)(S13)。
比如，在根據(jù)再生裝置10的同時再生能力，閾值被設定為3的場合下，視頻數(shù)據(jù)121、音頻數(shù)據(jù)122、圖形數(shù)據(jù)(名稱)123、圖形數(shù)據(jù)(暗影)125分別被輸出到圖像解碼部15、聲響解碼部17或圖形解碼部16。圖像處理部18將圖形數(shù)據(jù)(名稱)123及圖形數(shù)據(jù)(暗影)125疊加到解碼后的視頻數(shù)據(jù)121，進行顯示處理，并輸出到圖像輸出部19。
比如，在根據(jù)再生裝置10的同時再生能力，閾值被設定為5的場合下，視頻數(shù)據(jù)121、音頻數(shù)據(jù)122、圖形數(shù)據(jù)(名稱)123、圖形數(shù)據(jù)(暗影)125、圖形數(shù)據(jù)(提示)128及圖形數(shù)據(jù)(加重)127分別被輸出到圖像解碼部15、聲響解碼部17或圖形解碼部16。圖像處理部18將解碼后的圖形數(shù)據(jù)(名稱)123、圖形數(shù)據(jù)(暗影)125、圖形數(shù)據(jù)(加重)127及圖形數(shù)據(jù)(提示)128疊加到視頻數(shù)據(jù)121，進行顯示處理，并輸出到圖像輸出部19。
這樣在實施方式1中，由于按照優(yōu)先順序，在再生裝置10的處理能力范圍內(nèi)再生實際數(shù)據(jù)，因而可平滑地無漏幀地再生影像數(shù)據(jù)。此外由于按照優(yōu)先順序，在再生裝置10的處理能力范圍內(nèi)再生實際數(shù)據(jù)，因而不必根據(jù)再生裝置10的處理能力來作成影像數(shù)據(jù)，即使在處理能力相異的再生裝置中，也可利用共同的影像數(shù)據(jù)。此外通過使按各圖形的類別來分配的優(yōu)先順序相異，即使是同一處理能力，也可再生疊加了不同圖形的影像。
這里，圖4A所示的第1優(yōu)先級表中，不論同時施行的圖形數(shù)如何，各圖形數(shù)據(jù)的優(yōu)先順序均是固定的。因此，在應同時再生的實際數(shù)據(jù)是視頻數(shù)據(jù)121、音頻數(shù)據(jù)122及圖形數(shù)據(jù)(幀)124的場合下，如果閾值是3，即使再生裝置10的處理能力有余裕，由于圖形數(shù)據(jù)(幀124)的優(yōu)先順序是5，因而圖形數(shù)據(jù)(幀)124不輸出到圖形解碼部16，只有視頻數(shù)據(jù)121及音頻數(shù)據(jù)122被再生。因此，可以取代第1優(yōu)先級表，而利用圖4B所示的第2優(yōu)先級表。
圖4B中，在第2優(yōu)先級表中，按應同時處理的圖形的軌道，來規(guī)定各圖形的優(yōu)先順序。
第2優(yōu)先級表中，如第1行所示，在同時處理的圖形軌道是幀、暗影、標志、加重及提示的場合下，幀的優(yōu)先順序是1，暗影的優(yōu)先順序是5，標志的優(yōu)先順序是2，加重的優(yōu)先順序是3，提示的優(yōu)先順序是4。如第2行所示，在同時處理的圖形軌道是名稱、幀、暗影的場合下，名稱的優(yōu)先順序是1，幀的優(yōu)先順序是2，暗影的優(yōu)先順序是2。...，如最終行所示，在同時處理的圖形軌道是標志、加重、提示的場合下，標志的優(yōu)先順序是1，加重的優(yōu)先順序是2，提示的優(yōu)先順序是3。
在具有該第2優(yōu)先級表的再生裝置10中，在所輸入的影像數(shù)據(jù)的軌道由視頻數(shù)據(jù)121、音頻數(shù)據(jù)122、圖形數(shù)據(jù)(幀)124、圖形數(shù)據(jù)(暗影)125、圖形數(shù)據(jù)(標志)126、圖形數(shù)據(jù)(加重)127、圖形數(shù)據(jù)(提示)128來構成的場合下，優(yōu)先級判別部14采用第2優(yōu)先級表中第1行的優(yōu)先級，來實行圖3的S12及S13。因此，在應同時處理的影像數(shù)據(jù)是視頻數(shù)據(jù)121、音頻數(shù)據(jù)122、圖形數(shù)據(jù)(幀)124、圖形數(shù)據(jù)(暗影)125、圖形數(shù)據(jù)(標志)126、圖形數(shù)據(jù)(加重)127、圖形數(shù)據(jù)(提示)128的場合下，如果閾值是3，則圖形數(shù)據(jù)(暗影)125、圖形數(shù)據(jù)(加重)127、圖形數(shù)據(jù)(提示)128不再生。
在所輸入的影像數(shù)據(jù)的軌道由視頻數(shù)據(jù)121、音頻數(shù)據(jù)122、圖形數(shù)據(jù)(名稱)123、圖形數(shù)據(jù)(幀)124、圖形數(shù)據(jù)(暗影)125來構成的場合下，優(yōu)先級判別部14采用第2優(yōu)先級表中第2行的優(yōu)先級，來實行圖3的S12及S13。在該場合下，由于幀與暗影的優(yōu)先順序均是2，因而在這些圖形數(shù)據(jù)被同時輸入的場合下，優(yōu)先級判別部14便廢棄這兩種數(shù)據(jù)。
接下來，對其它實施方式作以說明。
實施方式2在實施方式1中，只有圖形數(shù)據(jù)由多個軌道來構成，而實施方式2是一種不僅圖形數(shù)據(jù)，音頻數(shù)據(jù)、文本數(shù)據(jù)等也由多個軌道來構成場合下的實施方式。
圖5是表示實施方式2中再生裝置構成的框圖。
圖5中，實施方式2中的再生裝置30構成為具有輸入數(shù)據(jù)接口11、輸入數(shù)據(jù)解析部12、優(yōu)先級判別部31、優(yōu)先級表寄存部33、圖像解碼部15、圖形解碼部16、文本解碼部32、聲響解碼部17、圖像處理部18、圖像輸出部19及聲響輸出部20。
輸入數(shù)據(jù)接口11與輸入數(shù)據(jù)解析部12連接，輸入數(shù)據(jù)解析部12與優(yōu)先級判別部31連接。優(yōu)先級判別部31與優(yōu)先級表寄存部33、圖像解碼部15、圖形解碼部16、文本解碼部32、聲響解碼部17連接。
圖像解碼部15、圖形解碼部16、文本解碼部32與圖像處理部18連接。文本解碼部32對所輸入的影像數(shù)據(jù)(文本數(shù)據(jù))進行解碼，然后輸出到圖像處理部18。
圖像處理部18與圖像輸出部19連接。聲響解碼部17與聲響輸出部20連接。
接下來，對實施方式2中再生裝置的動作作以說明。
圖6是表示實施方式2中的輸入數(shù)據(jù)一例的附圖。
圖7是表示實施方式2中優(yōu)先級表的附圖。
首先，通過輸入數(shù)據(jù)接口11，輸入數(shù)據(jù)被輸入到輸入數(shù)據(jù)解析部12。輸入數(shù)據(jù)是一種分別具有1個或多個視頻數(shù)據(jù)、音頻數(shù)據(jù)、圖形數(shù)據(jù)、文本數(shù)據(jù)的影像數(shù)據(jù)，各數(shù)據(jù)中包含表示軌道類別的識別符。
比如，輸入數(shù)據(jù)如圖6所示，由資源原子151、數(shù)據(jù)原子152來構成。數(shù)據(jù)原子152構成為具有視頻-1數(shù)據(jù)181、音頻-1數(shù)據(jù)182、音頻-2數(shù)據(jù)183、音頻-3數(shù)據(jù)184、圖形-1數(shù)據(jù)185、圖形-2數(shù)據(jù)186、文本-1數(shù)據(jù)187、文本-2數(shù)據(jù)188、文本-3數(shù)據(jù)189、文本-4數(shù)據(jù)190各實際數(shù)據(jù)。為了使各實際數(shù)據(jù)在時間軸上相關聯(lián)來管理，資源原子151構成為具有軌道原子(視頻-1)161、軌道原子(音頻-1)162、軌道原子(音頻-2)163、軌道原子(音頻-3)164、軌道原子(圖形-1)165、軌道原子(圖形-2)166、軌道原子(文本-1)167、軌道原子(文本-2)168、軌道原子(文本-3)169、軌道原子(文本-4)170。用于判別實際數(shù)據(jù)的數(shù)據(jù)類別的識別符在與實際數(shù)據(jù)對應的軌道原子的軌道特性原子中被記述。
輸入數(shù)據(jù)解析部12參照該軌道特性原子內(nèi)記述的識別符，來判別實際數(shù)據(jù)的軌道類別，并將判別結(jié)果輸出到優(yōu)先級判別部31。
輸入判別結(jié)果及實際數(shù)據(jù)后，優(yōu)先級判別部31訪問優(yōu)先級表寄存部33，由此來獲得優(yōu)先順序。
關于優(yōu)先順序，對各軌道以序列號來分配。比如，如圖7所示，視頻-1的優(yōu)先順序為1，音頻-1的優(yōu)先順序為2，音頻-2的優(yōu)先順序為5，音頻-3的優(yōu)先順序為7，圖形-1的優(yōu)先順序為6，圖形-2的優(yōu)先順序為8，文本-1的優(yōu)先順序為3，文本-2的優(yōu)先順序為4，文本-3的優(yōu)先順序為9，文本-4的優(yōu)先順序為10。數(shù)值越小，優(yōu)先順序越高，數(shù)值越大，優(yōu)先順序越低。
接下來，優(yōu)先級判別部31根據(jù)判別結(jié)果，來判別所輸入的實際數(shù)據(jù)是哪個軌道的實際數(shù)據(jù)。優(yōu)先級判別部31通過參照所獲得的優(yōu)先順序，來識別該實際數(shù)據(jù)的優(yōu)先順序，并對該實際數(shù)據(jù)的優(yōu)先順序與閾值進行比較。
在比較結(jié)果是該實際數(shù)據(jù)的優(yōu)先順序的優(yōu)先級高于閾值的場合下，優(yōu)先級判別部31根據(jù)實際數(shù)據(jù)的類別，將該實際數(shù)據(jù)輸出到圖像解碼部15、圖形解碼部16、文本解碼部32或聲響解碼部17。另一方面，在比較結(jié)果是該實際數(shù)據(jù)的優(yōu)先順序的優(yōu)先級低于閾值的場合下，優(yōu)先級判別部31廢棄該實際數(shù)據(jù)。
比如，在根據(jù)再生裝置30的同時再生能力，閾值被設定為5的場合下，視頻-1數(shù)據(jù)181、音頻-1數(shù)據(jù)182、文本-1數(shù)據(jù)187、文本-2數(shù)據(jù)188分別被輸出到圖像解碼部15、聲響解碼部17或文本解碼部32。圖像處理部18將解碼后的文本-1數(shù)據(jù)187及文本-2數(shù)據(jù)188疊加到視頻-1數(shù)據(jù)181，進行顯示處理，并輸出到圖像輸出部19。
比如，在根據(jù)再生裝置30的同時再生能力，閾值被設定為7的場合下，視頻-1數(shù)據(jù)181、音頻-1數(shù)據(jù)182、音頻-2數(shù)據(jù)183、圖形-1數(shù)據(jù)185、文本-1數(shù)據(jù)187及文本-2數(shù)據(jù)188分別被輸出到圖像解碼部15、聲響解碼部17、圖形解碼部16或文本解碼部32。圖像處理部18將解碼后的圖形-1數(shù)據(jù)185、文本-1數(shù)據(jù)187及文本-2數(shù)據(jù)188疊加到視頻-1數(shù)據(jù)181，進行顯示處理，并輸出到圖像輸出部19。
這樣在實施方式2中，由于按照優(yōu)先順序，在再生裝置30的處理能力范圍內(nèi)再生實際數(shù)據(jù)，因而可在平滑的動作下，無漏幀地再生影像數(shù)據(jù)。此外由于按照優(yōu)先順序，在再生裝置30的處理能力范圍內(nèi)再生實際數(shù)據(jù)，因而不必根據(jù)再生裝置30的處理能力來作成影像數(shù)據(jù)，即使在處理能力相異的再生裝置中，也可利用共同的影像數(shù)據(jù)。通過使優(yōu)先順序相異，即使是同一處理能力，也可再生疊加了不同圖形的影像。
此外通過具有多個音頻數(shù)據(jù)，可以對應單音再生及立體聲再生。此外通過具有多個文本數(shù)據(jù)，可以用多種語言來顯示字幕。
接下來，對其它實施方式作以說明。
實施方式3在采用了第2優(yōu)先級表的實施方式2中，優(yōu)先級判別部31根據(jù)數(shù)據(jù)類別來選擇閾值，并對軌道的優(yōu)先級與閾值進行比較，根據(jù)其結(jié)果，選擇是將數(shù)據(jù)輸出到各解碼部，還是廢棄，而實施方式3是一種按各數(shù)據(jù)類別來設置判別單元，并按各數(shù)據(jù)類別來進行輸入數(shù)據(jù)優(yōu)先順序的判別的實施方式。
圖8是表示實施方式3中再生裝置構成的框圖。
圖8中，實施方式3中的再生裝置40構成為具有輸入數(shù)據(jù)接口11、輸入數(shù)據(jù)解析部41、優(yōu)先級表寄存部35、圖像數(shù)據(jù)寄存部42、圖形數(shù)據(jù)寄存部44、文本數(shù)據(jù)寄存部46、聲響數(shù)據(jù)寄存部48、圖像數(shù)據(jù)選擇部43、圖形數(shù)據(jù)選擇部45、文本數(shù)據(jù)選擇部47、聲響數(shù)據(jù)選擇部49、圖像解碼部15、圖形解碼部16、文本解碼部32、聲響解碼部17、圖像處理部18、圖像輸出部19及聲響輸出部20。
輸入數(shù)據(jù)接口11與輸入數(shù)據(jù)解析部41連接。
輸入數(shù)據(jù)解析部41與圖像數(shù)據(jù)寄存部42、圖形數(shù)據(jù)寄存部44、文本數(shù)據(jù)寄存部46、聲響數(shù)據(jù)寄存部48連接，根據(jù)輸入數(shù)據(jù)的數(shù)據(jù)類別，將輸入數(shù)據(jù)輸出到上述各寄存部。
圖像數(shù)據(jù)寄存部42是寄存輸入數(shù)據(jù)中的視頻數(shù)據(jù)的存儲器，與圖像數(shù)據(jù)選擇部43連接。圖形數(shù)據(jù)寄存部44是寄存輸入數(shù)據(jù)中的圖形數(shù)據(jù)的存儲器，與圖形數(shù)據(jù)選擇部45連接。文本數(shù)據(jù)寄存部46是寄存輸入數(shù)據(jù)中的文本數(shù)據(jù)的存儲器，與文本數(shù)據(jù)選擇部47連接。聲響數(shù)據(jù)寄存部48是寄存輸入數(shù)據(jù)中的聲響數(shù)據(jù)的存儲器，與聲響數(shù)據(jù)選擇部49連接。
圖像數(shù)據(jù)選擇部43與優(yōu)先級表寄存部35及圖像解碼部15連接。圖像數(shù)據(jù)選擇部43基于判別結(jié)果，參照優(yōu)先級表寄存部35中寄存的優(yōu)先級表，由此根據(jù)預先設定的閾值，來決定所輸入的影像數(shù)據(jù)的再生優(yōu)先順序。圖像數(shù)據(jù)選擇部43按照所決定的再生優(yōu)先順序，來廢棄該圖像數(shù)據(jù)，或者輸出到圖像解碼部15。
圖形數(shù)據(jù)選擇部45與優(yōu)先級表寄存部35及圖形解碼部16連接。圖形數(shù)據(jù)選擇部45基于判別結(jié)果，參照優(yōu)先級表寄存部35中寄存的優(yōu)先級表，由此根據(jù)預先設定的閾值，來決定所輸入的影像數(shù)據(jù)的再生優(yōu)先順序。圖形數(shù)據(jù)選擇部45按照所決定的再生優(yōu)先順序，來廢棄該圖形數(shù)據(jù)，或者輸出到圖形解碼部16。
文本數(shù)據(jù)選擇部47與優(yōu)先級表寄存部35及文本解碼部32連接。文本數(shù)據(jù)選擇部47基于判別結(jié)果，參照優(yōu)先級表寄存部35中寄存的優(yōu)先級表，由此根據(jù)預先設定的閾值，來決定所輸入的文本數(shù)據(jù)的再生優(yōu)先順序。文本數(shù)據(jù)選擇部47按照所決定的再生優(yōu)先順序，來廢棄該文本數(shù)據(jù)，或者輸出到文本解碼部32。
聲響數(shù)據(jù)選擇部49與優(yōu)先級表寄存部35及聲響解碼部17連接。聲響數(shù)據(jù)選擇部49基于判別結(jié)果，參照優(yōu)先級表寄存部35中寄存的優(yōu)先級表，由此根據(jù)預先設定的閾值，來決定所輸入的聲響數(shù)據(jù)的再生優(yōu)先順序。聲響數(shù)據(jù)選擇部49按照所決定的再生優(yōu)先順序，來廢棄該聲響數(shù)據(jù)，或者輸出到聲響解碼部17。
圖像解碼部15、圖形解碼部16、文本解碼部32與圖像處理部18連接。圖像處理部18與圖像輸出部19連接。聲響解碼部17與聲響輸出部20連接。
在優(yōu)先級表寄存部35中，如圖9所示，按比如數(shù)據(jù)類別來存儲閾值，同時按各數(shù)據(jù)來存儲優(yōu)先順序。
圖9是表示實施方式3中優(yōu)先級表的附圖。
圖9中，在實施方式3中的優(yōu)先級表中，按數(shù)據(jù)類別來規(guī)定閾值，并按各數(shù)據(jù)的各軌道來規(guī)定優(yōu)先順序。
比如在優(yōu)先級表中，視頻的閾值為2，視頻-1的優(yōu)先順序為1。音頻的閾值為3，音頻-1的優(yōu)先順序為1，音頻-2的優(yōu)先順序為4，音頻數(shù)據(jù)-3的優(yōu)先順序為3，音頻-4的優(yōu)先順序為2。圖形的閾值為3，圖形-1的優(yōu)先順序為1，圖形-2的優(yōu)先順序為4，圖形-3的優(yōu)先順序為2。文本的閾值為2，文本-1的優(yōu)先順序為1，文本-2的優(yōu)先順序為3，文本-3的優(yōu)先順序為5，文本-4的優(yōu)先順序為6。
接下來，對實施方式3中再生裝置的動作作以說明。
圖10是表示實施方式3中文本數(shù)據(jù)選擇部動作的流程圖。
首先，通過輸入數(shù)據(jù)接口11，輸入數(shù)據(jù)被輸入到輸入數(shù)據(jù)解析部41。
輸入數(shù)據(jù)解析部41參照軌道特性原子內(nèi)所記述的識別符，來判別實際數(shù)據(jù)的數(shù)據(jù)類別，根據(jù)判別結(jié)果，將輸入數(shù)據(jù)與判別結(jié)果一起輸入到圖像數(shù)據(jù)寄存部42、圖形數(shù)據(jù)寄存部44、文本數(shù)據(jù)寄存部46或聲響數(shù)據(jù)寄存部48。
由于圖像數(shù)據(jù)選擇部43、圖形數(shù)據(jù)選擇部45、文本數(shù)據(jù)選擇部47、聲響數(shù)據(jù)選擇部49中，只有處理數(shù)據(jù)的類別相異，而其動作相同，因而將文本數(shù)據(jù)選擇部47的動作作為該各部的代表，在以下作以說明。
圖10中，從文本數(shù)據(jù)寄存部46輸入判別結(jié)果及實際數(shù)據(jù)后，文本數(shù)據(jù)選擇部47訪問優(yōu)先級表寄存部35，由此來獲得可再生的文本軌道數(shù)(文本的閾值)(S31)。
接下來，文本數(shù)據(jù)選擇部47訪問優(yōu)先級表寄存部35，由此來獲得文本數(shù)據(jù)寄存部46中寄存的各文本數(shù)據(jù)所對應的優(yōu)先順序(S32)。
文本數(shù)據(jù)選擇部47通過參照所獲得的閾值及優(yōu)先順序，來對該文本的實際數(shù)據(jù)的優(yōu)先順序與閾值進行比較(S33)。
在比較結(jié)果是該文本的實際數(shù)據(jù)優(yōu)先順序的優(yōu)先級高于閾值的場合下，文本數(shù)據(jù)選擇部47將該文本的實際數(shù)據(jù)輸出到文本解碼部32(S34)。另一方面，在比較結(jié)果是該文本的實際數(shù)據(jù)優(yōu)先順序的優(yōu)先級低于閾值的場合下，文本數(shù)據(jù)選擇部47廢棄該文本的實際數(shù)據(jù)。
這樣在實施方式3中，由于按數(shù)據(jù)類別來規(guī)定可再生的軌道數(shù)，因而可在再生裝置的再生能力范圍內(nèi)適當?shù)卦偕鲾?shù)據(jù)。尤其是，由于應在單位時間內(nèi)處理的數(shù)據(jù)量因數(shù)據(jù)類別而異，所以可適當?shù)貨Q定閾值。
接下來，對其它實施方式作以說明。
實施方式4在上述的實施方式中，在所有數(shù)據(jù)類別的軌道均不存在的場合下，不能完全利用再生裝置的再生處理能力。為此，實施方式4是一種根據(jù)優(yōu)先順序來再生各數(shù)據(jù)，使未利用的再生處理能力降到最小的實施方式。
圖11是表示實施方式4中再生裝置構成的框圖。
圖11中，實施方式4的再生裝置50構成為具有輸入數(shù)據(jù)接口11、輸入數(shù)據(jù)解析部41、圖像數(shù)據(jù)寄存部42、圖形數(shù)據(jù)寄存部44、文本數(shù)據(jù)寄存部46、聲響數(shù)據(jù)寄存部48、數(shù)據(jù)選擇部51、優(yōu)先級表寄存部37、圖像解碼部15、圖形解碼部16、文本解碼部32、聲響解碼部17、圖像處理部18、圖像輸出部19及聲響輸出部20。
輸入數(shù)據(jù)接口11與輸入數(shù)據(jù)解析部41連接。輸入數(shù)據(jù)解析部41與圖像數(shù)據(jù)寄存部42、圖形數(shù)據(jù)寄存部44、文本數(shù)據(jù)寄存部46、聲響數(shù)據(jù)寄存部48連接。
圖像數(shù)據(jù)寄存部42、圖形數(shù)據(jù)寄存部44、文本數(shù)據(jù)寄存部46、聲響數(shù)據(jù)寄存部48與數(shù)據(jù)選擇部51連接。
如后所述，數(shù)據(jù)選擇部51基于再生裝置50的再生處理能力和各數(shù)據(jù)的優(yōu)先順序及其有無，來將各實際數(shù)據(jù)輸出到圖像解碼部15、圖形解碼部16、文本解碼部32或聲響解碼部17之一，或予以廢棄。而且數(shù)據(jù)選擇部51在必要時讀入優(yōu)先級表寄存部37和最大再生處理能力(MaxTrack)及各實際數(shù)據(jù)的優(yōu)先順序。
這里，在優(yōu)先級表寄存部37中，不考慮軌道的類別，對所有軌道均附加了優(yōu)先順序的優(yōu)先級表被存儲。
圖12是表示實施方式4中的優(yōu)先級表的附圖。
圖12中，在優(yōu)先級表中，比如視頻-1的優(yōu)先順序為1，視頻-2的優(yōu)先順序為9，音頻-1的優(yōu)先順序為6，音頻-2的優(yōu)先順序為2，音頻-3的優(yōu)先順序為11，音頻-4的優(yōu)先順序為12，圖形-1的優(yōu)先順序為4，圖形-2的優(yōu)先順序為10，圖形-3的優(yōu)先順序為5，圖形-4的優(yōu)先順序為15，圖形-5的優(yōu)先順序為17，文本-1的優(yōu)先順序為3，文本-2的優(yōu)先順序為7，文本-3的優(yōu)先順序為8，文本-4的優(yōu)先順序為13，文本-5的優(yōu)先順序為14，文本-6的優(yōu)先順序為16。數(shù)值越小，優(yōu)先順序越高，數(shù)值越大，優(yōu)先順序越低。
圖像解碼部15、圖形解碼部16、文本解碼部32與圖像處理部18連接。圖像處理部18與圖像輸出部19連接。聲響解碼部17與聲響輸出部20連接。
接下來，對實施方式4中再生裝置的動作作以說明。
圖13是表示實施方式4中數(shù)據(jù)選擇部動作的流程圖。
首先，通過輸入數(shù)據(jù)接口11，輸入數(shù)據(jù)被輸入到輸入數(shù)據(jù)解析部41。
輸入數(shù)據(jù)解析部41參照軌道特性原子內(nèi)所記述的識別符，來判別實際數(shù)據(jù)的數(shù)據(jù)類別，根據(jù)判別結(jié)果，將輸入數(shù)據(jù)與判別結(jié)果一起輸入到圖像數(shù)據(jù)寄存部42、圖形數(shù)據(jù)寄存部44、文本數(shù)據(jù)寄存部46或聲響數(shù)據(jù)寄存部48。
圖13中，數(shù)據(jù)選擇部51訪問優(yōu)先級表寄存部37，由此讀入再生裝置50的MaxTrack(S41)。
接下來，數(shù)據(jù)選擇部51訪問優(yōu)先級表寄存部37，由此來識別其優(yōu)先順序最高的視頻數(shù)據(jù)的軌道，并從圖像數(shù)據(jù)寄存部42讀入視頻數(shù)據(jù)(S42)。
接下來，由于已將再生能力的一部分配給了視頻數(shù)據(jù)，因而數(shù)據(jù)選擇部51將該部分從MaxTrack減去(S43)。
接下來，數(shù)據(jù)選擇部51訪問優(yōu)先級表寄存部37，由此來識別其優(yōu)先順序最高的音頻數(shù)據(jù)的軌道，并從聲響數(shù)據(jù)寄存部48讀入音頻數(shù)據(jù)(S44)。
接下來，由于已將再生能力的一部分配給了音頻數(shù)據(jù)，因而數(shù)據(jù)選擇部51將該部分從MaxTrack減去(S45)。
這樣，由于對視頻數(shù)據(jù)及音頻數(shù)據(jù)的再生優(yōu)先分配再生能力，因而可以確保最低限度的影像再生。
接下來，數(shù)據(jù)選擇部51判斷是否MaxTrack＞0，即再生裝置50中是否還有再生處理能力(S46)。
在判斷結(jié)果是MaxTrack＞0的場合下，由于仍有再生處理能力，因而通過訪問優(yōu)先級表寄存部37，來選擇寄存于各寄存部的軌道中尚未分配再生處理能力的軌道中，其優(yōu)先順序最高的數(shù)據(jù)軌道(S47)。
接下來，由于已將再生能力的一部分配給了該實際數(shù)據(jù)，因而數(shù)據(jù)選擇部51將該部分從MaxTrack減去(S48)另一方面，在判斷結(jié)果是MaxTrack≤0的場合下，由于不再有再生處理能力，因而結(jié)束應再生軌道的選擇。
這樣在實施方式4中，由于在有再生處理能力的場合下，依次選擇寄存于各寄存部的軌道中尚未分配再生處理能力的軌道中，其優(yōu)先順序最高的數(shù)據(jù)軌道，因而可使再生裝置50的再生處理能力不剩余地全部加以利用。
接下來對其它實施方式作以說明。
實施方式5在實施方式4中，從在決定可再生的軌道時，數(shù)據(jù)選擇部可簡單地進行決定這一觀點出發(fā)，處理各軌道數(shù)據(jù)所需的再生裝置的再生處理能力被看作是相同的，只由軌道數(shù)來決定可再生的軌道。而實施方式5是一種考慮各軌道的再生處理所需的時間，來決定可再生的軌道的實施方式。因此，與實施方式4相比，本實施方式可更高效地利用再生裝置的再生處理能力。
這里，實施方式5的再生裝置中，優(yōu)先級表寄存部37不僅具有寄存優(yōu)先級表的非易失性存儲電路，還具有寄存處理中的各數(shù)據(jù)的可讀寫存儲電路(比如RAM(random-access memory))及與數(shù)據(jù)選擇部51連接，標刻時間的計時器(未圖示)，數(shù)據(jù)選擇部51除了進行后述圖14所示的處理之外，與圖11所示的構成相同，因而省略其構成的說明。
在本實施方式中，對于所有軌道，假設其再生處理中的單位時間(比如在QT場合下，是時間刻度(Time scale)與取樣持續(xù)時間(Sampleduration)的積)是相同的。
接下來，對實施方式5中再生裝置的動作作以說明。
圖14是表示實施方式5中數(shù)據(jù)選擇部動作的流程圖。
首先，通過輸入數(shù)據(jù)接口11，輸入數(shù)據(jù)被輸入到輸入數(shù)據(jù)解析部41。
輸入數(shù)據(jù)解析部41參照軌道特性原子內(nèi)所記述的識別符，來判別實際數(shù)據(jù)的數(shù)據(jù)類別，根據(jù)判別結(jié)果，將輸入數(shù)據(jù)與判別結(jié)果一起輸入到圖像數(shù)據(jù)寄存部42、圖形數(shù)據(jù)寄存部44、文本數(shù)據(jù)寄存部46或聲響數(shù)據(jù)寄存部48。
圖14中，數(shù)據(jù)選擇部51對變量T1、T2、Tr、Tc、Ts等變量進行初置(S51)。
接下來，數(shù)據(jù)選擇部51從計時器獲取當前時刻，并將該當前時刻代入變量T1(S52)。
接下來，數(shù)據(jù)選擇部51根據(jù)時間對樣本原子及媒體處理原子來進行計算，獲取視頻數(shù)據(jù)(圖像數(shù)據(jù))的幀速率(S53)。
接下來數(shù)據(jù)選擇部51計算為再生處理1幀而分配的處理時間，從該處理時間減去進行軌道選擇等處理所需的校正時間Tc，并將相減結(jié)果代入變量Tr(S54)。變量Tr是為再生1幀而分配的有效時間。
這里，校正時間Tc作為預定的初始值寄存于優(yōu)先級表寄存部37，然后變更為在使用該再生裝置中實際所需的時間。規(guī)定的初始值是下述場合的處理時間，即比如包含有多個軌道以便一定進行軌道的選擇處理，并在識別選擇優(yōu)先順序高的軌道的處理中花費更多的時間，如此來進行數(shù)據(jù)配置，準備多個輸入數(shù)據(jù)，通過將這些數(shù)據(jù)實際輸入到再生裝置，來計測識別選擇優(yōu)先順序高的軌道的處理所需的時間，在該計測結(jié)果中最需要時間的場合。
接下來數(shù)據(jù)選擇部51訪問優(yōu)先級表寄存部37，由此來識別優(yōu)先順序最高的視頻數(shù)據(jù)軌道，并從圖像數(shù)據(jù)寄存部42讀入視頻數(shù)據(jù)(S55)。
接下來，數(shù)據(jù)選擇部51計算出再生處理所讀入的該視頻數(shù)據(jù)所需的消耗時間，并將計算結(jié)果代入變量Ts(S56)。這里，再生處理所需的時間因數(shù)據(jù)的Codec類型而異。因此，關于各Codec類型，將各種數(shù)據(jù)輸入到再生裝置來進行再生處理，并實測處理時間，從所得到的處理時間的數(shù)據(jù)進行統(tǒng)計處理，比如求出平均值，由此來決定。此外所謂Codec類型，是數(shù)據(jù)編碼及解碼方法的種類，比如，在視頻場合下是MPEG2等。
接下來，數(shù)據(jù)選擇部51從變量Tr減去變量Ts，將相減結(jié)果作為新變量Tr的值(S57)。
接下來，數(shù)據(jù)選擇部51將在S55讀入的視頻數(shù)據(jù)的軌道追加到再生列表(S58)。再生列表在優(yōu)先級表寄存部37中作為軌道ID表來存儲。
接下來數(shù)據(jù)選擇部51訪問優(yōu)先級表寄存部37，由此來識別其優(yōu)先順序最高的音頻數(shù)據(jù)軌道，并從聲響數(shù)據(jù)寄存部48讀入音頻數(shù)據(jù)(S59)。
接下來，數(shù)據(jù)選擇部51計算出再生處理所讀入的該音頻數(shù)據(jù)所需的消耗時間，并將計算結(jié)果代入變量Ts。數(shù)據(jù)選擇部51從變量Tr減去變量Ts，將相減結(jié)果作為新變量Tr的值。接著，數(shù)據(jù)選擇部51將在S59讀入的音頻數(shù)據(jù)的軌道追加到再生列表(S60)。
這樣，由于對視頻數(shù)據(jù)及音頻數(shù)據(jù)的再生優(yōu)先分配再生能力，因而可確保最低限度的影像再生。
接下來數(shù)據(jù)選擇部51判斷是否Tr＞0，即再生裝置中是否還有再生處理能力(S61)。
在判斷結(jié)果是Tr＞0的場合下，由于仍有再生處理能力，因而通過訪問優(yōu)先級表寄存部37，來選擇寄存于各寄存部的軌道中尚未判斷再生處理合適與否的軌道中，其優(yōu)先順序最高的數(shù)據(jù)軌道(S62)。
接下來，數(shù)據(jù)選擇部51計算出再生處理所選擇的該數(shù)據(jù)所需的消耗時間，并將計算結(jié)果代入變量Ts(S63)。
接下來，數(shù)據(jù)選擇部51對變量Tr與變量Ts的大小進行比較，在變量Tr＞變量Ts的場合下，可在余下的再生處理能力范圍內(nèi)對所選擇的數(shù)據(jù)進行再生處理，因而數(shù)據(jù)選擇部51將在S62選擇的數(shù)據(jù)軌道追加到再生列表(S65)。
接下來，數(shù)據(jù)選擇部51從變量Tr減去變量Ts，并將相減結(jié)果作為新變量Tr的值，將處理返回S61(S66)。
另一方面，由于在S61，在變量Tr≤0的場合下，不再有再生處理能力，而且由于在S64，在變量Tr≤變量Ts的場合下，不再有再生處理所選擇的數(shù)據(jù)所需的足夠再生處理能力，因而在這些場合下，數(shù)據(jù)選擇部51從計時器獲取當前時刻，并將該當前時刻代入變量T2(S67)。
接下來數(shù)據(jù)選擇部51從變量T2減去變量T1，將相減結(jié)果代入校正時間Tc，并將校正時間Tc變更為再生裝置實際所需的時間(S68)。
接下來數(shù)據(jù)選擇部51根據(jù)再生列表，按數(shù)據(jù)內(nèi)容，將應再生的各數(shù)據(jù)輸出到圖像解碼部15、圖形解碼部16、文本解碼部32或聲響解碼部17，再生裝置使影像再生。
這樣在實施方式5中，由于在有再生處理能力的場合下，考慮實際的處理時間，來依次選擇寄存于各寄存部的軌道中尚未分配再生處理能力的軌道中，其優(yōu)先順序最高的數(shù)據(jù)軌道，因而與實施方式4相比，可使再生裝置的再生處理能力不剩余地全部加以利用。
接下來對其它實施方式作以說明。
實施方式6在實施方式5中，在再生裝置中仍有再生處理能力的場合下，從優(yōu)先順序最高的軌道來依次判斷該軌道可否在余下的再生處理能力范圍內(nèi)得到再生處理，在不能進行再生處理的場合下，不判斷其它軌道能否在余下的再生處理能力范圍內(nèi)得到再生處理，便結(jié)束軌道的選擇，但在實施方式6中，在這種場合下，判斷其它軌道能否在余下的再生處理能力范圍內(nèi)得到再生處理。因此，與實施方式5相比，本實施方式可更有效地利用再生裝置的再生處理能力。
這里，實施方式6的再生裝置中，優(yōu)先級表寄存部37不僅具有寄存優(yōu)先級表的非易失性存儲電路，還具有寄存處理中的各數(shù)據(jù)的可讀寫存儲電路(比如RAM(random-access memory))及與數(shù)據(jù)選擇部51連接，標刻時間的計時器(未圖示)，數(shù)據(jù)選擇部51除了進行后述圖15所示的處理之外，與圖11所示的構成相同，因而省略其構成的說明。
圖15是表示實施方式6中數(shù)據(jù)選擇部動作的流程圖。
圖15中，輸入數(shù)據(jù)通過輸入數(shù)據(jù)接口11來輸入，由數(shù)據(jù)選擇部51在再生列表中選擇優(yōu)先順序最高的視頻數(shù)據(jù)及音頻數(shù)據(jù)這一從S51至S60的處理與圖14相同，因而省略其說明。
數(shù)據(jù)選擇部51判斷是否Tr＞0(S61)。
在判斷結(jié)果是Tr＞0的場合下，由于仍有再生處理能力，因而通過訪問優(yōu)先級表寄存部37，來選擇寄存于各寄存部的軌道中尚未判斷再生處理合適與否的軌道中，其優(yōu)先順序最高的數(shù)據(jù)軌道(S62)。
接下來，數(shù)據(jù)選擇部51計算出再生處理所選擇的該數(shù)據(jù)所需的消耗時間，并將計算結(jié)果代入變量Ts(S63)。
接下來，數(shù)據(jù)選擇部51對變量Tr與變量Ts的大小進行比較，在變量Tr＞變量Ts的場合下，可在余下的再生處理能力范圍內(nèi)對所選擇的數(shù)據(jù)進行再生處理，因而數(shù)據(jù)選擇部51將在S62選擇的數(shù)據(jù)軌道追加到再生列表(S65)。
接下來，數(shù)據(jù)選擇部51從變量Tr減去變量Ts，并將相減結(jié)果作為新變量Tr的值，將處理返回S61(S66)。
另一方面，由于在S61，在變量Tr≤0的場合下，不再有再生處理能力，因而數(shù)據(jù)選擇部51從計時器獲取當前時刻，并將該當前時刻代入變量T2(S67)。
接下來數(shù)據(jù)選擇部51從變量T2減去變量T1，將相減結(jié)果代入校正時間Tc，并將校正時間Tc變更為再生裝置實際所需的時間(S68)。
在S64，在變量Tr≤變量Ts的場合下，由于不再有再生處理所選擇的數(shù)據(jù)所需的足夠再生處理能力，為判斷除該軌道之外，其它軌道中是否還有在余下的再生處理能力范圍內(nèi)可再生的軌道，數(shù)據(jù)選擇部51判斷寄存于各寄存部的軌道中是否有尚未判斷再生處理合適與否的軌道。
數(shù)據(jù)選擇部51在作為判斷的結(jié)果，具有尚未進行再生處理合適與否的判斷的軌道的場合下，使處理返回S61，在沒有尚未進行再生處理合適與否的判斷的軌道的場合下，進行S67的處理及S68的處理。
這樣在實施方式6中，由于在有再生處理能力的場合下，考慮優(yōu)先順序，對在該再生處理能力范圍內(nèi)可再生的全部軌道進行搜索，因而與實施方式5相比，可使再生裝置的再生處理能力進一步不剩余地加以利用。
接下來對其它實施方式作以說明。
實施方式7實施方式5及6中，作為前提條件，對所有軌道，其再生處理的單位時間是相同的，但本實施方式是一種無需該前提條件，更具一般性的實施方式。
圖16是表示實施方式7中數(shù)據(jù)選擇部動作的流程圖。
首先，通過輸入數(shù)據(jù)接口11，輸入數(shù)據(jù)被輸入到輸入數(shù)據(jù)解析部41。
輸入數(shù)據(jù)解析部41參照軌道特性原子內(nèi)所記述的識別符，來判別實際數(shù)據(jù)的數(shù)據(jù)類別，根據(jù)判別結(jié)果，將輸入數(shù)據(jù)與判別結(jié)果一起輸入到圖像數(shù)據(jù)寄存部42、圖形數(shù)據(jù)寄存部44、文本數(shù)據(jù)寄存部46或聲響數(shù)據(jù)寄存部48。
圖16中，數(shù)據(jù)選擇部51對變量T1、T2、Rt、Rc、Rp、Tc、Tf等變量進行初置(S81)。
接下來，數(shù)據(jù)選擇部51根據(jù)時間對樣本原子及媒體處理原子來進行計算，獲取視頻數(shù)據(jù)(圖像數(shù)據(jù))的幀速率(S82)。
接下來數(shù)據(jù)選擇部51計算為再生處理1幀而分配的處理時間，并將計算結(jié)果代入變量Tf(S83)。變量Tf是為再生1幀而分配的時間。
接下來，數(shù)據(jù)選擇部51將進行軌道選擇等處理所需的校正時間Tc除以變量Tf，并將相除結(jié)果代入Rc(S84)。
接下來，數(shù)據(jù)選擇部51根據(jù)比如優(yōu)先級表，按優(yōu)先順序來重新排列各軌道(S85)。
接下來，數(shù)據(jù)選擇部51在再生處理能力范圍內(nèi)選擇在再生開始時再生的軌道(S86)。
這里，對選擇在再生開始時再生的軌道的該動作作以說明。
圖17是表示再生開始時的軌道選擇動作的流程圖。
圖17中，數(shù)據(jù)選擇部51將變量Rc代入表示再生處理的總處理量的變量Rt(S111)。
接下來，數(shù)據(jù)選擇部51訪問優(yōu)先級表寄存部37，由此來識別其優(yōu)先順序最高的視頻數(shù)據(jù)的軌道，并從圖像數(shù)據(jù)寄存部42讀入視頻數(shù)據(jù)(S112)。
接下來，數(shù)據(jù)選擇部51計算出再生處理所讀入的該視頻數(shù)據(jù)所需的視頻數(shù)據(jù)處理量，并將計算結(jié)果代入變量Rs(S113)。這里，在比如QT場合下，視頻數(shù)據(jù)處理量是將1個樣本(1幀)的處理所需的時間除以1個樣本的持續(xù)時間的值。
同樣，音頻數(shù)據(jù)處理量是將1個樣本的處理所需的時間除以1個樣本的持續(xù)時間的值。圖形數(shù)據(jù)的處理量是將1個樣本的處理所需的時間除以影像的1幀時間(與視頻數(shù)據(jù)的1個樣本的持續(xù)時間相同)的值。特殊效果的處理量是將再生處理1幀影像的運算所需的時間除以影像的1幀時間的值。
接下來，數(shù)據(jù)選擇部51將變量Rs的值加到變量Rt內(nèi)，并將相加結(jié)果作為新變量Rt的值(S114)。
接下來，數(shù)據(jù)選擇部51訪問優(yōu)先級表寄存部37，由此來識別其優(yōu)先順序最高的音頻數(shù)據(jù)的軌道，并從圖像數(shù)據(jù)寄存部42讀入音頻數(shù)據(jù)(S115)。
接下來，數(shù)據(jù)選擇部51計算出再生處理所讀入的該音頻數(shù)據(jù)所需的視頻數(shù)據(jù)處理量，并將計算結(jié)果代入變量Rs(S116)。
接下來，數(shù)據(jù)選擇部51將變量Rs的值加到變量Rt內(nèi)，并將相加結(jié)果作為新變量Rt的值(S117)。
接下來，數(shù)據(jù)選擇部51判斷變量Rt是否處于1.0以下，即再生裝置中是否還有再生處理能力(S118)。
在判斷結(jié)果是變量Rt≤1.0的場合下，由于還有再生處理能力，因而可通過訪問優(yōu)先級表寄存部37，來選擇寄存于各寄存部的軌道中尚未判斷再生處理合適與否的軌道中，其優(yōu)先順序最高的數(shù)據(jù)軌道(S119)。
接下來，數(shù)據(jù)選擇部51計算出再生處理所選擇的該數(shù)據(jù)所需的處理量，并將計算結(jié)果代入變量Rs(S120)。
接下來，數(shù)據(jù)選擇部51將變量Rs的值加到變量Rt內(nèi)，將相加結(jié)果作為新變量Rt的值，使處理返回到S118(S121)。
另一方面，在S118中，其判斷結(jié)果是變量Rt＞1.0的場合下，由于不再有再生處理能力，因而使處理返回主流程的S87(圖16)(S122)。
返回圖16，數(shù)據(jù)選擇部51根據(jù)數(shù)據(jù)內(nèi)容，將作為應在再生開始時再生的數(shù)據(jù)來選擇的各數(shù)據(jù)輸出到圖像解碼部15、圖形解碼部16、文本解碼部32或聲響解碼部17，再生裝置開始影像再生(S87)。
接下來，數(shù)據(jù)選擇部51判斷是否有已結(jié)束再生的軌道(S88)。在判斷結(jié)果是沒有再生結(jié)束的軌道的場合下，數(shù)據(jù)選擇部51反復進行S88的處理。另一方面，在判斷結(jié)果是有再生結(jié)束的軌道的場合下，數(shù)據(jù)選擇部51從計時器獲取當前時刻，并代入變量T1(S89)。
接下來，數(shù)據(jù)選擇部51將再生結(jié)束的軌道從再生列表刪除(S90)。
接下來，數(shù)據(jù)選擇部51對變量Rt進行再計算(S91)。這里，對變量Rt的再計算作以說明。
圖18是表示Rt的再計算的流程圖。
圖18中，數(shù)據(jù)選擇部51將變量Rc的值代入變量Rt(S131)。
接下來，數(shù)據(jù)選擇部51訪問優(yōu)先級表寄存部37，由此來計數(shù)在再生列表中登錄的軌道數(shù)，并將計數(shù)結(jié)果代入變量n(S132)。
接下來，數(shù)據(jù)選擇部51將0代入環(huán)路變量j，以進行初置(S133)。
接下來，數(shù)據(jù)選擇部51判斷變量j與變量n的大小關系，在變量j＜變量n的場合下，計算出再生列表中第j個軌道的處理量，并將計算結(jié)果代入Rs(S135)。
接下來，數(shù)據(jù)選擇部51將變量Rs的值加到變量Rt內(nèi)，將相加結(jié)果作為新變量Rt的值(S136)。
接下來，數(shù)據(jù)選擇部51對環(huán)路變量j加1，將相加結(jié)果作為新環(huán)路變量j的值，由此來增加環(huán)路變量j，然后使處理返回S134(S137)。這樣，再生列表中所登錄的軌道的總處理量被再次計算。
另一方面，在S134，在變量j≥變量n的場合下，由于對刪除了再生處理已結(jié)束的軌道后的再生列表中所登錄的全部軌道，已計算出各處理量，總處理量已被再次計算，因而使處理返回主流程的S91(圖16)(S138)。
只按再生處理已結(jié)束的軌道的處理量來產(chǎn)生再生裝置的再生處理能力余量，因而應檢索并再生可按該余量來再生處理的軌道，進行S92至S100的處理。
即，返回圖16，數(shù)據(jù)選擇部51訪問優(yōu)先級表寄存部37，由此來選擇各寄存部中寄存的軌道中尚未登錄到再生列表的軌道中，其優(yōu)先順序最高的數(shù)據(jù)的軌道(S92)。
接下來，數(shù)據(jù)選擇部51計算出再生處理所選擇的該數(shù)據(jù)所需的處理量，并將計算結(jié)果代入變量Rp(S93)。
接下來，數(shù)據(jù)選擇部51判斷在變量Rt中加入了變量Rp值的相加結(jié)果是否小于1.0(S94)。
在判斷結(jié)果是(變量Rt+變量Rp)≤1.0的場合下，由于可使所選擇的軌道再生，因而將所選擇的軌道追加到再生列表(S95)。數(shù)據(jù)選擇部51將變量Rp的值加到變量Rt中，將相加結(jié)果作為新變量Rt的值，使處理返回S92(S96)。
另一方面，在S94中的判斷結(jié)果是(變量Rt+變量Rp)＞1.0的場合下，由于不再有只再生所選擇的軌道的再生處理能力，因而結(jié)束所選擇軌道的再生，數(shù)據(jù)選擇部51從計時器獲取當前時刻，并將當前時刻代入變量T2(S97)。
接下來，數(shù)據(jù)選擇部51從變量T2減去變量T1，將相減結(jié)果代入校正時間Tc，并將校正時間Tc變更為再生裝置實際所需的時間(S98)。
接下來，數(shù)據(jù)選擇部51將校正時間Tc除以變量Tf，并將相除結(jié)果代入Rc(S84)。
接下來，數(shù)據(jù)選擇部51訪問優(yōu)先級表寄存部37，根據(jù)數(shù)據(jù)內(nèi)容，將應按再生列表再生的各數(shù)據(jù)輸出到圖像解碼部15、圖形解碼部16、文本解碼部32或聲響解碼部17，再生裝置開始影像再生(S100)。接著數(shù)據(jù)選擇部51使處理返回S88。
在實施方式7中，即使所有軌道中，其再生處理的單位時間不相同，也可考慮實際處理量，在產(chǎn)生了再生處理能力后，依次選擇寄存于各寄存部的軌道中尚未分配再生處理能力的軌道中，其優(yōu)先順序最高的數(shù)據(jù)的軌道，因而與實施方式4相比，可不剩余地利用再生裝置的再生處理能力。
產(chǎn)業(yè)上的可利用性本發(fā)明的再生裝置中，判別單元可根據(jù)優(yōu)先順序表來參照所輸入的數(shù)據(jù)的優(yōu)先順序，只在數(shù)據(jù)的優(yōu)先順序高于規(guī)定閾值的場合下，才向規(guī)定的解碼單元輸出，因而可根據(jù)再生處理能力來設定規(guī)定的閾值，由此在再生處理能力范圍內(nèi)使數(shù)據(jù)再生，所以可得到動作平滑的不漏幀的影像，此外，由于可以根據(jù)優(yōu)先順序表來參照所輸入的數(shù)據(jù)的優(yōu)先順序，按數(shù)據(jù)的優(yōu)先順序來分配可在規(guī)定的時間內(nèi)再生的處理量(再生處理能力)，作成應再生數(shù)據(jù)的一覽表，并基于該一覽表，將數(shù)據(jù)輸出到解碼單元，因而再生裝置可在再生處理能力范圍內(nèi)使數(shù)據(jù)再生，所以可得到動作平滑的不漏幀的影像，因而可在再生處理能力范圍內(nèi)，按優(yōu)先順序來使數(shù)據(jù)再生，從而可再生出編輯者等認為是重要的特殊效果等。
權利要求書(按照條約第19條的修改)1.一種再生裝置，使包含圖像數(shù)據(jù)及用于編輯該圖像數(shù)據(jù)的1個以上編輯數(shù)據(jù)的影像數(shù)據(jù)再生，其特征在于具有輸入包含識別符的上述影像數(shù)據(jù)的輸入單元；解析單元，其參照在影像數(shù)據(jù)中包含的上述識別符，來判別由上述輸入單元輸入的影像數(shù)據(jù)的內(nèi)容；存儲單元，其存儲分配了按各數(shù)據(jù)的內(nèi)容來解碼的處理序號的優(yōu)先順序表、決定再生至哪個序號的數(shù)據(jù)為止的規(guī)定閾值；多個解碼單元，其按照各數(shù)據(jù)的類別來設置，對各數(shù)據(jù)分別解碼；判別單元，其基于從上述解析單元輸出的數(shù)據(jù)內(nèi)容和上述存儲單元中存儲的上述優(yōu)先順序表及上述規(guī)定閾值，來判別是否對由上述輸入單元讀入的數(shù)據(jù)解碼，在對該數(shù)據(jù)解碼的場合下，根據(jù)該數(shù)據(jù)的類別而輸出到上述多個解碼單元之一。
2.一種再生裝置，包括具有多個軌道，在上述多個軌道中分別記錄圖像數(shù)據(jù)及用于編輯該圖像數(shù)據(jù)的1個以上編輯數(shù)據(jù)的記錄媒體，其特征在于具有輸入單元，其讀入來自上述記錄媒體的包含表示軌道類別的上述識別符的各數(shù)據(jù)；解析單元，其參照在影像數(shù)據(jù)中包含的識別符，來判別記錄由上述輸入單元讀入的數(shù)據(jù)的軌道類別；存儲單元，其存儲使上述軌道類別與解碼處理的序號相關聯(lián)的優(yōu)先順序表、決定再生至哪個序號的軌道為止的規(guī)定閾值；多個解碼單元，其按照各數(shù)據(jù)的類別來設置，對各數(shù)據(jù)分別解碼；判別單元，其基于從上述解析單元輸出的軌道類別和上述存儲單元中存儲的上述優(yōu)先順序表及上述規(guī)定閾值，來判別是否對由上述輸入單元讀入的數(shù)據(jù)解碼，在對該數(shù)據(jù)解碼的場合下，根據(jù)該數(shù)據(jù)的類別而輸出到上述多個解碼單元之一。
3.一種再生裝置，使包含圖像數(shù)據(jù)及用于編輯該圖像數(shù)據(jù)的1個以上編輯數(shù)據(jù)的影像數(shù)據(jù)再生，其特征在于具有輸入包含識別符的上述影像數(shù)據(jù)的輸入單元；解析單元，其參照在影像數(shù)據(jù)中包含的上述識別符，來判別由上述輸入單元輸入的影像數(shù)據(jù)的內(nèi)容；
存儲單元，其存儲分配了按各數(shù)據(jù)內(nèi)容來解碼的處理序號的優(yōu)先順序表、匯總了有關應再生的數(shù)據(jù)的信息的一覽表；多個解碼單元，其按照各數(shù)據(jù)的類別來設置，對各數(shù)據(jù)分別解碼；判別單元，其基于從上述解析單元輸出的數(shù)據(jù)內(nèi)容和上述存儲單元中存儲的上述優(yōu)先順序表及可在規(guī)定時間內(nèi)再生的處理量，來作成上述一覽表，在基于該作成的一覽表來對由上述輸入單元讀入的數(shù)據(jù)解碼的場合下，根據(jù)該數(shù)據(jù)的類別而輸出到上述多個解碼單元之一。
4.權利要求1中記載的再生裝置，其特征在于上述優(yōu)先順序表按應在規(guī)定的單位時間內(nèi)處理的數(shù)據(jù)的內(nèi)容來作成。
5.權利要求2中記載的再生裝置，其特征在于上述優(yōu)先順序表按應在規(guī)定的單位時間內(nèi)處理的軌道類別來作成。
6.權利要求1或2中記載的再生裝置，其特征在于上述優(yōu)先順序表按數(shù)據(jù)類別來作成，上述規(guī)定的閾值按數(shù)據(jù)類別來設定。
權利要求
1.一種再生裝置，使包含圖像數(shù)據(jù)及用于編輯該圖像數(shù)據(jù)的1個以上編輯數(shù)據(jù)的影像數(shù)據(jù)再生，其特征在于具有輸入上述影像數(shù)據(jù)的輸入單元；解析單元，其判別由上述輸入單元輸入的影像數(shù)據(jù)的內(nèi)容；存儲單元，其存儲分配了按各數(shù)據(jù)的內(nèi)容來解碼的處理序號的優(yōu)先順序表、決定再生至哪個序號的數(shù)據(jù)為止的規(guī)定閾值；多個解碼單元，其按照各數(shù)據(jù)的類別來設置，對各數(shù)據(jù)分別解碼；判別單元，其基于從上述解析單元輸出的數(shù)據(jù)內(nèi)容和上述存儲單元中存儲的上述優(yōu)先順序表及上述規(guī)定閾值，來判別是否對由上述輸入單元讀入的數(shù)據(jù)解碼，在對該數(shù)據(jù)解碼的場合下，根據(jù)該數(shù)據(jù)的類別而輸出到上述多個解碼單元之一。
2.一種再生裝置，使具有多個軌道，在上述多個軌道中分別記錄圖像數(shù)據(jù)及用于編輯該圖像數(shù)據(jù)的1個以上編輯數(shù)據(jù)的記錄媒體再生，其特征在于具有讀入來自上述記錄媒體的各數(shù)據(jù)的輸入單元；解析單元，其判別記錄由上述輸入單元讀入的數(shù)據(jù)的軌道類別；存儲單元，其存儲使上述軌道類別與解碼處理的序號相關聯(lián)的優(yōu)先順序表、決定再生至哪個序號的軌道為止的規(guī)定閾值；多個解碼單元，其按照各數(shù)據(jù)的類別來設置，對各數(shù)據(jù)分別解碼；判別單元，其基于從上述解析單元輸出的軌道類別和上述存儲單元中存儲的上述優(yōu)先順序表及上述規(guī)定閾值，來判別是否對由上述輸入單元讀入的數(shù)據(jù)解碼，在對該數(shù)據(jù)解碼的場合下，根據(jù)該數(shù)據(jù)的類別而輸出到上述多個解碼單元之一。
3.一種再生裝置，使包含圖像數(shù)據(jù)及用于編輯該圖像數(shù)據(jù)的1個以上編輯數(shù)據(jù)的影像數(shù)據(jù)再生，其特征在于具有輸入上述影像數(shù)據(jù)的輸入單元；解析單元，其判別由上述輸入單元輸入的影像數(shù)據(jù)的內(nèi)容；存儲單元，其存儲分配了按各數(shù)據(jù)內(nèi)容來解碼的處理序號的優(yōu)先順序表、匯總了有關應再生的數(shù)據(jù)的信息的一覽表；多個解碼單元，其按照各數(shù)據(jù)的類別來設置，對各數(shù)據(jù)分別解碼；判別單元，其基于從上述解析單元輸出的數(shù)據(jù)內(nèi)容和上述存儲單元中存儲的上述優(yōu)先順序表及可在規(guī)定時間內(nèi)再生的處理量，來作成上述一覽表，在基于該作成的一覽表來對由上述輸入單元讀入的數(shù)據(jù)解碼的場合下，根據(jù)該數(shù)據(jù)的類別而輸出到上述多個解碼單元之一。
4.權利要求1中記載的再生裝置，其特征在于上述優(yōu)先順序表按應在規(guī)定的單位時間內(nèi)處理的數(shù)據(jù)的內(nèi)容來作成。
5.權利要求2中記載的再生裝置，其特征在于上述優(yōu)先順序表按應在規(guī)定的單位時間內(nèi)處理的軌道類別來作成。
6.權利要求1或2中記載的再生裝置，其特征在于上述優(yōu)先順序表按數(shù)據(jù)類別來作成，上述規(guī)定的閾值按數(shù)據(jù)類別來設定。
全文摘要
本發(fā)明涉及一種在再生處理能力范圍內(nèi)再生由多個軌道組成的影像數(shù)據(jù)的再生裝置。本發(fā)明中，使圖像數(shù)據(jù)及1個以上編輯數(shù)據(jù)被分別記錄于多個軌道的記錄媒體再生的再生裝置(10)的構成具有輸入單元(11)，其從記錄媒體讀入各數(shù)據(jù)；解析單元(12)，其判別輸入數(shù)據(jù)的記錄軌道的類別；存儲單元(13)，其存儲使軌道類別與解碼處理的序號相關聯(lián)的優(yōu)先順序表、決定再生至哪個序號為止的規(guī)定閾值；多個解碼單元(15、16、17)，其對各數(shù)據(jù)分別解碼；判別單元(14)，其基于來自解析單元(12)的軌道類別及存儲單元(13)的優(yōu)先順序表·規(guī)定閾值，來判別是否對輸入數(shù)據(jù)解碼，在解碼的場合下，根據(jù)該數(shù)據(jù)的類別而輸出到多個解碼單元(15、16、17)。
文檔編號H04N5/937GK1561635SQ0281939
公開日2005年1月5日 申請日期2002年10月2日 優(yōu)先權日2001年10月2日
發(fā)明者川手史隆, 山田誠, 平林光浩, 石坂敏彌 申請人:索尼株式會社