專利名稱：產(chǎn)生要記錄的信息信號的方法
技術領域：
本發(fā)明涉及一種產(chǎn)生要記錄的信息信號的方法、一種再現(xiàn)信息信號的方法、一種傳輸信息信號的方法、一種產(chǎn)生要記錄的信息信號的設備、一種再現(xiàn)信息信號的設備、一種傳輸信息信號的設備、一種信息信號記錄媒體以及一種傳輸信息信號的計算機程序。
背景技術：
在某些情況下，模擬聲頻信號和伴有模擬聲頻信號的模擬視頻信號轉換為在記錄媒體上傳輸和記錄的數(shù)字聲頻信號和數(shù)字視頻信號。例如，數(shù)字聲頻信號轉換為數(shù)字視頻信號基于壓縮編碼過程。在數(shù)字聲頻信號和數(shù)字視頻信號之間易于產(chǎn)生時間誤差。
根據(jù)用于補償在聲頻和視頻之間的這種時間誤差而設計的公知系統(tǒng)，將與所需的聲頻重播階段相關的第一時序信息加入到數(shù)字聲頻信號中，同時將與所需的視頻重播階段相關的第二時序信息加入到數(shù)字視頻信號中。選擇所需的聲頻重播階段和所需的視頻重播階段以在聲音和圖像之間提供同步。在重播的過程中，通過數(shù)字聲頻信號所表示的信息轉換為在通過第一時序信息所決定的時刻時的聲音，而同時在通過第二時序信息所決定的時刻顯示通過數(shù)字視頻信號所表示的信息。結果，聲頻的重播和視頻的重播彼此同步。
在公知的多路傳輸或記錄系統(tǒng)中，通過多路傳輸將與相同所需的重播階段相關的一部分數(shù)字聲頻信號和一部分數(shù)字視頻信號放置在相同的組中的同時傳輸或記錄它們。這種設計使得聲音和圖像的同步重播成為可能。
最近，包含壓縮編碼視頻數(shù)據(jù)和聲音數(shù)據(jù)的多路傳輸數(shù)據(jù)有時處理為位流(稱為傳輸流或節(jié)目流)的形式，并且這種形式可以使聲音和圖像的同步重播成為可能。一般地，在這種多路傳輸數(shù)據(jù)中并不容易僅僅編輯聲音數(shù)據(jù)。
這種編輯的實例是后期錄音，后期錄音僅編輯在多路傳輸數(shù)據(jù)(位流)中的聲音數(shù)據(jù)并將聲音數(shù)據(jù)以新的數(shù)據(jù)替換。后期錄音比較復雜。
日本專利申請公開6-275018/1994公開了記錄和再現(xiàn)設備，該設備運行在記錄模式或再現(xiàn)模式中。在日本申請6-275018中的設備的運行的記錄模式中，通過壓縮編碼過程將來自N個源的信息信號轉換為第一數(shù)字信號，并對第一數(shù)字信號進行調(diào)制并轉換為第二數(shù)字信號。分時地將第二數(shù)字信號寫入到記錄媒體中。在運行在再現(xiàn)模式的過程中，分時地從記錄媒體中讀出第二數(shù)字信號，對所讀出的第二數(shù)字信號進行解調(diào)并轉換回再現(xiàn)的第一數(shù)字信號。再現(xiàn)的第一數(shù)字信號轉換回再現(xiàn)的信息信號。同時輸出再現(xiàn)的信息信號。
日本專利申請公開11-144378/1999公開了后期錄音的方法，在這種方法中從數(shù)字記錄媒體中讀出包括視頻位流的原始數(shù)據(jù)。對所讀出的原始數(shù)據(jù)進行解碼。與原始數(shù)據(jù)的解碼過程同步地將聲音數(shù)據(jù)編碼成新的聲頻位流。新的聲頻位流被寫入到在時間位置上大致對應于原始數(shù)據(jù)記錄區(qū)的數(shù)字記錄媒體的區(qū)域中。
日本專利申請公開P2000-197005A公開了具有區(qū)域“A”和區(qū)域“B”的信息記錄媒體。區(qū)域“A”存儲包括視頻壓縮包和聲頻壓縮包的壓縮包流。區(qū)域“B”存儲具有第一、第二和第三信息片段的表。通過參考在表中的第一信息片段，確定在區(qū)域“A”中的聲頻壓縮包中有無聲頻數(shù)據(jù)對應于無聲。在聲頻壓縮包中的聲頻數(shù)據(jù)對應于無聲的情況下，可以如下地實施后期錄音。通過參考在表中的第二和第三信息片段，將新的聲頻信號編碼成新的聲頻數(shù)據(jù)，并且將新的聲頻數(shù)據(jù)格式化成新的聲頻壓縮包。新的聲頻壓縮包被寫在區(qū)域“A”中的舊的聲頻壓縮包上。
已有技術中的后期錄音將新的聲頻數(shù)據(jù)寫入到原始多路傳輸主數(shù)據(jù)流中，因此原始多路傳輸主數(shù)據(jù)流改變?yōu)樾碌臄?shù)據(jù)流。一般地，很難將新的多路傳輸主數(shù)據(jù)流再轉換回原始數(shù)據(jù)流。
在已有技術中很難后期錄音大量的新的聲頻信號并在重播的過程中從新的聲頻信號中選擇聲頻信號。

發(fā)明內(nèi)容
本發(fā)明的一個目的是提供一種產(chǎn)生要記錄的信息信號的方法，這種方法使得大量的新的聲頻信號的后期錄音、在重播的過程中從新的聲頻信號中選擇一個新的聲頻信號以及聲音和圖像的同步重播成為可能。
本發(fā)明的第二個目的是提供一種再現(xiàn)信息信號的改善的方法。
本發(fā)明的第三個目的是提供一種傳輸信息信號的改善的方法。
本發(fā)明的第四個目的是提供一種產(chǎn)生要記錄的信息信號的改善的設備。
本發(fā)明的第五個目的是提供一種再現(xiàn)信息信號的改善的設備。
本發(fā)明的第六個目的是提供一種傳輸信息信號的改善的設備。
本發(fā)明的第七個目的是提供一種改善的信息信號記錄媒體。
本發(fā)明的第八個目的是提供一種用于計算機傳輸信息信號的改善的計算機程序。
本發(fā)明的第一方面是提供一種產(chǎn)生要記錄的信息信號的方法。該方法包括如下步驟多路傳輸如下信號1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定獲得AV多路傳輸結果信號的視頻信號的指示時序的指示時序信息信號；在重播的過程中在與視頻信號同步的同時產(chǎn)生第二聲頻信號作為可以再現(xiàn)的替代第一聲頻信號的替換重播聲頻信號；對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號；以及將聲音產(chǎn)生時序信息信號加入到第二壓縮編碼結果聲頻信號中以獲得替換重播聲頻信號，該聲音產(chǎn)生時序信息信號基于參考時鐘信息信號并與視頻信號的同步化相關。
本發(fā)明的第二方面基于本發(fā)明的第一方面，提供進一步包括如下的步驟的方法將該替換重播聲頻信號劃分為每個都具有預定的數(shù)據(jù)大小的包，并將參考時鐘信息信號和聲音產(chǎn)生時序信息信號與每個包一起多路傳輸。
本發(fā)明的第三方面基于本發(fā)明的第一方面，提供一種方法，其中該替換重播聲頻信號包括分別從壓縮編碼聲頻信號中得到的許多輔助替換重播聲頻信號，并且將不同的標識信號分別加入到輔助替換重播聲頻信號中。
本發(fā)明的第四方面提供一種再現(xiàn)信息信號的方法。該方法包括如下的步驟再現(xiàn)通過多路傳輸如下的信號產(chǎn)生的AV多路傳輸結果信號1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定視頻信號的指示時序的指示時序信息信號；從所再現(xiàn)的AV多路傳輸結果信號中再現(xiàn)視頻信號；再現(xiàn)替換重播聲頻信號以再現(xiàn)第二聲頻信號，并通過如下的方式產(chǎn)生該替換重播聲頻信號1)對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號，以及2)將聲音產(chǎn)生時序信息信號加入到第二壓縮編碼結果聲頻信號中，該聲音產(chǎn)生時序信息信號指定第二壓縮編碼結果聲頻信號的聲音產(chǎn)生時序；從再現(xiàn)的AV多路傳輸結果信號中導出參考時鐘信息信號和指示時序信息信號；從再現(xiàn)的AV多路傳輸結果信號中導出壓縮編碼結果視頻信號；對所導出的壓縮編碼結果視頻信號進行解碼以得到解碼結果視頻信號；響應所導出的參考時鐘信息信號和所導出的指示時序信息信號將解碼結果視頻信號作為輸出視頻信號提供；從所再現(xiàn)的替換重播聲頻信號中導出聲音產(chǎn)生時序信息信號和第二聲頻信號；響應所導出的參考時鐘信息信號和所導出的聲音產(chǎn)生時序信息信號將所導出的第二聲頻信號作為輸出聲頻信號提供；比較參考時鐘信息信號和指示時序信息信號以得到第一比較結果；根據(jù)第一比較結果將視頻信號作為指示目的信號提供；比較參考時鐘信息信號和聲音產(chǎn)生時序信息信號以得到第二比較結果；根據(jù)第二比較結果將第二聲頻信號作為聲音產(chǎn)生目的信號提供。
本發(fā)明的第五方面基于本發(fā)明的第四方面，提供一種方法，其中該替換重播聲頻信號包括分別從壓縮編碼源聲頻信號中得到的許多輔助替換重播聲頻信號，并且將不同的標識信號分別加入到輔助替換重播聲頻信號中，以及其中通過參考標識信號選擇源聲頻信號中的一個源聲頻信號，以及將所選擇的源聲頻信號和視頻信號作為彼此同步的再現(xiàn)信號輸出。
本發(fā)明的第六方面提供一種傳輸信息信號的方法。該方法包括如下的步驟通過多路傳輸如下的信號產(chǎn)生主AV多路傳輸結果信號1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定視頻信號的指示時序的指示時序信息信號；并通過如下的方式產(chǎn)生替換重播聲頻信號1)對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號，以及2)將聲音產(chǎn)生時序信息信號加入到第二壓縮編碼結果聲頻信號中，該聲音產(chǎn)生時序信息信號基于參考時鐘信息信號指定第二壓縮編碼結果聲頻信號的聲音產(chǎn)生時序，其中可以再現(xiàn)第二聲頻信號替代第一聲頻信號；產(chǎn)生替換AV多路傳輸結果信號作為用于將壓縮編碼結果視頻信號連同第二壓縮編碼結果聲頻信號一起再現(xiàn)的信號；將替換AV多路傳輸結果信號反饋到傳輸線；從替換重播聲頻信號中導出第二壓縮編碼結果聲頻信號；以及將在主AV多路傳輸結果信號中的第一壓縮編碼結果聲頻信號替換為所導出的第二壓縮編碼結果聲頻信號以在將替換AV多路傳輸結果信號反饋到傳輸線中之前將主AV多路傳輸結果信號改變?yōu)樘鎿QAV多路傳輸結果信號。
本發(fā)明的第七方面提供一種產(chǎn)生要記錄的信息信號的設備。該設備包括如下裝置多路傳輸如下信號的裝置1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定獲得AV多路傳輸結果信號的視頻信號的指示時序的指示時序信息信號；在重播的過程中在與視頻信號同步的同時產(chǎn)生第二聲頻信號作為可以再現(xiàn)的替代第一聲頻信號的替換重播聲頻信號的裝置；對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號的裝置；以及將聲音產(chǎn)生時序信息信號加入到第二壓縮編碼結果聲頻信號中以獲得替換重播聲頻信號的裝置，該聲音產(chǎn)生時序信息信號基于參考時鐘信息信號并與視頻信號的同步化相關。
本發(fā)明的第八方面提供一種再現(xiàn)信息信號的設備。該設備包括如下的裝置再現(xiàn)通過多路傳輸如下的信號產(chǎn)生的AV多路傳輸結果信號的裝置1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)指定視頻信號的指示時序的指示時序信息信號；從所再現(xiàn)的AV多路傳輸結果信號中再現(xiàn)視頻信號的裝置；再現(xiàn)替換重播聲頻信號以再現(xiàn)第二聲頻信號的裝置，并通過如下的方式產(chǎn)生該替換重播聲頻信號1)對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號，以及2)將聲音產(chǎn)生時序信息信號加入到第二壓縮編碼結果聲頻信號中，該聲音產(chǎn)生時序信息信號指定第二壓縮編碼結果聲頻信號的聲音產(chǎn)生時序；其中可以再現(xiàn)第二聲頻信號替代第一聲頻信號；從再現(xiàn)的AV多路傳輸結果信號中導出參考時鐘信息信號和指示時序信息信號的裝置；從再現(xiàn)的AV多路傳輸結果信號中導出壓縮編碼結果視頻信號的裝置；對所導出的壓縮編碼結果視頻信號進行解碼以得到解碼結果視頻信號的裝置；響應所導出的參考時鐘信息信號和所導出的指示時序信息信號將解碼結果視頻信號作為輸出視頻信號提供的裝置；從所再現(xiàn)的替換重播聲頻信號中導出聲音產(chǎn)生時序信息信號和第二聲頻信號的裝置；響應所導出的參考時鐘信息信號和所導出的聲音產(chǎn)生時序信息信號將所導出的第二聲頻信號作為輸出聲頻信號提供的裝置。
本發(fā)明的第九方面基于本發(fā)明的第八方面，提供一種設備，其中該替換重播聲頻信號包括分別從壓縮編碼源聲頻信號中得到的許多輔助替換重播聲頻信號，并且將不同的標識信號分別加入到輔助替換重播聲頻信號中，以及其中通過參考標識信號選擇源聲頻信號中的一個源聲頻信號，以及將所選擇的源聲頻信號和視頻信號作為彼此同步的再現(xiàn)信號輸出。
本發(fā)明的第十方面提供一種傳輸信息信號的設備。該設備包括如下的裝置通過多路傳輸如下的信號產(chǎn)生主AV多路傳輸結果信號的裝置1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定視頻信號的指示時序的指示時序信息信號；并通過如下的方式產(chǎn)生替換重播聲頻信號的裝置1)對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號，以及2)將聲音產(chǎn)生時序信息信號加入到第二壓縮編碼結果聲頻信號中，該聲音產(chǎn)生時序信息信號基于參考時鐘信息信號指定第二壓縮編碼結果聲頻信號的聲音產(chǎn)生時序，其中可以再現(xiàn)第二聲頻信號替代第一聲頻信號；產(chǎn)生替換AV多路傳輸結果信號作為用于將壓縮編碼結果視頻信號連同第二壓縮編碼結果聲頻信號一起再現(xiàn)的信號的裝置；將替換AV多路傳輸結果信號反饋到傳輸線的裝置；從替換重播聲頻信號中導出第二壓縮編碼結果聲頻信號的裝置；以及將在主AV多路傳輸結果信號中的第一壓縮編碼結果聲頻信號替換為所導出的第二壓縮編碼結果聲頻信號以在將替換AV多路傳輸結果信號反饋到傳輸線中之前將主AV多路傳輸結果信號改變?yōu)樘鎿QAV多路傳輸結果信號的裝置。
本發(fā)明的第十一方面提供一種信息信號記錄媒體，該記錄媒體具有存儲AV多路傳輸結果信號和替換重播聲頻信號兩種信號的公共表面；通過多路傳輸如下的信號產(chǎn)生該AV多路傳輸結果信號1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)指定視頻信號的指示時序的指示時序信息信號；通過如下的方式產(chǎn)生替換重播聲頻信號1)對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號，以及2)將第二參考時鐘信息信號加入到第二壓縮編碼結果聲頻信號中，其中可以再現(xiàn)第二聲頻信號替代第一聲頻信號；其中加入到第二壓縮編碼結果聲頻信號中的第二參考時鐘信息信號等于在AV多路傳輸結果信號中的第一參考時鐘信息信號，以及第二壓縮編碼結果聲頻信號包含多路傳輸?shù)姆至?，該分量是基于第一和第二參考時鐘信息信號中的一個信號并與視頻信號同步化相關的聲音產(chǎn)生時序信息信號；以及其中響應在AV多路傳輸結果信號中的第一參考時鐘信息信號再現(xiàn)該視頻信號，以及響應與用于視頻信號的再現(xiàn)的信號相同的參考時鐘信息信號使第二聲頻信號的再現(xiàn)與視頻信號的再現(xiàn)同步。
本發(fā)明的第十二方面提供一種傳輸信息信號的計算機程序。該計算機程序包括如下的步驟通過多路傳輸如下的信號產(chǎn)生主AV多路傳輸結果信號1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定視頻信號的指示時序的指示時序信息信號；并通過如下的方式產(chǎn)生替換重播聲頻信號1)對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號，以及2)將聲音產(chǎn)生時序信息信號加入到第二壓縮編碼結果聲頻信號中，該聲音產(chǎn)生時序信息信號基于參考時鐘信息信號指定第二壓縮編碼結果聲頻信號的聲音產(chǎn)生時序，其中可以再現(xiàn)第二聲頻信號替代第一聲頻信號；產(chǎn)生替換AV多路傳輸結果信號作為用于將壓縮編碼結果視頻信號連同第二壓縮編碼結果聲頻信號一起再現(xiàn)的信號；將替換AV多路傳輸結果信號反饋到傳輸線；從替換重播聲頻信號中導出第二壓縮編碼結果聲頻信號；以及將在主AV多路傳輸結果信號中的第一壓縮編碼結果聲頻信號替換為所導出的第二壓縮編碼結果聲頻信號以在將替換AV多路傳輸結果信號反饋到傳輸線中之前將主AV多路傳輸結果信號改變?yōu)樘鎿QAV多路傳輸結果信號。


附圖1所示為根據(jù)本發(fā)明的第一實施例的信息信號記錄和再現(xiàn)系統(tǒng)的方塊圖。
附圖2所示為MPEG編碼器的方塊圖。
附圖3所示為MPEG解碼器的方塊圖。
附圖4所示為MPEG系統(tǒng)解碼設備的方塊圖。
附圖5所示為在MPEG傳輸流(TS)、MPEG節(jié)目流(PS)和分包的單元流(PES)中的關系附圖。
附圖6所示為TS包的格式的附圖。
附圖7所示為響應包ID(PID)接收TS包的流程圖。
附圖8所示為在本發(fā)明的第一實施例中的信息信號記錄設備的方塊圖。
附圖9所示為在本發(fā)明的第一實施例中的信息信號再現(xiàn)設備的方塊圖。
附圖10所示為記錄在信息信號記錄媒體中的信息的文件結構的附圖。
附圖11所示為在附圖10中文件“SIDE.ifo”的結構的附圖。
附圖12所示為在附圖11中第二級程序段“GENERAL_IFO”的語法結構的附圖。
附圖13所示為在附圖11中的第三級程序段“PR_IFO_0”的結構的附圖。
附圖14所示為在附圖13中的第四級程序段“PROG_IFO”的語法結構的附圖。
附圖15所示為在附圖11中播放列表信息“PLAYL_IFO”的語法結構的附圖。
附圖16所示為在附圖13中的索引信息“INDEX_IFO”的語法結構的附圖。
附圖17所示為記錄在硬盤上的傳輸流(TS)的格式的附圖。
附圖18所示為在本發(fā)明的第一實施例中的信息信號傳輸設備的方塊圖。
附圖19所示為在附圖18中的CPU的控制程序段的流程圖。
具體實施例方式
第一實施例附圖1所示為根據(jù)本發(fā)明的第一實施例的信息信號記錄和再現(xiàn)系統(tǒng)。附圖1的系統(tǒng)包括信息信號產(chǎn)生設備10、記錄媒體驅動器20、信息信號記錄媒體25和信息信號再現(xiàn)設備30。信息信號產(chǎn)生設備10具有視頻編碼器11、聲頻編碼器11a和多路復用器15。記錄媒體驅動器20與信息信號產(chǎn)生設備10和信息信號再現(xiàn)設備30連接。記錄媒體驅動器20可以將信息信號寫在記錄媒體25中并從記錄媒體25中讀信息信號。硬盤記錄器/讀取器或光盤記錄器/讀取器可以用作記錄媒體驅動器20。包含了信息信號的文件可以記錄在記錄媒體25上。具體地說，AV(聲頻-視頻)多路傳輸?shù)慕Y果文件25a和后期錄音聲頻文件25b可以存儲在記錄媒體25中?？扇〉氖?，記錄媒體25具有在其上記錄了AV多路傳輸結果文件25a和后期錄音聲頻文件25b的記錄表面。信息信號再現(xiàn)設備30具有多路信號分解器36、信號選擇器37、視頻解碼器45和聲頻解碼器45a?？扇〉氖牵畔⑿盘栐佻F(xiàn)設備30連接到監(jiān)視器TV設備。
附圖1的系統(tǒng)運行在可以從包括記錄模式、第一重播模式和第二重播模式中選擇的不同的模式中。在運行在記錄模式的過程中，視頻編碼器11接收伴有第一聲頻信號的視頻信號。視頻編碼器11根據(jù)視頻編碼的MPEG(運動圖象專家組)標準將所接收的視頻信號壓縮編碼成壓縮編碼結果視頻信號。因此，視頻編碼器11包括MPEG編碼器(MPEG視頻編碼器)。視頻編碼器11將壓縮編碼結果視頻信號反饋到多路復用器15的第一輸入端中。
聲頻編碼器11a接收伴有視頻信號的第一聲頻信號。聲頻編碼器11a根據(jù)聲頻編碼的MPEG標準將該第一聲頻信號壓縮編碼成第一壓縮編碼結果聲頻信號。聲頻編碼器11a將第一壓縮編碼結果聲頻信號反饋給多路復用器15的第二輸入端。
裝置15根據(jù)MPEG系統(tǒng)標準將壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號多路復用成AV多路傳輸結果信號。多路復用器15將該AV多路傳輸結果信號輸出到記錄媒體驅動器20。記錄媒體驅動器20將該AV多路傳輸結果信號記錄在記錄媒體25作為AV多路傳輸結果文件25a。
在AV多路傳輸結果文件25a的記錄完成之后，將第二聲頻信號開始記錄在記錄媒體25上作為不同于AV多路傳輸結果文件25a的后期錄音聲頻文件25b。具體地說，聲頻編碼器11a接收第二聲頻信號(后期錄音目的聲頻信號)。聲頻編碼器11a根據(jù)聲頻編碼的MPEG標準將第二聲頻信號壓縮編碼成第二壓縮編碼結果聲頻信號。聲頻編碼器11a將該第二壓縮編碼結果聲頻信號反饋到多路復用器15。多路復用器15將第二壓縮編碼結果聲頻信號傳輸?shù)接涗浢襟w驅動器20。記錄媒體驅動器20將第二壓縮編碼結果聲頻信號記錄在記錄媒體25作為后期錄音聲頻文件25b。
第二聲頻信號不同于第一聲頻信號的內(nèi)容。第二聲頻信號與先前所提到的視頻信號同步地產(chǎn)生。例如，在再現(xiàn)視頻信號的同時產(chǎn)生第二聲頻信號。在拍攝要產(chǎn)生的視頻信號的景物的同時通過采集拍攝的景物的現(xiàn)場的聲音產(chǎn)生第一聲頻信號。在另一方面，產(chǎn)生第二聲頻信號作為在拍攝景物之后播放的敘述或背景音樂的表示。第二聲頻信號也稱為后期錄音目的聲頻信號。
具有完美的聲頻和視頻信息的AV信號被稱為完整包信號(完整電視節(jié)目信號)。在用戶或第三人從與在完整包信號中的視頻信號相同的視頻信號和與在完整包中的聲頻信號不同的聲頻信號中制作從由完整包信號所代表的節(jié)目修改的AV節(jié)目的情況下，該聲頻信號定義為后期錄音目的聲頻信號。
附圖1的系統(tǒng)還設計成同步地再現(xiàn)在完整包信號中的視頻信號和第二聲頻信號(后期錄音聲頻信號)，并且還能夠再現(xiàn)完整包信號。此外，附圖1的系統(tǒng)還設計成降低了記錄在記錄媒體25上的信息量。
如前文所述，AV多路傳輸結果信號記錄在記錄媒體25上作為AV多路傳輸結果文件25a。一般地，AV多路傳輸結果信號與完整包信號相關。在AV多路傳輸結果文件25a中的聲頻信息和視頻信息可以同步地重播。第二聲頻信號記錄在記錄媒體25作為不同于AV多路傳輸結果文件25a的后期錄音聲頻文件25b。正如下文將會解釋到，將同步信號加入到AV多路傳輸結果文件25a和后期錄音聲頻文件25b中以使在后期錄音聲頻文件25b中的聲頻信息和在AV多路傳輸結果文件25a中的視頻信息的同步播放成為可能。
在附圖1中的系統(tǒng)的操作模式包括第一重播模式和第二重播模式。操作的第一重播模式設計成再現(xiàn)完整包信號。在操作的第一重播模式中，記錄媒體驅動器20訪問在信息信號記錄媒體25上的AV多路傳輸結果文件25a并從其中讀出AV多路傳輸結果信號。記錄媒體驅動器20將所讀出的AV多路傳輸結果信號反饋到多路信號分解器36中。
多路信號分解器36根據(jù)MPEG系統(tǒng)標準將AV多路傳輸結果信號分解為壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號。多路信號分解器36將壓縮編碼結果視頻信號反饋到視頻解碼器45。多路信號分解器36將第一壓縮編碼結果聲頻信號反饋到信號選擇器37。
視頻解碼器45根據(jù)視頻解碼的MPEG標準將壓縮編碼結果視頻信號擴展地解碼成原始視頻信號。因此，視頻解碼器45包括MPEG解碼器(MPEG視頻解碼器)。視頻解碼器45將再現(xiàn)的視頻信號反饋到監(jiān)視器TV設備。監(jiān)視器TV設備的顯示器指示所再現(xiàn)的視頻信號。
信號選擇器37將第一壓縮編碼結果聲頻信號傳輸?shù)铰曨l解碼器45a。聲頻解碼器45a根據(jù)聲頻解碼的MPEG標準將第一壓縮編碼結果聲頻信號擴展地解碼成第一原始聲頻信號(第一再現(xiàn)的聲頻信號)。聲頻解碼器45a將第一再現(xiàn)的聲頻信號反饋到監(jiān)視器TV設備。監(jiān)視器TV設備的揚聲器將第一再現(xiàn)的聲頻信號轉換為對應的聲音。第一再現(xiàn)的聲頻信號的重播與再現(xiàn)的視頻信號的重播同步。
操作的第二重播模式設計成同步地再現(xiàn)在完整包信號中的視頻信號和第二聲頻信號(后期錄音聲頻信號)。在操作的第二重播模式的過程中，記錄媒體驅動器20分時地交替地訪問在信息信號記錄媒體25上的AV多路傳輸結果文件25a和后期錄音聲頻文件25b。記錄媒體驅動器20從AV多路傳輸結果文件25a中讀出AV多路傳輸結果信號。記錄媒體驅動器20將所讀出的AV多路傳輸結果信號反饋到多路信號分解器36中。記錄媒體驅動器20從后期錄音聲頻文件25b中讀出第二壓縮編碼結果聲頻信號。記錄媒體驅動器20將該第二壓縮編碼結果聲頻信號反饋到信號選擇器37中。
多路信號分解器36根據(jù)MPEG系統(tǒng)標準將AV多路傳輸結果信號分解成壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號。多路信號分解器36將壓縮編碼結果視頻信號反饋到視頻解碼器45。多路信號分解器36將第一壓縮編碼結果聲頻信號反饋到信號選擇器37。
視頻解碼器45根據(jù)視頻解碼的MPEG標準將壓縮編碼結果視頻信號擴展地解碼成原始視頻信號(再現(xiàn)的視頻信號)。視頻解碼器45將再現(xiàn)的視頻信號反饋到監(jiān)視器TV設備。監(jiān)視器TV設備的顯示器指示所再現(xiàn)的視頻信號。
信號選擇器37選擇第二壓縮編碼結果聲頻信號并將所選則的信號傳輸?shù)铰曨l解碼器45a。因此，信號選擇器37拒絕來自多路信號分解器36的第一壓縮編碼結果聲頻信號。聲頻解碼器45a根據(jù)聲頻解碼的MPEG標準將第二壓縮編碼結果聲頻信號擴展地解碼成第二原始聲頻信號(第二再現(xiàn)的聲頻信號)。第二再現(xiàn)的聲頻信號是再現(xiàn)的后期錄音目的聲頻信號。聲頻解碼器45a將第二再現(xiàn)的聲頻信號反饋到監(jiān)視器TV設備。監(jiān)視器TV設備的揚聲器將第二再現(xiàn)的聲頻信號(再現(xiàn)的后期錄音目的聲頻信號)轉換成相應的聲音。第二再現(xiàn)的聲頻信號的重播與再現(xiàn)的視頻信號的重播同步。如下文所描述，通過給在AV多路傳輸結果文件25a中的視頻信息和在后期錄音聲頻文件25b中的聲頻信息中增加同步信號提供了在第二再現(xiàn)的聲頻信號的重播和在再現(xiàn)的視頻信號的重播之間的同步化。
附圖1的系統(tǒng)包括用戶接口。用戶可以通過啟動用戶接口指定在附圖1中的系統(tǒng)的操作的模式。信號選擇器37響應來自用戶接口的信號，該信號表示操作的指定模式是第一重播模式還是第二重播模式。在所指定的操作模式是第一重播模式時，信號選擇器37將來自多路信號分解器36的第一壓縮編碼結果聲頻信號傳輸?shù)铰曨l解碼器45a。在另一方面，在所指定的操作模式是第二重播模式時，信號選擇器37選擇第二壓縮編碼結果聲頻信號并將所選擇的信號傳輸給聲頻解碼器45a。
附圖2所示為可以用作在視頻編碼器11(參見附圖1)中的解碼器的MPEG解碼器50。MPEG解碼器50包括作為減法器運行的減法器52。減法器52通過輸入端51接收輸入的視頻信號Vin。減法器52計算幀間預測誤差，即在由輸入的視頻信號Vin所代表的圖像和通過來自運動補償預測器65的輸出數(shù)據(jù)所代表的最終參考圖像(最終預測圖像)之間的殘差(誤差)。減法器52輸出指示所計算的殘差的數(shù)據(jù)(所計算的幀間預測誤差)。
通過運動補償預測器65所實施的預測設計如下。預測方向具有三種模式，即，自過去起的方向(“前向”)、自將來起的方向(“后向”)和自過去和將來兩者的方向(“內(nèi)插”)。因此，存在自過去的預測(“前向”)、自將來的預測(“后向”)和自過去和將來兩者的預測(“內(nèi)插”)。實際使用的預測方向可以一個MB一個MB地改變，這里MB表示16×16像素的微塊。每個圖像劃分為預定數(shù)量的MB。通過由輸入的視頻信號Vin所表示的每個圖像的類型基本決定了實際使用的預測方向。圖像被分為P圖像(預測性編碼圖像)、B圖像(雙向預測性編碼圖像)和I圖像(內(nèi)編碼圖像)。代表P圖像的MB是第一和第二模式。根據(jù)自過去的預測對第一模式的P-圖像MB進行編碼。對第二模式的P圖像MB獨立地進行編碼而不進行預測。代表B圖像的MB是第一、第二、第三和第四模式。根據(jù)自將來的預測對第一模式的B圖像MB進行編碼。根據(jù)自過去的預測對第二模式的B圖像MB進行編碼。根據(jù)自過去和將來兩者的預測對第三模式的B圖像MB進行編碼。對第四模式的B圖像MB獨立地進行編碼而不進行預測。對代表I圖像的MB獨立地進行編碼而不進行預測。
通過運動補償預測器65所實施的運動補償設計如下。根據(jù)運動補償，對每個MB執(zhí)行在兩個圖像之間匹配的模式以便以對應于半像素的精度檢測一個或多個運動矢量。兩個圖像中的一個圖像由輸入的視頻信號Vin給定，而另一圖像稱為運動補償預測的源圖像或基本參考圖像?；緟⒖紙D像根據(jù)所檢測的運動矢量平移?；诨緟⒖紙D像的平移產(chǎn)生最終的參考圖像(最終預測圖像)。在不存在運動補償?shù)那闆r下，基本參考圖像直接用作最終參考圖像。一般地，運動矢量具有水平方向分量和垂直方向分量。代表所檢測的運動矢量或所檢測的運動矢量的信息和代表預測方向或指示從其中實施預測的源圖像的MC-模式(運動補償模式)信息作為與每個MB相關的相加的信息傳輸。GOP(圖像組)定義為從I圖像開始并在下一個I圖像直接之前的圖像上結束的圖像序列。一般地，一個GOP具有大約15個連續(xù)的圖像。
通過DCT裝置53對從減法器52中輸出的剩余指示數(shù)據(jù)進行離散余弦變換(DCT)。具體地說，DCT裝置53將由剩余指示數(shù)據(jù)所表示的每個MB劃分為4個DCT塊，每個DCT塊具有8×8個像素。DCT裝置53對每個DCT塊進行二維DCT以產(chǎn)生表示DCT系數(shù)的數(shù)據(jù)。DCT裝置53輸出所產(chǎn)生的DCT系數(shù)數(shù)據(jù)。一般地，由于在低頻分量中視頻信號富裕，因此產(chǎn)生了對應于低頻的許多有效的DCT系數(shù)。
通過量化器54響應量化值對通過DCT裝置53的輸出數(shù)據(jù)所表示的DCT系數(shù)進行量化。該量化值等于量化矩陣乘以標量的量化比。量化矩陣具有從根據(jù)視覺對二維頻率分量進行加權的過程中得到的8×8個元素。量化包括將DCT系數(shù)除以量化值的步驟。
從量化器54中輸出的量化結果數(shù)據(jù)通過VLC裝置55編碼成可變長度代碼(VLC)數(shù)據(jù)。具體地說，通過DPCM(差分脈碼調(diào)制技術)對量化結果數(shù)據(jù)的直流(DC)分量進行編碼。沿著從高頻朝低頻的方向以Z字形掃描量化結果數(shù)據(jù)的交流(AC)分量，并進行赫夫曼(Huffman)編碼，在這種編碼中將具有較高的發(fā)生概率的數(shù)據(jù)段分配給較短的代碼字。VLC裝置55從運動補償預測器65中接收運動矢量信息和MC-模式信息。VLC裝置65將運動矢量信息和MC模式信息加入到VLC數(shù)據(jù)中。所得的VLC數(shù)據(jù)臨時存儲在緩沖器56中。以預定的傳輸率將VLC數(shù)據(jù)從緩沖器56中輸出作為位流形式的編碼結果MPEG數(shù)據(jù)。
緩沖器56通知代碼量控制器57每個MB的編碼結果數(shù)據(jù)的實際量，即構成每個MB的編碼結果數(shù)據(jù)的總位數(shù)。代碼量控制器57計算在編碼結果數(shù)據(jù)的實際量和它的目標量之間的誤差。代碼量控制器57響應所計算的數(shù)據(jù)量的誤差調(diào)整由量化器54所使用的量化比，由此控制量編碼結果數(shù)據(jù)的實際量。
通過反向量化器61對從量化器54所輸出的量化結果數(shù)據(jù)進行反向量化，即轉換回DCT系數(shù)數(shù)據(jù)。反向量化器61輸出DCT系數(shù)數(shù)據(jù)。通過反向DCT裝置62對從反向量化器61中輸出的DCT系數(shù)數(shù)據(jù)進行反向DCT，即轉換回剩余指示數(shù)據(jù)。反向DCT裝置62輸出剩余指示數(shù)據(jù)。由從反向DCT裝置62中輸出的數(shù)據(jù)所表示的剩余圖像和從運動補償預測器65中輸出的數(shù)據(jù)所表示的最終參考圖像(最終預測圖像)通過加法器63相加。加法器63輸出相加的結果視頻數(shù)據(jù)。相加的結果視頻數(shù)據(jù)臨時存儲在存儲器64中。視頻數(shù)據(jù)從存儲器64中反饋到運動補償預測器65中。運動補償預測器65使用來自存儲器64的輸出視頻數(shù)據(jù)作為運動補償預測的源圖像或者基本參考圖像的指示。
附圖3所示為能夠用作在視頻解碼器45(參見附圖1)中的解碼器的MPEG解碼器70。MPEG解碼器70包括緩沖器72。緩沖器72通過輸入端71接收位流形式的編碼結果MPEG數(shù)據(jù)。編碼結果MPEG數(shù)據(jù)在輸出到VLD(可變長度解碼)裝置73中之前臨時地存儲在緩沖器72中。VLC裝置73對從緩沖器72中輸出的數(shù)據(jù)相對于VLD進行VLD反向，由此接收DC分量數(shù)據(jù)和AC分量數(shù)據(jù)。沿著從高頻到低頻的方向以Z字形掃描AC分量數(shù)據(jù)。DC分量數(shù)據(jù)和所得的AC分量數(shù)據(jù)以8×8個元素的矩陣設置。VLD裝置73將矩陣設置的數(shù)據(jù)輸出到反向量化器74中。VLD裝置73從緩沖器72輸出的數(shù)據(jù)中抽取運動矢量信息和MC模式信息。VLD裝置73將運動矢量信息和MC模式信息輸出到運動補償預測器78中。
反向量化器74響應量化值對從VLD裝置73中輸出的數(shù)據(jù)進行反向量化，由此恢復了DCT系數(shù)數(shù)據(jù)。反向量化包括將所處理的數(shù)據(jù)值乘以量化值的步驟。應該指出的是，量化值等于量化矩陣乘以標量量化比。DCT系數(shù)數(shù)據(jù)從反向量化器74中輸出到反向DCT裝置75中，進行反向DCT，并由此轉換回剩余指示數(shù)據(jù)。反向DCT裝置75輸出剩余指示數(shù)據(jù)。由從反向DCT裝置75中輸出的數(shù)據(jù)所表示的剩余圖像和由從運動補償預測器78中輸出的數(shù)據(jù)所表示的最終參考圖像(最終預測圖像)通過加法器76相加。加法器76輸出相加的結果視頻數(shù)據(jù)作為解碼結果視頻數(shù)據(jù)(原始視頻數(shù)據(jù))。解碼剩余視頻數(shù)據(jù)朝外部發(fā)送。從加法器76中輸出的相加的結果視頻數(shù)據(jù)臨時存儲在存儲器77中。視頻數(shù)據(jù)從存儲器77中反饋到運動補償預測器78中。運動補償預測器78使用從存儲器77中輸出的視頻數(shù)據(jù)作為運動補償預測的基本參考圖像或源圖像的指示。運動補償預測器78響應基本參考圖像、運動矢量信息和MC-模式信息產(chǎn)生最終參考圖像(最終預測圖像)。運動補償預測器78輸出表示最終參考圖像的數(shù)據(jù)。
MPEG系統(tǒng)標準規(guī)定了如下的五項。
1)許多編碼結果位流的同步再現(xiàn)；2)許多編碼結果位流多路復用成單個位流；3)在再現(xiàn)開始時對在緩沖器(在附圖3中的緩沖器72)的編碼結果數(shù)據(jù)的初始化；4)對在緩沖器中的數(shù)據(jù)的管理以獲得連續(xù)的解碼結果視頻信號和連續(xù)的解碼結果聲頻信號；以及5)與時序(比如解碼開始時序和重播指示時序)的設置相關的管理。
因此根據(jù)MPEG系統(tǒng)的標準，實施與編碼結果數(shù)據(jù)相關的管理。將編碼結果數(shù)據(jù)格式化或處理成包結構的數(shù)據(jù)并且進行多路復用。在上述的項目中實施操作步驟的管理數(shù)據(jù)加入到多路復用結果數(shù)據(jù)中。
符合MPEG系統(tǒng)標準的信息的多路復用包括對該信息分包的步驟。例如，在要求對視頻信息和聲頻信息進行多路復用的情況下，將視頻信息和聲頻信息中的每種信息分為具有適合長度的包。附加的信息比如標題信息加入到每個包中。在包序列發(fā)送之前視頻信息包和聲頻信息包混合到包序列中。因此，視頻信息包和聲頻信息包分時地發(fā)送。標題信息包括了識別相關的包是視頻包、聲頻包或其它的包的信息以及用于同步的時序信息。一般來說，包的長度取決于傳輸介質(zhì)和應用。例如，在ATM(異步傳輸模式)的情況下包的長度等于53個字節(jié)。在光盤的情況下包的長度等于4千個字節(jié)。根據(jù)MPEG系統(tǒng)的標準，包的長度可變，并且可以設定為任意的值。
要傳輸?shù)臄?shù)據(jù)劃分為壓縮包(pack)，并且進行分包。一個壓縮包由幾個包(packet)構成。每個壓縮包的標題部分帶有包開始代碼和SCR(系統(tǒng)時鐘基準)。每個包的標題帶有流ID和時間標記。時間標記包含在聲頻和視頻之間同步化的時序信息。時間標記是分別稱為DTS(解碼時間標記)和PTS(表示時間標記)的兩種類型中的一種。傳輸?shù)臄?shù)據(jù)包含了指示27MHz的頻率的周期性產(chǎn)生的PCR(節(jié)目時鐘參考)。與解碼器公共的參考時鐘鎖定到由PCR所指示的頻率中。DTS指示了在相關的包中的第一訪問單元的所需的解碼開始時間，而PTS指示所需的指示開始時間(所需的重播開始時間)。一個訪問單元對應于在視頻情況中的一個圖像。在聲頻情況下一個訪問單元對應于1152個采樣。基于通過PCR所指示的頻率以一定的時間精度給定DTS和PTS。
PCR用作基準時鐘信息信號。在視頻包的情況下，PTS用作指定相關的視頻信息的指示的時序的指示時序信息信號。在聲頻包的情況下，PTS用作指定將相關的聲頻信息轉換為對應的聲音的時序的聲音產(chǎn)生時序信息信號。
附圖4所示為MPEG系統(tǒng)解碼設備，該設備包括系統(tǒng)解碼器81，該系統(tǒng)解碼器81接收包含有視頻信息和聲頻信息的多路復用結果數(shù)據(jù)(系統(tǒng)位流)。系統(tǒng)解碼器81對所接收的數(shù)據(jù)進行多路分解為視頻數(shù)據(jù)和聲頻數(shù)據(jù)。系統(tǒng)解碼器81將聲頻數(shù)據(jù)輸出到聲頻解碼器(MPEG聲頻解碼器)82中。系統(tǒng)解碼器81將視頻數(shù)據(jù)輸出到視頻解碼器(MPEG視頻解碼器)83中。此外，系統(tǒng)解碼器81從所接收的數(shù)據(jù)中抽取每個PCR、每個視頻DTS、每個聲頻DTS、每個視頻PTS和每個聲頻PTS。系統(tǒng)解碼器81還可以從所接收的數(shù)據(jù)中抽取每個SCR。系統(tǒng)解碼器81將PCR(或者SCR)輸出到時鐘控制電路84。系統(tǒng)解碼器81將視頻DTS、聲頻DTS、視頻PTS和聲頻PTS輸出到比較電路85中。
時鐘控制電路84包括產(chǎn)生表示參考時鐘時間的參考時鐘信號的振蕩器。時鐘控制電路84將振蕩器的振蕩頻率鎖定到由PCR所表示的頻率。因此，基于PCR確定了參考時鐘時間。時鐘控制電路84通知比較電路85參考時鐘時間，即由參考時鐘信號所表示的時間。
比較電路85將由聲頻DTS所表示的時間與參考時鐘時間進行比較以決定聲頻DTS時間是否符合參考時鐘時間。在聲頻DTS時間符合參考時鐘時間時，比較電路85命令聲頻解碼器82開始聲頻數(shù)據(jù)的解碼。聲頻解碼器82實施聲頻數(shù)據(jù)的解碼。聲頻解碼器82將解碼結果聲頻數(shù)據(jù)存儲在存儲器86中。比較電路85將由視頻DTS所表示的時間與參考時鐘時間進行比較以確定視頻DTS時間是否符合參考時鐘時間。在視頻DTS時間符合參考時鐘時間時，比較電路85命令視頻解碼器83開始視頻數(shù)據(jù)的解碼。視頻解碼器83實施視頻數(shù)據(jù)的解碼。視頻解碼器83將解碼結果視頻數(shù)據(jù)存儲在存儲器87中。
比較電路85將由聲頻PTS所指示的時間與參考時鐘時間進行比較以確定聲頻PTS時間是否符合參考時鐘時間。在聲頻PTS時間符合參考時鐘時間時，比較電路85啟動存儲器86以輸出解碼結果聲頻數(shù)據(jù)用于重播的目的或者聲音產(chǎn)生的目的。比較電路85將由視頻PTS所表示的時間與參考時鐘時間進行比較以確定視頻PTS時間是否符合參考時鐘時間。在視頻PTS時間符合參考時鐘時間時，比較電路85啟動存儲器87以輸出解碼結果視頻數(shù)據(jù)用于表示目的。預先設定視頻PTS和聲頻PTS以使解碼結果視頻數(shù)據(jù)和解碼結果聲頻數(shù)據(jù)從存儲器86和87中可以同步地輸出。因此，視頻信息和聲頻信息可以同步地重播。
考慮到附圖4的MPEG系統(tǒng)解碼設備的一部分對應于臨時存儲許多類型的解碼結果數(shù)據(jù)和實施許多類型的數(shù)據(jù)的同步再現(xiàn)的虛擬解碼器。虛擬解碼器稱為STD(系統(tǒng)目標解碼器)。指定多路復用結果位流以使在STD中的存儲既不上溢也不下溢。
MPEG系統(tǒng)標準規(guī)定了傳輸流(TS)和節(jié)目流(PS)。通過分包的單元流(PES)和帶有其它的信息的包形成TS或PS。PES定義為用于在TS和PS之間轉換或變換的中間流。例如通過對編碼結果MPEG視頻數(shù)據(jù)、編碼結果MPEG聲頻數(shù)據(jù)或者專用流進行分包產(chǎn)生PES。
具有公共參考時間的內(nèi)容節(jié)目的視頻和聲頻數(shù)據(jù)可以多路復用在PS中。PS包括包序列。PS的包層稱為“PES”。參考附圖5，PS的包層與TS的包層公共以在PS和TS之間提供兼容性。根據(jù)PS的STD模型，通過在PES包中的流ID將要解碼的位流的解碼模式切換到PS側。
具有公共參考時間的內(nèi)容節(jié)目的視頻和聲頻數(shù)據(jù)還可以多路復用到TS中。此外，將在參考時間中不同的內(nèi)容節(jié)目的視頻和聲頻數(shù)據(jù)多路復用成TS。通過固定長度的包序列(即，188字節(jié)的包(TS包))形成TS。TS被設計用于由傳輸線所引起的數(shù)據(jù)誤差的系統(tǒng)中。從上文的解釋中可以理解的是，TS是表示多重內(nèi)容節(jié)目的數(shù)據(jù)流。雖然TS包排在PES包之前，但是TS包通常短于PES包。一般地，將一個PES包劃分為幾段，而PES包段分別放置在多個TS包中。根據(jù)TS的STD模型，通過在TS包中的包ID(PID)將要解碼的位流的解碼模型切換到PS側。
參考附圖6，TS包具有以此順序設置的標題、自適應域(AF)和有效負載。標題包括以此順序設置的同步字節(jié)、誤差指示器、單元開始指示器和傳輸包優(yōu)先標志。在該標題中，傳輸包優(yōu)先標志后跟著指示在相關的包中的有效負載的類型的PID(在相關的包中的有效負載中的數(shù)據(jù)類型)。在該標題中，PID后連續(xù)跟著擾頻控制信息片段、AF控制信息片段和循環(huán)計數(shù)器。標題的尾部是循環(huán)計數(shù)器。AF控制信息片段表示在相關的包中是否存在自適應域。在AF控制信息片段表示不存在自適應域時，標題后緊跟著有效負載。在另一方面，在AF控制信息片段表示存在自適應域時，標題后連續(xù)跟著自適應域(AF)和有效負載。循環(huán)計數(shù)器指示關于相關的包的連續(xù)性。一般地，自適應信息放置在自適應域(AF)中，同時內(nèi)容數(shù)據(jù)比如視頻數(shù)據(jù)或聲頻數(shù)據(jù)放置在有效負載中。無效的數(shù)據(jù)(比如啞數(shù)據(jù))可以放置在有效負載中。
如附圖6所示，自適應域包括可選擇的域?？蛇x擇的域的48位前端帶有PCR。
處理TS的MPEG系統(tǒng)解碼設備被設計成在接收和解碼過程中提供檢測在TS包中的PID并根據(jù)所檢測的PID對TS包進行分類的機構。具體地說，參考附圖7，TS包搜索在階段S1具有PID＝0的一個包。換句話說，接收PID＝0的TS包。PID＝0的TS包稱為PAT(節(jié)目關聯(lián)表)包。PAT包帶有表示在節(jié)目號(內(nèi)容節(jié)目ID號)FR和基于鏈接的專用PID之間的關系(即，在內(nèi)容節(jié)目和專用PID之間的關系)的PAT信息。在階段S1之后的階段S2中，檢測在PAT包中的PAT信息。每個專用PID對應于PMT(節(jié)目映射表)包。PMT包帶有表示在相關的內(nèi)容節(jié)目、在表示相關的內(nèi)容節(jié)目的視頻包中的PID和在表示相關的內(nèi)容節(jié)目的聲頻包中的PID之間的關系的PMT信息。從內(nèi)容節(jié)目中事先選擇一個節(jié)目作為所需的內(nèi)容節(jié)目。在階段S2中，參考在PAT包中的PAT信息檢測對應于所需的內(nèi)容節(jié)目的專用PID。在階段S2之后的階段S3中，接收或搜索具有與所檢測的專用PID相同的PID的PMT包。在階段S3之后的階段S4中，訪問所接收的PMT包以獲得PMT信息。根據(jù)在所訪問的PMT包中的PMT信息，檢測在表示所需的內(nèi)容節(jié)目的視頻包和聲頻包中的PID。此外，檢測與所需的內(nèi)容節(jié)目相關的同步時鐘包中的PID。在階段S4之后的階段S5a中，接收對應于所檢測的視頻包PID的TS包。在階段S4之后的階段S5b中，接收對應于所檢測的聲頻包PID的TS包。從所接收的TS包中抽取聲頻信息。在階段S4之后的階段S5c中，接收對應于所檢測的同步時鐘包PID的TS包。從所接收的TS包中抽取同步時鐘信息。這樣，響應所檢測的PID訪問表示所需的內(nèi)容節(jié)目的視頻包和聲頻包。通過參考PAT和PMT實施到所需的內(nèi)容節(jié)目的輸入。PAT和PMT稱為PSI(節(jié)目專用信息)。
附圖8所示為可用作在附圖1中的信息信號產(chǎn)生設備10的信息信號產(chǎn)生設備10a。如附圖8所示，信息信號產(chǎn)生設備10a包括與CPU17連接的用戶接口17a。用戶接口17a可以由用戶支配。CPU 17具有輸入/輸出端口、處理部分、ROM和RAM的結合。CPU 17根據(jù)存儲在ROM和RAM中的控制程序運行?？刂瞥绦虮辉O計成啟動CPU17以實施后面所提到的運行步驟。通過處理用戶接口17a，信息信號產(chǎn)生設備10a的操作可以在不同的模式中改變，包括第一模式和第二模式。第一運行模式設計成記錄完整包信號，即主數(shù)據(jù)包含聲頻信息和視頻信息。第二運行模式設計成記錄后期錄音目的聲頻數(shù)據(jù)。在處理用戶接口17a時，從其中將運行模式指定信號輸入到CPU 17中。運行模式指定信號指示第一運行模式和第二運行模式中的哪種模式是所需的。CPU 17將運行模式指定信號傳輸給信號選擇器16。
在運行模式指定信號指示第一運行模式是所需的時，即在需要記錄主數(shù)據(jù)時，信息信號產(chǎn)生設備10a運行如下。輸入視頻數(shù)據(jù)(視頻信號)反饋到視頻編碼器11，而伴有輸入視頻數(shù)據(jù)的輸入聲頻數(shù)據(jù)(第一聲頻信號)反饋到聲頻編碼器11a。視頻編碼器11和聲頻編碼器11a類似于在附圖1中的視頻編碼器11和聲頻編碼器11a。一般地，輸入視頻數(shù)據(jù)和輸入聲頻數(shù)據(jù)都表示內(nèi)容節(jié)目(公共聲頻視頻節(jié)目)，并且彼此同步。視頻編碼器11實施輸入視頻數(shù)據(jù)的MPEG編碼以產(chǎn)生編碼結果視頻數(shù)據(jù)。編碼結果視頻數(shù)據(jù)從視頻編碼器11發(fā)送到PES分包裝置12。聲頻編碼器11a實施輸入聲頻數(shù)據(jù)的MPEG編碼以產(chǎn)生編碼結果聲頻數(shù)據(jù)。該編碼結果聲頻數(shù)據(jù)從聲頻編碼器11a發(fā)送到PES分包裝置12a。PES分包裝置12將編碼結果視頻數(shù)據(jù)轉換為一系列的PES包。將PES包序列從PES分包裝置12發(fā)送到時間標記記錄器13。PES分包裝置12a將編碼結果聲頻數(shù)據(jù)轉換為一系列的PES包。將PES包序列從PES分包裝置12a發(fā)送到時間標記記錄器13a。
信號發(fā)生器14給時間標記記錄器13和13a輸出27MHz的時鐘信號。時間標記記錄器13響應27MHz的時鐘信號產(chǎn)生時序信息片段，即，PCR和周期更新的時間標記(視頻PTS和視頻DTS)。時間標記記錄器13在每個PES包中記錄PCR、PTS和DTS。增加了時序信息的PES包從時間標記記錄器13中順序地發(fā)送給多路復用器15。時間標記記錄器13a響應27MHz的時鐘信號產(chǎn)生PCR和周期性更新的時間標記(聲頻PTS和聲頻DTS)。時間標記記錄器13a在每個PES包中記錄PCR、PTS和DTS。增加了時序信息的PES包從時間標記記錄器13a中順序地發(fā)送給多路復用器15。多路復用器15對來自時間標記記錄器13的PES包和來自時間標記記錄器13a的PES包進行多路復用以產(chǎn)生PS格式或TS格式的多路復用結果數(shù)據(jù)(主數(shù)據(jù))。將多路復用結果數(shù)據(jù)從多路復用器15發(fā)送到信號選擇器16中。
信號選擇器16響應操作模式指定信號，選擇多路復用結果數(shù)據(jù)(主數(shù)據(jù))并將多路復用結果數(shù)據(jù)傳遞給緩沖器18。在將多路復用結果數(shù)據(jù)從緩沖器中輸出到記錄控制器19之前將多路復用結果數(shù)據(jù)存儲在其中。記錄控制器19將主數(shù)據(jù)(多路復用結果數(shù)據(jù))記錄在信息信號記錄媒體25作為具有名稱為“PR....dat”的AV多路傳輸結果文件25a(參見附圖10)。
通過時間標記記錄器13所記錄的視頻PTS和視頻DTS和通過時間標記記錄器13a所記錄的聲頻PTS和聲頻DTS成這樣關系使從所記錄的主數(shù)據(jù)中可以同步地再現(xiàn)視頻信息和聲頻信息。
在操作模式指定信號指示需要第二操作模式時，即在需要記錄后期錄音目的聲頻數(shù)據(jù)時，如下操作信息信號產(chǎn)生設備10a。CPU 17將后期錄音目的聲頻數(shù)據(jù)的標識信息(ID信息)發(fā)送給PES分包裝置12a。將后期錄音目的聲頻數(shù)據(jù)(第二聲頻信號)反饋給聲頻編碼器11a。聲頻編碼器11a對后期錄音目的聲頻數(shù)據(jù)實施MPEG編碼以產(chǎn)生編碼結果聲頻數(shù)據(jù)。將編碼結果聲頻數(shù)據(jù)從聲頻編碼器11a發(fā)送給PES分包裝置12a。
PES分包裝置12a將后期錄音ID信息加入到編碼結果聲頻數(shù)據(jù)中，并將加入了ID的編碼結果視頻數(shù)據(jù)轉換為PES包序列。將PES包序列從PES分包裝置12a發(fā)送給時間標記記錄器13a。
信息信號再現(xiàn)設備訪問在記錄媒體25上的AV多路傳輸結果文件25a，并從其中讀出多路復用結果數(shù)據(jù)(主數(shù)據(jù))。該信息信號再現(xiàn)設備從所讀出的多路復用結果數(shù)據(jù)中分離并再現(xiàn)視頻信號。具體地說，由信息信號產(chǎn)生設備10a和信息信號再現(xiàn)設備共同擁有的讀控制器19a訪問記錄媒體25并再現(xiàn)該視頻信號。此外，讀控制器19a從所再現(xiàn)的視頻信號中抽取每個PCR、每個視頻PTS和每個視頻DTS?？商鎿Q的是，通過在信息信號再現(xiàn)設備中的標識信息檢測器可以獲得與所再現(xiàn)的視頻信號相關的PCR、視頻PTS和視頻DTS。讀控制器19a將所抽取的PCR發(fā)送到信號發(fā)生器14。讀控制器19a通知CPU 17所抽取的視頻PTS和所抽取的視頻DTS。信號發(fā)生器14將27兆赫茲的時鐘信號鎖定到由所抽取的PCR指示的頻率。
信號發(fā)生器14給時間標記記錄器13a輸出27-兆赫茲的時鐘信號。時間標記記錄器13a在受CPU 17控制的同時，響應27-兆赫茲的時鐘信號產(chǎn)生時序信息片段，即PCR和周期性更新的時間標記(聲頻PTS和聲頻DTS)。響應所抽取的視頻PTS和所抽取的視頻DTS，通過CPU 17對時間標記記錄器13a的控制實施了聲頻PTS和聲頻DTS的管理，由此在后期錄音目的聲頻信號的聲頻信息和在所記錄的主數(shù)據(jù)(AV多路傳輸結果文件25a)中的視頻信息之間提供同步關系。時間標記記錄器13a記錄在每個PES包中的PCR、聲頻PTS和聲頻DTS?？扇〉氖牵瑢CR、聲頻PTS和聲頻DTS設置成等于在記錄主數(shù)據(jù)的過程中已經(jīng)加入到每個聲頻PES包中的PCR、聲頻PTS和聲頻DTS。在這種情況下，在后期錄音聲頻數(shù)據(jù)與在所記錄的主數(shù)據(jù)中的視頻信息之間的計時關系與在所記錄的主數(shù)據(jù)中的聲頻信息與在其中的視頻信息之間的計時關系相同。時序信息相加的PES包順序地從時間標記記錄器13a發(fā)送到信號選擇器16而不通過多路復用器15傳輸。信號選擇器16響應操作模式指定信號選擇通過時間標記記錄器13a所輸出的數(shù)據(jù)(PES包序列)，并將所選擇的數(shù)據(jù)傳輸?shù)骄彌_器18a。在將所選擇的數(shù)據(jù)從緩沖器18a輸出到記錄控制器19之前將其存儲在該緩沖器中。記錄控制器19記錄從在記錄媒體25中的緩沖器18a中輸出的數(shù)據(jù)作為后期錄音聲頻數(shù)據(jù)。在記錄媒體25中的后期錄音聲頻數(shù)據(jù)放在名稱為“AF....dat”的后期錄音聲頻文件25b中(參見附圖10)。可取的是，記錄控制器19和信息信號再現(xiàn)設備(讀控制器19a)可以分時地交替地周期性地訪問記錄媒體25。
類似地，第三和在后的聲頻信號(第二和在后的后期錄音目的聲頻信號)可以記錄在記錄媒體25分別作為第二和在后的后期錄音聲頻文件。例如，包含第M次后期錄音聲頻信號的后期錄音聲頻文件的名稱為“AF....dat”。
根據(jù)后面提到的信息，將后期錄音目的聲頻數(shù)據(jù)記錄在信息信號記錄媒體25作為播放清單信息。具體地說，在PL文件夾中將第一后期錄音目的聲頻數(shù)據(jù)記錄成名稱為“AF-1.dat”的文件(參見附圖10)。此外，記錄第二和在后的后期錄音目的聲頻數(shù)據(jù)。此外，在PL文件夾中將第m后期錄音目的聲頻數(shù)據(jù)記錄成名稱為“AF-m.dat”的文件(參見附圖10)。因此，記錄了“m”種不同類型的后期錄音目的聲頻數(shù)據(jù)。信息片段“AF_number”(參見附圖15)識別后期錄音目的聲頻數(shù)據(jù)。由于信息片段“AF_number”具有8位(“0”無用)，因此可以處理高達254種不同類型的后期錄音目的聲頻數(shù)據(jù)。
附圖9所示為可以用作在附圖1中的信息信號再現(xiàn)設備30的信息信號再現(xiàn)設備30a。如附圖9所示，信息信號再現(xiàn)設備30a包括與CPU33連接的用戶接口32。用戶可以處理用戶接口32。CPU33具有輸入/輸出端口的結合、處理部分、ROM和RAM。CPU 33根據(jù)存儲在ROM和RAM中的控制程序運行?？刂瞥绦虮辉O計成啟動CPU 33以實施后面所提到的運行步驟。通過處理用戶接口32，信息信號產(chǎn)生設備30a的操作可以在不同的模式中改變，包括第一模式和第二模式。第一運行模式設計成再現(xiàn)主數(shù)據(jù)(AV多路傳輸結果文件25a)。第二運行模式設計成產(chǎn)生后期錄音聲頻數(shù)據(jù)(后期錄音聲頻文件25b)而不是在主數(shù)據(jù)中的聲頻信息，同時同步地再現(xiàn)在主數(shù)據(jù)中的視頻信息。在處理用戶接口32時，從其中將運行模式指定信號輸入到CPU33中。運行模式指定信號指示第一運行模式和第二運行模式中哪種模式是所需的。CPU33將運行模式指定信號傳遞給信號選擇器37。此外，通過處理用戶接口32可以將標識(ID)信息輸入到CPU33。CPU33將該標識信息傳遞給標識信息檢測器34。
在運行模式指定信號指示需要第一運行模式時，即，在需要再現(xiàn)主數(shù)據(jù)(AV多路傳輸結果文件25a)時，信息信號再現(xiàn)設備30a如下運行。通過處理用戶接口32將標識所需的主數(shù)據(jù)的信號輸入到CPU33。標識信號標識分配給所需的主數(shù)據(jù)的指定號(標識號)。CPU33將標識信號傳遞給標識信息檢測器34。標識信息檢測器34從標識信號中得出主數(shù)據(jù)的標識號。標識信息檢測器34通知讀控制器31所需的主數(shù)據(jù)的標識號。標識信息檢測器34指令讀控制器31從信息信號記錄媒體25中讀取對應于所需的主數(shù)據(jù)的標識號的名稱為“PR....dat”的主數(shù)據(jù)文件(AV多路傳輸結果文件25a)。因此，讀控制器31實施了從記錄媒體25中讀出所需的主數(shù)據(jù)。這樣，讀控制器31從記錄媒體25中讀出了所需的主數(shù)據(jù)(即所需的多路復用結果數(shù)據(jù))。將所讀出的主數(shù)據(jù)從讀控制器31發(fā)送到緩沖器35中。在將主數(shù)據(jù)從緩沖器35輸出到多路信號分解器36中之前將其存儲在緩沖器35中。多路信號分解器36將主數(shù)據(jù)分解為視頻數(shù)據(jù)和聲頻數(shù)據(jù)。將視頻數(shù)據(jù)從多路信號分解器36發(fā)送到時間標記檢測器43中。聲頻數(shù)據(jù)從多路信號分解器36發(fā)送到信號選擇器37中。信號選擇器37響應運行模式指定信號從多路信號分解器36中選擇聲頻數(shù)據(jù)，并將所選擇的聲頻數(shù)據(jù)傳輸?shù)綍r間標記檢測器43a中。
時間標記檢測器43檢測在視頻數(shù)據(jù)中的時序信息(每個PCR、每個視頻PTS和每個視頻DTS)。時間標記檢測器43將所檢測的PCR、所檢測的視頻PTS和所檢測的視頻DTS發(fā)送給時間標記比較器42中。時間標記檢測器43將視頻數(shù)據(jù)傳輸給PES去包裝置44。時間標記檢測器43a檢測在聲頻數(shù)據(jù)中的時序信息(每個PCR、每個聲頻PTS和每個聲頻DTS)。時間標記檢測器43a將所檢測的PCR、所檢測的聲頻PTS和所檢測的聲頻DTS發(fā)送給時間標記比較器42中。時間標記檢測器43a將聲頻數(shù)據(jù)傳輸給PES去包裝置44a。
PES去包裝置44對視頻數(shù)據(jù)(PES包序列)進行去包以產(chǎn)生去包結果視頻數(shù)據(jù)。PES去包裝置44將去包結果視頻數(shù)據(jù)輸出給視頻解碼器45。PES去包裝置44a對聲頻數(shù)據(jù)(PES包序列)進行去包以產(chǎn)生去包結果聲頻數(shù)據(jù)。PES去包裝置44a將去包結果聲頻數(shù)據(jù)輸出給聲頻解碼器45a。視頻解碼器45和聲頻解碼器45a類似于在附圖1中的視頻解碼器45和聲頻解碼器45a。視頻解碼器45實施了視頻數(shù)據(jù)的MPEG解碼以產(chǎn)生解碼結果視頻數(shù)據(jù)。視頻解碼器45將解碼結果視頻數(shù)據(jù)存儲在存儲器46中。聲頻解碼器45a實施了聲頻數(shù)據(jù)的MPEG解碼以產(chǎn)生解碼結果聲頻數(shù)據(jù)。聲頻解碼器45a將解碼結果聲頻數(shù)據(jù)存儲在存儲器46a中。
信號發(fā)生器41給時間標記比較器42輸出27兆赫茲的時鐘信號。基于27兆赫茲的時鐘信號，時間標記比較器42產(chǎn)生指示參考時鐘時間的參考時鐘信號。時間標記比較器42將參考時鐘信號的頻率鎖定在由PCR所指示的頻率上。因此，參考時鐘時間由PCR決定。時間標記比較器42將由視頻DTS所表示的時間與參考時鐘時間進行比較以決定視頻DTS時間是否與參考時鐘時間相符合。在視頻DTS時間與參考時鐘時間相符合時，時間標記比較器42指令視頻解碼器45開始來自具有相關的視頻DTS的PES包的視頻數(shù)據(jù)的解碼。時間標記比較器42將由聲頻DTS所表示的時間與參考時鐘時間進行比較以決定聲頻DTS時間是否與參考時鐘時間相符合。在聲頻DTS時間與參考時鐘時間相符合時，時間標記比較器42指令聲頻解碼器45a開始對來自具有相關的聲頻DTS的PES包的聲頻數(shù)據(jù)進行解碼。
時間標記比較器42將由視頻PTS所表示的時間與參考時鐘時間進行比較以決定視頻PTS時間是否與參考時鐘時間相符合。在視頻PTS時間與參考時鐘時間相符合時，時間標記比較器42指令存儲器46給顯示監(jiān)視器27輸出解碼結果視頻數(shù)據(jù)以便用于指示。時間標記比較器42將由聲頻PTS所表示的時間與參考時鐘時間進行比較以決定聲頻PTS時間是否與參考時鐘時間相符合。在聲頻PTS時間與參考時鐘時間相符合時，時間標記比較器42指令存儲器46a給揚聲器28輸出解碼結果聲頻數(shù)據(jù)以便用于重播或產(chǎn)生聲音。預先設定視頻PTS和聲頻PTS以便能夠同步地重播解碼結果視頻信號和解碼結果聲頻數(shù)據(jù)。
在運行模式指定信號指示需要第二運行模式時，即在需要再現(xiàn)后期錄音聲頻數(shù)據(jù)和主數(shù)據(jù)視頻信息時，信息信號再現(xiàn)設備30a運行如下。通過處理用戶接口32將標識所需的主數(shù)據(jù)的信號和所需的后期錄音聲頻數(shù)據(jù)輸入到CPU33。標識信號對應于代表分配給所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的指定號(標識號)的在附圖15中的信息片段“AF_number”和“PR_number”。CPU33將標識信號傳遞給標識信息檢測器34。讀控制器31從信息信號記錄媒體25中讀出播放列表信息“PLAY_IFO”(參見附圖15)，并將播放列表信息“PLAY_IFO”發(fā)送給標識信息檢測器34。標識信息檢測器34響應該標識信號通過參考播放列表信息“PLAY_IFO”檢測所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的標識號。標識信息檢測器34將所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的標識號通知讀控制器31。標識信息檢測器34指令讀控制器31從記錄媒體25中交替地讀出具有對應于所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的標識號的名稱的后期錄音聲頻文件25b和主數(shù)據(jù)文件(AV多路傳輸結果文件25a)。因此，讀控制器31實施了基于交替的時分脈沖信號從記錄媒體25中讀出所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)。將所讀出的主數(shù)據(jù)從讀控制器31發(fā)送到緩沖器35。在將主數(shù)據(jù)從緩沖器輸出到多路信號分解器36之前將其存儲在緩沖器35中。多路信號分解器36將主數(shù)據(jù)分解為視頻數(shù)據(jù)和聲頻數(shù)據(jù)。視頻數(shù)據(jù)從多路信號分解器36發(fā)送到時間標記檢測器43。聲頻數(shù)據(jù)從多路信號分解器36發(fā)送給信號選擇器37。所讀出的后期錄音聲頻數(shù)據(jù)從讀控制器31發(fā)送給緩沖器35a。在后期錄音聲頻數(shù)據(jù)從緩沖器35a輸出到信號選擇器37之前將其存儲在緩沖器35a中。信號選擇器37響應運行模式指定信號從緩沖器35a中選擇后期錄音聲頻數(shù)據(jù)，并將所選擇的后期錄音聲頻數(shù)據(jù)傳輸給時間標記檢測器43a。換句話說，信號選擇器37拒絕來自多路信號分解器36的聲頻數(shù)據(jù)。
時間標記檢測器43檢測在視頻數(shù)據(jù)中的時序信息(每個PCR、每個視頻PTS和每個視頻DTS)。時間標記檢測器43將所檢測的PCR、所檢測的視頻PTS和所檢測的視頻DTS發(fā)送給時間標記比較器42中。時間標記檢測器43將視頻數(shù)據(jù)傳輸給PES去包裝置44。時間標記檢測器43a檢測在后期錄音聲頻數(shù)據(jù)中的時序信息(每個PCR、每個聲頻PTS和每個聲頻DTS)。時間標記檢測器43a將所檢測的PCR、所檢測的聲頻PTS和所檢測的聲頻DTS發(fā)送給時間標記比較器42中。時間標記檢測器43a將后期錄音聲頻數(shù)據(jù)傳輸給PES去包裝置44a。
PES去包裝置44對視頻數(shù)據(jù)(PES包序列)進行去包以產(chǎn)生去包結果視頻數(shù)據(jù)。PES去包裝置44將去包結果視頻數(shù)據(jù)輸出給視頻解碼器45。PES去包裝置44a對后期錄音聲頻數(shù)據(jù)(PES包序列)進行去包以產(chǎn)生去包結果聲頻數(shù)據(jù)。PES去包裝置44a將去包結果聲頻數(shù)據(jù)輸出給聲頻解碼器45a。視頻解碼器45實施了視頻數(shù)據(jù)的MPEG解碼以產(chǎn)生解碼結果視頻數(shù)據(jù)。視頻解碼器45將解碼結果視頻數(shù)據(jù)存儲在存儲器46中。聲頻解碼器45a實施了聲頻數(shù)據(jù)的MPEG解碼以產(chǎn)生解碼結果聲頻數(shù)據(jù)。聲頻解碼器45a將解碼結果聲頻數(shù)據(jù)存儲在存儲器46a中。
信號發(fā)生器41給時間標記比較器42輸出27兆赫茲的時鐘信號。基于27兆赫茲的時鐘信號，時間標記比較器42產(chǎn)生指示參考時鐘時間的參考時鐘信號。時間標記比較器42將參考時鐘信號的頻率鎖定在由PCR所指示的頻率上。因此，參考時鐘時間由PCR決定。時間標記比較器42將由視頻DTS所表示的時間與參考時鐘時間進行比較以決定視頻DTS時間是否與參考時鐘時間相符合。在視頻DTS時間與參考時鐘時間相符合時，時間標記比較器42指令視頻解碼器45開始對來自具有相關的視頻DTS的PES包的視頻數(shù)據(jù)進行解碼。時間標記比較器42將由聲頻DTS所表示的時間與參考時鐘時間進行比較以決定聲頻DTS時間是否與參考時鐘時間相符合。在聲頻DTS時間與參考時鐘時間相符合時，時間標記比較器42指令聲頻解碼器45a開始對來自具有相關的聲頻DTS的PES包的聲頻數(shù)據(jù)進行解碼。
時間標記比較器42將由視頻PTS所表示的時間與參考時鐘時間進行比較以決定視頻PTS時間是否與參考時鐘時間相符合。在視頻PTS時間與參考時鐘時間相符合時，時間標記比較器42指令存儲器46給顯示監(jiān)視器27輸出解碼結果視頻數(shù)據(jù)以便用于指示。時間標記比較器42將由聲頻PTS所表示的時間與參考時鐘時間進行比較以決定聲頻PTS時間是否與參考時鐘時間相符合。在聲頻PTS時間與參考時鐘時間相符合時，時間標記比較器42啟動存儲器46a給揚聲器28輸出解碼結果聲頻數(shù)據(jù)以便用于重播或產(chǎn)生聲音。預先設定視頻PTS和聲頻PTS以便能夠同步地重播解碼結果視頻數(shù)據(jù)和解碼結果聲頻數(shù)據(jù)(后期錄音聲頻數(shù)據(jù))。
下面解釋記錄在信息信號記錄媒體25上的信息的格式。如附圖10所示，記錄媒體25存儲根目錄，在根目錄下放置有名稱為“LIB(庫)”的文件夾。在文件夾“LIB”之下，有許多命名為“SIDE.ifo”(“SIDE0.ifo”，“SIDE1.ifo”，...“SIDEk.ifo”)的文件。文件“SIDE.ifo”帶有與許多內(nèi)容節(jié)目相關的輔助信息，即聲頻視頻(AV)節(jié)目。
此外，在文件夾“LIB”之下，還有分別具有信息片段“RP0.dat”，“RP1.dat”...“RPn.dat”的文件夾“PR0”，“PR1”，...“PRn”。信息片段“RP0.dat”，“RP1.dat”和“RPn.dat”用于鏈接AV多路傳輸?shù)慕Y果位流。
此外，在文件夾“LIB”之下，還有文件夾“PL0”，“PL1”，...“PLn”以用于放置后期錄音聲頻文件(帶有后期錄音聲頻信息的文件)。例如，在制作并記錄與文件夾“PRO”相關的“m”個后期錄音聲頻文件的情況下，列表信息片段“AF0-1.dat”，“AF1-2.dat”，...“AF0-n.dat”放置在文件夾“PL0”中作為與后期錄音聲頻文件的鏈接的信息。
從上文的描述中可以理解的是，與AV多路傳輸結果文件和后期錄音聲頻文件相關的鏈接信息記錄在記錄媒體25中?；谠撴溄有畔⒖梢詮挠涗浢襟w25中再現(xiàn)所需的內(nèi)容信息。
參考附圖11，每個文件“SIDE.ifo”具有分層結構的格式。具體地說，每個文件“SIDE.ifo”具有第一級段“TOTAL_MANAGER_IFO”，它包含第二級段“GENERAL_IFO”和“CNTNT_IFO”。第二級段“GENERAL_IFO”帶有與整個當前的輔助信息相關的參數(shù)。
第二級段“GENERAL_IFO”具有如在附圖12中所示的語法結構。具體地說，第二級段“GENERAL_IFO”包括具有語法名稱分別“System_id”、“TMG_IFO_length”、“Num of PR_IFO”、“Numof PL_IFO”、“Start Address of PR_IFO”和“Start Address ofPL_IFO”的信息片段。信息片段“System_id”是標識當前的信息結構的類型的32位信號。信息片段“TMG_IFO_length”是表示整個管理器長度的32位信號。信息片段“Num of PR_IFO”是表示將在下文解釋的節(jié)目信息片段“PR_IFO”的數(shù)量的8位信號。信息片段“Num ofPL_IFO”是表示將在下文解釋的后期錄音信息片段“PL_IFO”的數(shù)量的8位信號。信息片段“Start Address of PR_IFO”是表示第一節(jié)目信息片段“PR_IFO_0”的開始地址的32位信號。信息片段“StartAddress of PL_IFO”是表示第一后期錄音信息片段“PL_IFO_0”的開始地址的32位信號。
在附圖11中的第二級段“CNTNT_IFO”包含具有分別與內(nèi)容節(jié)目(或AV多路傳輸結果文件)相關的信息片段的第三級段“PR_IFO_0”，“PR_IFO_1”，...，“PR_IFO_m”。此外，第二級段“CNTNT_IFO”還包含具有分別與內(nèi)容節(jié)目(或AV多路傳輸結果文件)相關的后期錄音聲頻數(shù)據(jù)的信息片段的第三級段“PL_IFO_0”，“PL_IFO_1”，...，“PL_IFO_m”。例如，在存在對應于第三級段“PR_IFO_0”的后期錄音聲頻數(shù)據(jù)的情況下，第三級段“PL_IFO_0”包含具有與后期錄音聲頻文件相關的信息(播放清單信息)的第四級段“PLAY_IFO”。
第三級段“PR_IFO_0”，“PR_IFO_1”，...，“PR_IFO_m”在結構上都類似。下文將僅僅更加詳細地解釋第三級段“PR_IFO_0”。如附圖13所示，第三級段“PR_IFO_0”包含第四級段“PROG_IFO”和“IDX_IFO”。第四級段“PROG_IFO”帶有與內(nèi)容節(jié)目相關的信息。第四級段“IDX_IFO”包含分別帶有與相關的聲頻視頻節(jié)目的相應的索引相關的信息片段的第五級段IDX_IFO_0”，“IDX_IFO_1”，...，“IDX_IFO_n”。第五級段IDX_IFO_0”，“IDX_IFO_1”，...，“IDX_IFO_n”在結構上都類似。例如，第五級段IDX_IFO_0”具有在其中可以將一部分相關的聲頻視頻節(jié)目寄存為索引信息的第六級段“INDEX_IFO”。
在附圖14中示出了第四級段“PROG_IFO”的語法結構。具體地說，每個第四級段“PROG_IFO”包括分別具有語法名稱為“Sizeof PROG_IFO”、“PR number”、“Content type”和“Componenttype”的信息片段。信息片段“Size of PROG_IFO”是表示當前的第四級段“PROG_IFO”的大小的32位信號。信息片段“PR number”是表示分配給相關的聲頻視頻節(jié)目的指定號(標識號)的8位信號。PRnumber是分別對應于不同的聲頻視頻節(jié)目的在“0”-“255”中的變量。信息片段“Content type”是表示相關的聲頻-視頻節(jié)目的類型的8位信號。信息片段“Component type”是表示相關的數(shù)據(jù)的類型的8位信號，即表示相關的數(shù)據(jù)是視頻、聲頻或其它的類型。
如前文所述，在存在后期錄音聲頻文件的情況下，提供播放清單信息“PLAY_IFO”。在存在對應于文件夾“PR0”的“m”個后期錄音聲頻文件的情況下，將清單信息片段“AF0-1.dat”，“AF0-2.dat”，...，“AF0-m.dat”放置在文件夾“PL0”中作為與后期錄音聲頻文件鏈接的信息。
播放清單信息“PLAY_IFO”的語法結構如附圖15所示。具體地說，播放清單信息“PLAY_IFO”包括分別具有語法名稱為“PR_number”和“AF_number”的信息片段。信息片段“PR_number”是表示分配給相關的主數(shù)據(jù)(相關的聲頻視頻節(jié)目)的分配號(標識號)的8位信號。信息片段“AF_number”是表示分配給相關的后期錄音聲頻數(shù)據(jù)的分配號(標識號)的8位信號。
關于在附圖10的文件夾“PRj”中的“n+1”個AV多路傳輸?shù)慕Y果流“PRj.dat(j＝0，1，...，n)”中的每個，根據(jù)用戶的請求可以寄存“m”個后期錄音聲頻數(shù)據(jù)。在數(shù)字“m”等于“0”時，使用AV多路傳輸結果文件但不應用后期錄音聲頻數(shù)據(jù)。在數(shù)字“m”等于或大于“1”時，允許記錄后期錄音聲頻數(shù)據(jù)。在這種情況下，至少產(chǎn)生并記錄一個后期錄音聲頻文件。此外，再現(xiàn)或傳輸后期錄音聲頻數(shù)據(jù)。
在附圖13中的索引信息“INDEX_IFO”具有附圖16中所示的語法結構。具體地說，索引信息“INDEX_IFO”包括具有語法名稱分別為“INDEX number”、“Playback Time”、“Start Address”和“End Address”的信息片段。信息片段“INDEX number”是表示分配給相關的索引的序列號的8位信號。信息片段“Playback Time”是表示相關的索引的重播時間的40位信號。信息片段“Start Address”是表示相關的索引的開始點的地址的64位信號。信息片段“EndAddress”是表示相關的索引的結束點的地址的64位信號。
這樣，設計了在附圖10中的輔助信息?；谳o助信息產(chǎn)生文件夾“PR”和“PL”的記錄信息和清單信息片段“AF”。通過參考記錄信息將規(guī)定的AV和聲頻文件記錄在記錄媒體25上。通過參考記錄信息從記錄媒體25中讀出指定的AV和聲頻文件。因此，可以重播伴有所需的聲頻信號的視頻信號同時再現(xiàn)所需的聲頻信號。
記錄媒體25包括例如DVD-RAM、DVD-RW、DVD-R、磁光盤或硬盤。如前文所述，在記錄媒體25上記錄后期錄音目的聲頻數(shù)據(jù)的過程中，從記錄媒體25中讀出主數(shù)據(jù)。在每個都對應許多包的周期中分時地交替進行后期錄音目的聲頻數(shù)據(jù)的記錄和主數(shù)據(jù)的讀出。可取的是，后期錄音目的聲頻數(shù)據(jù)記錄在也記錄主數(shù)據(jù)的記錄媒體25的表面上。
附圖17所示為記錄在硬盤上的TS的格式，該硬盤構成了記錄媒體25。如附圖17所示，TS由TS單元序列形成。每個TS單元由包構成。每個包由25位的時間標記和188字節(jié)的MPEG的TS包構成。MPEG的TS包與在附圖5中的TS包相同。在AV多路傳輸結果文件25a中的聲頻數(shù)據(jù)以在后期錄音聲頻文件25b中的聲頻數(shù)據(jù)(后期錄音聲頻數(shù)據(jù))替代的情況下，由于給每個TS包中增加了提供同步的時間標記，因此可以保持在后期錄音聲頻數(shù)據(jù)和在AV多路傳輸結果文件25a中的視頻數(shù)據(jù)之間的同步關系。
附圖18所示為信息信號傳輸設備30b。如附圖18所示，傳輸設備30b包括與CPU33E連接的用戶接口32E。用戶可以處理用戶接口32E。CPU33E具有輸入/輸出端口的結合、處理部分、ROM和RAM。CPU 33E根據(jù)存儲在ROM和RAM中的控制程序運行?？刂瞥绦虮辉O計成啟動CPU 33E以實施后面所提到的運行步驟。通過處理用戶接口32E，傳輸設備30b的操作可以在包括第一模式和第二模式的不同模式中改變。第一運行模式設計成傳輸主數(shù)據(jù)(AV多路傳輸結果文件25a)。第二運行模式設計成傳輸后期錄音聲頻數(shù)據(jù)(后期錄音聲頻文件25b)而不是在主數(shù)據(jù)中的聲頻信息，同時傳輸在主數(shù)據(jù)中的視頻信息。在處理用戶接口32E時，從其中將運行模式指定信號輸入到CPU33E中。運行模式指定信號可以從位于距離傳輸設備30b較遠的位置上的信息信號接收設備中傳輸?shù)紺PU33E。運行模式指定信號指示第一運行模式和第二運行模式中哪種模式是所需的。CPU33E將運行模式指定信號傳遞給也可以作為包選擇器運行的信號選擇器38。此外，通過處理用戶接口32E可以將標識(ID)信息輸入到CPU33E。從接收設備可以將該標識信息發(fā)送CPU33E。CPU33E將標識信息傳遞給標識信息檢測器34。
在運行模式指定信號指示需要第一運行模式時，即，在需要再現(xiàn)主數(shù)據(jù)(AV多路傳輸結果文件25a)時，傳輸設備30b如下運行。讀控制器31從信息信號記錄媒體25中讀出主數(shù)據(jù)即AV多路傳輸?shù)慕Y果數(shù)據(jù)。將所讀出的主數(shù)據(jù)從讀控制器31發(fā)送到緩和器35。在將主數(shù)據(jù)從緩沖器35輸出到信號選擇器38之前將其存儲在緩沖器35中。信號選擇器38響應運行模式指定信號從緩沖器35中選擇主數(shù)據(jù)，并將該主數(shù)據(jù)傳輸?shù)骄彌_器39。在將主數(shù)據(jù)從緩沖器39輸出到傳輸線之前將其存儲在緩沖器39中。主數(shù)據(jù)(AV多路傳輸?shù)慕Y果數(shù)據(jù))沿著傳輸線傳播到接收設備。接收設備同步地重播在主數(shù)據(jù)中的聲頻信息和視頻信息。
在運行模式指定信號指示需要第二運行模式時，即在需要傳輸后期錄音聲頻數(shù)據(jù)和主數(shù)據(jù)視頻信息時，傳輸設備30b運行如下。通過處理用戶接口32E將標識所需的主數(shù)據(jù)的信號和所需的后期錄音聲頻數(shù)據(jù)輸入到CPU33。標識信息可以從接收設備發(fā)送到CPU33E中。標識信號對應于代表分配給所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的指定號(標識號)的在附圖15中的信息片段“AR_number”和“PF_number”。CPU33E將標識信號傳遞給標識信息檢測器34。讀控制器31從信息信號記錄媒體25中讀出播放列表信息“PLAY_IFO”。讀控制器31將播放列表信息“PLAY_IFO”發(fā)送給標識信息檢測器34。標識信息檢測器34通過參考播放列表信息“PLAY_IFO”(參見附圖15)響應該標識信號檢測所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的標識號。標識信息檢測器34將所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的標識號通知讀控制器31。標識信息檢測器34指令讀控制器31從記錄媒體25中交替地讀出具有對應于所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的標識號的名稱的后期錄音聲頻文件25b和主數(shù)據(jù)文件(AV多路傳輸結果文件25a)。因此，讀控制器31實施了基于交替的時分脈沖信號從記錄媒體25中讀出所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)。將所讀出的主數(shù)據(jù)從讀控制器31發(fā)送到緩沖器35。在將主數(shù)據(jù)從緩沖器35輸出到信號選擇器38之前將其存儲在緩沖器35中。所讀出的后期錄音聲頻數(shù)據(jù)從讀控制器31發(fā)送到緩沖器35a。在后期錄音聲頻數(shù)據(jù)從緩沖器35a輸出到信號選擇器38之前將其存儲在緩沖器35a中。信號選擇器(包選擇器)38響應運行模式指定信號將在主數(shù)據(jù)中的聲頻數(shù)據(jù)替換為來自緩沖器35a的后期錄音聲頻數(shù)據(jù)，由此將原始主數(shù)據(jù)轉換為新的主數(shù)據(jù)(新的AV多路傳輸?shù)慕Y果數(shù)據(jù))。信號選擇器38一包一包(基于一單元一單元)地實施了聲頻數(shù)據(jù)替換。新的主數(shù)據(jù)從信號選擇器38發(fā)送到緩沖器39。在將新的主數(shù)據(jù)輸出到傳輸線之前將其存儲在緩沖器39中。新的主數(shù)據(jù)(新的AV多路傳輸?shù)慕Y果數(shù)據(jù))沿傳輸線傳播到接收設備。接收設備同時重播在主數(shù)據(jù)中的聲頻信息和視頻信息。在將原始主數(shù)據(jù)轉換為新的主數(shù)據(jù)的過程中，不需要改變每個PCR、每個DTS和每個PTS?？扇〉氖牵盘栠x擇器38包括計算器。計算器可以由CPU33E形成。對于已經(jīng)進行了聲頻數(shù)據(jù)替換的新的主數(shù)據(jù)包，計算器計算新的CRC(循環(huán)冗余校驗)碼字并將老的CRC碼字替換為新的碼字。
附圖19所示為CPU33E的控制程序段的流程圖。如附圖19所示，第一步驟S11控制讀控制器31從信息信號記錄媒體25中讀出主數(shù)據(jù)(AV多路傳輸結果文件25a)。
在步驟S11之后的步驟S12確定是否要求以后期錄音聲頻信息替換在所讀出的主數(shù)據(jù)中的聲頻信息。在要求以后期錄音聲頻信息替換在所讀出的主數(shù)據(jù)中的聲頻信息時，該程序從步驟S12進行到步驟S13。否則，該程序從步驟S12跳轉步驟S17。
步驟S13控制標識信息檢測器34和讀控制器31以從記錄媒體25中讀出具有對應于指定標識號的名稱的后期錄音聲頻文件25b(后期錄音聲頻數(shù)據(jù))。
在步驟S13之后的步驟S14將所讀出的AV多路傳輸結果文件25a和所讀出的后期錄音聲頻文件25b(即所讀出的主數(shù)據(jù)和所讀出的后期錄音聲頻數(shù)據(jù))分為包(單元)。
在步驟S14之后的步驟S15一個包一個包地將在所讀出的主數(shù)據(jù)中的聲頻數(shù)據(jù)替換為在重播時序中等效于在前面聲頻數(shù)據(jù)的所讀出的后期錄音聲頻數(shù)據(jù)。此后，步驟S15將原始主數(shù)據(jù)轉換為新的主數(shù)據(jù)(新的AV多路傳輸結果文件)。
在步驟S15之后的步驟S16計算新的CRC(循環(huán)冗余校驗)碼字并將老的CRC碼字替換為已經(jīng)進行聲頻數(shù)據(jù)替換的新的主數(shù)據(jù)包的新包。因此，步驟S16產(chǎn)生CRC-碼-校正的主數(shù)據(jù)(CRC-碼-校正的AV多路傳輸結果文件)。在步驟S16之后，程序進行到步驟S17。
步驟S17將通過步驟S11給定的AV多路傳輸結果文件或通過步驟S16給定的AV多路傳輸結果文件傳輸?shù)絺鬏斁€。
在步驟S17之后的步驟S18確定AV多路傳輸結果文件的傳輸是否已經(jīng)完成。在AV多路傳輸結果文件的傳輸還沒有完成時，該程序從步驟S18返回到步驟S11。在這種情況下，重復步驟S11和后面的步驟。在另一方面，在AV多路傳輸結果文件的傳輸已經(jīng)完成時，程序從步驟S18退出，然后當前的程序段的執(zhí)行結束。步驟S18還可以響應傳輸停止請求。在這種情況下，一旦接收到傳輸停止請求，在該程序從步驟S18中退出，然后結束當前程序段的執(zhí)行而不管AV多路傳輸結果文件的傳輸是否完成。
如上文所述，符合MPEG系統(tǒng)標準的AV多路傳輸?shù)慕Y果數(shù)據(jù)記錄在信息信號記錄媒體上或從其中再現(xiàn)。AV多路傳輸?shù)慕Y果數(shù)據(jù)包含聲頻信息和帶有該聲頻信息的視頻信息。此外，符合MPEG系統(tǒng)標準的后期錄音目的聲頻數(shù)據(jù)記錄在該記錄媒體或從其中再現(xiàn)。后期錄音目的聲頻數(shù)據(jù)具有與在AV多路傳輸?shù)慕Y果數(shù)據(jù)中的視頻信息同步的關系。同步重播在AV多路傳輸?shù)慕Y果數(shù)據(jù)中的后期錄音目的聲頻數(shù)據(jù)和視頻信息?？梢詫V多路傳輸?shù)慕Y果數(shù)據(jù)從記錄媒體通過傳輸線朝信息信號接收設備傳輸。此外，可以將在構成新的AV多路傳輸?shù)慕Y果數(shù)據(jù)的AV多路傳輸?shù)慕Y果數(shù)據(jù)中的后期錄音目的聲頻數(shù)據(jù)和視頻信息從記錄媒體通過傳輸線朝接收設備傳輸。
如前文所述，對聲頻信號和視頻信號進行壓縮編碼。將編碼結果數(shù)據(jù)分為單元塊(包)。給每個單元塊中加入聲頻視頻同步播放的時間標記。所加入的時間標記數(shù)據(jù)記錄在信息信號記錄媒體中。
對視頻信號和第一聲頻信號進行壓縮編碼并將其多路復用在主數(shù)據(jù)中，并將該主數(shù)據(jù)記錄在信息信號記錄媒體中。將第二聲頻信號(即后期錄音目的聲頻信號)壓縮編碼成后期錄音目的聲頻數(shù)據(jù)。后期錄音目的聲頻數(shù)據(jù)記錄在記錄媒體上但不與在主數(shù)據(jù)中的視頻數(shù)據(jù)進行多路復用。
因此，簡單的信號處理能夠使后期錄音目的聲頻數(shù)據(jù)記錄在信息信號記錄媒體上。此外，可以將帶有系統(tǒng)的視頻信息的多個后期錄音目的聲頻信號記錄在記錄媒體上。與視頻信息同步地重播每個后期錄音目的聲頻信號。如前文所述，在將第一聲頻信號和視頻信號作為AV多路傳輸結果文件記錄在信息信號記錄媒體上之前對其進行多路復用。在重播的過程中，可以以每個后期錄音目的聲頻信號替換在AV多路傳輸結果文件中的第一聲頻信號。
加入到后期錄音目的聲頻數(shù)據(jù)的時序信息由基于主數(shù)據(jù)產(chǎn)生的PCR、DTS和PTS構成。應該指出的是，可以獨立于主數(shù)據(jù)產(chǎn)生后期錄音目的聲頻數(shù)據(jù)的PCR、DTS和PTS。
可以將獲得參考時序的信息放置在后期錄音目的聲頻數(shù)據(jù)中的時序信息的標題中。在這種情況下，根據(jù)參考時序信息使后期錄音目的聲頻數(shù)據(jù)的重播最佳化。
拌有視頻信息的聲頻信息可以由如下的信息替換基于多路復用表示注釋的字符信息、數(shù)字信息、不同于視頻信息的圖形信息、與視頻信息的指示區(qū)相關的輔助信息或與視頻信息同步重播的其它信息。
從前述的描述中可以理解的是，關于主數(shù)據(jù)的產(chǎn)生，假設先前在單元數(shù)據(jù)中產(chǎn)生與后期錄音目的聲頻數(shù)據(jù)的類型相關的數(shù)據(jù)片段，并且后期錄音目的聲頻數(shù)據(jù)的傳輸速率等于在主數(shù)據(jù)中的原始聲頻數(shù)據(jù)的傳輸速率。
如前文所述，將視頻信號壓縮編碼成編碼結果視頻信號。拌有視頻信號的第一聲頻信號被壓縮編碼成第一壓縮編碼結果聲頻信號。編碼結果視頻信號和第一壓縮編碼結果聲頻信號多路復用成多路復用結果信號，將表示解碼時序和重播時序的時序信息加入到該多路復用結果信號中。該多路復用結果信號記錄在信息信號記錄媒體上。將對與視頻信號具有同步關系的第二聲頻信號(后期錄音目的聲頻信號)壓縮編碼成第二壓縮編碼結果聲頻信號，將與視頻信號同步的時序信息加入到該第二壓縮編碼結果聲頻信號中。該第二壓縮編碼結果聲頻信號記錄在記錄媒體上。此后，同步地再現(xiàn)在多路復用結果信號中的第二聲頻信號和視頻信號。第二壓縮編碼結果聲頻信號在時序上等效于第一壓縮編碼結果聲頻信號。因此，在第二聲頻信號的再現(xiàn)的過程中，防止了第二編碼結果聲頻信號的解碼造成麻煩。
將第一多路復用結果信號定義為包含第一聲頻信號和視頻信號的壓縮編碼型式的數(shù)據(jù)流。將第二多路復用結果信號定義為包含第二聲頻信號(后期錄音目的聲頻信號)和視頻信號的壓縮編碼型式的數(shù)據(jù)流。第二聲頻信號拌有視頻信號。雖然在實際中不產(chǎn)生第二多路復用結果信號，但可以重播由第二聲頻信號和聲頻信號構成的AV信號。由于第二多路復用結果信號既不產(chǎn)生也不記錄，因此通過記錄第二多路復用結果信號可以防止擦除記錄在信息信號記錄媒體上的第一多路復用結果信號。由于不記錄第二多路復用結果信號，因此通過第二多路復用結果信號可以防止記錄媒體的可用容量的降低。
多個后期錄音目的聲頻信號可以記錄在信息信號記錄媒體上。在重播的過程中，用戶可以從后期錄音目的聲頻信號中選擇一個后期錄音目的聲頻信號。在這種情況下，可以同步重播所選擇的后期錄音目的聲頻信號和拌有該聲頻信號的視頻信號。此外，可以有效地使用記錄媒體的存儲容量。
根據(jù)MPEG1標準或MPEG2標準對視頻信號和聲頻信號進行壓縮編碼。根據(jù)MPEG系統(tǒng)標準產(chǎn)生AV多路傳輸結果信號。AV多路傳輸結果信號可以包含表示音樂節(jié)目的視頻信息和表示在音樂節(jié)目中的卡拉OK音樂的聲頻信息。在AV多路傳輸結果信號中，通過要與主視頻信息同步重播的第二視頻信息可以替換聲頻信息。
根據(jù)MPEG1標準、MPEG2標準和MPEG4標準進行壓縮編碼和系統(tǒng)化(多路復用)?？梢曰诓糠志幋a過程或另一編碼過程進行壓縮編碼和系統(tǒng)化(多路復用)，在該編碼過程中實施重播的信號處理，同時將編碼結果信號臨時存儲在預定的記錄區(qū)中。
信息信號記錄媒體25例如包括硬盤或DVD-RAM。記錄媒體25可以是另一種類型的記錄媒體，該記錄媒體具有能夠交替地讀出兩種不同的信息文件的隨機存取性能，并且具有足夠記錄預定量的數(shù)字視頻數(shù)據(jù)的存儲容量。
通過信息信號產(chǎn)生設備10或10a產(chǎn)生的信號記錄在信息信號記錄媒體25上。信息信號再現(xiàn)設備30或30a從記錄媒體25上再現(xiàn)所記錄的信號。通過信息信號傳輸設備30b可以傳輸所再現(xiàn)的信號。一般地說，記錄媒體25與信息信號產(chǎn)生設備10或10a、信息信號再現(xiàn)設備30或30a和信息信號傳輸設備30b連接以使信號能夠在其中直接傳遞。可替換的是，通過通信裝置比如通信網(wǎng)絡記錄媒體25可以與信息信號產(chǎn)生設備10或10a、信息信號再現(xiàn)設備30或30a和信息信號傳輸設備30b連接。
第二實施例除了下文所描述的改變以外本發(fā)明的第二實施例類似于本發(fā)明的第一實施例。根據(jù)本發(fā)明的第一實施例，在產(chǎn)生主數(shù)據(jù)方面，假設事先在單元數(shù)據(jù)中產(chǎn)生與后期錄音目的聲頻數(shù)據(jù)的類型相關的數(shù)據(jù)片段，并且后期錄音目的聲頻數(shù)據(jù)的傳輸速率等于在主數(shù)據(jù)中的原始聲頻數(shù)據(jù)的傳輸速率。根據(jù)本發(fā)明的第二實施例，在主數(shù)據(jù)的產(chǎn)生方面，基于多路復用事先將在傳輸速率方面等于預期的后期錄音目的聲頻數(shù)據(jù)的單元數(shù)據(jù)記錄為啞數(shù)據(jù)。
第三實施例除了下文所描述的改變以外本發(fā)明的第三實施例類似于本發(fā)明的第一實施例。根據(jù)本發(fā)明的第三實施例，在記錄預期的后期錄音目的聲頻數(shù)據(jù)的情況下，基于多路復用事先將在傳輸速率方面等于預期的后期錄音目的聲頻數(shù)據(jù)的單元數(shù)據(jù)記錄為啞數(shù)據(jù)。在產(chǎn)生實際的后期錄音目的聲頻數(shù)據(jù)時，以實際的后期錄音目的聲頻數(shù)據(jù)替換先前記錄的啞數(shù)據(jù)。在以實際的后期錄音目的聲頻數(shù)據(jù)替換先前記錄的啞數(shù)據(jù)的過程中，不需要改變每個PCR、每個DTS和每個PTS。
在實際的后期錄音目的聲頻數(shù)據(jù)的傳輸速率不等于預期的傳輸速率的情況下，基于多路復用記錄視頻數(shù)據(jù)和實際的后期錄音目的聲頻數(shù)據(jù)。在這種情況下，需要更新每個PCR、每個DTS和每個PTS。
實施例所提供的優(yōu)點本發(fā)明的第一、第二和第三實施例提供了如下的優(yōu)點。
將視頻信號、第一聲頻信號和用于視頻和聲頻的同步再現(xiàn)的時序信息多路復用為要記錄的AV多路傳輸結果信號。此外，將與視頻信號同步的第二聲頻信號的壓縮編碼型式作為要記錄的信號輸送。再現(xiàn)側可以再現(xiàn)由視頻信號和拌有視頻信號的第二聲頻信號構成的AV信號，而不給該AV信號輸送包含有視頻信號和第二聲頻信號的壓縮編碼型式的AV多路傳輸結果信號。
AV多路傳輸結果信號是加入了時序信息的包流。此外，第二聲頻信號的壓縮編碼型式是加入了時序信息的包流。因此，時序管理很容易。再現(xiàn)側可以再現(xiàn)由視頻信號和拌有視頻信號的第二聲頻信號構成的AV信號。
將加入了標識信號的多個第二聲頻信號定義為替代信號。在重播的過程中，可以從第二聲頻信號中選擇一個第二聲頻信號，并再現(xiàn)所選擇的第二聲頻信號。
將視頻信號、第一聲頻信號和用于同步再現(xiàn)視頻和聲頻的時序信息多路復用成AV多路傳輸結果信號。第二聲頻信號的壓縮編碼型式與視頻信號具有同步關系。再現(xiàn)AV多路傳輸結果信號和第二聲頻信號的壓縮編碼型式，并從AV多路傳輸結果信號中再現(xiàn)視頻信號。將所再現(xiàn)的視頻信號和所再現(xiàn)的第二聲頻信號的壓縮編碼型式作為再現(xiàn)的彼此同步的輸出信號提供。
從加入了標識信號的第二聲頻信號的壓縮編碼型式中選擇一個型式。所選擇的第二聲頻信號的壓縮編碼型式可以作為與視頻信號具有同步關系的再現(xiàn)的輸出信號提供。
將視頻信號、第一聲頻信號和用于同步再現(xiàn)視頻和聲頻的時序信息多路復用成AV多路傳輸結果信號。第二聲頻信號的壓縮編碼型式與視頻信號具有同步關系。再現(xiàn)AV多路傳輸結果信號和第二聲頻信號的壓縮編碼型式，并從AV多路傳輸結果信號中再現(xiàn)視頻信號。將所再現(xiàn)的視頻信號和所再現(xiàn)的第二聲頻信號的壓縮編碼型式多路復用成新的AV多路傳輸結果信號。通過傳輸線將新的AV多路傳輸結果信號傳輸?shù)皆佻F(xiàn)側。
權利要求
1.一種產(chǎn)生要記錄的信息信號的方法，該方法包括如下步驟多路傳輸如下信號1)對視頻信號進行壓縮編碼而得到的壓縮編碼結果視頻信號，2)對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼而得到的第一壓縮編碼結果聲頻信號，3)與壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定獲得聲頻-視頻多路傳輸結果信號的視頻信號的指示時序的指示時序信息信號；在重播的過程中在與參考時鐘信息信號同步的同時產(chǎn)生第二聲頻信號作為可以再現(xiàn)的替代第一聲頻信號的替換重播聲頻信號；對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號；將聲音產(chǎn)生時序信息信號加入到第二壓縮編碼結果聲頻信號中以獲得該替換重播聲頻信號，該聲音產(chǎn)生時序信息信號基于參考時鐘信息信號；以及所述第二壓縮編碼結果聲頻信號在不與所述壓縮編碼結果視頻信號一起多路傳輸?shù)那闆r下被記錄在記錄介質(zhì)上。
2.如權利要求1所述的方法，進一步包括如下的步驟將該替換重播聲頻信號劃分為每個都具有預定的數(shù)據(jù)大小的包，并將參考時鐘信息信號和聲音產(chǎn)生時序信息信號與每個包一起多路傳輸。
3.如權利要求1所述的方法，其中該替換重播聲頻信號包括分別通過對第三聲頻信號進行壓縮編碼得到的多個輔助替換重播聲頻信號，并且將不同的標識信號分別加入到輔助替換重播聲頻信號中。
全文摘要
本發(fā)明涉及產(chǎn)生要記錄的信息信號的方法，包括多路傳輸如下信號壓縮編碼結果視頻信號，第一壓縮編碼結果聲頻信號，參考時鐘信息信號，以及指示時序信息信號。在重播的過程中在與參考時鐘信息信號同步的同時產(chǎn)生第二聲頻信號作為可以再現(xiàn)的替代第一聲頻信號的替換重播聲頻信號；對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號；將聲音產(chǎn)生時序信息信號加入到第二壓縮編碼結果聲頻信號中以獲得該替換重播聲頻信號，該聲音產(chǎn)生時序信息信號基于參考時鐘信息信號；第二壓縮編碼結果聲頻信號在不與所述壓縮編碼結果視頻信號一起多路傳輸?shù)那闆r下被記錄在記錄介質(zhì)上。
文檔編號G11B27/10GK1829333SQ20061005988
公開日2006年9月6日 申請日期2002年12月11日 優(yōu)先權日2001年12月26日
發(fā)明者菅原隆幸 申請人:日本勝利株式會社