專利名稱：再現(xiàn)數(shù)據(jù)的方法和裝置、記錄介質(zhì)、以及記錄數(shù)據(jù)的方法和裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及記錄和再現(xiàn)方法及裝置、以及記錄介質(zhì)。
技術(shù)背景光盤被廣泛地用作能在其中記錄大量數(shù)據(jù)的記錄介質(zhì)。具體地，諸如藍(lán)光盤(BD)和高清晰度數(shù)字通用盤(HD-DVD)之類的高密度光學(xué)記錄介質(zhì)目前己被 開發(fā)出來，并能夠記錄并存儲(chǔ)大量的高質(zhì)量視頻數(shù)據(jù)和高質(zhì)量音頻數(shù)據(jù)。這種基于下一代記錄介質(zhì)技術(shù)的高密度光學(xué)記錄介質(zhì)被視為能夠比常規(guī) DVD存儲(chǔ)多得多的數(shù)據(jù)的下一代光學(xué)記錄解決方案。正在進(jìn)行高密度光學(xué)記 錄介質(zhì)以及其它數(shù)字設(shè)施的開發(fā)。同樣，應(yīng)用高密度記錄介質(zhì)標(biāo)準(zhǔn)的光學(xué)記錄 /再現(xiàn)裝置也在開發(fā)中。根據(jù)高密i記錄介質(zhì)和光學(xué)記錄/再現(xiàn)裝置的發(fā)展，可同時(shí)再現(xiàn)多個(gè)視頻。 然而，已知沒有方法能夠有效地同時(shí)記錄或再現(xiàn)多個(gè)視頻。此外，難以基于高 密度記錄介質(zhì)開發(fā)完整的光學(xué)記錄/再現(xiàn)裝置，因?yàn)闆]有完整制定的用于高密度 記錄介質(zhì)的標(biāo)準(zhǔn)。 一發(fā)明內(nèi)容本發(fā)明涉及管理至少一個(gè)畫中畫呈現(xiàn)路徑的音頻再現(xiàn)的方法。 在一個(gè)實(shí)施方式中，該方法包括再現(xiàn)用于管理至少一個(gè)輔助視頻流和至少 一個(gè)輔助音頻流的再現(xiàn)的管理信息。輔助視頻流表示相對(duì)于由主視頻流表示的, 主呈現(xiàn)路徑的畫中畫呈現(xiàn)路徑。該管理信息包括第一組合信息，而第一組合信 息指示可與所述輔助視頻流組合的各個(gè)輔助音頻流?；诘谝唤M合信息再現(xiàn)這 些輔助音頻流中的至少一個(gè)。在一個(gè)實(shí)施方式中，第一組合信息包括指示與輔助視頻流相關(guān)聯(lián)的輔助音 頻流條目的數(shù)目的信息字段，且該組合信息為這些輔助音頻流條目中的每一個(gè)提供一輔助音頻流標(biāo)識(shí)符。在另一個(gè)實(shí)施方式中，該管理信息指示多個(gè)輔助視頻流條目，且該管理信息為這多個(gè)輔助視頻流條目中的每一個(gè)提供一輔助視頻流標(biāo)識(shí)符和第一組合 樣自I FI ,S、 o在又一個(gè)實(shí)施方式中，該管理信息包括第二組合信息，該第二組合信息指 示可與所述輔助音頻流組合的各個(gè)主音頻流。在一個(gè)實(shí)施方式中，該第二組合信息包括指示與所述輔助音頻流相關(guān)聯(lián)的 主音頻流條目的數(shù)目的信息字段，且該第二組合信息為所述這些主音頻流條目 中的每一個(gè)提供主音頻流標(biāo)識(shí)符。本發(fā)明還涉及一種管理用于至少一個(gè)畫中畫呈現(xiàn)路徑的音頻再現(xiàn)的裝置。在一個(gè)實(shí)施方式中，該裝置包括配置成驅(qū)動(dòng)再現(xiàn)設(shè)備以從記錄介質(zhì)再現(xiàn)數(shù) 據(jù)的驅(qū)動(dòng)器?？刂破鞅慌渲贸煽刂乞?qū)動(dòng)器以再現(xiàn)用于管理至少一個(gè)輔助視頻流 和至少一個(gè)輔助音頻流的再現(xiàn)的管理信息。輔助視頻流表示相對(duì)于由主視頻流 表示的主呈現(xiàn)路徑的畫中畫呈現(xiàn)路徑。該管理信息包括第一組合信息，該第一 組合信息指示可與所述輔助視頻流組合的各個(gè)輔助音頻流。該控制器還被配置 成基于第一組合信息再現(xiàn)這些輔助音頻流中的至少一個(gè)。一個(gè)實(shí)施方式還包括配置成解碼被指示為可與輔助視頻流組合的這些輔 助音頻流中的一個(gè)的輔助音頻解碼器。另一個(gè)實(shí)施方式還包括輔助音頻解碼器和主音頻解碼器。輔助音頻解 碼器被配置成解碼被指示為可與輔助視頻流組合的這些輔助音頻流中的一 個(gè)。主音頻解碼器被配置成解碼被指示為可與經(jīng)解碼的輔助音頻流組合的 這些主音頻流中的至少一個(gè)。本發(fā)明還涉及一種記錄介質(zhì)，該記錄介質(zhì)具有用于管理至少一個(gè)畫中畫 呈現(xiàn)路徑的音頻再現(xiàn)的數(shù)據(jù)結(jié)構(gòu)。在一個(gè)實(shí)施方式中，該記錄介質(zhì)包括存儲(chǔ)主視頻流、輔助視頻流、至少一 個(gè)主音頻流、以及至少一個(gè)輔助音頻流的數(shù)據(jù)區(qū)。主視頻流表示主呈現(xiàn)路徑， 而輔助視頻流表示相對(duì)于主呈現(xiàn)路徑的畫中畫呈現(xiàn)路徑。主音頻流與主視頻流 相關(guān)聯(lián)，而輔助音頻流與輔助視頻流相關(guān)聯(lián)。該記錄介質(zhì)還包括存儲(chǔ)用于管理 所述輔助視頻流和所述多個(gè)輔助音頻流中的至少一個(gè)的再現(xiàn)的管理信息的管理區(qū)。該管理信息包括第一組合信息，而第一組合信息指示可與輔助視頻流組 合的各個(gè)輔助音頻流。本發(fā)明還涉及記錄用于管理至少一個(gè)畫中畫呈現(xiàn)路徑的音頻再現(xiàn)的數(shù)據(jù) 結(jié)構(gòu)的方法和裝置。附圖簡述包括于此以提供對(duì)本發(fā)明的進(jìn)一步理解、并被結(jié)合在本申請(qǐng)中且構(gòu)成其一 部分的附圖示出本發(fā)明的實(shí)施方式，其與說明書一起可用來解釋本發(fā)明的原 理。在附圖中

圖1是示出根據(jù)本發(fā)明的一個(gè)實(shí)施方式的光學(xué)記錄/再現(xiàn)裝置與外圍設(shè)施結(jié)合使用的示例性實(shí)施方式的示意圖；圖2是示出根據(jù)本發(fā)明的一個(gè)實(shí)施方式記錄在作為記錄介質(zhì)的光盤中的文件結(jié)構(gòu)的示意圖；圖3是示出根據(jù)本發(fā)明的一個(gè)實(shí)施方式的作為記錄介質(zhì)的光盤中的數(shù)據(jù)記錄結(jié)構(gòu)的示意圖；圖4是用于理解根據(jù)本發(fā)明的一個(gè)實(shí)施方式的輔助視頻的概念的示意圖； 圖5是示出包括輔助視頻的流條目的表的示例性實(shí)施方式的示意圖； 圖6是示出根據(jù)本發(fā)明的輔助視頻元數(shù)據(jù)的示例性實(shí)施方式的示意圖； 圖7是示出根據(jù)本發(fā)明的實(shí)施方式的光學(xué)記錄/再現(xiàn)裝置的總體配置的框圖。 '圖8是示出根據(jù)本發(fā)明的實(shí)施方式的AV解碼器模型的框圖；圖9是示出根據(jù)本發(fā)明的實(shí)施方式的音頻混音模型的總體配置的框圖；圖10A和10B分別是示出根據(jù)本發(fā)明的數(shù)據(jù)編碼方法的實(shí)施方式的示意圖；圖11是解釋根據(jù)本發(fā)明的一個(gè)實(shí)施方式的回放系統(tǒng)的示意圖；圖12是示出根據(jù)本發(fā)明裝配在光學(xué)記錄/再現(xiàn)裝置中的狀態(tài)記憶單元的示例性實(shí)施方式的示意圖；圖13A至13C是分別示出根據(jù)本發(fā)明的各個(gè)實(shí)施方式的子路徑類型的示意圖；以及圖14是示出根據(jù)本發(fā)明的一個(gè)實(shí)施方式再現(xiàn)數(shù)據(jù)的方法的流程圖。 本發(fā)明的最佳實(shí)施方式下面將詳細(xì)參考本發(fā)明的示例性實(shí)施方式，其具體示例示于附圖中。只要 有可能，即在所有附圖中始終使用相同的附圖標(biāo)記表示相同或相似的部件。在以下的描述中，將結(jié)合作為示例記錄介質(zhì)的光盤描述本發(fā)明的示例實(shí)施 方式。具體地，為了便于描述，將藍(lán)光盤(BD)用作示例記錄介質(zhì)。然而，應(yīng)意識(shí)到本發(fā)明的技術(shù)思想適用于與BD等效的其它的記錄介質(zhì)，例如，HD-DVD。 一般在各實(shí)施方式中使用的"存儲(chǔ)"是配備在光學(xué)記錄/再現(xiàn)裝置(圖l)中的存儲(chǔ)。存儲(chǔ)是一種元件，其中用戶自由地存儲(chǔ)所需信息和數(shù)據(jù)，以便隨后使用該信息和數(shù)據(jù)。關(guān)于通常使用的存儲(chǔ)，有硬盤、系統(tǒng)存儲(chǔ)器、閃存等。然而，本發(fā)明不限于這些存儲(chǔ)。結(jié)合本發(fā)明，"存儲(chǔ)"還可用作用于存儲(chǔ)與記錄介質(zhì)(例如，BD)相關(guān)聯(lián)的數(shù)據(jù)的裝置。 一般而言，存儲(chǔ)在此存儲(chǔ)中的與記錄介質(zhì)相關(guān)聯(lián)的數(shù)據(jù)是外部下載的數(shù)據(jù)。對(duì)于這些數(shù)據(jù)，應(yīng)意識(shí)到可將直接從記錄介質(zhì)讀出的部分允許數(shù)據(jù)或與記 錄介質(zhì)的記錄和再現(xiàn)關(guān)聯(lián)產(chǎn)生的系統(tǒng)數(shù)據(jù)(例如，元數(shù)據(jù))存儲(chǔ)在此存儲(chǔ)中。為了便于描述，在以下的描述中，記錄在記錄介質(zhì)中的數(shù)據(jù)將被稱為"原 始數(shù)據(jù)"，而存儲(chǔ)在存儲(chǔ)中與記錄介質(zhì)相關(guān)聯(lián)的數(shù)據(jù)將被稱為"附加數(shù)據(jù)"。同樣，本發(fā)明中定義的"標(biāo)題"意思是與用戶接口的再現(xiàn)單元。各標(biāo)題分 別與特定的對(duì)象鏈接。因此，根據(jù)與標(biāo)題鏈接的對(duì)象中的命令或程序再現(xiàn)記錄 在光盤中與該標(biāo)題相關(guān)聯(lián)的流。具體地，為了便于描述，在以下的描述中，在 包括根據(jù)MPEG壓縮方案的視頻數(shù)據(jù)的標(biāo)題當(dāng)中，支持諸如無縫多角度和多 層、語言學(xué)分(languagecredit)、導(dǎo)演剪輯、三部曲收藏等的特征的標(biāo)題將被稱 為"高清晰度電影(HDMV)標(biāo)題"。同樣，在包括根據(jù)MPEG壓縮方案的視頻 數(shù)據(jù)的標(biāo)題當(dāng)中，提供具有網(wǎng)絡(luò)連接性的完全可編程應(yīng)用環(huán)境從而使內(nèi)容提供 者能夠創(chuàng)建高交互性的標(biāo)題將被稱為"BD-J標(biāo)題"圖1示出根據(jù)本發(fā)明的光學(xué)記錄/再現(xiàn)裝置與外圍設(shè)施的結(jié)合使用的示例 性實(shí)施方式。 '根據(jù)本發(fā)明的一個(gè)實(shí)施方式的光學(xué)記錄/再現(xiàn)裝置io可在/從具有不同格式的各種光盤中記錄或再現(xiàn)數(shù)據(jù)。如有需要，可將光學(xué)記錄/再現(xiàn)裝置10設(shè)計(jì) 成僅對(duì)特定格式的光盤(例如，BD)具有記錄和再現(xiàn)功能，或者只具有再現(xiàn)功能而沒有記錄功能。然而，在以下的描述中，考慮到本發(fā)明必須解決的BD與外 圍設(shè)施的兼容性，將結(jié)合例如用于BD回放的BD播放器或用于BD的記錄和 回放的BD刻錄機(jī)來描述光學(xué)記錄/再現(xiàn)裝置10。應(yīng)意識(shí)到本發(fā)明的光學(xué)記錄/ 再現(xiàn)裝置10可以是內(nèi)建于計(jì)算機(jī)等中的驅(qū)動(dòng)器。 '本發(fā)明的光學(xué)記錄/再現(xiàn)裝置10不僅具有記錄和回放光盤30的功能，還 具有接收外部輸入信號(hào)、處理所接收的信號(hào)以及將經(jīng)處理的信號(hào)通過外置顯示 器20以可視圖象的形式發(fā)送到用戶的功能。盡管對(duì)外部輸入信號(hào)沒有特定限 制，但代表性的外部輸入信號(hào)可以是基于數(shù)字多媒體廣播的信號(hào)、基于因特網(wǎng) 的信號(hào)等。具體地，關(guān)于基于因特網(wǎng)的信號(hào)，因特網(wǎng)上合需的數(shù)據(jù)可在通過光 學(xué)記錄/再現(xiàn)裝置10下載后使用，因?yàn)橐蛱鼐W(wǎng)是任何人都可容易地訪問的媒介。在以下的描述中，提供作為外部源的內(nèi)容的人將被統(tǒng)稱為"內(nèi)容提供者 (CP)，，。如本發(fā)明中使用的"內(nèi)容"可以是標(biāo)題的內(nèi)容，且在此情形中表示由相關(guān) 聯(lián)的記錄介質(zhì)的作者提供的數(shù)據(jù)。在下文中將詳細(xì)描述原始數(shù)據(jù)和附加數(shù)據(jù)。例如，可將某一標(biāo)題的多路復(fù) 用AV流記錄在光盤中作為諒光盤的原始數(shù)據(jù)。在該情形中，可經(jīng)由因特網(wǎng)提 供與原始數(shù)據(jù)的音頻流(例如，英語)不同的音頻流(例如，韓語音頻流)作為附 加數(shù)據(jù)。某些用戶可能期望從因特網(wǎng)下載對(duì)應(yīng)于附加數(shù)據(jù)的音頻流(例如，韓 語音頻流)，以隨同對(duì)應(yīng)于原始數(shù)據(jù)的AV流一起再現(xiàn)下載的音頻流，或僅再現(xiàn) 附加數(shù)據(jù)。為此，期望提供能夠確定原始數(shù)據(jù)和附加數(shù)據(jù)之間的關(guān)系、并應(yīng)用 戶的請(qǐng)求基于確定的結(jié)果來執(zhí)行原始數(shù)據(jù)和附加數(shù)據(jù)的管理/再現(xiàn)的系統(tǒng)化方 法。如上所述，為了便于描述，記錄在盤中的信號(hào)被稱為"原始數(shù)據(jù)"，而存 在于盤外的信號(hào)被稱為"附加數(shù)據(jù)"。然而，原始數(shù)據(jù)和附加數(shù)據(jù)的定義僅旨 在根據(jù)數(shù)據(jù)獲取方法分類本發(fā)明中可使用的數(shù)據(jù)。因此，原始數(shù)據(jù)和附加數(shù)據(jù) 不應(yīng)限于特定數(shù)據(jù)。任何屬性的數(shù)據(jù)可用作附加數(shù)據(jù)，只要這些數(shù)據(jù)存在于記錄有原始數(shù)據(jù)的光盤外并且與原始數(shù)據(jù)有關(guān)即可。為了完成用戶的請(qǐng)求，原始數(shù)據(jù)和附加數(shù)據(jù)各自必須具有彼此之間有關(guān)系的文件結(jié)構(gòu)。在下文中，將參考圖2和3描述BD中可使用的文件結(jié)構(gòu)和數(shù)據(jù)記錄結(jié)構(gòu)。圖2示出根據(jù)本發(fā)明的一個(gè)實(shí)施方式的用于記錄在BD中的原始數(shù)據(jù)的再 現(xiàn)和管理的文件結(jié)構(gòu)。本發(fā)明的文件結(jié)構(gòu)包括根目錄和存在于根目錄下的至少一個(gè)BDMV目錄 BDMV。在BDMV目錄BDMV中，有索引文件"index.bdmv"和對(duì)象文件 "MovieObject.bdmv"作為具有用于確保與用戶的交互性的信息的通用文件(上 層文件)。本發(fā)明的文件結(jié)構(gòu)還包括具有關(guān)于實(shí)際記錄在盤中的數(shù)據(jù)的信息的 和關(guān)于用來再現(xiàn)所記錄的數(shù)據(jù)的方法的信息的目錄，即，播放列表目錄 PLAYLIST、剪輯信息目錄CLIPINF、流目錄STREAM、輔助目錄AUXDATA、 BD-J目錄BDJO、元數(shù)據(jù)目錄META、備份目錄BACKUP、以及JAR目錄。 在下文中，將詳細(xì)描述上述的目錄和包含在這些目錄中的文件。 JAR目錄包括JAVA程序文件。 '元數(shù)據(jù)目錄META包括關(guān)于數(shù)據(jù)的數(shù)據(jù)文件，即，元數(shù)據(jù)文件。這種元 數(shù)據(jù)文件可包括用于盤庫的搜索文件和元數(shù)據(jù)文件。這種元數(shù)據(jù)文件用于在數(shù) 據(jù)的記錄和再現(xiàn)期間實(shí)現(xiàn)文件的高效率搜索和管理。BD-J目錄BDJO包括用于BD-J標(biāo)題的再現(xiàn)的BD-J對(duì)象文件。 輔助目錄AUXDATA包括用于盤的回放的附加數(shù)據(jù)文件。例如，輔助目 錄AUXDATA可包括用于在執(zhí)行交互圖形功能時(shí)提供聲音數(shù)據(jù)的 "Sound.bdmv"文件、和用于在盤回放期間提供字體信息的"lllll.otf"和 "99999.otf"文件。流目錄STREAM包括根據(jù)特定格式記錄在盤中的多個(gè)AV流文件。最一 般化地，這些流以基于MPEG-2的傳輸分組的形式記錄。流目錄STREAM使 用"*.m2ts"作為流文件的擴(kuò)展名(例如，01000.m2ts、 02000.m2ts……)。具體 地，視頻/音頻/圖形信息的多路復(fù)用流被稱為"AV流"。標(biāo)題由至少一個(gè)AV 流文件構(gòu)成。剪輯信息(clip-info)目錄CLIPINF包括分別對(duì)應(yīng)于包含在流目錄STREAM中的流文件"*.m2ts"的clip-info文件01000.clpi、 02000.clpi、……。具體地， clip-info文件"*.clpi"記錄有流文件"*.m2ts"的屬性信息和定時(shí)信息。每一 個(gè)clip-info文件"*.clpi"和對(duì)應(yīng)于該clip-info文件"*.clpi"的流文件"*.m2ts" 被合稱為"剪輯"。即，剪輯指示包括一個(gè)流文件"*.m2ts"和對(duì)應(yīng)于該流文 件"*.m2ts"的一個(gè)clip-info文件"*.clpi"兩者的數(shù)據(jù)。播放列表目錄PLAYLIST包括多個(gè)播放列表文件"氣mpls"。"播放列表"表示剪輯的播放區(qū)間的組合。每一個(gè)播放區(qū)間被稱為一個(gè)"播放項(xiàng)"。每一個(gè) 播放列表文件"*.mpls"包括至少一個(gè)播放項(xiàng)，并可包括至少一個(gè)子播放項(xiàng)。 播放項(xiàng)和子播放項(xiàng)中各自包括關(guān)于要再現(xiàn)的特定剪輯的再現(xiàn)開始時(shí)間IN-Time 和再現(xiàn)結(jié)束時(shí)間OUT-Time的信息。因此，播放列表可以是播放項(xiàng)的組合。關(guān)于播放列表文件，利用播放列表文件中的至少一個(gè)播放項(xiàng)再現(xiàn)數(shù)據(jù)的過 程被定義為"主路徑"，而利用一個(gè)子播放項(xiàng)再現(xiàn)數(shù)據(jù)的過程被定義為"子路 徑"。主路徑提供相關(guān)聯(lián)的播放列表的主要呈現(xiàn)，而子路徑提供與主要呈現(xiàn)相 關(guān)聯(lián)的輔助性呈現(xiàn)。每一個(gè)播放列表文件應(yīng)包括一個(gè)主路徑。每一個(gè)播放列表 文件還包括至少一個(gè)子路徑，子路徑的數(shù)目根據(jù)子播放項(xiàng)的存在與否來確定。 因此，每一個(gè)播放列表文件是整個(gè)再現(xiàn)/管理文件結(jié)構(gòu)中用于基于一個(gè)或多個(gè)播 放項(xiàng)的組合再現(xiàn)期望的一個(gè)或多個(gè)剪輯的基本再現(xiàn)/管理文件單元。結(jié)合本發(fā)明，通過主路徑再現(xiàn)的視頻數(shù)據(jù)被稱為主視頻，而通過子路徑再 現(xiàn)的視頻數(shù)據(jù)被稱為輔助視頻。用于同時(shí)再現(xiàn)主視頻和輔助視頻的光學(xué)記錄/ 再現(xiàn)裝置的功能也被稱為"畫中畫(PiP)"。子路徑可再現(xiàn)與主視頻或輔助視頻 相關(guān)聯(lián)的音頻數(shù)據(jù)。將參考圖13A到13C詳細(xì)描述與本發(fā)明的實(shí)施方式相關(guān) 聯(lián)的子路徑。備份目錄BACKUP存儲(chǔ)上述文件結(jié)構(gòu)中的文件的拷貝，具體地是記錄有 與盤回放相關(guān)聯(lián)的信息的文件的拷貝，例如，索引文件"index.bdnw"、對(duì)象 文件"MovieObject.bdmv"和"BD-JObject.bdmv"、單元鍵文件、播放列表目 錄PLAYLIST中的所有播放列表文件"*.mpls"以及clip-info目錄CLIPINF中 的所有dip-info文件"*.dpi"的拷貝?？紤]到在任何上述的文件損壞或丟失時(shí) 會(huì)發(fā)生與盤回放相關(guān)聯(lián)的致命出錯(cuò)的事實(shí)，備份目錄BACKUP被適應(yīng)性地設(shè) 成為備份目的而單獨(dú)存儲(chǔ)文件的拷貝。同時(shí)，將意識(shí)到本發(fā)明的文件結(jié)構(gòu)不限于上述的名稱和位置。即，上述的 目錄和文件不應(yīng)通過其名稱和位置來理解，而應(yīng)通過其意義來理解。圖3示出根據(jù)本發(fā)明的一個(gè)實(shí)施方式的光盤的數(shù)據(jù)記錄結(jié)構(gòu)。在圖3中， 示出了與盤中的文件結(jié)構(gòu)相關(guān)聯(lián)的信息的記錄結(jié)構(gòu)。參考圖3，可看到盤包括 記錄有用于管理所有文件的系統(tǒng)信息的文件系統(tǒng)信息區(qū)；記錄有索引文件、目 標(biāo)文件、播放列表文件、clip-info文件、和元文件(再現(xiàn)所記錄的流"*.m2ts" 所需的文件)的區(qū)(數(shù)據(jù)庫區(qū))；記錄有各自由音頻/視頻/圖形數(shù)據(jù)或STREAM文 件構(gòu)成的流的流區(qū)；以及記錄有JAVA程序文件的JAR區(qū)。當(dāng)從盤的內(nèi)圈出 發(fā)來看時(shí)這些區(qū)域按上述的次序編排。根據(jù)本發(fā)明，主視頻和/或輔助視頻的流數(shù)據(jù)存儲(chǔ)在流區(qū)中。可將輔助視 頻多路復(fù)用在與主視頻相同的流中，或?qū)⑵涠嗦窂?fù)用在與主視頻不同的流中。 根據(jù)本發(fā)明，將與輔助視頻相關(guān)聯(lián)的輔助音頻多路復(fù)用在與主視頻相同的流中 或與主視頻不同的流中。在盤中，有記錄用以再現(xiàn)流區(qū)中的內(nèi)容的文件信息的區(qū)。該區(qū)被稱為"管 理區(qū)"。文件系統(tǒng)信息區(qū)和數(shù)據(jù)庫區(qū)包括在管理區(qū)中。用于再現(xiàn)輔助視頻的子 路徑可具有基于多路復(fù)用了輔助視頻的流的種類和該子路徑是否與主路徑同 步而從三種子路徑類型中選出的子路徑類型。將參考圖13A至圖13C描述子 路徑類型。因?yàn)橛糜谠佻F(xiàn)輔助視頻和輔助音頻的方法取決于子路徑類型而改 變，所以管理區(qū)包括關(guān)于子路徑類型的信息。圖3中的這些區(qū)僅是出于說明的 目的而示出并描述的。將意識(shí)到本發(fā)明不限于圖3的區(qū)編排。圖4是用于理解根據(jù)本發(fā)明的實(shí)施方式的輔助視頻的概念的示意圖。本發(fā)明提供用于與主視頻數(shù)據(jù)同時(shí)再現(xiàn)輔助視頻數(shù)據(jù)的方法。例如，本發(fā) 明提供實(shí)現(xiàn)PiP應(yīng)用尤其是有效執(zhí)行PiP應(yīng)用的光學(xué)記錄/再現(xiàn)裝置。如圖4所示，在主視頻410的再現(xiàn)期間，可能必須通過與主視頻410的顯 示器相同的顯示器20輸出與主視頻410相關(guān)聯(lián)的其它視頻數(shù)據(jù)。根據(jù)本發(fā)明， 可實(shí)現(xiàn)這一PiP應(yīng)用。例如，在電影或紀(jì)錄片回放期間，可向用戶提供導(dǎo)演的 評(píng)注或與攝制過程相關(guān)聯(lián)的插曲。在這種情形中，評(píng)注或插曲的視頻即為輔助 視頻420。輔助視頻420可從主視頻410的再現(xiàn)開始時(shí)就與主視頻410同時(shí)再 現(xiàn)。輔助視頻420的再現(xiàn)可在主視頻410再現(xiàn)的中間時(shí)間開始。還可顯示輔助14視頻420同時(shí)根據(jù)再現(xiàn)過程改變輔助視頻420在屏幕上的位置和大小。還可實(shí) 現(xiàn)多個(gè)輔助視頻420。在這種情形中，可在主視頻410的再現(xiàn)期間彼此獨(dú)立地 再現(xiàn)這些輔助視頻420?？呻S同與輔助視頻相關(guān)聯(lián)的音頻420a —起再現(xiàn)輔助視頻。音頻420a可在 與和主視頻相關(guān)聯(lián)的音頻410a混音的狀態(tài)下輸出。本發(fā)明的實(shí)施方式提供隨 同與輔助視頻相關(guān)聯(lián)的音頻(在下文中，稱為"輔助音頻")再現(xiàn)輔助視頻的方 法。本發(fā)明的實(shí)施方式還提供隨同與主視頻相關(guān)聯(lián)的音頻(在下文中，稱為"主 音頻")再現(xiàn)輔助音頻的方法。 .在這點(diǎn)上，根據(jù)本發(fā)明，關(guān)于允許同時(shí)再現(xiàn)的輔助視頻和輔助音頻的組合 的信息(在下文中，稱為"輔助視頻/輔助音頻組合信息")被包括在用于輔助視 頻的管理數(shù)據(jù)中。同樣，本發(fā)明的實(shí)施方式提供定義允許與輔助音頻混音的主 音頻的信息，并允許利用該信息來隨同主音頻再現(xiàn)輔助音頻。管理數(shù)據(jù)可包括 關(guān)于輔助視頻的元數(shù)據(jù)、定義輔助視頻的至少一個(gè)流條目的表(在下文中，稱 為"STN表")、以及關(guān)于其中多路復(fù)用了輔助視頻的流的剪輯信息文件。在 下文中，將參考圖5描述在STN表中包括組合信息的情形。圖5示出包括輔助視頻的流條目的表的示例性實(shí)施方式。表(在下文中，稱為"STN表")定義在當(dāng)前播放項(xiàng)和與當(dāng)前播放項(xiàng)相關(guān)聯(lián) 的子路徑的呈現(xiàn)期間可供光學(xué)記錄/再現(xiàn)裝置選擇的元流的列表。主剪輯和在 STN表中有條目的子路徑的元流可由內(nèi)容提供者定奪。本發(fā)明的光學(xué)記錄/再現(xiàn)裝置具有用于處理主視頻、主音頻、輔助視頻、 和輔助音頻的功能。因此，本發(fā)明的STN表存儲(chǔ)與主視頻、主音頻、輔助視 頻、和輔助音頻相關(guān)聯(lián)的條目。參考圖5， STN表包括指示對(duì)應(yīng)于與'secondary—video_stream—id'的值相關(guān) 聯(lián)的視頻流條目的輔助視頻流號(hào)的值。'secondary—video—streamjd，的值初始被 設(shè)置為'0，，并遞增'1'，除非'secondary—video一streamjd'的值等于輔助視頻流的 數(shù)目，艮卩，'number—of_secondary—video—stream—entries'的值。因此，輔助視頻 流號(hào)等于將'secondary一video—streamjd'的值加1獲得的值。根據(jù)上述的'secondary—video_stream—id，在STN表中定義流條目塊。流條 目塊包括用于標(biāo)識(shí)由流條目的流號(hào)指向的元流的數(shù)據(jù)庫類型。根據(jù)本發(fā)明的實(shí)施方式，流條目塊可包括用于標(biāo)識(shí)與輔助視頻的再現(xiàn)相關(guān)聯(lián)的子路徑的信息、 以及用于標(biāo)識(shí)由此子路徑標(biāo)識(shí)信息指向的子路徑中的子播放項(xiàng)中定義的子剪 輯條目的信息。因此，流條目塊起到指示將要再現(xiàn)的輔助音頻流的源的功能。根據(jù)本發(fā)明，STN表還包括對(duì)應(yīng)于'secondary一video—stream—id'的輔助視頻 /輔助音頻組合信息520。輔助視頻/輔助音頻組合信息520定義允許隨輔助視 頻再現(xiàn)的輔助音頻。參考圖5，輔助視頻/輔助音頻組合信息520包括允許隨輔 助視頻再現(xiàn)的輔助音頻流520a的數(shù)目和標(biāo)識(shí)這些輔助音頻流的信息520b。根 據(jù)本發(fā)明的實(shí)施方式，將由輔助視頻/輔助音頻組合信息520定義的輔助音頻流 中的一個(gè)隨輔助視頻再現(xiàn)，以便將其提供給用戶。根據(jù)本發(fā)明，STN表還包括定義允許與輔助音頻混音的主音頻的主音頻 信息510。參考圖5，主音頻信息510包括允許與輔助音頻混音的主音頻流510a 的數(shù)目以及標(biāo)識(shí)這些主音頻流的信息510b。根據(jù)本發(fā)明，將由主音頻信息510 定義的這些主音頻流中的一個(gè)在與輔助音頻混音的狀態(tài)下再現(xiàn)，以便將其提供 用戶。圖6示出根據(jù)本發(fā)明的輔助視頻元數(shù)據(jù)的示例性實(shí)施方式。包括上述的 STN表的播放項(xiàng)、和與輔助視頻的再現(xiàn)相關(guān)聯(lián)的流可利用輔助視頻元數(shù)據(jù)來標(biāo) 識(shí)。根據(jù)本發(fā)明的一個(gè)實(shí)施方式，輔助視頻的再現(xiàn)是利用元數(shù)據(jù)來管理的。元 數(shù)據(jù)包括關(guān)于輔助視頻的再現(xiàn)時(shí)間、再現(xiàn)大小和再現(xiàn)位置的信息。在下文中， 將結(jié)合管理數(shù)據(jù)是PiP元數(shù)據(jù)的示例描述管理數(shù)據(jù)?？蓪iP元數(shù)據(jù)包括在作為一種再現(xiàn)管理文件的播放列表中。圖6示出包 括在管理主視頻的再現(xiàn)的播放列表的'ExtensionData'塊中的PiP元數(shù)據(jù)塊。當(dāng) 然，可將此信息包含在實(shí)現(xiàn)PiP的輔助視頻流的頭部中。PiP元數(shù)據(jù)可包括至少 一個(gè)塊頭部'block—header[k]， 910和塊數(shù)據(jù) 'block一data[k]' 920。塊頭部和塊數(shù)據(jù)的數(shù)目是根據(jù)包括在PiP元數(shù)據(jù)塊中的元 數(shù)據(jù)塊條目的數(shù)目來確定的。塊頭部910包括相關(guān)聯(lián)的元數(shù)據(jù)塊的頭部信息。 塊數(shù)據(jù)920包括相關(guān)聯(lián)的元數(shù)據(jù)塊的信息。塊頭部910可包括指示播放項(xiàng)標(biāo)識(shí)信息的字段(在下文中，稱為 'Playltem—id[k]，)、和指示輔助視頻流標(biāo)識(shí)信息的字段(在下文中，稱為'secondary—video_stream—id[k]，)。信息'Playltem—id[k]，具有與其STN表包含由 'secondary—video—stream—id[k]，指向的'secondary—video—stream—id，條目的播放 項(xiàng)相應(yīng)的值。'Playltem一id[k]'的值在播放列表文件的播放列表塊中給出。在一 個(gè)實(shí)施方式中，在PiP元數(shù)據(jù)中，PiP元數(shù)據(jù)中'Playltemjd'值的條目以 'Playltem—id，值的升序分類排序。信息'secondary—video—stream—id[k]'用于標(biāo)識(shí) 子路徑、和應(yīng)用相關(guān)聯(lián)的塊數(shù)據(jù)920的輔助視頻流。當(dāng)再現(xiàn)與包括在對(duì)應(yīng)于 'Playltemjd[k]' 的播放項(xiàng) 'Playltem， 的 STN 表中 的 'secondary—video—stream—id[k]'相對(duì)應(yīng)的流時(shí)，輔助視頻就被提供給用戶。根據(jù)本發(fā)明的實(shí)施方式，由對(duì)應(yīng)于'secondary—video—streamjd[k]，的輔助視 頻/輔助音頻組合信息定義的輔助音頻隨輔助視頻一起再現(xiàn)。同樣，由與輔助音 頻相關(guān)聯(lián)的輔助音頻/主音頻組合信息定義的主音頻與該輔助音頻混音地輸出。此外，塊頭部910可包括指示由相關(guān)聯(lián)的PiP元數(shù)據(jù)所指向的時(shí)間線的信 息(在下文中，稱為"PiP時(shí)間線類型'pip一timeline—type'")。提供給用戶的輔助 視頻的類型根據(jù)PiP時(shí)間線類型變化。將信息'pip—composition—metadata，沿根 據(jù)PiP時(shí)間線類型確定的時(shí)間線施加于輔助視頻。信息 'pip—composition—metadata'是指示輔助視頻的再現(xiàn)位置和大小的信息。信息 'pip一compositioiunetadata'可包括輔助視頻的位置信息、和輔助視頻的大小信 息(在下文中，稱為'pip一scale[i]')。輔助視頻的位置信息包括輔助視頻的水平位 置信息(在下文中，稱為'pip—horizontaU50sition[i]，)和輔助視頻的垂直位置信息 (在下文中，稱為'pip—vertical_position[i]，)。信息'pip—horizontaljosition[i]，指示 在從屏幕的原點(diǎn)出發(fā)觀看時(shí)輔助視頻顯示在屏幕上的水平位置，而信息 'pip一verticaljposition[i]'指示在從屏幕的原點(diǎn)出發(fā)觀看時(shí)輔助視頻顯示在屏幕 上的垂直位置。輔助視頻在屏幕上的顯示大小和位置由大小信息和位置信息確 定。 '圖7示出根據(jù)本發(fā)明的光學(xué)記錄/再現(xiàn)裝置10的總體配置的示例性實(shí)施方 式。在下文中，將參考圖7描述根據(jù)本發(fā)明的數(shù)據(jù)的再現(xiàn)和記錄。如圖7所示，光學(xué)記錄/再現(xiàn)裝置10主要包括拾取頭11、伺服14、信號(hào) 處理器13、和微處理器16。拾取頭11再現(xiàn)記錄在光盤中的原始數(shù)據(jù)和管理數(shù) 據(jù)。管理數(shù)據(jù)包括再現(xiàn)管理文件信息。伺服14控制拾取頭11的操作。信號(hào)處理器13接收來自拾取頭11的再現(xiàn)信號(hào)并將所接收到的再現(xiàn)信號(hào)恢復(fù)成期望的 信號(hào)值。信號(hào)處理器13還將待記錄的信號(hào)——例如主視頻和輔助視頻——分別調(diào)制成可記錄在光盤中的相應(yīng)信號(hào)。微處理器16控制拾取頭11、伺服14、 和信號(hào)處理器13的操作。拾取頭11、伺服14、信號(hào)處理器13、和微處理器 16還被合稱為"記錄/再現(xiàn)單元"。根據(jù)本發(fā)明，記錄/再現(xiàn)單元在控制器12 的控制下從光盤30或存儲(chǔ)15讀取數(shù)據(jù)，并將所讀取的數(shù)據(jù)發(fā)送到AV解碼器 17b。即，從再現(xiàn)的觀點(diǎn)看，記錄/再現(xiàn)單元起到用于讀取數(shù)據(jù)的讀取器單元的 功能。記錄/再現(xiàn)單元還接收來自AV編碼器18的經(jīng)編碼的信號(hào)，并將所接收 到的信號(hào)記錄在光盤30中。因此，記錄/再現(xiàn)單元可在光盤30中記錄視頻和音 頻數(shù)據(jù)?？刂破?2可根據(jù)用戶命令下載存在于光盤30以外的附加數(shù)據(jù)，并將這些 附加數(shù)據(jù)記錄在存儲(chǔ)15中。控制器12還應(yīng)用戶的請(qǐng)求再現(xiàn)存儲(chǔ)在存儲(chǔ)15中 的附加數(shù)據(jù)和/或光盤30中的原始數(shù)據(jù)。根據(jù)本發(fā)明，控制器12基于與輔助視頻相關(guān)聯(lián)的輔助視頻/輔助音頻組合 信息來執(zhí)行選擇將隨同輔助視頻再現(xiàn)的輔助音頻的控制操作?？刂破?2基于 指示允許與輔助音頻混音的各個(gè)主音頻的主音頻信息來執(zhí)行選擇將與輔助音 頻混音的主音頻的控制操作。同樣，本發(fā)明的光學(xué)記錄/再現(xiàn)裝置10用于在記 錄介質(zhì)一一即光盤30中記錄數(shù)據(jù)。這里，控制器12產(chǎn)生包括上述組合信息的 管理數(shù)據(jù)，并執(zhí)行在光盤30上記錄管理數(shù)據(jù)的控制操作。光學(xué)記錄/再現(xiàn)裝置10還包括用于最終解碼數(shù)據(jù)、并在控制器12的控制 下將經(jīng)解碼的數(shù)據(jù)提供給用戶的回放系統(tǒng)17?；胤畔到y(tǒng)17包括用于解碼AV 信號(hào)的AV解碼器17b?；胤畔到y(tǒng)17還包括用于分析與特定標(biāo)題的回放相關(guān)聯(lián) 的對(duì)象命令或應(yīng)用、分析經(jīng)由控制器12輸入的用戶命令、并基于分析的結(jié)果 確定回放方向的播放器模型17a。在一個(gè)實(shí)施方式中，可將播放器模式17a實(shí) 現(xiàn)為包括AV解碼器17b。在這種情形中，回放系統(tǒng)17是播放器模式本身。 AV解碼器17b可包括分別與不同種類的信號(hào)相關(guān)聯(lián)的多個(gè)解碼器。圖8示意性示出根據(jù)本發(fā)明的AV解碼器模型。根據(jù)本發(fā)明，AV解碼器 17b包括用于主和輔助視頻的同時(shí)再現(xiàn)——即PiP應(yīng)用的實(shí)現(xiàn)——的輔助視頻 解碼器730b。輔助視頻解碼器730b解碼輔助視頻?？蓪⑤o助視頻以AV流形式記錄在記錄介質(zhì)30中，以提供給用戶。還可在從記錄介質(zhì)30外下載輔助視頻后將其提供給用戶。AV流是以傳輸流(TS)的形式提供給AV解碼器17b。在本發(fā)明中，通過主路徑再現(xiàn)的AV流被稱為主傳輸流(在下文中，稱為 "主流"或主TS)，除主流以外的AV流稱為子傳輸流(在下文中，稱為"子流" 或子TS)。根據(jù)本發(fā)明，可將輔助視頻多路復(fù)用在與主視頻相同的視頻中。在 這種情形中，輔助視頻是作為主流提供給AV解碼器17b。在AV解碼器17b 中，主流通過開關(guān)元件到達(dá)緩沖器RB1，而被緩沖的主流由源拆分組器710a 拆分組。包括在經(jīng)拆分組的AV流中的數(shù)據(jù)在分組標(biāo)識(shí)符(PID)過濾器1 720a 中根據(jù)數(shù)據(jù)分組的種類從經(jīng)拆分組的AV流中分離出來后被提供給解碼器730a 至730g中相關(guān)聯(lián)的那一個(gè)。S卩，在輔助視頻被包括在主流中的場合，輔助視 頻由PID過濾器1 720a將其與主流中的其它數(shù)據(jù)分組分離開來，隨后被提供 給輔助視頻解碼器730b。如圖所示，來自PID過濾器1 720a的分組可先通過 另一開關(guān)元件再由解碼器730b - 730g接收。根據(jù)本發(fā)明，還可將輔助視頻多路復(fù)用在與主視頻不同的流中。例如，可 將輔助視頻作為單獨(dú)文件存儲(chǔ)在記錄介質(zhì)30上或存儲(chǔ)在本地存儲(chǔ)15中(例如， 在從因特網(wǎng)下載后)。在這種情形中，輔助視頻是作為子流提供給AV解碼器 17b。在AV解碼器17b中，子流通過開關(guān)元件到達(dá)緩沖器RB2，且被緩沖的 子流由源拆分組器710b拆分組。包括在經(jīng)拆分組的AV流中的數(shù)據(jù)在PID過 濾器2 720b中根據(jù)數(shù)據(jù)分組的種類從經(jīng)拆分組的AV流中分離出來后被提供給 解碼器730a至730g中相關(guān)聯(lián)的那一個(gè)。gp，在輔助視頻被包括在子流中的場 合，輔助視頻由PID過濾器2 720b將其與子流中的其它數(shù)據(jù)分組分離開來， 隨后被提供給輔助視頻解碼器730b。如圖所示，來自PID過濾器2 720b的分 組可先通過另一開關(guān)元^f^再由解碼器730b-730g接收。根據(jù)本發(fā)明，可將輔助音頻多路復(fù)用在與輔助視頻相同的流中。因此，類 似于輔助視頻，可將輔助音頻作為主流或作為子流提供給AV解碼器17b。在 AV解碼器17b中，輔助音頻在通過源拆分組器710a或710b后在PID過濾器 1 720a或PID過濾器2 720b中被從主流或子流中分離出來，然后被提供給輔 助音頻解碼器730f。在輔助音頻解碼器730f中解碼了的輔助音頻被提供給音 頻混音器(下述)，然后與在主音頻解碼器730e中解碼了的主音頻混音后從音頻混音器輸出。圖9示出根據(jù)本發(fā)明的音頻混音模型的總體配置。在本發(fā)明中，"音頻混音"表示將輔助音頻與主音頻和/或交互式音頻混 音。為了執(zhí)行解碼和混音操作，根據(jù)本發(fā)明的實(shí)施方式的音頻混音模型包括兩個(gè)音頻解碼器730a和730f以及兩個(gè)混音器750a和750b。內(nèi)容提供者利用音 頻混音控制參數(shù)P1、 P2、 P3和P4控制由音頻混音模型實(shí)施的音頻混音過程。一般而言，主音頻與主視頻相關(guān)聯(lián)，并且可以是例如包括在記錄介質(zhì)中的 電影音軌。然而，主音頻可代之以在從網(wǎng)絡(luò)下載后存儲(chǔ)在存儲(chǔ)15中。根據(jù)本 發(fā)明的一個(gè)實(shí)施方式，將主音頻與主視頻多路復(fù)用，并作為主流的一部分提供 給AV解碼器17b。主音頻傳輸流(TS)由PID過濾器1 720a基于PID從主流中 分離出來，隨后經(jīng)由緩沖器B1提供給主音頻解碼器730e。根據(jù)本發(fā)明的實(shí)施方式，輔助音頻可以是將隨輔助視頻同步再現(xiàn)的音頻。 輔助音頻由輔助視頻/輔助音頻組合信息定義。輔助音頻可與輔助視頻多路復(fù) 用，并可作為主流或作為子流提供給AV解碼器17b。輔助音頻傳輸流(TS)分 別由PID過濾器1 720a或PID過濾器2 720b從主流或子流中分離出來，然后 經(jīng)由緩沖器B2提供給輔助音頻解碼器730f。正如以下詳細(xì)討論的，分別由主 音頻解碼器730e和輔助音頻解碼器730f輸出的主音頻和輔助音頻由主音頻混 音器M1 750a混音。交互式音頻可以是根據(jù)相關(guān)聯(lián)的應(yīng)用激活的經(jīng)線性脈沖碼調(diào)制(LPCM)的 音頻?？蓪⒔换ナ揭纛l提供給輔助音頻混音器750b,以與來自主音頻混音器 750a的混音輸出作混音。交互式音頻流可存在于存儲(chǔ)15或記錄介質(zhì)30中。一 般而言，交互式音頻流用于提供與交互式應(yīng)用——例如按鈕音——相關(guān)聯(lián)的動(dòng) 態(tài)聲音。上述的音頻混音模型基于線性脈沖碼調(diào)制(LPCM)混音來工作。即，音 頻數(shù)據(jù)在根據(jù)LPCM方案解碼后混音。主音頻解碼器730e根據(jù)LPCM方案解 碼主音頻流。主音頻解碼器730e可被配置成解碼或縮減混音包括在主音頻音 軌中的所有聲道。輔助音頻解碼器730f根據(jù)LPCM方案解碼輔助音頻流。輔 助音頻解碼器730f提取包括在輔助音頻流中的混音數(shù)據(jù)，將所提取的數(shù)據(jù)轉(zhuǎn) 換成混音矩陣格式，并將結(jié)果所得的混音矩陣發(fā)送到主音頻混音器(M1) 750a。該元數(shù)據(jù)可用于控制混音過程。輔助音頻解碼器730f可被配置成解碼或縮減混音包括在輔助音頻音軌中的所有聲道。從輔助音頻解碼器730f輸出的每一 個(gè)經(jīng)解碼的聲道可與從主音頻解碼器730e輸出的至少一個(gè)聲道混音?；煲艟仃囀歉鶕?jù)從內(nèi)容提供者提供的混音參數(shù)作成的。混音矩陣包括要向 每一個(gè)音頻聲道施加以控制在求和前各音頻的混音度的系數(shù)?；煲魠?shù)可包括用于輔助音頻流的搖移(panning)的參數(shù)Pl、用于控制主 音頻流和輔助音頻流的混音度的參數(shù)P2、用于交互式音頻流的搖移的參數(shù)P3、 以及用于控制交互式音頻流的混音度的參數(shù)P4。這些參數(shù)不限于其名稱。將 意識(shí)到將可有通過函數(shù)的形式組合上述的參數(shù)或從上述參數(shù)分離出一個(gè)或多 個(gè)參數(shù)產(chǎn)生的更多參數(shù)。根據(jù)本發(fā)明，可使用命令集作為混音參數(shù)的源。即，本發(fā)明的光學(xué)記錄/ 再現(xiàn)裝置10可利用命令集來控制主音頻與將隨輔助視頻再現(xiàn)的輔助音頻的混 音。例如，"命令集"可以是利用在光學(xué)記錄/再現(xiàn)裝置中執(zhí)行的應(yīng)用程序的功 能的程序包。應(yīng)用程序的功能通過命令集與光學(xué)記錄/再現(xiàn)裝置的功能接口。因 此，可根據(jù)命令集使用光學(xué)記錄/再現(xiàn)裝置的各種功能。可將命令集存儲(chǔ)在記錄 介質(zhì)中，以提供給光學(xué)記錄/再現(xiàn)裝置。當(dāng)然，可在光學(xué)記錄/再現(xiàn)裝置的制造 階段將命令集配備在光學(xué)記錄/再現(xiàn)裝置中。命令集的代表性例子是應(yīng)用程序編 程接口(API)?？蓪⒒煲粼獢?shù)據(jù)用作混音參數(shù)的源。將混音元數(shù)據(jù)在輔助音頻中 提供給輔助音頻解碼器730b。將結(jié)合將API用作命令集的情形給出以下的描 述。根據(jù)本發(fā)明的實(shí)施方式，輔助音頻利用諸如API之類的命令集來搖移。同 樣主音頻或輔助音頻的混音度利用命令集來控制。光學(xué)記錄/再現(xiàn)裝置10的系 統(tǒng)軟件將命令集翻譯成XI混音矩陣，并將XI混音矩陣發(fā)送到主音頻混音器 750a。例如，參數(shù)P1和P2由圖9的控制器12存儲(chǔ)在諸如存儲(chǔ)15中，并由控 制器12根據(jù)播放器模型17a轉(zhuǎn)換成供回放系統(tǒng)17中的混音器M1使用的混音 矩陣XI。可將來自主音頻混音器750a的混音輸出在輔助音頻混音器750b中 與交互式音頻混音。在輔助音頻浪音器750b中執(zhí)行的混音過程也可由命令集 控制。在這種情形中，將命令集轉(zhuǎn)換成X2混音矩陣，并將X2混音矩陣發(fā)送 到輔助音頻混音器750b。例如，參數(shù)P3和P4可由圖9的控制器12存儲(chǔ)在諸如存儲(chǔ)15中，并由控制器12根據(jù)播放器模型17a轉(zhuǎn)換成供回放系統(tǒng)17中的 混音器M2使用的混音矩陣X2 。XI混音矩陣由混音參數(shù)Pl和P2兩者控制。即，參數(shù)Pl和P2同時(shí)向 Xl混音矩陣發(fā)送命令。因此，主音頻混音器M1由X1混音矩陣控制?；煲魠?數(shù)Pl是從API或輔助視頻解碼器提供的。另一方面，混音參數(shù)P2是從API 提供的。在根據(jù)本發(fā)明的實(shí)施方式的音頻混音模型中，可利用元數(shù)據(jù)ON/OFF API 來開關(guān)對(duì)來自輔助音頻流的音頻混音元數(shù)據(jù)的處理。當(dāng)混音元數(shù)據(jù)是ON時(shí)， 混音參數(shù)Pl來自于輔助音頻解碼器730f。當(dāng)混音元數(shù)據(jù)是OFF時(shí)，混音參數(shù) P1來自于API。同時(shí)，在該實(shí)施方式中，通過混音參數(shù)P2提供的音頻混音度 控制被施加到利用混音參數(shù)Pl形成的混音矩陣。因此，當(dāng)元數(shù)據(jù)控制是ON 時(shí)，混音元數(shù)據(jù)和命令集兩者控制音頻混音過程。 一同時(shí)，同樣包括在本發(fā)明的光學(xué)記錄/再現(xiàn)裝置10中的AV編碼器18將 輸入信號(hào)轉(zhuǎn)換成特定格式的信號(hào)——例如，MPEG2傳輸流，并將經(jīng)轉(zhuǎn)換的信 號(hào)發(fā)送到信號(hào)處理器13，以使輸入信號(hào)能被記錄在光盤30中。根據(jù)本發(fā)明， AV編碼器18將與輔助視頻相關(guān)聯(lián)的輔助音頻編碼在與輔助視頻相同的流中。 可將輔助視頻編碼在與主視頻相同的流中，或可將其編碼在與主視頻不同的流 中。圖10A和10B示出根據(jù)本發(fā)明的數(shù)據(jù)編碼方法的實(shí)施方式。圖10A示出 輔助視頻和輔助音頻被編碼在與主視頻相同的流中的情形。數(shù)據(jù)被編碼在與主 視頻相同的流——即主流中的情形被稱為'內(nèi)多路復(fù)用(in-mux)，類型。在圖 10A的實(shí)施方式中，播放列表包括一個(gè)主路徑和三個(gè)子路徑。主路徑是主視頻 /音頻的呈現(xiàn)路徑，而每一個(gè)子路徑是作為主視頻/音頻的補(bǔ)充的視頻/音頻的呈 現(xiàn)路徑。構(gòu)成主路徑的播放項(xiàng)'Playltem-r和'Playltem-2'分別指向?qū)⒃佻F(xiàn)的相關(guān) 聯(lián)的剪輯和這些剪輯的播放區(qū)間。在每一播放項(xiàng)的STN表中，定義了在該播 放項(xiàng)的再現(xiàn)期間可供本發(fā)明的光學(xué)記錄/再現(xiàn)裝置選擇的元流。播放項(xiàng) 'Playltem-l，和'Playltem-2，指向剪輯'Clip-0，。因此，播放項(xiàng)'Playltem-l，和 'Playltem-2'的播放區(qū)間包括剪輯'Clip-0'。因?yàn)榧糨?Clip-0'通過主路徑再現(xiàn)， 所以將剪輯'CUp-0'作為主流提供給AV解碼器17b。與主路徑相關(guān)聯(lián)的子路徑'SubPath-r、 'SubPath-2'和'SubPath-3'各自由相應(yīng)的子播放項(xiàng)構(gòu)成。每一個(gè)子路徑的子播放項(xiàng)指向?qū)⒁佻F(xiàn)的剪輯。在所示的 情形中，子路徑'SubPath-l'指向剪輯'Clip-O'，子路徑'SubPath-2'指向剪輯 'Clip-l'，而子路徑'SubPath-3，指向剪輯'Clip-2，。即，子路徑'SubPath-l，使用包 括在剪輯'Clip-0'中的輔助視頻和音頻流。'另一方面，子路徑'SubPath-2'和 'SubPath-3，中的每一個(gè)使用相關(guān)聯(lián)的播放項(xiàng)所指向的剪輯中所包括的音頻、PG 和IG流。在圖10A的實(shí)施方式中，輔助視頻和輔助音頻被編碼在將要通過主路徑 再現(xiàn)的剪輯'Clip-O，中。因此，輔助視頻和輔助音頻是隨同主視頻一起作為主流 提供給AV解碼器17b，如圖8所示。在AV解碼器17b中，經(jīng)由PID過濾器 1 720a將輔助視頻和輔助音頻分別提供給輔助視頻解碼器730b和輔助音頻解 碼器730f，然后分別由輔助視頻解碼器730b和輔助音頻解碼器730f進(jìn)行解碼。 此外，剪輯'Clip-0'的主視頻在主視頻解碼器730a中進(jìn)行解碼，且主音頻在主 音頻解碼器730e中進(jìn)行解碼。同樣，PG、IG和輔助音頻分別在PG解碼器730c、 IG解碼器730d、和輔助音頻解碼器730f中進(jìn)行解碼。當(dāng)經(jīng)解碼的主音頻在STN 表中被定義為允許與輔助音頻混音時(shí)，將經(jīng)解碼的主音頻提供給主音頻混音器 750a，以與輔助音頻混音。如上所述，主音頻混音器中的混音過程可由命令集 控制。圖10B示出輔助視頻和輔助音頻被編碼在與主視頻不相同的流中的情形。 數(shù)據(jù)被編碼在與主視頻不相同的流一一即子流中的情形被稱為'外多路復(fù)用 (out-of-mux)，類型。在圖10B的實(shí)施方式中，播放列表包括一個(gè)主路徑和兩 個(gè)子路徑'SubPath-l，和'SubPath-2，。播放項(xiàng)'PlayItem-l，和'Playltem-2，用于再現(xiàn) 包括在剪輯'Clip-O，中的元流。子路徑'SubPath-l，和'SubPath-2'中的每一個(gè)由各 自的子播放項(xiàng)構(gòu)成。子路徑'SubPath-l，和'SubPath-2，的子播放項(xiàng)分別指向剪輯 'Clip-l'和'CUp-2'。當(dāng)將子路徑'SubPath-l'隨同主路徑使用以再現(xiàn)諸流時(shí)，將子 路徑'SubPath-r所指向的輔助視頻隨同主路徑所指向的視頻(主視頻)再現(xiàn)。另 一方面，當(dāng)將子路徑'SubPath-2'隨同主路徑使用以再現(xiàn)諸流時(shí)，將子路徑 'SubPath-2'所指向的輔助視頻隨同主路徑所指向的主視頻再現(xiàn)。在圖10B所示的實(shí)施方式中，輔助視頻被包括在除通過主路徑再現(xiàn)的流以外的流中。因此，經(jīng)編碼的輔助視頻的流，艮卩，剪輯'ciip-r和'ciip-2，作為子流提供給AV解碼器17b，如圖8所示。在AV解碼器17b中，每一個(gè)子流 都由源拆分組器710b拆分組。包括在經(jīng)拆分組的AV流中的數(shù)據(jù)在PID過濾 器2 720b中根據(jù)數(shù)據(jù)分組的種類從經(jīng)拆分組的AV流中分離出來后被提供給解 碼器730a至J30g中相關(guān)聯(lián)的那一個(gè)。例如，當(dāng)將'SubPath-l，隨主路徑呈現(xiàn)以 再現(xiàn)諸流時(shí)，包括在剪輯'Clip-l'中的輔助視頻在從輔助音頻分組中被分離出來 后被提供給輔助視頻解碼器730b，然后由輔助視頻解碼器730b進(jìn)行解碼。在 這種情形中，將輔助音頻提供給輔助音頻解碼器730f，然后由輔助音頻解碼器 730f將其解碼。經(jīng)解碼的輔助視頻被顯示于在由主視頻解碼器730a解碼后顯 示的主視頻之上。因此，用戶可通過顯示器20觀看到主視頻和輔助視頻兩者。圖11是解釋根據(jù)本發(fā)明的一個(gè)實(shí)施方式的回放系統(tǒng)的示意圖。 "回放系統(tǒng)"表示由設(shè)置在光學(xué)記錄/再現(xiàn)裝置中的程序(軟件)和/或硬件 構(gòu)成的再現(xiàn)處理裝置的集合。即，回放系統(tǒng)是一種不僅可回放加載到光學(xué)記錄 /再現(xiàn)裝置10中的記錄介質(zhì)、還可再現(xiàn)和管理存儲(chǔ)在存儲(chǔ)15中的與記錄介質(zhì) IO相關(guān)聯(lián)的的數(shù)據(jù)(例如，在從記錄介質(zhì)以外下載后)的系統(tǒng)。具體地，回放系統(tǒng)17包括用戶事件管理器171、模塊管理器172、元數(shù)據(jù) 管理器173、 HDMV模塊174、 BD-J模塊175、回放控制引擎176、呈現(xiàn)引擎 177、和虛擬文件系統(tǒng)40。在下文中將詳細(xì)描述該配置。作為用于再現(xiàn)HDMV標(biāo)題和BD-J標(biāo)題的單獨(dú)的再現(xiàn)處理/管理裝置，用 于HDMV標(biāo)題的HDMV模塊174和用于BD-J標(biāo)題的BD-J模塊175彼此獨(dú) 立地構(gòu)造。HDMV模塊174和BD-J模塊175各自皆具有用于接收包括在相關(guān) 聯(lián)的對(duì)象"電影對(duì)象"或"BD-J對(duì)象"中的命令或程序、并處理所接收到的命令或 程序的控制功能。HDMV模塊174和BD-J模塊175各自皆可將相關(guān)聯(lián)的命令 或應(yīng)用與回放系統(tǒng)的硬件配置分離開來，以實(shí)現(xiàn)命令或應(yīng)用的可移植性。為了 接收和處理命令，HDMV模塊174包括命令處理器174a。為了接收和處理應(yīng) 用，BD-J模塊175包括Java虛擬機(jī)(VM)175a和應(yīng)用管理器175b。 ^JavaVM 175a是在其中執(zhí)行應(yīng)用的虛擬機(jī)。應(yīng)用管理器175b包括用于管 理在BD-J模塊175中處理的應(yīng)用的生存周期的應(yīng)用程序管理功能。模塊管理器172不僅起到分別向HDMV模塊174和BD-J模塊175發(fā)送用戶命令的功能，還起到控制HDMV模塊174和BD-J模塊175的操作的功能。 回放控制引擎176根據(jù)來自HDMV模塊174或BD-J模塊175的回放命令分析 記錄在盤中的播放列表文件信息，并基于分析的結(jié)果執(zhí)行回放功能。呈現(xiàn)引擎 177解碼由回放控制引擎176與其再現(xiàn)相關(guān)聯(lián)地管理的特定流，并將經(jīng)解碼的 流顯示在顯示畫面中。具體地，回放控制機(jī)176包括用于管理所有的回放操作 的回放控制功能176a以及用于存儲(chǔ)關(guān)于播放器的回放狀態(tài)和回放環(huán)境的信息 的播放器寄存器176b。在某些情形中，回放控制功能176a表示回放控制引擎 176本身。HDMV模塊174和BD-J模塊175分別以獨(dú)立的方式接收用戶命令。HDMV 模塊174和BD-J模塊175的用戶命令處理方法也互相獨(dú)立。為了將用戶命令 傳遞到HDMV模塊174和BD-J模塊175中相關(guān)聯(lián)的那一個(gè)，應(yīng)采用單獨(dú)的傳 遞裝置。根據(jù)本發(fā)明，該功能是由用戶事件管理器171執(zhí)行的。因此，當(dāng)用戶 事件管理器171接收到通過用戶操作(UO)控制器171a生成的用戶命令時(shí)， 用戶事件管理器將所接收到的用戶命令發(fā)送到模塊管理器172a或UO控制器 171a。另一方面，當(dāng)用戶事件管理器171接收到通過鍵事件生成的用戶命令時(shí)， 用戶事件管理器將所接收的用戶命令發(fā)送到BD-J模塊175中的Java VM 175a。本發(fā)明的回放系統(tǒng)17還可包括元數(shù)據(jù)管理器173。元數(shù)據(jù)管理器173向 用戶提供盤庫和增強(qiáng)型搜索元數(shù)據(jù)應(yīng)用。元數(shù)據(jù)管理器173可在用戶的控制下 執(zhí)行標(biāo)題的選擇。元數(shù)據(jù)管理器173還可向用戶提供記錄介質(zhì)和標(biāo)題元數(shù)據(jù)。根據(jù)本發(fā)明的回放系統(tǒng)的模塊管理器172、 HDMV模塊174、 BD-J模塊 175、和回放控制引擎176可用軟件方式執(zhí)行期望的處理。在實(shí)踐上，利用軟 件的處理與利用硬件配置的處理相比在設(shè)計(jì)方面具有優(yōu)勢。當(dāng)然， 一般而言呈 現(xiàn)引擎177、解碼器19、和平面是利用硬件來設(shè)計(jì)的。具體地，各自利用軟件 執(zhí)行期望的處理的各個(gè)組成元件(例如，由附圖標(biāo)記172、 174、 175和176標(biāo) 示的組成元件)可構(gòu)成控制器12的一部分。因此，應(yīng)注意本發(fā)明的上述組成和 配置要基于其含義理解，而不應(yīng)限于其實(shí)現(xiàn)方法，諸如是硬件還是軟件實(shí)現(xiàn)。這里，"平面"表示解釋主視頻、輔助視頻、呈現(xiàn)圖形(PG)、交互式圖形 (IG)、和文本字幕的重疊過程的概念模型。根據(jù)本發(fā)明，輔助視頻平面740b 被編排在主視頻平面740a之前。因此，解碼后輸出的輔助視頻顯示在輔助視頻平面740b上。由呈現(xiàn)圖形解碼器(PG解碼器)730c和/或文本解碼器730g解 碼的圖形數(shù)據(jù)從呈現(xiàn)圖形平面740c輸出。由交互式圖形解碼器730d解碼的圖 形數(shù)據(jù)從交互性圖形平面740d輸出。圖12示出根據(jù)本發(fā)明裝配在光學(xué)記錄/再現(xiàn)裝置中的狀態(tài)記憶單元的示例 性實(shí)施方式。包括在光學(xué)記錄/再現(xiàn)裝置10中的播放器寄存器176b起到在其中存儲(chǔ)關(guān) 于播放器的記錄/回放狀態(tài)和記錄/回放環(huán)境的信息的記憶單元的作用。播放器 寄存器176b可分成通用寄存器(GPR)和播放器狀態(tài)寄存器(PSR)。每一個(gè)PSR 存儲(chǔ)回放狀態(tài)參數(shù)(例如，'交互式圖形流號(hào)'或'主音頻流號(hào)')、或光學(xué)記 錄/再現(xiàn)裝置的配置參數(shù)(例如，'播放器視頻能力'.)。因?yàn)槌饕曨l外還再現(xiàn) 輔助視頻，所以設(shè)置了用于存儲(chǔ)輔助視頻的再現(xiàn)狀態(tài)的PSR。同樣，設(shè)置了用 于存儲(chǔ)與輔助視頻相關(guān)聯(lián)的輔助音頻的再現(xiàn)狀態(tài)的PSR?？蓪⑤o助視頻的流號(hào)存儲(chǔ)在這些PSR之一中(例如，PSR14 120)。在同一 PSR(即，PSR14)中，還可存儲(chǔ)與輔助視頻相關(guān)聯(lián)的輔助音頻的流號(hào)。存儲(chǔ)在 PSR14 120中的'輔助視頻流號(hào)'用于指定應(yīng)從當(dāng)前播放項(xiàng)的STN表中的各個(gè) 輔助視頻流條目中呈現(xiàn)哪一個(gè)輔助視頻流。類似地，存儲(chǔ)在PSR14 120中的'輔 助音頻流號(hào)'用于指定應(yīng)從當(dāng)前播放項(xiàng)的STN表中的各個(gè)輔助音頻流條目中 呈現(xiàn)哪一個(gè)輔助音頻流。輔助音頻由輔助視頻的輔助視頻/輔助音頻組合信息定 義。如圖12所示，PSR14 120可存儲(chǔ)標(biāo)志'disp—a—flag，。標(biāo)志'disp—a—flag，指示 輔助音頻的輸出是啟用還是禁用的。例如，當(dāng)標(biāo)志'disp—a—flag'被設(shè)置成對(duì)應(yīng) 于啟用狀態(tài)的值時(shí)，輔助音頻被解碼，并在相關(guān)聯(lián)的音頻混音器中接受混音過 程以使得經(jīng)解碼的輔助音頻與主音頻和/或交互式音頻混音后呈現(xiàn)給用戶。另一 方面，如果標(biāo)志'disp—a—flag，被設(shè)置成對(duì)應(yīng)于禁用狀態(tài)的值，則不輸出輔助音 頻，即使在輔助音頻由相關(guān)聯(lián)的解碼器解碼時(shí)亦是如此。標(biāo)志'disp—a—flag'可 由用戶操作(UO)、用戶命令或應(yīng)用程序編程接口(API)來改變。還可將主音頻的流號(hào)存儲(chǔ)在這些PSR之一(例如，PSR1 IIO)中。存儲(chǔ)在 PSR1 110中的'主音頻流號(hào)，用于指定應(yīng)從當(dāng)前播放項(xiàng)的STN表中的各個(gè)主 音頻流條目中呈現(xiàn)哪一個(gè)主音頻流。當(dāng)存儲(chǔ)在PSR1 110中的值改變時(shí)，主音頻流號(hào)立即改變成與存儲(chǔ)在PSR1 110中的值相等的值。PSR1 110可存儲(chǔ)標(biāo)志'disp—a—flag，。標(biāo)志'disp—a—flag，指示主音頻的輸出是 啟用還是禁用的。例如，當(dāng)標(biāo)志'disp—a—flag，被設(shè)置成對(duì)應(yīng)于啟用狀態(tài)的值時(shí)， 主音頻被解碼，并在相關(guān)聯(lián)的音頻混音器中接受混音過程以使得經(jīng)解碼的主音 頻與輔助音頻和/或交互式音頻混音后呈現(xiàn)給用戶。另一方面，如果標(biāo)志 'disp一a—flag'被設(shè)置成對(duì)應(yīng)于禁用狀態(tài)的值，則不輸出主音頻，即使在主音頻 由相關(guān)聯(lián)的解碼器解碼時(shí)亦是如此。標(biāo)志'disp—a一flag'可由用戶操作(UO)、用 戶命令或API來改變。圖13A至13C示出根據(jù)本發(fā)明的子路徑類型。如上參考圖IOA和IOB所述，根據(jù)本發(fā)明，用于再現(xiàn)輔助視頻和輔助音 頻的子路徑根據(jù)用于編碼輔助視頻和輔助音頻的方法而改變。因此，根據(jù)本發(fā) 明的子路徑類型可根據(jù)該子路徑是否與主路徑同步來主要分為三種類型。在下 文中，將參考圖13A至13C描述根據(jù)本發(fā)明的子路徑類型。圖13A示出在其中數(shù)據(jù)的編碼類型是'外多路復(fù)用(out-of-mux)，類型且 子路徑與主路徑同步的情形。參考圖13A，用于管理主視頻和輔助視頻、以及主音頻和輔助音頻的播放 列表包括一個(gè)主路徑和一個(gè)子路徑。主路徑由四個(gè)播放項(xiàng)('Playltem—id，-0、 1、 2、 3)構(gòu)成，而子路徑由多個(gè)子播放項(xiàng)構(gòu)成。通過子路徑再現(xiàn)的輔助視頻和 輔助音頻與主路徑同步。詳細(xì)地，利用標(biāo)識(shí)與每一個(gè)子播放項(xiàng)相關(guān)聯(lián)的播放項(xiàng) 的信息'sync-Playltem—id'和指示該子播放項(xiàng)在播放項(xiàng)中的呈現(xiàn)時(shí)間的呈現(xiàn)時(shí)戳 信息'sync—start—PTS—of—Playltem，，使得子路徑與主路徑同步。艮卩，當(dāng)播放項(xiàng) 的呈現(xiàn)點(diǎn)到達(dá)呈現(xiàn)時(shí)戳信息所指向的值時(shí)，相關(guān)聯(lián)的子播放項(xiàng)的呈現(xiàn)即開始。 因此，通過一個(gè)子路徑的輔助視頻的再現(xiàn)在通過主路徑的主視頻的再現(xiàn)期間的 一設(shè)定時(shí)間開始。在這種情形中，播放項(xiàng)和子播放項(xiàng)分別指向不同的剪輯。播放項(xiàng)所指向的 剪輯被作為主流提供給AV解碼器17b，而子播放項(xiàng)所指向的剪輯作為子流提 供給AV解碼器17b。包括在主流中的主視頻和主音頻在通過拆分組器710a和 PID過濾器1 720a后分別由主視頻解碼器730a和主音頻解碼器730e解碼。另 一方面，包括在子流中的輔助視頻和輔助音頻在通過拆分組器710b和PID過濾器2 720b后分別由輔助視頻解碼器730b和輔助音頻解碼器730f解碼。圖13B示出其中數(shù)據(jù)的編碼類型是'外多路復(fù)用(out-of-mux)，類型且子 路徑與主路徑異步的情形。類似于圖13A的子路徑類型，在圖13A的子路徑 類型中，將通過子路徑再現(xiàn)的輔助視頻流和/或輔助音頻流被多路復(fù)用成與要基 于相關(guān)聯(lián)的播放項(xiàng)再現(xiàn)的剪輯分離的狀態(tài)。然而，圖13B的子路徑與圖13A 的子路徑的不同之處在于子路徑的呈現(xiàn)可在主路徑的時(shí)間線上的任何時(shí)刻開 始。參考圖13B，用于管理主視頻和輔助視頻以及主音頻和輔助音頻的播放列 表包括一個(gè)主路徑和一個(gè)子路徑。主路徑由三個(gè)播放項(xiàng)('PlayItem_id'=0、 1、 2)構(gòu)成，而子路徑由一個(gè)子播放項(xiàng)構(gòu)成。通過子路徑再現(xiàn)的輔助視頻和輔助音 頻與主路徑異步。即，即使當(dāng)子播放項(xiàng)包括用于識(shí)別與子播放項(xiàng)相關(guān)聯(lián)的播放 項(xiàng)的信息和指示該子播放項(xiàng)在播放項(xiàng)中的呈現(xiàn)時(shí)間的呈現(xiàn)時(shí)戳信息時(shí)，該信息 在圖13B的子路徑中也是無效的。因此，用戶可在主路徑的呈現(xiàn)期間的任意時(shí) 刻觀看輔助視頻。在這種情形中，因?yàn)檩o助視頻的編碼類型是'外多路復(fù)用(out-of-mux)' 型，所以主視頻和主音頻作為主流提供給AV解碼器17b，且輔助視頻和輔助 音頻作為子流提供給AV解碼器17b，如參考圖13A所述。圖13C示出示出在其中數(shù)據(jù)的編碼類型是'內(nèi)多路復(fù)用(in-mux)'類型且 子路徑與主路徑同步的情形。圖13C的子路徑與圖13A和13B的子路徑的不 同之處在于輔助視頻和輔助音頻被多路復(fù)用在與主音頻相同的AV流中。參考圖13C，用于管理主視頻和輔助視頻以及主音頻和輔助音頻的播放列 表包括一個(gè)主路徑和一個(gè)子路徑。主路徑由四個(gè)播放項(xiàng)('Playltemjd'=0、 1、 2、 3)構(gòu)成，而子路徑由多個(gè)子播放項(xiàng)構(gòu)成。構(gòu)成子路徑的子播放項(xiàng)中的每一 個(gè)都包括用于識(shí)別與該子播放項(xiàng)相關(guān)聯(lián)的播放項(xiàng)的信息和指示該子播放項(xiàng)在 播放項(xiàng)中的呈現(xiàn)時(shí)間的呈現(xiàn)'時(shí)戳信息。如以上參考圖13A所述，利用上述信息， 使每一個(gè)子播放項(xiàng)與相關(guān)聯(lián)的播放項(xiàng)同步。因此，使子路徑與主路徑同步。在圖13C的子路徑類型中，構(gòu)成主路徑的播放項(xiàng)中的每一個(gè)和構(gòu)成子路 徑的子播放項(xiàng)中相關(guān)聯(lián)的一個(gè)或多個(gè)指向同一剪輯。目卩，子路徑是利用包括在 由主路徑管理的剪輯中的流來呈現(xiàn)的。因?yàn)榧糨嬘芍髀窂焦芾?，所以將剪輯作為主流提供給AV解碼器17b。有包括主視頻和輔助視頻以及主音頻和輔助音頻的經(jīng)分組數(shù)據(jù)構(gòu)成的主流被發(fā)送到拆分組器710a，后者進(jìn)而將經(jīng)分組的數(shù)據(jù) 拆分組。將經(jīng)拆分組的主視頻和輔助視頻以及經(jīng)拆分組的主音頻和輔助音頻根 據(jù)相關(guān)聯(lián)的包標(biāo)識(shí)信息提供給主視頻和輔助視頻解碼器730a和730b以及主音 頻和輔助音頻解碼器730e和730f，然后分別由主視頻和輔助視頻解碼器730a 和730b以及主音頻和輔助音頻解碼器730e和730f進(jìn)行解碼?？蓪⒅髁骱妥恿鲝挠涗浗橘|(zhì)30或存儲(chǔ)15提供給AV解碼器17b。在主視 頻和輔助視頻分別存儲(chǔ)在不同的剪輯中的場合，可將主音頻記錄在記錄介質(zhì)30 中以提供給用戶，'并可將輔助音頻從記錄介質(zhì)30外下載到存儲(chǔ)15。當(dāng)然，與 上述情形相反的情形也是可能的。然而，在主視頻和輔助音頻兩者都存儲(chǔ)在記 錄介質(zhì)30中的情形中，可在再現(xiàn)之前將主視頻和輔助視頻中的一個(gè)拷貝到存 儲(chǔ)15，以使得主視頻和輔助視頻能夠同時(shí)再現(xiàn)。在主視頻和輔助視頻兩者存儲(chǔ) 在同一剪輯中的情形中，它們在記錄在記錄介質(zhì)30中之后被提供。然而，在 這種情形中，主視頻和輔助視頻兩者皆從記錄介質(zhì)30的外部下載也是可能的。圖14是示出根據(jù)本發(fā)明再現(xiàn)數(shù)據(jù)的方法的流程圖。當(dāng)開始再現(xiàn)數(shù)據(jù)時(shí)，控制器12從記錄介質(zhì)30或存儲(chǔ)15讀出數(shù)據(jù)(S1410)。 此數(shù)據(jù)不僅包括主視頻、主音頻、輔助視頻、和輔助音頻數(shù)據(jù)，而且還包括用 于管理數(shù)據(jù)的再現(xiàn)的管理數(shù)據(jù)。管理數(shù)據(jù)可包括播放列表、播放項(xiàng)、STN表、 剪輯信息等。根據(jù)本發(fā)明，控制器12從管理數(shù)據(jù)中檢査允許隨同輔助視頻一起再現(xiàn)的 輔助音頻(S1420)?？刂破?2還從管理數(shù)據(jù)中標(biāo)識(shí)出允許同輔助音頻混音的主 音頻(S1420)。參考圖5，定義允許隨同其流條目存儲(chǔ)在相關(guān)聯(lián)的STN表中的 輔 助 視頻再現(xiàn) 的 輔 助'音頻 的 信 息 'comb—info—Secondary—video—Secondary—audio' 520可存儲(chǔ)在該STN表中。同 樣，定義允許與輔助音頻混音的主音頻的信息 'comb_info_Secondary—audio—Primary—audio' 510可存儲(chǔ)在STN表中。由信息 'combjnfo—Secondary—video—Secondary—audio' 520定義的各個(gè)輔助音頻流中的 一個(gè)在輔助音頻解碼器740f中解碼(S1430)，然后提供給主音頻混音器750a。經(jīng)解碼的輔助音頻的流號(hào)存儲(chǔ)在PSR14 120中。根據(jù)本發(fā)明的實(shí)施方式，志'disp—a—flag'。在標(biāo)志'disp—a—flag'被設(shè)置成對(duì)應(yīng)于禁用 狀態(tài)的值的狀況下，輔助音頻被禁止輸出(OFF)。如以上參考圖12所述，標(biāo)志 'disp_a—flag，可由用戶操作(UO)，用戶命令或API改變。即，輔助音頻的輸出 可由用戶操作(UO)，用戶命令或API來開關(guān)。在輔助音頻解碼器730f中解碼的輔助音頻與由信息 'comb—info—Secondary—audio—Primary—audio' 510定義的主音頻在主音頻混音器 750a中混音(S1440)。待混音的主音頻在主音頻解碼器730e中解碼后被提供給 主音頻混音器750a。經(jīng)解碼的主音頻的流號(hào)存儲(chǔ)在PSR1 110中。根據(jù)本發(fā)明的實(shí)施方式，PSR1 110可存儲(chǔ)標(biāo)志'disp—a_flag'。在標(biāo)志'disp—a—flag'被設(shè)置為對(duì)應(yīng)于禁用狀態(tài)的 值的狀況下，主音頻被禁止輸出(OFF)。如上參考圖12所述，標(biāo)志'disp—a_flag' 可由用戶操作(UO)，用戶命令或API改變。即，主音頻的輸出可由用戶操作 (UO)，用戶命令或API來開關(guān)。根據(jù)本發(fā)明，可隨同輔助音頻再現(xiàn)輔助視頻。同樣內(nèi)容提供者可控制音頻 的混音，或可利用命令集來控制ON和OFF狀態(tài)之間的音頻輸出。如從以上描述所清楚的，根據(jù)本發(fā)明的數(shù)據(jù)再現(xiàn)方法和裝置、記錄介質(zhì)、 和數(shù)據(jù)記錄方法和裝置，可同時(shí)再現(xiàn)主視頻和輔助視頻。此外，用戶和內(nèi)容提 供者可控制音頻的混音，或可控制音頻的輸出。因此，其優(yōu)勢在于內(nèi)容提供者 可組合更多樣的內(nèi)容，以使用戶能體驗(yàn)更多樣的內(nèi)容。同樣，其優(yōu)勢在于內(nèi)容 提供者可控制要提供給用戶的音頻。本領(lǐng)域內(nèi)技術(shù)人員可以理解，可對(duì)本發(fā)明作出各種修改和變化而不會(huì)脫離 本發(fā)明的精神或范圍。因此，本發(fā)明旨在涵蓋本發(fā)明的所有這些修改和變形。
權(quán)利要求
1.一種管理至少一個(gè)畫中畫呈現(xiàn)路徑的音頻再現(xiàn)的方法，包括再現(xiàn)用于管理至少一個(gè)輔助視頻流和至少一個(gè)輔助音頻流的再現(xiàn)的管理信息，所述輔助視頻流表示相對(duì)于由主視頻流表示的主呈現(xiàn)路徑的所述畫中畫呈現(xiàn)路徑，并且所述管理信息包括第一組合信息，所述第一組合信息指示可與所述輔助視頻流組合的所述各個(gè)輔助音頻流；以及基于所述第一組合信息再現(xiàn)所述各個(gè)輔助音頻流中的至少一個(gè)。
2. 如權(quán)利要求1所述的方法，其特征在于，所述再現(xiàn)各個(gè)輔助音頻流中的至少一個(gè)的步驟包括檢查所述第一組合信息；以及基于所述檢査步驟解碼被指示為可與所述輔助視頻流組合的所述各個(gè)輔 助音頻流中的一個(gè)。
3. 如權(quán)利要求1所述的方法，其特征在于，所述第一組合信息包括指示 與所述輔助視頻流相關(guān)聯(lián)的輔助音頻流條目的數(shù)目的信息字段，并且所述組合 信息為所述各個(gè)輔助音頻流條目中的每一個(gè)提供一輔助音頻流標(biāo)識(shí)符。
4. 如權(quán)利要求3所述的方法，其特征在于，所述管理信息指示所述輔助 視頻流的輔助視頻流標(biāo)識(shí)符。
5. 如權(quán)利要求1所述的方法，其特征在于，所述管理信息指示多個(gè)輔助視頻流條目，并且所述管理信息為所述多個(gè)輔助視頻流條目中的每一個(gè)提供一 輔助視頻流標(biāo)識(shí)符和所述第一組合信息。
6. 如權(quán)利要求1所述的方法，其特征在于，所述管理信息包括第二組合信息，所述第二組合信息指示可與所述輔助音頻流組合的各個(gè)主音頻流。
7. 如權(quán)利要求6所述的方法，其特征在于，所述再現(xiàn)各個(gè)輔助音頻流中 的至少一個(gè)的步驟包括檢查所述第一和第二組合信息；以及基于所述檢査步驟解碼被指示為可與所述輔助視頻流組合的所述各個(gè)輔 助音頻流中的一個(gè)；基于所述檢查步驟至少解碼被指示為可與所述經(jīng)解碼的輔助音頻流組合的主音頻流；以及將所述經(jīng)解碼的輔助音頻流與所述經(jīng)解碼的主音頻流混音。
8. 如權(quán)利要求6所述的方法，其特征在于，所述第二組合信息包括指示 與所述輔助音頻流相關(guān)聯(lián)的主音頻流條目的數(shù)目的信息字段，并且所述第二組 合信息為所述各個(gè)主音頻流條目的數(shù)目中的每一個(gè)提供一主音頻流標(biāo)識(shí)符。
9. 如權(quán)利要求6所述的方法，其特征在于，所述管理信息指示輔助音頻 流條目的數(shù)目，并且所述管理信息為所述各個(gè)輔助音頻流條目的數(shù)目中的每一 個(gè)提供一輔助音頻流標(biāo)識(shí)符和所述第二組合信息。
10. —種用于管理至少一個(gè)畫中畫呈現(xiàn)路徑的音頻再現(xiàn)的裝置，包括 驅(qū)動(dòng)器，所述驅(qū)動(dòng)器被配置成驅(qū)動(dòng)再現(xiàn)設(shè)備以從記錄介質(zhì)再現(xiàn)數(shù)據(jù)；以及 控制器，所述控制器被配置成控制所述驅(qū)動(dòng)器再現(xiàn)用于管理至少一個(gè)輔助視頻流和至少一個(gè)輔助音頻流的再現(xiàn)的管理信息，所述輔助視頻流表示相對(duì)于 由主視頻流表示的主呈現(xiàn)路徑的所述畫中畫呈現(xiàn)路徑，并且所述管理信息包括 第一組合信息，所述第一組合信息指示可與所述輔助視頻流組合的各個(gè)輔助音 頻流；并且所述控制器被配置成基于所述第一組合信息再現(xiàn)所述各個(gè)輔助音頻 流中的至少一個(gè)。
11. 如權(quán)利要求IO所述的裝置，其特征在于，還包括輔助音頻解碼器，所述輔助音頻解碼器被配置成解碼被指示為可與所述輔 助視頻流組合的所述各個(gè)輔助音頻流中的一個(gè)。
12. 如權(quán)利要求IO所述的裝置，其特征在于，所述管理信息包括第二組 合信息，所述第二組合信息指示可與所述輔助音頻流組合的各個(gè)主音頻流。
13. 如權(quán)利要求12所述的裝置，其特征在于，還包括輔助音頻解碼器，所述輔助音頻解碼器被配置成解碼被指示為可與所述輔 助視頻流組合的各個(gè)輔助音頻流中的一個(gè)；主音頻解碼器，所述主音頻解碼器被配置成解碼被指示為可與所述經(jīng)解碼 的輔助音頻流組合的所述各個(gè)主音頻流中的至少一個(gè)。
14. 如權(quán)利要求13所述的裝置，其特征在于，還包括混音器，所述混音器被配置成將所述經(jīng)解碼的輔助音頻流與所述經(jīng)解碼的主音頻流混音。
15. —種具有用于管理至少一個(gè)畫中畫呈現(xiàn)路徑的音頻再現(xiàn)的數(shù)據(jù)結(jié)構(gòu)的 記錄介質(zhì)，包括數(shù)據(jù)區(qū)，所述數(shù)據(jù)區(qū)存儲(chǔ)主視頻流、輔助視頻流、至少一個(gè)主音頻流、以 及至少一個(gè)輔助音頻流，所述主視頻流表示主呈現(xiàn)路徑，所述輔助視頻流表示相對(duì)于所述主呈現(xiàn)路徑的畫中畫呈現(xiàn)路徑，所述主音頻流與所述主視頻流相關(guān) 聯(lián)，并且所述輔助音頻流與所述輔助視頻流相關(guān)聯(lián)；以及管理區(qū)，所述管理區(qū)存儲(chǔ)用于管理所述輔助視頻流以及所述各個(gè)輔助音頻 流中的至少一個(gè)的再現(xiàn)的管理信息的，所述管理信息包括第一組合信息，所述 第一組合信息指示可與所述輔助視頻流組合的各個(gè)輔助音頻流。
16. 如權(quán)利要求15所述的記錄介質(zhì)，其特征在于，所述第一組合信息包 括指示與所述輔助視頻流相關(guān)聯(lián)的輔助音頻流條目的數(shù)目的信息字段，并且所 述組合信息為所述各個(gè)輔助音頻流條目中的每一個(gè)提供一輔助音頻流標(biāo)識(shí)符。
17. 如權(quán)利要求15所述的記錄介質(zhì)，其特征在于，所述管理信息指示輔 助視頻流條目的數(shù)目，并且所述管理信息為所述各個(gè)輔助視頻流條目中的每一 個(gè)提供一輔助視頻流標(biāo)識(shí)符和所述第一組合信息。
18. 如權(quán)利要求15所述的記錄介質(zhì)，其特征在于，所述管理信息包括第 二組合信息，所述第二組合信息指示可與所述輔助音頻流組合的各個(gè)主音頻 流。
19. 如權(quán)利要求18所述的記錄介質(zhì)，其特征在于，所述第二組合信息包 括指示與所述輔助音頻流相關(guān)聯(lián)的主音頻流條目的數(shù)目的信息字段，并且所述 第二組合信息為所述各個(gè)主音頻流條目中的每一個(gè)提供主音頻流標(biāo)識(shí)符。
20. 如權(quán)利要求18所述的記錄介質(zhì)，其特征在于，所述管理信息指示輔 助音頻流條目的數(shù)目，并且所述管理信息為所述各個(gè)輔助音頻流條目中的每一 個(gè)提供一輔助音頻流標(biāo)識(shí)符和所述第二組合信息。
21. —種記錄用于管理至少一個(gè)畫中畫呈現(xiàn)路徑的音頻再現(xiàn)的數(shù)據(jù)結(jié)構(gòu)的 方法，包括在記錄介質(zhì)上記錄主視頻流、輔助視頻流、至少一個(gè)主音頻流、以及至少 一個(gè)輔助音頻流，所述主視頻流表示主呈現(xiàn)路徑，所述輔助視頻流表示相對(duì)于所述主呈現(xiàn)路徑的畫中畫呈現(xiàn)路徑，所述主音頻流與所述主視頻流相關(guān)聯(lián)，并 且所述輔助音頻流與所述輔助視頻流相關(guān)聯(lián)；以及在所述記錄介質(zhì)上記錄用于管理所述輔助視頻流以及所述各個(gè)輔助音頻 流中的至少一個(gè)的再現(xiàn)的管理信息，所述管理信息包括第一組合信息，所述第 一組合信息指示可與所述輔助視頻流組合的各個(gè)輔助音頻流。
22. 如權(quán)利要求21所述的方法，其特征在于，所述第一組合信息包括指 示與所述輔助視頻流相關(guān)聯(lián)的輔助音頻流條目的數(shù)目的信息字段，并且所述組 合信息為所述各個(gè)輔助音頻流條目中的每一個(gè)提供一輔助音頻流標(biāo)識(shí)符。
23. 如權(quán)利要求21所述的方法，其特征在于，所述管理信息指示輔助視 頻流條目的數(shù)目，并且所述管理信息為所述各個(gè)輔助視頻流條目中的每一個(gè)提 供一輔助視頻流標(biāo)識(shí)符和所述第一組合信息。
24. 如權(quán)利要求21所述的方法，其特征在于，所述管理信息包括第二組 合信息，所述第二組合信息指示可與所述輔助音頻流組合的各個(gè)主音頻流。
25. —種記錄用于管理至少一個(gè)畫中畫呈現(xiàn)路徑的音頻再現(xiàn)的數(shù)據(jù)結(jié)構(gòu)的 裝置，包括驅(qū)動(dòng)器，所述驅(qū)動(dòng)器被配置成驅(qū)動(dòng)再現(xiàn)設(shè)備向記錄介質(zhì)記錄數(shù)據(jù)；以及 控制器，所述控制器被配置成控制所述驅(qū)動(dòng)器在所述記錄介質(zhì)上記錄主視 頻流、輔助視頻流、至少一個(gè)主音頻流、以及至少一個(gè)輔助音頻流，所述主視 頻流表示主呈現(xiàn)路徑，所述輔助視頻流表示相對(duì)于所述主呈現(xiàn)路徑的畫中畫呈 現(xiàn)路徑，所述主音頻流與所述主視頻流相關(guān)聯(lián)，并且所述輔助音頻流與所述輔 助視頻流相關(guān)聯(lián)；并且 、所述控制器被配置成控制所述驅(qū)動(dòng)器在所述記錄介質(zhì)上記錄用于管 理所述輔助視頻流以及所述各個(gè)輔助音頻流中的至少一個(gè)的再現(xiàn)的管理信息， 所述管理信息包括第一組合信息，所述第一組合信息指示可與所述輔助視頻流 組合的各個(gè)輔助音頻流。
26. 如權(quán)利要求25所述的方法，其特征在于，所述第一組合信息包括指 示與所述輔助視頻流相關(guān)聯(lián)的輔助音頻流條目的數(shù)目的信息字段，并且所述組 合信息為所述各個(gè)輔助音頻流條目中的每一個(gè)提供一輔助音頻流標(biāo)識(shí)符。
27. 如權(quán)利要求25所述的方法，其特征在于，所述管理信息指示輔助視頻流條目的數(shù)目，并且所述管理信息為所述各個(gè)輔助視頻流條目中的每一個(gè)提 供一輔助視頻流標(biāo)識(shí)符和所述第一組合信息。
28.如權(quán)利要求25所述的方法，其特征在于，所述管理信息包括第二組 合信息，所述第二組合信息指示可與所述輔助音頻流組合的各個(gè)主音頻流。
全文摘要
在一個(gè)實(shí)施方式中，本方法包括再現(xiàn)用于管理至少一個(gè)輔助視頻流和至少一個(gè)輔助音頻流的再現(xiàn)的管理信息。輔助視頻流表示相對(duì)于由主視頻流表示的主呈現(xiàn)路徑的畫中畫呈現(xiàn)路徑。該管理信息包括第一組合信息，而第一組合信息指示可與所述輔助視頻流組合的各個(gè)輔助音頻流?；诘谝唤M合信息再現(xiàn)這些輔助音頻流中的至少一個(gè)。
文檔編號(hào)G11B20/12GK101283410SQ200680037301
公開日2008年10月8日 申請(qǐng)日期2006年8月21日 優(yōu)先權(quán)日2005年8月22日
發(fā)明者劉齊鏞, 金建石 申請(qǐng)人:Lg電子株式會(huì)社