專利名稱：信息處理裝置、方法和計(jì)算機(jī)可讀取介質(zhì)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種信息處理裝置、方法和計(jì)算機(jī)可讀取介質(zhì)，以及尤其涉及一種用于生成、顯示和同步處理視頻信息與聲音、圖像和文本數(shù)據(jù)的信息處理裝置、方法和計(jì)算機(jī)可讀取介質(zhì)。
現(xiàn)已有或已提出用于響應(yīng)于用戶交互指令顯示包括移動圖像、靜止圖像、聲音和文字的信息和數(shù)據(jù)的標(biāo)準(zhǔn)，以及用于同步顯示這種信息和數(shù)據(jù)的標(biāo)準(zhǔn)。一種由國際標(biāo)準(zhǔn)化組織(ISO)提出的標(biāo)準(zhǔn)是通過多媒體和超媒體信息編碼專家組(MHEG)確定。另一種標(biāo)準(zhǔn)由高級電視增強(qiáng)論壇(ATVEF)、廣播和有線網(wǎng)絡(luò)協(xié)會、消費(fèi)者電子設(shè)備公司、電視傳輸操作和科技公司確定。
相應(yīng)于MHEG標(biāo)準(zhǔn)或ATVEF標(biāo)準(zhǔn)的信息(以下簡稱多媒體信息)可以在電視廣播中提供給觀眾。傳遞和顯示的其它方法包括計(jì)算機(jī)英特網(wǎng)。
通常多媒體信息關(guān)于它所響應(yīng)的視頻改變很少。但是欲在一個(gè)適當(dāng)?shù)臅r(shí)間提供多媒體信息，多媒體信息應(yīng)與它所響應(yīng)的視頻(例如，電視廣播的移動圖像)同步。然而，不存在生成這種同步多媒體信息的編輯系統(tǒng)或編輯工具。本發(fā)明的目的在于提供這種編輯系統(tǒng)或編輯工具。
本發(fā)明提供一種信息處理系統(tǒng)和方法。該系統(tǒng)包括確定多媒體信息以及與該多媒體信息同步的視頻的裝置，生成多媒體信息的裝置和設(shè)置多媒體信息的顯示計(jì)時(shí)使該信息與視頻同步的裝置。該方法包括確定多媒體信息以及與該多媒體信息同步的視頻，生成多媒體信息并設(shè)置多媒體信息的顯示計(jì)時(shí)使該信息與視頻同步。本發(fā)明還提供了一種執(zhí)行該方法的包含代碼的計(jì)算機(jī)可讀介質(zhì)。在優(yōu)選實(shí)施例中，多媒體信息或者是MHEG信息，或者是ATVEF信息。
確定裝置最好包括識辨多媒體信息和將與該多媒體信息同步的視頻的內(nèi)容的內(nèi)容生成部分。生成裝置最好包括一個(gè)生成多媒體信息景象的景象生成裝置，設(shè)置裝置最好包括識辨視頻起始時(shí)間的裝置，顯示與此起始時(shí)間同步的多媒體信息的景象。
信息處理系統(tǒng)最好還包括一個(gè)顯示器，和一個(gè)顯示控制器，用于顯示視頻的時(shí)間軸以及相應(yīng)于景象層次的符號。信息處理系統(tǒng)最好還包括用于設(shè)置同步特征的裝置，啟動或解除多媒體信息與視頻的同步播放。最好還設(shè)置一個(gè)許可或不許可對圖像的顯示作中間處理的中間處理播放特征。這種對圖像的顯示作中間處理的不許可阻止了當(dāng)觀眾開始觀看視頻圖像時(shí)圖象顯示無意義。
信息處理系統(tǒng)最好還包括管理裝置，以分級的形式將多媒體信息組織到內(nèi)容、情節(jié)和景象中并管理這種分級的結(jié)構(gòu)。最好還設(shè)置設(shè)定景象的優(yōu)先級別，使景象從廣播臺發(fā)送的速率與觀眾選擇顯示景象的喜好相對應(yīng)的設(shè)置裝置。
信息處理裝置最好還包括設(shè)置顯示模式特征的裝置，顯示模式特征確定觀眾是否可以控制多媒體信息的顯示。此特征的設(shè)置防止觀眾關(guān)閉顯示。


圖1是用于播放利用本發(fā)明的裝置和方法生成的多媒體信息的系統(tǒng)的方框圖。
圖2是本發(fā)明生成多媒體信息的裝置的方框圖。
圖3是由圖2的多媒體生成裝置執(zhí)行的計(jì)算機(jī)程序諸部分的方框圖。
圖4是景象的實(shí)物示圖。
圖5是表示信息分級結(jié)構(gòu)的多媒體信息的目錄的示圖。
圖6是圖1的IRD 4的方框圖。
圖7是播放多媒體信息的由IRD 4執(zhí)行的計(jì)算機(jī)程序諸部分框圖。
圖8是確認(rèn)由圖2的多媒體生成裝置生成的同步設(shè)置的步驟的流程圖。
圖9是依照圖8的S1和S3步驟在圖2所示的多媒體生成裝置的顯示裝置15上進(jìn)行顯示的實(shí)例。
圖10是確認(rèn)由圖2的多媒體生成裝置生成的互動設(shè)置處理的步驟的流程圖。
圖11是景象的連鎖結(jié)構(gòu)示圖。
圖12是按照圖10的確認(rèn)互動設(shè)置的過程在顯示裝置15上進(jìn)行顯示的實(shí)例。
圖13是設(shè)置同步化特征的效果圖。
圖14是設(shè)置中間處理顯示特征的效果圖。
圖15是景象的發(fā)送率示圖。
圖16是另一個(gè)景象的發(fā)送率示圖。
圖1顯示了播放視頻和多媒體信息如MHEG信息或ATVEF信息的廣播系統(tǒng)。廣播臺1發(fā)射包含多路多媒體信息信號的電視廣播信號。天線3通過衛(wèi)星2接收這些信號。接收到的信號供給在預(yù)定的頻道抽取電視和多媒體信號的IRD(集成的接收器和解碼器)4。抽取的信號供給顯示裝置5，用于顯示疊加到電視廣播視頻上的多媒體信息。
圖2是根據(jù)本發(fā)明生成由廣播臺1傳遞的多媒體信息的裝置的方框圖。圖2所示的裝置可以用于生成任意形式的多媒體信息，例如，MHEG信息或ATVEF信息。但是為此例的目的，將假設(shè)圖2的裝置用于生成MHEG信息。
圖2所示的裝置包括CPU 11，用于根據(jù)存在ROM 12和RAM 13中的程序提供總體控制。CPU 11例如可以是微處理器或類似的裝置。CPU 11還執(zhí)行儲存在硬盤14中的多媒體編輯程序，生成MHEG信息。當(dāng)然，編輯程序可以儲存在為CPU 11所能訪問的任何計(jì)算機(jī)可讀介質(zhì)中，如軟盤、磁帶、光盤等中。
顯示裝置15向操作者顯示MHEG信息和與MHEG信息同步的視頻。鍵盤16和鼠標(biāo)17使得操作者可以控制裝置的運(yùn)行。例如，包括調(diào)制解調(diào)器的通信部分18控制通過電話線、英特網(wǎng)等等通信。聲音播放裝置19播放與視頻或MHEG信息同步的聲音。
圖3表示由CPU 11執(zhí)行的多媒體信息編輯程序的功能區(qū)(諸部分)。如上所示，在本例中假設(shè)編輯程序是用于編輯MHEG信息。雖然這些區(qū)的每一個(gè)從其它的一個(gè)或多個(gè)區(qū)中接收信息并向其它的一個(gè)或多個(gè)區(qū)提供信息，但為了清楚起見，省去區(qū)之間指示輸入和輸出的箭頭。
內(nèi)容生成部分21生成MHEG信息的內(nèi)容信息。此內(nèi)容信息對應(yīng)于與MHEG信息同步的視頻(如電視廣播的節(jié)目)。內(nèi)容信息提供給內(nèi)容管理部分24。
內(nèi)容信息對應(yīng)于一組情節(jié)并包括八條信息(1)內(nèi)容＿名稱(2)服務(wù)＿名稱(3)節(jié)目＿名稱(4)基本流＿數(shù)目(5)開始＿時(shí)間(6)持續(xù)時(shí)間
(7)附加＿信息(8)應(yīng)用＿數(shù)目在內(nèi)容＿名稱中，例如“內(nèi)容＿1998_4_1_1”被記錄以標(biāo)明內(nèi)容的名稱。在服務(wù)＿名稱中，例如“NHK”被記錄以標(biāo)明播放包含多媒體信息的節(jié)目的頻道。在節(jié)目＿名稱中，例如“棒球”被記錄以標(biāo)明節(jié)目的名稱。在基本流＿數(shù)目中，例如“10”被記錄以標(biāo)明基本流的數(shù)目。在開始＿時(shí)間中，例如“+00/00/00”被記錄以標(biāo)明相對于與MHEG信息同步的視頻，MHEG信息開始顯示的相對時(shí)間。在持續(xù)時(shí)間中，例如“00/00/00”被記錄以標(biāo)明從相對的開始時(shí)間起，多媒體信息的顯示持續(xù)的時(shí)間。在附加＿信息中，例如“情節(jié)1”被記錄以標(biāo)明該信息對應(yīng)于第一情節(jié)。在應(yīng)用數(shù)目中，例如“3”被記錄以標(biāo)明包含在內(nèi)容中的情節(jié)的數(shù)目。
內(nèi)容生成部分21還管理記錄播放一個(gè)景象的起始時(shí)間和持續(xù)時(shí)間的應(yīng)用信息文件(稍后參見圖9描述)。
情節(jié)生成部分22生成一個(gè)情節(jié)和情節(jié)信息，并將其輸出提供給情節(jié)管理部分25。一個(gè)情節(jié)由數(shù)個(gè)與視頻同步的景象組成。情節(jié)信息包括四條信息(1)基本流_名稱(2)數(shù)據(jù)＿類型(3)定型＿信息(4)景象＿數(shù)目在基本流_名稱中，例如“DATA 1”被記錄以標(biāo)明對應(yīng)于情節(jié)的基本流的名稱，在數(shù)據(jù)＿類型中，例如“mheg”被記錄以標(biāo)明多媒體信息的類型。在定型＿信息中，可以記錄對應(yīng)于情節(jié)的任何具體信息。在景象＿數(shù)目中，例如“3”被記錄以標(biāo)明情節(jié)中景象的數(shù)目。
景象生成部分23結(jié)合“對象”。如圖4所示，多個(gè)對象構(gòu)成一個(gè)景象(頁)，這多個(gè)對象可以是文本信息、圖像信息、音頻信息、操作按鈕等等。景象生成部分23的輸出提供給景象管理部分26。
景象可以通過包含在視頻信號中的同步信號或通過觀眾的互動操作如啟動顯示在景象中的操作按鈕被關(guān)閉或打開。另外，在操作按鈕中，可以設(shè)置執(zhí)行預(yù)定處理的功能，如提供將被顯示的文本信息要求購買商品。
一幅景象由景象數(shù)據(jù)和六條與這些數(shù)據(jù)對應(yīng)的信息組成
(1)景象＿優(yōu)先＿級別(2)文件＿名稱(3)流＿事件＿名稱(4)流＿事件＿時(shí)間(5)流＿名稱(6)基本流＿名稱在景象＿優(yōu)先＿級別中，例如“1”被記錄以標(biāo)明景象的發(fā)送速率(后面描述)。在文件＿名稱中，例如“bitmap.jpg”被記錄以標(biāo)明對象的名稱。在流＿事件＿名稱中，例如“流事件1”被記錄以標(biāo)明流事件的名稱。在流＿事件＿時(shí)間中，例如“00/00/00”被記錄以標(biāo)明發(fā)送景象的起始時(shí)間。在流＿名稱中，例如“stream link 1”被記錄以標(biāo)明流的名稱。在基本流＿名稱中，例如“DATA 1”被記錄以標(biāo)明鏈路目的地的基本流的名稱。
景象生成部分23還管理景象信息并記錄在這些信息合成特征(下面參照圖13進(jìn)行說明)、中間處理播放模式特征(下面參照圖14進(jìn)行說明)和顯示模式特征(下面說明)中。
內(nèi)容管理部分24、情節(jié)管理部分25和景象管理部分26設(shè)置內(nèi)容、情節(jié)和景象的目錄。實(shí)例示于圖5中。在本例中，內(nèi)容C1設(shè)置在最高級目錄中，情節(jié)SC1，SC2和SC3設(shè)置在次高級目錄中。在情節(jié)SC1中，設(shè)置三個(gè)景象，景象1、景象2和景象3。在情節(jié)SC2和SC3中，分別設(shè)置景象4和景象5。
再參見圖3，時(shí)間控制部分27讀出將由視頻播放部分29播放的視頻的時(shí)間信息，并將該信息輸出給視頻和MHEG顯示控制部分31?；涌刂撇糠?8響應(yīng)于用戶的操作記錄用于切換景象顯示的設(shè)置。
視頻播放部分29播放將與MHEG信息同步的視頻。MHEG播放部分30播放MHEG信息以檢查生成、同步正確與否。視頻和MHEG顯示控制部分31控制顯示裝置15(圖2)，使得由MHEG播放部分30播放的MHEG信息疊加顯示在由視頻播放部分29播放的視頻信息上。
圖6表示用于向觀眾回放播出的視頻和多媒體信息的IRD 4(圖1)的結(jié)構(gòu)。包含一個(gè)下轉(zhuǎn)換器、調(diào)諧器、解調(diào)器、解擾器等等的接收處理部分41從天線3上接收到的播放信號中抽取預(yù)定的頻道成分(電視廣播信號和MHEG信息信號)并將這些成分提供給CPU 42。
CPU 42通過執(zhí)行儲存在ROM 43和RAM 44中的控制程序和儲存在硬盤45中的MHEG信息播放程序控制IRD 4。播出的視頻和MHEG信息顯示在顯示裝置5(圖1)上。
顯示控制部分46控制MHEG信息對顯示在顯示裝置5上的播出視頻的疊加。觀眾通過鍵盤47、鼠標(biāo)48和遙控器49提供輸入。通信部分50，例如調(diào)制解調(diào)器控制電話線、英特網(wǎng)等等的信息通信。
圖7表示對于IRD 4儲存在硬盤45中并由CPU 42執(zhí)行的MHEG信息播放程序的諸功能區(qū)。視頻播放部分54播放觀眾選擇的頻道的視頻。MHEG播放部分55播放對應(yīng)于該視頻的MHEG信息。視頻顯示控制部分56控制顯示裝置5(圖1)。該控制致使來自MHEG播放部分55的MHEG信息疊加到來自視頻播放部分54的視頻上。
目錄管理部分51管理MHEG信息的目錄，并按照預(yù)定的時(shí)間將該信息提供給MHEG播放部分55。時(shí)間控制部分52利用視頻播放部分54響應(yīng)于MHEG信息而開始播放視頻的時(shí)間為參考進(jìn)行時(shí)間測量，并通知MHEG播放部分55，如包含在內(nèi)容信息中的開始＿時(shí)間。
互動控制部分53探測觀眾對鍵盤47、鼠標(biāo)48或遙控器49的操作，并依據(jù)這些操作進(jìn)行預(yù)定的處理，如轉(zhuǎn)換景象。
再來參見圖2所示的生成多媒體信息的裝置，通過操作鍵盤16(圖2)并在內(nèi)容信息中設(shè)置預(yù)定值(如開始＿時(shí)間和持續(xù)時(shí)間)，可以把景象設(shè)置成與在節(jié)目＿名稱中定義的視頻互動地同步。響應(yīng)于從鍵盤16或鼠標(biāo)17接收到的操作者指令，這些設(shè)置可以通過CPU 11被確認(rèn)。作為回應(yīng)，CPU 11進(jìn)行如圖8的流程圖所示的處理。
如該圖所示，在步驟S1中，時(shí)間控制部分27(圖3)讀出將由視頻播放部分29播放的視頻的時(shí)間信息(開始時(shí)間和結(jié)束時(shí)間)。此時(shí)間信息被提供給視頻和MHEG顯示控制部分31。如圖9所示，視頻和MHEG顯示控制部分31使顯示裝置15基于輸入的時(shí)間信息顯示視頻的時(shí)間軸。
在步驟S2中，時(shí)間控制部分27(圖3)讀出將與視頻同步的情節(jié)的播放開始時(shí)間和播放持續(xù)時(shí)間。該信息也提供給視頻和MHEG顯示控制部分31。操作者還對MHEG數(shù)據(jù)提供發(fā)送開始時(shí)間(廣播開始的時(shí)間)和發(fā)送持續(xù)時(shí)間(廣播持續(xù)的時(shí)間)。該信息被記錄在內(nèi)容生成部分21的應(yīng)用信息文件中。時(shí)間控制部分27還讀出這些信息并將其提供給視頻和MHEG顯示控制部分31。
在步驟S3中，視頻和MHEG顯示控制部分31使顯示裝置15沿著顯示于步驟S1中的時(shí)間軸顯示播放開始時(shí)間、播放持續(xù)時(shí)間、發(fā)送開始時(shí)間和發(fā)送持續(xù)時(shí)間。示于圖9中的這個(gè)顯示使操作者能夠使MHEG信息的同步設(shè)置形象化并確切化。
在圖9所示的實(shí)例中，對情節(jié)SC1和SC2關(guān)于相應(yīng)的視頻節(jié)目的開始時(shí)間設(shè)置播放開始時(shí)間，播放持續(xù)時(shí)間，發(fā)送開始時(shí)間和發(fā)送持續(xù)時(shí)間。在本例中，對于情節(jié)SC1，把播放的開始時(shí)間設(shè)置為和節(jié)目的開始時(shí)間相同，播放持續(xù)時(shí)間設(shè)置為10分鐘，發(fā)送開始時(shí)間設(shè)置為節(jié)目開始時(shí)間之前5分鐘，發(fā)送持續(xù)時(shí)間設(shè)置為20分鐘。對于情節(jié)SC2，把播放的開始時(shí)間設(shè)置為在節(jié)目開始時(shí)間之后20分鐘，播放持續(xù)時(shí)間設(shè)置為10分鐘。發(fā)送開始時(shí)間設(shè)置為在節(jié)目的開始時(shí)間之后15分鐘，把發(fā)送持續(xù)時(shí)間設(shè)置為20分鐘。
在完成情節(jié)播放之后的5分鐘的持續(xù)時(shí)間內(nèi)，觀眾可以例如打電話購買演播出的某項(xiàng)物品(在購物的節(jié)目中)。因?yàn)镸HEG生成裝置能夠記錄設(shè)置，使只在需要的時(shí)間傳遞MHEG信息，所以轉(zhuǎn)遞頻道可以通過時(shí)間劃分的方式高效地轉(zhuǎn)遞多個(gè)MHEG數(shù)據(jù)。
參考圖10、11、12，對由圖2的生成裝置準(zhǔn)備的MHEG信息進(jìn)行確認(rèn)互動設(shè)置的過程做以描述。該過程使用戶可以在同步設(shè)置，如播放開始時(shí)間等等被設(shè)置并在情節(jié)之內(nèi)連接景象之后對情節(jié)關(guān)于時(shí)間的互動關(guān)系(連接關(guān)系)形象化，并確定情節(jié)關(guān)于時(shí)間的互動關(guān)系的精確性。如圖11所示的實(shí)例，假設(shè)景象1之后觀眾可能選擇顯示景象2至5，在景象2之后觀眾可能選擇顯示景象6至8。
在一旦接到鍵盤16或鼠標(biāo)17(圖2)的開始確認(rèn)處理的指令后，在步驟S21(圖10)中，時(shí)間控制部分27(圖3)讀出將由視頻播放部分29(圖3)播放的視頻的時(shí)間信息(開始時(shí)間和結(jié)束時(shí)間)，并將此信息提供給視頻和MHEG顯示控制部分31(圖3)。如圖12所示，視頻和MHEG顯示控制部分31使顯示裝置15(圖2)以接收到的時(shí)間信息為基準(zhǔn)顯示視頻的時(shí)間軸。
在步驟S22中，時(shí)間控制部分27接下來讀出第一景象(景象1)的播放開始時(shí)間和播放持續(xù)時(shí)間，并將此信息提供給視頻和MHEG顯示控制部分31。在步驟S23中，如圖12所示，視頻和MHEG顯示控制部分31使顯示裝置15在視頻的時(shí)間軸以下顯示表征景象1播放持續(xù)時(shí)間的符號。該符號在視頻開始10分鐘之后開始。視頻和MHEG顯示控制部分31還使顯示裝置15在鄰接景象1的符號處顯示景象2的符號。視頻和MHEG顯示控制部分31還使顯示裝置15在景象2的符號范圍之內(nèi)顯示三角標(biāo)記，指示與景象2相同的級別的其它景象存在(在景象1之后可能的其它顯示選擇)。
在步驟S24中，互動控制部分28確定用戶是否對景象2選擇了符號(如由鼠標(biāo)單擊)。如果該部分確定已經(jīng)選擇了景象2的符號，則繼續(xù)進(jìn)行步驟S25。
在步驟S25中，如圖12所示，視頻和MHEG顯示控制部分31向下拉動景象3至5的符號，并使顯示裝置15在景象2的符號下方顯示這些符號。
在步驟S26中，互動控制部分28確定用戶是否選擇了景象2至5中某一個(gè)的符號。如果該部分確定這些符號中的某一個(gè)被選定，則繼續(xù)進(jìn)行步驟S27。在本例中，假設(shè)選擇了景象2的符號。
在步驟S27中，如圖12所示，視頻和MHEG顯示控制部分31使顯示裝置15在景象1的符號下方顯示景象2的符號，并且還在鄰接景象2的符號的位置處顯示與景象2相連的景象6的符號。在景象6的符號范圍內(nèi)，顯示三角標(biāo)記，指示與景象6相同的級別的其它的景象存在(景象2之后可能的其它顯示選擇)。
在步驟S28中，互動控制部分28確定是否選擇了景象6的符號。如果該部分確定景象6的符號被選取，則繼續(xù)進(jìn)行步驟S29，在步驟S29中，視頻和MHEG顯示控制部分31向下拉動景象7和8的符號，并在景象6的符號下方顯示這些符號。
在步驟S30中，互動控制部分28確定是否已經(jīng)選擇了景象6至8中某一個(gè)的符號。如果該部分確定這些符號中的某一個(gè)被選定，則繼續(xù)進(jìn)行步驟S31。在本例中，假設(shè)選擇了景象6的符號。
在步驟S31中，視頻和MHEG顯示控制部分31在景象2的符號下方顯示景象6的符號。因?yàn)樵诰跋?的符號下層中沒有景象存在，所以處理被終止。
內(nèi)容生成部分21(圖3)還使用戶可以在視頻信息流之內(nèi)設(shè)置同步信號。這些特征通過景象生成部分23設(shè)置在景象信息文件中，并由IRD 4處理(圖1)。把景象同步特征設(shè)置在關(guān)閉(on)狀態(tài)使得景象的轉(zhuǎn)換與視頻同步。景象同步特征設(shè)置在打開(off)狀態(tài)使得景象的轉(zhuǎn)換不能與視頻同步。
例如，如圖13所示，假設(shè)景象1至4形成情節(jié)SC1，并在景象2中間從視頻信號中接收到轉(zhuǎn)換成景象3的同步特征。還假設(shè)在方案1中同步特征打開，在方案2中，同步特征關(guān)閉。如圖13所示，在方案1中(同步特征打開)，在景象2被終止之后，播放景象3(這種播放與視頻不同步)。在方案2中(同步特征關(guān)閉)，雖然景象2的播放不完全，但景象也不會轉(zhuǎn)換到景象3(執(zhí)行同步播放)。
景象生成部分23還可以在景象信息文件中設(shè)置一個(gè)中間處理播放模式特征。例如，如圖14所示，假設(shè)景象1至3形成情節(jié)SC1，這些景象被設(shè)置成按序播放，并且在景象2的中間處理當(dāng)中，開始視頻信號對觀眾播放。還假設(shè)，在方案3中，中間處理播放模式特征設(shè)置成關(guān)閉狀態(tài)，在方案4中，中間處理播放模式特征設(shè)置成打開狀態(tài)。如圖14所示，在方案3中，在該景象的中間處理期間開始景象2的播放(因?yàn)橹虚g處理播放模式特征設(shè)置成關(guān)閉狀態(tài)，發(fā)生中間處理顯示)。另一方面，在方案4中，當(dāng)視頻信號開始播放時(shí)(例如，IRD 4關(guān)閉并開始對接收到的數(shù)據(jù)解碼)，即使景象數(shù)據(jù)被傳遞，景象2的播放也不能開始(因?yàn)橹虚g處理播放模式特征設(shè)置成打開狀態(tài)，不發(fā)生中間處理顯示)。被播放的第一景象是景象3，它在景象2的播放時(shí)間結(jié)束之后并在設(shè)置開始播放景象3的時(shí)間開始。此特征使有意義的多媒體信息的顯示，只與視頻同步地顯示。
景象生成部分23還可以設(shè)置顯示模式的特征用于向IRD 4傳遞，使得觀眾喪失關(guān)閉多媒體信息的能力，否則可以由觀眾選擇。例如，如果景象是一項(xiàng)與商業(yè)廣告節(jié)目視頻同步的商業(yè)廣告節(jié)目，不管觀眾的愿望，在顯示裝置5上顯示的多媒體信息正是所期望的，則可以采用此特征。如果顯示模式特征設(shè)置為關(guān)閉狀態(tài)，則不管觀眾對IRD 4控制上的選擇如何，景象都將顯示。如果顯示模式特征設(shè)置為打開狀態(tài)，則觀眾對IRD 4控制上的選擇將確定是否顯示MHEG信息。
在景象的景象＿優(yōu)先級中，景象生成部分23還可以設(shè)置一個(gè)確定景象從廣播系統(tǒng)的傳遞的速率的數(shù)。例如，如圖15所示，如果景象1至3形成情節(jié)SC1，并且景象1(初始景象)最頻繁地被觀眾選作顯示，景象1的發(fā)送速率可被設(shè)置為，例如“2”，景象2和3的發(fā)送速率可以設(shè)置為，例如“1”。如圖16所示，在以這種方式設(shè)置傳遞速率的情節(jié)SC1的信息流中，景象1的信息以景象2和3的頻率的兩倍發(fā)送。這種傳遞速率減少了在最頻繁觀看的景象(景象1)由觀眾選擇而被顯示之前的時(shí)間。雖然對發(fā)送速率以整數(shù)比為例說明，但可以以任意比例設(shè)置。
雖然以上描述的對MHEG信息關(guān)于視頻的同步設(shè)置采用相對時(shí)間，但這些同步設(shè)置也可以是對于實(shí)時(shí)或絕對時(shí)間設(shè)置。
執(zhí)行上述方法的計(jì)算機(jī)程序可以儲存在任意的計(jì)算機(jī)可讀介質(zhì)中，如光盤，磁盤或CD-ROM，節(jié)目的傳播可以通過任意的方式，如英特網(wǎng)或數(shù)字衛(wèi)星。
權(quán)利要求
1.一種信息處理裝置，用于生成伴有向觀眾傳遞顯示的視頻信息的多媒體信息，該信息處理裝置包括生成上述多媒體信息的生成裝置；識辨上述多媒體信息要與其同步的視頻信息的識辨裝置；和設(shè)置裝置，設(shè)置上述多媒體信息的一個(gè)或多個(gè)景象的顯示時(shí)間，使得上述顯示與上述視頻信息的顯示同步。
2.如權(quán)利要求1所述的信息處理裝置，其特征在于上述多媒體信息符合MHEG標(biāo)準(zhǔn)。
3.如權(quán)利要求1所述的信息處理裝置，其特征在于上述多媒體信息符合ATVEF標(biāo)準(zhǔn)。
4.如權(quán)利要求1所述的信息處理裝置，其特征在于上述設(shè)置裝置包括關(guān)于上述視頻信息顯示的相對時(shí)間設(shè)置上述時(shí)間的裝置。
5.如權(quán)利要求1所述的信息處理裝置，還包括時(shí)間軸顯示裝置，顯示一個(gè)對應(yīng)于上述視頻信息的顯示的時(shí)間的軸；和顯示控制裝置，相對于上述軸顯示對應(yīng)于上述一個(gè)或多個(gè)景象的顯示時(shí)間的符號。
6.如權(quán)利要求1所述的信息處理裝置，還包括解除裝置，解除上述多媒體信息的景象與上述視頻信息的同步顯示。
7.如權(quán)利要求1所述的信息處理裝置，還包括設(shè)置一個(gè)特征的中間處理裝置，用于設(shè)置一個(gè)避免顯示上述多媒體信息的景象的特征，該多媒體信息的播放與上述視頻信息同步，在上述視頻信息產(chǎn)生的一刻開始，而該視頻信息在觀眾開始播放上述視頻信息的時(shí)刻之前產(chǎn)生。
8.如權(quán)利要求1所述的信息處理裝置，還包括管理裝置，在內(nèi)容、情節(jié)和景象的層級中組織和管理上述多媒體信息。
9.如權(quán)利要求1所述的信息處理裝置，還包括傳遞速率設(shè)置裝置，設(shè)置將多個(gè)上述景象傳遞給上述觀眾的速率。
10.如權(quán)利要求1所述的信息處理裝置，還包括顯示喪失(disable)裝置，該裝置設(shè)置一個(gè)使上述觀眾禁止上述多媒體信息顯示的能力喪失的特征。
11.一種信息處理方法，用于生成伴有向觀眾傳遞顯示的視頻信息的多媒體信息，該信息處理方法包括生成上述多媒體信息；識辨上述多媒體信息要與其同步的視頻信息；和設(shè)置上述多媒體信息的一個(gè)或多個(gè)景象的顯示時(shí)間，使得上述顯示與上述視頻信息的顯示同步。
12.如權(quán)利要求11所述的信息處理方法，其特征在于上述多媒體信息符合MHEG標(biāo)準(zhǔn)。
13.如權(quán)利要求11所述的信息處理方法，其特征在于上述多媒體信息符合ATVEF標(biāo)準(zhǔn)。
14.如權(quán)利要求11所述的信息處理方法，其特征在于上述設(shè)置包括關(guān)于上述視頻信息顯示的相對時(shí)間設(shè)置上述時(shí)間。
15.如權(quán)利要求11所述的信息處理方法，還包括顯示一個(gè)對應(yīng)于上述視頻信息顯示的時(shí)間的軸；和相對于上述軸顯示對應(yīng)于一個(gè)或多個(gè)景象顯示的時(shí)間的符號。
16.如權(quán)利要求11所述的信息處理方法，還包括對上述多媒體信息設(shè)置一個(gè)特征，用于解除上述多媒體信息的景象與上述視頻信息的同步顯示。
17.如權(quán)利要求11所述的信息處理方法，還包括設(shè)置一個(gè)避免顯示上述多媒體信息的景象的特征，該多媒體信息的播放與上述視頻信息同步，在上述視頻信息產(chǎn)生的一刻開始，而該視頻信息在觀眾開始播放上述視頻信息的時(shí)刻之前產(chǎn)生。
18.如權(quán)利要求11所述的信息處理方法，還包括在內(nèi)容、情節(jié)和景象的層級中組織管理上述多媒體信息。
19.如權(quán)利要求11所述的信息處理方法，還包括設(shè)置將上述多個(gè)景象傳遞給上述觀眾的速率。
20.如權(quán)利要求11所述的信息處理方法，還包括顯示喪失裝置，該裝置設(shè)置一個(gè)使上述觀眾禁止上述多媒體信息顯示的能力喪失的特征。
21.一種具有計(jì)算機(jī)可執(zhí)行軟件代碼儲存其中的計(jì)算機(jī)可讀介質(zhì)，用于生成伴有向觀眾傳遞顯示的視頻信息的多媒體信息，該軟件代碼包括用于生成上述多媒體信息的生成代碼；用于識辨上述多媒體信息要與其同步的視頻信息的識辨代碼；和用于設(shè)置上述多媒體信息的一個(gè)或多個(gè)景象的顯示時(shí)間，使得上述顯示與上述視頻信息的顯示同步的設(shè)置代碼。
22.如權(quán)利要求21所示的計(jì)算機(jī)可讀介質(zhì)，其特征在于上述多媒體信息符合MHEG標(biāo)準(zhǔn)。
23.如權(quán)利要求21所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于上述多媒體信息符合ATVEF標(biāo)準(zhǔn)。
24.如權(quán)利要求21所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于上述設(shè)置代碼包括關(guān)于上述視頻信息顯示的相對時(shí)間設(shè)置上述時(shí)間的代碼。
25.如權(quán)利要求21所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于上述軟件代碼還包括時(shí)間軸顯示代碼，用于顯示一個(gè)對應(yīng)于上述視頻信息顯示的時(shí)間的軸；和顯示控制代碼，用于相對于上述軸顯示對應(yīng)于一個(gè)或多個(gè)景象顯示的時(shí)間的符號。
26.如權(quán)利要求21所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于上述軟件代碼還包括解除代碼，用于解除上述多媒體信息的景象與上述視頻信息的同步顯示。
27.如權(quán)利要求21所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于上述軟件代碼還包括一個(gè)中間處理設(shè)置代碼，用于設(shè)置一個(gè)避免顯示上述多媒體信息的景象的特征，該多媒體信息的播放與上述視頻信息同步，在上述視頻信息產(chǎn)生的一刻開始，而該視頻信息在觀眾開始播放視頻信息的時(shí)刻之前產(chǎn)生。
28.如權(quán)利要求21所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于軟件代碼還包括在內(nèi)容、情節(jié)和景象的層級中組織管理上述多媒體信息的管理代碼。
29.如權(quán)利要求21所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于軟件代碼還包括設(shè)置將上述多個(gè)景象傳遞給上述觀眾的傳遞速率設(shè)置代碼。
30.如權(quán)利要求21所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于軟件代碼顯示解除碼，用于設(shè)置一個(gè)使觀眾禁止多媒體信息顯示的能力喪失的特征。
31.一種使視頻的顯示和與此視頻對應(yīng)的多媒體信息同步的裝置，該裝置包括說明上述視頻顯示的持續(xù)時(shí)間的裝置；說明在上述持續(xù)時(shí)間內(nèi)上述多媒體信息的多個(gè)景象的每一個(gè)顯示周期的裝置；在上述計(jì)算機(jī)屏幕上顯示多個(gè)符號的裝置，上述符號的每一個(gè)對應(yīng)于上述景象中的一個(gè)并代表相對上述持續(xù)時(shí)間的對應(yīng)上述景象的周期的相對時(shí)間和位置。
32.如權(quán)利要求31所述的裝置，還包括在上述計(jì)算機(jī)屏幕上與上述符號同時(shí)顯示代表顯示視頻的持續(xù)時(shí)間的第二符號的裝置。
33.如權(quán)利要求31所述的裝置，其特征在于上述多媒體信息符合MHEG標(biāo)準(zhǔn)。
34.如權(quán)利要求31所述的裝置，其特征在于上述多媒體信息符合ATVEF標(biāo)準(zhǔn)。
35.一種使視頻的播出和與上述視頻播出的多媒體信息同步的裝置，該裝置包括說明上述視頻播出的持續(xù)時(shí)間的裝置；說明在上述持續(xù)時(shí)間內(nèi)上述多媒體信息的多個(gè)景象的每一個(gè)播出周期的裝置；在上述計(jì)算機(jī)屏幕上顯示多個(gè)符號的裝置，上述符號的每一個(gè)對應(yīng)于上述景象中的一個(gè)并代表相對上述持續(xù)時(shí)間的對應(yīng)上述景象的周期的相對時(shí)間和位置。
36.如權(quán)利要求35所述的裝置，還包括用于在上述計(jì)算機(jī)屏幕上與上述符號同時(shí)顯示代表所述視頻的播出持續(xù)時(shí)間的第二符號的裝置。
37.如權(quán)利要求34所述的裝置，其特征在于上述多媒體信息符合MHEG標(biāo)準(zhǔn)。
38.如權(quán)利要求34所述的裝置，其特征在于上述多媒體信息符合ATVEF標(biāo)準(zhǔn)。
39.一種具有計(jì)算機(jī)可執(zhí)行軟件代碼儲存其中的計(jì)算機(jī)可讀介質(zhì)，用于使視頻的播出和與上述視頻播出的多媒體信息同步，該軟件代碼包括用于說明上述視頻顯示的持續(xù)時(shí)間的代碼；用于說明在上述持續(xù)時(shí)間內(nèi)上述多媒體信息的多個(gè)景象的每一個(gè)顯示周期的代碼；在上述計(jì)算機(jī)屏幕上顯示多個(gè)符號的代碼，上述符號的每一個(gè)對應(yīng)于上述景象中的一個(gè)并代表相對上述持續(xù)時(shí)間的對應(yīng)上述景象的周期的相對時(shí)間和位置。
40.如權(quán)利要求39所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于軟件代碼還包括在上述計(jì)算機(jī)屏幕上與上述符號同時(shí)顯示代表顯示視頻的持續(xù)時(shí)間的第二符號的代碼。
41.如權(quán)利要求39所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于上述多媒體信息符合MHEG標(biāo)準(zhǔn)。
42.如權(quán)利要求39所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于上述多媒體信息符合ATVEF標(biāo)準(zhǔn)。
43.一種具有計(jì)算機(jī)可執(zhí)行軟件代碼儲存其中的計(jì)算機(jī)可讀介質(zhì)，用于使視頻的播出和與上述視頻播出的多媒體信息同步，該軟件代碼包括用于說明上述視頻播出的持續(xù)時(shí)間的代碼；用于說明在上述持續(xù)時(shí)間內(nèi)上述多媒體信息的多個(gè)景象的每一個(gè)播出周期的代碼；在上述計(jì)算機(jī)屏幕上顯示多個(gè)符號的代碼，上述符號的每一個(gè)對應(yīng)于上述景象中的一個(gè)并代表相對上述持續(xù)時(shí)間的對應(yīng)上述景象的周期的相對時(shí)間和位置。
44.如權(quán)利要求43所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于軟件代碼還包括用于在上述計(jì)算機(jī)屏幕上與上述符號同時(shí)顯示代表所述視頻的播出持續(xù)時(shí)間的第二符號的代碼。
45.如權(quán)利要求43所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于上述多媒體信息符合MHEG標(biāo)準(zhǔn)。
46.如權(quán)利要求43所述的計(jì)算機(jī)可讀介質(zhì)，其特征在于上述多媒體信息符合ATVEF標(biāo)準(zhǔn)。
全文摘要
提供了一種生成與視頻信號(如電視廣播節(jié)目)同步的多媒體信息的系統(tǒng)和方法。多媒體信息例如可以格式化成MHEG或ATVEF標(biāo)準(zhǔn)。系統(tǒng)包括說明并校驗(yàn)多媒體信息的內(nèi)容并同步化的裝置。情節(jié)生成程序生成一個(gè)由與視頻的播出同步的多個(gè)景象組成的情節(jié)。景象生成程序合成包括文字、圖像、聲音、操作按鈕等等的對象,產(chǎn)生一系列景象(頁)。內(nèi)容管理程序、情節(jié)管理程序和景象管理程序設(shè)置一個(gè)內(nèi)容、情節(jié)和景象的目錄。
文檔編號G06F9/44GK1240958SQ9910763
公開日2000年1月12日 申請日期1999年3月11日 優(yōu)先權(quán)日1999年3月11日
發(fā)明者福田和浩, 北里直久 申請人:索尼公司