專利名稱：屏幕控制方法及其設(shè)備的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種屏幕控制方法、屏幕控制設(shè)備，特別涉及一種包含語義瀏覽功能的屏幕控制方法、屏幕控制設(shè)備。
背景技術(shù)：
具有情節(jié)的視頻圖像節(jié)目如電影、電視劇和記錄片，通過廣播節(jié)目如地面波/衛(wèi)星廣播和CATV(Community Antenna Television，有線電視)，網(wǎng)絡(luò)系統(tǒng)如因特網(wǎng)，或通過DVD和其它數(shù)據(jù)包介質(zhì)，作為商品進(jìn)行提供。觀看者通過購買它們獲得所需的這種視頻圖像節(jié)目。這種視頻圖像節(jié)目被稱作并處理為視頻圖像標(biāo)題。
在觀看這種具有情節(jié)的視頻圖像標(biāo)題時，在觀看視頻圖像標(biāo)題的特征視頻圖像之前觀看一下預(yù)覽不僅對了解內(nèi)容有用，而且為決定是否購買特征視頻圖像提供有效參考。因此，在用于當(dāng)前視頻圖像播放器和DVD播放器的一些影碟介質(zhì)上，預(yù)先準(zhǔn)備好的、可讀的預(yù)覽視頻圖像與特征視頻圖像進(jìn)行分開記錄。
另外，一些DVD影碟介質(zhì)提供有引入每個段落內(nèi)容的概要視頻圖像，并且允許直接訪問指定段落的開始點的功能。
而且，將多個視頻圖像標(biāo)題作為一個庫存儲在家庭服務(wù)器上近來已成為可能。使具有用于標(biāo)題選擇的靜止圖像和影片圖像的縮略圖的瀏覽器可用作在計算機(jī)上操作的系統(tǒng)已經(jīng)進(jìn)行過嘗試，并且已有一些這種瀏覽器被提供。
然而，在預(yù)覽圖作為與特征視頻圖像分開準(zhǔn)備的短視頻圖像如上所述記錄在影碟介質(zhì)上的結(jié)構(gòu)中，預(yù)覽視頻圖像的場景和特征視頻圖像的場景沒有相互對應(yīng)，并且沒有讓觀看者直接轉(zhuǎn)到特征視頻圖像中與在預(yù)覽視頻圖像中找到的場景對應(yīng)的位置，并且在那個位置觀看特征視頻圖像的功能。
傳統(tǒng)上，附隨于各種介質(zhì)的預(yù)覽視頻圖像的圖像并不一定包含在特征視頻圖像內(nèi)，因此即使當(dāng)觀看者在預(yù)覽視頻圖像中發(fā)現(xiàn)感興趣的視頻圖像部分，觀看者也不能在對應(yīng)位置回放特征視頻圖像。
甚至在上述影碟介質(zhì)中提供的，引入每個段落內(nèi)容的概要視頻圖像并且允許直接訪問指定段落的開始點的功能，也不能滿足用戶在掌握整個特征視頻圖像的流動的同時從所需位置觀看特征視頻圖像的需要。
同時，具有用于選擇多個視頻圖像標(biāo)題的縮略圖的瀏覽器沒有用于顯示情節(jié)的流程和構(gòu)架的結(jié)構(gòu)，因此并不一定適合用來提供對當(dāng)前所顯示視頻圖像或靜止圖像的將來發(fā)展的充分了解。
而且，通常，傳統(tǒng)的接收/回放設(shè)備如電視接收器、視頻圖像播放器和DVD播放器既沒有用于顯示情節(jié)的流動和發(fā)展的結(jié)構(gòu)，也沒有允許選擇任意回放位置的功能。

發(fā)明內(nèi)容
考慮到本領(lǐng)域技術(shù)的上述狀況，本發(fā)明的一個目的是提供一種屏幕控制方法、屏幕控制設(shè)備，它們顯示整個情節(jié)的流動和發(fā)展，并且允許選擇任意回放位置，而且還允許在特征視頻圖像和預(yù)覽視頻圖像之間進(jìn)行自由切換。
為了解決如上所述的傳統(tǒng)技術(shù)問題，本發(fā)明的一種屏幕控制方法，應(yīng)用于在屏幕上顯示由連續(xù)視頻圖像組成的特征視頻圖像的連續(xù)視頻圖像顯示階段，和在屏幕上順序顯示通過摘取特征視頻圖像的預(yù)定部分獲取的多個所摘取視頻圖像集的所摘取視頻圖像顯示階段，包括如下步驟在所摘取視頻圖像顯示階段，顯示至少具有第一視頻圖像顯示區(qū)域、第一視頻圖像變化顯示區(qū)域和第一切換輸入?yún)^(qū)域的第一屏幕；在第一視頻圖像顯示區(qū)域內(nèi)，顯示包括多個根據(jù)當(dāng)前視頻圖像記錄位置進(jìn)行回放的所摘取視頻圖像集的預(yù)覽視頻圖像；在第一視頻圖像變化顯示區(qū)域內(nèi)，顯示顯現(xiàn)特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖、附加在圖上位于與每個所摘取視頻圖像對應(yīng)的視頻圖像記錄位置的標(biāo)志、和一個游標(biāo)，該游標(biāo)隨著時間的流逝不斷更新當(dāng)前顯示在第一視頻圖像顯示區(qū)域內(nèi)的所摘取視頻圖像的當(dāng)前視頻圖像記錄位置，并且允許從當(dāng)前視頻圖像記錄位置移到所摘取視頻圖像的任意一個中的任意視頻圖像記錄位置；在第一切換輸入?yún)^(qū)域內(nèi)顯示第一按鈕，它允許輸入一個指令來在停止和保留當(dāng)前視頻圖像記錄位置的同時從第一屏幕切換到在連續(xù)視頻圖像顯示階段中顯示的第二屏幕；在連續(xù)視頻圖像顯示階段，顯示至少具有第二視頻圖像顯示區(qū)域、第二視頻圖像變化顯示區(qū)域和第二切換輸入?yún)^(qū)域的第二屏幕；在第二視頻圖像顯示區(qū)域內(nèi)，顯示根據(jù)當(dāng)前視頻圖像記錄位置進(jìn)行回放的特征視頻圖像；在第二視頻圖像變化顯示區(qū)域內(nèi)，顯示顯現(xiàn)特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖和一個游標(biāo)，該游標(biāo)隨著時間的流逝不斷更新當(dāng)前顯示在第二視頻圖像顯示區(qū)域內(nèi)的特征視頻圖像的當(dāng)前視頻圖像記錄位置，并且允許從當(dāng)前視頻圖像記錄位置移到特征視頻圖像的任意視頻圖像記錄位置；在第二切換輸入?yún)^(qū)域內(nèi)顯示第二按鈕，該第二按鈕允許輸入一個指令來在停止和保留當(dāng)前視頻圖像記錄位置的同時從第二屏幕切換到在所摘取視頻圖像顯示階段顯示的第一屏幕；和根據(jù)每個在第一按鈕或第二按鈕顯示期間輸入的指令，在所摘取視頻圖像顯示階段和連續(xù)視頻圖像顯示階段之間進(jìn)行切換，以顯示第一屏幕或第二屏幕。
本發(fā)明的一種屏幕控制設(shè)備，適合用于在連續(xù)視頻圖像顯示階段顯示第二屏幕，其中，連續(xù)視頻圖像顯示階段將由連續(xù)視頻圖像組成的特征視頻圖像作為第二屏幕進(jìn)行顯示，及在所摘取視頻圖像顯示階段顯示第一屏幕，其中，所摘取視頻圖像顯示階段將通過摘取特征視頻圖像的預(yù)定部分獲取的多個所摘取視頻圖像集作為第一屏幕進(jìn)行順序顯示，包括用于在第一屏幕中至少顯示第一視頻圖像顯示區(qū)域、第一視頻圖像變化顯示區(qū)域和第一切換輸入?yún)^(qū)域的裝置；用于在第一視頻圖像顯示區(qū)域內(nèi)，顯示包括多個根據(jù)當(dāng)前視頻圖像記錄位置進(jìn)行回放的所摘取視頻圖像集的預(yù)覽視頻圖像的裝置；用于在第一視頻圖像變化顯示區(qū)域內(nèi)，顯示顯現(xiàn)特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖和附加在圖上位于與每個所摘取視頻圖像對應(yīng)的視頻圖像記錄位置的標(biāo)志的裝置；用于顯示游標(biāo)的裝置，該游標(biāo)附加在視頻圖像變化圖上，隨著時間的流逝不斷更新當(dāng)前顯示在第一視頻圖像顯示區(qū)域內(nèi)的所摘取視頻圖像的當(dāng)前視頻圖像記錄位置，并且允許從當(dāng)前視頻圖像記錄位置移到所摘取視頻圖像的任意一個中的任意視頻圖像記錄位置；用于在第一切換輸入?yún)^(qū)域內(nèi)顯示第一按鈕的裝置，該按鈕允許輸入一個指令來在停止和保留當(dāng)前視頻圖像記錄位置的同時從第一屏幕切換到在連續(xù)視頻圖像顯示階段中顯示的第二屏幕；用于在第二屏幕中至少布置第二視頻圖像顯示區(qū)域、第二視頻圖像變化顯示區(qū)域和第二切換輸入?yún)^(qū)域的裝置；用于在第二視頻圖像顯示區(qū)域內(nèi)，顯示根據(jù)當(dāng)前視頻圖像記錄位置進(jìn)行回放的特征視頻圖像的裝置；用于在第二視頻圖像變化顯示區(qū)域內(nèi)，顯示顯現(xiàn)特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖的裝置；用于顯示游標(biāo)的裝置，該游標(biāo)附加在視頻圖像變化圖上，隨著時間的流逝不斷更新當(dāng)前顯示在第二視頻圖像顯示區(qū)域內(nèi)的特征視頻圖像中的當(dāng)前視頻圖像記錄位置，并且允許從當(dāng)前視頻圖像記錄位置移到特征視頻圖像中的任意視頻圖像記錄位置；用于在第二切換輸入?yún)^(qū)域內(nèi)顯示第二按鈕的裝置，該第二按鈕允許輸入一個指令來在停止和保留在指令時當(dāng)前視頻圖像記錄位置的同時從第二屏幕切換到在所摘取視頻圖像顯示階段顯示的第一屏幕；和用于根據(jù)每個在第一按鈕或第二按鈕顯示期間輸入的指令，在所摘取視頻圖像顯示階段和連續(xù)視頻圖像顯示階段之間進(jìn)行切換，以顯示第一屏幕或第二屏幕的裝置。


圖1是本發(fā)明的視頻圖像回放設(shè)備的一個實施例的結(jié)構(gòu)方框圖；圖2是圖1所示的語義瀏覽器裝置的結(jié)構(gòu)方框圖；圖3示出本發(fā)明的視頻圖像回放設(shè)備的狀態(tài)轉(zhuǎn)換；圖4是示出本發(fā)明的視頻圖像回放設(shè)備的一個實施例的每個操作階段和每個控制屏幕的結(jié)構(gòu)的說明圖；圖5是本發(fā)明的視頻圖像回放設(shè)備的一個實施例的操作流程圖；圖6示出一個在視頻圖像標(biāo)題選擇階段顯示的示例性屏幕；圖7示出一個在預(yù)覽視頻圖像模式選擇階段顯示的示例性屏幕；圖8示出一個在視頻圖像瀏覽觀看階段顯示的示例性屏幕；圖9是示出語義圖結(jié)構(gòu)的說明圖；圖10是標(biāo)記處理基本部分的結(jié)構(gòu)方框圖；圖11是本發(fā)明的視頻圖像回放設(shè)備的另一個實施例的操作流程圖；圖12是本發(fā)明的視頻圖像回放設(shè)備的另一個實施例的操作流程圖；圖13是本發(fā)明的視頻圖像回放設(shè)備的另一個實施例的操作流程圖；圖14是本發(fā)明的視頻圖像回放設(shè)備的另一個實施例的操作流程圖；圖15是本發(fā)明的視頻圖像回放設(shè)備的另一個實施例的操作流程圖；圖16是本發(fā)明的視頻圖像回放設(shè)備的另一個實施例的操作流程圖；圖17是本發(fā)明的視頻圖像回放設(shè)備的另一個實施例的操作流程圖；圖18是本發(fā)明的視頻圖像回放設(shè)備的另一個實施例的操作流程圖；
圖19是示出應(yīng)用于本發(fā)明的語義代碼的示例性結(jié)構(gòu)的說明圖；圖20A到20C示意性地示出一個使用語義代碼產(chǎn)生概要視頻圖像的示例；圖21A到21G示意性地示出一個使用語義代碼產(chǎn)生多個概要視頻圖像的示例；圖22示意性地示出另一個使用語義代碼產(chǎn)生概要視頻圖像的示例；圖23A到23F示意性地示出一個使用語義代碼產(chǎn)生多個常規(guī)版本的示例。
具體實施例方式
現(xiàn)在將結(jié)合附圖對本發(fā)明的優(yōu)選實施例進(jìn)行詳細(xì)的描述。下面的實施例是一些用于實現(xiàn)本發(fā)明基本結(jié)構(gòu)和效果的優(yōu)選實施例，因此可能存在適于技術(shù)構(gòu)造的各種限制。然而，需要說明的是，除非下面說明中特別指出之外，本發(fā)明的范圍不限于這些實施例。
通過在語義瀏覽屏幕內(nèi)顯示語義圖，其中，語義圖在通過具有GUI(graphical user interface，圖形用戶接口)功能的瀏覽界面觀看具有特定情節(jié)的視頻圖像標(biāo)題如電影、電視劇或記錄片，或其預(yù)覽視頻圖像時，能夠幫助直觀地掌握情節(jié)的平靜化和復(fù)雜化，并且能夠幫助輕松地掌握情節(jié)和事件的發(fā)展，從而通過語義瀏覽屏幕實現(xiàn)用戶和系統(tǒng)之間信息的交互式發(fā)送和接收，本發(fā)明提供一種允許新型交互式視頻圖像瀏覽如檢索預(yù)定的內(nèi)容部分或交替回放預(yù)覽視頻圖像和特征視頻圖像的方法、設(shè)備和記錄介質(zhì)。
在描述實施例之前，先進(jìn)行術(shù)語的定義和說明。照例，下面術(shù)語包括本發(fā)明的技術(shù)構(gòu)造。因此，每個術(shù)語僅應(yīng)用于本發(fā)明，并且它的意思可能與在傳統(tǒng)技術(shù)中使用的不同。
鏡頭是連續(xù)影片圖像的最小單位。它等同于電影的一個膠片鏡頭。鏡頭可能是不連續(xù)的，包括通過分裂一個場景和靜止圖像的鏡頭而產(chǎn)生的多個鏡頭。片斷(segment)可以作為比鏡頭更低的層次進(jìn)行定義。
場景是幾個鏡頭的集合，并且是構(gòu)成情節(jié)語義的影片圖像單位。
記錄位置信息是表示記錄介質(zhì)上記錄的場景和鏡頭在記錄介質(zhì)上的記錄位置的信息。它包括所有與記錄位置相關(guān)的信息，如絕對扇區(qū)號、絕對軌道號、時間代碼、絕對記錄號等。
特征視頻圖像是構(gòu)成每個視頻圖像標(biāo)題(例如，一個廣播節(jié)目或一個電影/電視劇)的多個場景和鏡頭的集合，并且在時間廣度上跨越視頻圖像標(biāo)題的開始到結(jié)束。通過廣播節(jié)目或通過網(wǎng)絡(luò)發(fā)布的視頻圖像標(biāo)題或在盒式磁帶或基于數(shù)據(jù)包的記錄介質(zhì)如光盤中記錄并提供的視頻節(jié)目標(biāo)題通常由這種特征視頻圖像構(gòu)成。
所摘取視頻圖像是從特征視頻圖像部分摘取的視頻圖像，并且預(yù)覽視頻圖像是與目的對應(yīng)的短視頻圖像如摘要，它通過連接這種所摘取視頻圖像而構(gòu)成。也就是，預(yù)覽視頻圖像至少包括一個通過從構(gòu)成特征視頻圖像的場景和鏡頭中摘取并連接語義評價值和視頻圖像特征評價值中的一個或兩者滿足預(yù)定條件的這種場景和鏡頭而產(chǎn)生的視頻圖像。
因此，預(yù)覽視頻圖像可以通過僅連接從特征視頻圖像中摘取的所摘取場景，或通過僅連接從特征視頻圖像中摘取的所摘取鏡頭，或通過以混合方式連接從特征視頻圖像中摘取的所摘取鏡頭和場景，進(jìn)行構(gòu)成。與構(gòu)成預(yù)覽視頻圖像相同的視頻圖像一定存在于特征視頻圖像。
也就是，構(gòu)成預(yù)覽視頻圖像的所摘取場景和所摘取鏡頭與構(gòu)成特征視頻圖像的場景和鏡頭一一對應(yīng)。在本發(fā)明中，這種特性用于執(zhí)行預(yù)覽視頻圖像和特征視頻圖像之間的自由切換，即瀏覽。
模式是與每個應(yīng)用或目的對應(yīng)的預(yù)覽視頻圖像的類型。因此，如果存在多個應(yīng)用和目的類型，那么就存在多個模式類型。
這種模式可以是梗概模式，精彩場面模式、關(guān)鍵詞模式、面向演員模式等。對于一個特征視頻圖像，存在多種類型的預(yù)覽視頻圖像，如梗概模式的預(yù)覽視頻圖像、精彩場面模式的預(yù)覽視頻圖像、關(guān)鍵詞模式的預(yù)覽視頻圖像和面向演員模式的預(yù)覽視頻圖像。
視頻圖像的語義評價是對情節(jié)中視頻圖像的影響的評價。語義評價通過評價器進(jìn)行，或者按照預(yù)定標(biāo)準(zhǔn)自動進(jìn)行。在這個評價中視頻圖像的評價作為視頻圖像的語義評價信息進(jìn)行提供。視頻圖像的語義評價信息是索引值的一種模式。
因此，在本發(fā)明中，視頻圖像的語義評價信息處理為“所提供條件”。
雖然視頻圖像的語義評價信息通常為每個場景作提供，但是它也可以為每個鏡頭作提供。
視頻圖像特征評價是對視頻圖像的特征的評價，例如，對存在/不存在演員講話和特殊效果如強(qiáng)聲學(xué)效果的評價。視頻圖像特征的評價值作為視頻圖像特征評價信息進(jìn)行提供。視頻圖像的特征評價信息是索引值的一種模式。
該評價通過評價器進(jìn)行，或者評價值按照預(yù)定標(biāo)準(zhǔn)進(jìn)行自動計算。作為選擇，評價器驗證存在/不存在一個或多個視頻圖像特征項，并且根據(jù)作為所提供條件的該存在/不存在信息，評價值進(jìn)行自動計算。
雖然視頻圖像的特征評價信息通常是為每個鏡頭提供的，但是它也可以為每個場景作提供。
元信息是與每個視頻圖像標(biāo)題(例如，一個廣播節(jié)目或一個電影/電視劇)相關(guān)的信息集合。元信息通過聯(lián)合如下信息(1)、(2)和(3)而構(gòu)成。
(1)特征視頻圖像評注信息1.1)對整個特征視頻圖像的介紹性或說明性文本的文本數(shù)據(jù)、靜止圖像數(shù)據(jù)或音頻數(shù)據(jù)；和1.2)對通過連接多個場景而構(gòu)成的每個段落的介紹性或說明性文本的文本數(shù)據(jù)、靜止圖像數(shù)據(jù)或音頻數(shù)據(jù)；(2)鏡頭/場景信息2.1)構(gòu)成特征視頻圖像的每個鏡頭的記錄位置信息；2.2)每個場景的記錄位置信息；2.3)每個鏡頭的評價值和屬性信息；和2.4)每個場景的評價值和屬性信息；(3)關(guān)聯(lián)信息3.1)場景號和構(gòu)成場景的每個鏡頭的鏡頭號之間的鏈接信息；和3.2)對每個場景、每個鏡頭或場景和鏡頭的混合物隨視頻圖像的變化各個評價值的綜合值。
除信息(1)、(2)和(3)之外，元信息還可以包括如下信息(4)的至少一項。
(4)記帳指令信息4.1)包括對整個特征視頻圖像作為一個單元進(jìn)行記帳的記帳級別的指令信息；4.2)包括對特征視頻圖像按照計量價格，即按照引入數(shù)量(時間長度)或回放時間長度進(jìn)行記帳的記帳級別的指令信息；4.3)包括對整個特征視頻圖像按照段落、場景或鏡頭進(jìn)行記帳的記帳級別的指令信息；4.4)包括對從特征視頻圖像處理而來的視頻圖像(例如，預(yù)覽視頻圖像)進(jìn)行記帳的記帳級別的指令信息；和
4.5)包括對元信息自身進(jìn)行記帳的記帳級別的指令信息；元信息通過下面語義分值或語義代碼作舉例說明。
語義分值(semantic score)是采用表形式的信息，在該表中，語義評價值(場景分值)作為所提供條件與構(gòu)成視頻圖像標(biāo)題的特征視頻圖像的所有場景關(guān)聯(lián)在一起，同時視頻圖像特征評價值(鏡頭分值)與所有鏡頭或至少部分鏡頭關(guān)聯(lián)在一起，并且這些信息至少與每個場景和每個鏡頭的記錄位置信息或時間流逝信息(時間代碼)關(guān)聯(lián)在一起，并作為各自項進(jìn)行記錄。另外，每個場景和每個鏡頭的各種屬性也記錄在這個表中。
根據(jù)語義分值的內(nèi)容，對應(yīng)的場景從特征視頻圖像進(jìn)行摘取，并且鏡頭從所摘取的場景中進(jìn)行選擇并連接，以組織預(yù)覽視頻圖像。另外，還執(zhí)行記帳操作。
采用這種方式，語義分值是特征視頻圖像的元信息的一種類型。它用作構(gòu)成下面將要描述的交互式語義瀏覽屏幕，它允許從特征視頻圖像編輯和自動生成預(yù)覽視頻圖像，并且直觀地表示情節(jié)過程。
語義代碼是采用代碼形式的信息，它通過選擇至少部分語義分值的所有項，并對其內(nèi)容進(jìn)行編碼而構(gòu)成。因此，例如，在語義代碼中，所選場景中所選鏡頭的記錄位置信息或時間流逝信息和視頻圖像特征評價的結(jié)果作為各自代碼進(jìn)行描述。這種信息可以容易地通過網(wǎng)絡(luò)進(jìn)行發(fā)布。
這種語義代碼作為每個視頻圖像標(biāo)題的元信息進(jìn)行編輯，并且為通過視頻圖像回放設(shè)備執(zhí)行自動生成預(yù)覽視頻圖像和直觀表示情節(jié)過程的交互式瀏覽提供有效的數(shù)據(jù)代碼。例如，根據(jù)語義代碼，對特征視頻圖像的對應(yīng)鏡頭進(jìn)行摘取和連接，以形成預(yù)覽視頻圖像。另外，還執(zhí)行記帳操作。
階段是表示本發(fā)明的視頻圖像回放方法的每個處理過程，或本發(fā)明的視頻圖像回放設(shè)備的每個操作狀態(tài)的概念。階段之間進(jìn)行轉(zhuǎn)換。存在視頻圖像標(biāo)題引入記錄階段、視頻圖像標(biāo)題選擇階段、預(yù)覽視頻圖像模式選擇階段、視頻圖像瀏覽觀看階段、特征視頻圖像觀看階段和記帳階段。
語義瀏覽是在回放預(yù)覽視頻圖像或特征視頻圖像時允許用戶指定任意回放位置或移到任意回放位置，并且在任意時候在預(yù)覽視頻圖像和特征視頻圖像之間進(jìn)行切換/轉(zhuǎn)換的功能。而且，語義瀏覽包括允許用戶為預(yù)覽視頻圖像更新閾值和設(shè)置任意公開級別的功能。
語義瀏覽根據(jù)使用如后所述的語義瀏覽屏幕的用戶的輸入進(jìn)行執(zhí)行。特別，它使用后面所述的語義瀏覽器軟件(語義瀏覽器裝置)通過后面所述的選擇按鈕和語義圖進(jìn)行執(zhí)行。
語義瀏覽器屏幕是與語義瀏覽功能相關(guān)的屏幕，并且是為每個階段提供的控制屏幕。因此，它有多個屏幕結(jié)構(gòu)。例如，在作為顯示在視頻圖像瀏覽觀看階段的控制屏幕的語義瀏覽屏幕中，將顯示后面所述的一個窗口、多個選擇按鈕和一個語義圖(主圖和放大圖)。在該窗口中，顯示縮略圖、預(yù)覽視頻圖像和特征視頻圖像。
語義圖主要顯示在作為顯示在視頻圖像瀏覽觀看階段的控制屏幕的語義瀏覽屏幕內(nèi)。語義圖用于以時間系列圖的形式在屏幕上顯示對情節(jié)的復(fù)雜化或平靜化預(yù)先進(jìn)行任意設(shè)置的每個場景的評價值(即，索引值的一個示例)。情節(jié)的過程或事件的發(fā)展以圖的形式進(jìn)行顯示。語義圖由主圖、游標(biāo)和放大圖構(gòu)成。
主圖是語義圖的主要部分，并且以分段圖的形式顯示通過以預(yù)定次序順序綜合各個鏡頭或場景的索引值而產(chǎn)生的值。
放大圖是以放大視圖的形式顯示主圖局部的圖。放大圖作為分段圖進(jìn)行顯示。比例能由用戶進(jìn)行任意指定。
用戶可以在主圖和放大圖上指定任意位置。語義瀏覽根據(jù)至少指定位置信息進(jìn)行執(zhí)行。
瀏覽界面功能是在語義瀏覽過程中執(zhí)行基于用戶和系統(tǒng)之間的指令和顯示的信息的交互式發(fā)送和接收的操作，或管理這個操作的功能。瀏覽界面功能至少通過用于在屏幕上顯示圖標(biāo)、按鈕和圖并且檢測/鑒別來自操作圖標(biāo)、按鈕和圖的用戶的輸入的軟件(瀏覽界面裝置)進(jìn)行實現(xiàn)。
語義瀏覽器軟件(語義瀏覽器裝置)適于實現(xiàn)語義瀏覽，并且作為計算機(jī)可讀/可執(zhí)行程序構(gòu)成，包括瀏覽界面功能(瀏覽界面裝置)的軟件、語義瀏覽屏幕(控制屏幕)的管理軟件，和各種處理裝置的控制軟件。
在描述本發(fā)明的視頻圖像回放設(shè)備的結(jié)構(gòu)之前，先參照圖3概要說明一下本發(fā)明的視頻圖像回放方法。
在本發(fā)明的視頻圖像回放方法中，視頻圖像信號處理過程包括與處理階段對應(yīng)的多個階段。控制屏幕為各個階段進(jìn)行顯示，并且處理通過這些控制屏幕進(jìn)行。這些階段之間進(jìn)行轉(zhuǎn)換。
各個階段表示本發(fā)明的視頻圖像回放設(shè)備的操作中的各個階段。
如圖3所示，這些階段是視頻圖像標(biāo)題引入記錄階段Ph1，在此階段，從外界引入各種視頻圖像標(biāo)題的特征視頻圖像，并且將它們記錄到大容量存儲單元；視頻圖像標(biāo)題選擇階段Ph2，在此階段，用戶從所引入的各種視頻圖像標(biāo)題中選擇所需視頻圖像；預(yù)覽視頻圖像模式選擇階段Ph3，在此階段，用戶選擇對所選視頻圖像標(biāo)題的所需預(yù)覽視頻圖像模式，并且觀看預(yù)覽視頻圖像；視頻圖像瀏覽觀看階段Ph4，在此階段，執(zhí)行各種類型的視頻圖像瀏覽，并且更新摘取條件；特征視頻圖像全屏觀看階段Ph5，在此階段，以全屏方式觀看特征視頻圖像；和記帳階段Ph6，在此階段，對特征視頻圖像和預(yù)覽視頻記帳進(jìn)行記帳。
需要說明的是，圖3的階段架構(gòu)是一個示例，因此省略或另增一個或多個階段，是可能的。例如，在已經(jīng)完成從外界引入視頻圖像標(biāo)題并且立即確定所選視頻圖像標(biāo)題的情況下，就可以忽略視頻圖像標(biāo)題引入記錄階段Ph1和視頻圖像標(biāo)題選擇階段Ph2。類似地，在系統(tǒng)不要執(zhí)行記帳的情況下，就可以忽略記帳階段Ph6。
在視頻圖像標(biāo)題引入記錄階段Ph1，顯示第一階段控制屏幕G1，它是用于該階段操作的控制屏幕。在第一階段控制屏幕G1中，提供有一個用于標(biāo)題引入指令輸入i1的按鈕，以接收來自用戶的標(biāo)題引入指令輸入i1。根據(jù)由此接收的指令輸入i1，該階段轉(zhuǎn)到用于讓用戶選擇視頻圖像標(biāo)題的視頻圖像標(biāo)題選擇階段Ph2。
在引入視頻圖像標(biāo)題時系統(tǒng)要執(zhí)行記帳的情況下，該階段轉(zhuǎn)到記帳階段Ph6。然后，當(dāng)記帳處理開始或結(jié)束時，該階段再次轉(zhuǎn)到視頻圖像標(biāo)題引入記錄階段Ph1。
在視頻圖像標(biāo)題選擇階段Ph2，顯示第二階段控制屏幕G2，它是用于該階段操作的控制屏幕。在第二階段控制屏幕G2中，提供有一個用于標(biāo)題選擇指令輸入i2的按鈕，以接收來自用戶的標(biāo)題選擇指令輸入。在接收到標(biāo)題選擇指令輸入之后，該階段轉(zhuǎn)到預(yù)覽視頻圖像模式選擇階段Ph3。
在用戶想要在視頻圖像標(biāo)題選擇階段Ph2選擇標(biāo)題之后立即觀看特征視頻圖像的情況下，用戶能輸入一個指令，以轉(zhuǎn)到特征視頻圖像全屏觀看階段Ph5。當(dāng)作出該指令輸入時，該階段轉(zhuǎn)到特征視頻圖像全屏觀看階段Ph5。
在選擇視頻圖像標(biāo)題時系統(tǒng)要執(zhí)行記帳的情況下，該階段轉(zhuǎn)到記帳階段Ph6。然后，當(dāng)記帳處理開始或結(jié)束時，該階段再次轉(zhuǎn)到視頻圖像標(biāo)題選擇階段Ph2。
在預(yù)覽視頻圖像模式選擇階段Ph3，顯示第三階段控制屏幕G3，它是用于該階段操作的控制屏幕。該階段接受來自視頻圖像瀏覽觀看階段Ph4的轉(zhuǎn)換。
在第三階段控制屏幕G3中，提供有一個用于視頻圖像顯示的窗口，和一個用于指令輸入i3的按鈕，以接收指令輸入i3。
當(dāng)用戶在觀看第三階段控制屏幕G3時，輸入所需預(yù)覽視頻圖像的模式指定輸入i31時，由指定輸入i31(參見圖2)指示的模式的預(yù)覽視頻圖像顯示在該窗口內(nèi)。該預(yù)覽視頻圖像根據(jù)為每個模式預(yù)定的缺省閾值進(jìn)行組織和回放。
在用戶觀看預(yù)覽視頻圖像和購買視頻圖像標(biāo)題的情況下，用戶作出用作購買指令和觀看階段指令的輸入i32。然后，該階段轉(zhuǎn)到記帳階段Ph6，并執(zhí)行記帳。此后，該階段轉(zhuǎn)到視頻圖像瀏覽觀看階段Ph4或特征視頻圖像全屏觀看階段Ph5。
用作購買指令和觀看階段指令的輸入i32是通過單擊屏幕上“S.圖”按鈕(參見圖7)來作出的。
通常，觀看預(yù)覽視頻圖像是免費(fèi)的。然而，在系統(tǒng)要為回放預(yù)覽視頻圖像執(zhí)行記帳的情況下，該階段轉(zhuǎn)到記帳階段Ph6。然后，當(dāng)記帳處理開始或結(jié)束時，該階段再次轉(zhuǎn)到預(yù)覽視頻圖像模式選擇階段Ph3。
在視頻圖像瀏覽觀看階段Ph4，顯示第四階段控制屏幕G4，它是用于該階段操作的控制屏幕，并且接收指令輸入i4。在第四階段控制屏幕G4中，提供有一個用于回放和顯示特征視頻圖像或預(yù)覽視頻圖像的窗口和一個作為本發(fā)明特征的語義圖的顯示區(qū)域。在語義圖中，顯示有一個圖表、剪輯位置和一個游標(biāo)。圖標(biāo)顯示整個特征視頻圖像的流動。剪輯位置表示圖表中預(yù)覽視頻圖像的每個模式的多個剪輯位置。游標(biāo)在隨時間的流逝進(jìn)行移動時顯示當(dāng)前回放位置。而且，游標(biāo)可以移動到圖表中的所需位置。
除上述之外，在第四階段控制屏幕G4中，還提供有各種用于指令輸入i4的按鈕和用于視頻圖像回放的開始、暫停、繼續(xù)、停止、倒帶、快進(jìn)等操作的視頻圖像控制按鈕。通過作出各種指令輸入i4，用戶可以享受各種瀏覽和觀看(特征視頻圖像和預(yù)覽視頻圖像的瀏覽)，后面將對此作詳細(xì)描述。
當(dāng)指示回放預(yù)覽視頻圖像時，該模式的預(yù)覽視頻圖像在窗口內(nèi)進(jìn)行回放。如果在回放預(yù)覽視頻圖像期間存在游標(biāo)移動輸入，那么可以確定指示從那個模式的預(yù)覽視頻圖像的一部分轉(zhuǎn)到另一部分進(jìn)行瀏覽。因此，在轉(zhuǎn)到相應(yīng)部分之后，繼續(xù)回放那個模式的預(yù)覽視頻圖像。通過在窗口內(nèi)回放預(yù)覽視頻圖像期間單擊窗口內(nèi)部，所回放視頻圖像可以擴(kuò)展到整個屏幕。
當(dāng)指示回放特征視頻圖像時，特征視頻圖像將在窗口內(nèi)進(jìn)行回放。如果在該回放期間存在游標(biāo)移動輸入，那么可以確定指示從特征視頻圖像的一部分轉(zhuǎn)到另一部分進(jìn)行瀏覽。因此，在轉(zhuǎn)到相應(yīng)部分之后，繼續(xù)回放特征視頻圖像。通過單擊屏幕上的“整個視頻圖像”按鈕(圖8)，執(zhí)行特征視頻圖像的回放。另外，通過在窗口內(nèi)回放特征視頻圖像期間單擊窗口內(nèi)部，所回放視頻圖像可以擴(kuò)展到整個屏幕。
在視頻圖像瀏覽觀看階段Ph4，根據(jù)來自用戶的指令輸入，可以作出用于更新(限制或緩和)作為預(yù)覽視頻圖像的對應(yīng)模式的視頻圖像摘取條件的“閾值”的輸入。
當(dāng)輸入更新“閾值”時，“閾值”進(jìn)行更新，并且基于新“閾值”的那個模式的預(yù)覽視頻圖像進(jìn)行回放。
同時，如果指令輸入i4的內(nèi)容是指示從預(yù)覽視頻圖像到特征視頻圖像的切換瀏覽，或指示從特征視頻圖像到預(yù)覽視頻圖像的切換瀏覽，窗口內(nèi)的視頻圖像在保持當(dāng)前回放位置的同時，每次均進(jìn)行切換。
如果指令輸入i4的內(nèi)容是指示特征視頻圖像全屏顯示，該階段從瀏覽階段轉(zhuǎn)到特征視頻圖像全屏觀看階段Ph5。通過在回放整個視頻圖像時單擊窗口內(nèi)的任意位置，發(fā)出特征視頻圖像全屏顯示的指令。
如果指令輸入i4的內(nèi)容是指示返回到預(yù)覽視頻圖像模式選擇階段Ph3，該階段轉(zhuǎn)到預(yù)覽視頻圖像模式選擇階段Ph3。
在特征視頻圖像全屏觀看階段Ph5，特征視頻圖像在整個屏幕上進(jìn)行顯示。
在如上所述該階段直接從視頻圖像標(biāo)題選擇階段Ph2轉(zhuǎn)換而來的情況下，該階段轉(zhuǎn)到用于記帳處理的記帳階段Ph6。當(dāng)記帳處理開始或結(jié)束時，該階段再次轉(zhuǎn)到特征視頻圖像全屏觀看階段Ph5。
在特征視頻圖像全屏觀看階段Ph5，接收用于開始瀏覽的指令或用于返回到視頻圖像標(biāo)題引入記錄階段Ph1的指令的指令輸入i5。如果指令輸入i5的內(nèi)容是指示開始瀏覽，該階段保持其上所提供的當(dāng)前回放位置信息，轉(zhuǎn)到視頻圖像瀏覽觀看階段Ph4。
如果指令輸入i5的內(nèi)容是指示返回到視頻圖像標(biāo)題引入記錄階段Ph1，那么停止當(dāng)前回放，并且該階段轉(zhuǎn)到視頻圖像標(biāo)題引入記錄階段Ph1。
現(xiàn)在對本發(fā)明的視頻圖像回放設(shè)備的一個實施例進(jìn)行描述。
圖1是本發(fā)明的視頻圖像回放設(shè)備的一個實施例的結(jié)構(gòu)方框圖。圖2是圖1所示的語義瀏覽器裝置的結(jié)構(gòu)方框圖。
如圖1所示，本發(fā)明的視頻圖像回放設(shè)備VP1具有語義瀏覽器裝置C1、接收區(qū)C10、記錄/回放電路C11、高速存儲單元C12、驅(qū)動機(jī)制C13、解密區(qū)C14、顯示單元C15、遠(yuǎn)端控制器C16和記帳區(qū)C18。
另外，視頻圖像回放設(shè)備VP1還能包括驅(qū)動機(jī)制C19和預(yù)讀存儲器C20。
驅(qū)動機(jī)制C13具有讀寫頭和轉(zhuǎn)動機(jī)制區(qū)。大容量存儲介質(zhì)M1如DVD+RAM這樣的可重寫DVD介質(zhì)在驅(qū)動機(jī)制C13上進(jìn)行載入，以記錄和回放數(shù)據(jù)。
大容量存儲介質(zhì)M1是一種記錄介質(zhì)，在其上，記錄或可記錄視頻圖像信號(在本發(fā)明中，為方便起見，與視頻圖像相關(guān)的信號和與音頻相關(guān)的信號統(tǒng)稱為“視頻圖像信號)，和與視頻圖像信號的記錄位置相關(guān)的記錄位置信息。具有對記錄位置信息進(jìn)行記錄的格式的光學(xué)記錄介質(zhì)或帶狀或盤狀磁性記錄介質(zhì)適合用作該記錄介質(zhì)。
這種記錄位置信息以光盤/光磁盤介質(zhì)或硬盤介質(zhì)的扇區(qū)號或軌道號的形式進(jìn)行記錄。記錄位置信息在回放時作為當(dāng)前地址進(jìn)行輸出，并且在確定需要開始回放的目標(biāo)地址時進(jìn)行搜索。
在視頻圖像磁帶介質(zhì)中，與斜向軌道相關(guān)的絕對軌道號或時間代碼可訪問地記錄在斜向軌道或縱向軌道上。
在驅(qū)動機(jī)制C19中，數(shù)據(jù)載體單元如內(nèi)存棒或內(nèi)存卡單元進(jìn)行載入。
語義瀏覽器裝置C1在各種預(yù)覽模式下從特征視頻圖像自動生成預(yù)覽視頻圖像并執(zhí)行回放。另外，語義瀏覽器裝置C1執(zhí)行瀏覽如預(yù)覽視頻圖像和特征視頻圖像的鏈接回放，并且執(zhí)行各種控制操作。語義瀏覽器裝置C1的結(jié)構(gòu)和操作將在后面參照圖2進(jìn)行描述。
接收區(qū)C10連接到網(wǎng)絡(luò)系統(tǒng)如因特網(wǎng)和無線廣播如衛(wèi)星數(shù)字廣播或地面波數(shù)字廣播或有線廣播如CATV的廣播系統(tǒng)，并且接收各種視頻圖像標(biāo)題的特征視頻圖像及其元信息數(shù)據(jù)。接收區(qū)C10由調(diào)諧電路或AGC電路、檢波電路，和多路信號分離器組成。
接收區(qū)C10，由來自語義瀏覽器C1的控制信號進(jìn)行控制，分離已經(jīng)執(zhí)行接收處理的數(shù)據(jù)，并將數(shù)據(jù)發(fā)送到記錄/回放電路C11。
元信息為每個視頻圖像標(biāo)題進(jìn)行準(zhǔn)備，并且包含用于指定視頻圖像標(biāo)題的數(shù)據(jù)、對構(gòu)成視頻圖像標(biāo)題的每個鏡頭的鏡頭評價值(即，鏡頭分值)、對每個場景的場景評價值(即，場景分值)、每個鏡頭的時間代碼、每個場景的時間代碼、屬于每個場景的鏡頭列表、視頻圖像標(biāo)題的縮略圖數(shù)據(jù)和對視頻圖像標(biāo)題的屬性和記帳信息。
元信息數(shù)據(jù)作為通過以代碼的形式組織這些數(shù)據(jù)而產(chǎn)生的語義代碼進(jìn)行提供。
現(xiàn)在將對用在本發(fā)明中的作為元信息的一個示例的語義代碼的結(jié)構(gòu)和使用進(jìn)行描述。
圖19是以數(shù)據(jù)邏輯結(jié)構(gòu)的形式示出作為元信息的語義代碼的結(jié)構(gòu)的說明圖。
語義代碼由與頭信息相關(guān)的代碼(A)、包括與視頻圖像標(biāo)題評注信息相關(guān)的代碼的特征視頻圖像信息(B)和包括特征視頻圖像的鏡頭/場景信息的主代碼(C)。具體地說，包括與視頻圖像標(biāo)題評注信息相關(guān)的代碼的特征視頻圖像信息(B)是用于指定特征視頻圖像的信息，并且主代碼(C)包括與鏡頭或場景相關(guān)的預(yù)定信息。
A.頭信息a1與程序相關(guān)的通用信息(程序名、程序代碼、廣播頻道、廣播日期和時間、程序種類等)，和特征視頻圖像信息的項010的地址指針q1或特征視頻圖像信息的項011的地址指針q2a2屬性的項信息000＝屬性的存在/不存在標(biāo)志001＝應(yīng)用或預(yù)覽模式a3用于執(zhí)行主代碼選擇指令的選擇指令信息；根據(jù)該選擇指令信息，可以選擇性指定主代碼(C)中的一個或兩個或更多場景文件(C1)。
B.特征視頻圖像信息010＝整個特征視頻圖像的介紹性或說明性文本的文本數(shù)據(jù)、靜止圖像數(shù)據(jù)(縮略圖數(shù)據(jù))或音頻數(shù)據(jù)011＝通過連接多個場景而構(gòu)成的每個段落的介紹性或說明性文本的文本數(shù)據(jù)、靜止圖像數(shù)據(jù)(縮略圖數(shù)據(jù))或音頻數(shù)據(jù)
C.主代碼一個場景文件、一個鏡頭文件和一個關(guān)聯(lián)文件記錄在主代碼中。
C1.場景文件；為每個場景記錄如下信息020＝場景號#和指針p021＝場景評價值Sn022＝時間代碼(開始點ts，結(jié)束點te)C2.鏡頭文件；為每個鏡頭記錄如下信息030＝鏡頭號#031＝鏡頭評價值Sh，其它屬性(應(yīng)用等)032＝時間代碼(開始點ts，結(jié)束點te)該時間代碼032可以指定一個鏡頭的一個部分。例如，在僅指定開始點ts和結(jié)束點te其中一個或開始點ts和結(jié)束點te具有相同值的情況下，顯示一幅靜止圖像。
C3.關(guān)聯(lián)文件040＝場景號Sn#和鏡頭號Sh#的鏈接數(shù)據(jù)在這種情況下，包含在場景號Sn#的一個場景中的多個鏡頭的鏡頭號Sh#1、Sh#2等鏈接到該場景號。該鏈接數(shù)據(jù)040是以加權(quán)排序次序或時間次序的鏈接數(shù)據(jù)，并且可以使用“null”表示忽略。
另外，如下所述的與記帳指令相關(guān)的代碼G可以進(jìn)行連接。
G.記帳指令代碼050＝包含對整個特征視頻圖像作為一個單元進(jìn)行記帳的記帳級別的指令信息；051＝包含對特征視頻圖像按照計量價格，即按照引入數(shù)量(時間長度)或回放時間長度進(jìn)行記帳的記帳級別的指令信息；052＝包含對整個特征視頻圖像按照段落、場景或鏡頭進(jìn)行記帳的記帳級別的指令信息；053＝包含對從特征視頻圖像處理而來的視頻圖像(例如，預(yù)覽視頻圖像)進(jìn)行記帳的記帳級別的指令信息；054＝包含對元信息自身進(jìn)行記帳的記帳級別的指令信息；在上述描述中，具有不同意思的多個鏡頭可以根據(jù)鏡頭評價值031的在場人員屬性描述包含到鏈接數(shù)據(jù)040中。
另外，為了節(jié)省語義代碼的數(shù)據(jù)量，鏡頭文件C2的數(shù)據(jù)可以限制到僅為包含在具有預(yù)定或更高場景評價值021(在場景文件內(nèi))的場景中的鏡頭。
作為鏡頭文件C2的數(shù)據(jù)，可以包括所有場景020的所有鏡頭030和這些鏡頭的評價值031。特別，作為授權(quán)數(shù)據(jù)，它是有效的。
在場景文件C1中，每個場景評價值021和時間代碼022與該場景的場景號020相關(guān)聯(lián)。隸屬于該場景號020的指針p表示關(guān)聯(lián)文件C3的對應(yīng)鏈接數(shù)據(jù)040的首地址。
采用這種數(shù)據(jù)結(jié)構(gòu)，由于要進(jìn)行選擇的場景通過檢查場景評價值021進(jìn)行確定，隸屬于該場景號020的指針p能夠使場景快速進(jìn)入到相應(yīng)鏈接數(shù)據(jù)040。
在鏈接數(shù)據(jù)040中，如果對于一個場景號Sn#存在多個鏡頭號Sh#n(n＝1，2，...)，在產(chǎn)生語義代碼時，最好根據(jù)鏡頭評價值031對多個鏡頭號進(jìn)行排序，并且將它們作為鏈接數(shù)據(jù)040進(jìn)行記錄。
采用這種數(shù)據(jù)結(jié)構(gòu)，當(dāng)從場景號020的場景中選擇代表性鏡頭時，使用場景號020的指針p和排列在鏈接數(shù)據(jù)040中的鏡頭號Sh#n的鏡頭的首鏡頭可以完成關(guān)聯(lián)文件C3中到相應(yīng)鏈接數(shù)據(jù)040的跳轉(zhuǎn)。因此，降低了鏡頭選擇時間。
而且，根據(jù)所選鏡頭號，開始點ts和結(jié)束點te從與鏡頭文件C2中的鏡頭號一致的鏡頭030的對應(yīng)時間代碼032進(jìn)行讀出。根據(jù)該時間代碼032，對應(yīng)鏡頭視頻圖像從特征視頻圖像中進(jìn)行摘取。
另外，在通過調(diào)整預(yù)覽視頻圖像的時間長度而要從場景號020的一個場景選擇兩個或多個鏡頭的情況下，可以跳轉(zhuǎn)到相應(yīng)鏈接數(shù)據(jù)040，并且從排列在鏈接數(shù)據(jù)040中的鏡頭中的首鏡頭順序取出必要數(shù)目的鏡頭。因此，可以降低鏡頭選擇時間。
上述技術(shù)用于在根據(jù)場景評價值選擇場景之后選擇屬于對應(yīng)場景的鏡頭和用于摘取從開始點到結(jié)束點的鏡頭視頻圖像。然而，除此之外，上述技術(shù)還可以用于摘取每個場景的視頻圖像。在每個場景的視頻圖像的情況下，根據(jù)場景文件C1中的場景評價值021選擇場景，并且讀出那個場景的時間代碼022(開始點ts和結(jié)束點te)。根據(jù)該時間代碼022，從特征視頻圖像摘取對應(yīng)場景視頻圖像。類似地，它可以用于以混合方式摘取場景視頻圖像和鏡頭視頻圖像。
例如，對于如圖20A所示的特征視頻圖像，其中多個鏡頭a、b、c、d、e、f和g構(gòu)成概要視頻圖像，構(gòu)成概要視頻圖像的多個鏡頭a、b、c、d、e、f和g在鏡頭文件C3中定義，并且根據(jù)用于執(zhí)行主代碼選擇指令的選擇指令信息a3選擇的、主代碼中的場景文件C1和鏡頭文件C2通過關(guān)聯(lián)文件C3相互關(guān)聯(lián)，如圖20B所示。因此，概要視頻圖像(a，e，g)可以如圖20C構(gòu)成。在這種情況下，用于關(guān)聯(lián)場景文件A1和鏡頭a、用于關(guān)聯(lián)場景文件A2和鏡頭e和用于關(guān)聯(lián)場景文件A3和鏡頭g的定義在關(guān)聯(lián)文件C3中作出。
當(dāng)提供多個場景文件C1、鏡頭文件C2和關(guān)聯(lián)文件C3時，可以從同一標(biāo)題中產(chǎn)生多個概要視頻圖像。例如，對于如圖21A所示的特征視頻圖像，其中多個鏡頭a、b、c、d、e、f和g構(gòu)成每個演員的精彩場面概要，并且構(gòu)成每個演員的精彩場面概要的多個鏡頭a、b、c、d、e、f和g在鏡頭文件C3中定義，并且根據(jù)用于執(zhí)行主代碼選擇指令的選擇指令信息a3選擇的、主代碼(C)中的三個場景文件C1和鏡頭文件C2通過關(guān)聯(lián)文件C3相互關(guān)聯(lián)，如圖21B到21D所示。因此，演員A、B和C的精彩場面概要(a，e，g)，(b，f，g)和(c，d，g)分別如圖21E到21G構(gòu)成。在這種情況下，用于關(guān)聯(lián)構(gòu)成演員A的精彩場面概要(a，e，g)的鏡頭a、e和g和場景A1、A2和A3，用于關(guān)聯(lián)構(gòu)成演員B的精彩場面概要(b，f，g)的鏡頭b、f和g和場景B1、B2和B3，和用于關(guān)聯(lián)構(gòu)成演員C的精彩場面概要(c，d，g)的鏡頭c、d和g和場景C1、C2和C3的定義在關(guān)聯(lián)文件C3中作出。
由于如圖22所示多個關(guān)聯(lián)文件C3和鏡頭文件C2被一個場景文件C1提供，因此可以產(chǎn)生具有各種不同特征的概要，例如根據(jù)記帳級別實現(xiàn)時間和內(nèi)容的區(qū)分。
由于多個關(guān)聯(lián)文件被一個場景文件C1提供，因此可以產(chǎn)生各種不同的特征視頻圖像版本。具體地說，受限模式的選項通過頭信息的a3(屬性項信息)進(jìn)行提供，并且通過使用主代碼的C1(場景文件)、C2(鏡頭文件)和C3(關(guān)聯(lián)文件)的描述數(shù)據(jù)，在忽略不要顯示部分的同時，執(zhí)行回放。主代碼的C1(場景文件)、C2(鏡頭文件)和C3(關(guān)聯(lián)文件)指定不要顯示的部分。由于觀看者在購買標(biāo)題時進(jìn)行選擇和指定，因此提供具有相同特征視頻圖像數(shù)據(jù)，而適合觀看者年齡、宗教和其他條件的內(nèi)容成為可能。例如，對于如圖23A所示的特征視頻圖像，其中多個鏡頭a、b、c根據(jù)國家或文化的不同、或收視率，進(jìn)行選擇性的限定，多個鏡頭a、b、c在鏡頭文件C3中定義，并且根據(jù)用于執(zhí)行主代碼選擇指令的選擇指令信息a3選擇的、主代碼(C)中的一個場景文件C1和一個鏡頭文件C2通過多個關(guān)聯(lián)文件C3相互關(guān)聯(lián)，如圖23B所示。因此，各種不同的特征視頻圖像版本可以如圖23C到23F進(jìn)行產(chǎn)生。
在這種情況下，用于關(guān)聯(lián)由場景文件C1定義的特征視頻圖像的場景和鏡頭a且置空與鏡頭b和c的關(guān)聯(lián)的關(guān)聯(lián)文件A、用于關(guān)聯(lián)由場景文件C1定義的特征視頻圖像的場景和鏡頭b且置空與鏡頭a和c的關(guān)聯(lián)的關(guān)聯(lián)文件B、用于關(guān)聯(lián)由場景文件C1定義的特征視頻圖像的場景和鏡頭c且置空與鏡頭a和b的關(guān)聯(lián)的關(guān)聯(lián)文件C和用于置空由場景文件C1定義的特征視頻圖像的場景與所有鏡頭a、b和c的關(guān)聯(lián)的關(guān)聯(lián)文件D在關(guān)聯(lián)文件C3中進(jìn)行定義。
視頻圖像語義評價方法用來評價場景。例如，表示情節(jié)復(fù)雜化的場景具有(+)值，而表示平靜化的場景具有(-)值，并且度由絕對值0.1到1.0的實數(shù)值表示。復(fù)雜化意味著新問題的出現(xiàn)和由此產(chǎn)生的人物心理復(fù)雜化。平靜化意味著問題的解決和由此產(chǎn)生的人物心理釋放和宣泄。
大多數(shù)電影和電視節(jié)目的預(yù)覽顯示表示復(fù)雜化的場景，如問題的出現(xiàn)和新情景或新人物關(guān)系的發(fā)展，以吸引觀眾，而不顯示表示平靜化的場景如問題的解決和結(jié)論。因此，作為場景選擇的缺省閾值，反映復(fù)雜化場景的場景評價值Sn(+)設(shè)為Sn(+)≥0.6，并且反映平靜化場景的場景評價值Sn(-)設(shè)為Sn(-)≤-0.8。在電影或電視節(jié)目的情況下，情節(jié)環(huán)境的說明或劇情的開始在介紹部分進(jìn)行寬松的提供。因此，介紹部分的缺省閾值降低0.1點，從而反映復(fù)雜化場景的場景評價值Sn(+)設(shè)為Sn(+)≥0.5，并且反映平靜化場景的場景評價值Sn(-)設(shè)為Sn(-)≤-0.7。
在場景評價值Sn因此作為實數(shù)值進(jìn)行提供的情況下，峰值場景的位置要通過一個算法進(jìn)行計算。
場景評價值還可以作為二進(jìn)制值(0，1)進(jìn)行提供。在這種情況下，Sn＝1表示高分值場景和峰值場景。通過將場景評價值作為二進(jìn)制值(0，1)進(jìn)行提供，數(shù)據(jù)結(jié)構(gòu)和算法處理可以得到簡化。另外，可以進(jìn)行顯示的視頻圖像部分能夠在發(fā)送方進(jìn)行清晰的定義。場景評價值Sn＝1的意思是不需要根據(jù)語義分值，但是能由發(fā)送方進(jìn)行有意選擇。例如，考慮到肖像權(quán)和收視率發(fā)送方不想顯示的場景即使具有高場景分值，也要從概要視頻圖像中進(jìn)行刪除。相反，也存在考慮到市場發(fā)送方想顯示但其語義分值低的場景。
場景評價值Sn還可以作為整數(shù)值(0，1，2，3)進(jìn)行提供。在這種情況下，Sn＝1表示高分值場景，Sn＝2表示峰值場景，并且Sn＝3表示戲劇性場景。由于場景評價值Sn在此作為整數(shù)值(0，1，2，3)進(jìn)行提供，因此可以指定鏡頭中的必要表現(xiàn)秒數(shù)和位置，并且根據(jù)場景類型改變到鏡頭文件C2的鏈接。
而且，場景評價值Sn還可以作為表示公開級別的整數(shù)值(0，1，2，3，4)進(jìn)行提供。在這種情況下，通過用在發(fā)送方編碼階段進(jìn)行簡單等級劃分而產(chǎn)生的整數(shù)值(0，1，2，3，4)取代計算分值，然后選擇與公開級別對應(yīng)的場景，可以降低執(zhí)行時的負(fù)擔(dān)。等級還可以考慮高分值場景、峰值場景和戲劇性場景進(jìn)行劃分。
在通過摘取部分特征視頻圖像(即來自特征視頻圖像的鏡頭視頻圖像)組織預(yù)覽視頻圖像的情況下，例如，在從兩小時的特征視頻圖像中產(chǎn)生一到兩分鐘的概要視頻圖像的情況下，如果實際上使用特征視頻圖像的鏡頭或場景，那么就不可能采用很多剪輯。因此，在編碼階段，鏡頭文件C2規(guī)定鏡頭中可以公開的部分。因此，發(fā)送方可以在鏡頭中選擇性地只提供真正想顯示的剪輯。很多用作商業(yè)預(yù)覽的視頻圖像剪輯的長度為一到兩秒或更少，并且包含緊張場面的視頻圖像。這些只是從幾秒到幾十秒的特征視頻圖像鏡頭剪輯出的一部分。通常，鏡頭的開頭經(jīng)常包含說明性或介紹性視頻圖像并且鏡頭的結(jié)束部分經(jīng)常包含最打動人心的表演或問題的解決。因此，作為一個用于從鏡頭或場景自動摘取概要視頻圖像的算法，從結(jié)束處剪輯出一部分所規(guī)定秒數(shù)是有效的。
記錄/回放電路C11將視頻圖像標(biāo)題，從接收區(qū)C10輸入的數(shù)據(jù)，的元信息數(shù)據(jù)發(fā)送到高速存儲單元C12，并且使高速存儲單元C12記錄元信息數(shù)據(jù)。記錄/回放電路C11將視頻圖像標(biāo)題的特征視頻圖像發(fā)送到驅(qū)動機(jī)制C13。該特征視頻圖像數(shù)據(jù)通過驅(qū)動機(jī)制C13中提供的讀/寫頭記錄并存儲到大容量存儲介質(zhì)M1上。
記錄/回放電路C11還將從接收區(qū)C10輸入的視頻圖像標(biāo)題的特征視頻圖像數(shù)據(jù)直接發(fā)送到解密區(qū)C14，或者通過驅(qū)動機(jī)制C13從大容量存儲介質(zhì)M1讀出特征視頻圖像，并且將它發(fā)送到解密區(qū)C14。
而且，記錄/回放電路C11還將單獨從接收區(qū)C10輸入的視頻圖像標(biāo)題的元信息數(shù)據(jù)作為數(shù)據(jù)C11a直接發(fā)送到語義瀏覽器裝置C1，或者從高速存儲單元C12讀出元信息數(shù)據(jù)，并且將它作為數(shù)據(jù)C11a發(fā)送到語義瀏覽器裝置C1。
高速存儲單元C12由具有高速尋位屬性的，中等存儲能力的硬性磁盤單元構(gòu)成，并且存儲每個視頻圖像標(biāo)題的元信息數(shù)據(jù)mdt1、mdt2、...mdt6。視頻圖像標(biāo)題的元信息數(shù)據(jù)mdt1、mdt2、...mdt6如上所述通過記錄/回放電路C11從接收區(qū)C10進(jìn)行輸入。
作為選擇，元信息數(shù)據(jù)mdt1、mdt2、...mdt6通過下面將要描述的驅(qū)動機(jī)制C19、語義瀏覽器裝置C1和記錄/回放電路C11從存儲元信息數(shù)據(jù)mdt1、mdt2、...mdt6的內(nèi)存棒M2進(jìn)行輸入。
輸入到高速存儲單元C12的元信息數(shù)據(jù)mdt1、mdt2、...mdt6作為元信息文件進(jìn)行記錄。這些元信息文件能自由地進(jìn)行讀取和更新。
分散元信息數(shù)據(jù)并且將元信息中每個視頻圖像標(biāo)題的縮略圖等的圖像數(shù)據(jù)等作為縮略圖組sdt1到sdt6進(jìn)行記錄和存儲，也是可能的。
而且，如果大容量存儲介質(zhì)M1和驅(qū)動機(jī)制C13適于高速訪問，將元信息數(shù)據(jù)mdt1、mdt2、...mdt6與特征視頻圖像數(shù)據(jù)一起記錄和存儲到大容量存儲介質(zhì)M1上而忽略高速存儲單元C12是可能的。
在每個元信息數(shù)據(jù)不包含如縮略圖的圖像數(shù)據(jù)的情況下，使用半導(dǎo)體內(nèi)存如DRAM或閃存是可能的。
驅(qū)動機(jī)制C13在其中載入或內(nèi)置大容量存儲介質(zhì)M1，并且具有從大容量存儲介質(zhì)M1讀出作為回放信號的、根據(jù)記錄位置信息進(jìn)行訪問的視頻圖像信號的功能。
在大容量存儲介質(zhì)M1是光盤介質(zhì)如DVD或硬性磁盤介質(zhì)如HDD的情況下，提供有轉(zhuǎn)動驅(qū)動系統(tǒng)的機(jī)制如馬達(dá)和讀寫頭，并且它們響應(yīng)來自語義瀏覽器裝置C1的控制信號動作，以將從記錄/回放電路C11接收的記錄數(shù)據(jù)寫到大容量存儲介質(zhì)M1，或?qū)⑺x出的數(shù)據(jù)輸出到記錄/回放電路C11。
例如，在回放的情況下，當(dāng)前地址在回放期間根據(jù)來自讀/寫頭的輸出信號不斷地進(jìn)行輸出，并且一接收到從外界輸入的目標(biāo)地址，讀/寫頭就移動到該地址位置。
解密區(qū)C14通過記錄/回放電路C11接收經(jīng)過加密的特征視頻圖像數(shù)據(jù)，編輯特征視頻圖像，以產(chǎn)生解密特征視頻圖像數(shù)據(jù)，并且將解密特征視頻圖像數(shù)據(jù)輸出到語義瀏覽器裝置C1。解密區(qū)C14由一個通過未示出的中央處理器(微計算機(jī))讀取和執(zhí)行的程序構(gòu)成，并且響應(yīng)來自語義瀏覽器裝置C1的控制指令(沒有顯示)動作。
語義瀏覽器裝置C1由一個可通過未示出的中央處理器(微計算機(jī))讀取和執(zhí)行的程序構(gòu)成。語義瀏覽器裝置C1發(fā)出控制指令C1d到接收區(qū)C10，以控制視頻圖像信息的引入，并且發(fā)出一條控制指令到驅(qū)動機(jī)制C13，以控制對大容量存儲介質(zhì)M1的訪問。另外，語義瀏覽器裝置C1發(fā)出一條控制指令和信號C11a到記錄/回放電路C11，以通過記錄/回放電路C11間接控制高速存儲單元C12。
而且，語義瀏覽器裝置C1通過記錄/回放電路C11接受由接收區(qū)C10接收和分離的元信息數(shù)據(jù)和信號C11a，或者接受記錄在高速存儲單元C12的元信息和信號C11a。語義瀏覽器裝置C1還接受來自解密區(qū)C14的解密特征視頻圖像數(shù)據(jù)，并且根據(jù)從遠(yuǎn)端控制器C16接收的輸入信號C16a將特征視頻圖像或預(yù)覽視頻圖像顯示在顯示單元C15上。
預(yù)覽視頻圖像是具有預(yù)覽功能的視頻圖像，其中，連接從特征視頻圖像數(shù)據(jù)摘取的預(yù)定部分的所摘取視頻圖像。
另外，語義瀏覽器裝置C1發(fā)出控制指令C1e到記帳區(qū)C18，以執(zhí)行在回放特征視頻圖像或預(yù)覽視頻圖像之前的批量記帳，或執(zhí)行基于特征視頻圖像或預(yù)覽視頻圖像的回放時間或回放次數(shù)的計量價格(meter-rate)記帳。
語義瀏覽器裝置C1將預(yù)覽視頻圖像數(shù)據(jù)作為信號C1b臨時記錄到由閃存等構(gòu)成的預(yù)讀存儲器C20，并且以特定時間差重新讀取預(yù)覽視頻圖像。語義瀏覽器裝置C1因此執(zhí)行先進(jìn)先出的控制，從而能夠消除連接視頻圖像部分時的視頻圖像的中斷。
在上述描述中，元信息數(shù)據(jù)從接收區(qū)C10進(jìn)行接收，或從高速存儲單元C12進(jìn)行取出。然而，通過驅(qū)動機(jī)制C19作為信號M2a取出記錄在內(nèi)存棒M2上的元信息也是可能的。
也能將從接收區(qū)C10接收的元信息數(shù)據(jù)記錄和保存到能夠?qū)懙膬?nèi)存棒。
下面將參照圖2對語義瀏覽器裝置C1的結(jié)構(gòu)和操作進(jìn)行詳細(xì)描述。語義瀏覽器裝置C1(具體地說，語義瀏覽器軟件)包含GUI功能，并且適合用于通過廣播程序或通過因特網(wǎng)接受作為語義代碼的元信息數(shù)據(jù)，將元信息數(shù)據(jù)記錄到能高速訪問的介質(zhì)如硬盤或DVD，回放語義代碼和從特征視頻圖像自動產(chǎn)生的梗概模式、精彩場面模式或每個演員模式的預(yù)覽視頻圖像，回放特征視頻圖像，允許特征視頻圖像和預(yù)覽視頻圖像之間的瀏覽，和執(zhí)行上述各種類型的記帳。
如圖2所示，語義瀏覽器裝置C1具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、標(biāo)題引入裝置Pg3、標(biāo)題控制裝置Pg4、縮略圖回放裝置Pg5、特征視頻圖像回放控制裝置Pg6、預(yù)覽視頻圖像組織裝置Pg7、預(yù)覽視頻圖像回放控制裝置Pg8、游標(biāo)控制裝置Pg9，和預(yù)覽/特征視頻圖像切換裝置Pg10。
語義瀏覽器裝置C1還具有記帳控制裝置Pg11，用于控制執(zhí)行對特征視頻圖像或預(yù)覽視頻圖像的批量記帳或根據(jù)常規(guī)視頻圖像或預(yù)覽視頻圖像的回放時間或回放次數(shù)執(zhí)行計量價格記帳的記帳區(qū)C18(圖1)。
語義瀏覽器裝置C1還具有預(yù)讀控制裝置Pg12，用于執(zhí)行圖像數(shù)據(jù)的先進(jìn)先出控制，以通過消除所摘取場景連接部分視頻圖像的中斷，平滑視頻圖像的流動，其中，中斷現(xiàn)象可能在回放預(yù)覽視頻圖像時在DVD播放器等中不連續(xù)訪問扇區(qū)上的所摘取場景的情況下出現(xiàn)。預(yù)讀控制裝置Pg12控制預(yù)讀存儲器C20(圖1)。
語義瀏覽器裝置C1還具有標(biāo)記插入/檢索裝置Pg13，用于在特征視頻圖像或預(yù)覽視頻圖像的所需記錄位置插入一個標(biāo)記和執(zhí)行所插入標(biāo)記位置的回放。
現(xiàn)在將對上述每個裝置進(jìn)行描述。
瀏覽界面裝置Pg1在電源打開時或通過從OS(operating system，操作系統(tǒng))提供的激勵信號進(jìn)行觸發(fā)，并且在顯示單元C15(圖1)上顯示開始語義瀏覽屏幕(沒有顯示)，它是與開始對應(yīng)的缺省屏幕。然后，瀏覽界面裝置Pg1等待用戶使用開始語義瀏覽屏幕上的按鈕進(jìn)行輸入。當(dāng)用戶作出輸入后，瀏覽界面裝置Pg1提供各個裝置的界面，它們將在后面進(jìn)行描述。瀏覽界面裝置Pg1還執(zhí)行與各個裝置的數(shù)據(jù)發(fā)送/接受，并且發(fā)出控制指令。
在下面的描述中，將闡明瀏覽界面裝置Pg1的功能細(xì)節(jié)。
顯示屏幕組織裝置Pg2接收解密特征視頻圖像、預(yù)覽視頻圖像和縮略圖。顯示屏幕組織裝置Pg2從瀏覽界面裝置Pg1接收布局指令，并且使顯示單元C15顯示所指示構(gòu)成的屏幕。
解密特征視頻圖像從解密區(qū)C14進(jìn)行提供，并且縮略圖被從對其進(jìn)行存儲的大容量存儲介質(zhì)M1或高速存儲單元單元C12進(jìn)行提供。
預(yù)覽視頻圖像作為在尋位時間之前和之后或在由于出現(xiàn)等待時間的空閑時間間斷發(fā)送的視頻圖像，或作為通過預(yù)讀控制裝置Pg12消除空閑時間的視頻圖像，從大容量存儲介質(zhì)M1進(jìn)行接收。
標(biāo)題引入裝置Pg3根據(jù)由用戶輸入的視頻圖像標(biāo)題引入指令i1，從瀏覽界面裝置Pg1接收由瀏覽界面裝置Pg1組織的引入指令信息，并且將由接收區(qū)C10接收的特征視頻圖像(影片圖像和聲音)和縮略圖(靜止圖像)，以及元信息(數(shù)據(jù))引入其中。標(biāo)題引入裝置Pg3將特征視頻圖像和縮略圖記錄到大容量存儲介質(zhì)M1，并且將元信息存儲到高速存儲單元C12。
作為替換，標(biāo)題引入裝置Pg3將特征視頻圖像記錄到大容量存儲介質(zhì)M1，并且將其中含有縮略圖的元信息存儲到高速存儲單元C12。
所記錄或存儲的元信息通過瀏覽界面裝置Pg1進(jìn)行讀出。
來自任何提供系統(tǒng)，如CATV、因特網(wǎng)廣播或數(shù)據(jù)包系統(tǒng)，和無線廣播節(jié)目如地面波廣播或衛(wèi)星廣播的視頻圖像都可以用作視頻圖像標(biāo)題。
標(biāo)題控制裝置Pg4將一個觸發(fā)信號發(fā)送到縮略圖回放裝置Pg5，以指示顯示視頻圖像標(biāo)題。標(biāo)題控制裝置Pg4通過瀏覽界面裝置Pg1接收來自用戶的視頻圖像標(biāo)題選擇輸入i2，并且將所選標(biāo)題信息發(fā)送到預(yù)覽視頻圖像組織裝置Pg7。
一接收到來自標(biāo)題控制裝置Pg4的觸發(fā)信號，縮略圖回放裝置Pg5就讀出記錄在大容量存儲介質(zhì)M1或高速存儲單元C12上的縮略圖，并且將縮略圖發(fā)送到顯示屏幕組織裝置Pg2。
特征視頻圖像回放控制裝置Pg6從瀏覽界面裝置Pg1接收特征視頻圖像回放指令，或通過預(yù)覽/特征視頻圖像切換裝置Pg10接收來自用戶的預(yù)覽/特征視頻圖像切換指令i43，并且從游標(biāo)控制裝置Pg9接收當(dāng)前或指定回放位置信息。在此之后，特征視頻圖像回放控制裝置Pg6向驅(qū)動機(jī)制C13發(fā)送一個用于控制從與指定回放位置對應(yīng)的時間代碼(即，記錄位置信息)回放特征視頻圖像的信號。
預(yù)覽視頻圖像組織裝置Pg7從標(biāo)題控制裝置Pg4接收所選標(biāo)題信息，然后通過瀏覽界面裝置Pg1接收來自用戶的預(yù)覽視頻圖像模式指令i31，并且還從瀏覽界面裝置Pg1接收所選視頻圖像標(biāo)題的語義代碼(即，元信息)。根據(jù)其中所提供的預(yù)定視頻圖像摘取條件，預(yù)覽視頻圖像組織裝置Pg7選擇構(gòu)成視頻圖像標(biāo)題的相應(yīng)模式的所摘取視頻圖像(鏡頭或場景)。預(yù)覽視頻圖像組織裝置Pg7將時間碼(即，記錄位置信息)發(fā)送到預(yù)覽視頻圖像回放控制裝置Pg8，并且將記帳數(shù)據(jù)發(fā)送到記帳控制裝置Pg11。
視頻圖像摘取條件根據(jù)預(yù)定算法從“閾值”導(dǎo)出。預(yù)定算法包含在預(yù)覽視頻圖像組織裝置Pg7中。
閾值從瀏覽界面裝置Pg1提供的語義代碼中取出。通常，缺省值用作“閾值”。然而，如果“閾值”由用戶進(jìn)行了更新，所更新的“閾值”被取出并使用。
預(yù)覽視頻圖像回放控制裝置Pg8從預(yù)覽視頻圖像組織裝置Pg7接收時間代碼，然后通過預(yù)覽/特征視頻圖像切換裝置Pg10接收來自用戶的預(yù)覽/特征視頻圖像切換指令i43，并且從游標(biāo)控制裝置Pg9接收當(dāng)前或指定時間代碼。在此之后，預(yù)覽視頻圖像回放控制裝置Pg8向驅(qū)動機(jī)制C13順序發(fā)送一個用于從指定時間代碼部分回放特征視頻圖像的控制信號。
游標(biāo)控制裝置Pg9通過瀏覽界面裝置Pg1從用戶接收游標(biāo)移動輸入i24，并且還從瀏覽界面裝置Pg1接收語義代碼中每個鏡頭或每個場景的記錄位置信息。游標(biāo)控制裝置Pg9將游標(biāo)位置的場景或鏡頭的時間代碼發(fā)送到預(yù)覽視頻圖像回放控制裝置Pg8或特征視頻圖像回放控制裝置Pg6。
預(yù)覽/特征視頻圖像切換裝置Pg10通過瀏覽界面裝置Pg1從用戶接收預(yù)覽/特征視頻圖像切換指令i43，并且將當(dāng)前時間代碼發(fā)送到特征視頻圖像回放控制裝置Pg6或預(yù)覽視頻圖像回放控制裝置Pg8。
記帳控制裝置Pg11從特征視頻圖像回放控制裝置Pg6接收對特征視頻圖像的記帳數(shù)據(jù)，或從預(yù)覽視頻圖像組織裝置Pg7接收對預(yù)覽視頻圖像的記帳數(shù)據(jù)。根據(jù)所接收數(shù)據(jù)的內(nèi)容，記帳控制裝置Pg11向記帳區(qū)C18發(fā)送一個控制指令，以對特征視頻圖像或預(yù)覽視頻圖像執(zhí)行批量記帳或計量價格記帳。
除上述處理之外，瀏覽界面裝置Pg1將所接受的語義代碼(包括缺省“閾值”)存儲到緩沖內(nèi)存。而且，在視頻圖像瀏覽觀看階段Ph4一接收到來自用戶的“閾值”更新輸入i44，瀏覽界面裝置Pg1就更新臨時存儲在緩沖內(nèi)存中的“閾值”。
除上述處理之外，一接收到來自用戶的購買指令和觀看階段指令輸入i32，瀏覽界面裝置Pg1就通過特征視頻圖像回放控制裝置Pg6將記帳數(shù)據(jù)發(fā)送到記帳控制裝置Pg11，并且將控制指令發(fā)送到特征視頻圖像回放控制裝置Pg6、預(yù)覽視頻圖像回放控制裝置Pg8、游標(biāo)控制裝置Pg9和預(yù)覽/特征視頻圖像切換裝置Pg10，以為視頻圖像瀏覽提供屏幕或為特征視頻圖像全部顯示回放提供屏幕。
在特征視頻圖像全部顯示回放期間一接收到來自用戶的瀏覽開始指令i5，瀏覽界面裝置Pg1就將控制指令發(fā)送到特征視頻圖像回放控制裝置Pg6、預(yù)覽視頻圖像回放控制裝置Pg8、游標(biāo)控制裝置Pg9和預(yù)覽/特征視頻圖像切換裝置Pg10，以為視頻圖像瀏覽提供屏幕。
一接收到來自用戶的特征視頻圖像全部顯示指令i45，瀏覽界面裝置Pg1就將控制指令發(fā)送到顯示屏幕組織裝置Pg2，以提供特征視頻圖像全屏顯示。
現(xiàn)在對視頻圖像回放設(shè)備VP1的操作進(jìn)行描述。
當(dāng)用戶使用開始語義瀏覽屏幕上的按鈕，并且輸入對來自廣播節(jié)目或網(wǎng)絡(luò)系統(tǒng)的視頻圖像的引入指令i1時，瀏覽界面裝置Pg1接收該指令，并且將屏幕更新到視頻圖像標(biāo)題引入記錄階段Ph1的語義瀏覽屏幕(如圖3和4所示的控制屏幕G1)。然后，瀏覽界面裝置Pg1將視頻圖像標(biāo)題引入指令信息發(fā)送到標(biāo)題引入裝置Pg3。
一接收到視頻圖像標(biāo)題引入指令信息，標(biāo)題引入裝置Pg3就將控制信號發(fā)送到接收區(qū)C10，并且將由接收區(qū)C10接收的特征視頻圖像(影片圖像、聲音和縮略圖(靜止圖像))，和元信息(數(shù)據(jù))引入其中。標(biāo)題引入裝置Pg3將特征視頻圖像和縮略圖發(fā)送到驅(qū)動機(jī)制C13，并且將它們記錄到大容量存儲介質(zhì)M1。標(biāo)題引入裝置Pg3將元信息發(fā)送并記錄到高速存儲單元C12。
例如，當(dāng)重復(fù)視頻圖像標(biāo)題的上述引入時，視頻圖像標(biāo)題六種類型的特征視頻圖像vdt1到vdt6和它們各自的縮略圖sdt1到sdt6存儲到大容量存儲介質(zhì)M1上。
視頻圖像標(biāo)題六種類型的元信息mdt1到mdt6記錄在高速存儲單元C12中。元信息并不一定與特征視頻圖像一起進(jìn)行進(jìn)入，而可以在與引入特征視頻圖像的引入不同的時候或通過不同的系統(tǒng)進(jìn)行引入。
在元信息中也能包含縮略圖。在這種情況下，縮略圖存儲到高速存儲單元C12中。
然后，當(dāng)用戶通過來自視頻圖像標(biāo)題引入記錄階段Ph1的屏幕G1(圖3)的遠(yuǎn)端控制器輸入指示顯示視頻圖像標(biāo)題時，瀏覽界面裝置Pg1接受該指令，然后轉(zhuǎn)到視頻圖像標(biāo)題選擇階段Ph2，并且將一個指令發(fā)送到標(biāo)題控制裝置Pg4。標(biāo)題控制裝置Pg4激勵縮略圖回放裝置Pg5。
縮略圖回放裝置Pg5驅(qū)動驅(qū)動機(jī)制C13，然后讀出記錄在大容量存儲介質(zhì)M1上的縮略圖sdt1到sdt6，并且將縮略圖sdt1到sdt6發(fā)送到顯示屏幕組織裝置Pg2。在縮略圖sdt1到sdt6記錄在高速存儲單元C12中的情況下，縮略圖回放裝置Pg5從高速存儲單元C12讀出縮略圖，并且將它們發(fā)送到顯示屏幕組織裝置Pg2。
顯示屏幕組織裝置Pg2將所輸入的縮略圖sdt1到sdt6分發(fā)到各個窗口，并且通過瀏覽界面裝置Pg1將它們顯示到顯示單元C15上。采用這種方式，屏幕以各個視頻圖像標(biāo)題的縮略圖(靜止圖像)出現(xiàn)在六個窗口內(nèi)的方式進(jìn)行顯示。該屏幕是視頻圖像標(biāo)題選擇階段Ph2的屏幕(即，如圖3、4和6所示的屏幕G2)。
然后，當(dāng)用戶從該屏幕輸入對所需視頻圖像標(biāo)題的選擇輸入i2時，瀏覽界面裝置Pg1接收所選標(biāo)題信息，并且在屏幕上保持并顯示所選標(biāo)題信息。
當(dāng)用戶(使用圖6中顯示的“梗概”、“精彩場面”等按鈕)輸入那個視頻圖像標(biāo)題的預(yù)覽視頻圖像模式的指令i31時，瀏覽界面裝置Pg1轉(zhuǎn)到預(yù)覽視頻圖像模式選擇階段Ph3。然后，瀏覽界面裝置Pg1根據(jù)所選標(biāo)題信息從高速存儲單元C12將對應(yīng)視頻圖像標(biāo)題的元信息引入其中，并且將與指定模式相關(guān)的數(shù)據(jù)(例如，對該視頻圖像標(biāo)題準(zhǔn)備兩個演員的演員模式)和視頻圖像標(biāo)題的介紹性短文本(文本信息)顯示到顯示單元C15上。視頻圖像標(biāo)題可以為每個模式進(jìn)行提供。
該屏幕是預(yù)覽視頻圖像模式選擇階段Ph3的屏幕(即如圖3、4和7所示的屏幕G3)。
在該屏幕中，顯示有模式選擇/顯示按鈕(圖7所示的“梗概”、“精彩場面”等按鈕)和其他按鈕(例如，圖7所示的“S.圖”按鈕或控制按鈕)，一個窗口(如圖7所示顯示sdt1的區(qū)域)和一段介紹性短文本(圖7所示的txt1)。
在此階段，尚未開始回放預(yù)覽視頻圖像。視頻圖像標(biāo)題的靜止圖像顯示在屏幕上的窗口內(nèi)。模式選擇/顯示按鈕中，與在前階段指定的模式對應(yīng)的按鈕被高亮顯示。
然后，當(dāng)用戶操作控制按鈕，以進(jìn)行開始回放預(yù)覽視頻圖像的輸入時，開始該模式下的預(yù)覽視頻圖像的回放，并且預(yù)覽視頻圖像的影片圖像在該窗口內(nèi)進(jìn)行顯示。
通常，對預(yù)覽視頻圖像的回放不執(zhí)行記帳。然而執(zhí)行依賴于系統(tǒng)的記帳是可能的。
當(dāng)操作在模式選擇/顯示按鈕中不同于與在前階段指定的模式對應(yīng)的高亮顯示按鈕的按鈕時，在前階段指定的模式被取消，并且自動切換到新的操作模式。因此，也可能進(jìn)行后面模式下的預(yù)覽視頻圖像的回放。
當(dāng)用戶由此觀看視頻圖像標(biāo)題的預(yù)覽視頻圖像，然后決定購買視頻圖像標(biāo)題的特征視頻圖像，并且通過使用相應(yīng)按鈕輸入用于指定視頻圖像瀏覽觀看階段Ph4或特征視頻圖像全屏觀看階段Ph5作為觀看階段的輸入i32時，階段從預(yù)覽視頻圖像模式選擇階段Ph3轉(zhuǎn)到視頻圖像瀏覽觀看階段Ph4或特征視頻圖像全屏觀看階段Ph5。
例如，為了在決定購買時轉(zhuǎn)到視頻圖像瀏覽觀看階段Ph4，用戶操作相應(yīng)按鈕(在圖7中，“s.圖”按鈕)。作為替換，為了在決定購買時轉(zhuǎn)到特征視頻圖像全屏觀看階段Ph5，用戶操作相應(yīng)按鈕(在圖7中，“面具(mask)”按鈕)。
當(dāng)作出向視頻圖像瀏覽觀看階段Ph4的轉(zhuǎn)換時，將顯示視頻圖像瀏覽觀看階段Ph4的語義瀏覽屏幕(圖3、4和8所示的屏幕G4)。該屏幕G4包括一個所選模式確認(rèn)按鈕、一個用于顯示預(yù)覽特征圖像或特征視頻圖像的窗口、整個特征視頻圖像的語義圖、預(yù)覽視頻圖像的位置，和一個游標(biāo)。該屏幕G4顯示在顯示單元C15上。
下面將參照圖5的流程對視頻圖像瀏覽觀看階段Ph4的操作進(jìn)行描述。
瀏覽界面裝置Pg1將選擇模式信息和元信息發(fā)送到預(yù)覽視頻圖像組織裝置Pg7。預(yù)覽視頻圖像組織裝置Pg7從元信息讀出閾值(步驟S1)，并且讀出每個鏡頭或每個場景的索引值(步驟S2)。預(yù)覽視頻圖像組織裝置Pg7從鏡頭或場景當(dāng)中摘取與閾值匹配的鏡頭或場景(步驟S3)，并且登記所摘取鏡頭或所摘取場景(步驟S4)。該處理對所有鏡頭或場景進(jìn)行執(zhí)行(步驟S5)。
瀏覽界面裝置Pg1綜合從元信息取出的各個鏡頭或場景的索引值(步驟S6)，并且在屏幕上將綜合結(jié)果作為視頻圖像標(biāo)題的語義圖進(jìn)行顯示(步驟S7)。
然后，在語義圖中與由預(yù)覽視頻圖像組織裝置Pg7登記的每個所摘取場景或所摘取鏡頭對應(yīng)的位置上置放一個標(biāo)志(步驟S8)。同時，在起始位置上顯示可滑動游標(biāo)。
如果用戶將游標(biāo)移動到語義圖上的所需位置，語義圖上的位置由游標(biāo)控制裝置Pg9進(jìn)行指定(步驟S9)。如果用戶不移動游標(biāo)，起始位置被認(rèn)作指定位置。
然后，瀏覽界面裝置Pg1等待根據(jù)來自用戶的回放開始指令i41開始回放預(yù)覽視頻圖像或開始回放特征視頻圖像(步驟S10)。
如果根據(jù)回放開始指令i41輸入用于回放特征視頻圖像的指令，瀏覽界面裝置Pg1將一個控制信號發(fā)送到特征視頻圖像回放控制裝置Pg6，并且在游標(biāo)位置開始回放解密特征視頻圖像。同時，特征視頻圖像回放控制裝置Pg6將一個控制信號發(fā)送到記帳控制裝置Pg11。根據(jù)該控制指令，記帳控制裝置Pg11指示記帳區(qū)C18執(zhí)行記帳處理，從而對特征視頻圖像的這次回放執(zhí)行批量記帳或計量價格記帳(步驟S11)。
然后，在監(jiān)控特征視頻圖像是否已經(jīng)結(jié)束(步驟S12)并且監(jiān)控預(yù)覽/特征視頻圖像切換指令i43是否輸入(步驟S13)的同時，在步驟S11繼續(xù)回放特征視頻圖像。
如果特征視頻圖像結(jié)束(步驟S12)，則操作結(jié)束。
如果輸入預(yù)覽/特征視頻圖像切換指令i43(步驟S13)，預(yù)覽/特征視頻圖像切換裝置Pg10確定它是在當(dāng)前位置之后回放預(yù)覽視頻圖像的指令，并且指示預(yù)覽視頻圖像回放控制裝置Pg8轉(zhuǎn)到步驟S16(步驟S14)。因此，執(zhí)行從特征視頻圖像到預(yù)覽視頻圖像的瀏覽。
另一方面，如果在步驟S10根據(jù)回放開始指令i41輸入預(yù)覽回放開始指令i41，預(yù)覽視頻圖像組織裝置Pg7將離游標(biāo)位置最近的所摘取鏡頭的時間代碼發(fā)送到預(yù)覽視頻圖像回放控制裝置Pg8，其中，時間代碼從元信息中進(jìn)行讀出。預(yù)覽視頻圖像回放控制裝置Pg8將一個用于指示回放該時間代碼的場景的指令發(fā)送到驅(qū)動機(jī)制C13，并且還將一個激勵信號發(fā)送到解密區(qū)C14。
由驅(qū)動機(jī)制C13讀出并回放的信號由解密區(qū)C14進(jìn)行解密，并且由預(yù)讀控制裝置Pg12進(jìn)行緩沖。然后該信號由顯示屏幕組織裝置Pg2組織為窗口大小，并且通過瀏覽界面裝置Pg1顯示在顯示單元C15的屏幕的窗口內(nèi)(步驟S16)。
如果預(yù)覽視頻圖像的公開級別適于記帳，預(yù)覽視頻圖像組織裝置Pg7將預(yù)覽記帳信號發(fā)送到記帳控制裝置Pg11。根據(jù)該預(yù)覽記帳信號，記帳控制裝置Pg11指示記帳區(qū)C18執(zhí)行記帳處理(步驟S16)。
然后，在監(jiān)控預(yù)覽視頻圖像是否已經(jīng)結(jié)束(步驟S17)并且還監(jiān)控預(yù)覽/特征視頻圖像切換指令i43是否輸入(步驟S18)的同時，在步驟S16繼續(xù)回放預(yù)覽視頻圖像。
如果預(yù)覽視頻圖像結(jié)束(步驟S17)，則操作結(jié)束。
如果輸入預(yù)覽/特征視頻圖像切換指令i43(步驟S18)，預(yù)覽/特征視頻圖像切換裝置Pg10確定它是在當(dāng)前位置之后回放特征視頻圖像的指令，并且轉(zhuǎn)到步驟S11，以將當(dāng)前時間代碼輸入到特征視頻圖像回放控制裝置Pg6(步驟S19)。
同時，停止預(yù)覽視頻圖像組織裝置Pg7的操作。在此之后，繼續(xù)執(zhí)行特征視頻圖像的回放。
因此，執(zhí)行從預(yù)覽視頻圖像到特征視頻圖像的瀏覽。
如果用戶在上述過程中輸入游標(biāo)移動指令i42，將執(zhí)行中斷處理，以進(jìn)入步驟S9。游標(biāo)控制裝置Pg9在回放特征視頻圖像的情況下將與那個位置對應(yīng)的鏡頭的時間代碼發(fā)送到特征視頻圖像回放控制裝置Pg6，或者在回放預(yù)覽視頻圖像的情況下將時間代碼發(fā)送到預(yù)覽視頻圖像回放控制裝置Pg8。
特征視頻圖像回放控制裝置Pg6向驅(qū)動機(jī)制C13發(fā)送一個從所更新時間代碼回放的指令。由于正在回放特征視頻圖像，沒有必要將激勵信號重新發(fā)送到解密區(qū)C14。隨后的特征視頻圖像回放操作類似于上述操作。
作為替換，預(yù)覽視頻圖像回放控制裝置Pg8向驅(qū)動機(jī)制C13發(fā)送一個從離所更新時間代碼最近的所摘取鏡頭回放的指令。隨后的預(yù)覽視頻圖像回放操作類似于上述操作。
本實施例的視頻圖像回放設(shè)備VP1的結(jié)構(gòu)和操作如上所述。下一步，將對屏幕控制設(shè)備和方法的一個實施例進(jìn)行描述。
本實施例的屏幕控制設(shè)備包括在前面實施例中所描述的，由計算機(jī)可讀/執(zhí)行程序構(gòu)成的語義瀏覽器裝置C1和用于讀取和執(zhí)行該程序的微計算機(jī)(沒有顯示)。
語義瀏覽器裝置C1作為第二屏幕顯示包括連續(xù)視頻圖像的特征視頻圖像，并且作為第一屏幕顯示包括通過摘取特征視頻圖像的預(yù)定部分而獲取的多個所摘取視頻圖像集的預(yù)覽視頻圖像。
在第一屏幕中，至少顯示有第一視頻圖像顯示區(qū)域、第一視頻圖像變化顯示區(qū)域和第一切換輸入?yún)^(qū)域。在這種情況下，顯示屏幕組織裝置Pg2根據(jù)由圖2所示的預(yù)覽視頻圖像組織裝置Pg7和預(yù)覽視頻圖像回放控制裝置Pg8選擇和回放的結(jié)果在第一視頻圖像顯示區(qū)域顯示預(yù)覽視頻圖像。
在第一視頻圖像變化顯示區(qū)域內(nèi)，瀏覽界面裝置Pg1布置并顯示顯現(xiàn)特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖和附加在視頻圖像變化圖上位于與每個所摘取視頻圖像對應(yīng)的視頻圖像記錄位置的標(biāo)志。
另外，在第一視頻圖像變化顯示區(qū)域內(nèi)，當(dāng)瀏覽界面裝置Pg1發(fā)送信息到游標(biāo)控制裝置Pg9時，一個表示當(dāng)前所顯示預(yù)覽視頻圖像的當(dāng)前視頻圖像記錄位置的游標(biāo)附加在視頻圖像變化圖上，并且隨著時間流逝不斷更新。
該游標(biāo)移動到任意位置，以響應(yīng)來自用戶的游標(biāo)移動輸入i42。具體地說，當(dāng)瀏覽界面裝置Pg1將游標(biāo)移動信息發(fā)送到游標(biāo)控制裝置Pg9，以響應(yīng)游標(biāo)移動輸入i42時，游標(biāo)控制裝置Pg9根據(jù)該游標(biāo)移動信息控制當(dāng)前位置。
而且，瀏覽界面裝置Pg1在第一切換輸入?yún)^(qū)域內(nèi)顯示第一按鈕，該按鈕用于輸入一個指令，來在指定時刻停止和保留當(dāng)前視頻圖像記錄位置的同時，從第一屏幕切換到在連續(xù)視頻圖像顯示階段顯示的第二屏幕。該按鈕的操作結(jié)果由預(yù)覽/特征視頻圖像切換裝置Pg10進(jìn)行處理。
類似地，在第二屏幕中，至少顯示有第二視頻圖像顯示區(qū)域、第二視頻圖像變化顯示區(qū)域和第二切換輸入?yún)^(qū)域。在這種情況下，顯示屏幕組織裝置Pg2根據(jù)由特征視頻圖像回放控制裝置Pg6回放的結(jié)果在第二視頻圖像顯示區(qū)域內(nèi)顯示特征視頻圖像。
在第二視頻圖像變化顯示區(qū)域內(nèi)，瀏覽界面裝置Pg1顯示顯現(xiàn)特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖。
根據(jù)用戶指令，能夠在顯示在第二視頻圖像變化顯示區(qū)域內(nèi)的視頻圖像變化圖中與每個所摘取視頻圖像對應(yīng)的視頻圖像記錄位置上附加并顯示一個標(biāo)志。
另外，在第二視頻圖像變化顯示區(qū)域內(nèi)，當(dāng)瀏覽界面裝置Pg1發(fā)送信息到游標(biāo)控制裝置Pg9時，一個表示當(dāng)前所顯示特征視頻圖像的當(dāng)前視頻圖像記錄位置的游標(biāo)附加在視頻圖像變化圖上，并且隨著時間流逝不斷更新。
該游標(biāo)移動到任意位置，以響應(yīng)來自用戶的游標(biāo)移動輸入i42。具體地說，當(dāng)瀏覽界面裝置Pg1將游標(biāo)移動信息發(fā)送到游標(biāo)控制裝置Pg9，以響應(yīng)游標(biāo)移動輸入i42時，游標(biāo)控制裝置Pg9根據(jù)該游標(biāo)移動信息控制當(dāng)前位置。
而且，瀏覽界面裝置Pg1在第二切換輸入?yún)^(qū)域內(nèi)顯示第二按鈕，該按鈕用于輸入一個指令，來在指定時刻停止和保留當(dāng)前所顯示特征視頻圖像的記錄位置的同時，從第二屏幕切換到顯示預(yù)覽視頻圖像的第一屏幕。該按鈕的操作結(jié)果由預(yù)覽/特征視頻圖像切換裝置Pg10進(jìn)行處理。
采用這種方式，瀏覽界面裝置Pg1根據(jù)在第一按鈕或第二按鈕顯示期間輸入的每個指令，在所摘取視頻圖像顯示階段和特征視頻圖像之間進(jìn)行切換，從而顯示第一屏幕或第二屏幕。
采用上述構(gòu)成，在所摘取視頻圖像顯示階段，特征視頻圖像的視頻圖像記錄位置的變化通過顯示在第一視頻圖像變化顯示區(qū)域內(nèi)的視頻圖像變化圖進(jìn)行顯示，從而提供整個特征視頻圖像的結(jié)構(gòu)。通過在與每個所摘取視頻圖像對應(yīng)的視頻圖像記錄位置上將標(biāo)志附加在視頻圖像變化圖上，各個所摘取視頻圖像在整個特征視頻圖像中的關(guān)系得以清晰。
另外，通過視頻圖像變化圖上游標(biāo)的自動移動，隨著正在第一視頻圖像顯示區(qū)域內(nèi)顯示的所摘取視頻圖像的時間流逝，不斷更新移動當(dāng)前位置，從而視頻圖像變化圖上當(dāng)前位置的移動狀態(tài)得以清晰。
而且，如果游標(biāo)移動到視頻圖像變化圖上的任意位置，那么參考與視頻圖像變化圖上的那個位置對應(yīng)的鏡頭或場景的記錄位置信息，并且在第一視頻圖像顯示區(qū)域內(nèi)順序回放離記錄位置信息最近的所摘取視頻圖像。
當(dāng)操作第一按鈕而輸入一個指令時，停止并保持由游標(biāo)指示的當(dāng)前位置，并且從預(yù)覽視頻圖像的當(dāng)前所顯示第一屏幕切換到顯示特征視頻圖像的第二屏幕。因此，執(zhí)行與所保持游標(biāo)位置對應(yīng)的特征視頻圖像的回放和顯示。
類似地，在連續(xù)圖像顯示階段，特征視頻圖像的視頻圖像記錄位置的變化通過顯示在第二視頻圖像變化顯示區(qū)域內(nèi)的視頻圖像變化圖進(jìn)行顯示，從而提供整個特征視頻圖像的結(jié)構(gòu)。
另外，通過視頻圖像變化圖上游標(biāo)的自動移動，隨著正在第二視頻圖像顯示區(qū)域內(nèi)顯示的特征視頻圖像的時間流逝，不斷更新移動當(dāng)前位置，從而視頻圖像變化圖上當(dāng)前位置的移動狀態(tài)得以清晰。
而且，如果游標(biāo)移動到視頻圖像變化圖上的任意位置，那么參考與視頻圖像變化圖上的那個位置對應(yīng)的鏡頭或場景的記錄位置信息，并且在第二視頻圖像顯示區(qū)域內(nèi)順序回放對應(yīng)特征視頻圖像的記錄位置之后的視頻圖像。
當(dāng)操作第二按鈕而輸入一個指令時，停止并保持由游標(biāo)指示的當(dāng)前位置，并且從當(dāng)前所顯示的第二屏幕切換到顯示預(yù)覽視頻圖像的第一屏幕。因此，執(zhí)行離所保持游標(biāo)位置最近的所摘取視頻圖像的回放和顯示。
采用這種方式，當(dāng)操作第一按鈕或第二按鈕而輸入指令時，在停止并保持那個時刻由游標(biāo)指示的當(dāng)前位置的同時，在顯示預(yù)覽視頻圖像的第一屏幕和顯示特征視頻圖像的第二屏幕之間進(jìn)行切換。
上面對本發(fā)明的視頻圖像回放設(shè)備VP1的屏幕控制的結(jié)構(gòu)和方法進(jìn)行了描述。下面將對主屏幕的結(jié)構(gòu)進(jìn)行描述。
圖4是示出視頻圖像回放設(shè)備VP1的每個操作階段和每個控制屏幕的結(jié)構(gòu)的說明圖。圖6到8示出示例性主屏幕。
如圖4所示，在視頻圖像標(biāo)題引入記錄階段Ph1，顯示用于內(nèi)容歸檔的控制屏幕G1。當(dāng)引入完所需視頻圖像標(biāo)題時，將切換到視頻圖像標(biāo)題選擇階段Ph2。
圖6示出圖4中在視頻圖像標(biāo)題選擇階段Ph2顯示的控制屏幕G2的一個示例。在屏幕的中央有六個窗口，其中顯示各個視頻圖像標(biāo)題的縮略圖sdt1到sdt6。通過用光標(biāo)指向和單擊每個窗口的上端部分或通過十鍵輸入，執(zhí)行所需視頻圖像標(biāo)題的選擇。
在圖6的顯示中，具有縮略圖sdt3的第三視頻圖像標(biāo)題被選擇。
在窗口內(nèi)雙擊將產(chǎn)生在該階段Ph2生成回放開始輸入i41的效果。因此，通過瀏覽界面裝置Pg1的處理，將立即切換到特征視頻圖像全屏觀看階段Ph5，并且開始該視頻圖像標(biāo)題的全屏回放。
如果通過單擊窗口的上端部分選擇視頻圖像標(biāo)題，然后選擇上面第二行一個預(yù)覽視頻圖像模式選擇按鈕，將在確認(rèn)間隔之后自動切換到預(yù)覽視頻圖像模式選擇階段Ph3。
作為替換，能夠以預(yù)設(shè)形式構(gòu)成預(yù)覽視頻圖像模式。在這種情況下，一選擇視頻圖像標(biāo)題，就自動切換到預(yù)覽視頻圖像模式選擇階段Ph3。
圖7示出圖4中在預(yù)覽視頻圖像模式選擇階段Ph3顯示的語義瀏覽屏幕G3的一個示例。當(dāng)“面具”選作視頻圖像標(biāo)題時，顯示該屏幕。該視頻圖像標(biāo)題的名稱“面具”顯現(xiàn)在最上行，并且模式選擇/顯示按鈕(圖7中的“梗概”、“精彩場面”等)排列在第二和第三行的左邊。
而且該視頻圖像標(biāo)題“面具”的縮略圖sdt1顯現(xiàn)在第三行右邊的窗口內(nèi)，并且該視頻圖像標(biāo)題“面具”的介紹性文本txt1出現(xiàn)在底行。
在該階段，尚未開始回放預(yù)覽視頻圖像，并且顯示在屏幕窗口中的縮略圖sdt1是視頻圖像標(biāo)題“面具”的靜止圖。模式選擇/顯示按鈕中，與在視頻圖像標(biāo)題選擇階段Ph2指定的模式對應(yīng)的按鈕，即圖7中的“梗概”按鈕被高亮顯示。
模式選擇/顯示按鈕自身具有顯示效果。在視頻圖像標(biāo)題選擇階段Ph2選擇的模式的按鈕發(fā)亮，因此，用戶可以確認(rèn)所選模式。
然后，當(dāng)用戶操作屏幕窗口內(nèi)的控制按鈕，以作出開始回放預(yù)覽視頻圖像的輸入時，開始回放該模式的預(yù)覽視頻圖像，并且視頻圖像標(biāo)題“面具”的“梗概”模式的預(yù)覽視頻圖像的影片圖像顯示在該窗口內(nèi)。
如果在回放預(yù)覽視頻圖像期間在窗口內(nèi)單擊，預(yù)覽視頻圖像將在整個屏幕上進(jìn)行顯示。如果在該全屏回放期間在屏幕內(nèi)單擊，窗口將重新出現(xiàn)，并恢復(fù)最初屏幕。
通常，對預(yù)覽視頻圖像的該回放不執(zhí)行記帳。然而，能夠采用執(zhí)行記帳的系統(tǒng)。
當(dāng)操作模式選擇/顯示按鈕中與高亮顯示“梗概”不同的其它按鈕時，在前階段指定的“梗概”模式被取消，并且自動切換到最新操作的“高亮顯示”模式。因此，在后面模式下回放預(yù)覽視頻圖像成為可能。
采用這種方式，模式可以通過操作模式選擇/顯示按鈕進(jìn)行改變。窗口中縮略圖的顯示可以為每個模式進(jìn)行改變。
當(dāng)用戶由此在該屏幕上觀看所需模式的預(yù)覽視頻圖像，或觀看各種模式的預(yù)覽視頻圖像，然后決定購買，并操作“S1.圖”按鈕時，屏幕將轉(zhuǎn)到視頻圖像瀏覽觀看階段Ph4。
作為替換，當(dāng)用戶決定購買并操作“面具”按鈕時，將產(chǎn)生在該階段Ph3生成回放開始輸入i41(圖2)的效果。通過瀏覽界面裝置Pg1的處理，將立即切換到特征視頻圖像全屏觀看階段Ph5，并且開始該視頻圖像標(biāo)題的全屏回放。
當(dāng)切換到視頻圖像瀏覽觀看階段Ph4時，顯示如圖8所示的、視頻圖像瀏覽觀看階段Ph4的語義瀏覽屏幕G4。圖9是示出語義瀏覽屏幕G4中的語義圖的說明圖。
語義瀏覽屏幕G4的最上行是標(biāo)題顯示區(qū)，其中顯示內(nèi)容“面具”的標(biāo)題名稱、類型和日期，并提供有“后退”按鈕。第二行的左邊和第三行的左邊是對每個模式Md4的回放按鈕區(qū)，其中提供有用于預(yù)覽模式的“梗概”、“精彩場面”、“關(guān)鍵詞”、“演員A1”、“演員A2”和“演員A3”按鈕和用于回放特征視頻圖像的“整個視頻圖像”按鈕。通過操作這些按鈕，對狀態(tài)顯示和回放區(qū)域進(jìn)行限制。例如，通過操作“梗概”按鈕，顯示參照圖20A到20C描述的概要視頻圖像。通過操作“演員A1”、“演員A2”和“演員A3”按鈕選擇性地顯示參照圖21A到21G描述的、對各個演員的精彩場面摘要的概要視頻圖像。
第二行的右邊是影片播放按鈕區(qū)，其中排列五個用于影片控制的功能按鈕。這些按鈕用于選擇各個功能如回放。這些按鈕將從最左邊按鈕開始依次進(jìn)行描述。
“回放”按鈕如果在停止期間選擇并執(zhí)行該按鈕，將在回放階段的開始處開始回放。如果在暫停期間選擇并執(zhí)行該按鈕，將在暫停時間點上開始回放。
“暫?！卑粹o如果在回放期間選擇并執(zhí)行該按鈕，顯示影片在那個時間點上的靜止圖像。
“停止”按鈕如果在回放或暫停期間選擇并執(zhí)行該按鈕，顯示標(biāo)題的靜止圖像(起始狀態(tài))。
“返回”按鈕如果在回放期間選擇并執(zhí)行該按鈕，將返回到當(dāng)前所回放場景的開始處重新開始回放。如果多次單擊該執(zhí)行按鈕，將回退與單擊次數(shù)對應(yīng)的場景，并在所到達(dá)場景的開始處開始回放。在預(yù)覽模式的情況下，場景經(jīng)常是不連續(xù)的，并且對包含在該模式下的場景進(jìn)行計數(shù)。如果在暫停期間選擇并執(zhí)行該按鈕，將按照與回放情況下相同的規(guī)則移動所顯示場景，并且顯示相應(yīng)場景開始處的靜止圖像。如果在停止期間選擇并執(zhí)行該按鈕，不執(zhí)行任何操作。
“快進(jìn)”按鈕如果在回放期間選擇并執(zhí)行該按鈕，將跳到當(dāng)前所回放場景的下一場景開始處開始回放。如果多次單擊該執(zhí)行按鈕，將跳過與單擊次數(shù)對應(yīng)的場景，并在所到達(dá)場景的開始處開始回放。在預(yù)覽模式的情況下，場景經(jīng)常是不連續(xù)的，并且對包含在該模式下的場景進(jìn)行計數(shù)。如果在暫停期間選擇并執(zhí)行該按鈕，將按照與回放情況下相同的規(guī)則移動所顯示場景，并且顯示相應(yīng)場景開始處的靜止圖像。如果在停止期間選擇并執(zhí)行該按鈕，不執(zhí)行任何操作。
通過遠(yuǎn)端控制器或鍵盤選擇和執(zhí)行這些按鈕，開始對應(yīng)階段的回放。如果在一個回放階段暫停之后，選擇并執(zhí)行另一個回放階段，將在暫停場景的位置開始新階段的回放(參見圖4的狀態(tài)轉(zhuǎn)換)。根據(jù)設(shè)置，屏幕上的按鈕數(shù)目可以通過直接在遠(yuǎn)端控制器上提供按鈕進(jìn)行減少。
在第三行的右邊，影片屏幕區(qū)MV在窗口內(nèi)進(jìn)行提供。
特征視頻圖像或預(yù)覽視頻圖像在該窗口內(nèi)進(jìn)行顯示。在執(zhí)行回放按鈕之前的起始狀態(tài)，顯示作為視頻圖像標(biāo)題封面的縮略靜止圖。
在第四行的左邊，提供有與各個預(yù)覽視頻圖像模式對應(yīng)的所摘取場景顯示選擇按鈕(剪輯顯示按鈕)Mds。如果在回放特征視頻圖像期間，單擊任意視頻圖像模式的剪輯顯示按鈕，該模式的所摘取場景的位置能以在底行提供的語義圖SGR上的豎條進(jìn)行顯示。通過參照語義圖SGR向左和向右移動游標(biāo)滑動器區(qū)，可以從最喜歡的場景繼續(xù)觀看特征視頻圖像。也就是，回放位置可以進(jìn)行設(shè)置。
在底行，顯示圖9所示的語義圖SGR。
語義圖SGR包括通過沿著時間變化綜合各個場景或鏡頭的索引值(例如，評價值)而產(chǎn)生的、表示視頻圖像標(biāo)題的情節(jié)過程的、作為分段圖的主圖MGr、表示視頻圖像當(dāng)前回放位置和具有用于移動的滑動器部分的游標(biāo)Cur(圖9中，頂端的三角形部分)；和以豎條形式表示的、用于指示包括在預(yù)覽視頻圖像模式下的所摘取場景的位置的所摘取場景豎條Exs。
主圖MGr的橫坐標(biāo)表示作為單位的特征視頻圖像的場景，縱坐標(biāo)表示評價值，即場景分值，的綜合值。以電影“面具”作為實際例子，1小時34分鐘35秒的特征視頻圖像劃分為150個場景，并且主圖MGr的最大值為9.8。
作為所提供條件的場景分值具有從-1到0和進(jìn)一步到1范圍內(nèi)分布的負(fù)和正值。在語義評價為復(fù)雜化的情況下，場景分值具有正值。相反，在語義評價為平靜化的情況下，場景分值具有負(fù)值。因此，以銳角向右上升意味著場景的大幅度復(fù)雜化，而以銳角向右下降意味著場景的大幅度平靜化。
標(biāo)志置于主圖MGr的主峰值上。
構(gòu)成主峰值的向上斜坡和向下斜坡大致表示包括在情節(jié)中的一個事件。從圖的峰值到谷底的樣式，掌握情節(jié)的介紹部分(介紹)、各種事件的發(fā)展(發(fā)展)、高潮(變化)和結(jié)局(結(jié)束)。這些峰值可以解釋如下。到第一峰值的向上斜坡對應(yīng)介紹部分(介紹)。隨后的多個峰值表示事件的發(fā)展(發(fā)展)。到最后峰值的向上斜坡標(biāo)識高潮(變化)，而在最后峰值之后的部分表示結(jié)局(結(jié)束)。從圖的尖銳向上和向下斜坡，可以預(yù)料情節(jié)的戲劇性發(fā)展。從長的向上斜坡，可以預(yù)料大事件的緊張增加和發(fā)展。從長的向下斜坡，可以想到大事件的暫停和問題的解決。
主圖MGr的橫坐標(biāo)可以表示場景開始或結(jié)束點的時間代碼，而不是場景。通過在橫坐標(biāo)上顯示時間代碼，圖中場景的間距(inclination)將相對改變，但是在縱坐標(biāo)上向上和向下斜坡的關(guān)系和值不發(fā)生改變?？梢灶愃朴谏鲜鼋忉寣υ搱D進(jìn)行解釋。
游標(biāo)Cur隨著視頻圖像的回放發(fā)生移動，并且顯示包含在當(dāng)前所顯示視頻圖像中的場景位置。通過向左和向右滑動游標(biāo)頂部的滑動器部分，可以在觀看主圖MGr時選擇任意場景。
如果在回放特征視頻圖像期間滑動游標(biāo)，回放位置將進(jìn)行更新，并且在滑動結(jié)束點的游標(biāo)位置繼續(xù)回放。如果在暫停期間執(zhí)行類似操作，將顯示在滑動結(jié)束點的游標(biāo)位置的靜止圖。
另一方面，如果在回放預(yù)覽視頻圖像期間執(zhí)行類似操作，將在操作結(jié)束點的游標(biāo)位置的場景或其后最近的場景繼續(xù)回放預(yù)覽視頻圖像。如果在暫停期間執(zhí)行類似操作，將顯示在操作結(jié)束點的游標(biāo)位置的場景或其后最近的場景的靜止圖。
為了顯示當(dāng)前時間點的詳細(xì)信息，可以提供一個放大圖Elg，它以預(yù)定比例顯示游標(biāo)位置周圍部分的部分放大視圖。在圖8中，所顯示的是比例為6的放大圖。在這種情況下，豎向游標(biāo)保持固定，而后面的圖隨回放的進(jìn)行移動到左邊。放大圖和游標(biāo)的交叉點與主圖中與游標(biāo)的交叉點保持一致。
通過使用用于預(yù)覽視頻圖像的所摘取場景顯示選擇按鈕Mds，可以選擇要顯示在主圖MGr上的預(yù)覽視頻圖像的所摘取場景的顯示模式。所摘取場景顯示模式的類型與預(yù)覽視頻圖像回放模式一致。在圖8所示的示例中，準(zhǔn)備有“梗概”、“精彩場面”、“關(guān)鍵詞”、“演員A1(Jim Carey)”、“演員A2(C.Diaz)”和“演員A3(P.Rigato)”模式。
在預(yù)覽視頻圖像和特征視頻圖像之間瀏覽時，可以從預(yù)覽視頻圖像的回放位置切換到對應(yīng)特征視頻圖像進(jìn)行回放，和從特征視頻圖像的回放位置切換到對應(yīng)預(yù)覽視頻圖像進(jìn)行回放。具體地說，如下操作被執(zhí)行。
通過在預(yù)覽視頻圖像回放期間單擊“暫?！卑粹o，然后單擊“整個視頻圖像”按鈕，可以切換到特征視頻圖像從預(yù)覽視頻圖像的當(dāng)前所回放場景的開始處進(jìn)行連續(xù)回放。
類似地，通過在特征視頻圖像回放期間單擊“暫?！卑粹o，然后單擊一個預(yù)覽回放按鈕Md4，可以切換到屬于特征視頻圖像的當(dāng)前所回放場景的預(yù)覽視頻圖像場景或其后最近的場景進(jìn)行回放。
另外，通過在回放一個模式的預(yù)覽視頻圖像期間單擊“暫停”按鈕，然后單擊另一個按鈕，將執(zhí)行類似操作。例如，存在這樣的情況在“梗概”模式下中途執(zhí)行回放之后，單擊“暫?！卑粹o，然后單擊“演員2”模式的預(yù)覽回放按鈕。
在這種情況下，暫停的場景可能不包括在后一預(yù)覽模式，即本例中的“演員2”模式的預(yù)覽視頻圖像的場景中。在這種情況下，切換到屬于暫停場景之后的最近場景的“演員2”模式的預(yù)覽視頻圖像場景進(jìn)行回放。
在回放整個視頻圖像時，單擊影片屏幕區(qū)MV的任意位置將產(chǎn)生在該階段Ph4生成回放開始輸入i41(圖2)的效果。通過瀏覽界面裝置Pg1的處理，將立即切換到特征視頻圖像全屏觀看階段Ph5，并且開始該視頻圖像標(biāo)題的全屏回放。因此，在全屏上觀看特征視頻圖像是可能的。另外，在全屏回放期間單擊任意位置，就能返回到圖8的瀏覽屏幕。
如上所述，根據(jù)本發(fā)明，在觀看具有情節(jié)的視頻圖像標(biāo)題如電影、電視劇和記錄片等時，通過語義圖可以直觀地把握情節(jié)復(fù)雜化和平靜化的流動，并且通過在掌握整個情節(jié)的發(fā)展和事件的發(fā)展時觀看影片圖像可以提高欣賞水平。
通過預(yù)覽視頻圖像和特征視頻圖像之間的瀏覽功能，例如，通過預(yù)覽視頻圖像掌握情節(jié)的梗概，然后精細(xì)地觀看所需部分的特征視頻圖像，或通過僅連續(xù)回放必要部分的特征視頻圖像場景，然后通過預(yù)覽視頻圖像概要地觀看其它部分，可以實現(xiàn)欣賞基于情節(jié)特征的視頻圖像標(biāo)題的新方法。
由于各種模式的預(yù)覽視頻圖像能進(jìn)行選擇，因此可以根據(jù)觀看者的喜好，執(zhí)行標(biāo)題選擇和視頻圖像檢索。由于屬于預(yù)覽視頻圖像的場景必定包括在特征視頻圖像中，因此能夠從預(yù)覽視頻圖像的所需部分轉(zhuǎn)到對應(yīng)那部分的特征視頻圖像。
通過在觀看語義圖時移動游標(biāo)滑動器，視頻圖像可以快速移動到情節(jié)流動中的所需部分。
而且，通過在視頻圖像瀏覽觀看階段Ph4觀看時改變語義分值的閾值，可以調(diào)整每個模式的預(yù)覽視頻圖像的時間，并且可以使用根據(jù)用戶的喜好的預(yù)覽視頻圖像，如更詳細(xì)的預(yù)覽視頻圖像或簡單的短時間預(yù)覽視頻圖像。
下一步，作為本發(fā)明的一個實施例的一種計算機(jī)可讀記錄介質(zhì)，其中記錄有一個用于使計算機(jī)作為圖2所示的語義瀏覽器裝置進(jìn)行工作的程序。
數(shù)據(jù)載體單元如活動盤或內(nèi)存棒和只讀半導(dǎo)體存儲器芯片(ROM芯片)可以用作該記錄介質(zhì)。
當(dāng)該計算機(jī)可讀記錄介質(zhì)由計算機(jī)進(jìn)行讀取和執(zhí)行時產(chǎn)生的功能類似于語義瀏覽器裝置C1的功能，因此不作進(jìn)一步的詳細(xì)描述。
現(xiàn)在對標(biāo)記功能進(jìn)行描述。
圖10是示出本發(fā)明的一個實施例的視頻圖像信息記錄設(shè)備的標(biāo)記處理基本部分的結(jié)構(gòu)的方框圖。在該圖中沒有顯示與前面實施例相同的部分。
如圖10所示，本實施例的視頻圖像信息記錄設(shè)備VR1含有瀏覽界面裝置Pg1，具有界面功能并且作為語義圖顯示特征視頻圖像的各個鏡頭或場景的記錄位置信息和通過根據(jù)含有各個鏡頭或場景的索引值的元信息順序綜合各個鏡頭或場景的索引值而獲得的值；游標(biāo)控制裝置Pg9，用于指定圖中的任意位置；標(biāo)記插入輸入裝置PgI8，用于將圖中的指定位置用作插入標(biāo)記的位置；和標(biāo)記插入/檢索裝置Pg13，用于將至少與圖中作為標(biāo)記位置的指定位置對應(yīng)的記錄位置信息額外記錄到元信息。
現(xiàn)在對標(biāo)記插入功能進(jìn)行描述。由瀏覽界面裝置Pg1’順序綜合索引值而產(chǎn)生的語義圖在屏幕上進(jìn)行顯示。用戶移動由游標(biāo)控制裝置Pg9管理的游標(biāo)，并且將游標(biāo)停在用戶想要插入標(biāo)記的所需位置。當(dāng)用戶在該狀態(tài)下操作標(biāo)記插入輸入裝置PgI8，以產(chǎn)生用于標(biāo)記插入的輸入iS時，與語義圖上的游標(biāo)位置對應(yīng)的時間代碼由標(biāo)記插入/檢索裝置Pg13作為標(biāo)記位置額外記錄到元信息，并且該標(biāo)記位置保存到內(nèi)存棒或高速存儲單元。與標(biāo)記位置相關(guān)的記錄位置信息在任意時候進(jìn)行讀出。
如圖10所示，本發(fā)明的能夠檢測標(biāo)記的視頻圖像回放設(shè)備含有瀏覽界面裝置Pg1’，具有界面功能并且作為語義圖顯示特征視頻圖像的各個鏡頭或場景的記錄位置信息和通過根據(jù)含有各個鏡頭或場景的索引值的元信息順序綜合各個鏡頭或場景的索引值而獲得的值；游標(biāo)控制裝置Pg9，用于指定圖中的任意位置；標(biāo)記檢索輸入裝置PgI9，用于指示檢索一個標(biāo)記；和標(biāo)記插入/檢索裝置Pg13，用于將標(biāo)記位置從保存在內(nèi)存棒或高速存儲單元中的元信息讀出。
現(xiàn)在對標(biāo)記檢測功能進(jìn)行說明。
當(dāng)用戶在瀏覽界面裝置Pg1正在顯示語義圖的狀態(tài)下從標(biāo)記檢索輸入裝置PgI9作出用于標(biāo)記檢索的輸入i9時，標(biāo)記插入/檢索裝置Pg13讀出內(nèi)存棒M2中的元信息文件，并且檢索標(biāo)記的時間代碼。然后標(biāo)記插入/檢索裝置Pg13將該時間代碼輸入到特征視頻圖像回放控制裝置Pg6或預(yù)覽視頻圖像回放控制裝置Pg8，以從標(biāo)記位置執(zhí)行特征視頻圖像或預(yù)覽視頻圖像的回放。
而且，標(biāo)記的時間代碼從標(biāo)記插入/檢索裝置Pg13輸入到瀏覽界面裝置Pg1’，并且瀏覽界面裝置Pg1’使用適當(dāng)標(biāo)志在當(dāng)前所顯示的語義圖上顯示標(biāo)記位置。當(dāng)在這種狀態(tài)下指示開始回放時，游標(biāo)將由游標(biāo)控制裝置Pg9移動到標(biāo)記位置，并且開始回放。
本發(fā)明的一種計算機(jī)可讀記錄介質(zhì)，其中記錄有一個用于使計算機(jī)作為如下裝置進(jìn)行工作的程序瀏覽界面裝置Pg1’，具有界面功能并且作為語義圖顯示特征視頻圖像的各個鏡頭或場景的記錄位置信息和通過根據(jù)含有各個鏡頭或場景的索引值的元信息順序綜合各個鏡頭或場景的索引值而獲得的值；游標(biāo)控制裝置Pg9，用于指定圖上的任意位置；標(biāo)記插入輸入裝置PgI8，用于將圖中的指定位置用作插入標(biāo)記的位置；和標(biāo)記插入/檢索裝置Pg13，用于將至少與圖上作為標(biāo)記位置的指定位置對應(yīng)的記錄位置信息額外記錄到元信息。
數(shù)據(jù)載體單元如活動盤或內(nèi)存棒和只讀半導(dǎo)體存儲器芯片(ROM芯片)可以用作該記錄介質(zhì)。
當(dāng)該計算機(jī)可讀記錄介質(zhì)由計算機(jī)進(jìn)行讀取和執(zhí)行時產(chǎn)生的功能類似于上述視頻圖像信息記錄設(shè)備的標(biāo)記處理功能，因此不作進(jìn)一步的詳細(xì)描述。
本發(fā)明的一種計算機(jī)可讀記錄介質(zhì)，其中記錄有一個用于使計算機(jī)作為如下裝置進(jìn)行工作的程序瀏覽界面裝置Pg1’，具有界面功能并且作為語義圖顯示特征視頻圖像的各個鏡頭或場景的記錄位置信息和通過根據(jù)含有各個鏡頭或場景的索引值的元信息順序綜合各個鏡頭或場景的索引值而獲得的值；游標(biāo)控制裝置Pg9，用于指定圖上的任意位置；標(biāo)記檢索輸入裝置PgI9，用于指示檢索一個標(biāo)記；和標(biāo)記插入/檢索裝置Pg13，用于將標(biāo)記位置從保存在內(nèi)存棒或高速存儲單元中的元信息讀出。
數(shù)據(jù)載體單元如活動盤或內(nèi)存棒和只讀半導(dǎo)體存儲器芯片(ROM芯片)可以用作該記錄介質(zhì)。
當(dāng)該計算機(jī)可讀記錄介質(zhì)由計算機(jī)進(jìn)行讀取和執(zhí)行時產(chǎn)生的功能類似于上述視頻圖像信息回放設(shè)備的標(biāo)記檢索功能，因此不作進(jìn)一步的詳細(xì)描述。
因此，根據(jù)本發(fā)明，當(dāng)提供標(biāo)記功能時，由用戶標(biāo)記的場景用插入其中的標(biāo)記進(jìn)行存儲，并且可以用來在以后進(jìn)行檢索和回放。
下面，將對本發(fā)明的視頻圖像回放設(shè)備的幾個其它實施例順序進(jìn)行描述。下面實施例的視頻圖像回放設(shè)備能夠回放通過以預(yù)定次序連接多個鏡頭或場景而產(chǎn)生的特征視頻圖像。這些視頻圖像回放設(shè)備具有不同結(jié)構(gòu)的語義瀏覽器設(shè)備C1，但是具有類似于參照圖1描述的整個方框結(jié)構(gòu)。
因此，下面描述限于對在這些設(shè)備中提供的每個語義瀏覽器裝置的結(jié)構(gòu)和操作的描述。
作為本發(fā)明另一個實施例的視頻圖像回放設(shè)備的語義瀏覽器裝置具有如下結(jié)構(gòu)，并且它的操作流程圖如圖11所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預(yù)覽視頻圖像組織裝置Pg7、預(yù)覽視頻圖像回放控制裝置Pg8、游標(biāo)控制裝置Pg9、預(yù)覽/特征視頻圖像切換裝置Pg10和記帳控制裝置Pg11。下面將參照圖11對這些裝置每一個的功能和操作進(jìn)行描述。
在圖11的流程圖中，瀏覽界面裝置Pg1從元信息取出各個鏡頭或場景的索引值(步驟S24)，然后綜合各個鏡頭或場景的索引值(步驟S25)，并且在屏幕上作為視頻圖像標(biāo)題的語義圖顯示該綜合值(步驟S26)。
然后，用于指定每個所摘取鏡頭或所摘取場景的信息從元信息進(jìn)行讀出(步驟S27)，并且在語義圖中與所摘取場景或鏡頭對應(yīng)的位置置放一個標(biāo)志(步驟S28)。
如果用戶將游標(biāo)移到語義圖上的所需位置，語義圖上的位置由游標(biāo)控制裝置Pg9進(jìn)行指定(步驟S29)。
然后，瀏覽界面裝置Pg1等待來自用戶的、指示開始回放預(yù)覽視頻圖像的輸入或指示開始回放特征視頻圖像的輸入(步驟S30)。
如果輸入用于回放特征視頻圖像的指令，瀏覽界面裝置Pg1將一個控制指令發(fā)送到特征視頻圖像回放控制裝置Pg6，并且在游標(biāo)當(dāng)前位置開始回放解密特征視頻圖像。同時，特征視頻圖像回放控制裝置Pg6將一個控制指令發(fā)送到記帳控制裝置Pg11。根據(jù)該控制指令，記帳控制裝置Pg11指示記帳區(qū)C18執(zhí)行記帳處理，從而為特征視頻圖像的這次回放執(zhí)行批量記帳或計量價格記帳(步驟S31)。
然后，在監(jiān)控特征視頻圖像是否已經(jīng)結(jié)束(步驟S32)并且還監(jiān)控預(yù)覽/特征視頻圖像切換指令是否輸入(步驟S33)的同時，在步驟S31繼續(xù)回放特征視頻圖像。
如果特征視頻圖像結(jié)束(步驟S32)，則操作結(jié)束。
如果輸入預(yù)覽/特征視頻圖像切換指令i43(步驟S33)，預(yù)覽/特征視頻圖像切換裝置Pg10確定它是在當(dāng)前位置之后回放預(yù)覽視頻圖像的指令，并且指示預(yù)覽視頻圖像回放控制裝置Pg8轉(zhuǎn)到步驟S36(步驟S34)。因此，執(zhí)行從特征視頻圖像到預(yù)覽視頻圖像的瀏覽。
另一方面，如果在步驟S30輸入預(yù)覽回放開始指令，預(yù)覽視頻圖像組織裝置Pg7將離游標(biāo)位置最近的所摘取鏡頭的時間代碼發(fā)送到預(yù)覽視頻圖像回放控制裝置Pg8，其中，時間代碼從元信息中進(jìn)行讀出。預(yù)覽視頻圖像回放控制裝置Pg8將一個用于指示回放該時間代碼的場景的指令發(fā)送到驅(qū)動機(jī)制C13，并且還將一個激勵信號發(fā)送到解密區(qū)C14。
由驅(qū)動機(jī)制C13讀出并回放的信號由解密區(qū)C14進(jìn)行解密，并且由預(yù)讀控制裝置Pg12進(jìn)行緩沖。然后該信號由顯示屏幕組織裝置Pg2組織為窗口大小，并且通過瀏覽界面裝置Pg1顯示在顯示單元C15的屏幕的窗口內(nèi)(步驟S36)。
如果預(yù)覽視頻圖像的公開級別適合用于記帳，預(yù)覽視頻圖像組織裝置Pg7將預(yù)覽記帳信號發(fā)送到記帳控制裝置Pg11。根據(jù)該預(yù)覽記帳信號，記帳控制裝置Pg11指示記帳區(qū)C18執(zhí)行記帳處理(步驟S36)。
然后，在監(jiān)控預(yù)覽視頻圖像是否已經(jīng)結(jié)束(步驟S37)并且還監(jiān)控預(yù)覽/特征視頻圖像切換指令i43是否已有輸入(步驟S38)的同時，在步驟S36繼續(xù)回放預(yù)覽視頻圖像。
如果預(yù)覽視頻圖像結(jié)束(步驟S37)，則操作結(jié)束。
如果輸入預(yù)覽/特征視頻圖像切換指令i43(步驟S38)，預(yù)覽/特征視頻圖像切換裝置Pg10確定它是在當(dāng)前位置之后回放特征視頻圖像的指令，并且轉(zhuǎn)到步驟S31，以將當(dāng)前時間代碼輸入到特征視頻圖像回放控制裝置Pg6(步驟S39)。同時，停止預(yù)覽視頻圖像組織裝置Pg7的操作。在此之后，繼續(xù)執(zhí)行特征視頻圖像的回放。
因此，執(zhí)行從預(yù)覽視頻圖像到特征視頻圖像的瀏覽。
如果用戶在上述過程中輸入游標(biāo)移動指令，將執(zhí)行中斷處理，以進(jìn)入步驟S29。游標(biāo)控制裝置Pg9在回放特征視頻圖像的情況下將與該位置對應(yīng)的鏡頭的時間代碼發(fā)送到特征視頻圖像回放控制裝置Pg6，或者在回放預(yù)覽視頻圖像的情況下將時間代碼發(fā)送到預(yù)覽視頻圖像回放控制裝置Pg8。
因此，可以在屏幕上顯示通過順序綜合各個鏡頭或場景的索引值而產(chǎn)生的語義圖，從而可以顯現(xiàn)整個特征視頻圖像的結(jié)構(gòu)。
而且，通過參考作為所提供條件從元信息提供的、用于指定所摘取鏡頭或場景的信息在圖中與所摘取鏡頭或場景對應(yīng)的位置顯示一個標(biāo)志，所摘取鏡頭或場景在整個特征視頻圖像中的位置關(guān)系能夠得以清晰。
另外，如果用戶指定語義圖上的任意位置，并且指示回放特征視頻圖像，與那個位置對應(yīng)的場景或鏡頭將被指定，并且參考指定場景或鏡頭的時間代碼從該記錄位置執(zhí)行特征視頻圖像的回放。如果在特征視頻圖像回放期間，用戶指示回放所摘取鏡頭和場景，當(dāng)前回放將切換到所摘取鏡頭或場景在當(dāng)前回放記錄位置之后進(jìn)行回放。
另一方面，如果用戶指定圖中表示所摘取鏡頭或場景的標(biāo)志，并且指示回放所摘取鏡頭或場景，與那個位置對應(yīng)的所摘取場景或鏡頭將被指定，并且參考指定所摘取場景或鏡頭的記錄位置信息從該記錄位置回放所摘取場景或鏡頭。如果在所摘取場景或鏡頭回放期間，用戶指示回放特征視頻圖像，當(dāng)前回放將切換到特征視頻圖像在當(dāng)前回放記錄位置之后進(jìn)行回放。
通過交替執(zhí)行指定圖中的任意位置并指示回放特征視頻圖像，和指定表示所摘取鏡頭或場景的標(biāo)志并指示回放所摘取鏡頭或場景，可以執(zhí)行特征視頻圖像和所摘取視頻圖像之間的瀏覽。另外，通過重復(fù)這些指定和指示，瀏覽進(jìn)行重復(fù)執(zhí)行。
作為本發(fā)明的另一個實施例的一種計算機(jī)可讀記錄介質(zhì)，其中記錄有一個用于使計算機(jī)作為按照圖11的流程圖操作的語義瀏覽器裝置進(jìn)行工作的程序。數(shù)據(jù)載體單元如活動盤或內(nèi)存棒和只讀半導(dǎo)體存儲器芯片(ROM芯片)可以用作該記錄介質(zhì)。
當(dāng)該計算機(jī)可讀記錄介質(zhì)由計算機(jī)進(jìn)行讀取和執(zhí)行時產(chǎn)生的功能類似于語義瀏覽器裝置的上述功能，因此不作進(jìn)一步的詳細(xì)描述。
作為本發(fā)明另一個實施例的視頻圖像回放設(shè)備的語義瀏覽器裝置具有如下結(jié)構(gòu)，并且它的操作流程圖如圖12所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預(yù)覽視頻圖像組織裝置Pg7、預(yù)覽視頻圖像回放控制裝置Pg8、游標(biāo)控制裝置Pg9。下面將參照圖12對這些裝置每一個的功能和操作進(jìn)行描述。
在圖12的流程圖中，在視頻圖像瀏覽觀看階段Ph4一接收到來自用戶的“閾值”更新輸入i44(步驟S40)，瀏覽界面裝置Pg1就更新閾值(步驟S41)。
用戶作出這種“閾值”更新輸入的時間最好在語義圖顯示在屏幕上的視頻圖像瀏覽觀看階段Ph4。這是因為顯示在屏幕上的語義圖讓用戶能夠掌握整個特征視頻圖像的流動，然后設(shè)置適當(dāng)?shù)摹伴撝怠薄＿@并不限于本實施例，而同樣適用于其它實施例。
然后，預(yù)覽視頻圖像組織裝置Pg7從包含鏡頭或場景的時間代碼和為每個鏡頭或每個場景預(yù)設(shè)的索引值的元信息讀出每個鏡頭或場景的索引值(步驟S42)，然后檢查索引值是否與閾值一致(步驟S43)，并且將索引值與閾值一致的鏡頭或場景作為所摘取鏡頭或場景進(jìn)行登記(步驟S44)。該處理對所有鏡頭或場景進(jìn)行執(zhí)行(步驟S45)。
同時，瀏覽界面裝置Pg1綜合從元信息取出的各個鏡頭或場景的索引值，并且在屏幕上將綜合結(jié)果作為視頻圖像標(biāo)題的語義圖進(jìn)行顯示。
然后，在語義圖中與由預(yù)覽視頻圖像組織裝置Pg7登記的每個所摘取場景或鏡頭對應(yīng)的位置上置放一個標(biāo)志(步驟S46)。
如果用戶將游標(biāo)移動到語義圖上標(biāo)志中的所需標(biāo)志，語義圖上的位置由游標(biāo)控制裝置Pg9進(jìn)行指定(步驟S47)。根據(jù)來自游標(biāo)控制裝置Pg9的指令，特征視頻圖像回放控制裝置Pg6或預(yù)覽視頻圖像回放控制裝置Pg8在指定標(biāo)志位置之后順序回放標(biāo)志部分。
因此，可以在屏幕上顯示通過順序綜合各個鏡頭或場景的索引值而產(chǎn)生的語義圖，從而可以顯現(xiàn)整個特征視頻圖像的結(jié)構(gòu)。
而且，通過參考作為所提供條件從元信息提供的，所摘取鏡頭或場景的索引值根據(jù)所更新的閾值確定要摘取的鏡頭或場景，然后在圖中與所摘取鏡頭或場景對應(yīng)的位置顯示一個標(biāo)志，所摘取鏡頭或場景在整個特征視頻圖像中的位置關(guān)系能夠得以清晰。
如果圖中的一個標(biāo)志被指定，與該標(biāo)志對應(yīng)的所摘取鏡頭或場景的記錄位置可以根據(jù)時間代碼進(jìn)行指定，并且與特征視頻圖像中的記錄位置對應(yīng)的部分視頻圖像能以預(yù)定次序進(jìn)行順序回放。
而且，由于閾值是根據(jù)指令進(jìn)行修改的，因此用戶設(shè)置任意閾值是可能的。因此，通過設(shè)置嚴(yán)格或?qū)捤傻拈撝?，用戶可以調(diào)節(jié)要摘取的鏡頭或場景的總數(shù)，從而可以調(diào)節(jié)所摘取視頻圖像的回放時間。
作為本發(fā)明另一個實施例的一種計算機(jī)可讀記錄介質(zhì)，其中記錄有一個用于使計算機(jī)作為按照圖12的流程圖操作的語義瀏覽器裝置進(jìn)行工作的程序。數(shù)據(jù)載體單元如活動盤或內(nèi)存棒和只讀半導(dǎo)體存儲器芯片(ROM芯片)可以用作該記錄介質(zhì)。
當(dāng)該計算機(jī)可讀記錄介質(zhì)由計算機(jī)進(jìn)行讀取和執(zhí)行時產(chǎn)生的功能類似于語義瀏覽器裝置的上述功能，因此不作進(jìn)一步的詳細(xì)描述。
作為本發(fā)明另一個實施例的視頻圖像回放設(shè)備的語義瀏覽器裝置具有如下結(jié)構(gòu)，并且它的操作流程圖如圖13所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預(yù)覽視頻圖像組織裝置Pg7、預(yù)覽視頻圖像回放控制裝置Pg8和游標(biāo)控制裝置Pg9。下面將參照圖13對這些裝置每一個的功能和操作進(jìn)行描述。
在圖13的流程圖中，預(yù)覽視頻圖像組織裝置Pg7從元信息讀出閾值(步驟S50)，并且讀出每個鏡頭或場景的索引值(步驟S51)，然后從各個鏡頭或場景當(dāng)中僅摘取索引值與閾值一致的鏡頭或場景(步驟S52)，并且登記所摘取鏡頭或所摘取場景(步驟S53)。該處理對所有鏡頭或場景執(zhí)行(步驟S54)。
同時，瀏覽界面裝置Pg1綜合從元信息取出的各個鏡頭或場景的索引值，并且在屏幕上將綜合結(jié)果作為視頻圖像標(biāo)題的語義圖進(jìn)行顯示。
然后，在語義圖中與由預(yù)覽視頻圖像組織裝置Pg7登記的每個所摘取場景或所摘取鏡頭對應(yīng)的位置上置放一個標(biāo)記(步驟S55)。
如果用戶將游標(biāo)移動到語義圖上標(biāo)志中的所需標(biāo)志，語義圖上的位置由游標(biāo)控制裝置Pg9進(jìn)行指定(步驟S56)。根據(jù)來自游標(biāo)控制裝置Pg9的指令，特征視頻圖像回放控制裝置Pg6或預(yù)覽視頻圖像回放控制裝置Pg8在指定標(biāo)志位置之后順序回放標(biāo)志部分(步驟S57)。
因此，可以在屏幕上顯示通過順序綜合各個鏡頭或場景的索引值而產(chǎn)生的語義圖，從而可以顯現(xiàn)整個特征視頻圖像的結(jié)構(gòu)。而且，通過參考作為所提供條件從元信息提供的所摘取鏡頭或場景的索引值，根據(jù)所更新的閾值確定要摘取的鏡頭或場景，然后在圖中與所摘取鏡頭或場景對應(yīng)的位置顯示一個標(biāo)志，所摘取鏡頭或場景在整個特征視頻圖像中的位置關(guān)系能夠得以清晰。
如果圖中的一個標(biāo)志被指定，與該標(biāo)志對應(yīng)的所摘取鏡頭或場景的記錄位置可以根據(jù)時間代碼進(jìn)行指定，并且與特征視頻圖像中的該記錄位置對應(yīng)的部分視頻圖像能以預(yù)定次序進(jìn)行順序回放。
作為本發(fā)明另一個實施例的一種計算機(jī)可讀記錄介質(zhì)，其中記錄有一個用于使計算機(jī)作為按照圖13的流程圖操作的語義瀏覽器裝置進(jìn)行工作的程序。數(shù)據(jù)載體單元如活動盤或內(nèi)存棒和只讀半導(dǎo)體存儲器芯片(ROM芯片)可以用作該記錄介質(zhì)。
當(dāng)該計算機(jī)可讀記錄介質(zhì)由計算機(jī)進(jìn)行讀取和執(zhí)行時產(chǎn)生的功能類似于語義瀏覽器裝置的上述功能，因此不作進(jìn)一步的詳細(xì)描述。
作為本發(fā)明另一個實施例的視頻圖像回放設(shè)備的語義瀏覽器裝置具有如下結(jié)構(gòu)，并且它的操作流程圖如圖14所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預(yù)覽視頻圖像組織裝置Pg7、預(yù)覽視頻圖像回放控制裝置Pg8和游標(biāo)控制裝置Pg9。下面將參照圖14對這些裝置每一個的功能和操作進(jìn)行描述。
在圖14的流程圖中，瀏覽界面裝置Pg1綜合從元信息取出的各個鏡頭或場景的索引值(步驟S60)，并且在屏幕上將綜合結(jié)果作為視頻圖像標(biāo)題的語義圖進(jìn)行顯示(步驟S61)。
在這種情況下，瀏覽界面裝置Pg1從元信息讀出用于指定所摘取鏡頭或場景的信息(步驟S62)，然后，在語義圖中與由預(yù)覽視頻圖像組織裝置Pg7登記的每個所摘取場景或鏡頭對應(yīng)的位置上置放一個標(biāo)志(步驟S63)。
如果用戶將游標(biāo)移動到語義圖上標(biāo)志中的所需標(biāo)志，語義圖上的位置由游標(biāo)控制裝置Pg9進(jìn)行指定(步驟S64)。根據(jù)來自游標(biāo)控制裝置Pg9的指令，特征視頻圖像回放控制裝置Pg6或預(yù)覽視頻圖像回放控制裝置Pg8在指定標(biāo)志位置之后順序回放標(biāo)志部分(步驟S65)。
因此，可以在屏幕上顯示通過順序綜合各個鏡頭或場景的索引值而產(chǎn)生的語義圖，從而可以顯現(xiàn)整個特征視頻圖像的結(jié)構(gòu)。
而且，通過參考作為所提供條件從元信息提供的，用于指定所摘取鏡頭或場景的信息根據(jù)所指定的閾值確定要摘取的鏡頭或場景，然后在語義圖中與所摘取鏡頭或場景對應(yīng)的位置顯示一個標(biāo)志，所摘取鏡頭或場景在整個特征視頻圖像中的位置關(guān)系能夠得以清晰。
如果語義圖上的一個標(biāo)志被指定，與該標(biāo)志對應(yīng)的所摘取鏡頭或場景的記錄位置可以根據(jù)時間代碼進(jìn)行指定，并且與特征視頻圖像中的該記錄位置對應(yīng)的部分視頻圖像能以預(yù)定次序進(jìn)行順序回放。
因此，通過參考作為所提供條件從元信息提供的、用于指定所摘取鏡頭或場景的信息，在圖中與所摘取鏡頭或場景對應(yīng)的位置顯示一個標(biāo)志，所摘取鏡頭或場景在整個特征視頻圖像中的位置關(guān)系能夠得以清晰。
如果圖中的一個標(biāo)志被指定，與該標(biāo)志對應(yīng)的所摘取鏡頭或場景的記錄位置可以根據(jù)時間代碼進(jìn)行指定，并且與特征視頻圖像中的該記錄位置對應(yīng)的部分視頻圖像能以預(yù)定次序進(jìn)行順序回放。
作為本發(fā)明另一個實施例的一種計算機(jī)可讀記錄介質(zhì)，其中記錄有一個用于使計算機(jī)作為按照圖14的流程圖操作的語義瀏覽器裝置進(jìn)行工作的程序。數(shù)據(jù)載體單元如活動盤或內(nèi)存棒和只讀半導(dǎo)體存儲器芯片(ROM芯片)可以用作該記錄介質(zhì)。
當(dāng)該計算機(jī)可讀記錄介質(zhì)由計算機(jī)進(jìn)行讀取和執(zhí)行時產(chǎn)生的功能類似于語義瀏覽器裝置的上述功能，因此不作進(jìn)一步的詳細(xì)描述。
作為本發(fā)明另一個實施例的視頻圖像回放設(shè)備的語義瀏覽器裝置具有如下結(jié)構(gòu)，并且它的操作流程圖如圖15所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預(yù)覽視頻圖像組織裝置Pg7、預(yù)覽視頻圖像回放控制裝置Pg8和游標(biāo)控制裝置Pg9。下面將參照圖15對這些裝置每一個的功能和操作進(jìn)行描述。
在圖15的流程圖中，瀏覽界面裝置Pg1綜合從元信息取出的各個鏡頭或場景的索引值(步驟S70)，并且在屏幕上將綜合結(jié)果作為視頻圖像標(biāo)題的語義圖進(jìn)行顯示(步驟S71)。
如果用戶將游標(biāo)移動到語義圖上的所需位置，語義圖上的位置由游標(biāo)控制裝置Pg9進(jìn)行指定(步驟S72)。根據(jù)來自游標(biāo)控制裝置Pg9的指令，特征視頻圖像回放控制裝置Pg6或預(yù)覽視頻圖像回放控制裝置Pg8在指定標(biāo)志位置之后順序回放視頻圖像(步驟S73)。
因此，可以在屏幕上顯示通過順序綜合各個鏡頭或場景的索引值而產(chǎn)生的語義圖，從而可以顯現(xiàn)整個特征視頻圖像的結(jié)構(gòu)。
如果語義圖上的特定位置被指定，與該位置對應(yīng)的視頻圖像部分的記錄位置可以根據(jù)時間代碼進(jìn)行指定，并且特征視頻圖像或預(yù)覽視頻圖像能從與該記錄位置對應(yīng)的部分進(jìn)行順序回放。
作為本發(fā)明另一個實施例的一種計算機(jī)可讀記錄介質(zhì)，其中記錄有一個用于使計算機(jī)作為按照圖15的流程圖操作的語義瀏覽器裝置進(jìn)行工作的程序。數(shù)據(jù)載體單元如活動盤或內(nèi)存棒和只讀半導(dǎo)體存儲器芯片(ROM芯片)可以用作該記錄介質(zhì)。
當(dāng)該計算機(jī)可讀記錄介質(zhì)由計算機(jī)進(jìn)行讀取和執(zhí)行時產(chǎn)生的功能類似于語義瀏覽器裝置的上述功能，因此不作進(jìn)一步的詳細(xì)描述。
作為本發(fā)明另一個實施例的視頻圖像回放設(shè)備的語義瀏覽器裝置具有如下結(jié)構(gòu)，并且它的操作流程圖如圖16所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預(yù)覽視頻圖像組織裝置Pg7、預(yù)覽視頻圖像回放控制裝置Pg8。下面將參照圖16對這些裝置每一個的功能和操作進(jìn)行描述。
在圖16的流程圖中，一接收到來自用戶的閾值更新輸入(步驟S80)，瀏覽界面裝置Pg1就更新閾值(步驟S81)。
然后，預(yù)覽視頻圖像組織裝置Pg7從包含鏡頭或場景的時間代碼和為每個鏡頭或每個場景預(yù)設(shè)的索引值的元信息讀出各個鏡頭或場景的索引值(步驟S82)，然后檢查索引值是否與閾值一致(步驟S83)，并且將索引值與閾值一致的鏡頭或場景作為所摘取鏡頭或場景進(jìn)行登記(步驟S84)。該處理對所有鏡頭或場景進(jìn)行執(zhí)行(步驟S85)。
然后，預(yù)覽視頻圖像組織裝置Pg7讀出所登記的所摘取鏡頭或場景的時間代碼(步驟S86)，并且預(yù)覽視頻圖像回放控制裝置Pg8以預(yù)定次序順序回放和顯示從特征視頻圖像摘取的、與時間代碼對應(yīng)的部分的視頻圖像(步驟S87)。
因此，要摘取的鏡頭或場景可以參考作為所提供條件從元信息提供的所摘取鏡頭或場景的索引值，根據(jù)所輸入的所更新閾值進(jìn)行確定，并且所摘取視頻圖像可以通過指定所摘取鏡頭或場景的時間代碼進(jìn)行順序回放。
作為本發(fā)明另一個實施例的一種計算機(jī)可讀記錄介質(zhì)，其中記錄有一個用于使計算機(jī)作為按照圖16的流程圖操作的語義瀏覽器裝置進(jìn)行工作的程序。數(shù)據(jù)載體單元如活動盤或內(nèi)存棒和只讀半導(dǎo)體存儲器芯片(ROM芯片)可以用作該記錄介質(zhì)。
當(dāng)該計算機(jī)可讀記錄介質(zhì)由計算機(jī)進(jìn)行讀取和執(zhí)行時產(chǎn)生的功能類似于語義瀏覽器裝置的上述功能，因此不作進(jìn)一步的詳細(xì)描述。
作為本發(fā)明另一個實施例的視頻圖像回放設(shè)備的語義瀏覽器裝置具有如下結(jié)構(gòu)，并且它的操作流程圖如圖17所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預(yù)覽視頻圖像組織裝置Pg7、預(yù)覽視頻圖像回放控制裝置Pg8。下面將參照圖17對這些裝置每一個的功能和操作進(jìn)行描述。
在圖17的流程圖中，預(yù)覽視頻圖像組織裝置Pg7從包含閾值、鏡頭或場景的時間代碼和為各個鏡頭或場景預(yù)設(shè)的索引值的元信息讀出閾值(步驟90)，然后讀出各個鏡頭或場景的索引值(步驟S91)，然后檢查索引值是否與閾值一致(步驟S92)，并且將索引值與閾值一致的鏡頭或場景作為所摘取鏡頭或場景進(jìn)行登記(步驟S93)。該處理對所有鏡頭或場景執(zhí)行(步驟S94)。
然后，預(yù)覽視頻圖像組織裝置Pg7讀出所登記的所摘取鏡頭或場景的時間代碼(步驟S95)，并且預(yù)覽視頻圖像回放控制裝置Pg8以預(yù)定次序順序回放和顯示從特征視頻圖像摘取的、與該時間代碼對應(yīng)的部分的視頻圖像(步驟S96)。
因此，要摘取的鏡頭或場景可以參考作為所提供條件從元信息提供的所摘取鏡頭或場景的索引值、根據(jù)所指定的閾值進(jìn)行確定，并且所摘取視頻圖像可以通過指定所摘取鏡頭或場景的時間代碼進(jìn)行順序回放。
作為本發(fā)明另一個實施例的一種計算機(jī)可讀記錄介質(zhì)，其中記錄有一個用于使計算機(jī)作為按照圖17的流程圖操作的語義瀏覽器裝置進(jìn)行工作的程序。數(shù)據(jù)載體單元如活動盤或內(nèi)存棒和只讀半導(dǎo)體存儲器芯片(ROM芯片)可以用作該記錄介質(zhì)。
當(dāng)該計算機(jī)可讀記錄介質(zhì)由計算機(jī)進(jìn)行讀取和執(zhí)行時產(chǎn)生的功能類似于語義瀏覽器裝置的上述功能，因此不作進(jìn)一步的詳細(xì)描述。
作為本發(fā)明另一個實施例的視頻圖像回放設(shè)備的語義瀏覽器裝置具有如下結(jié)構(gòu)，并且它的操作流程圖如圖18所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預(yù)覽視頻圖像組織裝置Pg7、預(yù)覽視頻圖像回放控制裝置Pg8。下面將參照圖18對這些裝置每一個的功能和操作進(jìn)行描述。
在圖18的流程圖中，預(yù)覽視頻圖像組織裝置Pg7從包含鏡頭或場景的時間代碼和用于指定所摘取鏡頭或場景的信息的元信息讀出所摘取鏡頭或場景的時間代碼(步驟S100)，預(yù)覽視頻圖像回放控制裝置Pg8以預(yù)定次序順序回放從特征視頻圖像摘取的、與時間代碼對應(yīng)的部分的視頻圖像(步驟S101)。
因此，要摘取的鏡頭或場景可以參考作為所提供條件從元信息提供的、用于指定所摘取鏡頭或場景的信息進(jìn)行確定，并且所摘取視頻圖像可以通過指定所摘取鏡頭或場景的時間代碼進(jìn)行順序回放。
作為本發(fā)明另一個實施例的一種計算機(jī)可讀記錄介質(zhì)，其中記錄有一個用于使計算機(jī)作為按照圖18的流程圖操作的語義瀏覽器裝置進(jìn)行工作的程序。數(shù)據(jù)載體單元如活動盤或內(nèi)存棒和只讀半導(dǎo)體存儲器芯片(ROM芯片)可以用作該記錄介質(zhì)。
當(dāng)該計算機(jī)可讀記錄介質(zhì)由計算機(jī)進(jìn)行讀取和執(zhí)行時產(chǎn)生的功能類似于語義瀏覽器裝置的上述功能，因此不作進(jìn)一步的詳細(xì)描述。
同時，雖然驅(qū)動機(jī)制C13作為內(nèi)置設(shè)備顯示在圖1中，但是它不限于這種內(nèi)置設(shè)備，并且還能作為具有大容量存儲介質(zhì)的外部單元連接到一個獨立的家庭服務(wù)器，并且作為家用設(shè)備進(jìn)行應(yīng)用。而且，驅(qū)動機(jī)制不僅可以連接到這種家庭服務(wù)器，還可以通過網(wǎng)絡(luò)如公用電話線連接到遠(yuǎn)端的專用服務(wù)器。
用于獲取特征視頻圖像及其相關(guān)的元信息的方法舉例如下1.通過接收數(shù)字廣播，同時或分開獲取特征視頻圖像文件和附隨元信息。
2.通過網(wǎng)絡(luò)如因特網(wǎng)下載獲取元信息。
3.通過數(shù)據(jù)包介質(zhì)系統(tǒng)一次性獲取特征視頻圖像和附隨元信息。
4.通過廣播系統(tǒng)或數(shù)據(jù)包介質(zhì)系統(tǒng)獲取特征視頻圖像，并且從數(shù)據(jù)載體內(nèi)存單元(例如，內(nèi)存棒、內(nèi)存卡或內(nèi)存片)或通過數(shù)據(jù)包介質(zhì)系統(tǒng)單獨獲取元信息。
在通過廣播系統(tǒng)接收元信息的情況下，要接收和獲取的元信息臨時記錄到高速存儲單元等中，并且通過使用該所記錄元信息，從記錄在大容量存儲介質(zhì)或數(shù)據(jù)包介質(zhì)如DVD上的特征視頻圖像摘取預(yù)定部分，從而獲取預(yù)覽視頻圖像。
通過廣播系統(tǒng)接收特征視頻圖像及其附隨元信息，然后實時地從特征視頻圖像摘取預(yù)覽視頻圖像，并且記錄所摘取預(yù)覽視頻圖像而不在屏幕上顯示是適當(dāng)?shù)?。然而，接收特征視頻圖像、實時摘取預(yù)覽視頻圖像并在屏幕上顯示所摘取視頻圖像是不適當(dāng)?shù)?。這是因為在屏幕上顯示所摘取視頻圖像不適合用于在實時摘取中準(zhǔn)備各種模式的預(yù)覽視頻圖像。由于摘取依賴于特征視頻圖像在時間上的流動，因此不存在在屏幕上顯示預(yù)覽視頻圖像時頻繁出現(xiàn)的搜索和空閑時間的概念。另外，最好不要要求預(yù)覽視頻圖像和空閑時間具有與特征視頻圖像的視頻圖像時間相同的時間范圍。
因此，在通過廣播系統(tǒng)同時接收特征視頻圖像和元信息的情況下，最好將特征視頻圖像和元信息臨時記錄到記錄裝置中，并且使用特征視頻圖像和元信息獨立組織和回放預(yù)覽視頻圖像。
如上面所進(jìn)行的詳細(xì)描述，本發(fā)明的視頻圖像回放設(shè)備或方法用于將各個鏡頭或場景的索引值作為元信息進(jìn)行提供。因此，整個特征視頻圖像的結(jié)構(gòu)可以通過在屏幕上顯示通過順序綜合各個鏡頭或場景的索引值而產(chǎn)生的圖進(jìn)行顯示。
如果本發(fā)明的視頻圖像回放設(shè)備或方法參考作為所提供條件從元信息提供的、用于指定所摘取鏡頭或場景的信息，在通過順序綜合各個鏡頭或場景的索引值而產(chǎn)生的圖中與所摘取鏡頭或場景對應(yīng)的位置顯示一個標(biāo)志，所摘取鏡頭或場景在整個特征視頻圖像中的位置關(guān)系能夠通過這些標(biāo)記得以清晰。
如果本發(fā)明的視頻圖像回放設(shè)備或方法參考作為所提供條件從元信息提供的、用于指定所摘取鏡頭或場景的信息，指定在回放所摘取視頻圖像時要回放的所摘取鏡頭或場景，所摘取鏡頭或場景的記錄位置可以根據(jù)作為所提供條件從元信息提供的記錄位置信息進(jìn)行指定，并且與特征視頻圖像中的記錄位置對應(yīng)的各個所摘取視頻圖像能以預(yù)定次序進(jìn)行順序回放。
特別，當(dāng)圖上一個為所摘取鏡頭或場景提供的標(biāo)志由用戶進(jìn)行指定時，與該標(biāo)志對應(yīng)的所摘取鏡頭或場景的記錄位置可以根據(jù)作為所提供條件從元信息提供的記錄位置信息進(jìn)行指定，并且與特征視頻圖像中的記錄位置對應(yīng)的各個部分視頻圖像能以預(yù)定次序進(jìn)行順序回放。
如果本發(fā)明的視頻圖像回放設(shè)備或方法在回放特征視頻圖像時指定通過順序綜合各個鏡頭或場景的索引值而產(chǎn)生的圖上的任意位置，在特征視頻圖像的對應(yīng)位置之后的視頻圖像可以參考圖上與指定位置對應(yīng)的鏡頭或場景的記錄位置信息，根據(jù)作為所提供條件從元信息提供的記錄位置信息進(jìn)行順序回放。
如果本發(fā)明的視頻圖像回放設(shè)備或方法在圖上顯示表示所摘取鏡頭或場景的標(biāo)志，并且用戶指定圖上的任意位置并指示回放特征視頻圖像，在那個位置之后的特征視頻圖像將進(jìn)行回放。如果在特征視頻圖像回放期間用戶指定一個標(biāo)志，并且指示回放所摘取鏡頭或場景，特征視頻圖像的回放將切換到所摘取鏡頭或場景在當(dāng)前位置之后進(jìn)行回放。如果用戶指定圖中一個表示所摘取鏡頭或場景的標(biāo)志，并且指示對其的回放，在那個位置之后的所摘取鏡頭或場景將進(jìn)行回放。如果在所摘取鏡頭或場景回放期間用戶指示回放特征視頻圖像，回放將切換到特征視頻圖像在當(dāng)前位置之后進(jìn)行回放。
采用上述結(jié)構(gòu)，如果用戶指定圖上的任意位置，并且指示回放特征視頻圖像，與那個位置對應(yīng)的場景或鏡頭將被指定，并且參考指定場景或鏡頭的記錄位置信息從該記錄位置對特征視頻圖像進(jìn)行回放。如果用戶在特征視頻圖像回放期間指示回放所摘取鏡頭和場景，特征視頻圖像的回放將切換到所摘取鏡頭或場景在當(dāng)前回放記錄位置之后進(jìn)行回放。從而，可以執(zhí)行特征視頻圖像和所摘取視頻圖像之間的有效瀏覽。
另一方面，如果用戶指定圖中一個表示所摘取鏡頭或場景的標(biāo)志，并且指示回放所摘取鏡頭或場景，與那個位置對應(yīng)的所摘取場景或鏡頭將被指定，并且參考所指定的所摘取場景或鏡頭的記錄位置信息從該記錄位置回放所摘取鏡頭或場景。而且，如果用戶在所摘取鏡頭或場景回放期間指示回放特征視頻圖像，所摘取鏡頭或場景的回放將切換到特征視頻圖像在當(dāng)前回放記錄位置之后進(jìn)行回放。從而，可以執(zhí)行特征視頻圖像和所摘取視頻圖像之間的有效瀏覽。
如果本發(fā)明的視頻圖像回放設(shè)備或方法參考作為所提供條件從元信息提供的各個鏡頭或場景的索引值，根據(jù)指定閾值將索引值達(dá)到閾值的鏡頭或場景確定為所摘取鏡頭或場景，通過設(shè)置嚴(yán)格或?qū)捤傻拈撝担梢哉{(diào)節(jié)要摘取的鏡頭或場景的類型或總數(shù)。
作為替換，如果視頻圖像回放設(shè)備或方法根據(jù)來自用戶的指令改變閾值，用戶可以設(shè)置任意閾值。從而，通過任意設(shè)置嚴(yán)格或?qū)捤傻拈撝?，可以調(diào)節(jié)要摘取的鏡頭或場景的類型或總數(shù)。因此，所摘取視頻圖像的類型或回放能以所需方式進(jìn)行調(diào)節(jié)。
如果本發(fā)明的視頻圖像信息記錄設(shè)備或方法在屏幕上顯示一個顯現(xiàn)通過順序綜合作為所提供條件從元信息提供的各個鏡頭或場景的索引值而產(chǎn)生的值的圖，并且由用戶指定圖中的任意位置作為插入標(biāo)記的位置，至少與屏幕上的指定位置對應(yīng)的記錄位置信息將作為標(biāo)記位置額外記錄到元信息。因此，標(biāo)記可以插入到任意視頻圖像中。由于該標(biāo)記位置是額外記錄到元信息并作保存的，因此它可以在任意時候進(jìn)行讀出。
本發(fā)明的視頻圖像回放設(shè)備或方法用于檢索元信息、讀出作為所記錄標(biāo)記位置的記錄位置信息，并且從該記錄位置回放視頻圖像。因此，在檢測到插入在任意位置的標(biāo)記之后，視頻圖像從那個部分進(jìn)行回放和顯示。
另外，本發(fā)明的視頻圖像回放設(shè)備或方法用于執(zhí)行對特征視頻圖像或所摘取視頻圖像的批量記帳或計量價格記帳。因此，可以消除不執(zhí)行記帳的缺陷，并且合理的記帳成為可能。
從上述描述可以清楚地看到，根據(jù)本發(fā)明，在回放視頻圖像期間在圖上確認(rèn)整個視頻圖像的變化時能夠移到所需部分并觀看所需視頻圖像，并且自由地執(zhí)行特征視頻圖像和所摘取視頻圖像之間的瀏覽。
因此，不僅可以提供便于決定購買或選擇視頻圖像標(biāo)題的功能，還可以提供便于觀看所選和所購買視頻圖像標(biāo)題的瀏覽功能。
另外，由于對特征視頻圖像和所摘取視頻圖像執(zhí)行各種類型的記帳，便于視頻圖像標(biāo)題提供方和用戶方的高信賴記帳處理能以顯著的效果實現(xiàn)。
權(quán)利要求
1.一種屏幕控制方法，應(yīng)用于在屏幕上顯示由連續(xù)視頻圖像組成的特征視頻圖像的連續(xù)視頻圖像顯示階段，和在屏幕上順序顯示通過摘取特征視頻圖像的預(yù)定部分獲取的多個所摘取視頻圖像集的所摘取視頻圖像顯示階段，每一個所摘取視頻圖像集由多個所摘取視頻圖像組成，該方法包括如下步驟在所摘取視頻圖像顯示階段，顯示至少具有第一視頻圖像顯示區(qū)域、第一視頻圖像變化顯示區(qū)域和第一切換輸入?yún)^(qū)域的第一屏幕；在第一視頻圖像顯示區(qū)域內(nèi)，顯示包括多個根據(jù)當(dāng)前視頻圖像記錄位置進(jìn)行回放的所摘取視頻圖像集的預(yù)覽視頻圖像；在第一視頻圖像變化顯示區(qū)域內(nèi)，顯示顯現(xiàn)特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖、附加在圖上位于與每個所摘取視頻圖像對應(yīng)的視頻圖像記錄位置的標(biāo)志、和一個游標(biāo)，該游標(biāo)隨著時間的流逝不斷更新當(dāng)前顯示在第一視頻圖像顯示區(qū)域內(nèi)的所摘取視頻圖像的當(dāng)前視頻圖像記錄位置，并且允許從當(dāng)前視頻圖像記錄位置移到所摘取視頻圖像的任意一個中的任意視頻圖像記錄位置；在第一切換輸入?yún)^(qū)域內(nèi)顯示第一按鈕，該第一按鈕允許輸入一個指令來在停止和保留當(dāng)前視頻圖像記錄位置的同時從第一屏幕切換到在連續(xù)視頻圖像顯示階段中顯示的第二屏幕；在連續(xù)視頻圖像顯示階段，顯示至少具有第二視頻圖像顯示區(qū)域、第二視頻圖像變化顯示區(qū)域和第二切換輸入?yún)^(qū)域的第二屏幕；在第二視頻圖像顯示區(qū)域內(nèi)，顯示根據(jù)當(dāng)前視頻圖像記錄位置進(jìn)行回放的特征視頻圖像；在第二視頻圖像變化顯示區(qū)域內(nèi)，顯示顯現(xiàn)特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖和一個游標(biāo)，該游標(biāo)隨著時間的流逝不斷更新當(dāng)前顯示在第二視頻圖像顯示區(qū)域內(nèi)的特征視頻圖像中的當(dāng)前視頻圖像記錄位置，并且允許從當(dāng)前視頻圖像記錄位置移到特征視頻圖像的任意視頻圖像記錄位置；在第二切換輸入?yún)^(qū)域內(nèi)顯示第二按鈕，該第二按鈕允許輸入一個指令來在停止和保留當(dāng)前視頻圖像記錄位置的同時從第二屏幕切換到在所摘取視頻圖像顯示階段顯示的第一屏幕；和根據(jù)每個在第一按鈕或第二按鈕顯示期間輸入的指令，在所摘取視頻圖像顯示階段和連續(xù)視頻圖像顯示階段之間進(jìn)行切換，以顯示第一屏幕或第二屏幕。
2.一種屏幕控制設(shè)備，適合用于在連續(xù)視頻圖像顯示階段顯示第二屏幕，其中，連續(xù)視頻圖像顯示階段將由連續(xù)視頻圖像組成的特征視頻圖像作為第二屏幕進(jìn)行顯示，及在所摘取視頻圖像顯示階段顯示第一屏幕，其中，所摘取視頻圖像顯示階段將通過摘取特征視頻圖像的預(yù)定部分獲取的多個所摘取視頻圖像集作為第一屏幕進(jìn)行順序顯示，該設(shè)備包括用于在第一屏幕中至少顯示第一視頻圖像顯示區(qū)域、第一視頻圖像變化顯示區(qū)域和第一切換輸入?yún)^(qū)域的裝置；用于在第一視頻圖像顯示區(qū)域內(nèi)，顯示包括多個根據(jù)當(dāng)前視頻圖像記錄位置進(jìn)行回放的所摘取視頻圖像集的預(yù)覽視頻圖像的裝置；用于在第一視頻圖像變化顯示區(qū)域內(nèi)，顯示顯現(xiàn)特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖和附加在圖上位于與每個所摘取視頻圖像對應(yīng)的視頻圖像記錄位置的標(biāo)志的裝置；用于顯示游標(biāo)的裝置，該游標(biāo)附加在視頻圖像變化圖上，隨著時間的流逝不斷更新當(dāng)前顯示在第一視頻圖像顯示區(qū)域內(nèi)的所摘取視頻圖像中的當(dāng)前視頻圖像記錄位置，并且允許從當(dāng)前視頻圖像記錄位置移到所摘取視頻圖像的任意一個中的任意視頻圖像記錄位置；用于在第一切換輸入?yún)^(qū)域內(nèi)顯示第一按鈕的裝置，該第一按鈕允許輸入一個指令來在停止和保留當(dāng)前視頻圖像記錄位置的同時從第一屏幕切換到在連續(xù)視頻圖像顯示階段中顯示的第二屏幕；用于在第二屏幕中至少布置第二視頻圖像顯示區(qū)域、第二視頻圖像變化顯示區(qū)域和第二切換輸入?yún)^(qū)域的裝置；用于在第二視頻圖像顯示區(qū)域內(nèi)，顯示根據(jù)當(dāng)前視頻圖像記錄位置進(jìn)行回放的特征視頻圖像的裝置；用于在第二視頻圖像變化顯示區(qū)域內(nèi)，顯示顯現(xiàn)特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖的裝置；用于顯示游標(biāo)的裝置，該游標(biāo)附加在視頻圖像變化圖上，隨著時間的流逝不斷更新當(dāng)前顯示在第二視頻圖像顯示區(qū)域內(nèi)的特征視頻圖像中的當(dāng)前視頻圖像記錄位置，并且允許從當(dāng)前視頻圖像記錄位置移到特征視頻圖像中的任意視頻圖像記錄位置；用于在第二切換輸入?yún)^(qū)域內(nèi)顯示第二按鈕的裝置，該按鈕允許輸入一個指令來在停止和保留在指令時的當(dāng)前視頻圖像記錄位置的同時從第二屏幕切換到在所摘取視頻圖像顯示階段顯示的第一屏幕；和用于根據(jù)每個在第一按鈕或第二按鈕顯示期間輸入的指令，在所摘取視頻圖像顯示階段和連續(xù)視頻圖像顯示階段之間進(jìn)行切換，以顯示第一屏幕或第二屏幕的裝置。
全文摘要
從接收區(qū)(C10)讀取的主視頻(vdt)和縮略圖(sdt)記錄在大容量存儲介質(zhì)上(M1)，并且元信息(mdt)記錄在高速存儲器(C12)上。根據(jù)元信息(mdt)，語義瀏覽裝置(C1)在編輯預(yù)覽視頻時從主視頻摘取部分視頻。而且根據(jù)元信息(mdt)，在屏幕上顯示語義圖和當(dāng)前位置。如果發(fā)生位置指定輸入，主視頻或預(yù)覽視頻從指定位置進(jìn)行再現(xiàn)。如果發(fā)生瀏覽指定輸入，語義瀏覽裝置(C1)瀏覽主視頻及其預(yù)覽視頻，并且只瀏覽主視頻或預(yù)覽視頻。記帳區(qū)(C18)執(zhí)行記賬。
文檔編號H04N5/781GK1553706SQ200410031529
公開日2004年12月8日 申請日期2000年2月24日 優(yōu)先權(quán)日1999年2月24日
發(fā)明者高橋靖 申請人:索尼公司