專利名稱:索引數(shù)據(jù)生成裝置、索引數(shù)據(jù)生成方法、內(nèi)容數(shù)據(jù)再現(xiàn)裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明屬于內(nèi)容數(shù)據(jù)記錄再現(xiàn)裝置的技術(shù)領(lǐng)域,生成內(nèi)容數(shù)據(jù)的索引數(shù)據(jù),以此生成的索引數(shù)據(jù)為基礎(chǔ),生成此內(nèi)容數(shù)據(jù)再現(xiàn)。
背景技術(shù):
近年來隨著把電視播放的節(jié)目等活動圖像數(shù)據(jù)錄制和再現(xiàn)的VTR(VideoTape Recorder)等記錄裝置的普及,實用中已發(fā)展不必看全部記錄的內(nèi)容數(shù)據(jù),即可提供對此內(nèi)容數(shù)據(jù)進行短時間摘要的要點再現(xiàn)。
現(xiàn)在進行這樣的要點再現(xiàn)方法有著眼于內(nèi)容數(shù)據(jù)中附帶聲音數(shù)據(jù)進行要點再現(xiàn)的方法、以及主要著眼于活動圖像數(shù)據(jù)本身進行要點再現(xiàn)的方法。特別是著眼于活動圖像本身進行要點再現(xiàn)的方法,識別顯示活動圖像數(shù)據(jù)中主圖像數(shù)據(jù)內(nèi)提示進行時間內(nèi)容的字幕內(nèi)文字,以此識別的文字為基礎(chǔ),識別主圖像數(shù)據(jù)中各部分內(nèi)容,以被識別的部分圖像為基礎(chǔ),進行要點再現(xiàn)(例如參照非專利文獻1)。
圖像電子學(xué)會研討會約稿02-07-33“以字幕為主因的棒球畫面的自動檢索和摘要的生成”發(fā)明內(nèi)容但是,在用現(xiàn)有的字幕進行要點再現(xiàn)方法中,僅僅以被識別字幕內(nèi)的信息為基礎(chǔ),識別主圖像數(shù)據(jù)中多個部分圖像數(shù)據(jù),以所識別的各部分圖像數(shù)據(jù)為基礎(chǔ),確定內(nèi)容數(shù)據(jù)中的索引。
因此,在此摘要再現(xiàn)方法中,不能預(yù)先表示出利用索引識別的各部分?jǐn)?shù)據(jù)在活動圖像數(shù)據(jù)整體中占有的重要程度等表示各部分?jǐn)?shù)據(jù)圖像之間關(guān)系,而且以此生成的索引為基礎(chǔ),用戶不能輕易地檢索到所需內(nèi)容數(shù)據(jù)的任何畫面。
本發(fā)明鑒于上述各問題,作為此課題的一個示例,提供一種以字幕為基礎(chǔ),把各部分圖像數(shù)據(jù)作成分層次的結(jié)構(gòu),可以容易地而且準(zhǔn)確地進行要點再現(xiàn)或進行用戶需要的內(nèi)容數(shù)據(jù)的任何畫面的檢索的索引數(shù)據(jù)生成裝置,以及以此為基礎(chǔ)進行再現(xiàn)的數(shù)據(jù)記錄再現(xiàn)裝置。
為了解決上述課題,權(quán)利要求1所述的發(fā)明,其結(jié)構(gòu)上包含獲取設(shè)備,用于獲取至少包括具有預(yù)先確定時間長度的活動圖像數(shù)據(jù)的內(nèi)容數(shù)據(jù);抽取設(shè)備,從表示所述已獲取的活動圖像數(shù)據(jù)的主圖像數(shù)據(jù)中抽取隨時間進行而改變的、輔助說明所述主圖像數(shù)據(jù)的副圖像數(shù)據(jù);第1檢測設(shè)備,用于檢測表示所述抽取的副圖像數(shù)據(jù)圖像變化部分的部分圖像數(shù)據(jù);第2檢測設(shè)備,在用所述第1檢測設(shè)備從1個或2個副圖像數(shù)據(jù)至少檢測了2個以上的所述部分圖像數(shù)據(jù)的情況下,對檢測的各部分圖像數(shù)據(jù)的變化次數(shù)和所述已檢測出的各部分圖像數(shù)據(jù)中的變化點進行檢測;設(shè)定設(shè)備,以所述檢測的各部分圖像數(shù)據(jù)的變化次數(shù)為基礎(chǔ),對各部分圖像數(shù)據(jù)的層次水平進行設(shè)定;以及生成設(shè)備,基于所述設(shè)定的各部分圖像數(shù)據(jù)的層次水平和所述檢測的各部分圖像數(shù)據(jù)的變化點,生成表示所述內(nèi)容數(shù)據(jù)中多個畫面索引的索引數(shù)據(jù)。
權(quán)利要求7所述的發(fā)明,其結(jié)構(gòu)上包含獲取設(shè)備,用于獲取至少包括有活動圖像數(shù)據(jù)的內(nèi)容數(shù)據(jù);抽取設(shè)備,從表示所述已獲取的活動圖像數(shù)據(jù)的主圖像數(shù)據(jù)中,抽取隨時間進行而改變的、輔助說明此主圖像數(shù)據(jù)的副圖像數(shù)據(jù);第1檢測設(shè)備,用于檢測表示所述抽取的副圖像數(shù)據(jù)的圖像變化部分的部分圖像數(shù)據(jù);第2檢測設(shè)備,在用所述第1檢測設(shè)備從1個或2個副圖像數(shù)據(jù)至少檢測了2個以上的所述部分圖像數(shù)據(jù)的情況下,對檢測的各部分圖像數(shù)據(jù)的變化次數(shù)和所述已檢測出的各部分圖像數(shù)據(jù)中的變化點進行檢測;設(shè)定設(shè)備,以所述檢測的各部分圖像數(shù)據(jù)的變化次數(shù)為基礎(chǔ),對各部分圖像數(shù)據(jù)的層次水平進行設(shè)定;生成設(shè)備,基于所述設(shè)定的各部分圖像數(shù)據(jù)的層次水平和所述檢測的各部分圖像數(shù)據(jù)的變化點,生成表示所述內(nèi)容數(shù)據(jù)中多個畫面索引的索引數(shù)據(jù);以及再現(xiàn)設(shè)備;以所述生成的索引數(shù)據(jù)為基礎(chǔ),將所述內(nèi)容數(shù)據(jù)進行再現(xiàn)。
權(quán)利要求10所述的發(fā)明,其結(jié)構(gòu)上包含獲取步驟,用于獲取至少包括有活動圖像數(shù)據(jù)的內(nèi)容數(shù)據(jù);抽取步驟,從表示所述已獲取的活動圖像數(shù)據(jù)的主圖像數(shù)據(jù)中抽取隨時間進行而改變的、輔助說明此主圖像數(shù)據(jù)的副圖像數(shù)據(jù);第1檢測步驟,用于檢測表示所述抽取的副圖像數(shù)據(jù)圖像變化部分的部分圖像數(shù)據(jù);第2檢測步驟,用所述第1檢測步驟從1個或2個副圖像數(shù)據(jù)至少檢測了2個以上的所述部分圖像數(shù)據(jù)的情況下,對檢測的各部分圖像數(shù)據(jù)的變化次數(shù)和所述已檢測出的各部分圖像數(shù)據(jù)中的變化點進行檢測;設(shè)定步驟,以所述檢測的各部分圖像數(shù)據(jù)的變化次數(shù)為基礎(chǔ),對各部分圖像數(shù)據(jù)的層次水平進行設(shè)定;以及生成步驟,基于所述設(shè)定的各部分圖像數(shù)據(jù)的層次水平和所述檢測的各部分圖像數(shù)據(jù)的變化點,生成表示所述內(nèi)容數(shù)據(jù)中多個畫面索引的索引數(shù)據(jù)。
權(quán)利要求11所述的發(fā)明,其結(jié)構(gòu)上包含獲取步驟,用于獲取至少包括有活動圖像數(shù)據(jù)的內(nèi)容數(shù)據(jù);抽取步驟,是從表示所述已獲取的活動圖像數(shù)據(jù)的主圖像數(shù)據(jù)中抽取隨時間進行而改變的、輔助說明此主圖像數(shù)據(jù)的副圖像數(shù)據(jù);第1檢測步驟,用于檢測表示所述抽取的副圖像數(shù)據(jù)圖像變化部分的部分圖像數(shù)據(jù);第2檢測步驟,在用所述第1檢測設(shè)備從1個或2個副圖像數(shù)據(jù)至少檢測了2個以上的所述部分圖像數(shù)據(jù)的情況下,對檢測的各部分圖像數(shù)據(jù)的變化次數(shù)和所述已檢測出的各部分圖像數(shù)據(jù)中的變化點進行檢測;設(shè)定步驟,以所述檢測的各部分圖像數(shù)據(jù)的變化次數(shù)為基礎(chǔ),對各部分圖像數(shù)據(jù)的層次水平進行設(shè)定;生成步驟,基于所述設(shè)定的各部分圖像數(shù)據(jù)的層次水平和所述檢測的各部分圖像數(shù)據(jù)的變化點,生成表示所述內(nèi)容數(shù)據(jù)中多個畫面索引的索引數(shù)據(jù);以及再現(xiàn)步驟;以所述生成的索引數(shù)據(jù)為基礎(chǔ),將所述內(nèi)容數(shù)據(jù)進行再現(xiàn)。
圖1為表示本申請一個實施方式的編輯系統(tǒng)的系統(tǒng)結(jié)構(gòu)的框圖。
圖2為表示一個實施方式的編輯系統(tǒng)中的索引數(shù)據(jù)生成部分結(jié)構(gòu)的框圖。
圖3為在字幕數(shù)據(jù)抽取部分中具有抽取的多個變化部位的基本字幕數(shù)據(jù)的一個示例。
圖4為在索引生成部分中生成的索引數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)的一個示例。
圖5為在本實施方式的清單數(shù)據(jù)生成部分中生成的清單數(shù)據(jù)的一個示例。
圖6為在本實施方式的清單數(shù)據(jù)生成部分中生成的清單數(shù)據(jù)的一個示例。
圖7為在本實施方式的清單數(shù)據(jù)生成部分中生成的清單數(shù)據(jù)的一個示例。
圖8為表示本實施方式的索引數(shù)據(jù)生成處理動作的流程圖。
具體實施例方式
下面結(jié)合附圖對本申請的較佳實施方式進行說明。
此外,下面說明的各實施方式是指對于數(shù)據(jù)記錄再現(xiàn)裝置適用本申請的內(nèi)容數(shù)據(jù)再現(xiàn)裝置或索引數(shù)據(jù)生成裝置情況下的實施方式。
具體而言,本實施方式的數(shù)據(jù)記錄再現(xiàn)裝置,預(yù)先要記錄由輸入的聲音數(shù)據(jù)和圖像數(shù)據(jù)等構(gòu)成的內(nèi)容數(shù)據(jù)的活動圖像數(shù)據(jù)(下面簡稱為內(nèi)容數(shù)據(jù)),以表示包括此記錄的活動圖像數(shù)據(jù)主圖像數(shù)據(jù)隨時間變化的文字、記號等副圖像數(shù)據(jù)(下面稱為字幕數(shù)據(jù))為基礎(chǔ),生成用于選擇記錄的內(nèi)容數(shù)據(jù)中用戶需要的畫面(場面)和將其進行再現(xiàn)的索引數(shù)據(jù)。
特別是本實施方式的數(shù)據(jù)記錄再現(xiàn)裝置在生成索引數(shù)據(jù)時,生成具有規(guī)定層次的索引數(shù)據(jù),把此生成的索引數(shù)據(jù)與內(nèi)容數(shù)據(jù)建立關(guān)聯(lián),提供給用戶。
此外,所述數(shù)據(jù)記錄再現(xiàn)裝置以生成的索引數(shù)據(jù)為基礎(chǔ),特定一個畫面后,檢索內(nèi)容數(shù)據(jù)中的此特定畫面,進行此特定畫面的再現(xiàn)(下面稱為從頭再現(xiàn)(Random Acess))。
下面對在本實施方式中,生成這樣的索引數(shù)據(jù),以此生成的索引數(shù)據(jù)為基礎(chǔ),進行內(nèi)容數(shù)據(jù)再現(xiàn)的數(shù)據(jù)記錄再現(xiàn)裝置進行說明。
首先用圖1對本實施方式的數(shù)據(jù)記錄再現(xiàn)裝置的結(jié)構(gòu)進行說明。
圖1為表示本實施方式的編輯系統(tǒng)的系統(tǒng)結(jié)構(gòu)框圖。
如圖1所示,本實施方式的數(shù)據(jù)記錄再現(xiàn)裝置100是由預(yù)約控制部分101、錄像控制部分102、數(shù)據(jù)存儲部分103、索引數(shù)據(jù)生成部分200、再現(xiàn)控制部分104、清單數(shù)據(jù)生成部分105、顯示控制部分106、系統(tǒng)控制部分107構(gòu)成。預(yù)約控制部分101是以通過圖中沒有表示的操作部分輸入的用戶指示為基礎(chǔ),對內(nèi)容數(shù)據(jù)進行預(yù)約;錄像控制部分102是以預(yù)約控制部分101的控制或圖中沒有表示的操作部分的指示為基礎(chǔ),進行輸入的內(nèi)容數(shù)據(jù)的錄像控制;數(shù)據(jù)存儲部分103是存儲內(nèi)容數(shù)據(jù);索引數(shù)據(jù)生成部分200是生成存儲的內(nèi)容數(shù)據(jù)中的索引數(shù)據(jù);再現(xiàn)控制部分104是以控制內(nèi)容數(shù)據(jù)的再現(xiàn)同時進行畫面再現(xiàn)情況下生成的索引數(shù)據(jù)為基礎(chǔ),控制內(nèi)容數(shù)據(jù)的畫面再現(xiàn);清單數(shù)據(jù)生成部分105是生成對應(yīng)于索引數(shù)據(jù)中的內(nèi)容數(shù)據(jù)的一覽表數(shù)據(jù)(下面稱為清單數(shù)據(jù));顯示控制部分106在對內(nèi)容數(shù)據(jù)進行在外部顯示器10上的顯示控制的同時,使得進行從頭再現(xiàn)之際所生成的清單數(shù)據(jù)和存儲的內(nèi)容數(shù)據(jù)重疊顯示;系統(tǒng)控制部分107是對數(shù)據(jù)記錄再現(xiàn)裝置100中各部分進行控制,各部分用母線110相連。
例如,本實施方式的再現(xiàn)控制部分104構(gòu)成了本發(fā)明的獲取設(shè)備,索引數(shù)據(jù)生成部分200構(gòu)成本發(fā)明的抽取設(shè)備、第1檢測設(shè)備、第2檢測設(shè)備、設(shè)定設(shè)備、生成設(shè)備、獲取圖像設(shè)備、分類設(shè)備和計算設(shè)備。
通過圖中沒有表示的操作部分把用戶的指示輸入到預(yù)約控制部分101中,此預(yù)約控制部分101以輸入的用戶指示為基礎(chǔ),設(shè)定電視臺、日期時間等信息,以此設(shè)定的各種信息為基礎(chǔ),通過系統(tǒng)控制部分107控制錄像控制部分102和圖中沒有表示的接受信號部分。
具體而言,該預(yù)約控制部分101以此設(shè)定的信息為基礎(chǔ),控制從各電視臺發(fā)送的播放信號的圖中沒有表示的接收信號部分,選擇在指定的時間、指定的電視臺,同時指示錄像控制部分102錄制此接收的內(nèi)容數(shù)據(jù)。
把從圖中沒有表示的接收信號部分輸出的具有規(guī)定形式的內(nèi)容數(shù)據(jù)輸入到錄像控制部分102中,同時在數(shù)字播放的情況下,利用圖中沒有表示的接收信號部分把接收的節(jié)目排列信息(下面稱為SI(Service Information)信息)輸入到錄像控制部分102中。
此外,錄像控制部分102把輸入的構(gòu)成內(nèi)容數(shù)據(jù)的活動圖象數(shù)據(jù)變換成MPEG格式,把輸入的內(nèi)容數(shù)據(jù)的聲音數(shù)據(jù)變換成AC-3格式,同時從變換后的各種格式的數(shù)據(jù)生成程序流程,把此生成的程序流程輸出到數(shù)據(jù)存儲部分103。
該錄像控制部分102通過接收數(shù)字播放信號,在輸入SI信息的情況下,從SI信息中抽取包括此SI信息的EIT信息(Event Information Table),利用此接收的EIT信息判斷是否生成索引數(shù)據(jù),在判斷應(yīng)生成該索引數(shù)據(jù)時,通過系統(tǒng)控制部分107在索引數(shù)據(jù)生成部分200實施生成此索引數(shù)據(jù)。
具體而言,錄像控制部分102用EIT信息預(yù)先判斷接收的內(nèi)容數(shù)據(jù)是否是棒球或足球等的具有時間進展變化的體育類,在判斷是具有時間進展變化的體育類時,把此需要進行預(yù)約錄像的播放節(jié)目的內(nèi)容數(shù)據(jù)進行錄像后,在索引數(shù)據(jù)生成部分200執(zhí)行生成索引數(shù)據(jù)的指示。
例如,用BS(Broadcasting Satellite)數(shù)字播放和CS(communicationSatellite)數(shù)字播放,將SI信息與TV節(jié)目的內(nèi)容數(shù)據(jù)一起從衛(wèi)星發(fā)送給各家庭的電視播放接收機,也就是在本實施方式中沒有用圖表示的信號接收部分,在此信號接收部分接收到SI信息的情況下,此SI信息被輸入到錄像控制部分102。
數(shù)據(jù)存儲部分103具有硬盤(下面稱為HD)等記錄介質(zhì),以錄像控制部分102的控制為基礎(chǔ),把從此錄像控制部分102輸出的內(nèi)容數(shù)據(jù)以規(guī)定的形式存儲到HD中。此外,此數(shù)據(jù)存儲部分103把與此內(nèi)容數(shù)據(jù)相關(guān)聯(lián)生成的后述的索引數(shù)據(jù)存儲到HD中。
具體地說,用錄像控制部分102生成的程序流程和索引生成部分200生成的索引數(shù)據(jù)被輸入到數(shù)據(jù)存儲部分103中,此數(shù)據(jù)存儲部分103把輸入的程序流程存儲到HD中,同時把索引數(shù)據(jù)與此內(nèi)容數(shù)據(jù)相關(guān)聯(lián)進行存儲。
此外,在內(nèi)容數(shù)據(jù)的再現(xiàn)或從頭再現(xiàn)時,數(shù)據(jù)存儲部分103以再現(xiàn)控制部分104的指示為基礎(chǔ),把預(yù)先記錄的程序流程或此程序流程和索引數(shù)據(jù)從HD讀出,輸出到再現(xiàn)控制部分104。
后面將對存儲到本實施方式的數(shù)據(jù)存儲部分103的索引數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)進行詳細(xì)說明。
已經(jīng)存儲到數(shù)據(jù)存儲部分103的內(nèi)容數(shù)據(jù),預(yù)先輸入到索引數(shù)據(jù)生成部分200中,該索引數(shù)據(jù)生成部分200抽取顯示構(gòu)成內(nèi)容數(shù)據(jù)的活動圖像數(shù)據(jù)中主圖像數(shù)據(jù)一部分的副圖像數(shù)據(jù)的字幕(下面稱為字幕數(shù)據(jù)),同時設(shè)定該字幕數(shù)據(jù)的識別信息等信息。
所述索引數(shù)據(jù)生成部分200以抽取的預(yù)先設(shè)定各字幕數(shù)據(jù)的條件為基礎(chǔ),分成多個類別,以此分類的各字幕數(shù)據(jù)為基礎(chǔ),預(yù)先生成有層次的索引數(shù)據(jù),把生成的索引數(shù)據(jù)輸出到數(shù)據(jù)存儲部分103。
后面將對本實施方式中的索引數(shù)據(jù)生成部分200和索引數(shù)據(jù)的生成處理動作進行詳細(xì)敘述。
利用圖中沒有表示的操作部分,通過系統(tǒng)控制部分107把再現(xiàn)或從頭再現(xiàn)的指示預(yù)先輸入到再現(xiàn)控制部分104,該再現(xiàn)部分104以輸入的操作部分的指示為基礎(chǔ),從數(shù)據(jù)存儲部分103讀出已存儲的具有規(guī)定形式的內(nèi)容數(shù)據(jù)或該內(nèi)容數(shù)據(jù)和索引數(shù)據(jù)。
所述再現(xiàn)控制部分104變換該讀出的內(nèi)容數(shù)據(jù)的形式,輸出到顯示控制部分106,同時讀出索引數(shù)據(jù)時,把該索引數(shù)據(jù)輸出到清單數(shù)據(jù)生成部分105。
具體而言,再現(xiàn)控制部分104以輸入的操作部分的指示為基礎(chǔ),預(yù)先讀出有關(guān)要再現(xiàn)的內(nèi)容數(shù)據(jù)的程序流程,把此讀出的程序流程變換成具有MPEG格式的活動圖像數(shù)據(jù)和具有AC-3格式的聲音數(shù)據(jù),同時把變換后的各種格式的數(shù)據(jù)輸出到顯示控制部分106。
本實施方式的再現(xiàn)控制部分104以輸入到圖中沒有表示的操作部分中的操作指示為基礎(chǔ),進行各種再現(xiàn)控制。在本實施方式中,再現(xiàn)控制部分104在內(nèi)容數(shù)據(jù)中包括聲音數(shù)據(jù)的情況下,從再現(xiàn)控制部分104直接把聲音數(shù)據(jù)輸出到顯示器10。
在進行內(nèi)容數(shù)據(jù)的從頭再現(xiàn)時,預(yù)先把作為此從頭再現(xiàn)對象的內(nèi)容數(shù)據(jù)的索引數(shù)據(jù)輸入到清單數(shù)據(jù)生成部分105中,此清單數(shù)據(jù)生成部分105以所輸入的索引數(shù)據(jù)為基礎(chǔ),在連接到外部的顯示器10上生成要顯示的索引數(shù)據(jù)的圖像數(shù)據(jù)(下面稱為清單數(shù)據(jù)),把此生成的清單數(shù)據(jù)輸出到顯示控制部分106。
后面將對在本實施方式中的清單數(shù)據(jù)生成部分105中生成的清單數(shù)據(jù)進行詳細(xì)敘述。
預(yù)先把具有規(guī)定形式的內(nèi)容數(shù)據(jù)輸入到顯示控制部分106中,顯示控制部分106以系統(tǒng)控制部分107的指示為基礎(chǔ),在連接到外部的顯示器10上生成要顯示的顯示數(shù)據(jù),同時在緩沖存儲器臨時保存此顯示數(shù)據(jù),在規(guī)定的時間內(nèi)從緩沖存儲器讀出顯示數(shù)據(jù),輸出到顯示器10。
在進行從頭再現(xiàn)的情況下,用清單數(shù)據(jù)生成部分105生成的清單數(shù)據(jù)與內(nèi)容數(shù)據(jù)一起輸入到顯示控制部分106,在這種情況下,所述顯示控制部分106生成內(nèi)容數(shù)據(jù)和清單數(shù)據(jù)重疊的顯示數(shù)據(jù),在連接到外部的顯示器10上顯示輸入。
系統(tǒng)控制部分107主要由中央處理裝置(CPU)構(gòu)成,同時通過圖中沒有表示的操作部分,以輸入的用戶指示為基礎(chǔ),整體控制包括用于內(nèi)容數(shù)據(jù)的錄像處理、再現(xiàn)處理或從頭再現(xiàn)處理的所有功能。
所述系統(tǒng)控制部分107讀出裝在圖中沒有表示的ROM中的控制程序,進行各種處理,把處理中的數(shù)據(jù)臨時保存在圖中沒有表示的RAM中,控制數(shù)據(jù)記錄再現(xiàn)裝置100的全部動作。
其次用圖2~圖4對本實施方式中的索引數(shù)據(jù)生成部分的詳細(xì)結(jié)構(gòu)進行說明。
圖2為表示本實施方式的編輯系統(tǒng)中索引數(shù)據(jù)生成部分結(jié)構(gòu)的框圖,圖3為具有抽取的多個變化部位的基本字幕數(shù)據(jù)的一個示例。圖4為在索引數(shù)據(jù)生成部分中生成的索引數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)的一個示例。
如上所述,本實施方式的索引數(shù)據(jù)生成部分200預(yù)先抽取顯示構(gòu)成內(nèi)容數(shù)據(jù)的主圖像數(shù)據(jù),也就是抽取顯示構(gòu)成活動圖像數(shù)據(jù)中主圖像數(shù)據(jù)的副圖像數(shù)據(jù)的字幕數(shù)據(jù),設(shè)定此字幕數(shù)據(jù)識別信息等信息,以預(yù)先設(shè)定的條件為基礎(chǔ),把抽取的字幕數(shù)據(jù)分成多個類別,以此分類的各字幕數(shù)據(jù)為基礎(chǔ),生成有層次的索引數(shù)據(jù)。
一般來說,在轉(zhuǎn)播以棒球和足球為代表的體育比賽為內(nèi)容數(shù)據(jù)的情況下,為了對在座觀看的人告訴比賽的經(jīng)過和得分的經(jīng)過,在此內(nèi)容數(shù)據(jù)的活動圖像數(shù)據(jù)中,除了表示比賽內(nèi)容的主圖像數(shù)據(jù)以外,還包括用文字、記號等其他圖像構(gòu)成的、稱為字幕的部分圖像數(shù)據(jù)的副圖像數(shù)據(jù)。
在此內(nèi)容數(shù)據(jù)是棒球比賽的情況下,此字幕數(shù)據(jù)把局?jǐn)?shù)、兩隊的得分和出局人數(shù)等有關(guān)比賽的信息準(zhǔn)確地提供給觀看的人。因此,此字幕顯示產(chǎn)生變化的時刻大多數(shù)為得分的時刻和攻防轉(zhuǎn)換的時刻等表示區(qū)分比賽內(nèi)容的時刻。
所以,在本實施方式中索引數(shù)據(jù)生成部分200注目該字幕,以該字幕的變換次數(shù)而生成索引數(shù)據(jù)為基礎(chǔ)。
如圖2所示,此索引數(shù)據(jù)生成部分200是由字幕數(shù)據(jù)抽取部分201、字幕類別判定部分202、基本字幕處理部分203、確定層次水平部分204、數(shù)據(jù)生成部分205構(gòu)成。字幕數(shù)據(jù)抽取部分201是抽取包含在內(nèi)容數(shù)據(jù)中主圖像數(shù)據(jù)中的字幕數(shù)據(jù);字幕類別判定部分202是在有多種輸入字幕數(shù)據(jù)的情況下,分成生成索引數(shù)據(jù)中最基本的字幕(下面稱為基本字幕)和基本字幕以外的字幕(下面稱為項目字幕);基本字幕處理部分203是確定在表示基本字幕的字幕數(shù)據(jù)(下面稱為基本字幕數(shù)據(jù))內(nèi)部變化部位;確定層次水平部分204是確定在表示項目字幕的字幕數(shù)據(jù)(下面稱為項目字幕數(shù)據(jù))層次水平和基本字幕數(shù)據(jù)中的各變化部位的層次水平;數(shù)據(jù)生成部分205是以抽取的各字幕數(shù)據(jù)和確定的層次水平為基礎(chǔ),生成索引數(shù)據(jù)。
例如,本實施方式的字幕數(shù)據(jù)抽取部分201構(gòu)成本發(fā)明的抽取設(shè)備和獲取圖像設(shè)備;基本字幕處理部分203構(gòu)成本發(fā)明的第1檢測設(shè)備和第2檢測設(shè)備。此外,例如本實施方式的確定層次水平部分204構(gòu)成本發(fā)明的設(shè)定設(shè)備和計算設(shè)備;數(shù)據(jù)生成部分205構(gòu)成本發(fā)明的生成設(shè)備。此外,字幕類別判定部分202構(gòu)成本發(fā)明的分類設(shè)備。
通過再現(xiàn)控制部分104把從數(shù)據(jù)存儲部分103輸出的內(nèi)容數(shù)據(jù)中所分離出的活動圖像數(shù)據(jù),輸入到字幕數(shù)據(jù)抽取部分201中,此字幕數(shù)據(jù)抽取部分201用規(guī)定的方法把副圖像數(shù)據(jù)的字幕數(shù)據(jù)從所輸入的活動圖像數(shù)據(jù)中的主圖像數(shù)據(jù)中抽取出來。
具體而言,字幕數(shù)據(jù)抽取部分201通過把輸入的主圖像數(shù)據(jù)按每一幀變成二進制,推測包含在此主圖像數(shù)據(jù)的字幕部分內(nèi)的圖像數(shù)據(jù),把所推測的字幕部分圖像數(shù)據(jù)的副圖像數(shù)據(jù)、各字幕部分的內(nèi)容數(shù)據(jù)中開始的幀和終了的幀(下面稱為幀信息)、輸入的整個主圖像數(shù)據(jù)中所推測的字幕部分副圖像數(shù)據(jù)的位置信息等作為字幕數(shù)據(jù),從內(nèi)容數(shù)據(jù)的開頭順序加上識別信息,并輸出到字幕類別判定部分202中。
例如,在本實施方式中,此字幕數(shù)據(jù)抽取部分201把內(nèi)容數(shù)據(jù)中的主圖像數(shù)據(jù)按每一幀進行二進制處理,利用檢測與字幕部分圖像部分和背景圖像數(shù)據(jù)等字幕部分以外的圖像部分的邊緣,或利用檢測圖像數(shù)據(jù)的色分布,推測字幕部分的圖像部分。
在檢測與字幕部分圖像部分和字幕部分以外的圖像部分的邊緣的情況下,字幕數(shù)據(jù)抽取部分201利用判斷檢測的邊緣經(jīng)過幾幀后是否穩(wěn)定出現(xiàn),檢測此邊緣。
此外,由于字幕不一定會在內(nèi)容數(shù)據(jù)中經(jīng)常顯示,所以在本實施方式中,字幕數(shù)據(jù)抽取部分201是把抽取此字幕顯示開始時刻的幀作為開始幀,把抽取此字幕顯示終了時刻的幀作為終了幀,同時把從開始幀到終了幀的字幕部分圖像數(shù)據(jù)在各幀中抽取,同時把位置信息、幀信息和用于識別其他字幕數(shù)據(jù)的識別信息,從開始幀到終了幀的各圖像數(shù)據(jù)作為一個字幕數(shù)據(jù),輸出到字幕類別判定部分202中。
把在字幕數(shù)據(jù)抽取部分201中抽取的各字幕數(shù)據(jù)輸入到字幕類別判定部分202中,此字幕類別判定部分202把輸入的各字幕數(shù)據(jù)分成生成索引數(shù)據(jù)中最基本的字幕和基本字幕以外的項目字幕,分別把屬于基本字幕的字幕數(shù)據(jù)輸出到基本字幕處理部分203,把屬于項目字幕數(shù)據(jù)的字幕數(shù)據(jù)輸出到確定層次水平部分204。
具體而言,字幕類別判定部分202,以表示輸入的各字幕數(shù)據(jù)中各畫面的圖像數(shù)據(jù)的整個主圖像數(shù)據(jù)位置的位置信息為基礎(chǔ),把在整個主圖像數(shù)據(jù)中相同位置顯示的字幕數(shù)據(jù)作為同類的字幕數(shù)據(jù)組進行分類。
此外,在各個分類的字幕數(shù)據(jù)種類(下面稱為字幕數(shù)據(jù)組)中,字幕類別判定部分202計算出與字幕圖像數(shù)據(jù)有關(guān)的整個內(nèi)容數(shù)據(jù)的總顯示時間,以總顯示時間為基礎(chǔ),確定各字幕數(shù)據(jù)組的種類,也就是把各字幕數(shù)據(jù)組的種類進行分類,設(shè)定表示各種類的信息(下面稱為種類信息)。
例如,在本實施方式中,所述字幕數(shù)據(jù)類別判定部分以顯示時間最長的字幕數(shù)據(jù)組為一個基本字幕,把其他的字幕數(shù)據(jù)組,也就是把顯示時間比基本數(shù)據(jù)組短的字幕數(shù)據(jù)組,在每個主圖像數(shù)據(jù)中同一個字幕位置上分成各項目字幕。
例如,內(nèi)容數(shù)據(jù)是在轉(zhuǎn)播棒球比賽的情況下,在集中顯示了表示攻擊或防守轉(zhuǎn)換的局?jǐn)?shù)、兩隊的得分和出局人數(shù)等的與比賽有關(guān)的各種信息的字幕圖像數(shù)據(jù)的情況下,由于集中各種信息的字幕數(shù)據(jù)組的顯示時間最長,所以此字幕數(shù)據(jù)組作為基本字幕,其他的字幕例如顯示進攻者的姓名和成績的字幕數(shù)據(jù)組作為項目字幕數(shù)據(jù)。
在字幕類別判定部分202中判定為基本字幕,也就是添加了基本字幕類別信息的各字幕數(shù)據(jù)被預(yù)先輸入到基本字幕處理部分203中,此基本字幕處理部分203在輸入的各基本字幕數(shù)據(jù)的圖像數(shù)據(jù)內(nèi)部,專門確定隨時間進行此顯示發(fā)生變化的部位(下面稱為變化部位),同時以此專門確定的各變化部位的變化次數(shù)為基礎(chǔ),確定基本字幕數(shù)據(jù)組中各變化部位大體的層次水平。
具體而言,基本字幕處理部分203在輸入的各字幕數(shù)據(jù)中把各幀的各字幕數(shù)據(jù)的圖像數(shù)據(jù)內(nèi)部進行二進制處理,專門確定此基本字幕數(shù)據(jù)組中字幕數(shù)據(jù)內(nèi)的變化部位。
所述基本字幕處理部分203抽取各變化部位變化時刻的幀中的圖像數(shù)據(jù)(下面稱為代表圖像數(shù)據(jù)),同時在各變化部位設(shè)定基本字幕數(shù)據(jù)組中的特定變化部位變化的特征數(shù)據(jù)。
所述基本字幕處理部分203以上述設(shè)定的特征數(shù)據(jù)為基礎(chǔ),算出各變化部位的變化次數(shù),把計算出的變化次數(shù)少的變化部位設(shè)定為層次高的變化部位,按變化次數(shù)少的變化部位的順序,決定各變化部位層次水平的高低。
例如,內(nèi)容數(shù)據(jù)是轉(zhuǎn)播棒球比賽的情況,在如圖3(a)、(b)所代表的那樣抽取基本字幕數(shù)據(jù)組的情況下,本實施方式的基本字幕處理部分203以二進制處理為基礎(chǔ),確定各變化部位A~G,同時以特定變化部位的特征數(shù)據(jù)為基礎(chǔ),算出各變化部位A~G的基本字幕數(shù)據(jù)組的整體變化次數(shù),決定變化次數(shù)越少的變化部位,其層次水平越高,由此設(shè)定各變化部位的層次水平。
在這種情況下,也就是是棒球比賽的內(nèi)容數(shù)據(jù)的情況,在如圖3(a)、(b)代表的那樣抽取基本字幕數(shù)據(jù)組的情況下,基本字幕處理部分203把變化部位A和B表示比賽中各隊的得分,把此變化部位A和B設(shè)定為最高層次水平的變化部位,把表示比賽局?jǐn)?shù)的變化部位C設(shè)定為下一個層次水平,表示各局的攻守轉(zhuǎn)換,把表示各局的上下半局的變化部位D設(shè)定為在變化部位C的下一個層次水平,把表示出局的變化部位G設(shè)定為在變化部位D的下一個層次水平,把表示好球數(shù)和壞球數(shù)的變化部位設(shè)定E和F為最低層次水平。
另一方面,基本字幕處理部分203以字幕類別判定部分202中設(shè)定的表示字幕種類的種類信息為基礎(chǔ),設(shè)定了在各變化部位變化時刻的各代表圖像數(shù)據(jù)中用來進行識別其他變化部位的時刻的代表圖像數(shù)據(jù)的種類信息,同時把此代表圖像數(shù)據(jù)與各代表圖像數(shù)據(jù)的開始幀的幀信息一起輸出到確定層次水平部分204。
具體而言,基本字幕處理部分203在各個變化部位、以及在各代表圖像數(shù)據(jù),分別設(shè)定種類信息,以分辨項目字幕數(shù)據(jù),同時分辨其他層次設(shè)定的代表圖像數(shù)據(jù)或其他變化部位的代表圖像數(shù)據(jù)。
如上所述,此基本字幕處理部分203把在各代表圖像數(shù)據(jù)中、各變化部位中設(shè)定的簡要的層次水平信息(下面稱為層次水平信息)與各代表圖像數(shù)據(jù)一起輸出到確定層次水平部分204中。
所述基本字幕處理部分203用數(shù)字的數(shù)據(jù),設(shè)定各變化部位的層次水平,把表示各變化部位的層次水平的數(shù)字?jǐn)?shù)據(jù),輸出到確定層次水平部分204中。
基本字幕數(shù)據(jù)組中的各變化部位變化時刻的各代表圖像數(shù)據(jù)、此代表圖像數(shù)據(jù)的幀信息和它的種類信息被輸入到確定層次水平部分204中,同時把基本字幕數(shù)據(jù)組的各變化部位中的層次水平信息和各種類的各項目字幕數(shù)據(jù),也就是和項目字幕數(shù)據(jù)組輸入到確定層次水平部分204中。
所述確定層次水平部分204,以輸入的基本字幕數(shù)據(jù)組中各變化部位的層次水平為基礎(chǔ),確定項目字幕數(shù)據(jù)組的層次水平,同時以確定的項目字幕數(shù)據(jù)組的層次水平為基礎(chǔ),最終確定各基本字幕數(shù)據(jù)組中各變化部位的層次水平。
具體而言,確定層次水平部分204判斷基本字幕數(shù)據(jù)組的任何變化部位在變化一次之際是否出現(xiàn)同一種類中的項目字幕數(shù)據(jù)。
在本實施方式中,所述確定層次水平部分204以種類信息為基礎(chǔ),預(yù)先對各項目字幕數(shù)據(jù)組中的各項目字幕數(shù)據(jù)的每個開始幀,將時間上相鄰的基本字幕數(shù)據(jù)組中同一變化部位變化的、輸入的各代表圖像數(shù)據(jù)開始幀的信息進行對比,計算出從時間較早的基本字幕數(shù)據(jù)組任何變化部位中各代表圖像數(shù)據(jù)的開始幀,到時間較晚的同一變化部位中代表圖像數(shù)據(jù)的開始幀中,同一種類的項目字幕數(shù)據(jù)組中項目字幕數(shù)據(jù)的出現(xiàn)次數(shù)。
如圖3(a)、(b)所示,在基本字幕數(shù)據(jù)組中變化部位G發(fā)生一次變化之間,任何種類的項目字幕數(shù)據(jù)組的項目字幕數(shù)據(jù)出現(xiàn)一次,同時在此項目字幕數(shù)據(jù)組的項目字幕數(shù)據(jù)出現(xiàn)一次時變化部位G的下層次的變化部位E變換多次的情況下,確定層次水平部分204把此項目字幕數(shù)據(jù)組的層次水平設(shè)定為與基本字幕數(shù)據(jù)組中的變化部位G相同的層次水平。
也就是內(nèi)容數(shù)據(jù)是轉(zhuǎn)播棒球比賽的情況,表示擊球者姓名和其成績的圖像數(shù)據(jù)作為同一種類的項目字幕數(shù)據(jù)組表示的情況下,即使一般基本字幕數(shù)據(jù)組中變化部位的好球數(shù)的圖像數(shù)據(jù)改變,此項目字幕數(shù)據(jù)組的顯示仍不變。另一方面,在這種情況下在同一項目字幕數(shù)據(jù)顯示期間,好球數(shù)圖像數(shù)據(jù)的一個上層次的出局變化部位基本上沒有變化。因此,在這種情況下,確定層次水平部分204把顯示此擊球者姓名和其成績的項目字幕數(shù)據(jù)組設(shè)定為與表示出局的變化部位的層次水平相同的層次水平。
在確定各項目字幕數(shù)據(jù)組的層次水平時,本實施方式的確定層次水平部分204以種類信息為基礎(chǔ),使用設(shè)定在時間上相鄰的基本字幕數(shù)據(jù)組中同一變化部位改變的代表圖像數(shù)據(jù)中的開始幀信息。
此外,如上所述,所述確定層次水平部分204在基本字幕數(shù)據(jù)組變化部位和各項目字幕數(shù)據(jù)組中,設(shè)定如上所述設(shè)定的層次水平信息(下面稱為確定水平信息),把此水平確定信息與各變化部位的代表圖像數(shù)據(jù)和它的開始幀的幀信息、各項目字幕數(shù)據(jù)組的各項目字幕數(shù)據(jù)一起輸出到數(shù)據(jù)生成部分205。
把在此確定的各變化部位的代表圖像數(shù)據(jù)中或者在各項目字幕數(shù)據(jù)組中表示基本字幕數(shù)據(jù)和項目字幕數(shù)據(jù)、種類信息、層次水平的確定水平信息和幀信息輸入到數(shù)據(jù)生成部分205中,所述數(shù)據(jù)生成部分205以這些輸入的這些各種數(shù)據(jù)為基礎(chǔ),生成索引數(shù)據(jù),把此生成的索引數(shù)據(jù)輸出到數(shù)據(jù)存儲部分103。
例如,數(shù)據(jù)生成部分205把在各項目字幕數(shù)據(jù)組中各項目字幕數(shù)據(jù)出現(xiàn)時的圖像數(shù)據(jù)確定為代表圖像數(shù)據(jù),同時在各基本字幕數(shù)據(jù)組的變化部位和項目字幕數(shù)據(jù)組中把代表圖像數(shù)據(jù)、種類信息、水平信息和開始畫面的畫面信息匯總在一起,生成如圖4所示的索引數(shù)據(jù)。
在圖4中,種類信息的最初字母表示基本字幕數(shù)據(jù)組和項目字幕數(shù)據(jù)組的種類,此后的數(shù)字和字母的組合表示基本字幕數(shù)據(jù)組中各變化部位的種類。
此外,項目字幕數(shù)據(jù)組的項目字幕數(shù)據(jù)每次在主圖像數(shù)據(jù)中出現(xiàn)時,例如為了正在顯示與表示擊球者和打擊率不同的圖像數(shù)據(jù),即使在有同一種類的種類信息的情況下,也能對應(yīng)于不同的圖像數(shù)據(jù)。此外幀信息顯示開始幀的信息。
下面用圖5~圖7對在清單數(shù)據(jù)生成部分中生成的清單數(shù)據(jù)進行說明。
圖5~圖7為表示本實施方式的清單數(shù)據(jù)生成部分105中生成的清單數(shù)據(jù)的一個示例。
在進行內(nèi)容數(shù)據(jù)的從頭再現(xiàn)時,把上述生成的從頭再現(xiàn)對象的索引數(shù)據(jù)輸入到清單數(shù)據(jù)生成部分105中,此清單數(shù)據(jù)生成部分105以輸入的索引數(shù)據(jù)為基礎(chǔ),生成表示在與外部連接的顯示器10上要顯示的索引數(shù)據(jù)的圖像數(shù)據(jù)的清單數(shù)據(jù),把此生成的索引數(shù)據(jù)輸出到顯示控制部分106。
例如,在不存在項目字幕的情況下,如圖5所示,在本實施方式中清單數(shù)據(jù)生成部分105以層次水平的高低為基礎(chǔ),使基本字幕數(shù)據(jù)變化部位的代表圖像數(shù)據(jù)在上下方向表示,同時以進行的時間為基礎(chǔ),在每個相同的層次水平生成使代表圖像數(shù)據(jù)在左右方向表示的清單數(shù)據(jù)。
在本實施方式中,清單數(shù)據(jù)生成部分105一般先生成清單數(shù)據(jù),以表示任何層次水平中代表圖像數(shù)據(jù),通過圖中沒有表示的操作部分的操作,在切換層次水平高低的情況下,例如圖6所示,按此操作選擇的層次水平中生成相應(yīng)清單數(shù)據(jù),輸出到顯示器10。
另一方面如圖7(a)、(b)所示,在存在項目字幕的情況下,在本實施方式中以層次水平的高低為基礎(chǔ),使基本字幕數(shù)據(jù)變化部位的代表圖像數(shù)據(jù)或項目字幕數(shù)據(jù)的代表圖像數(shù)據(jù)在上下方向表示,同時以進行的時間為基礎(chǔ),在每個相同的層次水平生成使代表圖像數(shù)據(jù)在左右方向表示的清單數(shù)據(jù)。
如上所述,圖7(a)為在確定層次水平部分204中項目字幕數(shù)據(jù)的層次水平被設(shè)定為層次水平A的情況的圖示,圖7(b)為利用圖中沒有表示的操作部分選擇了層次水平A的情況下生成的清單數(shù)據(jù)。
此外,清單數(shù)據(jù)生成部分105通過圖中沒有表示的操作部分預(yù)先生成相應(yīng)清單數(shù)據(jù),以便可以進行在顯示器10上選擇顯示輸出的清單數(shù)據(jù)或可以進行切換,通過圖中沒有顯示的操作部分選擇清單數(shù)據(jù)的任何情況時,把此指示輸出到再現(xiàn)控制部分104。
下面用圖8對本實施方式的索引數(shù)據(jù)生成部分200中的索引數(shù)據(jù)生成處理動作進行說明。
圖8為表示本實施方式的索引數(shù)據(jù)生成處理動作的流程圖。此外,在本動作中認(rèn)為索引數(shù)據(jù)生成對象的內(nèi)容數(shù)據(jù)已經(jīng)存儲到數(shù)據(jù)存儲部分103。
首先,以EIT信息為基礎(chǔ),利用錄像控制部分102判斷是否生成索引數(shù)據(jù),進行此索引數(shù)據(jù)的生成處理的指令或利用圖中沒有表示的操作部分指示索引數(shù)據(jù)的生成,將進行索引數(shù)據(jù)的生成處理的指令輸入到系統(tǒng)控制部分107(S11步驟)。然后,此系統(tǒng)控制部分107通過再現(xiàn)控制部分104把此內(nèi)容數(shù)據(jù)從數(shù)據(jù)存儲部分103中讀出,把讀出的內(nèi)容數(shù)據(jù)中各幀的各主圖像數(shù)據(jù)輸出到字幕數(shù)據(jù)抽取部分201(S12步驟)。
然后,各畫面的主圖像數(shù)據(jù)被輸入到字幕數(shù)據(jù)抽取部分201后,此字幕數(shù)據(jù)抽取部分201,從此各主圖像數(shù)據(jù)中抽取字幕部分的副圖像數(shù)據(jù)來作為字幕數(shù)據(jù)(S13步驟)。
具體而言,如上所述,字幕數(shù)據(jù)抽取部分201利用把輸入的各主圖像數(shù)據(jù)進行二進制化處理,推斷包括在此主圖像數(shù)據(jù)中的字幕數(shù)據(jù),同時抽取推斷的各副圖像數(shù)據(jù)中的幀信息、位置信息。此時,此字幕數(shù)據(jù)抽取部分201在推斷的字幕數(shù)據(jù)上賦予各識別信息,同時添加各副圖像數(shù)據(jù)中的畫面信息,作為字幕數(shù)據(jù)輸出到字幕種類判定部分202。
接著,推斷的字幕數(shù)據(jù)被輸入到字幕種類判定部分202后,此字幕種類判定部分202,以所輸入的各字幕數(shù)據(jù)中的位置信息為基礎(chǔ),,也就是以主圖像數(shù)據(jù)中副圖像數(shù)據(jù)的顯示位置為基礎(chǔ),把字幕數(shù)據(jù)進行分類,在各字幕數(shù)據(jù)組中計算出內(nèi)容數(shù)據(jù)中的總顯示時間(S14步驟)。
然后,字幕種類判定部分202以計算出的總顯示時間為基礎(chǔ),設(shè)定一個字幕數(shù)據(jù)組為基本字幕數(shù)據(jù)、其他的字幕數(shù)據(jù)組為項目字幕數(shù)據(jù),分別把設(shè)定的基本字幕數(shù)據(jù)輸出到基本字幕處理部分203,把設(shè)定的項目字幕數(shù)據(jù)輸出到確定層次水平部分204(S15步驟)。
所述字幕種類判定部分202在僅輸入了一個字幕數(shù)據(jù)組的情況下,把此字幕輸入的數(shù)據(jù)設(shè)定為基本字幕。
然后,基本字幕數(shù)據(jù)被輸入到基本字幕處理部分203后,此基本字幕處理部分203利用把輸入的字幕數(shù)據(jù)進行二進制化處理,確定此基本字幕數(shù)據(jù)中的變化部位(S16步驟)。
然后,基本字幕處理部分203算出此特定各變化部位的變化次數(shù),確定各變化部位的大體層次水平,把表示各變化部位大體的層次水平的水平信息輸出到確定層次水平部分204,同時在各代表圖像數(shù)據(jù)中把各變化部位變化時刻的代表圖像數(shù)據(jù)、各變化部位的種類和此各代表圖像數(shù)據(jù)與其他代表圖像數(shù)據(jù)進行識別的種類信息、以及此各代表圖像數(shù)據(jù)的幀信息,輸出到確定層次水平部分204(S17步驟)。
具體而言,如上所述,在確定各變化部位的大體層次水平的情況下,基本字幕處理部分203設(shè)定特定變化部位的變化時刻的特征數(shù)據(jù),同時以在各變化部位設(shè)定的特征數(shù)據(jù)為基礎(chǔ),算出變化次數(shù),將變化次數(shù)少的變化部位設(shè)定為高層次水平。
然后,確定層次水平部分204輸入項目字幕數(shù)據(jù),將代表圖像數(shù)據(jù)與水平信息等其他信息一起輸入后,確定項目字幕數(shù)據(jù)的層次水平,同時確定基本字幕數(shù)據(jù)的各變化部位的層次水平,把此確定的各層次水平作為水平確定信息輸出到數(shù)據(jù)生成部205,同時把各變化部位或各項目字幕數(shù)據(jù)中的代表圖像等的各種信息輸出到數(shù)據(jù)生成部分205(S18步驟)。
具體而言,如上所述,所述確定層次水平部分204利用檢測基本字幕數(shù)據(jù)的任何變化部位變化一次時同種類項目字幕數(shù)據(jù)是否出現(xiàn),確定各項目字幕數(shù)據(jù)的層次水平,以此確定的項目字幕數(shù)據(jù)的層次水平為基礎(chǔ),確定基本字幕數(shù)據(jù)的各變化部位的層次水平。
然后,數(shù)據(jù)生成部分205以輸入的項目數(shù)據(jù)為基礎(chǔ),設(shè)定各項目字幕數(shù)據(jù)的代表圖像,以輸入的此設(shè)定的代表圖像數(shù)據(jù)等其他數(shù)據(jù)為基礎(chǔ),生成索引數(shù)據(jù)(S19步驟)。
其次,數(shù)據(jù)生成部分205通過再現(xiàn)控制部分104將生成的索引數(shù)據(jù)輸出到數(shù)據(jù)存儲部分,數(shù)據(jù)存儲部分103輸入索引數(shù)據(jù)后進行規(guī)定處理,把此索引數(shù)據(jù)存儲到HD(S20步驟)。
最后,利用圖中沒有表示的操作部分,生成此索引數(shù)據(jù)的內(nèi)容數(shù)據(jù)的畫面再現(xiàn)指示被輸入到系統(tǒng)控制部分107后,系統(tǒng)控制部分107讀出存儲在再現(xiàn)控制部分104中的索引數(shù)據(jù),同時在清單數(shù)據(jù)生成部分105生成此讀出的索引數(shù)據(jù)中的清單數(shù)據(jù),把此生成的清單數(shù)據(jù)輸出到外部的顯示器10(S21步驟)。
此時,再現(xiàn)控制部分104通過圖中沒有表示的操作部分,以生成的清單數(shù)據(jù)為基礎(chǔ),指示任何畫面中的從頭再現(xiàn)后,從此畫面的開頭進行內(nèi)容數(shù)據(jù)的再現(xiàn)。
采用上述本實施方式的話,數(shù)據(jù)記錄再現(xiàn)裝置100設(shè)置有再現(xiàn)控制部分104、字幕數(shù)據(jù)抽取部分201、第1基本字幕處理部分203、第2基本字幕處理部分203、確定層次水平部分204、數(shù)據(jù)生成部分205。其中,再現(xiàn)控制部分104是獲取具有活動圖像數(shù)據(jù)的內(nèi)容數(shù)據(jù);字幕數(shù)據(jù)抽取部分201是從獲取的活動圖像數(shù)據(jù)抽取隨時間進行而改變的輔助說明此活動圖像數(shù)據(jù)內(nèi)容的圖像數(shù)據(jù)的字幕數(shù)據(jù);第1基本字幕處理部分203是用于檢測表示抽取的數(shù)據(jù)的圖像變化部分的變化部位;第2基本字幕處理部分203在用第1基本處理部分203從1個或2個以上的字幕數(shù)據(jù)中檢測出至少2個以上的變化部位的情況下,對被檢測的各變化部位的變化次數(shù)和此被檢測的變化部位中的變化點進行檢測;確定層次水平部分204是以檢測出的各部位的變化次數(shù)為基礎(chǔ),設(shè)定各變化部位的層次水平;數(shù)據(jù)生成部分205以設(shè)定的各變化部位的層次水平和檢測的各變化部位的變化點為基礎(chǔ),生成表示內(nèi)容數(shù)據(jù)中多個畫面索引的索引數(shù)據(jù)。所述數(shù)據(jù)記錄再現(xiàn)裝置100還具有基于再現(xiàn)控制部分104生成的索引數(shù)據(jù),再現(xiàn)內(nèi)容數(shù)據(jù)的結(jié)構(gòu)。
采用此結(jié)構(gòu),在本實施方式中,數(shù)據(jù)記錄再現(xiàn)裝置100檢測抽取的字幕數(shù)據(jù)的變化部位,從1個或2個以上的字幕數(shù)據(jù)中至少檢測出2個以上的變化部位的情況下,檢測出被檢測的各變化部位的變化次數(shù)和此被檢測的各變化部位中的變化點。此外,此數(shù)據(jù)記錄再現(xiàn)裝置100以被檢測的各變化部位的變化次數(shù)為基礎(chǔ),設(shè)定各變化部位的層次水平,以設(shè)定的各變化部位的層次水平和被檢測的變化部位的變化點為基礎(chǔ),生成表示內(nèi)容數(shù)據(jù)中的多個畫面索引的索引數(shù)據(jù),同時以此生成的索引數(shù)據(jù)為基礎(chǔ),再現(xiàn)內(nèi)容數(shù)據(jù)。
也就是在本實施方式中,數(shù)據(jù)記錄再現(xiàn)裝置100以輔助說明隨時間而變的此內(nèi)容數(shù)據(jù)的內(nèi)容的字幕數(shù)據(jù)的變化點為基礎(chǔ),可以從內(nèi)容數(shù)據(jù)生成設(shè)定層次水平的索引數(shù)據(jù),同時以此生成的索引數(shù)據(jù)為基礎(chǔ),可以進行內(nèi)容數(shù)據(jù)的再現(xiàn)。
因此,本實施方式的數(shù)據(jù)記錄再現(xiàn)裝置100可以生成準(zhǔn)確顯示內(nèi)容數(shù)據(jù)的內(nèi)容索引數(shù)據(jù),以生成的索引數(shù)據(jù)為基礎(chǔ),可以進行內(nèi)容數(shù)據(jù)的再現(xiàn),所以可以容易而且準(zhǔn)確地進行用戶需要的畫面的檢索和再現(xiàn)。
此外,在本實施方式中,確定層次水平部分204具有把變化次數(shù)少的變化部位比變化次數(shù)多的變化部位設(shè)定在高的層次水平的結(jié)構(gòu)。
在本實施方式中采用此結(jié)構(gòu),數(shù)據(jù)記錄再現(xiàn)裝置100把變化次數(shù)少的變化部位比變化次數(shù)多的變化部位設(shè)定在高的層次水平。
一般來說,在內(nèi)容數(shù)據(jù)中,表示轉(zhuǎn)播棒球等的兩隊得分的字幕數(shù)據(jù)等此字幕數(shù)據(jù)中的變化次數(shù)少的變化部位表示重要的內(nèi)容,同時此變化部位改變的變化點多為內(nèi)容數(shù)據(jù)中重要畫面。
因此,本實施方式的數(shù)據(jù)記錄再現(xiàn)裝置100可以生成準(zhǔn)確顯示內(nèi)容數(shù)據(jù)的內(nèi)容索引數(shù)據(jù),以生成的索引數(shù)據(jù)為基礎(chǔ),可以進行內(nèi)容數(shù)據(jù)的再現(xiàn),所以可以容易而且準(zhǔn)確地進行用戶需要的畫面的檢索和再現(xiàn)。
此外,在本實施方式中,基本字幕處理部分203檢測被檢測變化部位的變化點時,字幕數(shù)據(jù)抽取部分201具有獲取此變化點中的各字幕數(shù)據(jù)的同時數(shù)據(jù)生成部分205對應(yīng)于取得的變化部位生成索引數(shù)據(jù)的結(jié)構(gòu)。
采用此結(jié)構(gòu),在本實施方式中,數(shù)據(jù)記錄再現(xiàn)裝置100,在基本字幕處理部分203檢測被檢測變化部位的變化點時,字幕數(shù)據(jù)抽取部分201獲取此變化點中的各圖象數(shù)據(jù),同時數(shù)據(jù)生成部分205對應(yīng)于取得的變化部位生成索引數(shù)據(jù)。
因此,本實施方式的數(shù)據(jù)記錄再現(xiàn)裝置100基于索引數(shù)據(jù)來進行內(nèi)容數(shù)據(jù)再現(xiàn)時,可以從字幕數(shù)據(jù)的圖像數(shù)據(jù)中確認(rèn)用戶需要的畫面,可以容易而且準(zhǔn)確地對內(nèi)容變化的畫面進行檢索和再現(xiàn)。
此外,在本實施方式中,數(shù)據(jù)記錄再現(xiàn)裝置100具有字幕種類判定部分202,字幕種類判定部分202在用字幕數(shù)據(jù)抽取部分201抽取2個以上字幕數(shù)據(jù)的情況下,以相對于各字幕數(shù)據(jù)中整個內(nèi)容數(shù)據(jù)的總顯示時間為基礎(chǔ),把字幕數(shù)據(jù)的種類分成作為要檢測變化部位中變化部分的一個字幕數(shù)據(jù)的基本字幕數(shù)據(jù)和作為其他字幕數(shù)據(jù)的項目字幕數(shù)據(jù),基本字幕處理部分203具有檢測已分類的第1字幕數(shù)據(jù)中變化部位的結(jié)構(gòu)。
采用此結(jié)構(gòu),在本實施方式中,數(shù)據(jù)記錄再現(xiàn)裝置100以相對于字幕數(shù)據(jù)中整個內(nèi)容數(shù)據(jù)的總顯示時間為基礎(chǔ),在作為要檢測變化部位中變化部分的一個字幕數(shù)據(jù)的基本字幕數(shù)據(jù)和作為其他字幕數(shù)據(jù)的項目字幕數(shù)據(jù)中,進行字幕數(shù)據(jù)種類的分類,檢測已分類的基本字幕數(shù)據(jù)中的變化部位。
一般來說,在內(nèi)容數(shù)據(jù)中,字幕數(shù)據(jù)在表示內(nèi)容數(shù)據(jù)的內(nèi)容以外,在轉(zhuǎn)播棒球的情況下大多要顯示選手姓名和此選手的成績等。
因此,本實施方式的數(shù)據(jù)記錄再現(xiàn)裝置100要排除不準(zhǔn)確顯示內(nèi)容數(shù)據(jù)的內(nèi)容點的字幕數(shù)據(jù)(項目字幕數(shù)據(jù)),以準(zhǔn)確顯示內(nèi)容數(shù)據(jù)的內(nèi)容的字幕數(shù)據(jù)為基礎(chǔ),可以生成索引數(shù)據(jù),所以可以生成準(zhǔn)確顯示內(nèi)容數(shù)據(jù)內(nèi)容的索引數(shù)據(jù),可以容易且準(zhǔn)確地進行用戶需要的畫面的檢索和再現(xiàn)。
在本實施方式中,確定層次水平部分204算出表示用字幕種類判定部分202已分類的第1字幕數(shù)據(jù)中各變化部位的各個變化間隔的變化間隔,確定層次水平部分204具有以算出的各變化間隔和用字幕種類判定部分202分類的第2字幕數(shù)據(jù)在此變化間隔中出現(xiàn)次數(shù)為基礎(chǔ),設(shè)定第1字幕數(shù)據(jù)各變化部位的層次水平的結(jié)構(gòu)。
采用此結(jié)構(gòu),在本實施方式中,數(shù)據(jù)記錄再現(xiàn)裝置100算出表示用字幕種類判定部分202分類的基本字幕數(shù)據(jù)中各變化部位各個變化間隔的變化間隔,確定層次水平部分204以算出的各變化間隔和用字幕種類判定部分202分類的項目字幕數(shù)據(jù)在此變化間隔中出現(xiàn)次數(shù)為基礎(chǔ),設(shè)定第1字幕數(shù)據(jù)的各變化部位的層次水平。
因此,本實施方式的數(shù)據(jù)記錄再現(xiàn)裝置100即使對于不準(zhǔn)確顯示內(nèi)容數(shù)據(jù)的內(nèi)容點的字幕數(shù)據(jù)(項目字幕數(shù)據(jù))也可以放入到索引數(shù)據(jù)中,所以可以進一步生成用戶需要畫面容易檢索的索引數(shù)據(jù)。
在本實施方式中,確定層次水平部分204具有設(shè)定利用字幕種類判定部分202分類的項目字幕數(shù)據(jù)的層次水平的結(jié)構(gòu)。
采用此結(jié)構(gòu),本實施方式的數(shù)據(jù)記錄再現(xiàn)裝置100即使對于不準(zhǔn)確顯示內(nèi)容數(shù)據(jù)的內(nèi)容點的字幕數(shù)據(jù)(項目字幕數(shù)據(jù))也可以放入到索引數(shù)據(jù)中,所以可以進一步生成用戶需要畫面容易檢索的索引數(shù)據(jù)。
在本實施方式中,在確定層次水平部分204中,在任何基本字幕數(shù)據(jù)變化部位發(fā)生一次變化期間,任何種類的項目字幕數(shù)據(jù)出現(xiàn)一次且此項目字幕數(shù)據(jù)出現(xiàn)時此變化部位的下位變化部位進行多次變換時,把此項目字幕數(shù)據(jù)的層次水平設(shè)定為與變化部位相同的層次水平,但是也可以把此項目字幕設(shè)定為此變化部位的下位的層次水平。
這種情況下,在將基本字幕數(shù)據(jù)的變化部位設(shè)定為此設(shè)定的層次水平的下位的層次水平的情況下,確定層次水平部分204把此變化部位的層次水平重新設(shè)定為上位的項目字幕數(shù)據(jù)的下位層次水平。
在本實施方式中,在基本字幕處理部分203中推斷各變化部位,以此變化部位的變化為基礎(chǔ),設(shè)定此各變化部位的層次水平,但是也可以預(yù)先在各內(nèi)容數(shù)據(jù)的種類中準(zhǔn)備模板,以此準(zhǔn)備的該模板為基礎(chǔ),確定變化部位的層次水平。
例如,內(nèi)容數(shù)據(jù)為轉(zhuǎn)播棒球比賽的情況下,在字幕數(shù)據(jù)的變化部位中一次變化次數(shù)期間,設(shè)想將內(nèi)外的變化部位變化2次。在這樣的內(nèi)容數(shù)據(jù)為轉(zhuǎn)播棒球比賽的情況下,在此字幕數(shù)據(jù)的變化部位中攻防轉(zhuǎn)換期間,設(shè)想發(fā)生2個出局的變化。因此,基本字幕處理部分203把這些模板存入內(nèi)部,在設(shè)定層次水平時讀出此模板,同時以檢測的變化部位的變化次數(shù)為基礎(chǔ),可以檢測設(shè)定的各變化部位的層次水平和此變化部位表示的內(nèi)涵。其結(jié)果,數(shù)據(jù)記錄再現(xiàn)裝置100以變化部位的內(nèi)涵為基礎(chǔ),設(shè)定各變化部位的層次水平時,可以生成準(zhǔn)確反映層次水平的索引數(shù)據(jù),可以容易且準(zhǔn)確地進行用戶需要的畫面的檢索和再現(xiàn)。
此外,在本實施方式中,數(shù)據(jù)記錄再現(xiàn)裝置100不具有識別文字或記號等其他標(biāo)記的結(jié)構(gòu),在設(shè)定基本字幕數(shù)據(jù)中變化部位的層次水平時,只識別“0”也可以。由于一般數(shù)字部分大多從“0”開始,能識別“0”時,可以用字幕數(shù)據(jù)的表示形式準(zhǔn)確地特別指定兩隊的得分或出局等的變化部位。
這種情況下,數(shù)據(jù)記錄再現(xiàn)裝置100具有用于識別“0”的識別部分,在識別到“0”的情況下,或利用檢測它的次數(shù)來設(shè)定基本字幕數(shù)據(jù)中變化部位的層次水平。
在本實施方式中,數(shù)據(jù)記錄再現(xiàn)裝置100以基本字幕數(shù)據(jù)中的變化部位的變化次數(shù)為基礎(chǔ),設(shè)定各變化部位的層次水平,以設(shè)定的層次水平為基礎(chǔ),生成索引數(shù)據(jù),但是也可以以基本字幕的字幕數(shù)據(jù)的顯示和非顯示為基礎(chǔ),識別此基本字幕數(shù)據(jù)中的各變化部位的內(nèi)涵,以此識別的各變化部位為基礎(chǔ),生成索引數(shù)據(jù)。
一般來說,在內(nèi)容數(shù)據(jù)是轉(zhuǎn)播棒球比賽的情況下,有時在一定時間內(nèi)不顯示用于表示攻防的轉(zhuǎn)換等的次數(shù)和表示此內(nèi)外的字幕數(shù)據(jù)。此外,在內(nèi)容數(shù)據(jù)是轉(zhuǎn)播拳擊比賽的情況下,有時在一定的時間內(nèi)不顯示用于表示在每個回合的轉(zhuǎn)換中一個回合的剩余時間的字幕數(shù)據(jù)。也就是可以成為基本字幕數(shù)據(jù)的字幕數(shù)據(jù)不顯示期間大多為內(nèi)容數(shù)據(jù)的內(nèi)容切換的情況,在此基本字幕數(shù)據(jù)不顯示期間的前后大多進行內(nèi)容數(shù)據(jù)的內(nèi)容的切換。
因此,在這種情況下,在本實施方式的數(shù)據(jù)記錄裝置中,也可以檢測此基本字幕數(shù)據(jù)預(yù)先設(shè)定期間以上的非顯示的期間,同時識別經(jīng)過此非顯示期間內(nèi)容切換的變化部位為預(yù)先設(shè)定的變化部位,以此識別的各變化部位為基礎(chǔ),生成索引數(shù)據(jù)。
此外,在本實施方式中,也可以以字幕數(shù)據(jù)的內(nèi)容數(shù)據(jù)中的總顯示時間為基礎(chǔ),進行字幕數(shù)據(jù)的分類,也可以根據(jù)變化部位的大小進行此分類。
在本實施方式中,基本上對有關(guān)棒球比賽中的內(nèi)容數(shù)據(jù),說明了使用基本字幕數(shù)據(jù)的各變化部位中的層次水平,當(dāng)然不限于棒球,可以適用于足球、拳擊等隨時間進行字幕變化的比賽中的內(nèi)容數(shù)據(jù)。
例如,在足球比賽的內(nèi)容數(shù)據(jù)的情況下,表示字幕中的得分的變化部位成為最上位的層次水平,表示剩余時間的變化部位為下位的層次水平。
在本實施方式中,用索引數(shù)據(jù)生成部分200執(zhí)行索引數(shù)據(jù)的生成處理動作,具有用于記錄規(guī)定此索引數(shù)據(jù)處理動作的程序的記錄介質(zhì)、讀取此程序的計算機,可以用此計算機讀取的此程序進行與上述相同的索引數(shù)據(jù)生成處理動作。
權(quán)利要求
1.一種索引數(shù)據(jù)生成裝置,其特征在于,包含獲取設(shè)備,用于獲取至少包括具有預(yù)先確定時間長度的活動圖像數(shù)據(jù)的內(nèi)容數(shù)據(jù);抽取設(shè)備,從表示所述已獲取的活動圖像數(shù)據(jù)的主圖像數(shù)據(jù)中抽取隨時間進行而改變的、輔助說明所述主圖像數(shù)據(jù)的副圖像數(shù)據(jù);第1檢測設(shè)備,用于檢測表示所述抽取的副圖像數(shù)據(jù)圖像變化部分的部分圖像數(shù)據(jù);第2檢測設(shè)備,在用所述第1檢測設(shè)備從1個或2個副圖像數(shù)據(jù)至少檢測了2個以上的所述部分圖像數(shù)據(jù)的情況下,對檢測的各部分圖像數(shù)據(jù)的變化次數(shù)和所述已檢測出的各部分圖像數(shù)據(jù)中的變化點進行檢測;設(shè)定設(shè)備,以所述檢測的各部分圖像數(shù)據(jù)的變化次數(shù)為基礎(chǔ),對各部分圖像數(shù)據(jù)的層次水平進行設(shè)定;以及生成設(shè)備,基于所述設(shè)定的各部分圖像數(shù)據(jù)的層次水平和所述檢測的各部分圖像數(shù)據(jù)的變化點,生成表示所述內(nèi)容數(shù)據(jù)中多個畫面索引的索引數(shù)據(jù)。
2.如權(quán)利要求1所述的索引數(shù)據(jù)生成裝置,其特征在于所述設(shè)定設(shè)備把所述變化次數(shù)少的所述部分圖像數(shù)據(jù),設(shè)定成與所述變化次數(shù)多的部分圖像數(shù)據(jù)相比更高的層次水平。
3.如權(quán)利要求1或2所述的索引數(shù)據(jù)生成裝置,其特征在于在所述第2檢測設(shè)備檢測所述被檢測的各部分圖像數(shù)據(jù)的變化點時,具有獲取此變化點中的各副圖像數(shù)據(jù)的圖像獲取設(shè)備;所述生成設(shè)備對應(yīng)于所述獲取的各副圖像數(shù)據(jù),生成所述索引數(shù)據(jù)。
4.如權(quán)利要求1至3中任何一項所述的索引數(shù)據(jù)生成裝置,其特征在于在用所述抽取設(shè)備抽取2個以上的所述副圖像數(shù)據(jù)的情況下,所述第1檢測設(shè)備具有分類設(shè)備,以所述各副圖像數(shù)據(jù)中的相對于整個所述內(nèi)容數(shù)據(jù)的總顯示時間為基礎(chǔ),把所述副圖像數(shù)據(jù)的種類分成作為要檢測所述部分圖像數(shù)據(jù)中變化部分的一個副圖像數(shù)據(jù)的第1副圖像數(shù)據(jù)、和作為其他副圖像數(shù)據(jù)的第2副圖像數(shù)據(jù),能檢測出所述分類后的第1副圖像數(shù)據(jù)中的部分圖像數(shù)據(jù)。
5.如權(quán)利要求4所述的索引數(shù)據(jù)生成裝置,其特征在于所述設(shè)定設(shè)備具有計算設(shè)備,對表示用所述分類設(shè)備分類的所述第1副圖像數(shù)據(jù)中各變化部位各變化間隔的變化間隔進行計算,以所述計算出的各變化間隔和用所述分類設(shè)備分類的所述第2副圖像數(shù)據(jù)在此各變化間隔中的出現(xiàn)次數(shù)為基礎(chǔ),設(shè)定第1副圖像數(shù)據(jù)的各部分圖像的層次水平。
6.如權(quán)利要求5所述的索引生成裝置,其特征在于所述設(shè)定設(shè)備,設(shè)定用所述分類設(shè)備分類的所述第2副圖像數(shù)據(jù)的層次水平。
7.一種內(nèi)容數(shù)據(jù)再現(xiàn)裝置,其特征在于,包含獲取設(shè)備,用于獲取至少包括有活動圖像數(shù)據(jù)的內(nèi)容數(shù)據(jù);抽取設(shè)備,從表示所述已獲取的活動圖像數(shù)據(jù)的主圖像數(shù)據(jù)中,抽取隨時間進行而改變的、輔助說明此主圖像數(shù)據(jù)的副圖像數(shù)據(jù);第1檢測設(shè)備,用于檢測表示所述抽取的副圖像數(shù)據(jù)的圖像變化部分的部分圖像數(shù)據(jù);第2檢測設(shè)備,在用所述第1檢測設(shè)備從1個或2個副圖像數(shù)據(jù)至少檢測了2個以上的所述部分圖像數(shù)據(jù)的情況下,對檢測的各部分圖像數(shù)據(jù)的變化次數(shù)和所述已檢測出的各部分圖像數(shù)據(jù)中的變化點進行檢測;設(shè)定設(shè)備,以所述檢測的各部分圖像數(shù)據(jù)的變化次數(shù)為基礎(chǔ),對各部分圖像數(shù)據(jù)的層次水平進行設(shè)定;生成設(shè)備,基于所述設(shè)定的各部分圖像數(shù)據(jù)的層次水平和所述檢測的各部分圖像數(shù)據(jù)的變化點,生成表示所述內(nèi)容數(shù)據(jù)中多個畫面索引的索引數(shù)據(jù);以及再現(xiàn)設(shè)備;以所述生成的索引數(shù)據(jù)為基礎(chǔ),將所述內(nèi)容數(shù)據(jù)進行再現(xiàn)。
8.如權(quán)利要求7所述的內(nèi)容數(shù)據(jù)再現(xiàn)裝置,其特征在于所述設(shè)定設(shè)備把所述變化次數(shù)少的所述部分圖像數(shù)據(jù),設(shè)定成與所述變化次數(shù)多的部分圖像數(shù)據(jù)相比更高的層次水平。
9.如權(quán)利要求7或8所述的內(nèi)容數(shù)據(jù)再現(xiàn)裝置,其特征在于在所述第2檢測設(shè)備檢測所述被檢測的各部分圖像數(shù)據(jù)的變化點時,具有獲取此變化點中的各副圖像數(shù)據(jù)的圖像獲取設(shè)備;所述生成設(shè)備對應(yīng)于所述獲取的各部分圖像數(shù)據(jù),生成所述索引數(shù)據(jù)。
10.一種索引數(shù)據(jù)生成方法,其特征在于,包含獲取步驟,用于獲取至少包括有活動圖像數(shù)據(jù)的內(nèi)容數(shù)據(jù);抽取步驟,從表示所述已獲取的活動圖像數(shù)據(jù)的主圖像數(shù)據(jù)中抽取隨時間進行而改變的、輔助說明此主圖像數(shù)據(jù)的副圖像數(shù)據(jù);第1檢測步驟,用于檢測表示所述抽取的副圖像數(shù)據(jù)圖像變化部分的部分圖像數(shù)據(jù);第2檢測步驟,用所述第1檢測步驟從1個或2個副圖像數(shù)據(jù)至少檢測了2個以上的所述部分圖像數(shù)據(jù)的情況下,對檢測的各部分圖像數(shù)據(jù)的變化次數(shù)和所述已檢測出的各部分圖像數(shù)據(jù)中的變化點進行檢測;設(shè)定步驟,以所述檢測的各部分圖像數(shù)據(jù)的變化次數(shù)為基礎(chǔ),對各部分圖像數(shù)據(jù)的層次水平進行設(shè)定;以及生成步驟,基于所述設(shè)定的各部分圖像數(shù)據(jù)的層次水平和所述檢測的各部分圖像數(shù)據(jù)的變化點,生成表示所述內(nèi)容數(shù)據(jù)中多個畫面索引的索引數(shù)據(jù)。
11.一種內(nèi)容數(shù)據(jù)再現(xiàn)方法,其特征在于,包含獲取步驟,用于獲取至少包括有活動圖像數(shù)據(jù)的內(nèi)容數(shù)據(jù);抽取步驟,是從表示所述已獲取的活動圖像數(shù)據(jù)的主圖像數(shù)據(jù)中抽取隨時間進行而改變的、輔助說明此主圖像數(shù)據(jù)的副圖像數(shù)據(jù);第1檢測步驟,用于檢測表示所述抽取的副圖像數(shù)據(jù)圖像變化部分的部分圖像數(shù)據(jù);第2檢測步驟,在用所述第1檢測設(shè)備從1個或2個副圖像數(shù)據(jù)至少檢測了2個以上的所述部分圖像數(shù)據(jù)的情況下,對檢測的各部分圖像數(shù)據(jù)的變化次數(shù)和所述已檢測出的各部分圖像數(shù)據(jù)中的變化點進行檢測;設(shè)定步驟,以所述檢測的各部分圖像數(shù)據(jù)的變化次數(shù)為基礎(chǔ),對各部分圖像數(shù)據(jù)的層次水平進行設(shè)定;生成步驟,基于所述設(shè)定的各部分圖像數(shù)據(jù)的層次水平和所述檢測的各部分圖像數(shù)據(jù)的變化點,生成表示所述內(nèi)容數(shù)據(jù)中多個畫面索引的索引數(shù)據(jù);以及再現(xiàn)步驟;以所述生成的索引數(shù)據(jù)為基礎(chǔ),將所述內(nèi)容數(shù)據(jù)進行再現(xiàn)。
全文摘要
數(shù)據(jù)記錄再現(xiàn)裝置100檢測已抽取的字母數(shù)據(jù)的變化部位,在從1個或2個以上的字幕數(shù)據(jù)檢測至少2個以上的變化部位的情況下,檢測被檢測的各變化部位的變化次數(shù)和被檢測的各變化部位中的變化點。此外,所述數(shù)據(jù)記錄再現(xiàn)裝置100以被檢測的各變化部位的變化次數(shù)為基礎(chǔ),設(shè)定各變化部位的層次水平,以設(shè)定的各變化部位的層次水平和被檢測的各變化部位的變化點為基礎(chǔ),生成表示內(nèi)容數(shù)據(jù)中的多個畫面索引的索引數(shù)據(jù),同時以此生成的索引數(shù)據(jù)為基礎(chǔ),再現(xiàn)其內(nèi)容數(shù)據(jù)。
文檔編號G11B27/28GK1606342SQ20041008526
公開日2005年4月13日 申請日期2004年10月8日 優(yōu)先權(quán)日2003年10月7日
發(fā)明者堀內(nèi)直明 申請人:日本先鋒公司