專利名稱：內(nèi)容字符信息獲取方法、程序、設(shè)備和視頻內(nèi)容記錄設(shè)備的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及獲得表示出視頻內(nèi)容的內(nèi)容的字符信息的內(nèi)容字符 信息獲取方法，內(nèi)容字符信息獲取程序，內(nèi)容字符信息獲取設(shè)備和視 頻內(nèi)容記錄設(shè)備。
背景技術(shù)：
相關(guān)技術(shù)的硬盤(pán)記錄器被配置成不僅記錄電視廣播節(jié)目，而且自 動(dòng)產(chǎn)生管理這些電視廣播節(jié)目的管理列表，以便把表示標(biāo)題和內(nèi)容的 文本信息記錄到所述管理列表中，從而把管理列表用于廣播節(jié)目的列 表顯示和搜索這些節(jié)目。
這些硬盤(pán)記錄器還被配置成以文件信息的形式從在地面數(shù)字廣 播中分發(fā)的廣播信號(hào)中獲得表示電視廣播節(jié)目的排片日程表、標(biāo)題和 內(nèi)容的EPG(電子節(jié)目指南)信息。
一些上面提及的硬盤(pán)記錄器被配置成獲得流式內(nèi)容的文本信息， 以便把通過(guò)因特網(wǎng)分發(fā)的流式內(nèi)容記錄到管理列表中供搜索之用(例 如，如日本專利特許公開(kāi)No.2003-36259中公開(kāi)的那樣)。

發(fā)明內(nèi)容
應(yīng)注意硬盤(pán)記錄器被配置成不僅把地面數(shù)字廣播節(jié)目和流式內(nèi) 容記錄成視頻內(nèi)容，而且還把私人內(nèi)容，比如攝像機(jī)拍攝的成像數(shù)據(jù) 和用戶獨(dú)自通過(guò)編輯任務(wù)獲得的編輯數(shù)據(jù)記錄成視頻內(nèi)容。但是，這 些私人數(shù)據(jù)未被附加表示出標(biāo)題和內(nèi)容的文本信息，以致現(xiàn)有技術(shù)的 硬盤(pán)記錄器難以獲得表示出私人數(shù)據(jù)的內(nèi)容的文本信息。
于是，本發(fā)明致力于解決與現(xiàn)有技術(shù)的方法和設(shè)備相關(guān)的上述及 其它問(wèn)題，通過(guò)提供配置成獲得表示出視頻內(nèi)容的內(nèi)容的內(nèi)容字符信 息的內(nèi)容字符信息獲取方法，內(nèi)容字符信息獲取程序，內(nèi)容字符信息 獲取設(shè)備和視頻內(nèi)容記錄設(shè)備，解決所提出的問(wèn)題，所述字符信息表 示出視頻內(nèi)容的內(nèi)容。
在執(zhí)行本發(fā)明時(shí)并且按照本發(fā)明的一個(gè)方面，提供一種內(nèi)容字符
信息獲取方法。所述方法由下述步驟構(gòu)成按照預(yù)定提取算法，提取 表示構(gòu)成視頻內(nèi)容的圖像的內(nèi)容特征信息；從數(shù)據(jù)庫(kù)中檢測(cè)與內(nèi)容特
征信息類似的指定圖像特征信息，在所述數(shù)據(jù)庫(kù)中，按照提取算法從 指定圖像提取的指定圖像特征信息與表示出該指定圖像的內(nèi)容的圖
像文本信息關(guān)聯(lián)；和從數(shù)據(jù)庫(kù)獲得與在檢測(cè)步驟中檢測(cè)的指定圖像特 征信息關(guān)聯(lián)的圖像文本信息，作為表示出從中提取內(nèi)容特征信息的圖 像的內(nèi)容的內(nèi)容字符信息。
從而，可從數(shù)據(jù)庫(kù)獲得表示出構(gòu)成視頻內(nèi)容的每個(gè)圖像的內(nèi)容字 符信息。
在執(zhí)行本發(fā)明時(shí)并且按照本發(fā)明的另 一方面，提供一種視頻內(nèi)容 記錄設(shè)備。所述設(shè)備由下述組件構(gòu)成記錄器，所述記錄器被配置成 記錄從外部設(shè)備供給的視頻內(nèi)容；特征信息提取器，所述特征信息提 取器被配置成按照預(yù)定提取算法，提取表示構(gòu)成視頻內(nèi)容的圖像的內(nèi) 容特征信息；特征信息檢測(cè)器，所述特征信息檢測(cè)器被配置成從數(shù)據(jù) 庫(kù)中檢測(cè)與內(nèi)容特征信息類似的指定圖像特征信息，在所述數(shù)據(jù)庫(kù) 中，按照提取算法從指定圖像提取的指定圖像特征信息與表示出該指 定圖像的內(nèi)容的圖像文本信息關(guān)聯(lián)；文本獲取器，所述文本獲取器被 配置成從數(shù)據(jù)庫(kù)獲得與特征信息檢測(cè)器檢測(cè)的指定圖像特征信息關(guān) 聯(lián)的圖像文本信息，作為表示出從中提取內(nèi)容特征信息的圖像的內(nèi)容
的內(nèi)容字符信息。
從而，可從數(shù)據(jù)庫(kù)獲得表示出構(gòu)成視頻內(nèi)容的每個(gè)圖像的內(nèi)容字 符信息。
如上所述和按照本發(fā)明，可從數(shù)據(jù)庫(kù)獲得表示出構(gòu)成視頻內(nèi)容的 每個(gè)圖像的內(nèi)容的內(nèi)容字符信息，從而實(shí)現(xiàn)配置成獲得表示視頻內(nèi)容 的內(nèi)容的內(nèi)容字符信息的內(nèi)容字符信息獲取方法，內(nèi)容字符信息獲取 程序，內(nèi)容字符信息獲取設(shè)備和視頻內(nèi)容記錄設(shè)備。


參考附圖，根據(jù)實(shí)施例的下述說(shuō)明，本發(fā)明的其它目的和方面將
變得顯而易見(jiàn)，其中
圖l是圖解說(shuō)明硬盤(pán)記錄器的整體配置的方框圖2是圖解說(shuō)明數(shù)據(jù)庫(kù)生成處理的功能塊的方框圖3圖解說(shuō)明文本輸入屏幕；
圖4圖解說(shuō)明鍵盤(pán)屏幕；
圖5圖解說(shuō)明圖像文本數(shù)據(jù)庫(kù)的結(jié)構(gòu)；
圖6是圖解說(shuō)明候選標(biāo)題獲取處理的功能塊的方框圖7圖解說(shuō)明成像(imaged)數(shù)據(jù)管理列表的結(jié)構(gòu)； 圖8A和8B圖解說(shuō)明候選標(biāo)題文本的屏幕；
圖9是表示圖像文本數(shù)據(jù)庫(kù)生成處理的流程圖IO是表示候選標(biāo)題顯示處理的流程圖。
具體實(shí)施例方式
下面參考附圖通過(guò)實(shí)施例更詳細(xì)地說(shuō)明本發(fā)明。 (l)硬盤(pán)記錄器的整體配置
現(xiàn)在參考圖1，附圖標(biāo)記l表示硬盤(pán)記錄器。該硬盤(pán)記錄器被配 置成以從攝像機(jī)(未示出)接收的視頻內(nèi)容的形式記錄成像數(shù)據(jù)，并接 收和記錄在地面數(shù)字廣播上傳送的電視廣播節(jié)目。
就硬盤(pán)記錄器1來(lái)說(shuō)，基于CPU(中央處理器)的控制器2，均未
示出的ROM(只讀存儲(chǔ)器)和RAM(隨機(jī)存取存儲(chǔ)器)共同控制整個(gè)硬 盤(pán)記錄器l。控制器2把操作程序、數(shù)據(jù)庫(kù)生成程序和候選標(biāo)題顯示 程序從ROM或者硬盤(pán)驅(qū)動(dòng)器4裝入RAM中，從而執(zhí)行基于這些程 序的處理以及后面說(shuō)明的文本數(shù)據(jù)庫(kù)生成處理和候選標(biāo)題顯示處理。
如果用戶通過(guò)外部遙控器30發(fā)出請(qǐng)求，那么硬盤(pán)記錄器l通過(guò) 遙控器接口 10獲得遙控器30產(chǎn)生的操作信號(hào)，并把接收的操作信號(hào) 供給控制器2。
例如，當(dāng)從遙控器接口 10供給表示記錄保存在與外部接口 11 連接的攝像機(jī)(未示出)中的成像數(shù)據(jù)的請(qǐng)求的操作信號(hào)時(shí)，控制器2 執(zhí)行記錄接收的成像數(shù)據(jù)的處理。
即，控制器2把通過(guò)外部接口 11從攝像機(jī)(未示出)輸入的輸入 成像數(shù)據(jù)記錄到硬盤(pán)驅(qū)動(dòng)器4，作為記錄的成像數(shù)據(jù)。此時(shí)，控制器 2把由序列號(hào)等構(gòu)成的成像數(shù)據(jù)ID附到該記錄的圖像數(shù)據(jù)上。
此外，通過(guò)與成像數(shù)據(jù)ID關(guān)聯(lián)，控制器2通過(guò)登記附到成像數(shù) 據(jù)上的表示成像日期和編輯日期的成像日期信息，以及表示成像數(shù)據(jù) 輸入自外部接口 11的哪個(gè)輸入端子的輸入信息，產(chǎn)生將被記錄到閃 速存儲(chǔ)器5的成像數(shù)據(jù)管理列表43(后面說(shuō)明)。
當(dāng)從遙控器接口 10供給表示再現(xiàn)記錄到硬盤(pán)驅(qū)動(dòng)器4的成像數(shù) 據(jù)的請(qǐng)求的操作信號(hào)時(shí)，控制器2執(zhí)行再現(xiàn)記錄的成像數(shù)據(jù)的處理。
即，控制器2從硬盤(pán)驅(qū)動(dòng)器4讀取用戶指定的記錄的成像數(shù)據(jù)， 同時(shí)，在讀取的記錄的成像數(shù)據(jù)中，把再現(xiàn)的視頻數(shù)據(jù)傳給視頻解碼 器12，把音頻數(shù)據(jù)傳給音頻解碼器13。
控制器2按照預(yù)定的解碼算法通過(guò)視頻解碼器12解碼再現(xiàn)的視 頻數(shù)據(jù)，通過(guò)視頻信號(hào)處理電路14對(duì)所得到的解碼的再現(xiàn)視頻數(shù)據(jù) DP進(jìn)行數(shù)-模轉(zhuǎn)換和混合，并通過(guò)輸出端子16傳送處理后的信號(hào)。 從而，控制器2把基于再現(xiàn)的視頻信號(hào)DP的視頻圖像顯示在與視頻 輸出端子16連接的顯示監(jiān)視器(未示出)上。
另外，控制器2按照預(yù)定的解碼算法通過(guò)音頻解碼器13解碼音 頻數(shù)據(jù)，通過(guò)數(shù)-模轉(zhuǎn)換器15把解碼的音頻信號(hào)轉(zhuǎn)換成模擬信號(hào)，并
把轉(zhuǎn)換后的信號(hào)傳給音頻輸出端子17。從而，控制器2能夠從與音頻 輸出端子17連接的揚(yáng)聲器(未示出)基于該音頻數(shù)據(jù)的聲音。
如上所述，硬盤(pán)記錄器1被配置成記錄和再現(xiàn)通過(guò)外部接口 11 輸入的諸如成像數(shù)據(jù)之類的視頻內(nèi)容。
另外，當(dāng)從遙控器接口 IO供給表示記錄目前正在播出的電視廣 播節(jié)目的請(qǐng)求的操作信號(hào)時(shí)，控制器2接收指定的電視廣播節(jié)目，同 時(shí)，執(zhí)行記錄接收節(jié)目的處理。
即，控制器2通過(guò)調(diào)諧器21以選擇的頻帶接收數(shù)字廣播信號(hào)， 并把接收的信號(hào)傳給解調(diào)器22?？刂破?通過(guò)解調(diào)器22解調(diào)該數(shù)字 廣播信號(hào)，通過(guò)解擾器23解擾解調(diào)的數(shù)字廣播信號(hào)，通過(guò)多路分用 器24把解擾信號(hào)分成廣播視頻數(shù)據(jù)包、廣播音頻數(shù)據(jù)包和EPG(電子 節(jié)目指南)信息包。隨后，控制器2把廣播視頻數(shù)據(jù)和廣播音頻數(shù)據(jù)記 錄到硬盤(pán)驅(qū)動(dòng)器4作為錄制節(jié)目。
此外，在結(jié)束記錄處理時(shí)，控制器2通過(guò)登記從內(nèi)部時(shí)鐘25獲 得的每個(gè)電視廣播節(jié)目的記錄日期，從EPG信息提取的每個(gè)錄制節(jié) 目的標(biāo)題信息，和表示每個(gè)錄制節(jié)目的內(nèi)容的節(jié)目文本信息，創(chuàng)建錄 制節(jié)目管理列表，并把產(chǎn)生的列表記錄到閃速存儲(chǔ)器5中。
當(dāng)從遙控器接口 10供給表示顯示記錄到硬盤(pán)驅(qū)動(dòng)器4的錄制節(jié) 目的列表的請(qǐng)求的操作信號(hào)時(shí)，控制器2從閃速存儲(chǔ)器5讀取錄制節(jié) 目管理列表，根據(jù)該列表產(chǎn)生圖像數(shù)據(jù)，并把產(chǎn)生的圖像數(shù)據(jù)傳給視 頻解碼器12。從而，控制器2借助基本上和再現(xiàn)錄制的成像數(shù)據(jù)相同 的處理，把基于錄制節(jié)目管理列表的節(jié)目列表顯示在顯示監(jiān)視器上。
從而，除了通過(guò)外部接口 11輸入的成像數(shù)據(jù)的記錄和再現(xiàn)之外， 硬盤(pán)記錄器1把正在廣播的每個(gè)電視廣播節(jié)目記錄成錄制節(jié)目，并響 應(yīng)用戶請(qǐng)求，根據(jù)利用EPG信息自動(dòng)產(chǎn)生的錄制節(jié)目管理列表，在 顯示監(jiān)視器上顯示包括錄制節(jié)目管理列表的標(biāo)題信息等在內(nèi)的節(jié)目 列表。
(2)產(chǎn)生圖像文本數(shù)據(jù)庫(kù)
由于通過(guò)外部接口 11輸入的成像數(shù)據(jù)未被附上如上所述表示成
像數(shù)據(jù)的標(biāo)題和內(nèi)容的文本信息，因此在記錄成像數(shù)據(jù)的階段，現(xiàn)有
技術(shù)的硬盤(pán)記錄器不能自動(dòng)向成像數(shù)據(jù)管理列表43登記諸如表示表 現(xiàn)錄制成像數(shù)據(jù)的內(nèi)容和成像數(shù)據(jù)的內(nèi)容的標(biāo)題之類的文本信息。
應(yīng)注意從諸如成像數(shù)據(jù)之類視頻數(shù)據(jù)提取表示每個(gè)圖像的特征 或特性的特征信息的各種技術(shù)已眾所公知，并且提出了利用所述特征 信息來(lái)確定圖像之間的相似性的技術(shù)。如果兩個(gè)或者更多的圖像彼此 相似，那么認(rèn)為這些圖像表現(xiàn)的內(nèi)容基本相同，從而，表示這些圖像 之一的內(nèi)容的文本信息也很可能表現(xiàn)其它圖像的內(nèi)容。
于是，如果硬盤(pán)記錄器1具有登記有與圖像的特征信息對(duì)應(yīng)的圖 像文本信息的數(shù)據(jù)庫(kù)，那么通過(guò)利用特征信息，圖像硬盤(pán)記錄器l能 夠檢測(cè)與保存在記錄的圖像數(shù)據(jù)中的圖像類似的圖像，從而把與檢測(cè) 的圖像的特征信息對(duì)應(yīng)的圖像文本信息用作表示記錄的成像數(shù)據(jù)的 內(nèi)容的內(nèi)容字符信息。
從而，按照本發(fā)明的一個(gè)實(shí)施例的硬盤(pán)記錄器1被配置成產(chǎn)生其 中登記與每個(gè)圖像的特征信息對(duì)應(yīng)的圖像文本信息TX。下面說(shuō)明生 成圖像文本數(shù)據(jù)庫(kù)42的處理。在該數(shù)據(jù)庫(kù)生成處理中，硬盤(pán)記錄器1 的控制器2被配置成通過(guò)執(zhí)行數(shù)據(jù)庫(kù)生成程序，實(shí)現(xiàn)圖2中所示的功 能塊。
在執(zhí)行再現(xiàn)記錄到硬盤(pán)驅(qū)動(dòng)器4(圖l)的記錄成像數(shù)據(jù)的處理時(shí)， 硬盤(pán)記錄器1與該再現(xiàn)處理同時(shí)地執(zhí)行生成數(shù)據(jù)庫(kù)的處理。
即，硬盤(pán)記錄器1的控制器2把視頻解碼器12解碼的再現(xiàn)視頻 信號(hào)DP提供給視頻信號(hào)處理電路14，從而把基于該再現(xiàn)的視頻信號(hào) DP的圖像顯示在顯示監(jiān)視器(未示出)上，同時(shí)，把再現(xiàn)的視頻信號(hào) DP提供給控制器2中的圖像分析塊31和典型圖像選擇塊33。
圖像分析塊31從再現(xiàn)的視頻信號(hào)DP提取再現(xiàn)視頻特征數(shù)據(jù) DS，作為表示形成記錄的成像數(shù)據(jù)的每個(gè)幀圖像的特征的特征信息，
選擇塊33。
更具體地說(shuō)，當(dāng)供給再現(xiàn)視頻信號(hào)DP時(shí)，圖像分析塊3r把包
括在該再現(xiàn)視頻信號(hào)DP中的每個(gè)幀圖像分成5x5=25個(gè)區(qū)域，并計(jì) 算每個(gè)區(qū)域的亮度信號(hào)(或者Y信號(hào))的DCT(離散余弦變換)系數(shù)。隨 后，圖像分析塊31把這25個(gè)區(qū)域的DCT系數(shù)表示成一個(gè)25級(jí)(degree) 向量，該向量是基于幀圖像的再現(xiàn)視頻特征數(shù)據(jù)DS。
上，產(chǎn)生、特征信息標(biāo)識(shí)符Tid，并把產(chǎn)生的特征信息標(biāo)識(shí)符Tid附到 再現(xiàn)視頻特征數(shù)據(jù)DS上，從而把這些再現(xiàn)視頻特征數(shù)據(jù)DS和特征 信息標(biāo)識(shí)符Tid供給閃速存儲(chǔ)器5的特征數(shù)據(jù)記錄塊41，并臨時(shí)記錄 到RAM(未示出)中。
當(dāng)供給了附加特征信息標(biāo)識(shí)符Tid的再現(xiàn)視頻特征數(shù)據(jù)DS時(shí)， 特征數(shù)據(jù)記錄塊41在特征信息標(biāo)識(shí)符Tid與再現(xiàn)視頻特征數(shù)據(jù)DS關(guān) 聯(lián)的狀態(tài)下，把所有的再現(xiàn)視頻特征數(shù)據(jù)DS記錄成累積的特征數(shù)據(jù) DSa。
另一方面，典型圖像選擇塊33從圖像分析塊31供給的再現(xiàn)視頻 特征數(shù)據(jù)DS中選擇典型特征數(shù)據(jù)DSr，并把選擇的數(shù)據(jù)DSr傳給標(biāo) 識(shí)符識(shí)別塊34。
即，典型圖像選擇塊33計(jì)算作為連續(xù)的兩條再現(xiàn)視頻特征數(shù)據(jù) DS之間的向量的距離(下面稱為前-后距離)，以便檢測(cè)該前-后距離等 于或超過(guò)預(yù)定的場(chǎng)景變化閾值的再現(xiàn)視頻特征數(shù)據(jù)DS的組合。
此時(shí)，當(dāng)檢測(cè)到該前-后距離等于或超過(guò)預(yù)定的場(chǎng)景變化閾值的 再現(xiàn)視頻特征數(shù)據(jù)DS的組合時(shí)，典型圖像選擇塊33確定在這兩條連 續(xù)的特征數(shù)據(jù)中，后面的再現(xiàn)視頻特征數(shù)據(jù)DS所基于的幀圖像的場(chǎng) 景變化自前面的再現(xiàn)視頻特征數(shù)據(jù)DS所基于的幀圖像，從而使后面 的再現(xiàn)視頻特征數(shù)據(jù)DS成為典型特征數(shù)據(jù)DSr。
一般來(lái)說(shuō)，諸如成像數(shù)據(jù)之類的動(dòng)畫(huà)內(nèi)容由多塊類似圖像構(gòu)成。 于是，通過(guò)檢測(cè)場(chǎng)景變化，典型圖像選擇塊33能夠把從代表每一塊 的圖像提取的再現(xiàn)視頻特征數(shù)據(jù)DS設(shè)置成典型特征數(shù)據(jù)DSr。
當(dāng)從典型圖像選擇塊33供給典型特征數(shù)據(jù)DSr時(shí)，標(biāo)識(shí)符識(shí)別 塊34對(duì)照典型特征數(shù)據(jù)DSr匹配附加特征信息標(biāo)識(shí)符Tid的再現(xiàn)視
頻特征數(shù)據(jù)DS，并把與典型特征數(shù)據(jù)DSr匹配的再現(xiàn)視頻特征數(shù)據(jù) DS的特征信息標(biāo)識(shí)符Tid識(shí)別成典型特征數(shù)據(jù)DSr的特征信息標(biāo)識(shí) 符Tid(下面稱為典型特征信息標(biāo)識(shí)符Tidr),把該典型特征信息標(biāo)識(shí) 符Tidr傳給文本附加塊35和典型圖像選擇塊33。
當(dāng)完成記錄的成像數(shù)據(jù)的再現(xiàn)時(shí)，典型圖像選擇塊33利用典型 特征信息標(biāo)識(shí)符Tidr識(shí)別從中提取典型特征數(shù)據(jù)DSr的再現(xiàn)視頻特 征數(shù)據(jù)DS(下面稱為典型圖像數(shù)據(jù)PDr),把該典型圖像數(shù)據(jù)PDr疊 加到從ROM(未示出)讀取的圖像數(shù)據(jù)上，從而產(chǎn)生文本輸入圖像數(shù)據(jù) PDn，并把產(chǎn)生的文本輸入圖像數(shù)據(jù)PDn傳給視頻信號(hào)處理電路14。
從而，如圖3中所示，硬盤(pán)記錄器1能夠在顯示監(jiān)視器(未示出) 上顯示文本輸入屏幕50。
在該文本輸入屏幕50上，顯示基于典型圖像數(shù)據(jù)PDr的典型圖 像51, 同時(shí),顯示消息"Enter the word that indicates the contents of this image"，從而提示用戶把與典型圖像51對(duì)應(yīng)的圖像文本信息TX 輸入在文本輸入屏幕50的底部所示的文本輸入框52中。
此時(shí)，在文本輸入屏幕50上，光標(biāo)被置于鍵盤(pán)按鈕53上，鍵盤(pán) 按鈕53位于在右側(cè)所示的三個(gè)按鈕中的頂部。用和表示其它兩個(gè)按 鈕的顏色不同的顏色表示光標(biāo)所指的鍵盤(pán)按鈕。
在光標(biāo)被置于鍵盤(pán)按鈕3上的情況下，按下遙控器30的輸入按 鈕(未示出)導(dǎo)致典型圖像選擇塊33根據(jù)從ROM(未示出)讀取的圖像 數(shù)據(jù)，在顯示監(jiān)視器上顯示鍵盤(pán)屏幕60，如圖4中所示。
在鍵盤(pán)屏幕60上，如同在文本輸入屏幕50上一樣，文本輸入框 52被顯示在底部，同時(shí)，光標(biāo)被置于返回按鈕61或者鍵盤(pán)按鈕組62 上，在所述鍵盤(pán)按鈕組62中，按照日漆音節(jié)表排列平假名字符。
典型圖像選擇塊33(圖2)使用戶利用光標(biāo)按鈕和輸入按鈕(均未 示出)選擇鍵盤(pán)按鈕組62中的必需按鈕，從而輸入典型圖像51和對(duì)應(yīng) 的圖4象文本信息TX。
另外，當(dāng)在光標(biāo)被置于鍵盤(pán)屏幕60上的返回按鈕61的情況下， 按下遙控器30的輸入按鈕時(shí)，典型圖像選擇塊33再次在顯示監(jiān)枧器
上顯示文本輸入屏幕50(圖3)。
隨后，當(dāng)按下遙控器30的光標(biāo)按鈕(未示出)，以便從遙控器接 口 IO供給對(duì)應(yīng)的操作信號(hào)時(shí)，典型圖像選擇塊33順序把光標(biāo)從鍵盤(pán) 按鈕53移動(dòng)到輸入按鈕54和停止按鈕55。
當(dāng)在光標(biāo)被置于輸入按鈕54上的情況下按下遙控器30(圖l)的 輸入按鈕(未示出)時(shí)，控制器2(圖2)把輸入的圖像文本信息TX供給 文本附加塊35。
文本附加塊35把用戶輸入的圖像文本信息TX和從標(biāo)識(shí)符識(shí)別 塊34供給的典型特征信息標(biāo)識(shí)符Tidr登記到閃速存儲(chǔ)器5的圖像文 本數(shù)據(jù)庫(kù)42(圖2)中。
從而，如圖5中所示，控制器2能夠產(chǎn)生相互關(guān)聯(lián)地登記典型特 征信息標(biāo)識(shí)符Tidr和圖像文本信息TX的圖像文本數(shù)據(jù)庫(kù)42。通過(guò) 利用生成的圖像文本數(shù)據(jù)庫(kù)42，控制器2能夠利用通過(guò)和在數(shù)據(jù)庫(kù)生 成處理中使用的相同提取方法，從視頻內(nèi)容提取的特征信息，得到與 指定視頻內(nèi)容對(duì)應(yīng)的內(nèi)容字符信息。
另一方面，如果在光標(biāo)被置于停止按鈕55(圖3)上的情況下，按 下遙控器30的輸入按鈕(未示出)，那么控制器2停止數(shù)據(jù)庫(kù)生成處理。
隨后，硬盤(pán)記錄器1能夠按照用戶的思想狀態(tài)(state of mind), 確定是否執(zhí)行數(shù)據(jù)庫(kù)生成處理，從而在并不強(qiáng)制輸入圖像文本信息 TX的情況下，硬盤(pán)記錄器1能夠避免用戶感到圖像文本信息TX的 輸入麻煩。
應(yīng)注意在再現(xiàn)視頻特征數(shù)據(jù)DS中，圖像分析塊31提取和易于 響應(yīng)諸如人物或物體之類的文本信息的圖像對(duì)應(yīng)的再現(xiàn)視頻特征數(shù) 據(jù)DS，從而從選擇的再現(xiàn)視頻特征數(shù)據(jù)DS中選擇典型特征數(shù)據(jù)DSr。 這種情況下，在典型圖像51中，圖像分析塊31只把與人或物體對(duì)應(yīng) 的區(qū)域顯示成比周?chē)鷧^(qū)域明亮，從而使用戶易于明白與該人或物體對(duì) 應(yīng)的內(nèi)容的輸入，以使用戶正確地輸入表示典型圖像51的內(nèi)容的圖 像文本信息TX。
從而，與再現(xiàn)處理同時(shí)地，硬盤(pán)記錄器1從再現(xiàn)視頻信號(hào)DP中
提取再現(xiàn)視頻特征數(shù)據(jù)DS，把提取的再現(xiàn)視頻特征數(shù)據(jù)DS記錄到特 征數(shù)據(jù)記錄塊41,同時(shí)，從再現(xiàn)視頻特征數(shù)據(jù)DS中選擇表現(xiàn)每個(gè)場(chǎng) 景的典型圖像數(shù)據(jù)DPr。隨后，在再現(xiàn)處理結(jié)束之后，把基于典型圖 像數(shù)據(jù)DPr的典型圖像51顯示在顯示監(jiān)視器上，以使用戶輸入與典 型數(shù)據(jù)DPr對(duì)應(yīng)的圖像文本信息TX，同時(shí)，相互關(guān)聯(lián)地登記與典型 圖像數(shù)據(jù)DPr對(duì)應(yīng)的典型特征信息標(biāo)識(shí)符Tidr和圖像文本信息TX， 從而生成用于獲得與圖像對(duì)應(yīng)的內(nèi)容字符信息的圖像文本數(shù)據(jù)庫(kù)42。 (3)顯示候選標(biāo)題
下面說(shuō)明通過(guò)利用上面說(shuō)明的圖像文本數(shù)據(jù)庫(kù)42執(zhí)行的候選標(biāo) 題顯示處理(候選標(biāo)題獲取處理和列表屏幕顯示處理)。在候選標(biāo)題顯 示處理中，硬盤(pán)記錄器1的控制器2執(zhí)行候選標(biāo)題顯示程序，從而實(shí) 現(xiàn)圖6中所示的功能塊。
(3-l)獲取候選標(biāo)題
在記錄從外部設(shè)備，比如攝像機(jī)輸入的輸入成像數(shù)據(jù)時(shí)，硬盤(pán)記 錄器1的控制器2同時(shí)執(zhí)行候選標(biāo)題獲取處理。
即，控制器2把通過(guò)外部接口 ll(圖l)輸入的輸入成像數(shù)據(jù)記錄 到硬盤(pán)驅(qū)動(dòng)器4，同時(shí)，把輸入的成像數(shù)據(jù)中，由視頻解碼器12解碼 的輸入視頻信號(hào)TP供給圖像分析塊31。
圖像分析塊31借助和數(shù)據(jù)庫(kù)生成處理中基本相同的處理，從輸 入視頻信號(hào)TP中提取每個(gè)幀圖像的輸入視頻特征數(shù)據(jù)TS，并把提取 的輸入視頻特征數(shù)據(jù)TS供給特征數(shù)據(jù)匹配塊62。
當(dāng)被供給輸入視頻特征數(shù)據(jù)TS時(shí)，特征數(shù)據(jù)匹配塊62選擇圖 像文本信息TX與之關(guān)聯(lián)的累積特征數(shù)據(jù)DSa中，相對(duì)于輸入視頻特 征數(shù)據(jù)TS具有最小距離的累積特征數(shù)據(jù)DSa。
更具體地說(shuō)，特征數(shù)據(jù)匹配塊62對(duì)照輸入視頻特征數(shù)據(jù)TS，匹 配圖像文本信息TX與之關(guān)聯(lián)的累積特征數(shù)據(jù)DSa，從而按照離輸入 視頻特征數(shù)據(jù)TS的距離的升序檢測(cè)20條累積特征數(shù)據(jù)DSa。隨后， 特征數(shù)據(jù)匹配塊62確定所檢測(cè)的累積特征數(shù)據(jù)DSa是否被登記在圖 像文本數(shù)據(jù)庫(kù)42中。 .
特征數(shù)據(jù)匹配塊62對(duì)照?qǐng)D像文本數(shù)據(jù)庫(kù)42的典型特征信息標(biāo)識(shí) 符Tidr，匹配所檢測(cè)的累積特征數(shù)據(jù)DSa的特征信息標(biāo)識(shí)符Tid。如 果發(fā)現(xiàn)所檢測(cè)的累積特征數(shù)據(jù)DSa包含登記在圖像文本數(shù)據(jù)庫(kù)42中 的累積特征數(shù)據(jù)DSa，那么特征數(shù)據(jù)匹配塊62選擇登記的累積特征 數(shù)據(jù)DSa中，離輸入視頻特征數(shù)據(jù)TS的距離最小的累積特征數(shù)據(jù) DSa作為最小累積特征數(shù)據(jù)DSan。
此外，特征數(shù)據(jù)匹配塊62確定最小累積特征數(shù)據(jù)DSan和輸入 視頻特征數(shù)據(jù)TS之間的距離是否小于預(yù)定的相似性閾值。如果認(rèn)為 該距離低于預(yù)定的相似性閾值，那么特征數(shù)據(jù)匹配塊62確定基于輸 入視頻特征數(shù)據(jù)TS的幀圖像類似于基于最小累積特征數(shù)據(jù)DSan的 幀圖像，從而把該最小累積特征數(shù)據(jù)DSan所擁有的典型特征信息標(biāo) 識(shí)符Tidr傳給文本獲取塊63。
當(dāng)從圖像文本數(shù)據(jù)庫(kù)42獲得與典型特征信息標(biāo)識(shí)符Tidr對(duì)應(yīng)的 圖像文本信息TX時(shí)，文本獲取塊63臨時(shí)把獲得的圖像文本信息TX 保存在RAM(未示出)中，作為內(nèi)容字符信息TXc，同時(shí)，結(jié)束當(dāng)前輸 入視頻特征數(shù)據(jù)TS的處理，從而開(kāi)始根據(jù)下一個(gè)輸入視頻信號(hào)TP 產(chǎn)生輸入視頻特征數(shù)據(jù)TS。此時(shí)，如果兩次或更多次獲得相同的內(nèi) 容字符信息TXc，那么文本獲取塊63計(jì)數(shù)獲取的數(shù)目。
隨后，當(dāng)控制器2結(jié)束獲取正被記錄的輸入成像數(shù)據(jù)所擁有的所 有輸入視頻特征數(shù)據(jù)TS的內(nèi)容字符信息TXc的一系列處理時(shí)，文本 獲取塊63從圖像文本數(shù)據(jù)庫(kù)42中，按照獲取的降序選擇臨時(shí)保存在 RAM中的內(nèi)容字符信息TXc中的10條內(nèi)容字符信息TXc,從而把 選擇的內(nèi)容字符信息TXc登記到成像數(shù)據(jù)管理列表43中，如圖7中 所示。
從而，控制器2選擇內(nèi)容字符信息TXc，所述內(nèi)容字符信息TXc 表示出輸入成像數(shù)據(jù)中成像時(shí)間方面相當(dāng)長(zhǎng)，并且成像時(shí)間與輸入成 像數(shù)據(jù)的比率較高的幀圖像，為了使選擇的內(nèi)容字符信息TXc成為候 選標(biāo)題文本TI，把在其記錄處理已結(jié)束的錄制成像數(shù)據(jù)的內(nèi)容的指示 方面較高的內(nèi)容字符信息TXc登記為候選標(biāo)題文本TI。
另一方面，如果在對(duì)照?qǐng)D像文本數(shù)據(jù)庫(kù)42的典型特征信息標(biāo)識(shí) 符Tidr匹配檢測(cè)的累積特征數(shù)據(jù)DSa的特征信息標(biāo)識(shí)符Tid之后， 沒(méi)有發(fā)現(xiàn)在圖像文本數(shù)據(jù)庫(kù)42中登記的檢測(cè)的累積特征數(shù)據(jù)DSa， 從而特征數(shù)據(jù)匹配塊62結(jié)束當(dāng)前輸入視頻特征數(shù)據(jù)TS的處理，從而 開(kāi)始基于下一輸入視頻信號(hào)TP的輸入視頻特征數(shù)據(jù)TS的產(chǎn)生。
如果特征數(shù)據(jù)匹配塊62確定最小累積特征數(shù)據(jù)DSan和輸入視 頻特征數(shù)據(jù)TS之間的距離超過(guò)預(yù)定的相似性閾值，那么它指出基于 輸入視頻特征數(shù)據(jù)TS的幀圖像和基于最小累積特征數(shù)據(jù)DSan的幀 圖像不相似。從而，特征數(shù)據(jù)匹配塊62結(jié)束當(dāng)前輸入視頻特征數(shù)據(jù) TS的處理，并開(kāi)始基于下一輸入視頻信號(hào)TP的輸入視頻特征數(shù)據(jù) TS的生成。
從而，就硬盤(pán)記錄器l來(lái)說(shuō)，在記錄成像數(shù)據(jù)的處理中，輸入視 頻特征數(shù)據(jù)TS提取自輸入視頻信號(hào)TP;在登記在圖像文本數(shù)據(jù)庫(kù) 42中的累積特征數(shù)據(jù)DSa中，識(shí)別與輸入視頻特征數(shù)據(jù)TS最接近的 最小累積特征數(shù)據(jù)DSan;獲得與最小累積特征數(shù)據(jù)DSan對(duì)應(yīng)的圖像 文本信息TX，作為表示從其提取輸入視頻特征數(shù)據(jù)TS的幀圖像的內(nèi) 容的內(nèi)容字符信息TXc;并且該內(nèi)容字符信息TXc被登記成表示錄制 成像數(shù)據(jù)的內(nèi)容的候選標(biāo)題文本TI。
從而，硬盤(pán)記錄器1能夠把表示出錄制成像數(shù)據(jù)的內(nèi)容的候選標(biāo) 題文本TI登記到成像數(shù)據(jù)管理列表43中，而不用用戶執(zhí)行任何操作。
應(yīng)注意在記錄成像數(shù)據(jù)時(shí)，硬盤(pán)記錄器1在成像數(shù)據(jù)管理列表 43(圖7)中自動(dòng)登記成像數(shù)據(jù)ID,附于輸入的成像數(shù)據(jù)上的成像日期 信息，和表示出成像數(shù)據(jù)是通過(guò)外部接口 11的哪個(gè)輸入端子輸入的 輸入信息。
此外，由于與成像數(shù)據(jù)的記錄同時(shí)地進(jìn)行候選標(biāo)題獲取處理，因 此在輸入的成像數(shù)據(jù)的記錄結(jié)束時(shí)，硬盤(pán)記錄器1能夠幾乎同時(shí)地把 內(nèi)容字符信息TXc登記到成像數(shù)據(jù)管理列表43中。
于是當(dāng)輸入的成像數(shù)據(jù)的記錄已結(jié)束時(shí)，成像數(shù)據(jù)管理列表43 包含用于登記成像數(shù)據(jù)的標(biāo)題的空白標(biāo)題框Ct，和用于登記選為縮略
圖的圖像的空白縮略圖框Cs，登記信息的成像數(shù)據(jù)ID框Ci，成像日 期信息框Cd,候選標(biāo)題框Ca和輸入信息框Ce。 (3-2)顯示成像數(shù)據(jù)列表屏幕
當(dāng)對(duì)所有指定的成像數(shù)據(jù)完成了圖像數(shù)據(jù)記錄處理，或者當(dāng)用戶 通過(guò)遙控器30從遙控器接口 10供給了請(qǐng)求顯示成像數(shù)據(jù)列表屏幕70 的操作信號(hào)時(shí)，硬盤(pán)記錄器1的控制器2(圖l)執(zhí)行候選標(biāo)題顯示程序 指令的列表屏幕顯示處理。
即，控制器2的標(biāo)題附加塊64(圖6)根據(jù)成像數(shù)據(jù)管理列表43 產(chǎn)生列表圖像數(shù)據(jù)DL,并把產(chǎn)生的數(shù)據(jù)DL傳給視頻信號(hào)處理電路 14,從而在顯示監(jiān)視器(未示出)上顯示成像數(shù)據(jù)列表屏幕70，如圖8 中所示。
成像數(shù)據(jù)列表屏幕70根據(jù)成像數(shù)據(jù)管理列表43，分別在成像日 期信息顯示區(qū)72和輸入信息顯示區(qū)73中顯示成像日期信息和輸入信 息。
如果標(biāo)題被登記在成像數(shù)據(jù)管理列表43(圖7)中，那么輸入信息 顯示區(qū)73顯示錄制成像數(shù)據(jù)的標(biāo)題；如果沒(méi)有標(biāo)題被登記，那么輸 入信息顯示區(qū)73保持空白。
如果把光標(biāo)置于顯示在成像數(shù)據(jù)列表屏幕70的頂部的錄制成像 數(shù)據(jù)上，那么標(biāo)題附加塊64改變?cè)撲浿瞥上駭?shù)據(jù)的周?chē)鷧^(qū)域的顏色， 隨后顯示該數(shù)據(jù)。當(dāng)用戶操縱遙控器30(圖l)的光標(biāo)按鈕(未示出)，從 遙控器30供給對(duì)應(yīng)的操作信號(hào)時(shí)，標(biāo)題附加塊64順序把光標(biāo)下移到 后面的錄制成像數(shù)據(jù)。
當(dāng)在光標(biāo)被置于一條錄制成像數(shù)據(jù)上的情況下，操縱遙控器 30(圖l)的輸入按鈕(未示出)時(shí)，標(biāo)題附加塊64(圖6)以基于下拉菜單 的子屏幕75的形式顯示和光標(biāo)所位于的錄制成像數(shù)據(jù)有關(guān)的候選標(biāo) 題文本TI，并把光標(biāo)置于候選標(biāo)題文本TI之一上。
另外，標(biāo)題附加塊64被配置成按照在候選標(biāo)題獲取處理中，從 圖像文本數(shù)據(jù)庫(kù)42獲得候選標(biāo)題文本TI的次數(shù)的降序，從子菜單75 的頂部開(kāi)始顯示候選標(biāo)題文本TI。
從而，硬盤(pán)記錄器1能夠按照作為與錄制成像數(shù)據(jù)擁有的幀圖像
的內(nèi)容對(duì)應(yīng)的內(nèi)容字符信息TXc而獲得候選標(biāo)題文本TI的次數(shù)的降 序，即，按照這些文本對(duì)應(yīng)于更多圖像的順序，顯示候選標(biāo)題文本 TI，從而向用戶呈現(xiàn)表現(xiàn)出錄制成像數(shù)據(jù)的內(nèi)容的可能性更高的候選 標(biāo)題文本TI,于是，這種配置便于在顯示監(jiān)視器上顯示表示出錄制成 像數(shù)據(jù)的內(nèi)容的文本信息，而不必麻煩地再現(xiàn)錄制的成像數(shù)據(jù)。
應(yīng)注意在子菜單75的右下方所示的三角形符號(hào)表示在子菜單中 下面還有更多的候選標(biāo)題文本TI。當(dāng)操縱遙控器30的向下光標(biāo)按鈕 時(shí)，標(biāo)題附加塊64向下滾動(dòng)子菜單75,從而顯示更多的候選標(biāo)題。
此外，當(dāng)在光標(biāo)被置于一個(gè)候選標(biāo)題，例如"Mt.Fuji，，上的情況 下，按下遙控器30的輸入按鈕時(shí)，標(biāo)題附加塊64把標(biāo)題"Mt.Fuji" 登記到成像數(shù)據(jù)管理列表43的標(biāo)題框Ct中，同時(shí)，在成像數(shù)據(jù)列表 屏幕70的標(biāo)題顯示區(qū)73中顯示標(biāo)題"Mt.Fuji"。
從而，硬盤(pán)記錄器1能夠使用戶借助簡(jiǎn)單的選擇操作，從兩個(gè)或 者更多的候選標(biāo)題中確定所需的標(biāo)題，從而把標(biāo)題登記到成像文本數(shù) 據(jù)庫(kù)42中，而不會(huì)以不便的操作煩擾用戶。
例如，如果標(biāo)題選擇"Mt.Fuji"，那么標(biāo)題附加塊64從典型圖像 51被顯示的錄制成像數(shù)據(jù)中選擇與"Mt.Fuji"對(duì)應(yīng)的圖像，并在縮略 圖顯示區(qū)71中顯示選擇的圖像。
即，如果找到登記成基于正被顯示的錄制圖像數(shù)據(jù)，與"Mt，F(xiàn)uji" 關(guān)聯(lián)的典型特征信息標(biāo)識(shí)符Tidr，那么標(biāo)題附加塊64從圖像文本數(shù) 據(jù)庫(kù)42選擇這些標(biāo)識(shí)符之一，以便把選擇的標(biāo)識(shí)符登記到成像數(shù)據(jù) 管理列表43的縮略圖框Cs中，同時(shí)，以縮略圖的形式在縮略圖顯示 區(qū)71中顯示與登記的標(biāo)識(shí)符對(duì)應(yīng)的圖像。
另 一方面，如果沒(méi)有找到登記成基于正被顯示的錄制圖像數(shù)據(jù)， 與"Mt.Fuji，，關(guān)聯(lián)的典型特征信息標(biāo)識(shí)符Tidr，那么標(biāo)題附加塊64根 據(jù)另一錄制的成像數(shù)據(jù)選擇與"Mt.Fuji"關(guān)聯(lián)的一個(gè)典型特征信息標(biāo) 識(shí)符Tidr，檢測(cè)與該典型特征信息標(biāo)識(shí)符Tidr代表的累積特征數(shù)據(jù) DSa最相似的輸入視頻特征數(shù)據(jù)TS，以識(shí)別檢測(cè)的輸入視頻特征數(shù)
據(jù)TS的特征信息標(biāo)識(shí)符Tid，把識(shí)別的特征信息標(biāo)識(shí)符Tid登記到 成像數(shù)據(jù)管理列表43的縮略圖框Cs中，并以縮略圖的形式在縮略圖 顯示區(qū)71中顯示與該典型特征信息標(biāo)識(shí)符Tidr對(duì)應(yīng)的圖像。
此外，如果在成像數(shù)據(jù)管理列表43中沒(méi)有設(shè)置任何標(biāo)題，并且 在縮略圖框Cs中沒(méi)有登記任何典型特征信息標(biāo)識(shí)符Tidr,那么標(biāo)題 附加塊64在縮略圖顯示區(qū)71中顯示錄制的圖像數(shù)據(jù)中的指定圖像(例 如，第一幀的圖像)。
從而，標(biāo)題附加塊64能夠以縮略圖的形式顯示與用戶選擇的表 示出成像數(shù)據(jù)的內(nèi)容的標(biāo)題對(duì)應(yīng)的典型圖像數(shù)據(jù)PDr，從而把表示出 圖像數(shù)據(jù)的內(nèi)容的圖像顯示在縮略圖顯示區(qū)71中。
另外，當(dāng)在光標(biāo)被置于標(biāo)題輸入按鈕76上的情況下，按下遙控 器30的輸入按鈕時(shí)，標(biāo)題附加塊64顯示鍵盤(pán)屏幕60(圖4),以便讓 用戶輸入所需的標(biāo)題。
從而，標(biāo)題附加塊64能夠關(guān)于正被顯示的候選標(biāo)題文本TI，輸 入用戶偏愛(ài)的任何標(biāo)題，同時(shí)，如果顯示的候選標(biāo)題文本TI被用戶 拒絕，對(duì)錄制的成像數(shù)據(jù)設(shè)置用戶偏愛(ài)的標(biāo)題。
從而，在顯示成像數(shù)據(jù)列表屏幕時(shí)，硬盤(pán)記錄器l被配置成在子 菜單75上顯示由候選標(biāo)題獲取處理登記的候選標(biāo)題文本TI,從而讓 用戶從這些候選標(biāo)題文本TI中選擇所需的標(biāo)題。
從而，硬盤(pán)記錄器l可使用戶利用簡(jiǎn)單的選擇操作，從顯示的候 選標(biāo)題文本TI中確定錄制的圖像數(shù)據(jù)的所需標(biāo)題，從而簡(jiǎn)化把標(biāo)題 輸入成像數(shù)據(jù)管理列表43中的作業(yè)。
(4)生成圖像文本數(shù)據(jù)庫(kù)的過(guò)程
下面參考圖9中所示的流程圖，說(shuō)明按照數(shù)據(jù)庫(kù)生成程序的指令 執(zhí)行的數(shù)據(jù)庫(kù)生成過(guò)程。
當(dāng)用戶通過(guò)遙控器30(圖1)開(kāi)始記錄到硬盤(pán)驅(qū)動(dòng)器4上的錄制成 像數(shù)據(jù)的再現(xiàn)時(shí)，硬盤(pán)記錄器1的控制器2進(jìn)入數(shù)據(jù)庫(kù)生成過(guò)程RT1 的開(kāi)始步驟，隨后進(jìn)入步驟SPl,在步驟SP1中，根據(jù)從視頻解碼器 12供給的再現(xiàn)視頻信號(hào)DP產(chǎn)生再現(xiàn)視頻特征數(shù)據(jù)DS，之后過(guò)程進(jìn)
入步驟SP2。
在步驟SP2，控制器2把特征信息標(biāo)識(shí)符Tid附到再現(xiàn)視頻特征 數(shù)據(jù)DS上，并把再現(xiàn)視頻特征數(shù)據(jù)DS和特征信息標(biāo)識(shí)符Tid記錄 到特征數(shù)據(jù)記錄塊41(圖2)，之后過(guò)程進(jìn)入步驟SP3。
在步驟SP3，控制器2按照是否存在任意場(chǎng)景變化，確定供給的 再現(xiàn)視頻特征數(shù)據(jù)DS是否是典型特征數(shù)據(jù)DSr。如果確定結(jié)果是否 定的，那么過(guò)程返回步驟SP1，開(kāi)始下一個(gè)再現(xiàn)視頻特征數(shù)據(jù)DS的 處理。
如果步驟SP3中的確定結(jié)果是肯定的，那么過(guò)程進(jìn)入步驟SP4。 在步驟SP4，控制器2識(shí)別典型特征數(shù)據(jù)DSr的典型特征信息標(biāo)識(shí)符 Tidr，并把典型特征信息標(biāo)識(shí)符Tidr臨時(shí)保存在RAM(未示出)中， 隨后過(guò)程進(jìn)入步驟SP5。
在步驟SP5,控制器2確定再現(xiàn)的錄制成像數(shù)據(jù)中的所有再現(xiàn)視 頻信號(hào)DP的處理是否都已結(jié)束。如果確定結(jié)果是否定的，那么過(guò)程 返回步驟SP1，在步驟SP1中，控制器2開(kāi)始下一個(gè)再現(xiàn)視頻信號(hào) DP的處理。
另一方面，如果步驟SP5中的確定結(jié)果是肯定的，那么它表示 錄制成像數(shù)據(jù)再現(xiàn)處理已結(jié)束，隨后過(guò)程進(jìn)入步驟SP6。
在步驟SP6，控制器2利用記錄到RAM中的典型特征信息標(biāo)識(shí) 符Tidr識(shí)別典型數(shù)據(jù)DPr，并把包含基于識(shí)別的典型數(shù)據(jù)DPr的典 型圖像51的文本輸入屏幕50(圖3)顯示在顯示監(jiān)視器(未示出)上，之 后過(guò)程進(jìn)入步驟S7。
當(dāng)用戶在步驟SP7中輸入圖像文本信息TX時(shí)，過(guò)程進(jìn)入步驟
SP8。
在步驟SP8，控制器2使在步驟SP7中輸入的圖像文本信息TX 與典型特征信息標(biāo)識(shí)符Tidr相關(guān)聯(lián)，并把這些信息和標(biāo)識(shí)符登記到 圖像文本數(shù)據(jù)庫(kù)42中(圖5),之后過(guò)程進(jìn)入步驟SP9。
在步驟SP9，控制器2確定記錄到RAM中的所有典型特征數(shù)據(jù) DSr的處理是否都已結(jié)束。如果確定結(jié)果是否定的，那么過(guò)程返回步
驟SP6，在步驟SP6，控制器2開(kāi)始下一個(gè)典型特征數(shù)據(jù)DSr的處理。 另一方面，如果步驟SP9中的響應(yīng)是肯定的，那么過(guò)程進(jìn)入步
驟SPIO，在步驟SP10中，控制器2結(jié)束上面提及的處理。
應(yīng)注意控制器2被配置成對(duì)每條錄制的成像數(shù)據(jù)只進(jìn)行一次這
樣的數(shù)據(jù)庫(kù)生成處理。于是，如果將對(duì)錄制的成像數(shù)據(jù)進(jìn)行兩次或更
多次的成像數(shù)據(jù)再現(xiàn)處理，那么在第二次和后續(xù)的成像數(shù)據(jù)再現(xiàn)處理
中，不執(zhí)行數(shù)據(jù)庫(kù)生成處理。
在對(duì)于錄制的成像數(shù)據(jù)的第二次或者后續(xù)再現(xiàn)處理中，如果操作
信號(hào)請(qǐng)求輸入與正被顯示的圖像對(duì)應(yīng)的圖像文本信息TX，那么控制
器2使用正被顯示的屏幕作為典型圖像，從而執(zhí)行步驟SP6-SP10的處理。
這種情況下，控制器2不必從正被顯示的圖像數(shù)據(jù)中提取再現(xiàn)視 頻特征數(shù)據(jù)。于是，在步驟SP8中，控制器2可識(shí)別與正被顯示的圖 像數(shù)據(jù)對(duì)應(yīng)的特征信息標(biāo)識(shí)符Tid，把識(shí)別的該標(biāo)識(shí)符用作典型特征 信息標(biāo)識(shí)符Tidr。
(5)候選標(biāo)題顯示處理的過(guò)程
下面參考圖10中所示的流程圖，說(shuō)明將按照數(shù)據(jù)庫(kù)生成程序的 指令執(zhí)行的候選標(biāo)題顯示處理的過(guò)程。
當(dāng)用戶通過(guò)遙控器30(圖)開(kāi)始記錄從與外部接口 11連接的外部 設(shè)備，比如攝像機(jī)(未示出)輸入的輸入圖像數(shù)據(jù)的處理時(shí)，硬盤(pán)記錄 器1的控制器2進(jìn)入候選標(biāo)題處理過(guò)程RT2的開(kāi)始步驟，之后過(guò)程進(jìn) 入步驟SP21。在步驟SP21中，控制器2根據(jù)從視頻解碼器12供給 的輸入視頻信號(hào)TP，產(chǎn)生輸入視頻特征數(shù)據(jù)TS,之后過(guò)程進(jìn)入步驟 SP22。
在步驟SP22，控制器2對(duì)照記錄到閃速存儲(chǔ)器5的特征數(shù)據(jù)記 錄塊41(圖6)的累積特征數(shù)據(jù)DSa，匹配在步驟SP21中產(chǎn)生的輸入視 頻特征數(shù)據(jù)TS，之后過(guò)程進(jìn)入步驟SP23。在步驟SP23，控制器2從 累積特征數(shù)據(jù)DSa中選擇登記在圖像文本數(shù)據(jù)庫(kù)42中，并且具有離 輸入視頻特征數(shù)據(jù)TS的最短距離，即最小距離的最小累積特征數(shù)據(jù)
DSan，之后過(guò)程進(jìn)入步驟SP24。
在步驟SP24,控制器2確定最小距離是否小于預(yù)定相似性閾值。
如果步驟SP24中的確定結(jié)果是否定的，那么表示在具有最小距 離的最小累積特征數(shù)據(jù)DSan和輸入視頻特征數(shù)據(jù)TS之間不存在相 似性，之后過(guò)程返回步驟SP21，在步驟SP21,控制器2開(kāi)始下一輸 入視頻信號(hào)TP的處理。
另一方面，如果步驟SP24的確定結(jié)果是肯定的，那么表示在最 小累積特征數(shù)據(jù)DSan和輸入視頻特征數(shù)據(jù)TS之間存在相似性，之 后過(guò)程進(jìn)入步驟SP25。
在步驟SP25,控制器2從圖像文本數(shù)據(jù)庫(kù)42獲得與最小累積特 征數(shù)據(jù)DSan對(duì)應(yīng)的內(nèi)容字符信息TXc ，并把獲得的信息臨時(shí)保存在 RAM(未示出)中，作為與輸入視頻信號(hào)TP對(duì)應(yīng)的內(nèi)容字符信息TXc ， 之后過(guò)程進(jìn)入步驟SP26。
在步驟SP26,控制器2確定所有輸入視頻信號(hào)TP的處理是否 已結(jié)束。如果確定結(jié)果是否定的，那么過(guò)程返回步驟SP21，在步驟 SP21，控制器2開(kāi)始下一輸入視頻信號(hào)TP的處理。
另一方面，如果步驟SP26中的確定結(jié)果是肯定的，那么表示記 錄輸入的成像數(shù)據(jù)的處理已結(jié)束，之后過(guò)程進(jìn)入步驟SP27。
在步驟SP27，控制器2檢查獲得內(nèi)容字符信息TXc的次數(shù)，按 照獲取的降序選擇10條內(nèi)容字符信息TXc作為候選標(biāo)題文本TI，并 把選擇的候選標(biāo)題文本TI登記到成像數(shù)據(jù)管理列表43(圖7)中，之后 過(guò)程進(jìn)入步驟SP28。
在步驟SP28，控制器2根據(jù)成像數(shù)據(jù)管理列表43，在顯示監(jiān)視 器上顯示成像數(shù)據(jù)列表屏幕70(圖8)，成像數(shù)據(jù)列表屏幕70是錄制的 成像數(shù)據(jù)的列表，之后過(guò)程進(jìn)入步驟SP29。此時(shí)，控制器2按照用 戶的指令在子屏幕75A上顯示候選標(biāo)題文本TI。
在步驟S29，當(dāng)用戶選擇了錄制的成像數(shù)據(jù)的標(biāo)題時(shí)，過(guò)程進(jìn)入 步驟SP30。
在步驟SP30，控制器2把在步驟SP30中登記的標(biāo)題登記到成像
文本數(shù)據(jù)庫(kù)42(圖7)中，之后過(guò)程進(jìn)入步驟SP31，在步驟SP31中， 控制器2結(jié)束上面提及的處理。
應(yīng)注意如果用戶通過(guò)遙控器30從遙控器接口 IO供給表示顯示成 像數(shù)據(jù)列表屏幕70(圖8)的操作信號(hào)，那么控制器2執(zhí)行步驟 SP28-SP31的列表屏幕顯示處理。另外對(duì)于控制器2來(lái)說(shuō)，可行的是 在輸入圖像數(shù)據(jù)記錄處理中，只執(zhí)行步驟SP21-SP27的候選標(biāo)題獲取 處理，并通過(guò)跳過(guò)列表屏幕顯示處理到達(dá)步驟SP31。
(6)操作和效果
在上面說(shuō)明的結(jié)構(gòu)中，硬盤(pán)記錄器l根據(jù)亮度，按照預(yù)定的特征
入視頻特征數(shù)據(jù)TS，所述輸入視頻特征數(shù)據(jù)TS是表示該圖像的特征 的內(nèi)容特征信息，并從圖像文本數(shù)據(jù)庫(kù)42中檢測(cè)與輸入視頻特征數(shù) 據(jù)TS類似的累積特征數(shù)據(jù)DSa，按照和輸入視頻特征數(shù)據(jù)TS的提 取方法相同的提取方法從作為指定圖像的典型圖像數(shù)據(jù)PDr提取的 典型特征數(shù)據(jù)DSr與表示出典型圖像數(shù)據(jù)PDr的內(nèi)容的圖像文本信 息TX被相互關(guān)聯(lián)地登記在所述圖像文本數(shù)據(jù)庫(kù)42中。此外，作為表 示出從其提取輸入視頻特征數(shù)據(jù)TS的圖像(或者輸入視頻信號(hào)TS)的 內(nèi)容的內(nèi)容字符信息TXc，硬盤(pán)記錄器1從圖像文本數(shù)據(jù)庫(kù)42獲得 與檢測(cè)的累積特征數(shù)據(jù)DSa對(duì)應(yīng)的圖像文本信息TX。
從而，在上面提及的結(jié)構(gòu)中，與相似的最小累積特征數(shù)據(jù)DSan 的關(guān)系指示輸入成像數(shù)據(jù)擁有的每個(gè)圖像的內(nèi)容，從而硬盤(pán)記錄器1 能夠自動(dòng)獲得表示出輸入成像數(shù)據(jù)的內(nèi)容的可能性高的內(nèi)容字符信 息TXc，而不會(huì)用任何操作煩擾用戶。
此外，硬盤(pán)記錄器1從圖像文本數(shù)據(jù)庫(kù)42檢測(cè)與輸入視頻特征 數(shù)據(jù)TS最類似的最小累積特征數(shù)據(jù)DSan，從而獲得與該最小累積特 征數(shù)據(jù)DSan對(duì)應(yīng)的內(nèi)容字符信息TXc，從而根據(jù)輸入視頻信號(hào)TS, 有選擇地獲得示出每個(gè)圖像的內(nèi)容的可能性較高的圖像文本信息 TX，作為內(nèi)容字符信息TXc。
此外，在記錄通過(guò)外部接口 ll從外部設(shè)備，比如攝像機(jī)供給的
輸入成像數(shù)據(jù)時(shí)，硬盤(pán)記錄器1從構(gòu)成該輸入成像數(shù)據(jù)的每幀圖像中
提取輸入視頻特征數(shù)據(jù)TS，以執(zhí)行候選標(biāo)題獲取處理，從而在結(jié)束 輸入成像數(shù)據(jù)記錄處理的時(shí)候，獲得內(nèi)容字符信息TXc。于是，對(duì)于 錄制的成像數(shù)據(jù)來(lái)說(shuō)，硬盤(pán)記錄器1任何時(shí)候都能夠使用該內(nèi)容字符 信息。
另外，通過(guò)把內(nèi)容字符信息TXc登記到成像數(shù)據(jù)管理列表43中， 硬盤(pán)記錄器1能夠把該內(nèi)容字符信息TXc顯示成錄制的圖像數(shù)據(jù)的候 選標(biāo)題，并把該內(nèi)容字符信息TXc用作搜索錄制成像數(shù)據(jù)的內(nèi)容的關(guān) 鍵字，從而提高用戶便利性。
在上面說(shuō)明的結(jié)構(gòu)中，按照獲取的次數(shù)的降序在成像數(shù)據(jù)管理列 表43中登記預(yù)定數(shù)量(例如IO條)的內(nèi)容字符信息TXc,以致錄制成 像數(shù)據(jù)擁有的大量圖像正確地示出錄制成像數(shù)據(jù)的內(nèi)容，從而使硬盤(pán) 記錄器1可以有選擇地按照適合于作為錄制成像數(shù)據(jù)的標(biāo)題和關(guān)鍵字 的概率更高的降序，把內(nèi)容字符信息TXc登記到成像數(shù)據(jù)管理列表 43中。
此外，硬盤(pán)記錄器1能夠把登記在成像數(shù)據(jù)管理列表43中的內(nèi) 容字符信息TXc顯示在顯示監(jiān)視器上，作為候選標(biāo)題文本TI，所述 候選標(biāo)題文本TI是表示錄制成像數(shù)據(jù)的內(nèi)容的候選標(biāo)題，以使用戶 在不再現(xiàn)該錄制成像數(shù)據(jù)的情況下識(shí)別該錄制成像數(shù)據(jù)的內(nèi)容，從而 便于用戶記起或預(yù)測(cè)錄制成像數(shù)據(jù)的內(nèi)容。
另外，硬盤(pán)記錄器1可讓用戶從顯示的候選標(biāo)題文本TI中選擇 一個(gè)候選標(biāo)題文本TI,同時(shí)把選擇的候選標(biāo)題文本TI作為錄制成像 數(shù)據(jù)的標(biāo)題登記到成像數(shù)據(jù)管理列表43中，從而便于用戶通過(guò)僅僅 選擇顯示的候選標(biāo)題文本TI之一，對(duì)錄制成像數(shù)據(jù)設(shè)置所需的標(biāo)題， 而不會(huì)以標(biāo)題的確定和不便的輸入操作煩擾用戶。
另外，硬盤(pán)記錄器1能夠從數(shù)據(jù)庫(kù)生成處理產(chǎn)生的圖像文本數(shù)據(jù) 庫(kù)42獲得內(nèi)容字符信息TXc,在所述數(shù)據(jù)庫(kù)生成處理中，用戶自己 設(shè)置對(duì)應(yīng)于典型圖像51的圖像文本信息TX，從而允許獲取按照用戶 偏愛(ài)登記的圖像文本信息TX作為內(nèi)容字符信息TXc。
這種情況下,獲得輸入的成像數(shù)據(jù)的人受限，以致不同于未指定
用戶生成的圖像文本數(shù)據(jù)庫(kù)42的使用，相互類似的再現(xiàn)視頻特征數(shù) 據(jù)DS和基于圖像的圖像文本信息TX被登記在圖像文本數(shù)據(jù)庫(kù)42中， 從而允許硬盤(pán)記錄器1顯著提高獲得的內(nèi)容字符信息TXc表示出基于 輸入視頻特征數(shù)據(jù)TS的每個(gè)圖像的內(nèi)容的概率。
如上所述以及按照上面說(shuō)明的結(jié)構(gòu)，硬盤(pán)記錄器1能夠從圖像文 本數(shù)據(jù)庫(kù)42獲得與類似于輸入成像數(shù)據(jù)擁有的圖像類似的典型圖像 數(shù)據(jù)DPr對(duì)應(yīng)的圖像文本信息TX,作為表示出成像數(shù)據(jù)所擁有的圖 像的內(nèi)容的內(nèi)容字符信息TXc,從而實(shí)現(xiàn)被配置成獲得表示出輸入成 像數(shù)據(jù)的內(nèi)容的內(nèi)容字符信息TXc的內(nèi)容字符信息獲取方法，內(nèi)容字 符信息獲取程序，內(nèi)容字符信息獲取設(shè)備和視頻內(nèi)容記錄設(shè)備，在所 述圖像文本數(shù)據(jù)庫(kù)42中，從指定視頻內(nèi)容提取的典型特征數(shù)據(jù)DSr 和表示出典型特征數(shù)據(jù)DSr所基于的典型圖像數(shù)據(jù)DPr的內(nèi)容的圖 像文本信息TX相互關(guān)聯(lián)。
(7)其它實(shí)施例
在本發(fā)明的上述實(shí)施例中，對(duì)照所有累積特征數(shù)據(jù)DSa匹配輸 入視頻特征數(shù)據(jù)TS，以檢測(cè)低于預(yù)定相似性閾值的累積特征數(shù)據(jù) DSa ，并確定檢測(cè)到的累積特征數(shù)據(jù)DSa是否登記在圖像文本數(shù)據(jù)庫(kù) 42中，以檢測(cè)登記在圖像文本數(shù)據(jù)庫(kù)42中，并與輸入視頻特征數(shù)據(jù) TS類似的累積特征數(shù)據(jù)DSa。但是，另外可行的是只對(duì)照登記在圖 像文本數(shù)據(jù)庫(kù)42中的累積特征數(shù)據(jù)DSa來(lái)匹配輸入視頻特征數(shù)據(jù) TS,以確定低于相似性閾值的累積特征數(shù)據(jù)DSa,從而檢測(cè)相似的累 積特征數(shù)據(jù)DSa。
在上面說(shuō)明的實(shí)施例中，從獲得的內(nèi)容字符信息TXc中選擇IO 條(它是預(yù)定的登記數(shù)目)內(nèi)容字符信息TXc，以便登記在成像數(shù)據(jù)管 理列表43中。但是，另外可行的是把所有獲得的內(nèi)容字符信息TXc 登記到成像數(shù)據(jù)管理列表43中。
此外，在上述實(shí)施例中，獲得內(nèi)容字符信息TXc的次數(shù)被計(jì)數(shù)， 以便按照獲取計(jì)數(shù)的降序把內(nèi)容字符信息TXc登記到成像數(shù)據(jù)管理
列表43中。但是，另外可行的是按照獲取的順序，或者按照匹配時(shí) 的相關(guān)值的降序，登記內(nèi)容字符信息TXc。
在按照相關(guān)值的降序登記內(nèi)容字符信息TXc時(shí)，特征數(shù)據(jù)匹配 塊62計(jì)算這些相關(guān)值，并且當(dāng)對(duì)照累積特征數(shù)據(jù)DSa匹配輸入視頻 特征數(shù)據(jù)TS時(shí)，把計(jì)算的值臨時(shí)保存在RAM中。隨后，文本獲取 塊63通過(guò)從與相關(guān)值高的累積特征數(shù)據(jù)DSa對(duì)應(yīng)的一個(gè)內(nèi)容字符信 息TXc開(kāi)始，把內(nèi)容字符信息TXc登記到成像數(shù)據(jù)管理列表43中。 從而，控制器2能夠優(yōu)先把正確表示出由輸入視頻信號(hào)TP表現(xiàn)的每 個(gè)圖像的內(nèi)容的概率較高的內(nèi)容字符信息TXc登記到成像數(shù)據(jù)管理 列表43中。
另外，對(duì)于控制器2來(lái)說(shuō)，可行的是計(jì)算通過(guò)把獲取計(jì)數(shù)乘以與 相關(guān)值一致的相關(guān)系數(shù)而獲得的相乘值以及每個(gè)內(nèi)容字符信息TXc 的相乘值的總和，從而按照相乘值的總和的降序把內(nèi)容字符信息TXc 登記到成像數(shù)據(jù)管理列表43中。從而，通過(guò)既考慮內(nèi)容字符信息TXc 的獲取計(jì)數(shù)，又考慮輸入視頻特征數(shù)據(jù)TS和累積特征數(shù)據(jù)DSa之間 的相關(guān)值，控制器2能夠按照與錄制成像數(shù)據(jù)所擁有的圖像的比率一 致的正確優(yōu)先順序，把每個(gè)圖像的正確的內(nèi)容字符信息TXc登記到成 像數(shù)據(jù)管理列表43中。
此外，在上述實(shí)施例中，在相似的累積特征數(shù)據(jù)DSa中，只有 與最小累積特征數(shù)據(jù)DSan對(duì)應(yīng)的一條內(nèi)容字符信息TXc被登記在成 像數(shù)據(jù)管理列表43中。但是，另外可行的是登記兩條或者更多條的 內(nèi)容字符信息TXc。
在上述實(shí)施例中，確定與離輸入視頻特征數(shù)據(jù)TS的距離最小的 最小累積特征數(shù)據(jù)DSan對(duì)應(yīng)的圖像最類似于記錄的視頻數(shù)據(jù)TP。但 是，另外可取的是確定和與輸入視頻特征數(shù)據(jù)TS的相關(guān)值最高的累 積特征數(shù)據(jù)DSa對(duì)應(yīng)的圖像最類似于輸入視頻信號(hào)TP。
在上述實(shí)施例中，在響應(yīng)用戶請(qǐng)求，把圖像文本信息TX輸入顯 示的圖像中時(shí)，使用記錄到特征數(shù)據(jù)記錄塊41的累積特征數(shù)據(jù)DSa。 但是，另外可取的是把累積特征數(shù)據(jù)DSa用于各種處理操作，比如將
按照摘要再現(xiàn)方式再現(xiàn)的一部分的選擇。
在上述實(shí)施例中，由成像數(shù)據(jù)ID和序列號(hào)構(gòu)成的特征信息標(biāo)識(shí) 符Tid被附到再現(xiàn)視頻特征數(shù)據(jù)DS上。但是，另外可行的是使用任 意其它的附加特征信息標(biāo)識(shí)符Tid的方法，只要錄制成像數(shù)據(jù)和特征 信息標(biāo)識(shí)符Tid相互關(guān)聯(lián)。
在上述實(shí)施例中，內(nèi)容字符信息TXc被登記在成像數(shù)據(jù)管理列 表43中，作為提供候選標(biāo)題的候選標(biāo)題文本TI。但是，另外可行的 是把內(nèi)容字符信息TXc登記成搜索關(guān)鍵字。
在上述實(shí)施例中，輸入視頻特征數(shù)據(jù)TS產(chǎn)生自每個(gè)幀圖像的輸 入成像數(shù)據(jù)。但是，另外可行的是產(chǎn)生每個(gè)場(chǎng)圖像的輸入視頻特征數(shù) 據(jù)TS。
在上述實(shí)施例中，輸入視頻特征數(shù)據(jù)TS產(chǎn)生自輸入成像數(shù)據(jù)的 所有幀圖像。但是，另外可行的是幾幀一組地產(chǎn)生輸入視頻特征數(shù)據(jù) TS。
在上述實(shí)施例中，如果在成像數(shù)據(jù)管理列表43的標(biāo)題框Ct中沒(méi) 有登記任何標(biāo)題，那么成像數(shù)據(jù)列表屏幕70的標(biāo)題顯示框73保持空 白。但是，另外可取的是把首先登記在成像數(shù)據(jù)管理列表43中的候 選標(biāo)題文本TI顯示在標(biāo)題顯示框73中。
從而，硬盤(pán)記錄器1能夠顯示表示出錄制成像數(shù)據(jù)的內(nèi)容的候選 標(biāo)題文本TI，以使用戶直觀地識(shí)別錄制成像數(shù)據(jù)的內(nèi)容，而不必使用 戶選擇一條錄制成像數(shù)據(jù)，并把選擇的數(shù)據(jù)顯示在子菜單75上。
此外，在本發(fā)明的上述實(shí)施例中，在顯示的成像數(shù)據(jù)中，只有與 用戶選擇的標(biāo)題對(duì)應(yīng)的圖像被顯示在縮略圖顯示區(qū)71中。但是，另 外可取的是從未顯示的其它成像數(shù)據(jù)中選擇與標(biāo)題對(duì)應(yīng)的圖像，并顯 示選擇的圖像。
在上述實(shí)施例中，在選擇將顯示在縮略圖顯示區(qū)71中的圖像的 時(shí)候，如果與用戶選擇的標(biāo)題對(duì)應(yīng)的典型特征信息標(biāo)識(shí)符Tidr未被 登記在成像數(shù)據(jù)管理列表43中，那么檢測(cè)和對(duì)應(yīng)于該標(biāo)題的一條典 型特征數(shù)據(jù)DSr最相似的輸入視頻特征數(shù)據(jù)TS。但是，另外可取的
是在相似的輸入視頻特征數(shù)據(jù)TS中，選擇指定的輸入特征數(shù)據(jù)TS, 以便把選擇的輸入視頻特征數(shù)據(jù)TS顯示在縮略圖顯示區(qū)71上。
在上述實(shí)施例中，基于與所選標(biāo)題對(duì)應(yīng)的輸入視頻特征數(shù)據(jù)TS 的圖像作為縮略圖被顯示在縮略圖顯示區(qū)71中。但是，另外可取的 是總是把錄制成像數(shù)據(jù)的第一幀圖像顯示成縮略圖。另外，并不總是 必須在成像數(shù)據(jù)列表屏幕70上顯示縮略圖。
在上述實(shí)施例中，縮略圖顯示區(qū)71,成像日期信息顯示區(qū)72， 標(biāo)題顯示區(qū)73和輸入信息顯示區(qū)74被排列在成像數(shù)據(jù)列表屏幕70 上。但是，另外可取的是按照將自動(dòng)生成的成像數(shù)據(jù)管理列表43的 項(xiàng)目，適當(dāng)?shù)馗淖儗⒃诔上駭?shù)據(jù)列表屏幕70上顯示的項(xiàng)目。
在上述實(shí)施例中，圖像文本數(shù)據(jù)庫(kù)42被記錄到閃速存儲(chǔ)器5中。 但是，另外可取的是把圖像文本數(shù)據(jù)庫(kù)42記錄到硬盤(pán)驅(qū)動(dòng)器4。
在上述實(shí)施例中，硬盤(pán)記錄器l執(zhí)行數(shù)據(jù)庫(kù)生成處理。但是，對(duì) 于硬盤(pán)記錄器1來(lái)說(shuō)，另外可取的是只執(zhí)行獲取內(nèi)容字符信息TXc 的處理。這種情況下，硬盤(pán)驅(qū)動(dòng)器l通過(guò)利用默認(rèn)安排的圖像文本數(shù) 據(jù)庫(kù)42執(zhí)行標(biāo)題顯示處理，并使用通過(guò)網(wǎng)絡(luò)共享的圖像文本數(shù)據(jù)庫(kù) 42。
在上述實(shí)施例中，獲取內(nèi)容字符信息TXc的處理與記錄輸入的 成像數(shù)據(jù)的處理同時(shí)進(jìn)行。但是，另外可取的是單獨(dú)地或者與再現(xiàn)處 理一起執(zhí)行該獲取處理。
在上述實(shí)施例中，圖像文本數(shù)據(jù)庫(kù)42由數(shù)據(jù)庫(kù)生成處理生成。 但是，另外可取的是繪制正確地表示出任意選擇的圖像文本信息TX 的內(nèi)容的圖像，并使用其中從該繪制圖像提取的特征信息與圖像文本 信息TX相互關(guān)聯(lián)的圖像文本數(shù)據(jù)庫(kù)42。
在上述實(shí)施例中，輸入視頻特征數(shù)據(jù)TS提取自攝像機(jī)作為視頻 內(nèi)容獲得的輸入成像數(shù)據(jù)。但是，另外可取的是從由各種動(dòng)畫(huà)數(shù)據(jù)， 比如電視廣播節(jié)目和游戲軟件播放屏幕，和靜止圖像數(shù)據(jù)，比如照片 構(gòu)成的視頻內(nèi)容提取內(nèi)容特征信息。
在上述實(shí)施例中，為錄制的成像數(shù)據(jù)顯示候選標(biāo)題文本TI。但
是，另外可取的是為電視廣播節(jié)目顯示候選標(biāo)題文本TI。這種配置允 許硬盤(pán)記錄器1讓用戶從顯示的候選標(biāo)題文本TI中選擇用戶偏愛(ài)的 標(biāo)題，而不是附到每個(gè)電視廣播節(jié)目上的現(xiàn)有標(biāo)題，從而也允許通過(guò) 簡(jiǎn)化的操作對(duì)電視廣播節(jié)目設(shè)置用戶偏愛(ài)的標(biāo)題。
在上述實(shí)施例中，具有記錄和再現(xiàn)能力的硬盤(pán)記錄器1執(zhí)行數(shù)據(jù) 庫(kù)生成處理。但是，當(dāng)由具有視頻內(nèi)容記錄和再現(xiàn)能力的計(jì)算機(jī)，只 具有記錄能力的記錄設(shè)備，或者只具有記錄和再現(xiàn)能力的記錄/再現(xiàn)設(shè) 備執(zhí)行數(shù)據(jù)庫(kù)生成處理時(shí)，可獲得基本相同的效果。
在上述實(shí)施例中，自動(dòng)分發(fā)的電視廣播節(jié)目和通過(guò)外部接口 11 輸入的成像數(shù)據(jù)被記錄。但是，另外可取的是記錄可從因特網(wǎng)網(wǎng)站下 載的視頻內(nèi)容。
在上述實(shí)施例中，數(shù)據(jù)庫(kù)生成程序等被預(yù)先保存在ROM或硬盤(pán) 驅(qū)動(dòng)器4中。但是，另外可取的是把數(shù)據(jù)庫(kù)生成程序等等從外部存儲(chǔ) 介質(zhì)，比如記憶棒(Sony公司的商標(biāo))安裝到閃速存儲(chǔ)器5。另一方面， 數(shù)據(jù)庫(kù)生成程序等可通過(guò)USB(通用串行總線)、以太網(wǎng)(商標(biāo))、 IEEE(電氣和電子工程師協(xié)會(huì))802.11a/b/g無(wú)線LAN(局域網(wǎng))從外部 獲得，或者在地面數(shù)字電視廣播或BS數(shù)字電視中分發(fā)。
在上述實(shí)施例中，硬盤(pán)記錄器1具有由作為特征信息提取塊的圖 像分析塊31，作為指定圖像特征信息檢測(cè)塊的特征數(shù)據(jù)匹配塊62， 和作為文本獲取塊的文本獲取塊63構(gòu)成的內(nèi)容字符信息獲取設(shè)備。 但是，另外可取的是用各種其它配置的特征信息提取塊、指定圖像特 征信息檢測(cè)塊和文本獲取塊構(gòu)成按照本發(fā)明的內(nèi)容字符信息獲取設(shè) 備。
本發(fā)明適合于配置成執(zhí)行各種處理操作，例如動(dòng)畫(huà)內(nèi)容的記錄、 再現(xiàn)和編輯的各種信息處理設(shè)備。
雖然利用具體術(shù)語(yǔ)說(shuō)明了本發(fā)明的優(yōu)先實(shí)施例，不過(guò)這樣的說(shuō)明 只是出于舉例說(shuō)明的目的，在不脫離下述權(quán)利要求的精神或范圍的情 況下可做出各種變化和修改。
本領(lǐng)域的技術(shù)人員應(yīng)明白取決于設(shè)計(jì)要求和其它因素，可產(chǎn)生各
種修改、組合、子組合和變更，只要它們?cè)诟郊訖?quán)利要求或其等同物 的范圍內(nèi)。
權(quán)利要求
1、一種內(nèi)容字符信息獲取方法，包括下述步驟按照預(yù)定提取算法，提取表示構(gòu)成視頻內(nèi)容的圖像的內(nèi)容特征信息；從數(shù)據(jù)庫(kù)中檢測(cè)與所述內(nèi)容特征信息類似的指定圖像特征信息，在所述數(shù)據(jù)庫(kù)中，按照所述提取算法從指定圖像提取的所述指定圖像特征信息與表示出所述指定圖像的內(nèi)容的圖像文本信息關(guān)聯(lián)；和從所述數(shù)據(jù)庫(kù)獲得與在檢測(cè)步驟中檢測(cè)的所述指定圖像特征信息關(guān)聯(lián)的所述圖像文本信息，作為表示從中提取所述內(nèi)容特征信息的所述圖像的內(nèi)容的內(nèi)容字符信息。
2、 按照權(quán)利要求1所述的內(nèi)容字符信息獲取方法，其中在檢測(cè) 步驟中，在類似于所述內(nèi)容特征信息的所述指定圖像特征信息中，檢 測(cè)與所述內(nèi)容特征信息最相似的所述指定圖像特征信息。
3、 按照權(quán)利要求2所述的內(nèi)容字符信息獲取方法，其中在檢測(cè) 步驟中，當(dāng)所述指定圖像特征信息被表示成向量時(shí)，離表示所述內(nèi)容 特征信息的向量的距離最小的所述指定圖像特征信息被檢測(cè)為與所 述內(nèi)容特征信息最相似的所述指定圖像特征信息。
4、 按照權(quán)利要求1所述的內(nèi)容字符信息獲取方法，其中所述視 頻內(nèi)容從預(yù)定的外部設(shè)備供給，并被記錄到預(yù)定的記錄器中，在提取 步驟中，內(nèi)容特征信息提取自構(gòu)成從所述外部設(shè)備供給的所述視頻內(nèi) 容的所述圖像。
5、 按照權(quán)利要求1所述的內(nèi)容字符信息獲取方法，還包括下述步驟把所述內(nèi)容字符信息登記到配置成管理所述視頻內(nèi)容的管理列 表中。
6、 按照權(quán)利要求5所述的內(nèi)容字符信息獲取方法，其中在登記 步驟中，在獲取步驟獲得的所述內(nèi)容字符信息中，按照獲取計(jì)數(shù)的降 序，依據(jù)預(yù)定的登記數(shù)目把所述選擇的內(nèi)容字符信息登記到所述管理列表中。
7、 按照權(quán)利要求5所述的內(nèi)容字符倌息獲取方法，其中在檢測(cè) 步驟中，計(jì)算所述檢測(cè)的指定圖像特征信息和所述內(nèi)容特征信息之間 的相關(guān)值，并且在登記步驟中，按照所述相關(guān)值的降序，把在獲取步 驟中獲得的所述內(nèi)容字符信息登記到所述管理列表中。
8、 按照權(quán)利要求5所述的內(nèi)容字符信息獲取方法，還包括下述步驟把登記在所述管理列表中的所述內(nèi)容字符信息顯示在顯示設(shè)備 上，作為表示所述視頻內(nèi)容的內(nèi)容的候選標(biāo)題。
9、 按照權(quán)利要求8所述的內(nèi)容字符信息獲取方法，其中在候選 標(biāo)題顯示步驟中，顯示一個(gè)列表屏幕，在所述列表屏幕上，在列表中 顯示所述視頻內(nèi)容，如果用戶從在列表中顯示的所述視頻內(nèi)容中選擇 一條視頻內(nèi)容，那么與選擇的一條視頻內(nèi)容對(duì)應(yīng)的所述內(nèi)容字符信息 作為候選者被顯示在所述顯示設(shè)備上。
10、 按照權(quán)利要求8所述的內(nèi)容字符信息獲取方法，還包括下述步驟用戶從顯示在所述顯示設(shè)備上的所述內(nèi)容字符信息中選擇一條 所述內(nèi)容字符信息；和把在選擇步驟中選擇的所述一條內(nèi)容字符信息作為所述視頻內(nèi) 容的標(biāo)題登記到所述管理列表中。
11、 按照權(quán)利要求10所述的內(nèi)容字符信息獲取方法，其中在候 選標(biāo)題顯示步驟中，顯示一個(gè)列表屏幕，在所述列表屏幕上，在列表 中顯示所述視頻內(nèi)容，如果在登記步驟中，所述標(biāo)題被登記在所述管 理列表中，那么把所述標(biāo)題顯示在所述列表屏幕上，如果所述標(biāo)題未 被登記在所述管理列表中，那么按照預(yù)定選擇算法選擇的一條內(nèi)容字 符信息被顯示成所迷標(biāo)題。
12、 按照權(quán)利要求11所述的內(nèi)容字符信息獲取方法，其中在候 選標(biāo)題顯示步驟中，選擇在獲取步驟中最頻繁獲得的所述內(nèi)容字符信 息，從而提供所述一條內(nèi)容字符信息。
13、 一種配置成使計(jì)算機(jī)執(zhí)行下述步驟的內(nèi)容字符信息獲取程序按照預(yù)定提取算法，提取表示構(gòu)成視頻內(nèi)容的圖像的內(nèi)容特征信息；從數(shù)據(jù)庫(kù)中檢測(cè)與所述內(nèi)容特征信息類似的指定圖像特征信息， 在所述數(shù)據(jù)庫(kù)中，按照所述提取算法從指定圖像提取的所述指定圖像 特征信息與表示所述指定圖像的內(nèi)容的圖像文本信息關(guān)聯(lián)；和從所述數(shù)據(jù)庫(kù)獲得與在檢測(cè)步驟中檢測(cè)的所述指定圖像特征信 息關(guān)聯(lián)的所述圖像文本信息，作為表示從中提取所述內(nèi)容特征信息的 所述圖像的內(nèi)容的內(nèi)容字符信息。
14、 一種內(nèi)容字符信息獲取設(shè)備，包括 特征信息提取器，所述特征信息提取器被配置成按照預(yù)定提取算法，提取表示構(gòu)成視頻內(nèi)容的圖像的內(nèi)容特征信息；特征信息檢測(cè)器，所述特征信息檢測(cè)器被配置成從數(shù)據(jù)庫(kù)中檢測(cè) 與所述內(nèi)容特征信息類似的指定圖像特征信息，在所述數(shù)據(jù)庫(kù)中，按 照所述提取算法從指定圖像提取的所述指定圖像特征信息與表示所述指定圖像的內(nèi)容的圖像文本信息關(guān)聯(lián)；和文本獲取器，所述文本獲取器被配置成從所述數(shù)據(jù)庫(kù)獲得與所述所述特征信息檢測(cè)器檢測(cè)的所述指定圖像特征信息關(guān)聯(lián)的所述圖像文本信息，作為表示從中提取所述內(nèi)容特征信息的所述圖像的內(nèi)容的內(nèi)容字符信息。
15、 一種視頻內(nèi)容記錄設(shè)備，包括記錄器，所述記錄器被配置成記錄從外部設(shè)備供給的視頻內(nèi)容； 特征信息提取器，所述特征信息提取器被配置成按照預(yù)定提取算法，提取表示構(gòu)成視頻內(nèi)容的圖像的內(nèi)容特征信息；特征信息檢測(cè)器，所述特征信息檢測(cè)器被配置成從數(shù)據(jù)庫(kù)中檢測(cè)與所述內(nèi)容特征信息類似的指定圖像特征信息，在所述數(shù)據(jù)庫(kù)中，按照所述提取算法從指定圖像提取的所述指定圖像特征信息與表示所述指定圖像的內(nèi)容的圖像文本信息關(guān)聯(lián)； 文本獲取器，所述文本獲取器被配置成從所述數(shù)據(jù)庫(kù)獲得與所述 特征信息檢測(cè)器檢測(cè)的所述指定圖像特征信息關(guān)聯(lián)的所述圖像文本 信息，作為表示從中提取所述內(nèi)容特征信息的所述圖像的內(nèi)容的內(nèi)容字符信息；和登記器，所述登記器被配置成把所述內(nèi)容字符信息登記到管理列 表中，所述管理列表被配置成管理記錄到所述記錄器的所述視頻內(nèi) 容。
全文摘要
本發(fā)明提供一種內(nèi)容字符信息獲取方法，包括下述步驟按照預(yù)定提取算法，提取表示構(gòu)成視頻內(nèi)容的圖像的內(nèi)容特征信息，從數(shù)據(jù)庫(kù)中檢測(cè)與內(nèi)容特征信息類似的指定圖像特征信息，在所述數(shù)據(jù)庫(kù)中，按照提取算法從指定圖像提取的指定圖像特征信息與表示該指定圖像的內(nèi)容的圖像文本信息關(guān)聯(lián)，和從數(shù)據(jù)庫(kù)獲得與在檢測(cè)步驟中檢測(cè)的指定圖像特征信息關(guān)聯(lián)的圖像文本信息，作為表示從中提取內(nèi)容特征信息的圖像的內(nèi)容的內(nèi)容字符信息。
文檔編號(hào)H04N5/92GK101170672SQ20071018168
公開(kāi)日2008年4月30日 申請(qǐng)日期2007年10月24日 優(yōu)先權(quán)日2006年10月24日
發(fā)明者宮本勝 申請(qǐng)人:索尼株式會(huì)社