專利名稱：通知內(nèi)容場景出現(xiàn)的裝置和方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種在觀看電視節(jié)目或任何其它視頻內(nèi)容時，通知用 戶感興趣的對象出現(xiàn)在場景上，從而實現(xiàn)有效觀看的裝置和方法。
背景技術(shù)：
近來，電視節(jié)目經(jīng)常進(jìn)行"X很快出現(xiàn)"、"此后Y即將開始，，等 通告，以向觀看者提前通知感興趣對象的出現(xiàn)。這樣的通告是為了使 觀看者不改變頻道而停留在該節(jié)目。但即使在通告后，對象X和Y 實際出現(xiàn)在場景上還需要一會兒。因此，觀看者可能不得不如下地觀 看電視(1)盡管不希望的場景會非常短，也被迫停留在不想要的 場景；(2)改變頻道來觀看其它節(jié)目，同時不時地查看以前的頻道； 或(3)錄下該節(jié)目并在以后觀看。
操作(1)和(2)浪費時間并且給用戶增加了查看的勞動。對于 操作(2)，如果用戶喜歡改變后的頻道的節(jié)目，則用戶可能會錯過 以前頻道上的希望對象的場景。在操作(3)中，用戶可以以后觀看 節(jié)目，這降低了錯過希望的場景的風(fēng)險。但是，如果用戶想要輕松地 觀看例如機智問答(quiz show )，錄制操作會給用戶增加負(fù)擔(dān)。而且， 用戶可能不想錄下體育比賽等的現(xiàn)場直播，而僅想獲得進(jìn)行中的比賽 報告。利用現(xiàn)有技術(shù)，可能會降低電視觀看的效率。
一些技術(shù)(例如JP-A 2005-323090 )提出檢測并通知觀看者希望 的場景從而觀看者能夠觀看該場景而不會錯過的方法。根據(jù)JP-A 2005-323090提供的方法，將觀看者輸入的場景指定關(guān)鍵詞與將識別 場景的場景信息疊加在節(jié)目的每個場景上的廣^"數(shù)據(jù)(傳輸流)進(jìn)行 比較，以檢測該節(jié)目中的希望場景。
但是，JP-A 2005-323090的方法是以疊加在廣播數(shù)據(jù)上的場景信息為前提的。這意味著，需要將場景信息加到每個廣播站的每個節(jié)目 的每個場景上，以實現(xiàn)任何站的任何節(jié)目的任何希望場景的通知，這 是非常困難的。代替識別場景的場景信息，可以加入字幕。但是，字 幕信息不總是能夠準(zhǔn)確地識別場景。即使當(dāng)表示觀看者感興趣的對象 的關(guān)鍵詞出現(xiàn)在字幕中時，如上所述，對應(yīng)于該關(guān)鍵詞的對象還需要 一會兒才會實際出現(xiàn)在場景上。因此，在現(xiàn)有技術(shù)中，存在當(dāng)感興趣 的對象還沒有出現(xiàn)時向用戶通知了錯誤的場景作為該對象實際出現(xiàn) 的場景的可能。

發(fā)明內(nèi)容
本發(fā)明的一個方面提供一種用于通知場景的裝置。該裝置包括 播放單元，播放包括能夠按時間序列播放的多個場景的內(nèi)容；元數(shù)據(jù) 提取單元，從所播放的場景中提取作為與場景有關(guān)的文本信息的元數(shù) 據(jù)；關(guān)鍵詞提取單元，從元數(shù)據(jù)中提取關(guān)鍵詞；附加單元，向每個關(guān) 鍵詞附加表示關(guān)鍵詞的語義屬性的語義類別；語義類別判定單元，判 定附加到關(guān)鍵詞上的語義類別是否是表示在提取了關(guān)鍵詞的場景之 后執(zhí)行重放的應(yīng)播放類別；取得單元，當(dāng)存在語義類別判定單元判定 為附加了應(yīng)播放類別的關(guān)鍵詞時，從附加了語義類別的關(guān)鍵詞中取得 至少 一個不具有該應(yīng)播放類別的關(guān)鍵詞作為應(yīng)監(jiān)視關(guān)鍵詞；出現(xiàn)判定 單元，當(dāng)從在提取了應(yīng)監(jiān)視關(guān)鍵詞的場景之后播放的場景中提取的元 數(shù)據(jù)包括應(yīng)監(jiān)視關(guān)鍵詞和附加了作為表示重放結(jié)束的語義類別的應(yīng) 停止類別的關(guān)鍵詞時，判定包括應(yīng)監(jiān)視關(guān)鍵詞的場景在正在播放的內(nèi) 容中出現(xiàn)；和通知單元，當(dāng)包括應(yīng)監(jiān)視關(guān)鍵詞的場景出現(xiàn)時，通知包 括應(yīng)監(jiān)視關(guān)鍵詞的場景出現(xiàn)。
本發(fā)明的另一個方面提供一種用于通知場景的方法。該方法包 括播放包括能夠按時間序列播放的多個場景的內(nèi)容；從所播放的場 景中提取作為與場景有關(guān)的文本信息的元數(shù)據(jù)；從元數(shù)據(jù)中提取關(guān)鍵 詞；向每個關(guān)鍵詞附加表示關(guān)鍵詞的語義屬性的語義類別；判定附加 到關(guān)鍵詞上的語義類別是否是表示在提取了關(guān)鍵詞的場景之后執(zhí)行重放的應(yīng)播放類別；當(dāng)存在語義類別判定單元判定為附加了應(yīng)播;^文類 別的關(guān)鍵詞時，從附加了語義類別的關(guān)鍵詞中取得至少一個不具有該 應(yīng)播放類別的關(guān)鍵詞作為應(yīng)監(jiān)視關(guān)鍵詞；當(dāng)從在提取了應(yīng)監(jiān)視關(guān)鍵詞 的場景之后播放的場景中提取的元數(shù)據(jù)包括應(yīng)監(jiān)視關(guān)鍵詞和附加了 作為表示重放結(jié)束的語義類別的應(yīng)停止類別的關(guān)鍵詞時，判定包括應(yīng) 監(jiān)視關(guān)鍵詞的場景在正在播放的內(nèi)容中出現(xiàn)；當(dāng)包括應(yīng)監(jiān)視關(guān)鍵詞的 場景出現(xiàn)時，通知包括應(yīng)監(jiān)視關(guān)鍵詞的場景出現(xiàn)。


圖1是示出本發(fā)明的一個實施方式的場景通知裝置的結(jié)構(gòu)的框圖。
圖2是示出字典存儲單元中存儲的字典信息的數(shù)據(jù)結(jié)構(gòu)的一例的圖。
圖3是示出字典存儲單元中存儲的字典信息的數(shù)據(jù)結(jié)構(gòu)的另一 例的圖。
圖4是本實施方式的整個監(jiān)視信息提取處理的流程圖。
圖5是被疊加在視頻內(nèi)容上并且被配送給觀看者的字幕信息的例子。
圖6是附加了語義類別的關(guān)鍵詞的例子。
圖7是示出提示應(yīng)監(jiān)視信息的顯示畫面的一例的圖。
圖8是示出提示應(yīng)監(jiān)視信息的顯示畫面的另一例的圖。
圖9A和9B是本實施方式的整個場景通知處理的流程圖。
圖IO是示出通知觀看者場景出現(xiàn)的方法的一例的圖。
圖ll是示出通知觀看者場景出現(xiàn)的方法的另一例的圖。
圖12是示出通知觀看者場景出現(xiàn)的方法的又一例的圖。
圖13是用于說明本實施方式的場景通知裝置的硬件結(jié)構(gòu)的圖。
具體實施例方式
以下參照附圖詳細(xì)說明本發(fā)明的裝置和方法的示例性實施方式。本實施方式的場景通知裝置從內(nèi)容的場景中提取文本信息元數(shù) 據(jù)，從元數(shù)據(jù)的關(guān)鍵詞中拾取附加了位于表示近未來的語義類別的關(guān) 鍵詞之前或之后的關(guān)鍵詞，并且將所拾取的關(guān)鍵詞判定為要監(jiān)視的關(guān) 鍵詞(應(yīng)監(jiān)視關(guān)鍵詞)。當(dāng)在提取了元數(shù)據(jù)的場景之后播放的場景中 檢測出應(yīng)監(jiān)視關(guān)鍵詞時，并且當(dāng)在應(yīng)監(jiān)視關(guān)鍵詞之前和之后存在任何 附加了表示過去時態(tài)或現(xiàn)在完成時態(tài)的語義類別的關(guān)鍵詞時，判定對 應(yīng)于應(yīng)監(jiān)視關(guān)鍵詞的對象出現(xiàn)。
在圖l的結(jié)構(gòu)中，場景通知裝置100包括播放單元101、元數(shù)據(jù) 提取單元120、字典存儲單元131、關(guān)鍵詞提取單元102、附加單元 103、語義類別判定單元104、應(yīng)監(jiān)視信息取得單元105、應(yīng)監(jiān)^L信息 存儲單元132、顯示單元106、接收單元107、出現(xiàn)判定單元108和通 知單元109。
播放單元101播放包含多個場景的內(nèi)容，例如電視廣播。應(yīng)注意， 該內(nèi)容不限于電視廣播，只要包含在內(nèi)容中的每個場景的元數(shù)據(jù)能夠 被提取為文本信息，就可以加入任何類型的內(nèi)容。例如，可以加入存 儲在數(shù)字通用盤(DVD)等記錄介質(zhì)中的視頻內(nèi)容和無線電廣播等音 頻內(nèi)容。在以下說明中，以作為電視廣播配送的視頻內(nèi)容的重放為例。
元數(shù)據(jù)提取單元120提取通過電視廣播從視頻內(nèi)容的廣播波配 送的視頻內(nèi)容的每個場景的元數(shù)據(jù)。元數(shù)據(jù)提取單元120包括附加信 息提取單元121、圖像識別單元122和音頻識別單元123。
附加信息提取單元121提取疊加在電視廣播視頻內(nèi)容上的電子 節(jié)目指南(EPG)、數(shù)據(jù)廣播和字幕等作為文本信息的附加信息來作 為元數(shù)據(jù)。
圖像識別單元122識別視頻內(nèi)容中的人物、建筑等圖像信息和字 幕，并且提取表示所識別的圖像信息和字幕的文本信息作為元數(shù)據(jù)。
音頻識別單元123識別說話、音樂、音效等包含在視頻內(nèi)容中的 音頻信息，并且提取表示所識別的說話、樂曲的標(biāo)題或音效的類型的 文本信息作為元數(shù)據(jù)。
字典存儲單元131在其中存儲用于取得表示包含在元數(shù)據(jù)中的關(guān)鍵詞的語義屬性的語義類別的字典信息。如圖2所示，字典信息包 括關(guān)鍵詞、關(guān)鍵詞的語義類別和表示語義類別的確定性的語義類別確 定性系數(shù)。語義類別包括近未來、過去和現(xiàn)在完成等與時間相關(guān)的類 別，人物和地方等物理實體的名稱等與名稱相關(guān)的類別，以及與夸張 相關(guān)的類別。
字典信息在后述的關(guān)鍵詞提取單元102從元數(shù)據(jù)中提取關(guān)鍵詞， 或者后述的附加單元103向所提取的關(guān)鍵詞附加語義類別時被參照。
字典信息的數(shù)據(jù)結(jié)構(gòu)不限于圖2所示的結(jié)構(gòu)，只要能夠使用字典 信息來判定元數(shù)據(jù)等的文本信息中的關(guān)鍵詞的語義類別，就可以為字 典信息采用任何數(shù)據(jù)結(jié)構(gòu)。在圖3的例子中，字典信息包括定義字符 串和詞素的排列規(guī)則的條件、語義類別和確定性系數(shù)，它們之間相互 關(guān)聯(lián)。利用這樣的字典信息，可以從給定的文本信息中提取滿足條件 的關(guān)鍵詞，并且可以向所提取的關(guān)鍵詞附加對應(yīng)于該提取的關(guān)鍵詞的 語義類別。
關(guān)鍵詞提取單元102從所提取的元數(shù)據(jù)中提取與存儲在字典存 儲單元131中的字典信息中的一個關(guān)鍵詞一致的關(guān)鍵詞。關(guān)鍵詞提取 不限于該方法，可以構(gòu)成為對元數(shù)據(jù)進(jìn)行語形學(xué)分析，從而提取分析 結(jié)果得到的關(guān)鍵詞。
附加單元103向由關(guān)鍵詞提取單元102提取的每個關(guān)鍵詞附加字 典信息的對應(yīng)的語義類別。
關(guān)鍵詞提取單元102從元數(shù)據(jù)提取關(guān)鍵詞并且附加單元103向所 提取的每個關(guān)鍵詞附加語義類別的處理與元數(shù)據(jù)語義分析處理的執(zhí) 行相同?？梢酝ㄟ^從圖2所示的給定關(guān)鍵詞中找到一致，或者通過從 圖3所示的給定條件中找到一致，來進(jìn)行語義分析處理。
對于具有多個含義的關(guān)鍵詞，可能從字典信息得到不同的語義類 別。例如，"Kawasaki"可能是人名和地名。在這種情況下，所有得到 的語義類別都可以原樣使用。但是，為了用戶的方便，最好通過選擇 具有最大確定性系數(shù)的語義類別或者最接近相鄰關(guān)鍵詞的語義類別 的語義類別來減少到 一個語義類別。語義類別判定單元104判定在關(guān)鍵詞提取單元102提取的關(guān)鍵詞 中，是否存在任何附加了表示在提取了關(guān)鍵詞的場景之后執(zhí)行的重放 的應(yīng)播放語義類別的關(guān)鍵詞。例如，應(yīng)監(jiān)視信息取得單元105判定是 否存在任何附加了表示近未來的語義類別作為應(yīng)播放類別的關(guān)鍵詞。
當(dāng)判定在所提取的關(guān)鍵詞中存在附加了應(yīng)播放類別的關(guān)鍵詞時， 應(yīng)監(jiān)視信息取得單元105取得位于感興趣關(guān)鍵詞之前和之后的關(guān)鍵詞 作為應(yīng)監(jiān)視關(guān)鍵詞。而且，應(yīng)監(jiān)視信息取得單元105取得所取得的感 興趣關(guān)鍵詞之前和之后的關(guān)鍵詞的語義類別作為應(yīng)監(jiān)視類別。在以下 說明中，應(yīng)監(jiān)視關(guān)鍵詞和應(yīng)監(jiān)視類別被稱為應(yīng)監(jiān)視信息。
換言之，應(yīng)監(jiān)視信息取得單元105不僅能夠取得關(guān)鍵詞，而且能 夠取得語義類別來作為監(jiān)視對象。這實現(xiàn)了希望場景的準(zhǔn)確通知。例 如，當(dāng)輸出了消息"名角很快登場，，時，現(xiàn)有技術(shù)能夠檢測出關(guān)鍵詞"名 角"出現(xiàn)的場景，但是不能檢測出名角的名字實際出現(xiàn)的場景。相反， 本發(fā)明能夠監(jiān)視語義類別"名角"。這樣，如果存在任何指示與語義類 別"名角"相關(guān)的人名的字典信息項，就能夠檢測出該名字實際出現(xiàn)的 場景。
應(yīng)注意，應(yīng)監(jiān)視信息取得單元105從自 一個場景提取的關(guān)鍵詞中 取得任何被選擇的關(guān)鍵詞以外的關(guān)鍵詞作為應(yīng)監(jiān)視關(guān)鍵詞。應(yīng)監(jiān)視信 息取得單元105可以構(gòu)成為分析從場景提取的關(guān)鍵詞的修飾關(guān)系，并 且取得與被選擇的關(guān)鍵詞具有修飾關(guān)系的關(guān)鍵詞來作為應(yīng)監(jiān)視關(guān)鍵 詞。
顯示單元106顯示應(yīng)監(jiān)視信息取得單元105取得的應(yīng)監(jiān)視信息， 詢問是否實際將該應(yīng)監(jiān)視信息置于監(jiān)視之下。示出應(yīng)監(jiān)視信息的顯示 畫面的例子將后述。
接收單元107通過查看顯示畫面來接收用戶指定的關(guān)鍵詞，以便 將該關(guān)鍵詞置于監(jiān)視之下。例如，接收單元107從所顯示的應(yīng)監(jiān)視關(guān) 鍵詞中接收利用遙控光標(biāo)選擇的應(yīng)監(jiān)視關(guān)鍵詞。
應(yīng)監(jiān)視信息存儲單元132在其中存儲接收單元107接收的、被指 定的應(yīng)監(jiān)視信息。應(yīng)監(jiān)視信息存儲單元132以(應(yīng)監(jiān)視關(guān)鍵詞、頻道ID)和(應(yīng)監(jiān)視類別、頻道ID)等方式，將電視廣播的頻道ID等對 象視頻內(nèi)容的識別信息與應(yīng)監(jiān)視信息相關(guān)聯(lián)。
字典存儲單元131和應(yīng)監(jiān)視信息存儲單元132可以利用硬盤驅(qū)動 器(HDD)、磁光(MO)盤、存儲卡和隨機存取存儲器(RAM)等 常用的記錄介質(zhì)來實現(xiàn)。
出現(xiàn)判定單元108判定存儲在應(yīng)監(jiān)視信息存儲單元132中的應(yīng)監(jiān) 視信息是否在順序播放的內(nèi)容中出現(xiàn)。具體地，出現(xiàn)判定單元108判 定從在應(yīng)監(jiān)視信息的存儲操作之后播放的場景中提取的元數(shù)據(jù)是否 包括應(yīng)監(jiān)視信息，并且位于應(yīng)監(jiān)視信息之前和之后的關(guān)鍵詞是否被附
加了作為表示重放結(jié)束的語義類別的應(yīng)停止類別。當(dāng)從在應(yīng)監(jiān)視信息 的存儲操作之后播放的場景中提取的元數(shù)據(jù)包括應(yīng)監(jiān)視信息，并且位
于應(yīng)監(jiān)視信息之前和之后的關(guān)鍵詞被附加了應(yīng)停止類別時，出現(xiàn)判定 單元108判定包含應(yīng)監(jiān)視信息的場景出現(xiàn)。關(guān)于應(yīng)停止類別，可以采 用表示過去或現(xiàn)在完成時態(tài)的語義類別。
更具體地，當(dāng)應(yīng)監(jiān)視信息是應(yīng)監(jiān)視關(guān)鍵詞時，出現(xiàn)判定單元108 判定從所播放的場景提取的元數(shù)據(jù)中的關(guān)鍵詞是否包括應(yīng)監(jiān)視關(guān)鍵 詞，并且與應(yīng)監(jiān)視關(guān)鍵詞 一致的關(guān)鍵詞之前和之后的關(guān)鍵詞是否被附 加了應(yīng)停止類別。當(dāng)應(yīng)監(jiān)視信息是應(yīng)監(jiān)視類別時，出現(xiàn)判定單元108 判定從所播放的場景提取的元數(shù)據(jù)中的關(guān)鍵詞是否包括附加了應(yīng)監(jiān) 視類別的關(guān)鍵詞，并且該附加了應(yīng)監(jiān)視類別的關(guān)鍵詞之前和之后的關(guān) 鍵詞是否被附加了應(yīng)停止類別。
當(dāng)出現(xiàn)判定單元108作出判定時，通知單元109通知用戶包含應(yīng) 監(jiān)視信息的場景出現(xiàn)。例如，通知單元109在顯示單元106上顯示包 含應(yīng)監(jiān)視信息的場景，以通知觀看者場景出現(xiàn)。通知單元109進(jìn)行通 知的方式將后述。
以下參照圖4說明本實施方式的如上構(gòu)成的場景通知裝置100 執(zhí)行的應(yīng)監(jiān)視信息提取處理。在應(yīng)監(jiān)視信息提取處理中，從正在播放 的內(nèi)容中提取應(yīng)監(jiān)視信息并存儲在應(yīng)監(jiān)視信息存儲單元132中。
例如當(dāng)用戶開始觀看電視廣播時，啟動應(yīng)監(jiān)視信息提取處理。首先，在播放廣播視頻內(nèi)容時，元數(shù)據(jù)提取單元120的附加信息提取單 元121提取以疊加在EPG、數(shù)據(jù)廣播和字幕等視頻內(nèi)容上的方式配送 的附加信息作為元數(shù)據(jù)(步驟S401)。
在圖5中，提供了在時間21:28:00和21:30:00之間在某個頻道 上廣播的關(guān)于氣浙(iguana)的對話的字幕示例。
在圖4中，圖像識別單元122識別視頻內(nèi)容的每個場景的圖像， 并且從其中提取作為識別結(jié)果得到的人物、建筑或字幕的文本信息作 為元數(shù)據(jù)(步驟S402 )。而且，音頻識別單元123識別包含在視頻內(nèi) 容中的音頻信息，并且從其中提取作為識別結(jié)果得到的說話、樂曲的 標(biāo)題或音效的類型的文本信息作為元數(shù)據(jù)(步驟S403)。
步驟S401到S403的操作不必按上述次序執(zhí)行。可以按照任何 次序或者并行地執(zhí)行上述處理。
接著，關(guān)鍵詞提取單元102從所取得的文本信息(元數(shù)據(jù))中提 取關(guān)鍵詞(步驟S404)。例如，關(guān)鍵詞提取單元102從元數(shù)據(jù)中提取 與圖2所示的字典信息中包含的一個關(guān)鍵詞一致的關(guān)鍵詞。
然后，附加單元103向每個提取的關(guān)鍵詞附加語義類別(步驟 S405)。例如，附加單元103從圖2所示的字典信息取得與所提取的 關(guān)鍵詞相對應(yīng)的語義類別，并將其附加到該關(guān)鍵詞上。
圖6是示出作為利用字典信息對圖5的字幕信息進(jìn)行語義分析的 結(jié)果得到的、附加了語義類別的關(guān)鍵詞的列表的圖。在圖6中，向被 認(rèn)為是節(jié)目中的人物的名字的關(guān)鍵詞"Yamamoto-san"和 "Shima-san"附加了語義類別"人物、名人"。向關(guān)鍵詞"iguana"和 "lizard"附加了語義類別"動物、爬蟲類"。
在圖4中，語義類別判定單元104判定是否存在任何附加了語義 類別"時間、近未來"的關(guān)鍵詞(步驟S406)。當(dāng)存在時(步驟S406 為"是")，應(yīng)監(jiān)視信息取得單元105取得位于附加了語義類別"時間、 近未來"的關(guān)鍵詞之前和之后的關(guān)鍵詞作為應(yīng)監(jiān)視關(guān)鍵詞，并且取得 附加到這些關(guān)鍵詞上的語義類別作為應(yīng)監(jiān)視類別(步驟S407)。
接著，應(yīng)監(jiān)視信息取得單元105判定所取得的應(yīng)監(jiān)視信息(應(yīng)監(jiān)視關(guān)鍵詞或應(yīng)監(jiān)視類別)是否已經(jīng)存儲在應(yīng)監(jiān)視信息存儲單元132中
(步驟S408 )。當(dāng)還沒有存儲應(yīng)監(jiān)一見信息時(步驟S408為"否，，)， 應(yīng)監(jiān)視信息取得單元105向用戶提供所取得的應(yīng)監(jiān)視信息(步驟 S409)。應(yīng)監(jiān)視信息取得單元105可以在顯示單元106的顯示畫面上 提示應(yīng)監(jiān)視信息，來向用戶提供所取得的應(yīng)監(jiān)視信息。
在圖7中，圖示出在視頻內(nèi)容下方顯示的應(yīng)監(jiān)視信息701的例子。 顯示方式不限于此，可以在畫面上的任意其它位置顯示應(yīng)監(jiān)視信息。 在圖7的例子中，取得位于附加了表示應(yīng)播放的語義類別"時間、 近未來"的關(guān)鍵詞711 ("廣告后")之前的關(guān)鍵詞712 ("答案")作為 應(yīng)監(jiān)視關(guān)鍵詞。另外，取得附加到該應(yīng)監(jiān)視關(guān)鍵詞上的語義類別"無 形物"作為應(yīng)監(jiān)視類別。所取得的應(yīng)監(jiān)視關(guān)鍵詞和應(yīng)監(jiān)視類別作為應(yīng) 監(jiān)視信息701顯示。在該圖中位于應(yīng)監(jiān)視關(guān)鍵詞前面黑色塊表示應(yīng)監(jiān) 視信息中的應(yīng)監(jiān)視關(guān)鍵詞("答案")被用戶指定。然后，將與頻道ID 相關(guān)聯(lián)的應(yīng)監(jiān)視關(guān)鍵詞"(答案、頻道4)"存儲在應(yīng)監(jiān)視信息存儲單 元132中。
在圖4中，接收單元107判定用戶是否指定將該應(yīng)監(jiān)視信息置于 監(jiān)視之下(步驟S410)。當(dāng)用戶已經(jīng)指定時(步驟S410中為"是，，)， 接收單元107接收所指定的應(yīng)監(jiān)視信息，并將其存儲在應(yīng)監(jiān)視信息存 儲單元132中(步驟S411)。
當(dāng)在步驟S406中判定沒有附加了語義類別"時間、近未來"的關(guān) 鍵詞時(步驟S406為"否")，當(dāng)在步驟S408中判定應(yīng)監(jiān)視信息已經(jīng) 存儲在應(yīng)監(jiān)視信息存儲單元132中時(步驟S408為"是")，并且在 步驟S410中判定用戶沒有指定將該應(yīng)監(jiān)視信息置于監(jiān)視之下時，或 者在步驟S411中存儲了應(yīng)監(jiān)視信息后，顯示單元101判定視頻內(nèi)容 的重放是否結(jié)束(步驟S412)。
當(dāng)沒有結(jié)束時(步驟S412為"否")，顯示單元101繼續(xù)視頻內(nèi) 容的重放。其后，系統(tǒng)返回到步驟S401，通過從新播放的場景中提取 元數(shù)據(jù)來重復(fù)處理。當(dāng)視頻內(nèi)容的重放結(jié)束時(步驟S412為"是，，)， 結(jié)束應(yīng)監(jiān)視信息提取處理。應(yīng)監(jiān)視信息提取處理可以僅當(dāng)用戶在遙控上按下特定按鈕等進(jìn) 行了預(yù)定動作時執(zhí)行。這樣，僅當(dāng)用戶希望時才顯示應(yīng)監(jiān)視信息。
當(dāng)執(zhí)行了不同的動作，例如用戶按下不同的按鈕時，應(yīng)監(jiān)視信息
別，作為應(yīng)監(jiān)視信息，而不管是否存在附加了語義類別"時間、近未 來"的關(guān)鍵詞。
圖8是示出利用上述構(gòu)成來提示應(yīng)監(jiān)視信息的顯示畫面的例子 的圖。響應(yīng)于按下遙控按鈕，取得關(guān)鍵詞811 ("ANIME")和關(guān)鍵詞 812 ("FAN")作為應(yīng)監(jiān)視關(guān)鍵詞。而且，取得附加到這些應(yīng)監(jiān)視關(guān) 鍵詞上的語義類別"商品"和"地位"作為應(yīng)監(jiān)視類別。所取得的應(yīng)監(jiān)視 關(guān)鍵詞和應(yīng)監(jiān)視類別被顯示為應(yīng)監(jiān)視信息801。當(dāng)指定了關(guān)鍵詞 "ANIME"時，將應(yīng)監(jiān)視關(guān)鍵詞與頻道ID相關(guān)聯(lián)，結(jié)果將"(ANIME、 頻道6 )"存儲在應(yīng)監(jiān)視信息存儲單元132中。
以下參照圖9A和9B說明本實施方式的場景通知裝置100所執(zhí) 行的場景通知處理。在場景通知處理中，從在存儲了應(yīng)監(jiān)視信息之后 播放的內(nèi)容中檢測出應(yīng)監(jiān)視信息出現(xiàn)的場景，并且通知該場景。
與應(yīng)監(jiān)視信息提取處理同樣，在以下說明中，以觀看電視廣播等 視頻內(nèi)容為例。但是，只要能夠提取場景的元數(shù)據(jù)作為文本信息，則 可以加入任何其它類型的內(nèi)容。
首先，元數(shù)據(jù)提取單元120判定應(yīng)監(jiān)視信息存儲單元132中是否 存儲了應(yīng)監(jiān)視信息(步驟S901)。沒有存儲應(yīng)監(jiān)視信息時(步驟S901 為"否")，意味著沒有需要監(jiān)視的。從而結(jié)束場景通知處理。
當(dāng)存儲了應(yīng)監(jiān)視信息時(步驟S901為"是")，元數(shù)據(jù)提取單元 120從對應(yīng)于與應(yīng)監(jiān)視信息相關(guān)聯(lián)的頻道ID的廣播波的視頻內(nèi)容中 提取元數(shù)據(jù)(步驟S902至S904 )。
可以從能夠在特定區(qū)域接收到的所有頻道ID的廣播波中并行地 提取元數(shù)據(jù)。如果裝置沒有足夠的元數(shù)據(jù)提取能力，則可以通過顯示 "不要再增加監(jiān)視對象，，等警告消息來限制監(jiān)視對象的數(shù)量。
步驟S902至S904的元數(shù)據(jù)提取處理以及步驟S905和S906的語義分析處理與應(yīng)監(jiān)視信息提取處理的步驟S401至S405相同。因此， 省略說明。
在語義分析處理后，出現(xiàn)判定單元108將在語義分析處理中提取 的關(guān)鍵詞或附加到該關(guān)鍵詞上的語義類別與存儲在應(yīng)監(jiān)視信息存儲 單元132中的、包括應(yīng)監(jiān)視關(guān)鍵詞或應(yīng)監(jiān)視類別的應(yīng)監(jiān)視信息相比較 (步驟S907 )。
然后，出現(xiàn)判定單元108判定所提取的關(guān)鍵詞或該關(guān)鍵詞的語義 類別是否與應(yīng)監(jiān)視信息存儲單元132中的應(yīng)監(jiān)視信息一致(步驟 S908 )。當(dāng)它們不一致時(步驟S卯8為"否")，對后續(xù)播放的場景 重復(fù)該元數(shù)據(jù)提取處理(步驟S902 )。
當(dāng)存在一致時(步驟S908為"是")，出現(xiàn)判定單元108進(jìn)一步 判定在所提取的關(guān)鍵詞之前或之后的位置處提取的關(guān)鍵詞的語義類 別是否是"時間、過去"或"時間，現(xiàn)在完成"(步驟S909 )。
在圖7的例子中，存儲了關(guān)鍵詞712 ("答案")作為應(yīng)監(jiān)視關(guān)鍵 詞。假設(shè)附加了表示"答案已經(jīng)是…，，的字幕或聲音的場景被播放，則 從該場景提取出與應(yīng)監(jiān)視關(guān)鍵詞一致的關(guān)鍵詞"答案，，和跟隨在該關(guān) 鍵詞之后的關(guān)鍵詞"已經(jīng)是"。關(guān)鍵詞"已經(jīng)是"例如按照圖3的字典信 息被給出表示重放結(jié)束的語義類別"時間、現(xiàn)在完成"。從而，出現(xiàn)判 定單元108判定跟隨在與應(yīng)監(jiān)視關(guān)鍵詞一致的關(guān)鍵詞之后的關(guān)鍵詞 "已經(jīng)是"的語義類別是"時間、現(xiàn)在完成"。
如果語義類別既不是"時間、過去"，也不是"時間，現(xiàn)在完成" (步驟S909為"否，，)，則對后續(xù)播放的場景重復(fù)元數(shù)據(jù)提取處理(步 驟S902 )。這是因為由應(yīng)監(jiān)視信息表示的對象被認(rèn)為還沒有出現(xiàn)在視 頻內(nèi)容中。
如果語義類別是"時間、過去"或"時間，現(xiàn)在完成"(步驟S卯9 為"是")，則出現(xiàn)判定單元108判定由應(yīng)監(jiān)視信息指示的對象已經(jīng)出 現(xiàn)。然后，出現(xiàn)判定單元108判定與應(yīng)監(jiān)視信息相關(guān)聯(lián)的監(jiān)視對象的 頻道ID是否與現(xiàn)在正觀看的頻道的頻道ID—致(步驟S910)。
當(dāng)頻道ID不一致時(步驟S910為"否")，通知單元109通知用戶包含應(yīng)監(jiān)視信息的場景出現(xiàn)(步驟S911)。才艮據(jù)本實施方式，只 有當(dāng)應(yīng)監(jiān)視信息在廣播內(nèi)容的元數(shù)據(jù)中出現(xiàn)并且當(dāng)附加了表示重放 結(jié)束的語義類別"時間、過去"或"時間、現(xiàn)在完成"的關(guān)鍵詞位于應(yīng)監(jiān) 視信息之前或之后時，才向用戶給出通知。
以下說明通知單元109執(zhí)行的通知方法。圖IO至12是示出通知 單元109向觀看者通知場景的方法例子的圖。
在圖10中，在當(dāng)前正在觀看的頻道的顯示畫面的底部，顯示在 不同頻道上出現(xiàn)所希望的場景的消息("在頻道6上開始關(guān)于ANIME 的話題")。
圖11是示出在當(dāng)前觀看的頻道的顯示畫面的右下角顯示未觀看 頻道上的監(jiān)視對象的視頻的另一通知方法的圖。根據(jù)圖IO和11的通 知方法，監(jiān)視對象的出現(xiàn)的通知可以在不打擾用戶觀看頻道上的內(nèi)容 的情況下進(jìn)行。
在圖12的通知方法的例子中，通過自動地切換到監(jiān)視對象出現(xiàn) 的頻道的視頻，來通知監(jiān)視對象。從而，用戶可以有效地觀看監(jiān)^f見對 象出現(xiàn)的場景，而不會錯過。
該結(jié)構(gòu)可以構(gòu)成為，用戶可以通過對系統(tǒng)預(yù)i殳通知方法來選擇 它，或者用戶可以在設(shè)定監(jiān)視對象時選擇一個。另外，該結(jié)構(gòu)可以構(gòu) 成為，根據(jù)語義類別的確定性系數(shù)來切換通知方法。
在圖9A和9B中，在通知單元109通知用戶場景出現(xiàn)后(步驟 S911),接收單元107判定用戶是否指定監(jiān)視結(jié)束(步驟S912)?？?以根據(jù)遙控的特定按鈕的按下來判定監(jiān)視的結(jié)束。
當(dāng)沒有指定監(jiān)視結(jié)束時(步驟S912為"否")，意味著希望的場 景還沒有出現(xiàn)。這樣，系統(tǒng)返回到步驟S902以繼續(xù)監(jiān)視。當(dāng)指定了 監(jiān)視結(jié)束時(步驟S912為"是，，)，出現(xiàn)判定單元108從應(yīng)監(jiān)視信息 存儲單元132中刪除對應(yīng)的應(yīng)監(jiān)視信息(步驟S913)。然后，系統(tǒng)返 回到步驟S901。在判定是否存儲了任何其它應(yīng)監(jiān)視信息項后，重復(fù)處 理。
當(dāng)在步驟S910中判定頻道ID—致時(步驟S910為"是")，意味著用戶當(dāng)前正在觀看監(jiān)視對象。因此，通知單元109不進(jìn)行通知。 然后，出現(xiàn)判定單元108從應(yīng)監(jiān)視信息存儲單元132中刪除對應(yīng)的應(yīng) 監(jiān)視信息，并且系統(tǒng)返回到步驟S卯l,重復(fù)處理。
本實施方式的場景通知裝置在廣播內(nèi)容的元數(shù)據(jù)中檢測出應(yīng)監(jiān) 視信息時，僅當(dāng)位于該應(yīng)監(jiān)視信息之前或之后的關(guān)鍵詞被附加了包含 過去和現(xiàn)在完成等時態(tài)的語義類別的應(yīng)停止類別時，才向用戶通知場 景。結(jié)果，當(dāng)即將出現(xiàn)消息重復(fù)顯示但監(jiān)視對象還沒有出現(xiàn)時，不進(jìn) 行通知，而當(dāng)對象實際出現(xiàn)時，適當(dāng)?shù)剡M(jìn)行通知。
監(jiān)視對象的出現(xiàn)不僅通過比較關(guān)鍵詞，而且通過使用監(jiān)視對象的 語義類別來判定。這樣，即使當(dāng)例如輸出了消息"名角此后即將出現(xiàn)，， 時，也可以適當(dāng)?shù)貦z測出所希望的場景并通知給用戶。僅使用關(guān)鍵詞 的現(xiàn)有技術(shù)難以實現(xiàn)這樣的場景檢測。
最后，參照圖13說明本實施方式的場景通知裝置的硬件結(jié)構(gòu)。
本實施方式的場景通知裝置具有使用通常的計算機的硬件結(jié)構(gòu)， 包括中央處理單元(CPU) 51等控制裝置、只讀存儲器(ROM) 52 和RAM53等存儲裝置、與網(wǎng)絡(luò)連接以執(zhí)行通信的通信接口 (I/F)54、 HDD和高密度盤(CD)驅(qū)動器等外部存儲裝置、顯示裝置、鍵盤和 鼠標(biāo)等輸入裝置以及連接這些部件的總線61。
由本實施方式的場景通知裝置執(zhí)行的場景通知程序以可安裝或 可執(zhí)行格式文件的形式，被存儲在高密度盤只讀存儲器(CD-ROM)、 軟盤(FD)、可記錄高密度盤(CD-R)和數(shù)字通用盤(DVD)等計 算機可讀記錄介質(zhì)中來提供。
由本實施方式的場景通知裝置執(zhí)行的場景通知程序可以存儲在 與互聯(lián)網(wǎng)等網(wǎng)絡(luò)連接的計算機中，并且可以通過網(wǎng)絡(luò)下載。由本實施 方式的場景通知裝置執(zhí)行的場景通知程序可以通過互聯(lián)網(wǎng)等網(wǎng)絡(luò)提 供或配送。
本實施方式的場景通知程序可以預(yù)先存儲在ROM中并以該方 式提供。
由本實施方式的場景通知裝置執(zhí)行的場景通知程序具有包括上述單元(播放單元、元數(shù)據(jù)提取單元、關(guān)鍵詞提取單元、附加單元、 語義類別判定單元、應(yīng)監(jiān)視信息取得單元、接收單元、出現(xiàn)判定單元
和通知單元)的模塊結(jié)構(gòu)。作為實際的硬件結(jié)構(gòu)，CPU51 (處理器) 從記錄介質(zhì)中讀取場景通知程序并且執(zhí)行該程序，從而在主存儲裝置 上裝栽和生成上述單元。
權(quán)利要求
1. 一種用于通知場景的裝置，包括播放單元，播放包括能夠按時間序列播放的多個場景的內(nèi)容；元數(shù)據(jù)提取單元，從所播放的場景中提取作為與場景有關(guān)的文本信息的元數(shù)據(jù)；關(guān)鍵詞提取單元，從元數(shù)據(jù)中提取關(guān)鍵詞；附加單元，向每個關(guān)鍵詞附加表示關(guān)鍵詞的語義屬性的語義類別；語義類別判定單元，判定附加到關(guān)鍵詞上的語義類別是否是表示在提取了關(guān)鍵詞的場景之后執(zhí)行重放的應(yīng)播放類別；取得單元，當(dāng)存在語義類別判定單元判定為附加了應(yīng)播放類別的關(guān)鍵詞時，從附加了語義類別的關(guān)鍵詞中取得至少一個不具有該應(yīng)播放類別的關(guān)鍵詞作為應(yīng)監(jiān)視關(guān)鍵詞；出現(xiàn)判定單元，當(dāng)從在提取了應(yīng)監(jiān)視關(guān)鍵詞的場景之后播放的場景中提取的元數(shù)據(jù)包括應(yīng)監(jiān)視關(guān)鍵詞和附加了作為表示重放結(jié)束的語義類別的應(yīng)停止類別的關(guān)鍵詞時，判定包括應(yīng)監(jiān)視關(guān)鍵詞的場景在正在播放的內(nèi)容中出現(xiàn)；和通知單元，當(dāng)包括應(yīng)監(jiān)視關(guān)鍵詞的場景出現(xiàn)時，通知包括應(yīng)監(jiān)視關(guān)鍵詞的場景出現(xiàn)。
2. 如權(quán)利要求l所述的裝置，其中，當(dāng)存在語義類別判定單元判定為附加了應(yīng)播放類別的關(guān)鍵詞時， 取得單元取得至少 一 個附加了語義類別但是沒有附加應(yīng)播放類別的 關(guān)鍵詞的語義類別作為應(yīng)監(jiān)視類別，該應(yīng)監(jiān)視類別是要監(jiān)視的語義類 別；當(dāng)從在提取了應(yīng)監(jiān)視關(guān)鍵詞的場景之后播放的場景中提取的元 數(shù)據(jù)包括附加了應(yīng)監(jiān)視類別的關(guān)鍵詞和附加了應(yīng)停止類別的關(guān)鍵詞 時，出現(xiàn)判定單元判定包括由應(yīng)監(jiān)視類別表示的語義屬性的關(guān)鍵詞的 場景在正在播放的內(nèi)容中出現(xiàn)；當(dāng)判定為包括由應(yīng)監(jiān)視類別表示的語義屬性的關(guān)鍵詞的場景出 現(xiàn)時，通知單元通知包括由應(yīng)監(jiān)視類別表示的語義屬性的關(guān)鍵詞的場 景出現(xiàn)。
3. 如權(quán)利要求l所述的裝置，還包括字典存儲單元，相關(guān)聯(lián) 地存儲關(guān)鍵詞和語義類別的字典信息，其中，關(guān)鍵詞提取單元從元數(shù)據(jù)中提取與字典存儲單元中存儲的字典 信息的關(guān)鍵詞 一致的關(guān)鍵詞；附加單元向所提取的每個關(guān)鍵詞附加與同所提取的每個關(guān)鍵詞 一致的字典信息的關(guān)鍵詞相對應(yīng)的語義類別。
4. 如權(quán)利要求3所述的裝置，其中，字典信息還包括與關(guān)鍵詞和語義類別相關(guān)聯(lián)的語義類別的確定 性系數(shù)；附加單元向所提取的每個關(guān)鍵詞附加與同所提取的關(guān)鍵詞一致 的字典信息的關(guān)鍵詞相關(guān)聯(lián)的語義類別中具有最大的確定性系數(shù)的 語義類別。
5. 如權(quán)利要求l所述的裝置，還包括字典存儲單元，相關(guān)聯(lián) 地存儲關(guān)鍵詞所滿足的條件和語義類別的字典信息，其中，關(guān)鍵詞提取單元從元數(shù)據(jù)中提取滿足字典存儲單元中存儲的字 典信息中的條件的關(guān)鍵詞；附加單元向所提取的關(guān)鍵詞附加與所提取的關(guān)鍵詞所滿足的條 件相關(guān)聯(lián)的語義類別。
6. 如權(quán)利要求5所述的裝置，其中， 字典信息還包括語義類別的確定性系數(shù)；附加單元向所提取的關(guān)鍵詞附加與所提取的關(guān)鍵詞所滿足的條 件相對應(yīng)的語義類別中具有最大的確定性系數(shù)的語義類別。
7. 如權(quán)利要求l所述的裝置，其中， 關(guān)鍵詞提取單元提取以預(yù)定格式在元數(shù)據(jù)中出現(xiàn)的關(guān)鍵詞； 附加單元向每個關(guān)鍵詞附加與預(yù)定格式對應(yīng)地預(yù)定的語義類別。
8. 如權(quán)利要求l所述的裝置，還包括顯示單元，顯示所取得的應(yīng)監(jiān)視關(guān)鍵詞；和 接收單元，接收對所取得的應(yīng)監(jiān)視關(guān)鍵詞的指定， 其中，當(dāng)從在提取了應(yīng)監(jiān)視關(guān)鍵詞的場景之后播放的場景中提取 的元數(shù)據(jù)包括接收了指定的應(yīng)監(jiān)視關(guān)鍵詞和附加了應(yīng)停止類別的關(guān) 鍵詞時，出現(xiàn)判定單元判定包括應(yīng)監(jiān)視關(guān)鍵詞的場景在正在播放的內(nèi) 容中出現(xiàn)。
9. 如權(quán)利要求l所述的裝置，其中， 播放單元播放包括附加了元數(shù)據(jù)的場景的內(nèi)容； 元數(shù)據(jù)提取單元從場景中提取附加到場景上的元數(shù)據(jù)。
10. 如權(quán)利要求l所述的裝置，其中，播放單元播放包括作為圖像信息的場景的視頻內(nèi)容； 元數(shù)據(jù)提取單元提取作為識別圖像信息的結(jié)果而得到的文本信 息作為元數(shù)據(jù)。
11. 如權(quán)利要求l所述的裝置，其中，播放單元播放包括作為圖像信息的場景和對應(yīng)于該圖像信息的 音頻信息的視頻內(nèi)容；元數(shù)據(jù)提取單元識別該音頻信息，并且提取作為識別的結(jié)果而得 到的文本信息作為元數(shù)據(jù)。
12. 如權(quán)利要求l所述的裝置，其中， 播放單元播放包括作為音頻信息的場景的音頻內(nèi)容； 元數(shù)據(jù)提取單元提取作為音頻信息的識別結(jié)果而得到的文本信息作為元數(shù)據(jù)。
13. —種用于通知場景的方法，包括 播放包括能夠按時間序列播放的多個場景的內(nèi)容； 從所播放的場景中提取作為與場景有關(guān)的文本信息的元數(shù)據(jù)； 從元數(shù)據(jù)中提取關(guān)鍵詞；向每個關(guān)鍵詞附加表示關(guān)鍵詞的語義屬性的語義類別； 判定附加到關(guān)鍵詞上的語義類別是否是表示在提取了關(guān)鍵詞的 場景之后執(zhí)行重放的應(yīng)播放類別；當(dāng)存在語義類別判定單元判定為附加了應(yīng)播放類別的關(guān)鍵詞時， 從附加了語義類別的關(guān)鍵詞中取得至少 一 個不具有該應(yīng)播放類別的關(guān)鍵詞作為應(yīng)監(jiān)視關(guān)鍵詞；當(dāng)從在提取了應(yīng)監(jiān)視關(guān)鍵詞的場景之后播放的場景中提取的元 數(shù)據(jù)包括應(yīng)監(jiān)視關(guān)鍵詞和附加了作為表示重放結(jié)束的語義類別的應(yīng) 停止類別的關(guān)鍵詞時，判定包括應(yīng)監(jiān)視關(guān)鍵詞的場景在正在播放的內(nèi) 容中出現(xiàn)；當(dāng)包括應(yīng)監(jiān)視關(guān)鍵詞的場景出現(xiàn)時，通知包括應(yīng)監(jiān)視關(guān)鍵詞的場 景出現(xiàn)。
全文摘要
本發(fā)明提供一種通知內(nèi)容場景出現(xiàn)的裝置和方法，提取單元從自所播放的場景中提取的元數(shù)據(jù)中提取關(guān)鍵詞，附加單元向關(guān)鍵詞附加語義類別，語義類別判定單元判定語義類別是否是應(yīng)播放類別，當(dāng)存在附加了應(yīng)播放類別的關(guān)鍵詞時，取得單元取得至少一個不具有該應(yīng)播放類別的關(guān)鍵詞作為應(yīng)監(jiān)視關(guān)鍵詞，當(dāng)元數(shù)據(jù)包括應(yīng)監(jiān)視關(guān)鍵詞和附加了應(yīng)停止類別的關(guān)鍵詞時，出現(xiàn)判定單元判定包括應(yīng)監(jiān)視關(guān)鍵詞的場景在內(nèi)容中出現(xiàn)。
文檔編號H04N5/445GK101547326SQ20081018170
公開日2009年9月30日 申請日期2008年12月4日 優(yōu)先權(quán)日2008年3月27日
發(fā)明者山崎智弘, 川村隆浩 申請人:株式會社東芝