專利名稱：使廣播內(nèi)容與補充信息同步的系統(tǒng)和方法
技術(shù)領(lǐng)域：
本發(fā)明一般地涉及使廣播內(nèi)容與補充信息同步的系統(tǒng)和方法，更具體地，涉及這 樣一種使廣播內(nèi)容與補充信息同步的系統(tǒng)和方法，其基于廣播內(nèi)容來提供補充信息同時在 時間上準確地將所述補充信息與相應的實時變化的廣播內(nèi)容相匹配。
背景技術(shù)：
目前，移動數(shù)據(jù)通信服務(wù)包括無線因特網(wǎng)服務(wù)、移動計算服務(wù)、無線數(shù)據(jù)通信服 務(wù)、無線因特網(wǎng)接入服務(wù)以及衛(wèi)星通信服務(wù)。在移動數(shù)據(jù)通信服務(wù)中，用于將各種內(nèi)容提供給個人信息終端的無線廣播服務(wù)的 領(lǐng)域已經(jīng)將大部分注意力吸引到業(yè)務(wù)多樣性、市場性以及技術(shù)先進性方面。數(shù)據(jù)廣播服務(wù) 目前主要由內(nèi)容供應商(CP)、廣播服務(wù)供應商和移動通信服務(wù)供應商來提供?，F(xiàn)有的數(shù)據(jù)廣播服務(wù)使用這樣一種方法，其中，通過廣播網(wǎng)絡(luò)來傳送用于連接通 信網(wǎng)絡(luò)的補充信息(例如，URL)，用戶使用該補充信息來訪問通信網(wǎng)絡(luò)，或者通過通信網(wǎng)絡(luò) 來傳送將要顯示在廣播節(jié)目上的信息。然而，在廣播網(wǎng)絡(luò)上傳送補充信息的方法存在必須使用額外的廣播頻率資源的問 題，由于即使觀看者沒有請求補充信息時也要傳送信息而效率低下，并且因為將相同信息 傳送給所有用戶而對服務(wù)有所限制。另外，在通信網(wǎng)絡(luò)上提供與廣播相關(guān)聯(lián)信息的服務(wù)存在這樣的問題，即在實踐中 難以在時間上緊密地將廣播信息與在通信網(wǎng)絡(luò)上傳送的補充信息關(guān)聯(lián)起來。因此，服務(wù)不 能基于廣播節(jié)目的詳細情況同時從時間上將其與廣播節(jié)目相匹配來提供補充信息，而是僅 使用一種提供針對每個節(jié)目而分組的信息片段的受到限制的方法。

發(fā)明內(nèi)容
因此，本發(fā)明考慮到了現(xiàn)有技術(shù)中所存在的上述問題，本發(fā)明的目的在于提供一 種使廣播內(nèi)容與補充信息同步的系統(tǒng)和方法，所述系統(tǒng)和方法基于廣播內(nèi)容來提供補充信 息同時在時間上準確地將補充信息與相應的實時變化的廣播內(nèi)容相匹配。為了實現(xiàn)上述目的，本發(fā)明提供了一種使廣播內(nèi)容與補充信息同步的系統(tǒng)，所述 廣播內(nèi)容和所述補充信息被提供給集成終端，所述系統(tǒng)包括補充信息生成裝置，用于接 收內(nèi)容供應商(CP)提供的廣播內(nèi)容、生成同步信息和與所述廣播內(nèi)容相關(guān)聯(lián)的補充信息， 以及提供所述同步信息和補充信息，所述同步信息包括與所述廣播內(nèi)容上的特定節(jié)目的場 景改變畫面有關(guān)的信息以及與特定節(jié)目的場景改變畫面和特定節(jié)目的初始畫面之間的延 時(time lag)有關(guān)的信息；同步服務(wù)器，用于檢測同步信息，在該同步信息中，通過對在所述廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容和從所述補充信息生成裝置發(fā)送來的同步信息進行比 較而考慮了 CP提供的廣播內(nèi)容與在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容之間的時間偏移(time offset)，所述同步服務(wù)器還基于響應于來自所述集成終端的對與補充信息的請求而接收 到的與補充信息被請求的時間點相對應的廣播內(nèi)容的當前時間戳(開始)(PTS)信息和其 中考慮了時間偏移的同步信息，提取出與補充信息被請求的時間點相對應的畫面信息，所 述同步服務(wù)器還發(fā)送所提取的畫面信息；補充信息服務(wù)器，用于接收和存儲從補充信息生 成裝置發(fā)送來的補充信息，提取和發(fā)送響應于針對補充信息的請求而從所述同步服務(wù)器發(fā) 送的、與所提取的畫面信息相關(guān)聯(lián)的補充信息；終端互動服務(wù)器，用于將響應于針對補充信 息的請求在通信網(wǎng)絡(luò)上從所述集成終端接收的PTS信息提供給所述同步服務(wù)器，并將所提 取的、從補充信息服務(wù)器接收到的補充信息提供給所述集成終端；以及所述集成終端，用于 顯示相互同步的廣播內(nèi)容和補充信息。優(yōu)選地，所述同步服務(wù)器包括第一同步設(shè)定單元，用于基于通過廣播網(wǎng)絡(luò)的電子 節(jié)目指南(EPG)頻道傳送的節(jié)目信息來獲得近似(coarse)同步信息，所述近似同步信息包 括與從CP接收到的廣播內(nèi)容上的特定節(jié)目的開始時間有關(guān)的信息；第二同步設(shè)定單元，用 于基于從補充信息生成裝置接收的與在廣播網(wǎng)絡(luò)上接收的廣播內(nèi)容上的特定節(jié)目的場景 改變畫面有關(guān)的信息來提取出與該場景改變畫面有關(guān)的信息，基于與在廣播網(wǎng)絡(luò)上接收到 的廣播內(nèi)容的特定節(jié)目的場景改變畫面和初始畫面之間的延時有關(guān)的信息來獲得與該特 定節(jié)目的初始畫面有關(guān)的信息，并且提取精確(fine)同步信息，所述精確同步信息包括編 碼在初始畫面信息中的PTS信息；以及畫面信息提取單元，用于基于近似同步信息和精確 同步信息，使用響應于針對補充信息的請求而從所述集成終端接收到的相對于PTS信息的 延時，提取出與補充信息被請求的時間相對應的畫面信息，并且所述畫面信息提取單元發(fā) 送所提取的畫面信息。為了實現(xiàn)上述目的，本發(fā)明提供了一種使廣播內(nèi)容與補充信息同步的服務(wù)器，所 述廣播內(nèi)容和所述補充信息被提供給集成終端，其中，所述同步服務(wù)器檢測同步信息，在所 述同步信息中，通過將在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容的同步信息和CP提供的廣播內(nèi)容 的同步信息進行比較而考慮了 CP提供的廣播內(nèi)容與在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容之間 的時間偏移；所述同步服務(wù)器還基于響應于針對補充信息的請求而從所述集成終端接收的 與補充信息被請求的時間點相對應的廣播內(nèi)容的PTS信息以及考慮了所述時間偏移的同 步信息，來提取與補充信息被請求的時間點相對應的畫面信息。優(yōu)選地，CP提供的廣播內(nèi)容的同步信息包括與CP提供的廣播內(nèi)容上特定節(jié)目的 場景改變畫面有關(guān)的信息，以及與特定節(jié)目的場景改變畫面和初始畫面之間的延時有關(guān)的 fn息ο優(yōu)選地，所述同步服務(wù)器包括第一同步設(shè)定單元，用于基于通過廣播網(wǎng)絡(luò)的電子 節(jié)目指南(EPG)頻道傳送的節(jié)目信息來獲得近似同步信息，所述近似同步信息包括與從CP 接收到的廣播內(nèi)容上的特定節(jié)目的開始時間有關(guān)的信息；第二同步設(shè)定單元，用于基于與 在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容上的特定節(jié)目的場景改變畫面有關(guān)的信息來提取與該場 景改變畫面有關(guān)的信息，基于與在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容的特定節(jié)目的場景改變畫 面和初始畫面之間的延時有關(guān)的信息來獲得與該特定節(jié)目的初始畫面有關(guān)的信息，并且提 取出精確同步信息，所述精確同步信息包括編碼在初始畫面信息中的PTS信息；以及畫面
7信息提取單元，用于基于近似同步信息和精確同步信息，使用響應于針對補充信息的請求 而從所述集成終端接收到的相對于PTS信息的延時，提取出與補充信息被請求的時間相對 應的畫面信息，并且所述畫面信息提取單元發(fā)送所提取的畫面信息。為了實現(xiàn)上述目的，本發(fā)明提供了一種使廣播內(nèi)容與補充信息同步的方法，同步 的廣播內(nèi)容和補充信息被提供給集成終端，所述方法包括以下步驟a)補充信息生成裝置 從CP接收廣播內(nèi)容，生成并發(fā)送與所述廣播內(nèi)容相關(guān)聯(lián)的補充信息，以及同步信息；b)補 充信息服務(wù)器接收并存儲從所述補充信息生成裝置發(fā)送來的補充信息；C)同步服務(wù)器檢 測同步信息，在所述同步信息中，通過對與步驟b)同時地在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容 和從所述補充信息生成裝置發(fā)送來的同步信息進行比較而考慮了 CP提供的廣播內(nèi)容與廣 播網(wǎng)絡(luò)上接收到的廣播內(nèi)容之間的時間偏移；d)終端互動服務(wù)器響應于來自集成終端的 針對補充信息的請求來接收與補充信息被請求的時間點相對應的廣播內(nèi)容的PTS信息，并 將接收到的PTS信息提供給所述同步服務(wù)器；e)基于考慮了時間偏移的同步信息，使用從 終端互動服務(wù)器接收到的相對于PTS信息的延時，提取出與補充信息被請求的時間點相對 應的畫面信息；f)補充信息服務(wù)器提取并發(fā)送與所提取的從同步服務(wù)器發(fā)送來的畫面信 息相關(guān)聯(lián)的補充信息；以及g)終端互動服務(wù)器從補充信息服務(wù)器接收所提取的補充信息， 并在通信網(wǎng)絡(luò)上將所接收到的補充信息提供給所述集成終端。優(yōu)選地，步驟a)包括生成并發(fā)送同步信息，所述同步信息包括與廣播內(nèi)容上特 定節(jié)目的場景改變畫面有關(guān)的信息，以及與特定節(jié)目的場景改變畫面和初始畫面之間的延 時有關(guān)的信息。優(yōu)選地，步驟c)包括以下步驟c-l)接收經(jīng)過廣播網(wǎng)絡(luò)的EPG頻道傳送的節(jié)目信 息；以及c-2)基于所接收的節(jié)目信息，檢測近似同步信息，所述近似同步信息包括與從CP 接收到的廣播內(nèi)容上的特定節(jié)目的開始時間有關(guān)的信息。優(yōu)選地，步驟C)包括以下步驟c-l)基于與在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容上的 特定節(jié)目的場景改變畫面有關(guān)的信息，提取出與該場景改變畫面有關(guān)的信息；c-2)基于與 在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容的特定節(jié)目的場景改變畫面和初始畫面之間的延時有關(guān) 的信息，獲得與該特定節(jié)目的初始畫面有關(guān)的信息；以及c-3)提取出精確同步信息，所述 精確同步信息包括編碼在所獲得的初始畫面信息中的PTS信息。優(yōu)選地，步驟e)包括基于近似同步信息和精確同步信息，使用響應于來自所述 集成終端的針對補充信息的請求而接收到的相對于PTS信息的延時，提取出與補充信息被 請求的時間點相對應的畫面信息，并發(fā)送所提取的畫面信息。為了實現(xiàn)上述目的，本發(fā)明提供了一種使廣播內(nèi)容與補充信息同步的方法，所述 廣播內(nèi)容和所述補充信息被提供給集成終端，所述方法包括以下步驟a)檢測同步信息， 在所述同步信息中，通過對在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容與同步信息進行比較而考慮了 CP提供的廣播內(nèi)容與在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容之間的時間偏移，所述同步信息包 括與CP提供的廣播內(nèi)容上特定節(jié)目的場景改變畫面有關(guān)的信息以及與特定節(jié)目的場景改 變畫面和初始畫面之間的延時有關(guān)的信息；b)響應于來自所述集成終端的針對補充信息 的請求，接收與補充信息被請求的時間點相對應的廣播內(nèi)容的PTS信息；以及C)基于考慮 了時間偏移的同步信息，使用響應于針對補充信息的請求而接收到的相對于PTS信息的延 時，來提取與補充信息被請求的時間點相對應的畫面信息。
優(yōu)選地，步驟a)包括以下步驟a-l)接收經(jīng)過廣播網(wǎng)絡(luò)的EPG頻道傳送的節(jié)目信 息；以及a-2)基于接收到的節(jié)目信息來檢測近似同步信息，所述近似同步信息包括與從CP 接收到的廣播內(nèi)容上特定節(jié)目的開始時間有關(guān)的信息。優(yōu)選地，步驟a)包括以下步驟a-l)基于與在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容上的 特定節(jié)目的場景改變畫面有關(guān)的信息，提取出與該場景改變畫面有關(guān)的信息；a_2)基于與 在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容的特定節(jié)目的場景改變畫面和初始畫面之間的延時有關(guān) 的信息，獲得與該特定節(jié)目的初始畫面有關(guān)的信息；以及a-3)提取出精確同步信息，所述 精確同步信息包括編碼在所獲得的初始畫面信息中的PTS信息。優(yōu)選地，步驟C)包括基于近似同步信息和精確同步信息，使用響應于來自所述 集成終端的針對補充信息的請求而接收到的相對于PTS信息的延時，提取出與補充信息被 請求的時間點相對應的畫面信息，并發(fā)送所提取的畫面信息。為了實現(xiàn)上述目的，本發(fā)明提供了一種使廣播內(nèi)容與補充信息同步的系統(tǒng)，該同 步系統(tǒng)包括廣播站，用于提供能夠以流的形式提供補充信息的廣播節(jié)目；補充信息服務(wù) 器，用于從廣播站接收以流的形式廣播的節(jié)目，通過畫面比較來計算和設(shè)定廣播開始時間 點，并且檢測和提供與所選畫面的時間信息相對應的補充信息；通信網(wǎng)絡(luò)，用于將廣播站以 流的形式提供的節(jié)目廣播給多個集成終端，并且通過數(shù)據(jù)通信將補充信息服務(wù)器所提供的 補充信息提供給特定的集成終端；以及集成終端，用于通過通信而與通信網(wǎng)絡(luò)相連，觀看廣 播節(jié)目，以及請求和接收所選畫面的補充信息。為了實現(xiàn)上述目的，本發(fā)明提供了一種使廣播內(nèi)容與補充信息同步的方法，所述 方法包括以下步驟A)補充信息服務(wù)器通過對廣播站以流的形式提供的節(jié)目進行畫面分 析以及對補充信息生成裝置生成的補充信息和同步信息進行畫面分析，來檢測同步畫面并 設(shè)定節(jié)目廣播開始時間；B)將來自集成終端的針對雙向廣播通信的請求通知給補充信息 服務(wù)器，并且在通信網(wǎng)絡(luò)上傳送廣播站以流的形式提供的廣播節(jié)目；以及C)當存在來自所 述集成終端的提供補充信息的請求時，補充信息服務(wù)器計算該節(jié)目廣播后所經(jīng)過的時間， 搜索所選畫面的補充信息，并將找到的補充信息提供給所述集成終端。為了實現(xiàn)上述目的，本發(fā)明提供了一種補充信息服務(wù)器，用于接收來自廣播站的 節(jié)目，從補充信息生成裝置接收補充信息和同步信息，設(shè)定節(jié)目開始時間，以及提供所選時 間的補充信息，所述補充信息服務(wù)器包括廣播接收單元，用于以流的形式從廣播站接收節(jié) 目；解碼單元，用于將以流的形式接收到的節(jié)目信號解碼為基于畫面的信息；同步信息單 元，用于記錄補充信息生成裝置所提供的補充信息和同步信息；視頻比較單元，用于將來自 解碼單元的畫面信息和來自同步信息單元的同步信息轉(zhuǎn)換為向量，并且，當畫面信息和同 步信息之間的相似度大于特定臨界值時，選擇具有該相似度的流節(jié)目的畫面作為節(jié)目開始 畫面，并且設(shè)定節(jié)目開始時間；以及開始時間單元，用于記錄和管理視頻比較單元所設(shè)定的 開始時間，并且計算廣播所指定畫面的時間。為了實現(xiàn)上述目的，本發(fā)明提供一種使廣播內(nèi)容與補充信息同步的方法，所述方 法包括以下步驟A)節(jié)目步驟，補充信息服務(wù)器從廣播站以流的形式接收節(jié)目，對接收到 的節(jié)目進行解碼并且將解碼后的節(jié)目轉(zhuǎn)換為向量值；B)附加步驟，補充信息服務(wù)器從補充 信息生成裝置接收補充信息和同步信息，對補充信息和同步信息進行XML解析，根據(jù)編碼 類型對XML解析后的補充信息和同步信息進行解碼，并將解碼后的補充信息和同步信息轉(zhuǎn)換為向量值；以及C)評估這些向量值之間的相似度，如果這些向量值之間的相似度大于特 定的臨界值，則將該節(jié)目的相應畫面設(shè)定為同步視頻，并且設(shè)定該節(jié)目的開始時間。為了實現(xiàn)上述目的，本發(fā)明提供了一種利用補充信息服務(wù)器使廣播內(nèi)容與補充信 息同步的方法，所述補充信息服務(wù)器在通信網(wǎng)絡(luò)上與集成終端相連接，從廣播站以流的形 式接收節(jié)目，并且從補充信息生成裝置接收補充信息和同步信息，所述方法包括以下步驟 A)確定所述集成終端是否在觀看廣播節(jié)目時選擇了某個畫面以及是否請求了該畫面的補 充信息；B)如果確定結(jié)果是所述集成終端請求了補充信息，則接收所選畫面的時間信息以 及所選點的坐標信息，并且計算所述節(jié)目所經(jīng)過的時間；以及C)搜索與所選畫面和坐標信 息相對應的補充信息，并且將找到的補充信息提供給所述集成終端。為了實現(xiàn)上述目的，本發(fā)明提供了一種使廣播內(nèi)容與補充信息同步的方法，所述 方法包括以下步驟:A)集成終端確定是否接收到了雙向廣播通信信號；B)如果確定結(jié)果是 接收到了廣播通信信號，則所述集成終端接收并觀看雙向廣播通信節(jié)目，并且確定是否要 核對特定畫面的補充信息；以及C)如果確定結(jié)果是所述集成終端要核對特定畫面的補充 信息，則所述集成終端將所選畫面的時間信息和坐標信息提供給補充信息服務(wù)器，并且接 收與所選畫面的時間信息和坐標信息相對應的相應補充信息。因為根據(jù)本發(fā)明的用于使廣播內(nèi)容和補充信息同步的系統(tǒng)和方法可以基于廣播 內(nèi)容來提供補充信息而同時在時間上準確地將補充信息與相應的實時變化的廣播內(nèi)容相 匹配，所以能夠提高用戶對于服務(wù)的滿意度。另外，由于將廣播站所廣播的節(jié)目的各個畫面與補充信息生成裝置所提供的同步 信息進行了比較，所以具有可以容易地檢測和設(shè)定節(jié)目的廣播開始時間的優(yōu)點。另外，由于對節(jié)目的廣播開始時間進行了檢測，因此具有可以輕易地選擇和搜索 與節(jié)目和廣播時間相關(guān)的補充信息的優(yōu)點。另外，由于搜索和提供了與基于幀的節(jié)目相關(guān) 的補充信息，所以能夠提高便捷性。


本發(fā)明的上述及其它目的、特征和優(yōu)點將從下面結(jié)合附圖所做的描述中得到更加 清楚的理解，其中圖1為根據(jù)本發(fā)明第一實施方式的使廣播內(nèi)容與補充信息同步的系統(tǒng)的構(gòu)造圖；圖2為示出根據(jù)本發(fā)明第一實施方式的使廣播內(nèi)容與補充信息同步的方法的信 號流程圖；圖3為根據(jù)本發(fā)明第一實施方式的使廣播內(nèi)容與補充信息同步的方法的概念圖；圖4為示出節(jié)目廣播開始時間和觀看時選擇畫面的時間的視圖；圖5為根據(jù)本發(fā)明第一實施方式的補充信息服務(wù)器的構(gòu)造圖；圖6為圖5的視頻比較單元的詳細構(gòu)造圖；圖7為示出將畫面信息轉(zhuǎn)換為向量的方法的概念圖；圖8為示出根據(jù)本發(fā)明第一實施方式的補充信息服務(wù)器的操作示例的流程圖；圖9為示出根據(jù)本發(fā)明第一實施方式的補充信息服務(wù)器的另一個操作示例的流 程圖；圖10為示出根據(jù)本發(fā)明第一實施方式的集成終端的操作的流程圖11為根據(jù)本發(fā)明第二實施方式的使廣播內(nèi)容與補充信息同步的系統(tǒng)的示意性 構(gòu)造圖；圖12為根據(jù)本發(fā)明第二實施方式的同步服務(wù)器的示意性構(gòu)造圖；而圖13為示出根據(jù)本發(fā)明第二實施方式的使廣播內(nèi)容與補充信息同步的方法的示 意性流程圖。
具體實施例方式現(xiàn)在參照附圖，結(jié)合本發(fā)明的優(yōu)選實施方式對本發(fā)明進行詳細描述。參照圖1到10來描述本發(fā)明的第一實施方式。圖1為根據(jù)本發(fā)明第一實施方式的使廣播內(nèi)容與補充信息同步的系統(tǒng)的構(gòu)造圖。 圖2為示出根據(jù)本發(fā)明第一實施方式的使廣播內(nèi)容與補充信息同步的方法的信號流程圖。 圖3為根據(jù)本發(fā)明第一實施方式的使廣播內(nèi)容與補充信息同步的方法的概念圖。圖4為示 出節(jié)目廣播開始時間和觀看時選擇畫面的時間的視圖。圖5為根據(jù)本發(fā)明第一實施方式的 補充信息服務(wù)器的構(gòu)造圖。圖6為圖5的視頻比較單元的詳細構(gòu)造圖。圖7為示出將畫面 信息轉(zhuǎn)換為向量的方法的概念圖。圖8為示出根據(jù)本發(fā)明第一實施方式的補充信息服務(wù)器 的操作示例的流程圖。圖9為示出根據(jù)本發(fā)明第一實施方式的補充信息服務(wù)器的另一個操 作示例的流程圖。圖10為示出根據(jù)本發(fā)明第一實施方式的集成終端的操作的流程圖。參照圖1，根據(jù)本發(fā)明第一實施方式的同步系統(tǒng)包括CP 10，用于生成和供應將 要廣播的多媒體內(nèi)容節(jié)目；廣播站20，用于以流的形式經(jīng)由地面波來廣播從所述CP接收 的或者自己生成的節(jié)目，或者將該節(jié)目提供給特定的有線路徑；補充信息生成裝置30，用 于生成和供應節(jié)目內(nèi)容的每個畫面所必需的補充信息以及用于節(jié)目開始的某一畫面的同 步信息；補充信息服務(wù)器40，用于接收所述廣播站以流的形式廣播的節(jié)目、所述補充信息 生成裝置所供應的補充信息和同步信息，通過畫面比較來檢測廣播的開始時間點和開始時 間，并且提供所選的補充信息；通信網(wǎng)絡(luò)50，用于將所述廣播站以流的形式廣播的節(jié)目廣 播給多個集成終端，并且通過通信將所述補充信息服務(wù)器所提供的補充信息提供給特定集 成終端；以及集成終端60，用于在通信狀態(tài)下連接到所述通信網(wǎng)絡(luò)、觀看廣播節(jié)目，以及請 求和核對所選畫面的補充信息。參照圖2，本發(fā)明的同步方法包括以下步驟從廣播站以流的形式接收節(jié)目，以可 擴展標記語言(XML)形式從補充信息生成裝置接收針對該節(jié)目的每個畫面的補充信息和 同步信息；比較畫面的向量值，如果這些向量值之間的相似度大于臨界值則將相應畫面設(shè) 定為同步畫面并設(shè)定節(jié)目開始時間；當所述集成終端請求雙向廣播通信服務(wù)時，在所述通 信網(wǎng)絡(luò)上從所述廣播站和所述補充信息服務(wù)器接收雙向廣播通信節(jié)目并將所接收的雙向 廣播通信節(jié)目提供給所述集成終端；以及當所述集成終端請求所選畫面的補充信息時，計 算從節(jié)目的開始時間起經(jīng)過的時間，搜索補充信息，并利用所述補充信息服務(wù)器將補充信 息提供給所述集成終端。下面將參照圖1和圖2更加詳細地描述本發(fā)明的同步系統(tǒng)和方法。CP 10生成具有各種內(nèi)容的節(jié)目，包括音樂、消息、文本、圖像和運動圖像等，并將 這些節(jié)目供應給廣播站20和補充信息生成裝置30。廣播站20在計劃的指定時間經(jīng)由地面波和指定的有線線路來廣播所選節(jié)目。
補充信息生成裝置30通過事先與廣播站或CP進行溝通，來確認節(jié)目被廣播的時 間，生成相應內(nèi)容的多條補充信息，并且生成與節(jié)目開始相關(guān)聯(lián)的同步信息。在一個實施方式中，補充信息可以包括出現(xiàn)在節(jié)目的每個畫面上的表演者或演 唱者的個人信息，以及與表演者或演唱者的服裝或配飾、志趣相投的相關(guān)人群、后續(xù)演出、 公演日程表、聯(lián)系地址、商店、價格、數(shù)量等有關(guān)的信息，并且可以根據(jù)偏好以多種方式來使 用。由于補充信息被生成為對應于節(jié)目的每個相應畫面，所以必須在節(jié)目被廣播之后 通過準確檢測指定畫面的位置和搜索相應補充信息才能提供。如上所述，本發(fā)明使節(jié)目與補充信息相匹配，并且涉及一種準確檢測節(jié)目被廣播 的時間、準確檢測觀看者選擇畫面的時間以及搜索和提供相應補充信息的技術(shù)。在這種情況下，可以基于系統(tǒng)操作員選擇的時間或幀來確認節(jié)目的每個畫面和所 選畫面。補充信息服務(wù)器40從補充信息生成裝置接收節(jié)目的基于畫面的補充信息以及與 同步畫面有關(guān)的信息，還以流的形式通過有線線路來接收廣播站所廣播的節(jié)目。補充信息服務(wù)器40通過對補充信息生成裝置30以XML格式提供的補充信息和同 步信息進行XML解析來檢測同步信息，并將根據(jù)檢測到的同步信息的編碼類型進行了解碼 的畫面轉(zhuǎn)換為向量值。補充信息生成裝置30供應給補充信息服務(wù)器40的補充信息可以具有下述類型的 XML信息。<INF0>〈SYNC encode Type = “ full" data = “ VI, V2, V3. . . , VN" /><PPL id = " 1〃 beginTime = " 20s 〃 url = " http ://··· aaa. ·· 〃 /><PPL id = " 2" beginTime=" 60s" url=" http ://··· bbb. ·· " /></INF0>SYNC標簽表示同步信息，PPL標簽表示補充信息的URL。補充信息服務(wù)器40針對各個畫面，對廣播站20以流的形式提供的廣播節(jié)目進行 解碼，并將該廣播節(jié)目轉(zhuǎn)換為向量值。補充信息服務(wù)器40通過評估如上所述被換為向量值的廣播節(jié)目的每個畫面與同 步信息之間的相似度來檢測廣播開始的時間。在評估相似度的過程中，使用例如歐幾里德距離(Euclidean distance)方法或余 弦距離法作為用于測量向量之間距離的方法。利用這個方法來檢測廣播開始的時間(Present Time Stamp (Start) (PTS))并對 之進行記錄和管理，并且還與該時間相關(guān)地記錄和管理相應的補充信息。根據(jù)選擇，可以將相應的補充信息與畫面的幀數(shù)序列(frame number sequence) 相關(guān)聯(lián)地，而不是與時間PTS相關(guān)聯(lián)地，進行記錄和管理。通信網(wǎng)絡(luò)50接收廣播站20以流的方式廣播的節(jié)目，并經(jīng)由指定的無線頻道將該 節(jié)目廣播給多個希望使用雙向廣播通信服務(wù)的集成終端60。在這種情況下，通信網(wǎng)絡(luò)50向補充信息服務(wù)器40提供與使用雙向廣播通信服務(wù) 的集成終端60有關(guān)的信息。
當用戶在觀看廣播節(jié)目時使用觸摸屏選擇了特定畫面時，集成終端60確認相應 的時間信息PTS (i)和坐標信息(x，y)并將這些信息通過通信網(wǎng)絡(luò)50提供給補充信息服務(wù) 器40。這時，還向補充信息服務(wù)器40提供了與正在觀看的頻道和節(jié)目有關(guān)的信息(事件信 息)ο補充信息服務(wù)器40計算要廣播已經(jīng)開始的節(jié)目的開始時間PTS以及集成終端所 選擇的畫面的時間PTS (i)，并且搜索與所計算的時間相對應的補充信息。同時，當使用PTS 信息時，補充信息服務(wù)40還連同PTS信息一起來使用通用時間信息(例如12:30:9:05)，該 通用時間信息與通信網(wǎng)絡(luò)中的各個服務(wù)器或設(shè)備同步。這適用于使用PTS信息的所有服務(wù) 器或設(shè)備，同樣適用于以下描述。在找到的信息中再次搜索與坐標信息相對應的信息，利用通信方法在通信網(wǎng)絡(luò)上 將這次找到的信息傳送到相應的集成終端60。補充信息包括文本、圖像、運動圖像、URL地址等等。從圖3中可以看到集成終端60和補充信息服務(wù)器40之間的信號流。集成終端60提供與選擇將針對其來確認補充信息的畫面的時間PTS (i)有關(guān)的信 息、坐標信息(x，y)、廣播頻道信息和節(jié)目信息(事件信息)，并且接收和確認文本、圖像、運 動圖像、URL地址等相應的補充信息。在提供補充信息時，補充信息服務(wù)器40還提供PTS (s) fn息ο圖4示出了時間信息和廣播節(jié)目之間的關(guān)系，以便搜索和提供補充信息。節(jié)目包括開始時間TO和結(jié)束時間PTS(n)。補充信息服務(wù)器40搜索開始時間并將 其設(shè)為廣播開始時間PTS(S)。包括多個畫面的節(jié)目以視頻包為單位進行廣播。集成終端 60為了確認補充信息而選擇特定畫面的時間PTS(i)被顯示為當前觀看時間。補充信息服務(wù)器40可以基于時間或幀來對與廣播節(jié)目相關(guān)聯(lián)的補充信息進行分 類、記錄和管理。當基于幀來對與節(jié)目相關(guān)聯(lián)的補充信息進行分類、記錄和管理時，在以上描述中 必須用術(shù)語“幀”來替代術(shù)語“時間”。因此，集成終端60與通信網(wǎng)絡(luò)相連，接收和觀看廣播站使用廣播方法而廣播的節(jié) 目。對于所選畫面的補充信息，集成終端60接收基于時間或幀信息從使用通信方法而連接 的補充信息服務(wù)器40找到的補充信息。下面參照圖2來詳細描述這個信號流。補充信息服務(wù)器40在步驟SlOO從補充信 息生成裝置30接收XML格式的廣播節(jié)目的補充信息和同步信息，并在步驟SllO接收廣播 站20以流的形式廣播的節(jié)目。在步驟S120，補充信息服務(wù)器40對從補充信息生成裝置30接收到的同步信息進 行解析、分離、解碼和向量轉(zhuǎn)換，對從廣播站20以畫面為單位接收到的節(jié)目進行解碼和向 量轉(zhuǎn)換，搜索同步畫面，并且設(shè)定、記錄和管理廣播開始時間PTS(s)。當在步驟S130從集成終端60接收到請求雙向廣播通信服務(wù)的信號時，通信網(wǎng)絡(luò) 50在步驟S140向補充信息服務(wù)器40通知與集成終端60有關(guān)的信息，并同時請求廣播站 20提供廣播節(jié)目。通信網(wǎng)絡(luò)50在步驟S150接收廣播站20廣播的節(jié)目，并且在步驟S160通過經(jīng)由 利用移動通信方法分配的一個指定無線頻道將該節(jié)目傳送到集成終端60來廣播該節(jié)目。
在步驟S170，如上所述，經(jīng)由雙向廣播通信而觀看節(jié)目的集成終端60在通信網(wǎng)絡(luò) 50上向補充信息服務(wù)器40請求所選畫面的補充信息。在步驟S180，補充信息服務(wù)器40檢測集成終端60針對其請求補充信息的畫面的 相應時間信息PTS(i)，通過利用所記錄和管理的開始時間信息PTS(S)而進行的計算來檢 測節(jié)目被廣播之后所經(jīng)歷的時間，并且搜索與如上所述計算出的經(jīng)歷時間相對應的補充信 肩、O在這種情況下，當需要坐標信息(X，y)時，補充信息服務(wù)器40可以搜索包括坐標 信息的補充信息。補充信息包括文本、圖像、運動圖像、URL地址信息等等。在步驟S190，在通信網(wǎng)絡(luò)上將補充信息服務(wù)器40找到的補充信息提供給集成終 端60。因此，通過對廣播站20所廣播的節(jié)目的畫面的向量值與補充信息生成裝置30所 提供的同步信息畫面的向量值進行比較，來檢測和設(shè)定廣播開始畫面和時間。下面參照圖5來描述根據(jù)本發(fā)明的實施方式的補充信息服務(wù)器。補充信息服務(wù) 器40可以包括廣播接收單元41，用于接收廣播站以流的形式廣播的節(jié)目；解碼單元42， 用于將廣播接收單元接收的節(jié)目解碼為基于畫面的視頻信息；同步信息單元43，用于對補 充信息生成裝置30以XML格式提供的補充信息和同步信息進行記錄和管理；視頻比較單 元44，用于從同步信息單元接收XML格式的同步畫面信息，從解碼單元接收基于畫面的節(jié) 目信息，對該信息進行向量轉(zhuǎn)換，評估相似度，當相似度大于特定的臨界值時，將該畫面設(shè) 定為廣播開始畫面并且同時檢測廣播開始時間PTS(s)；以及開始時間單元45，用于對視頻 比較單元提供的開始時間PTS(s)進行記錄和管理。下面參照圖6更加詳細地描述視頻比較單元44。視頻比較單元44可以包括向 量單元441，用于將從解碼單元42接收的基于畫面的信息信號以及從解析單元442接收 到的同步畫面的信息轉(zhuǎn)換為根據(jù)編碼類型進行了解碼的畫面信息信號；解析單元442，用 于對同步信息單元43以XML格式提供的補充信息和同步信息進行解析，分離該同步信息， 根據(jù)編碼類型對該同步信息進行解碼，并且提供被轉(zhuǎn)換為向量值的同步信息；以及比較單 元443，用于確定向量單元和解析單元提供的各個畫面之間的向量信息相似度是否大于特 定的臨界值，丟棄具有較低值的畫面，選擇具有較高值的畫面，并將相應的時間設(shè)為開始時 間。參照圖8，一種操作本發(fā)明的補充信息服務(wù)器的方法可以包括以下步驟以流的 形式從廣播站接收節(jié)目，對該節(jié)目進行解碼，并將該節(jié)目轉(zhuǎn)換為向量值；由補充信息服務(wù)器 從補充信息生成裝置接收補充信息和同步信息，對該信息進行XML解析，根據(jù)編碼類型對 解析后的信息進行解碼，并將解碼后的信息轉(zhuǎn)換為向量值；以及評估向量值之間的相似度， 如果向量值之間的相似度大于臨界值，則設(shè)定該節(jié)目的同步畫面和開始時間。下面參照圖5和圖6來詳細地描述本發(fā)明的補充信息服務(wù)器及其操作。廣播站20經(jīng)由相應頻率以無線方式來廣播節(jié)目，并且同時經(jīng)由指定的有線線路 將該節(jié)目以流的形式廣播到補充信息服務(wù)器40。補充信息服務(wù)器40的廣播接收單元41接收以流的形式廣播的節(jié)目并將接收到的 節(jié)目提供給解碼單元42。解碼單元42將節(jié)目解碼為基于畫面的視頻數(shù)據(jù)信號并將解碼后 的信號提供給視頻比較單元44。
另外，同步信息單元43接收和記錄補充信息生成裝置30以XML格式提供的節(jié)目 的補充信息和同步信息，然后將該補充信息和同步信息提供給視頻比較單元44。視頻比較單元44的向量單元441從解碼單元42接收基于畫面的視頻信號并將這 些信號轉(zhuǎn)換為向量值。另外，解析單元442對從同步信息單元43接收到的XML格式的信息進行解析，分 離同步畫面的數(shù)據(jù)信息，根據(jù)分離后的同步畫面信息的編碼類型對分離后的數(shù)據(jù)信息進行 解碼，并且將解碼后的信息提供給向量單元441。向量單元441將每個畫面轉(zhuǎn)換為向量值并將轉(zhuǎn)換后的向量值提供給比較單元 443。參照圖7，向量單元441獲得每個畫面的向量值的一種方法包括完全(FULL)法、交 叉(CROSS)法和傾斜(OBLIQUE)法。完全法是最準確的方法，但是需要大量的數(shù)據(jù)和很長 的時間。傾斜法需要少量的數(shù)據(jù)和很短的時間，但是準確性較低。這些向量特性依據(jù)處理時間、存儲空間、準確度等而發(fā)生變化。因此，基于相應的 應用來選擇適當?shù)姆椒?。已?jīng)被向量單元441轉(zhuǎn)換為向量值的廣播節(jié)目和同步視頻信息被提供給比較單 元443。比較單元443確定向量值之間的相似度是否大于所設(shè)定的臨界值，丟棄相似度小于 臨界值的節(jié)目畫面，選擇相似度大于臨界值的節(jié)目畫面，將所選節(jié)目畫面設(shè)為廣播開始畫 面，并且設(shè)定廣播開始時間PTS(s)。比較單元443測量相似度的方法是一種測量向量之間距離的方法，該方法包括歐 幾里德距離法和余弦距離法。由包括向量單元441、解析單元442和比較單元443的視頻比較單元44設(shè)定的與 開始時間PTS(S)有關(guān)的信息被提供給開始時間單元45并由后者記錄和管理。下面參照圖8更加詳細地描述這個處理。在步驟S200，補充信息服務(wù)器40確定廣播站20是否正在以流的形式提供廣播節(jié) 目。如果確定的結(jié)果是正在以流的形式提供廣播節(jié)目，則廣播接收單元41接收該廣 播節(jié)目并將該廣播節(jié)目提供給解碼單元42。在步驟S210，解碼單元42執(zhí)行解碼處理，將該 廣播節(jié)目解調(diào)為基于畫面的視頻信號或畫面信號。在步驟S220，將解調(diào)后的節(jié)目的基于畫面的信號提供給視頻比較單元44并轉(zhuǎn)換 為基于畫面的向量值。進一步地，在步驟S230，補充信息服務(wù)器40確定是否從補充信息生成裝置30以 XML格式提供了補充信息和同步信息。如果確定的結(jié)果是以XML格式提供了補充信息和同 步信息，則同步信息單元43接收補充信息和同步信息并將它們提供給視頻比較單元44。在步驟S240，視頻比較單元44的解析單元442對XML格式的信息進行解析并分離 同步畫面的信息，并且在步驟S250根據(jù)編碼類型對分離后的同步畫面的信息進行解碼。在 步驟S260，向量單元441將解碼后的信息轉(zhuǎn)換為向量值。在步驟S270，比較單元443通過評估前面所述的節(jié)目的向量值與同步畫面信息的 向量值之間的相似度來確定相似度是否大于特定的臨界值。如果評估的結(jié)果是節(jié)目畫面的向量值與同步畫面信息的向量值之間的相似度大于特定的臨界值，則在步驟S280將相應的節(jié)目畫面設(shè)定為廣播開始畫面，并將所設(shè)定畫面 被廣播的時間設(shè)定為節(jié)目的廣播開始時間PTS(s)。因此，通過對廣播站20所廣播的節(jié)目的畫面與補充信息生成裝置30所提供的同 步信息畫面來檢測和設(shè)定廣播開始時間。參照圖9，根據(jù)本發(fā)明另一實施例的補充信息服務(wù)器的操作處理由補充信息服務(wù) 器40來執(zhí)行，并且包括以下步驟確定集成終端60是否請求了所選畫面的補充信息；從該 集成終端接收所選畫面的時間信息和坐標信息并且計算節(jié)目的廣播經(jīng)過時間；搜索與所選 畫面和坐標信息相對應的補充信息并且將該補充信息提供給該集成終端。更具體來講，在步驟S300，補充信息服務(wù)器40確定集成終端60是否請求了補充 信息。當集成終端60的用戶在觀看廣播節(jié)目時選擇了畫面并且請求供應補充信息時，在步 驟S310，補充信息服務(wù)器40從集成終端60接收用于標識正在觀看的頻道的頻道信息、用于
標識正在觀看的節(jié)目的事件信息，以及用戶選擇的畫面的時間信息PTS(i)和坐標信息(X， y)。在步驟S320，補充信息服務(wù)器40通過計算已經(jīng)檢測和設(shè)定的廣播開始畫面的廣 播開始時間PTS(S)以及集成終端60提供的所請求畫面的時間信息PTS (i)，來檢測節(jié)目開 始廣播之后經(jīng)過的時間。在步驟S330，補充信息服務(wù)器40搜索與所計算的時間值和坐標值有關(guān)的補充信 息，在步驟S340，將相應的補充信息(文本、圖像、運動圖像等)以及PTS(s)信息提供給集 成終端60。參照圖10，根據(jù)本發(fā)明的一個實施方式的集成終端的操作處理可以包括以下步 驟確定集成終端60是否接收到了廣播通信信號；如果確定結(jié)果是集成終端60接收到了 廣播通信信號，則確定集成終端60是否將接收和觀看節(jié)目并且核對補充信息；如果確定結(jié) 果是集成終端60將核對補充信息，則向集成終端60提供畫面的時間信息和坐標信息，并且 接收和輸出包括文本、圖像、音頻、運動圖像和URL的補充信息。更具體來講，在步驟S400，集成終端60在通信狀態(tài)下連接到通信網(wǎng)絡(luò)50，并且確 定是否將通過雙向廣播通信服務(wù)接收和觀看廣播站20廣播的節(jié)目。如果確定結(jié)果是集成終端60將接收雙向廣播通信，則在步驟S410集成終端60接 收和觀看經(jīng)由指定的無線移動通信頻道廣播的節(jié)目。然后，在步驟S420確定集成終端60 是否將在觀看節(jié)目時指定特定畫面并且接收相應的補充信息。如果確定結(jié)果是集成終端60將指定特定畫面并且接收相應的補充信息，則在步 驟S430，集成終端60在通信網(wǎng)絡(luò)50上將所指定畫面的相應時間信息PTS (i)和坐標信息 (X，y)提供給補充信息服務(wù)器40。在步驟S440，集成終端60從補充信息服務(wù)器40接收包括文本、圖像、音頻、運動圖 像以及URL信息的補充信息，并通過相應的顯示單元和/或音頻單元輸出該補充信息。下面將參照圖11到13A來描述本發(fā)明的第二實施方式。圖11為根據(jù)本發(fā)明第二實施方式的使廣播內(nèi)容與補充信息同步的系統(tǒng)的示意性 構(gòu)造圖。如圖11所示，根據(jù)本發(fā)明第二實施方式的系統(tǒng)包括補充信息生成裝置100、同步 服務(wù)器200、補充信息服務(wù)器300、終端互動(terminal interworking)服務(wù)器400以及集成終端500。補充信息生成裝置100從CP接收與廣播網(wǎng)絡(luò)上傳輸?shù)膹V播內(nèi)容相同的廣播內(nèi)容， 并且生成和發(fā)送與該廣播內(nèi)容相關(guān)聯(lián)的補充信息和同步信息。優(yōu)選地，補充信息生成裝置 100生成補充信息，并且將該補充信息發(fā)送給補充信息服務(wù)器300，所述補充信息例如包括 特定節(jié)目的故事信息、人物信息以及背景音樂信息，與節(jié)目中出現(xiàn)的產(chǎn)品相關(guān)的信息等。另 外，補充信息生成裝置100生成同步信息并將該同步信息發(fā)送給同步服務(wù)器200，所述同步 信息例如是特定廣播節(jié)目的初始畫面、特定廣播節(jié)目的場景改變畫面、與相應節(jié)目開始之 后場景發(fā)生改變的時間相關(guān)的信息、與特定節(jié)目的場景改變畫面和初始畫面之間的延時有 關(guān)的信息以及與初始畫面或場景改變畫面的特性值有關(guān)的信息。同步服務(wù)器200檢測同步信息，并基于檢測到的同步信息來提取與集成終端500 請求補充信息的時間相對應的畫面信息，在所述同步信息中，通過對在廣播網(wǎng)絡(luò)上接收到 的廣播內(nèi)容和從補充信息生成裝置100接收到的同步信息進行比較而考慮了 CP提供的廣 播內(nèi)容與廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容之間的時間偏移。為了這個目的，圖12中所示的同步服務(wù)器200包括第一同步設(shè)定單元210，用于 獲得近似同步信息，所述近似同步信息相對于特定節(jié)目的開始時間具有幾秒鐘的偏移；第 二同步設(shè)定單元220，用于對近似同步信息進行補充；以及畫面信息提取單元230，用于基 于通過第一同步設(shè)定單元210和第二同步設(shè)定單元220獲得的同步信息來提取與集成終端 500請求補充信息的時間相對應的畫面信息。第一同步設(shè)定單元210基于經(jīng)由廣播網(wǎng)絡(luò)的電子節(jié)目指南(EPG)頻道傳送的節(jié)目 信息來獲得近似同步信息，該近似同步信息包括與從CP接收的廣播內(nèi)容上的特定節(jié)目的 開始時間有關(guān)的信息。另選地，第一同步設(shè)定單元210可以從節(jié)目管理服務(wù)器(PMS)接收 節(jié)目信息從而獲得近似同步信息，所述節(jié)目信息除了包括在EPG頻道中以外還包括在廣播 站中。基于與從補充信息生成裝置100接收的場景改變畫面有關(guān)的信息，第二同步設(shè)定 單元220提取出與在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容上的特定節(jié)目的場景改變畫面有關(guān)的 信息。另外，基于與特定節(jié)目的場景改變畫面和初始畫面之間的延時有關(guān)的信息，第二同 步設(shè)定單元220獲得與在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容上的特定節(jié)目的初始畫面有關(guān)的 信息，并且提取出精確同步信息，該精確同步信息包括編碼在初始畫面信息中的PTS信息。 這里，PTS信息是指基于MPEG-2標準中的畫面的當前時間信息。也可以使用節(jié)目時鐘基準 (PCR)來代替PTS信息。基于近似同步信息和精確同步信息，畫面信息提取單元230使用響應于針對補充 信息的請求而從集成終端接收到的相對于PTS信息的延時來提取與請求補充信息的時間 相對應的畫面信息，并且將所提取的畫面信息發(fā)送給補充信息服務(wù)器300。補充信息服務(wù)器300響應于針對補充信息的請求，從補充信息生成裝置100接收 和存儲補充信息，從同步服務(wù)器200 (優(yōu)選地從畫面信息提取單元230)接收所提取的畫面 信息，從所接收的補充信息中提取與該畫面信息相關(guān)聯(lián)的補充信息，并且發(fā)送所提取的補 充fe息。終端互動服務(wù)器400用于阻止集成終端500試圖單獨訪問同步服務(wù)器200和補充 信息服務(wù)器300，并使得集成終端500能夠通過單個服務(wù)器來使用互動服務(wù)。終端互動服務(wù)器400將廣播內(nèi)容的與補充信息被請求的時間相對應且響應于針對補充信息的請求在通 信網(wǎng)絡(luò)上從集成終端500接收到PTS信息提供給同步服務(wù)器200，接收從補充信息服務(wù)器 300提取出的特定補充信息，并且將所接收的特定補充信息提供給集成終端500。集成終端500是指多種終端中的一種終端，包括用于同時實現(xiàn)廣播服務(wù)和通信服 務(wù)的移動通信終端，集成終端500顯示在廣播網(wǎng)絡(luò)上接收的廣播內(nèi)容以及補充信息，所述 補充信息與響應于請求在通信網(wǎng)絡(luò)上從終端互動服務(wù)器400接收的廣播內(nèi)容是同步的。下面參照圖13來描述根據(jù)本發(fā)明優(yōu)選實施方式的基于分類對象來分配訪問授權(quán) 的方法。圖13為示出根據(jù)本發(fā)明第二實施方式的使廣播內(nèi)容與補充信息同步的方法的示 意性流程圖。在步驟SlllO至S1140，補充信息生成裝置100首先接收CP提供的廣播內(nèi)容，并且 生成和發(fā)送與該廣播內(nèi)容相關(guān)的補充信息和同步信息。優(yōu)選地，補充信息生成裝置100生 成補充信息，并且將補充信息發(fā)送到補充信息服務(wù)器300，所述補充信息例如包括特定節(jié)目 的故事信息、人物信息和背景音樂信息，以及與節(jié)目中出現(xiàn)的產(chǎn)品有關(guān)的信息。另外，補充 信息生成裝置100生成同步信息，并且將所生成的同步信息發(fā)送到同步服務(wù)器200，所述同 步信息例如是特定廣播節(jié)目的初始畫面、特定廣播節(jié)目的場景改變畫面、與相應節(jié)目開始 之后場景發(fā)生了改變的時間有關(guān)的信息、與特定節(jié)目的場景改變畫面和初始畫面之間的延 時有關(guān)的信息，以及與初始畫面或場景改變畫面的特征值信息有關(guān)的信息。然后，在步驟Sl 150，補充信息服務(wù)器300從補充信息生成裝置100接收補充信息， 并存儲所接收的補充信息。另外，同步服務(wù)器200檢測同步信息，在該同步信息中，通過對在廣播網(wǎng)絡(luò)上跟步 驟1130同時接收到的廣播內(nèi)容與從補充信息生成裝置100接收到的同步信息進行比較而 考慮了 CP提供的廣播內(nèi)容與在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容之間的時間偏移。更具體來 講，基于在步驟S1160和S1170所接收的節(jié)目信息，第一同步設(shè)定單元210接收經(jīng)由廣播網(wǎng) 絡(luò)的EPG頻道傳送的節(jié)目信息并且檢測近似同步信息，該近似同步信息包括與從CP接收到 的廣播內(nèi)容上的特定節(jié)目的開始時間有關(guān)的信息。同時，在步驟S1180至S1200，第二同步 設(shè)定單元220基于與從補充信息生成裝置100接收的場景改變畫面有關(guān)的信息，提取出與 在廣播網(wǎng)絡(luò)上接收的廣播內(nèi)容上的特定節(jié)目的場景改變畫面有關(guān)的信息，以便對近似同步 信息進行補充；基于與特定節(jié)目的場景改變畫面和初始畫面之間的延時有關(guān)的信息來獲取 與在廣播網(wǎng)絡(luò)上接收的廣播內(nèi)容上的特定節(jié)目的初始畫面有關(guān)的信息；并且檢測精確同步 信息，包括編碼在所獲得的初始畫面信息中的PTS信息。然后，在步驟S1210和S1220，終端互動服務(wù)器400響應于集成終端500的請求在 通信網(wǎng)絡(luò)上接收廣播內(nèi)容的與集成終端500請求補充信息的時間相對應的PTS信息，并且 將該PTS信息提供給同步服務(wù)器。在步驟S1230至S1250，基于考慮了時間偏移的同步信息，接收到PTS信息的同步 服務(wù)器200使用從終端互動服務(wù)器400接收到的相對于PTS信息的延時來提取與補充信息 被請求的時間相對應的畫面信息。更具體來講，基于近似同步信息或精確同步信息，畫面信 息提取單元230使用響應于針對補充信息的請求而從集成終端接收的相對于PTS信息的延 時來提取與補充信息被請求的時間相對應的畫面信息，并且將所提取的畫面信息發(fā)送給補 充信息服務(wù)器300。
然后，在步驟S1260和S1270，補充信息服務(wù)器300提取與所提取的從同步服務(wù)器 400發(fā)送來的畫面信息相關(guān)聯(lián)的補充信息，并且發(fā)送所提取的補充信息。然后，終端互動服務(wù)器400從補充信息服務(wù)器300接收所提取的補充信息，并且在 通信網(wǎng)絡(luò)上將所提取的補充信息提供給集成終端500。在步驟S1280和S1290，接收到補充 信息的集成終端500顯示在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容以及響應于請求在通信網(wǎng)絡(luò)上 從終端互動服務(wù)器400接收的并且與廣播內(nèi)容同步的補充信息。雖然出于例示的目的公開了本發(fā)明的優(yōu)選實施方式，但是本領(lǐng)域的技術(shù)人員應當 理解，可以實現(xiàn)各種修改、添加和替代方案，這些方案不會脫離所附權(quán)利要求中所公開的本 發(fā)明的范圍和主旨。根據(jù)本發(fā)明的使廣播內(nèi)容與補充信息同步的系統(tǒng)和方法，可以獲得用戶看到的廣 播節(jié)目的精確時間信息，并且基于該時間信息實現(xiàn)同步，因此所述系統(tǒng)和方法可以提供補 充信息，例如廣播內(nèi)容的故事信息、人物信息和背景音樂信息以及與節(jié)目中出現(xiàn)的產(chǎn)品有 關(guān)的信息，同時在時間上準確地將補充信息與相應的實時變化的廣播內(nèi)容相匹配。
權(quán)利要求
一種使廣播內(nèi)容與補充信息同步的系統(tǒng)，該同步系統(tǒng)包括廣播站，用于提供能夠以流的形式提供補充信息的廣播節(jié)目；補充信息服務(wù)器，用于從所述廣播站接收以流的形式廣播的節(jié)目，通過畫面比較來計算和設(shè)定廣播開始時間點，并且檢測和提供與所選畫面的時間信息相對應的補充信息；通信網(wǎng)絡(luò)，用于將所述廣播站以流的形式提供的節(jié)目廣播給多個集成終端，并且通過數(shù)據(jù)通信將所述補充信息服務(wù)器所提供的補充信息提供給特定的集成終端；以及集成終端，用于通過通信而與所述通信網(wǎng)絡(luò)相連，觀看廣播節(jié)目，以及請求和接收所選畫面的補充信息。
2.根據(jù)權(quán)利要求1所述的系統(tǒng)，該系統(tǒng)還包括CP，用于生成和提供將由所述廣播站廣播的多媒體內(nèi)容節(jié)目；以及補充信息生成裝置，用于在廣播了所述內(nèi)容節(jié)目之后與基于時間的畫面相對應地生成 所述同步信息和補充信息，所述同步信息指示了所述CP提供的內(nèi)容節(jié)目的廣播開始。
3.根據(jù)權(quán)利要求2所述的系統(tǒng)，其中，所述補充信息生成裝置生成補充信息，使得該補 充信息對應于所述廣播節(jié)目的基于幀的畫面。
4.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，所述補充信息服務(wù)器將所述廣播站以流的形式 提供的節(jié)目解碼為畫面，將解碼后的節(jié)目轉(zhuǎn)換為向量值，根據(jù)解碼類型對所述補充信息生 成裝置提供的補充信息和同步信息進行解碼，將解碼后的信息轉(zhuǎn)換為向量值，并且當轉(zhuǎn)換 后的向量值之間的相似度大于臨界值時，將所述廣播站提供的節(jié)目的初始畫面的時間設(shè)定 為開始時間PTS(s)。
5.根據(jù)權(quán)利要求2所述的系統(tǒng)，其中，所述補充信息生成裝置將所述補充信息和所述 同步信息以可擴展標記語言(XML)的格式提供給所述補充信息服務(wù)器。
6.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，所述補充信息服務(wù)器檢測所述集成終端選擇和 請求的畫面的時間信息，并且搜索和提供相應的補充信息。
7.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，所述通信網(wǎng)絡(luò)將所述廣播站以流的形式提供的 廣播節(jié)目同時廣播給多個集成終端，并且，當所述集成終端選擇某個畫面并且請求補充信 息時，將所選畫面的時間信息提供給所述補充信息服務(wù)器，并且接收與所述時間信息相對 應的相應補充信息，然后將相應補充信息傳送給所述集成終端。
8.一種使廣播內(nèi)容與補充信息同步的方法，所述方法包括以下步驟A)補充信息服務(wù)器通過對廣播站以流的形式提供的節(jié)目進行畫面分析以及對補充信 息生成裝置生成的補充信息和同步信息進行畫面分析，來檢測同步畫面并設(shè)定節(jié)目廣播開 始時間；B)將來自集成終端的針對雙向廣播通信的請求通知給所述補充信息服務(wù)器，并且在通 信網(wǎng)絡(luò)上傳送所述廣播站以流的形式提供的廣播節(jié)目；以及C)當存在來自所述集成終端的提供所述補充信息的請求時，所述補充信息服務(wù)器計算 所述節(jié)目被廣播后所經(jīng)過的時間，搜索所選畫面的補充信息，并將找到的補充信息提供給 所述集成終端。
9.根據(jù)權(quán)利要求8所述的方法，其中，步驟A)包括以下步驟A-1)所述補充信息服務(wù)器從所述補充信息生成裝置接收節(jié)目的補充信息和同步信息；A-2)所述補充信息服務(wù)器接收所述廣播站以流的形式廣播的節(jié)目；以及 A-3)將所述同步信息和所述廣播節(jié)目轉(zhuǎn)換為向量值，通過評估這些向量值之間的相似 度來檢測所述節(jié)目的同步畫面，并設(shè)定開始時間。
10.根據(jù)權(quán)利要求9所述的方法，其中，所述補充信息生成裝置提供的補充信息和同步 信息為XML格式。
11.根據(jù)權(quán)利要求9所述的方法，其中，在步驟A-3)中對相似度的評估包括以下步驟 通過對所述廣播節(jié)目進行解碼來檢測向量值，通過對所述補充信息生成裝置提供的信息進行解析來分離所述同步信息，檢測根據(jù)分離后的同步信息的編碼類型進行了解碼的畫 面的向量值，將這些向量值之間的相似度大于特定臨界值的畫面檢測為同步畫面，并且設(shè) 定所述節(jié)目的廣播開始時間。
12.根據(jù)權(quán)利要求8所述的方法，其中，步驟B)包括以下步驟B-1)所述集成終端向以無線方式與其連接的通信網(wǎng)絡(luò)請求雙向廣播通信服務(wù)； B-2)所述通信網(wǎng)絡(luò)將來自所述集成終端的針對廣播通信的請求通知給所述補充信息 服務(wù)器，并且請求所述廣播站提供所述節(jié)目；B-3)所述通信網(wǎng)絡(luò)接收所述廣播站以流的形式提供的廣播節(jié)目；以及 B-4)將以流的形式提供的所述廣播節(jié)目傳送給所述集成終端。
13.根據(jù)權(quán)利要求12所述的方法，該方法還包括以下步驟在所述通信網(wǎng)絡(luò)上被通知 了所述集成終端的內(nèi)容請求的所述補充信息服務(wù)器監(jiān)測所述集成終端使用所述服務(wù)的狀 態(tài)。
14.根據(jù)權(quán)利要求8所述的方法，其中，步驟C)包括以下步驟C-1)所述集成終端向所述補充信息服務(wù)器提供請求所選畫面的補充信息的信號； C-2)所述補充信息服務(wù)器計算所述節(jié)目的開始時間和所選時間； C-3)所述補充信息服務(wù)器搜索與所計算的節(jié)目時間相對應的補充信息； C-4)將搜索到的補充信息提供給所述集成終端。
15.根據(jù)權(quán)利要求14所述的方法，其中，針對所述廣播節(jié)目的每個幀來執(zhí)行步驟C-2) 中節(jié)目開始時間的計算。
16.一種補充信息服務(wù)器，該補充信息服務(wù)器用于接收來自廣播站的節(jié)目，從補充信息 生成裝置接收補充信息和同步信息，設(shè)定節(jié)目開始時間，以及提供所選時間的補充信息，該 補充信息服務(wù)器包括廣播接收單元，用于以流的形式從所述廣播站接收節(jié)目； 解碼單元，用于將以流的形式接收到的節(jié)目信號解碼為基于畫面的信息； 同步信息單元，用于記錄所述補充信息生成裝置所提供的補充信息和同步信息； 視頻比較單元，用于將來自所述解碼單元的畫面信息和來自同步信息單元的同步信息 轉(zhuǎn)換為向量，并且，當所述畫面信息和所述同步信息之間的相似度大于特定臨界值時，選擇 具有該相似度的流節(jié)目的畫面作為節(jié)目開始畫面，并且設(shè)定節(jié)目開始時間；以及開始時間單元，用于記錄和管理所述視頻比較單元所設(shè)定的開始時間，并且計算廣播 所指定畫面的時間。
17.根據(jù)權(quán)利要求16所述的補充信息服務(wù)器，其中，所述視頻比較單元包括 向量單元，用于將所述解碼單元提供的節(jié)目畫面的信號轉(zhuǎn)換為向量值；解析單元，用于通過對所述同步信息單元提供的補充信息進行解析來分離同步信息， 并且將根據(jù)所述同步信息的編碼類型進行了解碼的同步信息提供給所述向量單元；以及比較單元，用于從所述向量單元接收每個畫面的向量數(shù)據(jù)以及從所述解析單元接收同 步信息的向量數(shù)據(jù)，確定畫面的向量數(shù)據(jù)和同步信息的向量數(shù)據(jù)之間的相似度是否大于特 定的臨界值，并且，如果確定的結(jié)果是所述相似度大于所述特定的臨界值，則將所述節(jié)目畫 面指定為開始畫面并且設(shè)定開始時間。
18.根據(jù)權(quán)利要求16所述的補充信息服務(wù)器，其中，所述開始時間單元包括用于計算 特定畫面的幀序列的結(jié)構(gòu)。
19.根據(jù)權(quán)利要求17所述的補充信息服務(wù)器，其中，所述向量單元使用全部法、交叉法 和傾斜法中的一種來獲得節(jié)目畫面信號的向量值。
20.一種使廣播內(nèi)容與補充信息同步的方法，所述方法包括以下步驟A)節(jié)目步驟，補充信息服務(wù)器從廣播站以流的形式接收節(jié)目，對接收到的節(jié)目進行解 碼，并且將解碼后的節(jié)目轉(zhuǎn)換為向量值；B)附加步驟，所述補充信息服務(wù)器從補充信息生成裝置接收節(jié)目的補充信息和同步信 息，對所述補充信息和所述同步信息進行XML解析，根據(jù)編碼類型對XML解析后的補充信息 和同步信息進行解碼，并將解碼后的補充信息和同步信息轉(zhuǎn)換為向量值；以及C)評估這些向量值之間的相似度，如果這些向量值之間的相似度大于特定的臨界值， 則將所述節(jié)目的相應畫面設(shè)定為同步視頻，并且設(shè)定所述節(jié)目的開始時間。
21.根據(jù)權(quán)利要求20所述的方法，其中，所述節(jié)目步驟A)包括以下步驟A-1)所述補充信息服務(wù)器確定是否以流的形式接收到了所述廣播站廣播的節(jié)目；A-2)如果確定結(jié)果是以流的形式接收到了所述廣播節(jié)目，則所述補充信息服務(wù)器接收 所述廣播節(jié)目，并且通過對所述廣播節(jié)目進行解碼而基于畫面對所述廣播節(jié)目進行解密； 以及A-3)將解碼后的廣播節(jié)目轉(zhuǎn)換為向量值。
22.根據(jù)權(quán)利要求20所述的方法，其中，所述附加步驟B)包括以下步驟B-1)所述補充信息服務(wù)器確定是否從所述補充信息生成裝置接收到了所述補充信息 和所述同步信息；B-2)如果確定結(jié)果是從所述補充信息生成裝置接收到了所述補充信息和所述同步信 息，則所述補充信息服務(wù)器對所述補充信息和所述同步信息進行XML解析，并且基于畫面 來識別同步信息；B-3)根據(jù)編碼類型對解析后的同步信息的畫面進行解碼，并且對所述同步信息進行解 密；以及B-4)將解碼后的同步信息的畫面轉(zhuǎn)換為向量值。
23.根據(jù)權(quán)利要求20所述的方法，其中，步驟C)包括以下步驟C-1)確定流形式的廣播節(jié)目的基于畫面的向量值與同步信息畫面的向量值之間的相 似度是否大于特定的臨界值；以及C-2)如果確定結(jié)果是所述相似度大于所述臨界值，則將相應的畫面選擇為節(jié)目的同步 視頻，并且設(shè)定開始時間。
24.根據(jù)權(quán)利要求20所述的方法，其中，使用用于測量向量之間距離的歐幾里德距離法或余弦距離法來執(zhí)行步驟C)中對于向量值之間相似度的評估。
25.根據(jù)權(quán)利要求22所述的方法，其中，所述補充信息生成裝置提供的補充信息和同 步信息為XML格式。
26.一種利用補充信息服務(wù)器使廣播內(nèi)容與補充信息同步的方法，所述補充信息服務(wù) 器在通信網(wǎng)絡(luò)上與集成終端相連接，從廣播站以流的形式接收節(jié)目，并且從補充信息生成 裝置接收補充信息和同步信息，所述方法包括以下步驟A)確定所述集成終端是否在觀看廣播節(jié)目時選擇了某個畫面以及是否請求了該畫面 的補充信息；B)如果確定結(jié)果是所述集成終端請求了補充信息，則接收所選畫面的時間信息以及所 選點的坐標信息，并且計算所述節(jié)目所經(jīng)過的時間；以及C)搜索與所選畫面和坐標信息相對應的補充信息，并且將找到的補充信息提供給所述 集成終端。
27.根據(jù)權(quán)利要求26所述的方法，其中，步驟B)包括以下步驟在所述集成終端選擇的節(jié)目畫面被廣播之后，接收當前時間信息和坐標信息；以及通過計算所述當前時間信息和所述廣播節(jié)目的開始時間信息來檢測經(jīng)過的時間。
28.根據(jù)權(quán)利要求27所述的方法，其中，所述節(jié)目畫面的時間信息包括所述節(jié)目畫面 的幀號信息。
29.一種使廣播內(nèi)容與補充信息同步的方法，所述方法包括以下步驟A)集成終端確定是否接收到了雙向廣播通信信號；B)如果確定結(jié)果是接收到了所述廣播通信信號，則所述集成終端接收并觀看雙向廣播 通信節(jié)目，并且確定是否要核對特定畫面的補充信息；以及C)如果確定結(jié)果是所述集成終端要核對特定畫面的補充信息，則所述集成終端將所選 畫面的時間信息和坐標信息提供給補充信息服務(wù)器，并且接收與所選畫面的時間信息和坐 標信息相對應的相應補充信息。
30.根據(jù)權(quán)利要求29所述的方法，其中，步驟C)包括以下步驟將所述集成終端選擇的廣播節(jié)目畫面的時間信息和坐標信息提供給所述補充信息服 務(wù)器；以及從所述補充信息服務(wù)器接收所選畫面的補充信息。
31.根據(jù)權(quán)利要求29所述的方法，其中，所述補充信息包括一個或更多個文本、圖像和 運動圖像。
全文摘要
本發(fā)明公開了一種使廣播內(nèi)容與補充信息同步的系統(tǒng)和方法。本發(fā)明的補充信息同步系統(tǒng)檢測同步信息，在所述同步信息中，通過對在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容與從補充信息生成裝置發(fā)送來的同步信息進行比較而考慮了內(nèi)容供應商(CP)提供的廣播內(nèi)容與在廣播網(wǎng)絡(luò)上接收到的廣播內(nèi)容之間的時間偏移，并且該補充信息同步系統(tǒng)基于響應于來自集成終端的針對補充信息的請求而接收到的與補充信息被請求的時間點相對應的廣播內(nèi)容的當前時間戳(開始)(PTS)信息和考慮了時間偏移的同步信息，提取與補充信息被請求的時間點相對應畫面信息。
文檔編號H04N21/234GK101982982SQ201010565209
公開日2011年3月2日 申請日期2008年1月8日 優(yōu)先權(quán)日2007年1月8日
發(fā)明者任鐘太, 劉載榥, 吳世鉉, 李東學, 李君攝, 高康一 申請人:Sk電信有限公司