專利名稱：圖像序列檢索標(biāo)記的存儲方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像序列檢索標(biāo)記的存儲以及借助檢索標(biāo)記訪問圖像序列的方法。
如今已經(jīng)將各式各樣的音頻視頻信息(圖像序列)做成數(shù)字化的形式，存儲在各種各樣的處所。為了使用這些.音頻視頻信息，首先需要從中找到感興趣的數(shù)據(jù)。
壓縮圖像數(shù)據(jù)用的MPEG-標(biāo)準(zhǔn)已為專業(yè)人員所熟知。
首先介紹專用名詞的定義。圖像序列表示彼此有關(guān)聯(lián)的、一系列的圖像序列。幀是表示在圖像序列中真正的圖像序列部分，是根據(jù)符合MPEG-或ITU-標(biāo)準(zhǔn)定義的內(nèi)圖像(Intrabild)轉(zhuǎn)換成的。
本發(fā)明的任務(wù)是提供一種圖像序列/幀的檢索標(biāo)記的存儲方法，從而能夠借助該檢索標(biāo)記訪問該圖像序列/幀。
此項任務(wù)通過權(quán)利要求1的特征能夠解決。
本方法能夠存儲圖像序列的檢索標(biāo)記，并且能夠借助該檢索標(biāo)記訪問該圖像序列，其中的檢索標(biāo)記是根據(jù)該圖像序列確定的。檢索標(biāo)記連同圖像序列一并存儲。只要在該檢索標(biāo)記中含有預(yù)先準(zhǔn)備好的信息，就能對該圖像序列進(jìn)行訪問。
本發(fā)明的一種改進(jìn)方法的特征在于其檢索標(biāo)記是由圖像序列中的音頻數(shù)據(jù)和/或視頻數(shù)據(jù)構(gòu)成的。
本發(fā)明的另一種改進(jìn)方法的特征在于其檢索標(biāo)記本身還含有一個參照項(指針)，從而能夠訪問圖像序列中的一幅圖像。
訪問可以這樣進(jìn)行，即在圖像序列中含有一個參照項的時間偏移量，從而使該圖像成為參照的對象。這樣就能保證對該圖像的訪問成功。在參照項中編入該圖像的地址，這樣就能找到在圖像序列中的起點。
在另一種改進(jìn)方法中能夠預(yù)先準(zhǔn)備好檢索標(biāo)記，將該標(biāo)記附加在圖像序列的一端，或者存儲在圖像序列之中。準(zhǔn)備工作最好是借助于一種符合MPEG-或ITU-標(biāo)準(zhǔn)定義的幀進(jìn)行，將幀轉(zhuǎn)換為內(nèi)圖像，再用該內(nèi)圖像形成檢索標(biāo)記。采用這種辦法就能夠使圖像序列中的多幅幀各自含有一幅內(nèi)圖像。
另一種改進(jìn)方法的特征在于將每一幅單幅圖像存儲在一個數(shù)據(jù)庫之中，這樣就能夠保證對于該幀進(jìn)行成功的訪問。
另一種從屬性的改進(jìn)的特征在于針對圖像序列中的每一幅符合MPEG-或ITU標(biāo)準(zhǔn)定義的對象分別存儲各自專用的檢索標(biāo)記。采用這樣的辦法就能夠以該對象為單位在結(jié)合部位插入檢索標(biāo)記。
檢索標(biāo)記通過一個可以預(yù)先含有的啟動碼(標(biāo)題碼)可以清楚地識別，也是一種改進(jìn)。
由于檢索標(biāo)記是連同圖像序列一并存儲的，所以就能夠由這樣單幅的圖像序列匯集成大規(guī)模的圖像數(shù)據(jù)庫。反之，總體的參照碼表(主要是外部碼表)的情況則與此不同，其檢索標(biāo)記以及與其相對應(yīng)的參照碼表卻是包括在圖像序列之中的，因而就難以做到圖像序列的模塊結(jié)構(gòu)化(主要是指當(dāng)其中包括多個圖像序列，并且還要將其逐個輸送到另外的數(shù)據(jù)庫中去的場合)。
改進(jìn)方法也可參閱各項從屬權(quán)利要求。
現(xiàn)借助附圖對本發(fā)明的實施例作詳細(xì)說明。
附圖如下所示

圖1是一個框圖，圖中所示，是圖像序列檢索標(biāo)記的存儲方法和借助檢索標(biāo)記訪問圖像序列的方法，圖2是將檢索標(biāo)記連同圖像序列一并存儲的幾種不同方法。
圖3是一幅簡圖，繪出檢索標(biāo)記以及該標(biāo)記所屬的、作為圖像參照碼之用的指針。
在圖1的第一步1a中，根據(jù)圖像序列確定檢索標(biāo)記。為此，要檢索出和已知的樣本圖像完全一致或部分一致的圖像。要做到這一步，首先要在樣本圖像中分析出預(yù)先規(guī)定的特征，特別是占主要優(yōu)勢的顏色或者是顯示的樣本形狀。將這些標(biāo)記存儲在數(shù)據(jù)庫之中，并且用一個指針在圖像序列中指定作為參照對象的圖像資料，同時在指定的圖像序列檢索出樣本圖像。在第1b中將檢索標(biāo)記連同圖像序列一并存儲。然后，就能夠在第1c步中借助于檢索標(biāo)記在圖像序列中進(jìn)行訪問。在此過程中，用預(yù)先給定的標(biāo)記與檢索標(biāo)記與進(jìn)行對比，如果在圖像序列中找到一幅與此相吻合的圖像序列，就跳轉(zhuǎn)到該圖像序列中通過檢索標(biāo)記指定的圖像序列之處。
此時還要注意到的一點是這還不僅能夠指定視頻數(shù)據(jù)，而且同樣能夠?qū)⒅羔槾鎯υ谝纛l數(shù)據(jù)之中。
圖2中所列是將檢索標(biāo)記連同圖像序列一并存儲的幾種不同的方法。
在圖2a中所列是包含一個指針H和圖像信息BE的圖像序列GOP(符合MPEG-標(biāo)準(zhǔn)定義的圖像群)。由上向下走向的軸線t適用于圖2a至2b中所有的圖形。由此可見，這是作為圖像序列存儲的圖像順序之用的時序。
在圖2a中列出了圖像序列GOP的檢索標(biāo)記M。檢索標(biāo)記最好是采用明碼(ASCII碼)碼表的易讀方式存儲。碼表長的檢索標(biāo)記可以再經(jīng)壓縮存儲。在圖像序列的每幅圖像中都附加了一個指針PTR，結(jié)果，凡是在圖像序列中連接著一個檢索標(biāo)記的圖像都在圖序的開頭附加一個檢索標(biāo)記。
在圖2a到2d中，都將這樣的參照項(指針)繪成箭頭PTR。
在圖2b中圖像序列GOP的后面附加一個檢索標(biāo)記M。其他方面與圖2a中的相同。
檢索標(biāo)記M可以，如圖2c所示，存儲在圖像序列GOP的中間。與此相對應(yīng)，必須在圖像信息中的檢索標(biāo)記M上附加一個參照項PTR(在圖2c中加在檢索標(biāo)記M上方的那個指針)，或者按圖像信息的時序加在檢索標(biāo)記M的后面(在圖2c中加在檢索標(biāo)記M下方的那個指針)。
另外，圖2d所示是對于按照MPEG-或ITU-標(biāo)準(zhǔn)進(jìn)行編碼的某個目標(biāo)(音頻目標(biāo)和/或視頻目標(biāo))，為此，要對目標(biāo)O1和O2分別添加專用的附加檢索標(biāo)記M31和M32。一個音頻視頻幀可以含有多個附加檢索標(biāo)記組M1、M2、M31和M32。
圖2d中的檢索標(biāo)記組M1和M2是供圖像數(shù)據(jù)BD共用的；而檢索標(biāo)記組M31和M32分別含有檢索標(biāo)記，其指針分別在按照目標(biāo)O1和O2分開的圖像序列的內(nèi)部指在相應(yīng)的參照位置上。
圖3所示是檢索標(biāo)記碼表的結(jié)構(gòu)及其與圖像數(shù)據(jù)之間的關(guān)系。圖中仍然適用從上向下的垂直時間軸線t。檢索標(biāo)記M設(shè)想是采用圖像序列GOP的碼表形式，其中包括表頭H和圖像數(shù)據(jù)BD。在碼表中含有多個檢索標(biāo)記SM1和SM2。每一個檢索標(biāo)記各自包括描述組分INFO1和INFO2以及指向圖像數(shù)據(jù)BD的一幅圖像的一個參照項(指針英語pointer)PTR1和PTR2。
如上所述，對于符合MPEG-標(biāo)準(zhǔn)的壓縮圖像序列可以用碼表的方式加以邏輯細(xì)分。結(jié)果在符合MPEG-標(biāo)準(zhǔn)的圖像序列的既定目標(biāo)中形成規(guī)定的檢索標(biāo)記SMi。為了區(qū)分兩個不同的目標(biāo)，最好是對于第一個目標(biāo)采用第二檢索標(biāo)記SM2i對于第二個目標(biāo)采用另一個檢索標(biāo)記SM(2i+1)，(i＝0，1，2，3，…)。相應(yīng)的，對于在相同的圖像序列中的多個目標(biāo)使用了不同的檢索標(biāo)記組。
權(quán)利要求
1.圖像序列的檢索標(biāo)記的存儲方法，其中，a)檢索標(biāo)記是根據(jù)圖像序列確定的，b)檢索標(biāo)記連同圖像序列一并存儲；
2.如權(quán)利要求1所述的方法，其中，檢索標(biāo)記是由圖像序列的音頻數(shù)據(jù)和/或視頻數(shù)據(jù)構(gòu)成的。
3.如權(quán)利要求1或2所述的方法，其中，檢索標(biāo)記含有針對在圖像序列中的一幅圖像的參照項，以用于目標(biāo)化的訪問。
4.如權(quán)利要求1至3之一的方法，其中，圖像序列的檢索標(biāo)記是預(yù)先準(zhǔn)備好的。
5.如權(quán)利要求1至3之一的方法，其中，檢索標(biāo)記與圖像序列有從屬關(guān)系。
6.如權(quán)利要求1至3之一的方法，其中，檢索標(biāo)記是存儲在圖像序列之中的。
7.如權(quán)利要求6所述的方法，其中，用于一個通過內(nèi)圖像轉(zhuǎn)換成的幀的檢索標(biāo)記備用于根據(jù)MPEG-定義的內(nèi)圖像。
8.如權(quán)利要求7所述的方法，其中，將每幀存儲在一個數(shù)據(jù)庫之中。
9.如上列各項權(quán)利要求之一的方法，其中，對于按照圖像編碼標(biāo)準(zhǔn)的規(guī)定在該幀中所含的多個對象分別存儲各自專用的檢索標(biāo)記，以供具有圖像序列的多個對象之用。
10.如上列各項權(quán)利要求之一的方法，其中，檢索標(biāo)記通過一個可以預(yù)先含有的啟動碼(標(biāo)題碼)可以清楚地識別。
全文摘要
為了訪問含有專用檢索標(biāo)記的圖像序列,要在圖像序列中存儲相應(yīng)的檢索標(biāo)記。為此,要在圖像序列之后或之中存儲預(yù)先準(zhǔn)備好的、由優(yōu)選明文構(gòu)成的碼表。在每個檢索標(biāo)記中,除了包含信息項之外,還含有在圖像序列中的一幅圖像的參照項。通過該項獨有的檢索標(biāo)記能保證訪問的成功。
文檔編號G06F17/30GK1271443SQ98809428
公開日2000年10月25日 申請日期1998年5月5日 優(yōu)先權(quán)日1997年7月23日
發(fā)明者A·考普 申請人:西門子公司