專利名稱：活動(dòng)圖像檢索信息記錄裝置及活動(dòng)圖像檢索裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及活動(dòng)圖像檢索用信息記錄裝置(活動(dòng)圖像檢索信息記錄裝置)及活動(dòng)圖像檢索用裝置(活動(dòng)圖像檢索裝置)，詳細(xì)地說，涉及能夠從構(gòu)成活動(dòng)圖像的多個(gè)場面中，有效檢索取出希望場面的活動(dòng)圖像檢索信息記錄裝置及活動(dòng)圖像檢索裝置。
現(xiàn)有技術(shù)由于計(jì)算機(jī)性能的提高、存儲(chǔ)裝置的大容量化、通信用基礎(chǔ)設(shè)施的完備等，使大量的圖像數(shù)據(jù)庫化，需要時(shí)，將所需圖像進(jìn)行發(fā)信的服務(wù)等正在普及。由于圖像數(shù)字化技術(shù)也在普及，個(gè)人也能夠建立活動(dòng)圖像數(shù)據(jù)庫。
這樣，當(dāng)使活動(dòng)圖像數(shù)據(jù)庫化，怎樣從其中檢索需要的活動(dòng)圖像成為問題。本發(fā)明就是涉及這種活動(dòng)圖像檢索技術(shù)的改良。
本說明書所用術(shù)語“活動(dòng)圖像”包含由RGB(Red、Green、Blue)信號(hào)構(gòu)成，未加工的活動(dòng)圖像數(shù)據(jù)及象MPEG(Moving PictureExperts Group)等那樣被數(shù)字化，按照規(guī)定動(dòng)畫壓縮方式符號(hào)化的活動(dòng)圖像數(shù)據(jù)兩者。
“場面”這一術(shù)語是由多個(gè)連續(xù)圖像畫面構(gòu)成的活動(dòng)圖像構(gòu)成單位，指從錄像開始到停止一次攝影得到的活動(dòng)圖像或編輯完的活動(dòng)圖像中，以兩個(gè)編輯點(diǎn)劃分兩端的一連串活動(dòng)圖像。也包含編輯處含有減弱、漸隱等特殊效果的場合。一個(gè)場面也可以包含多個(gè)場面。
所謂“場面變換點(diǎn)”指兩個(gè)場面變換時(shí)間軸上的位置，剛場面變換后的場面的最開始的畫面叫作“場面變換畫面”。
所謂主畫面，指用于檢索等具有代表各場面或活動(dòng)圖像整體特征的畫面。
活動(dòng)圖像數(shù)據(jù)是由沿時(shí)間軸變化的圖像信息形成的內(nèi)容?；顒?dòng)圖像數(shù)據(jù)全部為檢索對象。從而，檢索所希望的活動(dòng)圖像最簡單的方法是看整個(gè)活動(dòng)圖像來選擇所希望的活動(dòng)圖像。但是，看整個(gè)活動(dòng)圖像需要一定時(shí)間。從而，當(dāng)數(shù)據(jù)庫中登記的活動(dòng)圖像數(shù)量增加，取出所希望的活動(dòng)圖像需要的時(shí)間極長。因此，這種方法不現(xiàn)實(shí)。
有效檢索活動(dòng)圖像的一般方法是，對各活動(dòng)圖像預(yù)先準(zhǔn)備代表各活動(dòng)圖像內(nèi)容的種種檢索用信息(檢索信息)，據(jù)此，檢索所希望的活動(dòng)圖像。
作為檢索信息使用的信息包含附加于圖像的信息(附加信息)、表示圖像特性的信息(特性信息)及表示圖像概要的信息(概要信息)。附加信息包含活動(dòng)圖像附帶準(zhǔn)備的標(biāo)題或說明文。特性信息包含表示根據(jù)圖像信號(hào)導(dǎo)出的輝度值頻度或畫面間移動(dòng)信息等圖像特性的信息。概要信息包含圖像的特性信息或由外部輸入決定的場面變換點(diǎn)或主畫面等。
上述信息中，特性信息特別方便且重要。例如代表活動(dòng)圖像的主畫面能夠利用特性信息選擇。特性信息數(shù)值化容易，如果以特性信息的形式使所希望的活動(dòng)圖像的特性數(shù)值化，能夠容易抽出與所要求的特性信息特性一致的活動(dòng)圖像。以下說明所謂“檢索信息”就是關(guān)于該特性信息的。
一般地，活動(dòng)圖像含有多個(gè)場面。檢索者檢索活動(dòng)圖像多數(shù)場合是為了從檢索對象的一個(gè)或多個(gè)活動(dòng)圖像中，發(fā)現(xiàn)活動(dòng)圖像中所包含的希望的畫面或希望的場面。使用檢索信息從活動(dòng)圖像中發(fā)現(xiàn)希望的畫面或場面的基本方法是，預(yù)先尋求關(guān)于各畫面的檢索信息或關(guān)于各場面的檢索信息，記錄下來，據(jù)此，選擇畫面或場面。
關(guān)于這一點(diǎn)，日本國特開平9-284702號(hào)公報(bào)公布了使用各畫面移動(dòng)向量的總和及構(gòu)成畫面的多個(gè)小范圍的畫面內(nèi)及畫面間的連續(xù)度，作為場面變換點(diǎn)檢出用畫面特征量的裝置及方法。
另外，日本國特開平7-38842號(hào)公報(bào)公布了使用各場面內(nèi)移動(dòng)向量大小的平均值及圖像的彩色矩形圖作為場面特征量，將各場面代表圖象作為圖像索引顯示時(shí)的控制方法。
參考這種以往技術(shù)，研制了下述活動(dòng)圖像檢索用信息記錄用裝置(活動(dòng)圖像檢索信息記錄裝置)及活動(dòng)圖像檢索用裝置(活動(dòng)圖像檢索裝置)。
參照圖1，設(shè)想的以往活動(dòng)圖像檢索信息記錄裝置包含，解析輸入的活動(dòng)圖像數(shù)據(jù)，分割成場面、場面分割位置(場面變換)等活動(dòng)圖像結(jié)構(gòu)表示信息(活動(dòng)圖像結(jié)構(gòu)信息)輸出用解析部601；為接受解析部601的輸出和輸入的活動(dòng)圖像數(shù)據(jù)，進(jìn)行連接，根據(jù)解析部601輸出的活動(dòng)圖像結(jié)構(gòu)信息及活動(dòng)圖像數(shù)據(jù)，作為檢索信息生成場面內(nèi)各畫面對應(yīng)的移動(dòng)向量總和等圖像摘要信息的輸出畫面單位檢索信息生成部602；為接受畫面單位檢索信息生成部602的輸出，進(jìn)行連接，根據(jù)畫面單位檢索信息生成部602輸出畫面單位的摘要信息，作為檢索信息生成輸出某場面整體的移動(dòng)向量大小平均值等摘要信息用的場面單位檢索信息生成部603；通過將解析部601輸出的活動(dòng)圖像結(jié)構(gòu)信息、畫面單位檢索信息生成部602輸出的各畫面單位檢索信息及場面單位檢索信息生成部603輸出的整個(gè)場面的檢索信息配置成規(guī)定的形式，生成輸出活動(dòng)圖像對應(yīng)檢索信息用的活動(dòng)圖像檢索信息生成部604；將原來活動(dòng)圖像數(shù)據(jù)與活動(dòng)圖像檢索信息生成部604輸出的活動(dòng)圖像對應(yīng)檢索信息對應(yīng)存儲(chǔ)于記錄媒體606用的記錄部605。
另外，1畫面可考慮為時(shí)間分割活動(dòng)圖像的單位。因此，畫面可稱為時(shí)間分割塊的一例。
參照圖2，設(shè)想的以往圖像檢索裝置包含，從記錄媒體606讀出活動(dòng)圖像檢索信息及活動(dòng)圖像數(shù)據(jù)用的讀出部701；保持讀出部701供給的各活動(dòng)圖像檢索信息，接受對檢索信息的請求，將場面單位檢索信息或畫面單位檢索信息與活動(dòng)圖像結(jié)構(gòu)信息一起輸出用的檢索信息管理部702；接受場面單位檢索請求，向檢索信息管理部702請求場面單位檢索信息和活動(dòng)圖像結(jié)構(gòu)信息，根據(jù)收到的場面單位檢索信息和活動(dòng)圖像結(jié)構(gòu)信息，檢出符合檢索請求的場面，輸出檢出的場面相關(guān)信息用的場面單位檢索實(shí)行部703；接受畫面單位檢索請求，向檢索信息管理部702請求場面內(nèi)的畫面單位檢索信息及活動(dòng)圖像結(jié)構(gòu)信息，根據(jù)收到的場面內(nèi)的畫面單位檢索信息及活動(dòng)圖像信息，檢出符合檢索請求的場面或畫面，輸出檢出的場面或畫面相關(guān)信息用的畫面單位檢索實(shí)行部704；根據(jù)場面單位檢索實(shí)行部703及畫面單位檢索實(shí)行部704輸出、檢出的場面相關(guān)信息或檢出的畫面相關(guān)信息，通過讀出部701，取出輸出那些檢出的場面或畫面對應(yīng)的圖像數(shù)據(jù)用的數(shù)據(jù)管理部705；響應(yīng)操作員給予的檢索指示，將檢索請求給予場面單位檢索實(shí)行部703或畫面單位檢索實(shí)行部704，把數(shù)據(jù)管理部705給予的活動(dòng)圖像數(shù)據(jù)作為檢索結(jié)果反復(fù)進(jìn)行顯示處理，檢索結(jié)束時(shí)，將檢索結(jié)果輸出用的檢索控制部706。
圖1所示裝置的動(dòng)作設(shè)想如下。當(dāng)輸入活動(dòng)圖像數(shù)據(jù)，解析部601將該活動(dòng)圖像數(shù)據(jù)分割為場面單位。解析部601又輸出活動(dòng)圖像結(jié)構(gòu)信息。
畫面單位檢索信息生成部602根據(jù)解析部601輸出的活動(dòng)圖像結(jié)構(gòu)信息及活動(dòng)圖像數(shù)據(jù)，生成場面內(nèi)的畫面對應(yīng)的摘要信息。畫面單位檢索信息生成部602再將如此生成的摘要信息向場面單位檢索信息生成部603及活動(dòng)圖像檢索信息生成部604輸出，作為檢索信息。
場面單位檢索信息生成部603根據(jù)畫面單位檢索信息生成部602給予的畫面單位摘要信息，生成整個(gè)場面的摘要信息。場面單位檢索信息生成部603再把如此生成的摘要信息給予場面單位檢索信息生成部603，作為檢索信息。
活動(dòng)圖像檢索信息生成部604分別從解析部601接受活動(dòng)圖像結(jié)構(gòu)信息，從畫面單位檢索信息生成部602接受畫面單位檢索信息，從場面單位檢索信息生成部603接受整個(gè)場面用的檢索信息，按規(guī)定形式配置、生成活動(dòng)圖像對應(yīng)的檢索信息?；顒?dòng)圖像檢索信息生成部604將如此生成的活動(dòng)圖像對應(yīng)的檢索信息給予記錄部605。
記錄部605將原來的活動(dòng)圖像數(shù)據(jù)和活動(dòng)圖像檢索信息生成部604給予的檢索信息記錄于記錄媒體606。這時(shí)，記錄部605把記錄的活動(dòng)圖像數(shù)據(jù)與檢索信息對應(yīng)表示信息附加于活動(dòng)圖像數(shù)據(jù)或檢索信息任一方或雙方，或者分別記錄活動(dòng)圖像數(shù)據(jù)及檢索信息。
參照圖2，以往的檢索裝置的動(dòng)作設(shè)想如下。檢索開始時(shí)，操作員將檢索指示給予檢索控制部706。檢索控制部706響應(yīng)該檢索指示，選擇場面單位檢索或畫面單位檢索之一。
例如選擇場面單位檢索。于是，檢索控制部706將檢索請求給予場面單位檢索實(shí)行部703。場面單位檢索實(shí)行部703響應(yīng)該請求，向檢索信息管理部702請求場面單位檢索信息和活動(dòng)圖像結(jié)構(gòu)信息，接收檢索信息管理部702輸出的場面單位檢索信息和活動(dòng)圖像信息。
場面單位檢索實(shí)行部703根據(jù)該場面單位檢索信息和活動(dòng)圖像結(jié)構(gòu)信息，檢出符合檢索控制部706給予的檢索請求的場面。然后，場面單位檢索實(shí)行部703將檢出的場面相關(guān)信息輸出給數(shù)據(jù)管理部705。
數(shù)據(jù)管理部705根據(jù)場面單位檢索實(shí)行部703給予的場面相關(guān)信息，通過讀出部701從記錄媒體606讀出對應(yīng)的圖像數(shù)據(jù)，給予檢索控制部706。
檢索控制部706顯示該圖像數(shù)據(jù)。操作員看到顯示的圖像數(shù)據(jù)，決定下一次檢索方針，將下一次檢索指示給予檢索控制部706。以下重復(fù)進(jìn)行同樣處理。
這樣，操作員取出要取出的圖像，檢索結(jié)束。檢索結(jié)果由檢索控制部706輸出。
按照以往的技術(shù)，涉及場面的檢索信息，根據(jù)含于該場面的畫面單位檢索信息生成。這是基于場面構(gòu)成的最小單位是畫面的一般認(rèn)識(shí)。
這樣，當(dāng)根據(jù)各個(gè)畫面單位檢索信息生成場面檢索信息時(shí)，則能夠利用將各畫面分割為小范圍得到的各畫面內(nèi)的空間特征(畫面分割塊單位檢索信息)，作為檢索信息。但是問題是這些以往的裝置不能使用時(shí)間軸上的某長度場面整體圖像的空間特征。本說明書把這種場面整體圖像的空間特征稱為“空間分割塊單位檢索信息”。
例如，要取出畫面中央部有劇烈移動(dòng)物體特征的場合。依據(jù)以往的技術(shù)，不能根據(jù)場面單位檢索信息檢索這樣的場面，需要回到各場面所包含的各畫面附加的檢索信息檢索。因此，以往的技術(shù)如此地檢索，效率極低。
本發(fā)明的目的是鑒于上述以往的技術(shù)上的問題，提供使用的確表示場面特征的新指標(biāo)，能夠有效進(jìn)行活動(dòng)圖像檢索的活動(dòng)圖像檢索信息記錄裝置及活動(dòng)圖像檢索用裝置。
本發(fā)明其它目的是通過不但把場面分割為時(shí)間塊，抽出其特征，而且在時(shí)間軸上不分割，只在空間分割場面，抽出場面的其它特征，提供能夠有效進(jìn)行活動(dòng)圖像檢索的活動(dòng)圖像檢索信息記錄裝置及活動(dòng)圖像檢索裝置。
本發(fā)明的另一個(gè)其它目的是提供使用的確表示場面特征的新指標(biāo)，能夠有效進(jìn)行活動(dòng)圖像檢索且檢索用信息量少的活動(dòng)圖像檢索信息記錄裝置及活動(dòng)圖像檢索裝置。

發(fā)明內(nèi)容
本發(fā)明相關(guān)的活動(dòng)圖像檢索信息記錄裝置包含檢索信息生成部，根據(jù)活動(dòng)圖像數(shù)據(jù)和將活動(dòng)圖像數(shù)據(jù)表示的活動(dòng)圖像，在時(shí)間軸上分割為時(shí)間軸上的1以上的部分活動(dòng)圖像的活動(dòng)圖像結(jié)構(gòu)信息，分別對應(yīng)1以上的部分活動(dòng)圖像，生成檢索信息；記錄部，將檢索信息和活動(dòng)圖像結(jié)構(gòu)信息同對應(yīng)的活動(dòng)圖像數(shù)據(jù)一起記錄于記錄媒體。檢索信息生成部包含，通過分別空間分割時(shí)間軸上的1以上的部分活動(dòng)圖像，生成所得到的1以上的空間部分活動(dòng)圖像的摘要信息用的第1摘要信息生成部。
根據(jù)分別空間分割時(shí)間軸上的部分活動(dòng)圖像所得空間部分活動(dòng)圖像，生成摘要信息。該摘要信息，不是從時(shí)間軸上的部分活動(dòng)圖像中的時(shí)間的一部分得到的，是本發(fā)明新引進(jìn)的。該摘要信息是從空間上只是圖像的一部分但在時(shí)間軸上卻是部分活動(dòng)圖像整體的空間部分活動(dòng)圖像得到的。因此，該摘要信息表示通過某部分活動(dòng)圖像時(shí)間整體的該部分活動(dòng)圖像的空間特征。使用這種新指標(biāo)，能夠有效地進(jìn)行部分活動(dòng)圖像的非時(shí)間而是以空間特征為重點(diǎn)的檢索。
本發(fā)明另一部分相關(guān)的活動(dòng)圖像檢索裝置是利用構(gòu)成活動(dòng)圖像1以上的部分活動(dòng)圖像各自對應(yīng)的檢索信息，檢索希望的圖像用的活動(dòng)圖像檢索裝置。表示該活動(dòng)圖像的活動(dòng)圖像數(shù)據(jù)中，檢索信息對應(yīng)記入，檢索信息包含分別空間分割時(shí)間軸上的1以上的部分活動(dòng)圖像所得到的1以上的空間部分活動(dòng)圖像的摘要信息。該發(fā)明相關(guān)的活動(dòng)圖像檢索裝置包含讀出管理檢索信息用的信息抽出部；連接于該信息管理部、響應(yīng)外部給予的以時(shí)間軸上的部分活動(dòng)圖像為檢索單位的第1檢索請求，使用檢索信息所包含的空間部分活動(dòng)圖像的摘要信息，檢索符合第1檢索請求的時(shí)間軸上的部分活動(dòng)圖像用的第1部分活動(dòng)圖像檢索部。
根據(jù)分別空間分割時(shí)間軸上的部分活動(dòng)圖像所得空間部分活動(dòng)圖像得到的摘要信息是本發(fā)明新引進(jìn)的，是從空間上只是圖像的一部分但在時(shí)間軸上是部分活動(dòng)圖像整體的空間部分活動(dòng)圖像得到的。從而，該摘要信息表示通過某部分活動(dòng)圖像整個(gè)時(shí)間的該部分活動(dòng)圖像的空間特征。因此，根據(jù)該發(fā)明相關(guān)的活動(dòng)圖像檢索裝置，能夠使用該新指標(biāo)，有效進(jìn)行部分活動(dòng)圖像的非時(shí)間而是以空間特征為重點(diǎn)的檢索。


圖1是設(shè)想的以往活動(dòng)圖像檢索信息記錄裝置的原理框圖。
圖2是設(shè)想的以往活動(dòng)圖像檢索裝置的原理框圖。
圖3是本發(fā)明一實(shí)施方式相關(guān)的活動(dòng)圖像檢索信息記錄裝置框圖。
圖4所示為本發(fā)明一實(shí)施方式相關(guān)的活動(dòng)圖像檢索信息記錄裝置中，將活動(dòng)圖像分解為場面的過程圖。
圖5所示為本發(fā)明一實(shí)施方式相關(guān)的活動(dòng)圖像檢索信息記錄裝置中，生成時(shí)間分割塊單位檢索信息的過程圖。
圖6所示為本發(fā)明一實(shí)施方式相關(guān)的活動(dòng)圖像檢索信息記錄裝置中，生成空間分割塊單位檢索信息的過程圖。
圖7所示為本發(fā)明一實(shí)施方式相關(guān)的活動(dòng)圖像檢索信息記錄裝置中場面單位檢索信息概念說明圖。
圖8所示為本發(fā)明一實(shí)施方式相關(guān)的活動(dòng)圖像檢索信息記錄裝置中空間分割塊單位檢索信息概念說明圖。
圖9所示為本發(fā)明一實(shí)施方式相關(guān)的活動(dòng)圖像檢索信息記錄裝置中排成冗余性空間分割塊單位檢索信息概念說明圖。
圖10是本發(fā)明一實(shí)施方式相關(guān)的活動(dòng)圖像檢索裝置框圖。
圖11所示為場面單位檢索信息的類似度檢索中基準(zhǔn)場面圖。
圖12所示為場面單位檢索信息的類似度檢索中一個(gè)場面圖。
圖13所示為場面單位檢索信息的類似度檢索中其它場面圖。
圖14所示為空間分割塊單位檢索信息的類似度檢索中基準(zhǔn)場面圖。
圖15所示為空間分割塊單位檢索信息的類似度檢索中一個(gè)場面圖。
圖16所示為空間分割塊單位檢索信息的類似度檢索中其它場面圖。
圖17是本發(fā)明一實(shí)施方式相關(guān)的活動(dòng)圖像檢索信息記錄裝置中，場面單位檢索信息記錄和空間分割塊單位檢索信息選擇記錄的概念圖。
圖18是將分割指定數(shù)標(biāo)志值的意義以表形式表示圖。
圖19所示為本發(fā)明一實(shí)施方式相關(guān)的活動(dòng)圖像檢索信息記錄裝置中，場面單位檢索信息記錄與空間分割塊單位檢索信息分級(jí)記錄概念圖。
圖20表示將畫面分割成22個(gè)時(shí)的分割例圖。
圖21表示將畫面分割成23個(gè)時(shí)的分割例圖。
圖22表示將畫面分割成24個(gè)時(shí)的分割例圖。
圖23表示將畫面分割成25個(gè)時(shí)的分割例圖。
圖24表示將畫面分割成26個(gè)時(shí)的分割例圖。
圖25所示為活動(dòng)圖像數(shù)據(jù)分割成場面單位存儲(chǔ)的活動(dòng)圖像數(shù)據(jù)庫圖。
實(shí)施方式圖3所示為本實(shí)施方式相關(guān)的活動(dòng)圖像檢索信息記錄裝置40的框圖。參照圖3，該活動(dòng)圖像檢索信息記錄裝置40包含接受活動(dòng)圖像數(shù)據(jù)、解析活動(dòng)圖像結(jié)構(gòu)、分割成場面、輸出場面變換點(diǎn)等活動(dòng)圖像結(jié)構(gòu)信息用的解析部101；接受活動(dòng)圖像數(shù)據(jù)和解析部101輸出的活動(dòng)圖像結(jié)構(gòu)信息，生成輸出各場面所包含的各畫面圖像數(shù)據(jù)的摘要信息(以畫面這一時(shí)間分割塊為單位的摘要信息)用的第1檢索信息生成部102；接受解析部101輸出的活動(dòng)圖像結(jié)構(gòu)信息及活動(dòng)圖像數(shù)據(jù)，生成輸出場面內(nèi)所有畫面同一分割塊位置圖像數(shù)據(jù)構(gòu)成的空間分割塊摘要信息，作為各場面相關(guān)檢索信息用的第2檢索信息生成部103；輸入第1檢索信息生成部102輸出的場面內(nèi)各畫面(時(shí)間分割塊)的摘要信息及/或第2檢索信息生成部103輸出的場面內(nèi)各空間分割塊的摘要信息，根據(jù)來自第1檢索信息生成部102的摘要信息及/或來自第2檢索信息生成部103的摘要信息一方或雙方、生成輸出整個(gè)場面的摘要信息用的第3檢索信息生成部104；通過把第1檢索信息生成部102輸出的摘要信息、第2檢索信息生成部103輸出的摘要信息、第3檢索信息生成部104輸出的摘要信息及解析部101輸出的活動(dòng)圖像結(jié)構(gòu)信息配置成規(guī)定形式，生成輸出活動(dòng)圖像對應(yīng)的檢索信息用的第4檢索信息生成部105；接受第4檢索信息生成部105輸出的活動(dòng)圖像的檢索信息和原來的活動(dòng)圖像數(shù)據(jù)，將檢索信息和活動(dòng)圖像數(shù)據(jù)的對應(yīng)信息等附加于其中一方或雙方或者作為其它數(shù)據(jù)，將檢索信息及活動(dòng)圖像數(shù)據(jù)的對應(yīng)信息等記錄于記錄媒體107用的記錄部106。
本發(fā)明裝置使用的活動(dòng)圖像數(shù)據(jù)也可以是使用RGB信號(hào)等原圖像信號(hào)、MPEG(Moving Picture Experts Group)等動(dòng)畫壓縮方式、符號(hào)化的圖像數(shù)據(jù)之一。在本實(shí)施方式中，為說明簡便起見，活動(dòng)圖像數(shù)據(jù)假設(shè)為符號(hào)化的。
以下，對圖3所示各塊功能進(jìn)一步詳細(xì)說明。解析部101將活動(dòng)圖像分割為時(shí)間小單位(場面)。為此，解析部101進(jìn)行圖像數(shù)據(jù)中場面變換點(diǎn)的檢出。解析部101在該例中，使用符號(hào)化圖像數(shù)據(jù)所包含的符號(hào)化塊預(yù)測方式畫面內(nèi)的頻度信息，檢出場面變換點(diǎn)。
例如，參照圖4，解析部101檢出活動(dòng)圖像120中的第1場面變換畫面130、第2場面變換畫面132、第3場面變換畫面134、第4場面變換畫面136。由此，解析部101將活動(dòng)圖像120分割為由第1場面變換畫面130與第2場面變換畫面132間的圖像數(shù)據(jù)含第1場面變換畫面130)構(gòu)成的第1場面140，由第2場面變換畫面132與第3場面變換畫面134間的圖像數(shù)據(jù)含第2場面變換畫面132)構(gòu)成的第2場面142，由第3場面變換畫面134與第4場面變換畫面136間的圖像數(shù)據(jù)含第3場面變換畫面134)構(gòu)成的第3場面144及由第4場面變換畫面136到活動(dòng)圖像120最后的圖像數(shù)據(jù)(含第4場面變換畫面136)構(gòu)成的第4場面146。即，解析部101在該例中，將活動(dòng)圖像120分割為140、142、144、146四個(gè)場面。
解析部101具有把第1場面變換畫面130、第2場面變換畫面132、第3場面變換畫面134、第4場面變換畫面136等場面變換畫面的圖像數(shù)據(jù)中的位置表示信息，輸出作為活動(dòng)圖像結(jié)構(gòu)信息的功能。
參照圖5，第1檢索信息生成部102根據(jù)解析部101輸出的活動(dòng)圖像結(jié)構(gòu)信息，對分割活動(dòng)圖像數(shù)據(jù)得到的某場面160進(jìn)行下述處理，制作場面160所包含的各畫面的摘要信息。另外，場面160含有畫面162A至162N。
第1檢索信息生成部102分別對畫面162A～162N，求移動(dòng)向量畫面內(nèi)頻度信息166A至166N。另外，第1檢索信息生成部102分別求畫面162A～162N中移動(dòng)向量平均值168A至168N。
這樣求得的頻度信息166和平均值信息168在該例中，構(gòu)成各畫面的摘要信息170。摘要信息作為畫面號(hào)碼的函數(shù)(即時(shí)間函數(shù))給予。
該摘要信息是壓縮場面160所包含的各畫面空間內(nèi)分布的信息得到的檢索信息。各畫面是圖像時(shí)間上的分割單位，是時(shí)間分割塊的一種。因此，摘要信息170可以稱為時(shí)間分割塊單位檢索信息。
第2檢索信息生成部103接受解析部101輸出的活動(dòng)圖像結(jié)構(gòu)信息(場面變換位置信息)和活動(dòng)圖像數(shù)據(jù)。第2檢索信息生成部103使用該活動(dòng)圖像結(jié)構(gòu)信息和活動(dòng)圖像數(shù)據(jù)，象下面那樣生成空間分割塊的摘要信息。
另外這里的所謂空間分割塊如下所述。把一個(gè)場面內(nèi)所有畫面，分別按相同方法，空間上分割為多個(gè)分割塊。把所有這些畫面的對應(yīng)位置分割塊整體稱為該場面的空間分割塊。因此，一個(gè)場面包含n個(gè)畫面，各畫面被分割為m個(gè)分割塊時(shí)，該場面被分割為m個(gè)空間分割塊，各空間分割塊含有n個(gè)分割塊。
具體參照圖6，在第2檢索信息生成部103，對場面160進(jìn)行如下處理。如上所述，設(shè)場面160含有多個(gè)畫面162A～162N。這些畫面162A～162N空間上分別分割為M個(gè)分割塊。這里所謂分割塊是指將圖像面分割成多個(gè)時(shí)的各小范圍。例如，圖6所示畫面162A被分割成180A1到180AM多個(gè)分割塊。其它畫面162B至162N也同樣。
然后，由多個(gè)畫面162A～162N各自相同位置的分割塊形成場面160一個(gè)空間分割塊。例如，由N個(gè)畫面分別為第M號(hào)分割塊的集合，(其元素?cái)?shù)與N相等)形成空間分割塊182-M。其它空間分割塊的形成亦同。
對這樣得到的M個(gè)空間分割塊，分別壓縮時(shí)間軸方向分布的信息，生成摘要信息188。這里所說的摘要信息188是各空間分割塊的摘要信息，是對于各空間分割塊所包含的分割塊的畫面內(nèi)位置(座標(biāo))的函數(shù)值。
典型地，摘要信息188包含頻度信息184和平均值信息186。作為頻度信息184，可以使用各符號(hào)化塊預(yù)測方式空間分割塊內(nèi)的頻度信息或移動(dòng)補(bǔ)償預(yù)測符號(hào)化時(shí)的移動(dòng)向量空間分割塊內(nèi)的頻度信息。比如，無圖示，從空間分割塊182-1得到頻度信息184A，從空間分割塊182-2得到頻度信息184B，以此類推，從空間分割塊182-M得到頻度信息184M。
另外，作為平均值信息186，可以使用空間分割塊內(nèi)移動(dòng)向量總和或平均值。比如，無圖示，從空間分割塊182？1得到平均值信息186A，從空間分割塊182？2得到平均值信息186B，以此類推，從空間分割塊182M得到平均值信息186M。
此外，作為摘要信息，也可以使用空間分割塊內(nèi)移動(dòng)向量的標(biāo)準(zhǔn)偏差等。
第3檢索信息生成部104接受第1檢索信息生成部102輸出的摘要信息或第2檢索信息生成部103輸出的摘要信息，根據(jù)其中一方或雙方，生成輸出整個(gè)場面的摘要信息。
這里，所謂整個(gè)場面的摘要信息是檢索場面時(shí)使用的檢索信息。作為整個(gè)場面的摘要信息，可以使用移動(dòng)向量、輝度值或色差值等整個(gè)場面的頻度信息、平均值、標(biāo)準(zhǔn)偏差等。
第4檢索信息生成部105通過將第1檢索信息生成部102輸出的摘要信息、第2檢索信息生成部103輸出的摘要信息、第3檢索信息生成部104輸出的摘要信息、解析部101輸出的活動(dòng)圖像結(jié)構(gòu)信息按規(guī)定形式配置，生成輸出活動(dòng)圖像對應(yīng)的檢索信息，給予記錄部106。
記錄部106接受第4檢索信息生成部105輸出的活動(dòng)圖像對應(yīng)的檢索信息和原來的活動(dòng)圖像數(shù)據(jù)，只把檢索信息或把檢索信息和活動(dòng)圖像數(shù)據(jù)記錄于記錄媒體107。這時(shí)，記錄部106把活動(dòng)圖像數(shù)據(jù)和檢索信息對應(yīng)表示的信息附加于活動(dòng)圖像數(shù)據(jù)或檢索信息任一方或雙方，或者活動(dòng)圖像數(shù)據(jù)及檢索信息作為其它不同數(shù)據(jù)記錄。
本實(shí)施方式相關(guān)活動(dòng)圖像檢索信息記錄裝置40，以上說明過其結(jié)構(gòu)和一般動(dòng)作，作為其使用的檢索信息，使用根據(jù)移動(dòng)補(bǔ)償預(yù)測符號(hào)化的活動(dòng)圖像數(shù)據(jù)所包含的移動(dòng)向量，求得的移動(dòng)大小信息。
更具體地說，時(shí)間分割塊(畫面)單位檢索信息，對于場面內(nèi)各畫面，作為從附加于各符號(hào)化塊的移動(dòng)向量求得的整個(gè)畫面中移動(dòng)向量絕對值總和來求。另外，代替移動(dòng)向量絕對值的總和，作為移動(dòng)向量絕對值的平均值也相同。實(shí)際上，一畫面所包含的符號(hào)化塊數(shù)如果確定了，很容易根據(jù)移動(dòng)向量絕對值總和及其平均值從一方求得另一方。
作為空間分割塊單位檢索信息，使用各空間分割塊中移動(dòng)向量絕對值的總和。這里也可以代替移動(dòng)向量總和，將其平均作為檢索信息使用。構(gòu)成空間分割塊的各分割塊與符號(hào)化塊一致時(shí)，各分割塊對應(yīng)的移動(dòng)向量數(shù)為1。各分割塊含有多個(gè)符號(hào)化塊時(shí)，各分割塊對應(yīng)的移動(dòng)向量數(shù)與該分割塊所包含的符號(hào)化塊數(shù)相等。
另外，空間分割塊單位檢索信息也可以是各空間分割塊內(nèi)的移動(dòng)向量絕對值總和除以構(gòu)成空間分割塊的分割塊數(shù)得到的值。這時(shí)的分割塊數(shù)與構(gòu)成場面的畫面數(shù)相等。另外，空間分割塊單位檢索信息也可以是各空間分割塊內(nèi)的移動(dòng)向量絕對值總和除以構(gòu)成空間分割塊的分割塊所包含的符號(hào)化塊數(shù)總和得到的值。
作為時(shí)間分割塊或空間分割塊檢索信息，如果使用移動(dòng)向量絕對值總和，則能夠計(jì)算場面所包含的全部移動(dòng)向量絕對值的總和。在本實(shí)施方式中，將這樣得到的總和作為場面單位檢索信息。
下面說明空間分割塊單位檢索信息生成所用分割塊的具體例子。如圖7所示，場面160是由畫面162A～162N構(gòu)成的。根據(jù)這些畫面162A～162N的移動(dòng)向量絕對值總和求場面160的場面單位檢索信息I。
如圖8所示，畫面162A～162N是分別分割為2×2個(gè)分割塊的。即畫面162A～162N分別分割為4個(gè)分割塊。比如，畫面162A分割為4個(gè)分割塊190A1至190A4。以下的畫面圖中未示，也同樣。比如畫面162B是分割為畫面190B1至190B4等的。因此，從上述空間分割塊說明可知，場面160分割為4個(gè)空間分割塊，對這4個(gè)空間分割塊，都作為實(shí)數(shù)值，從各空間分割塊內(nèi)移動(dòng)向量絕對值總和分別求空間分割塊單位的檢索信息I1到I4。
因此，作為場面160用的場面檢索信息，比如可以使用將這些檢索信息I、I1、I2、I3、I4按順序排列得到的{I、I1、I2、I3、I4}。也可以將該檢索信息與原來的圖像數(shù)據(jù)一起記錄。
但是，上述的檢索信息含有冗余性。這是由于在該例中，場面單位檢索信息I等于空間分割塊單位檢索信息之和。比如，場面單位檢索信息I可以根據(jù)空間分割塊單位檢索信息I1至I4求得。另外，可以根據(jù)空間分割塊單位檢索信息I1至I4中任意3個(gè)和場面單位檢索信息I，計(jì)算空間分割塊單位檢索信息剩余的1個(gè)。
因此，在本實(shí)施方式的裝置中，使I4不含于檢索信息內(nèi)。另外，在本實(shí)施方式的裝置中，不是各空間分割塊單位檢索信息原樣的值，而是用各空間分割塊單位檢索信息值對于場面單位檢索信息的百分比表示。如果把第1至第3空間分割塊檢索信息對于場面單位檢索信息I的比率設(shè)為P1、P2及P3，那么這時(shí)空間分割塊單位檢索信息象圖9所示那樣求。即根據(jù)第1空間分割塊與場面單位檢索信息計(jì)算第1空間分割塊的檢索信息P1。根據(jù)第2空間分割塊和場面單位檢索信息計(jì)算第2空間分割塊檢索信息P2。根據(jù)第3空間分割塊和場面單位檢索信息計(jì)算第3空間分割塊檢索信息P3。關(guān)于第4空間分割塊，求檢索信息時(shí)，變得冗長，因此不求。即場面160分割為4個(gè)空間分割塊，可以求其中3個(gè)檢索信息。一般地，Pk根據(jù)Pk＝100×Ik/I求。
這樣，空間分割塊檢索信息，作為對于場面單位檢索信息的百分比記錄，有以下優(yōu)點(diǎn)。第一，因?yàn)闄z索信息記錄用信號(hào)的動(dòng)態(tài)范圍受限度，所以能夠更有效地記錄檢索信息。即記錄的信息量比非此種情況時(shí)少。第二，因?yàn)闄z索信息的值正規(guī)化，所以，可以使附加于各場面的檢索信息互相比較。第三。如上所述，應(yīng)記錄的變數(shù)可以省略一個(gè)。
這樣，活動(dòng)圖像檢索信息由第4檢索信息生成部105生成，通過記錄部106記錄于記錄媒體107。
下面說明使用圖3所示活動(dòng)圖像檢索信息記錄裝置40記錄于記錄媒體107的活動(dòng)圖像數(shù)據(jù)及檢索信息，進(jìn)行活動(dòng)圖像檢索的裝置。參照圖10，該實(shí)施方式相關(guān)活動(dòng)圖像檢索裝置50包含讀出記錄媒體107記錄的活動(dòng)圖像數(shù)據(jù)及其檢索信息用的讀出部501；保持讀出部501讀出的活動(dòng)圖像檢索信息，按照檢索請求，將場面單位檢索信息、空間分割塊單位檢索信息或時(shí)間分割塊單位檢索信息同活動(dòng)圖像結(jié)構(gòu)信息一起輸出用的檢索信息管理部502；響應(yīng)場面單位檢索請求，對檢索信息管理部502發(fā)出請求，從檢索信息管理部502接受整個(gè)場面檢索信息和活動(dòng)圖像結(jié)構(gòu)信息，檢出符合場面單位檢索請求的場面，輸出檢出的場面相關(guān)信息用的第1檢索實(shí)行部503；響應(yīng)空間分割塊單位檢索請求，對檢索信息管理部502發(fā)出請求，根據(jù)從檢索信息管理部502收到的場面內(nèi)各空間分割塊的摘要信息和活動(dòng)圖像結(jié)構(gòu)信息，檢出符合檢索請求的場面，輸出檢出的場面相關(guān)信息用的第2檢索實(shí)行部504；響應(yīng)時(shí)間分割塊單位檢索請求，對檢索信息管理部502發(fā)出請求，根據(jù)從檢索信息管理部502收到的場面內(nèi)各畫面的摘要信息和活動(dòng)圖像結(jié)構(gòu)信息，檢出符合檢索請求的場面或畫面，輸出檢出的場面或畫面相關(guān)信息用的第3檢索實(shí)行部505；保持讀出部501讀出的活動(dòng)圖像信息，根據(jù)第1檢索實(shí)行部503、第2檢索實(shí)行部504或第3檢索實(shí)行部505輸出的檢索結(jié)果，輸出根據(jù)檢索結(jié)果檢出的場面或畫面圖像數(shù)據(jù)用的數(shù)據(jù)管理部506；響應(yīng)操作員輸入的檢索指示，分別向第1檢索實(shí)行部503輸出場面單位檢索請求，向第2檢索實(shí)行部504輸出空間分割塊單位檢索請求，或者向第3檢索實(shí)行部505輸出時(shí)間分割塊單位檢索請求，顯示其結(jié)果即數(shù)據(jù)管理部506輸出的場面或畫面的圖像數(shù)據(jù)，檢索完畢時(shí)，輸出檢索結(jié)果用的檢索控制部507。
該活動(dòng)圖像檢索裝置50如下所述進(jìn)行動(dòng)作。檢索開始時(shí)，操作員將檢索指示給予檢索控制部507。檢索控制部507按照該檢索指示，選擇場面單位檢索、空間分割塊單位檢索或時(shí)間分割塊單位檢索之一，對第1檢索實(shí)行部503、第2檢索實(shí)行部504或第3檢索實(shí)行部505之一發(fā)出檢索請求。
第1檢索實(shí)行部503、第2檢索實(shí)行部504、第3檢索實(shí)行部505中接到檢索控制部507的檢索請求者，根據(jù)檢索信息管理部502給予的活動(dòng)圖像結(jié)構(gòu)信息和場面單位、空間分割塊單位或時(shí)間分割塊(畫面)單位的摘要信息，檢出符合檢索請求的場面或畫面，將檢出的場面或畫面方面的信息給予數(shù)據(jù)管理部506。
數(shù)據(jù)管理部506將從第1檢索實(shí)行部503、第2檢索實(shí)行部504或第3檢索實(shí)行部505收到的場面或畫面相關(guān)信息對應(yīng)的場面或畫面圖像從活動(dòng)圖像數(shù)據(jù)中抽出，給予檢索控制部507。
檢索控制部507顯示數(shù)據(jù)管理部506給予的圖像。操作員根據(jù)顯示的圖像，判斷該圖像是否是希望的場面，如果是希望的場面，指示檢索控制部507輸出檢索結(jié)果。檢索控制部507響應(yīng)該指示，輸出檢索結(jié)果。
如果檢索控制部507顯示的圖像不是希望的場面時(shí)，操作員再將下一個(gè)檢索指示給予檢索控制部507。以下，檢索控制部507的動(dòng)作與上述相同，進(jìn)行檢索結(jié)果場面的顯示。下面重復(fù)該動(dòng)作，直到檢索結(jié)束。
就活動(dòng)圖像檢索具體例子進(jìn)行說明。在該實(shí)施方式中，檢索信息使用根據(jù)移動(dòng)補(bǔ)償預(yù)測符號(hào)化的活動(dòng)圖像數(shù)據(jù)所包含的移動(dòng)向量所得移動(dòng)大小相關(guān)的信息。
希望場面或場面內(nèi)的畫面如下所述進(jìn)行檢索。
利用場面單位檢索信息時(shí)，例如可以選擇整體移動(dòng)大的場面和整體移動(dòng)小的場面。
利用空間分割塊單位檢索信息時(shí)，例如，可以選擇整個(gè)場面空間移動(dòng)遍布的場面和空間移動(dòng)比較均勻的場面。另外，能夠指定移動(dòng)遍布部分是圖像的哪一部分。例如，能夠選出圖像中央部分有激烈移動(dòng)部分(被照物)的場面或圖像下半部有激烈移動(dòng)部分的場面(含空白的圖像)等。
在本實(shí)施方式中，將空間分割塊這一以前未考慮過的概念為單位的檢索信息用于場面檢索。為此，得到如下效果。
參照圖11至圖13，關(guān)于圖12(A)所示場面A和圖13(A)所示場面B，考慮計(jì)算與圖11(A)所示基準(zhǔn)場面的類似度的場合。根據(jù)這種“類似度”計(jì)算，可以檢出類似基準(zhǔn)場面移動(dòng)特征的場面。圖12至圖13表示只使用場面單位檢索信息的場合。
圖11至圖13的(B)表示各圖的(A)所示圖像的場面單位檢索信息。如圖11至圖13的(A)所示，場面A及場面B與基準(zhǔn)場面，作為場面整體，具有相同的移動(dòng)強(qiáng)度。因此，如圖11至圖13的(B)所示，對應(yīng)的場面單位檢索信息值也相同。即判斷場面A、B都與基準(zhǔn)場面類似。
接著，參照圖14至圖16，說明使用了空間分割塊單位檢索信息時(shí)的類似度檢索的特征。圖14至圖16的(A)分別表示基準(zhǔn)場面、場面A、B。如圖示，各場面的各畫面包含4個(gè)分割塊。其中分別對第1至第3分割塊構(gòu)成的空間分割塊計(jì)算空間分割塊單位檢索信息P1、P2及P3。另外，如圖14至圖16的(B)所示，基準(zhǔn)場面、場面A及B的場面單位檢索信息約為同值。
但是，如圖14至圖16的(C)所示，當(dāng)以空間分割塊單位檢索信息比較各場面時(shí)，明白以下事實(shí)。即場面A具有與基準(zhǔn)場面空間分割塊單位檢索信息的分布類似的分布。這是由于在場面B中，人物靠右方、空間移動(dòng)可以偏的緣故。基準(zhǔn)場面及場面A人物大致都在中央。因此，作為與基準(zhǔn)場面類似的場面，檢出場面A而不檢出場面B。即，即使場面A、B都與基準(zhǔn)場面類似，作為整個(gè)場面的移動(dòng)也可以根據(jù)移動(dòng)是否遍布來挑選場面。
進(jìn)而，如果利用畫面(時(shí)間分割塊)單位檢索信息，能夠挑選場面內(nèi)移動(dòng)特別激烈的畫面或者反之移動(dòng)停止的畫面。
通過對上述場面單位檢索信息、空間分割塊單位檢索信息及時(shí)間分割塊單位檢索信息組合、能夠更細(xì)致地進(jìn)行希望場面的檢索。
例如，能夠按下述形式實(shí)行活動(dòng)圖像檢索。即選擇整體移動(dòng)大的場面，凝縮成圖像中央部分有移動(dòng)特別激烈部分的場面，進(jìn)一步將凝縮的各場面內(nèi)移動(dòng)特別激烈的畫面作為主畫面取出。
這樣，通過本實(shí)施方式的裝置，指定多方面條件，根據(jù)圖像移動(dòng)等圖像特征，能夠有效地檢索希望場面的圖像。也會(huì)縮短檢索所需時(shí)間。
上述實(shí)施方式只不過是實(shí)施本發(fā)明的一例。此外，還可以對這些裝置進(jìn)行種種變形。
例如，在該實(shí)施方式的裝置中，通過解析部101對活動(dòng)圖像數(shù)據(jù)自動(dòng)進(jìn)行信號(hào)解析，找出場面變換點(diǎn)。但是本發(fā)明不限于此，例如，操作員看活動(dòng)圖像，靠操作員主觀，解析活動(dòng)圖像結(jié)構(gòu)，可以在場面分割位置附上標(biāo)記。這種場合解析部101同樣在解析活動(dòng)圖像數(shù)據(jù)，但此時(shí)，是看著活動(dòng)圖像數(shù)據(jù)上附的標(biāo)記，將活動(dòng)圖像分割為場面的。
在上述實(shí)施方式中，使用了移動(dòng)補(bǔ)償預(yù)測符號(hào)化時(shí)的移動(dòng)向量畫面內(nèi)頻度信息，作為畫面摘要信息的頻度信息166。但是，該發(fā)明不限于此，作為頻度信息，也可以使用各符號(hào)化塊預(yù)測方式畫面內(nèi)頻度信息。
另外，作為摘要信息，除上述外，也可以采用使用畫面內(nèi)移動(dòng)向量總和或標(biāo)準(zhǔn)偏差、原圖像信號(hào)或彳復(fù)號(hào)圖像信號(hào)計(jì)算的畫面內(nèi)平均輝度值或平均色差值等。
檢索方法及順序不限于這里所示組合。也可以改變所選候補(bǔ)的凝縮順序。另外，還因生成的檢索信息不同，檢索方法及其順序發(fā)生變化。
再如，在上述實(shí)施方式的裝置中，作為空間分割塊，使用了將1畫面分割成2×2＝4個(gè)分割塊的整個(gè)1場面集合。分割個(gè)數(shù)不限于4個(gè)。比如，如圖17所示，也可以進(jìn)行4×4、8×8或更多的分割。4×4分割時(shí)，以百分比表示的空間分割塊單位檢索信息為P1至P15。P16為100％減去其它空間分割塊檢索信息之和得到的。8×8分割時(shí)，以百分比表示的空間分割塊單位檢索信息為P1到P63。P64也是100％減去其它空間分割塊檢索信息之和得到的。
這樣，可以選擇使用多種分割方法的一種。這時(shí)，由按照所選個(gè)數(shù)(可以稱為“析像度”)分割的分割塊構(gòu)成空間分割塊，分別求其檢索信息。進(jìn)一步，在記錄檢索信息時(shí)，加于場面單位檢索信息和取決于所選析像度的空間分割塊單位檢索信息，將圖18表示該值與分割數(shù)的對應(yīng)關(guān)系的分割數(shù)指定標(biāo)志附加于檢索信息。分割數(shù)指定標(biāo)志如為“0”，記錄{P1、P2、P3}；如為“1”，記錄{P1、P2、……、P15}；如為“2”，記錄{P1、P2、……、P63}；如為“3”，記錄{P1、P2、……、P256}的空間分割塊單位檢索信息。
這樣，由于能夠指定多種空間分割塊析像度，產(chǎn)生如下效果。
首先，在想知道圖像中上下左右大略圖像移動(dòng)分布這種只要求比較簡易檢索的數(shù)據(jù)庫中，使用2×2等小分割數(shù)?？梢钥刂茩z索信息的記錄量。
在想抽出圖像持定部分或分離的兩部分中移動(dòng)大的場面這種請求頻繁的數(shù)據(jù)庫中，使用8×8等比較大的分割數(shù)。可以實(shí)現(xiàn)高功能檢索。高析像度檢索信息含有低析像度檢索信息，因此，需要低析像度檢索時(shí)，也無須重復(fù)持有低析像度檢索信息。
在以上說明的實(shí)施方式中，象2×2、4×4及8×8那樣，縱方向分割數(shù)與橫方向分割數(shù)相等且都是2的乘方。當(dāng)選用這樣的分割數(shù)時(shí)，在記錄分割析像度不同的空間分割塊單位檢索信息的數(shù)據(jù)庫中也可以在檢索信息之間對應(yīng)記入。另外，還可以比較不同分割析像度間的檢索信息。
再如圖19所示，可以分級(jí)記錄多種析象度的空間分割塊單位檢索信息。例如，場面檢索信息包含場面單位檢索信息200、2×2分割的空間分割塊單位檢索信息202、4×4分割的空間分割塊單位檢索信息204和8×8分割的空間分割塊單位檢索信息206。
在該分級(jí)結(jié)構(gòu)中，某級(jí)空間分割塊單位檢索信息用高一級(jí)析像度的4個(gè)空間塊單位檢索信息表示。因此，各級(jí)中，即使4個(gè)空間分割塊單位檢索信息中有一個(gè)沒記錄，也能得到檢索所需全部信息。
圖19示例的檢索信息包含的析像度檢索信息與按圖17所示8×8分割畫面記錄的以形成的空間分割塊為單位的檢索信息相同。另一方面，如果根據(jù)圖19所示檢索信息，有能夠容易得到其它析像度檢索信息的優(yōu)點(diǎn)。
在以上說明的實(shí)施方式中，將場面內(nèi)全畫面分割成2×2、4×4、8×8等那樣的n×n配置，形成空間分割塊。但是，根據(jù)本發(fā)明，畫面分割方法不限于此。例如，也可以按圖20至圖24所示形式分割畫面，以得到的空間分割塊為單位，生成檢索信息。在圖20至圖24的示例中，將場面內(nèi)全畫面分割為2的乘方(2n)個(gè)(在圖20，n＝2；在圖21，n＝3；在圖22，n＝4；在圖23，n＝5；在圖24，n＝6)。使用這樣的分割方法，也能生成與上述實(shí)施方式的裝置所得的實(shí)現(xiàn)檢索功能的相同的檢索信息。
按照圖20～圖24所示畫面分割方法，與上述記載的實(shí)施方式一樣，不同析像度的檢索信息間的對應(yīng)記入容易。另外，不同析像度的檢索信息可容易互相比較。
另外，圖5示例中，例如，將畫面162N作為一個(gè)時(shí)間分割塊164N，求摘要信息。但是，本發(fā)明不限于此實(shí)現(xiàn)例。比如，一個(gè)時(shí)間分割塊可以包含2個(gè)以上的畫面。還有，可以對各畫面進(jìn)行二次抽樣，生成副畫面，一時(shí)間分割塊包含一個(gè)或多個(gè)副畫面。另外，還可以適當(dāng)間撥場面內(nèi)的畫面，使用間撥的各畫面的摘要信息。
另外，圖6示例或圖8示例中，使用空間分割塊所包含的全部分割塊，求空間分割塊的摘要信息。但是，本發(fā)明不限于此實(shí)現(xiàn)例。不一定需要使用空間分割塊內(nèi)所有分割塊對應(yīng)的圖像數(shù)據(jù)，可以適當(dāng)間撥分割塊或分割塊內(nèi)的圖像數(shù)據(jù)，生成空間分割塊的摘要信息。
還有，參照圖5及圖6說明的時(shí)間分割塊單位或空間分割塊單位檢索信息或者場面單位檢索信息生成時(shí)，為了排除拍活動(dòng)圖像攝像機(jī)的移動(dòng)對背景移動(dòng)的影響，可以補(bǔ)償相當(dāng)于攝像機(jī)移動(dòng)的移動(dòng)向量份，生成檢索信息。
另外，在上述實(shí)施方式中，活動(dòng)圖像檢索信息記錄裝置40和活動(dòng)圖像檢索裝置50是分開的不同裝置。而且，檢索信息通過記錄媒體107，由活動(dòng)圖像檢索信息記錄裝置40給予活動(dòng)圖像檢索裝置50。代之，可以將圖3所示第1檢索信息生成部102、第2檢索信息生成部103、第3檢索信息生成部104生成的各種檢索信息，與解析部101輸出的活動(dòng)圖像結(jié)構(gòu)信息一起，直接給予圖10的檢索信息管理部502。這時(shí)的檢索處理稱為所謂實(shí)時(shí)檢索。
在上述實(shí)施方式中，分割畫面的分割塊可以與符號(hào)化塊一致。所謂符號(hào)化塊可以重新定義其它適當(dāng)大小的塊。在上述實(shí)施方式中，分割塊為對稱形且分割塊的配置也對稱。但是，重新定義分割塊時(shí)，塊不必是對稱形。另外，關(guān)于塊的配置也不必對稱。還有，也可以適當(dāng)間撥圖像面內(nèi)。即，圖像內(nèi)可以有不含分割塊的范圍。另外，分割塊一部分可以重復(fù)。即，圖像內(nèi)可以有多個(gè)分割塊所包含的范圍。
在上述實(shí)施方式中，圖3所示第3檢索信息生成部104接受第1檢索信息生成部102輸出的摘要信息及第2檢索信息生成部103輸出的摘要信息，生成整個(gè)場面相關(guān)的摘要信息。但是，本發(fā)明不限于這樣的實(shí)現(xiàn)例。比如，第3檢索信息生成部104可以根據(jù)輸入的圖像數(shù)據(jù)直接生成整個(gè)場面相關(guān)的摘要信息。
另外，在上述實(shí)施方式中，以物理定義的一場面為單位求各種摘要信息(檢索信息)。但是，檢索信息不一定需要以場面為單位求。比如，可以將一個(gè)場面多次分割的副場面為單位，求檢索信息。即，“場面”一詞還有“副場面”的意思。反之，也可以以多個(gè)場面構(gòu)成的復(fù)合場面為單位，求檢索信息。即“場面”一詞還有“多個(gè)場面的集合”的意思。
另外，在上述實(shí)施方式中，對一個(gè)活動(dòng)圖像數(shù)據(jù)，生成記錄檢索信息，實(shí)行檢索，但本發(fā)明不限于此實(shí)現(xiàn)例。即，還設(shè)想以多個(gè)活動(dòng)圖像數(shù)據(jù)為檢索對象，生成記錄檢索信息，從多個(gè)活動(dòng)圖像數(shù)據(jù)中檢索希望的場面或畫面。
作為其一例，考慮一下圖25所示，從作為多個(gè)場面各自獨(dú)立的活動(dòng)圖像數(shù)據(jù)存儲(chǔ)的圖像數(shù)據(jù)庫檢索活動(dòng)圖像。用最近能拍攝活動(dòng)圖像的數(shù)字?jǐn)z像機(jī)等拍攝活動(dòng)圖像時(shí)，表示所拍各活動(dòng)圖像即從1次錄像開始到錄像停止的1場面的活動(dòng)圖像數(shù)據(jù)作為各自獨(dú)立的數(shù)據(jù)文件生成。因此，也很容易想起圖25所示的圖像數(shù)據(jù)庫。
對這樣的圖像數(shù)據(jù)庫，通過圖3所示活動(dòng)圖像檢索信息記錄裝置40生成檢索信息。這時(shí)，輸入的活動(dòng)圖像數(shù)據(jù)為數(shù)據(jù)庫中存在的多個(gè)活動(dòng)圖像數(shù)據(jù)。因?yàn)楦窕顒?dòng)圖像數(shù)據(jù)已經(jīng)分解為場面(一個(gè)活動(dòng)圖像數(shù)據(jù)分別只含有一個(gè)場面)，所以不需要活動(dòng)圖像結(jié)構(gòu)信息。從而，無須由解析部101進(jìn)行活動(dòng)圖像結(jié)構(gòu)解析。第1、第2、第3檢索信息生成部102、103、104根據(jù)活動(dòng)圖像數(shù)據(jù)分別生成畫面(時(shí)間分割塊)、空間分割塊、整個(gè)場面的摘要信息。第4檢索信息生成部105將這些摘要信息配置成規(guī)定形式，生成活動(dòng)圖像的檢索信息。記錄部106接受各活動(dòng)圖像數(shù)據(jù)和各活動(dòng)圖像對應(yīng)的檢索信息，將各活動(dòng)圖像數(shù)據(jù)與檢索信息的對應(yīng)信息附加于某一方或雙方，或者作為其它數(shù)據(jù)，將檢索信息和對應(yīng)信息記錄于記錄媒體107。也可以把記錄媒體107設(shè)在原來的圖像數(shù)據(jù)庫內(nèi)。另外，各檢索信息可以分別獨(dú)立記錄，也可以作為圖像數(shù)據(jù)庫對應(yīng)的檢索信息統(tǒng)一記錄。
另外，由圖10所示活動(dòng)圖像檢索裝置根據(jù)這樣的圖像數(shù)據(jù)庫及生成記錄的檢索信息實(shí)行檢索。這時(shí)，讀出部501讀出的、檢索信息管理裝置502管理的是數(shù)據(jù)庫中存在的多個(gè)活動(dòng)圖像數(shù)據(jù)對應(yīng)的檢索信息，不需要各活動(dòng)圖像數(shù)據(jù)對應(yīng)的活動(dòng)圖像結(jié)構(gòu)信息。第1、第2、第3檢索實(shí)行部503、504、505分別使用對應(yīng)的檢索信息，檢出符合檢索請求的場面或畫面，輸出檢出的場面或畫面相關(guān)信息。數(shù)據(jù)管理部506及檢索控制部507的動(dòng)作與上述實(shí)施方式相同，得到檢索結(jié)果。
應(yīng)考慮到這次公布的實(shí)施方式在所有方面都是例示，是不受限制的。本發(fā)明的范圍不是上述說明，打算通過權(quán)利要求表示，含有與權(quán)利要求同等意義及范圍內(nèi)的一切變更。
如上所述，本發(fā)明相關(guān)的活動(dòng)圖像檢索信息記錄裝置及活動(dòng)圖像檢索裝置不是以時(shí)間而是以空間分割場面的空間分割塊為單位，生成場面檢索信息，根據(jù)該檢索信息檢索場面，因此，適用于根據(jù)在整個(gè)該場面觀測到的空間特征、有效檢索活動(dòng)圖像中希望場面的系統(tǒng)。
權(quán)利要求
1.一種活動(dòng)圖像檢索信息記錄裝置(40)，將用于檢索由活動(dòng)圖像數(shù)據(jù)所表示、由在時(shí)間軸上的1以上的部分活動(dòng)圖像(140、142、144、146、160)所組成的活動(dòng)圖像的檢索信息記錄于記錄媒體，包含檢索信息生成部(102、103、104、105)，根據(jù)上述活動(dòng)圖像數(shù)據(jù)，與上述1以上的部分活動(dòng)圖像分別對應(yīng)，生成檢索信息；記錄部(106)，將上述檢索信息同該檢索信息與上述活動(dòng)圖像數(shù)據(jù)的對應(yīng)信息一起記錄于記錄媒體，其中上述檢索信息生成部(102、103、104、105)，包含用于生成通過對上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)進(jìn)行空間分割所得到的1以上的空間部分活動(dòng)圖像的摘要信息(188)的第1摘要信息生成單元(103)。
2.權(quán)利要求1記載的活動(dòng)圖像信息記錄裝置，其中上述時(shí)間軸上的1以上的部分活動(dòng)圖像(140、142、144、146、160)，由上述活動(dòng)圖像數(shù)據(jù)所表示的活動(dòng)圖像在時(shí)間軸上被分割，包含輸出表示上述時(shí)間軸上的1以上的部分活動(dòng)圖像的上述活動(dòng)圖像數(shù)據(jù)中的位置的活動(dòng)圖像結(jié)構(gòu)信息的活動(dòng)圖像結(jié)構(gòu)信息輸出部(101)，上述檢索信息生成部(102、103、104、105)根據(jù)上述活動(dòng)圖像結(jié)構(gòu)信息和上述活動(dòng)圖像數(shù)據(jù)，生成上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所對應(yīng)的檢索信息，上述記錄部(106)將上述檢索信息和上述活動(dòng)圖像結(jié)構(gòu)信息同該檢索信息與上述活動(dòng)圖像數(shù)據(jù)的對應(yīng)信息一起記錄于記錄媒體。
3.權(quán)利要求1記載的活動(dòng)圖像檢索信息記錄裝置(40)，其中上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像，包含1或多個(gè)時(shí)間單位圖像(162A～162N)，上述第1摘要信息生成單元(103)，包含用于將上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)的上述1或多個(gè)時(shí)間單位圖像(162A～162N)全部按同一方式分割為多個(gè)空間分割塊，并從上述1或多個(gè)時(shí)間單位圖像(162A～162N)的同一位置的各個(gè)上述空間分割塊所對應(yīng)的圖像數(shù)據(jù)、生成上述空間部分活動(dòng)圖像的摘要信息的空間分割單元(103)。
4.權(quán)利要求3記載的活動(dòng)圖像檢索信息記錄裝置，其中上述空間分割單元(103)，包含用于通過將上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)的各個(gè)上述1或多個(gè)時(shí)間單位圖像(162A～162N)，在上述單位圖像上所定義的2個(gè)方向上，分割為同一預(yù)定數(shù)，來將上述時(shí)間單位圖像(162A～162N)全部分割為多個(gè)空間分割塊，從上述1或多個(gè)時(shí)間單位圖像(162A～162N)的各自同一位置的上述空間分割塊對應(yīng)的圖像數(shù)據(jù)，生成上述空間部分活動(dòng)圖像的摘要信息的單元(103)。
5.權(quán)利要求3記載的活動(dòng)圖像檢索信息記錄裝置，其中上述空間分割單元(103)，包含用于通過將上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)的各個(gè)上述1或多個(gè)時(shí)間單位圖像(162A～162N)，分割為預(yù)定的2的乘方數(shù)，來將上述時(shí)間單位圖像(162A～162N)全部分割為多個(gè)空間分割塊，從上述1或多個(gè)時(shí)間單位圖像(162A～162N)的各自同一位置的上述空間分割塊對應(yīng)的圖像數(shù)據(jù)，生成上述空間部分活動(dòng)圖像的摘要信息的單元(103)。
6.權(quán)利要求5記載的活動(dòng)圖像檢索信息記錄裝置，其中上述檢索信息生成部(102、103、104、105)，還包含用于生成通過以上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所包含的上述1或多個(gè)時(shí)間單位圖像(162A～162N)的1或多個(gè)為單位來時(shí)間分割上述部分活動(dòng)圖像，所得到的1以上的時(shí)間部分活動(dòng)圖像的摘要信息的第2摘要信息生成單元(102)。
7.權(quán)利要求6記載的活動(dòng)圖像檢索信息記錄裝置，其中上述1或多個(gè)時(shí)間單位圖像(162A～162N)分別含有1畫面圖像。
8.權(quán)利要求7記載的活動(dòng)圖像檢索信息記錄裝置，其中上述檢索信息生成部(102、103、104、105)還包含，從上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所包含的全部上述畫面，生成上述部分活動(dòng)圖像的摘要信息的第3摘要信息生成單元(104)。
9.權(quán)利要求4記載的活動(dòng)圖像檢索信息記錄裝置，其中上述檢索信息生成部(102、103、104、105)，還包含用于生成通過以上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所包含的上述1或多個(gè)時(shí)間單位圖像(162A～162N)的1或多個(gè)為單位來時(shí)間分割上述部分活動(dòng)圖像，所得到的1以上的時(shí)間部分活動(dòng)圖像的摘要信息的第2摘要信息生成單元(102)。
10.權(quán)利要求9記載的活動(dòng)圖像檢索信息記錄裝置，其中上述1或多個(gè)時(shí)間單位圖像(162A～162N)分別含有1畫面圖像。
11.權(quán)利要求10記載的活動(dòng)圖像檢索信息記錄裝置，其中上述檢索信息生成部(102、103、104、105)還包含，從上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所包含的全部上述畫面，生成上述部分活動(dòng)圖像的摘要信息的第3摘要信息生成單元(104)。
12.權(quán)利要求3記載的活動(dòng)圖像檢索信息記錄裝置(40)，其中上述檢索信息生成部(102、103、104、105)，還包含用于生成通過以上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所包含的上述1或多個(gè)時(shí)間單位圖像(162A～162N)的1或多個(gè)為單位來時(shí)間分割上述部分活動(dòng)圖像，所得到的1以上的時(shí)間部分活動(dòng)圖像的摘要信息的第2摘要信息生成單元(102)。
13.權(quán)利要求12記載的活動(dòng)圖像檢索信息記錄裝置(40)，其中上述1或多個(gè)時(shí)間單位圖像(162A～162N)分別含有1畫面圖像。
14.權(quán)利要求13記載的活動(dòng)圖像檢索信息記錄裝置(40)，其中上述檢索信息生成部(102、103、104、105)還包含，從上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所包含的全部上述畫面，生成上述部分活動(dòng)圖像的摘要信息的第3摘要信息生成單元(104)。
15.權(quán)利要求1記載的活動(dòng)圖像檢索信息記錄裝置(40)，其中上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)，包含1或多個(gè)時(shí)間單位圖像(162A～162N)，上述檢索信息生成部(102、103、104、105)，還包含用于生成通過以上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所包含的上述1或多個(gè)時(shí)間單位圖像(162A～162N)的1或多個(gè)為單位來時(shí)間分割上述部分活動(dòng)圖像，所得到的1以上的時(shí)間部分活動(dòng)圖像的摘要信息的第2摘要信息生成單元(102)。
16.權(quán)利要求15記載的活動(dòng)圖像檢索信息記錄裝置(40)，其中上述1或多個(gè)時(shí)間單位圖像(162A～162N)分別含有1畫面圖像。
17.權(quán)利要求16記載的活動(dòng)圖像檢索信息記錄裝置(40)，其中上述檢索信息生成部(102、103、104、105)還包含，從上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所包含的全部上述畫面，生成上述部分活動(dòng)圖像的摘要信息的第3摘要信息生成單元(104)。
18.權(quán)利要求15記載的活動(dòng)圖像檢索信息記錄裝置(40)，其中上述檢索信息生成部(102、103、104、105)還包含，從上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所包含的全部上述時(shí)間單位圖像(162A～162N)，生成上述部分活動(dòng)圖像的摘要信息的第3摘要信息生成單元(104)。
19.權(quán)利要求5記載的活動(dòng)圖像檢索信息記錄裝置(40)，其中上述檢索信息生成部(102、103、104、105)還包含，從上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所包含的全部上述時(shí)間單位圖像(162A～162N)，生成上述部分活動(dòng)圖像的摘要信息的第3摘要信息生成單元(104)。
20.權(quán)利要求4記載的活動(dòng)圖像檢索信息記錄裝置(40)，其中上述檢索信息生成部(102、103、104、105)還包含，從上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所包含的全部上述時(shí)間單位圖像(162A～162N)，生成上述部分活動(dòng)圖像的摘要信息的第3摘要信息生成單元(104)。
21.權(quán)利要求1記載的活動(dòng)圖像檢索信息記錄裝置(40)，其中上述檢索信息生成部(102、103、104、105)還包含，從上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所包含的全部上述時(shí)間單位圖像(162A～162N)，生成上述部分活動(dòng)圖像的摘要信息的第3摘要信息生成單元(104)。
22.權(quán)利要求1記載的活動(dòng)圖像檢索信息記錄裝置(40)，其中上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)，包含1或多個(gè)時(shí)間單位圖像(162A～162N)，上述檢索信息生成部(102、103、104、105)還包含，從上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)所包含的全部上述時(shí)間單位圖像(162A～162N)，生成上述部分活動(dòng)圖像的摘要信息的第3摘要信息生成單元(104)。
23.一種活動(dòng)圖像檢索裝置(50)，是用于利用構(gòu)成活動(dòng)圖像的時(shí)間軸上的1以上的部分活動(dòng)圖像(140、142、144、146、160)各自對應(yīng)的檢索信息來檢索希望的圖像，上述檢索信息對應(yīng)著表示上述活動(dòng)圖像的活動(dòng)圖像數(shù)據(jù)，上述檢索信息包含通過空間分割上述時(shí)間軸上的1以上的各個(gè)部分活動(dòng)圖像(140、142、144、146、160)，所得到的1以上的空間部分活動(dòng)圖像的摘要信息(188)，其包含用于讀出并管理上述檢索信息的信息管理單元(501、502)；連接于上述信息管理單元，用于響應(yīng)以外部給予的時(shí)間軸上的部分活動(dòng)圖像(140、142、144、146、160)為檢索單位的第1檢索請求，并采用上述檢索信息所包含的上述空間部分活動(dòng)圖像的摘要信息，來檢索符合上述第1檢索請求的時(shí)間軸上的部分活動(dòng)圖像(140、142、144、146、160)的第1部分活動(dòng)圖像檢索單元(504)。
24.權(quán)利要求23記載的活動(dòng)圖像檢索裝置(50)，其中上述時(shí)間軸上的1以上的部分活動(dòng)圖像(140、142、144、146、160)分別包含時(shí)間軸上的1以上的單位圖像(162A～162N)，上述檢索信息，還包含通過以上述時(shí)間軸上的1以上的部分活動(dòng)圖像(140、142、144、146、160)所包含的上述時(shí)間軸上的1以上的單位圖像(162A～162N)的1或多個(gè)為單位，時(shí)間分割上述部分活動(dòng)圖像所得到的1以上的時(shí)間部分活動(dòng)圖像的摘要信息，上述活動(dòng)圖像檢索裝置(50)，還包含連接于上述信息管理單元(501、502)，用于響應(yīng)以外部給予的時(shí)間軸上的部分活動(dòng)圖像(140、142、144、146、160)為檢索單位的第2檢索請求，采用上述檢索信息所包含的上述時(shí)間軸上的單位圖像(162A～162N)的1或多個(gè)所組成的上述1以上的時(shí)間部分活動(dòng)圖像的摘要信息，來檢索符合上述第2檢索請求的時(shí)間軸上的部分活動(dòng)圖像(140、142、144、146、160)的第2部分活動(dòng)圖像檢索單元(505)。
25.權(quán)利要求24記載的活動(dòng)圖像檢索裝置(50)，其中上述檢索信息還包含分別以上述時(shí)間軸上的1以上的部分活動(dòng)圖像(140、142、144、146、160)為單位的摘要信息，上述活動(dòng)圖像檢索裝置(50)，還包含連接于上述信息管理單元(501、502)，用于響應(yīng)以外部給予的時(shí)間軸上的部分活動(dòng)圖像(140、142、144、146、160)為檢索單位的第3檢索請求，采用上述檢索信息所包含的上述時(shí)間軸上的部分活動(dòng)圖像(140、142、144、146、160)為單位的摘要信息，來檢索符合上述第3檢索請求的時(shí)間軸上的部分活動(dòng)圖像(140、142、144、146、160)的第3部分活動(dòng)圖像檢索單元(503)。
26.權(quán)利要求23記載的活動(dòng)圖像檢索裝置(50)，其中上述檢索信息還包含分別以上述時(shí)間軸上的1以上的部分活動(dòng)圖像(140、142、144、146、160)為單位的摘要信息，上述活動(dòng)圖像檢索裝置(50)，還包含連接于上述信息管理單元(501、502)，用于響應(yīng)以外部給予的時(shí)間軸上的部分活動(dòng)圖像(140、142、144、146、160)為檢索單位的第2檢索請求，采用上述檢索信息所包含的上述時(shí)間軸上的部分活動(dòng)圖像(140、142、144、146、160)為單位的摘要信息，來檢索符合上述第2檢索請求的時(shí)間軸上的部分活動(dòng)圖像(140、142、144、146、160)的第2部分活動(dòng)圖像檢索單元(503)。
全文摘要
將由活動(dòng)圖像數(shù)據(jù)表示、用于檢索由時(shí)間軸上的1以上的部分活動(dòng)圖像(140、142、144、146、160)構(gòu)成的活動(dòng)圖像的檢索信息記錄于記錄媒體的活動(dòng)圖像檢索信息記錄裝置(40),包括:基于活動(dòng)圖像數(shù)據(jù),與1以上的部分活動(dòng)圖像分別對應(yīng)生成檢索信息的檢索信息生成部(102、103、104、105);將檢索信息和該檢索信息與活動(dòng)圖像數(shù)據(jù)的對應(yīng)信息一起記錄于記錄媒體的記錄部(106)。檢索信息生成部(102、103、104、105)包含用于生成通過將時(shí)間軸上的1以上的部分活動(dòng)圖像(140、142、144、146、160)分別空間分割所得到的1以上的空間部分活動(dòng)圖像的摘要信息(188)的第1摘要信息生成單元(103)。
文檔編號(hào)H04N9/82GK1371502SQ00812176
公開日2002年9月25日 申請日期2000年6月29日 優(yōu)先權(quán)日1999年6月30日
發(fā)明者渡部秀一 申請人:夏普公司