專利名稱：圖像處理設(shè)備和圖像處理方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像處理設(shè)備和圖像處理方法。
技術(shù)背景諸如人物、物體或風(fēng)景之類的主題利用攝像裝置來拍攝，拍攝的靜止圖像利用JPEG標(biāo)準(zhǔn)，JPEG 2000標(biāo)準(zhǔn)等壓縮，以便保存在記錄 介質(zhì)中。包含在攝像裝置中的內(nèi)部存儲器，可分離地安裝到攝像裝置 上的可移動記錄介質(zhì)等可用作記錄介質(zhì)。用戶隨后使用計算機把保存在這樣的記錄介質(zhì)中的靜止圖像數(shù) 據(jù)集體移動(歸檔)到諸如硬盤或光盤之類的大容量記錄介質(zhì)。此外， 近年來，隨著網(wǎng)絡(luò)技術(shù)的發(fā)展，諸如高帶寬線路或高速線路之類的寬 帶線路日益普及。用戶利用這樣的寬帶線路通過電子郵件傳送數(shù)據(jù)量 較大的靜止圖像，或者把圖像上傳到由個人或小團(tuán)體操作和更新的普 通網(wǎng)站和日記類網(wǎng)站(博客)?？紤]到這樣的各種使用情形，通過依據(jù)拍攝日期對圖像分類，用 戶使用圖像管理軟件應(yīng)用程序按照易于搜索和易于瀏覽的方式管理 保存在大容量記錄介質(zhì)中的大量靜止圖像。按照需要，用戶使用圖像 編輯軟件應(yīng)用程序編輯目標(biāo)靜止圖像。存在能夠把可通過數(shù)字地面廣播/數(shù)字衛(wèi)星廣播，或者通過網(wǎng)絡(luò) 傳輸獲得的節(jié)目保存在諸如硬盤或光盤之類的大容量記錄介質(zhì)中，從 而便于用戶隨時欣賞所希望的節(jié)目的計算機或機頂盒。在這樣的環(huán)境下，可能存在用戶從保存的多個節(jié)目中搜索特定的 節(jié)目以便只觀看特定的目標(biāo)節(jié)目中的特定情節(jié)的情況。這種情況下， 通過記錄日期和節(jié)目類別(體育、戲劇、新聞等)以供顯示，多個節(jié)目 被分類，并在縮略圖中顯示相應(yīng)節(jié)目的相應(yīng)情節(jié)的第一幕，從而使用戶能夠選擇他或她所希望的情節(jié)。從而，隨著靜止圖像數(shù)據(jù)或記錄的節(jié)目數(shù)據(jù)的數(shù)目的增大，用戶 難以從大量的數(shù)據(jù)中找出特定的數(shù)據(jù)。鑒于此，已經(jīng)提出了涉及用戶友好顯示界面的技術(shù)(例如，參見專利文獻(xiàn)l-3)。除了專利文獻(xiàn)l-3的 技術(shù)之外，已知一種分析靜止圖像本身，并按照通過所述分析獲得的 靜止圖像的特征量，分類地在顯示屏幕上布置靜止圖像的技術(shù)。專利文獻(xiàn)l: WO2000/033455專利文獻(xiàn)2: WO2000/033570專利文獻(xiàn)3: WO2000/033572但是，在靜止圖像數(shù)據(jù)或節(jié)目數(shù)據(jù)的數(shù)目變得極大的情況下，僅 僅依據(jù)拍攝日期、記錄日期、類別等對靜止圖像數(shù)據(jù)或節(jié)目數(shù)據(jù)分類， 并不足以實現(xiàn)用戶友好的顯示界面。此外，在待管理的數(shù)據(jù)是運動畫面(視頻數(shù)據(jù))的情況下，如何進(jìn) 行分類和顯示，以便實現(xiàn)用戶友好的顯示界面的技術(shù)尚未公開。另夕卜， 通過常規(guī)的顯示界面，用戶一直難以直觀地識別整個運動畫面具有什 么特征，或者用戶希望的特定情景位于整個運動畫面中的何處。發(fā)明內(nèi)容鑒于上述各點，做出了本發(fā)明，本發(fā)明的一個目的是提供一種便 于視頻數(shù)據(jù)的搜索或管理的圖像處理設(shè)備和圖像處理方法。為了解決上面的問題，按照本發(fā)明的一個方面，提供一種圖像處 理設(shè)備，其特征在于包括顯示空間生成裝置，用于生成由顯示軸定 義的顯示空間，所述顯示軸由代表視頻數(shù)據(jù)或音頻數(shù)據(jù)的特征的特征 參數(shù)，或者與視頻數(shù)據(jù)或音頻數(shù)據(jù)聯(lián)系的關(guān)聯(lián)參數(shù)確定；轉(zhuǎn)換裝置， 用于把由特征參數(shù)指定的特征值或者由關(guān)聯(lián)參數(shù)指定的關(guān)聯(lián)值轉(zhuǎn)換 成與顯示空間上的顯示軸上的位置對應(yīng)的坐標(biāo)參數(shù)；和顯示裝置，用 于按照與轉(zhuǎn)換的坐標(biāo)參數(shù)對應(yīng)的位置的變化，通過顯示空間上的顯示 窗口顯示視頻數(shù)據(jù)。此外，按照本發(fā)明的另一方面，提供一種圖像處理方法，其特征在于包括顯示空間生成步驟，用于生成由顯示軸定義的顯示空間， 所述顯示軸由代表視頻數(shù)據(jù)或音頻數(shù)據(jù)的特征的特征參數(shù)，或者與視 頻數(shù)據(jù)或音頻數(shù)據(jù)聯(lián)系的關(guān)聯(lián)參數(shù)確定；轉(zhuǎn)換步驟，用于把由特征參 數(shù)指定的特征值或者由關(guān)聯(lián)參數(shù)指定的關(guān)聯(lián)值轉(zhuǎn)換成與顯示空間上 的顯示軸上的位置對應(yīng)的坐標(biāo)參數(shù)；和顯示步驟，用于按照與轉(zhuǎn)換的 坐標(biāo)參數(shù)對應(yīng)的位置的變化，通過顯示空間上的顯示窗口顯示視頻數(shù) 據(jù)。按照本發(fā)明，可以易于理解和用戶友好的形式向用戶顯示視頻數(shù) 據(jù)，從而使用戶能夠直觀地識別視頻數(shù)據(jù)的特征，這便于視頻數(shù)據(jù)的 搜索或管理。


圖1是表示按照本發(fā)明的一個實施例的圖像處理設(shè)備的配置的 示意方框圖。圖2是表示按照本發(fā)明的實施例的編輯屏幕的配置的示意圖。 圖3是表示一個圖像組的示意圖。圖4是表示其中微處理器和GPU實現(xiàn)視頻數(shù)據(jù)的顯示功能的第一配置例子的示意方框圖。圖5是表示其中微處理器和GPU實現(xiàn)視頻數(shù)據(jù)的顯示功能的第二配置例子的示意方框圖。圖6是表示其中微處理器和GPU實現(xiàn)視頻數(shù)據(jù)的顯示功能的第三配置例子的示意方框圖。圖7是表示元數(shù)據(jù)提取部分的配置的示意方框圖。圖8是用于解釋由平均值計算部分執(zhí)行的處理的示意圖。圖9是用于解釋由運動檢測部分執(zhí)行的處理的示意圖。圖IO是表示運動檢測部分的另一配置的示意方框圖。圖ll是用于解釋由運動信息計算部分執(zhí)行的處理的示意圖。圖12是表示頻率分析部分的配置的示意方框圖。圖13是用于解釋密度信息計算部分執(zhí)行的處理的示意圖。圖14是用于解釋HLS空間的示意圖。 圖15是表示元數(shù)據(jù)文件的內(nèi)容的表格。圖16是表示構(gòu)成視頻數(shù)據(jù)的畫面(靜止圖像)的顯示處理程序的 流程圖。圖17(A)-17(G)都是表示三維顯示空間中的顯示軸的示意圖。 圖18是表示位于DCT水平頻率軸附近的圖像組的放大顯示例子 的示意圖。圖19是表示位于R軸附近的圖像組的放大顯示例子的示意圖。圖20是表示位于G軸附近的圖像組的放大顯示例子的示意圖。圖21是表示視頻數(shù)據(jù)的顯示處理程序的流程圖。圖22是表示多個視頻數(shù)據(jù)的顯示處理程序的流程圖。圖23是用于解釋顯示窗口的運動的示意圖。圖24是表示坐標(biāo)補償處理程序的流程圖。圖25是表示場景變化的示意圖。圖26是用于解釋場景變化時顯示窗口的移動的示意圖。圖27是表示再定位處理程序的流程圖。圖28是表示再定位前后的圖像組的示意透視圖。圖29(A)-29(C)是用于解釋組顯示處理的示意圖。圖30是表示組顯示處理程序的流程圖。圖31是表示當(dāng)在使顯示窗口保持固定的情況下，移動三維顯示 空間時獲得的顯示例子(l)的示意圖。圖32是表示當(dāng)在使顯示窗口保持固定的情況下，移動三維顯示 空間時獲得的顯示例子(2)的示意圖。圖33是表示當(dāng)在使顯示窗口保持固定的情況下，移動三維顯示 空間時獲得的顯示例子(3)的示意圖。圖34是表示當(dāng)使顯示窗口保持固定時執(zhí)行的視頻數(shù)據(jù)的顯示處 理程序的流程圖。圖35是表示放大的顯示窗口中的顯示例子的示意圖。圖36是表示整個軌跡顯示模式下的顯示圖案(pattern)(l)的示意圖。圖37是表示軌跡顯示處理程序的流程圖。 圖38是表示過去側(cè)的軌跡的示意圖。 圖39是表示未來側(cè)的軌跡的示意圖。 圖40是表示整個軌跡的示意圖。圖41是表示整個軌跡顯示模式下的顯示圖案(2)的示意圖。圖42是表示整個軌跡顯示模式下的顯示圖案(3)的示意圖。圖43是表示整個軌跡顯示模式下的顯示圖案(4)的示意圖。圖44是表示利用典型場景的軌跡顯示例子的示意圖。圖45是包括場景變化的軌跡顯示例子的示意圖。圖46(A)-46(C)均為表示移動速度控制例子的示意圖。圖47是表示包括時間代碼的軌跡顯示例子的示意圖。圖48(A)-48(C)是用于解釋顯示窗口控制處理的示意圖。圖49是用于解釋按照本發(fā)明的另 一 實施例的二維顯示空間的示意圖。圖50是表示按照本發(fā)明的另一實施例的四維顯示空間的示意圖。圖51是用于解釋按照另一實施例，與水平滾動條的移動同時工 作的顯示窗口移動顯示處理的示意圖。圖52是用于解釋可適用的應(yīng)用的示意圖。 圖53是表示當(dāng)利用關(guān)聯(lián)參數(shù)時獲得的顯示例子(l)的示意圖。 圖54是表示當(dāng)利用關(guān)聯(lián)參數(shù)時獲得的顯示例子(2)的示意圖。 圖55是表示當(dāng)利用關(guān)聯(lián)參數(shù)時獲得的顯示例子(3)的示意圖。
具體實施方式
下面參考附圖，詳細(xì)說明本發(fā)明的實施例。 (l)圖像處理系統(tǒng)的配置如圖1中所示，附圖標(biāo)記l表示按照本發(fā)明的實施例的圖像處理 系統(tǒng)， 一般來說，其包括圖像處理設(shè)備2，存儲單元22和多個磁帶錄像機231 ~23n。圖像處理系統(tǒng)1被配置成通過圖像處理設(shè)備2，把記錄在錄像帶 上的部分或全部AV(音頻/視覺)數(shù)據(jù)作為剪輯裝入采用RAID(獨立磁 盤冗余陣列)技術(shù)的大容量存儲單元22中，或者把記錄在錄像帶上的 靜止圖像數(shù)據(jù)裝入存儲單元22中。此外，圖像處理系統(tǒng)l被配置成創(chuàng)建指定編輯內(nèi)容，以便通過按 照所希望的狀態(tài)連接裝入存儲單元22中的AV數(shù)據(jù)，獲得所希望的 編輯的視頻和音頻的編輯列表，此外按照創(chuàng)建的編輯列表實際執(zhí)行編 輯處理，并把獲得的AV數(shù)據(jù)作為新剪輯保存在存儲單元22中，或 者通過任意的磁帶錄像機231 ~ 23n把AV數(shù)據(jù)記錄在錄像帶上。這種情況下，在圖像處理設(shè)備1中，GPU4、 XDR(極速數(shù)據(jù) 率)-RAM 5和南橋6與微處理器3連接。硬盤驅(qū)動器7、 USB接口8 和音頻I/O編解碼器9與南橋6連接。揚聲器41與音頻I/O編解碼器 9連接。此外，鼠標(biāo)38、鍵盤39、磁帶錄像機231 ~23n、記錄設(shè)備22 和操作控制器37通過PCI總線15與南橋6連接。顯示器40與GPU 4連接。微處理器3是多核處理器，其中用于執(zhí)行基本程序，比如OS(操 作系統(tǒng))的通用主CPU核3M，通過內(nèi)部總線12與主CPU核3 M連 接的多個(這種情況下八個)RISC(精簡指令集計算機)型信號處理器 (下面稱為副CPU核)3SA 3SH，對具有例如256 [Mbyte]容量的 XDR-RAM5執(zhí)行存儲器控制的存儲控制器13，和管理在它自己與南 橋6之間的數(shù)據(jù)輸入和輸出的I/O (輸入/輸出)控制器14被集成在一 個芯片上。該微處理器3以例如4 [GHz]的工作頻率工作。圖像處理系統(tǒng)1的微處理器3主要起與現(xiàn)有的視頻標(biāo)準(zhǔn)，比如 MPEG-2或H.264/AVC(先進(jìn)音頻編碼)兼容的編解碼器的作用，并被 配置成把作為解碼處理的結(jié)果而獲得的視頻數(shù)據(jù)的重放圖像傳給 GPU4，改變視頻數(shù)據(jù)的重放圖像的諸如重放速度之類的設(shè)置(后面說 明)，把靜止圖像數(shù)據(jù)傳給GPU4，或者執(zhí)行物理模擬。特別地，在微處理器3中，八個副CPU核3SA 3SH充當(dāng)用于 通過對視頻數(shù)據(jù)編碼而獲得的視頻流的解碼器，并且能夠并行地解碼 HD(高清晰度)視頻流。被配置成執(zhí)行除由這八個副CPU核3SA ~ 3SH執(zhí)行的處理或管 理之外的處理或管理的主CPU核3M接收通過南橋6從鼠標(biāo)38、鍵 盤39或操作控制器37供給的指令，并按照接收到的指令執(zhí)行各種處 理。如上所述，微處理器3被配置成能夠利用八個副CPU核3SA 3SH并行地對視頻流解碼，并利用高帶寬總線10，以高達(dá)30 [Gbyte/sec ]的傳輸速率在微處理器3和GPU 4之間傳送數(shù)據(jù)。即， 能夠在較短時間內(nèi)解碼和傳送許多高清晰度視頻流。GPU 4執(zhí)行與當(dāng)移動將在顯示器40上顯示的視頻數(shù)據(jù)的重放圖 像時所需的紋理粘貼相關(guān)的最終渲染處理，當(dāng)在顯示器40上顯示視 頻數(shù)據(jù)的重放圖像或者靜止圖像數(shù)據(jù)的靜止圖像時所需的坐標(biāo)變換 計算，和關(guān)于視頻數(shù)據(jù)的重放圖像或靜止圖像數(shù)據(jù)的靜止圖像的放大 /縮小處理，并從而減輕微處理器3的處理負(fù)載。特別地，當(dāng)啟動時，微處理器3讀出保存在硬盤驅(qū)動器7中的所 需應(yīng)用程序，并根據(jù)硬盤驅(qū)動器7中的控制程序在XDR-RAM 5中展 開該應(yīng)用程序，之后根據(jù)該應(yīng)用程序和用戶操作執(zhí)行所需的控制處 理。當(dāng)用戶通過鼠標(biāo)38、鍵盤39或操作控制器37輸入用于把記錄 在錄像帶上的AV流輸入存儲單元22的剪輯捕捉窗口的顯示指令時， 微處理器3對應(yīng)地控制硬盤驅(qū)動器7,以便讀出與顯示指令對應(yīng)的AV 數(shù)據(jù)，并且同時控制GPU 4以便在顯示器40上顯示基于該AV數(shù)據(jù) 的剪輯捕捉窗口。這種狀態(tài)下，當(dāng)用戶通過鼠標(biāo)38、鍵盤39或操作控制器37輸 入對磁帶錄像機231 ~ 23n的重放操作指令時，微處理器3對應(yīng)地控 制磁帶錄像機231 ~ 23n，以便執(zhí)行記錄在錄像帶上的AV數(shù)據(jù)的重放 操作。從而，從裝入磁帶錄像機231 23n中的錄像帶中重放的AV流 順序通過PCI總線15、南橋6和微處理器3從磁帶錄像機231 ~ 23n 輸出到GPU4。在微處理器3的控制下，GPU4對供給的視頻數(shù)據(jù)應(yīng)用預(yù)定的信 號處理，并把獲得的視頻數(shù)據(jù)發(fā)給顯示器40，從而在剪輯捕捉窗口中 的預(yù)定位置顯示基于該視頻數(shù)據(jù)的重放圖像。同時，微處理器3通過 音頻I/O編解碼器9，把從AV數(shù)據(jù)提取的音頻信號發(fā)給揚聲器41， 從而從揚聲器41輸出基于所述音頻信號的聲音。于是，在查看顯示在顯示器40上的視頻數(shù)據(jù)的重放圖像和聽取 從揚聲器41輸出的音頻數(shù)據(jù)的重放聲音的同時，用戶能夠利用鼠標(biāo) 38、鍵盤39或操作控制器37，指定作為剪輯的所希望的重放視頻/音 頻部分，并且能夠把包括入點和出點的時間代碼，剪輯長度，剪輯ID， 剪輯名稱，AV數(shù)據(jù)的拍攝時間和剪輯的創(chuàng)建時間在內(nèi)的管理信息登 記成元數(shù)據(jù)。在微處理器3的控制下，該剪輯管理信息被登記在硬盤 驅(qū)動器7中的剪輯管理數(shù)據(jù)庫中。微處理器3不僅能夠把上面提及的剪輯管理信息，而且能夠把構(gòu) 成AV數(shù)據(jù)的視頻數(shù)據(jù)的各個參數(shù)的特征量登記成元數(shù)據(jù)文件，這在 后面詳細(xì)說明。之后，當(dāng)用戶通過鼠標(biāo)38、鍵盤39或操作控制器37輸入AV 流的捕捉指令時，微處理器3對應(yīng)地控制磁帶錄像機231 23n，以便 重放指定的AV流。從而，包括在從錄像帶重放的AV流中的視頻流或音頻流從磁帶 錄像機231 23n輸出。該視頻流隨后依次通過PCI總線15、南橋6、 微處理器3和總線10被提供給GPU 4。用戶能夠在顯示器40上顯示編輯窗口(后面說明)，用于通過利 用鼠標(biāo)38、鍵盤39或操作控制器37由預(yù)定操作執(zhí)行編輯工作，從而 能夠利用所述編輯窗口創(chuàng)建一個編輯列表，所述編輯列表規(guī)定表示如 何相互連接剪輯的編輯內(nèi)容。此外，在創(chuàng)建編輯列表之后或同時，用 戶能夠按照編輯列表確認(rèn)編輯的視頻和編輯的音頻。當(dāng)在創(chuàng)建編輯列表之后，通過鼠標(biāo)38輸入編輯列表的登記指令 時，微處理器3把在編輯列表中指定的所有用戶創(chuàng)建的編輯數(shù)據(jù)轉(zhuǎn)換 成文件，并把該文件登記在硬盤驅(qū)動器7中的編輯列表數(shù)據(jù)庫中。此外，當(dāng)在創(chuàng)建編輯列表之后或中間，通過鼠標(biāo)38、鍵盤39或 操作控制器37輸入基于編輯列表的編輯的視頻/音頻的重放指令時， 微處理器3對應(yīng)地控制存儲單元22，以便讀取包括在所需AV流中的 視頻流和音頻流。從而，如果需要，在微處理器3的控制下，讀取的包括在讀取自 存儲單元22的AV流中的視頻流和音頻流依次通過PCI總線15、南 橋6、微處理器3和總線10被提供給GPU 4，以便進(jìn)行視頻特效處理。在微處理器3的控制下，GPU4對作為視頻特效處理的結(jié)果而獲 得的視頻數(shù)據(jù)應(yīng)用預(yù)定的信號處理，并把得到的視頻信號發(fā)給顯示器 40。同時，微處理器3對包括在AV數(shù)據(jù)中的視頻數(shù)據(jù)和音頻數(shù)據(jù)之 中的音頻數(shù)據(jù)應(yīng)用音頻混合，并通過音頻I/O編解碼器9把得到的音 頻數(shù)據(jù)發(fā)給揚聲器41。從而，在編輯窗口中的預(yù)定位置顯示視頻數(shù)據(jù)的重放圖像，并從 揚聲器41輸出音頻數(shù)據(jù)的重放聲音。如上所述，圖像處理系統(tǒng)l允 許用戶在根據(jù)編輯列表確認(rèn)重放圖像和重放聲音的同時，進(jìn)行編輯工 作。從而，在圖像處理系統(tǒng)l中，設(shè)置在圖像處理設(shè)備2中的微處理 器3和GPU 4能夠?qū)︼@示在顯示器40上的編輯屏幕上的重放圖像執(zhí) 行包括特效處理在內(nèi)的視頻顯示處理，以及各種高級處理或編輯處 理。由微處理器3中的八個副CPU核3SA ~ 3SH同時并行解碼的視 頻數(shù)據(jù)通過總線IO被傳給GPU 4。此時的數(shù)據(jù)傳輸速率高達(dá)例如30 [GByte/sec]，于是甚至能夠高速并且平滑地顯示已經(jīng)經(jīng)過特效處理 的非常復(fù)雜的視頻數(shù)據(jù)。(2)視頻數(shù)據(jù)的顯示處理在圖像處理系統(tǒng)l中，準(zhǔn)備了編輯模式和查看模式。在編輯模式 下，執(zhí)行上述產(chǎn)生編輯的視頻圖像數(shù)據(jù)的編輯處理。在查看模式下，執(zhí)行允許用戶容易地管理或搜索保存在存儲單元22中的大量視頻圖 像數(shù)據(jù)和靜止圖像數(shù)據(jù)的分類顯示。 (2-l)編輯窗口的顯示內(nèi)容當(dāng)用戶通過鼠標(biāo)38、鍵盤39或操作控制器37輸入顯示編輯窗 口的指令時，圖像處理設(shè)備2的微處理器3控制硬盤驅(qū)動器7和GPU 4，以便進(jìn)入查看模式，從而圖2中所示的編輯窗口 50被顯示在顯示 器40上。編輯窗口 50具有剪輯列表顯示區(qū)51，情節(jié)串連圖板區(qū)52，時間 線區(qū)53，效果信息顯示區(qū)54和該編輯窗口 50特有的顯示區(qū)55。在 編輯窗口50上，編輯工作主要在顯示區(qū)55上進(jìn)行，情節(jié)串連圖板區(qū) 52和時間線區(qū)53只是輔助提供的。這種情況下，剪輯列表顯示區(qū)51顯示登記在圖像處理設(shè)備2中 的各種文件箱(bin)和文件。當(dāng)用戶選擇所希望的文件箱或文件時，剪 輯列表顯示區(qū)51顯示包含在該文件箱或文件中的AV數(shù)據(jù)的列表。隨后，用戶根據(jù)顯示在剪輯列表顯示區(qū)51中的剪輯列表，從作 為運動畫面的AV數(shù)據(jù)中選擇所希望的AV數(shù)據(jù)，把所希望的剪輯拖 放到顯示區(qū)55，從而在顯示區(qū)55上顯示表示該AV數(shù)據(jù)的第一圖像(就 視頻數(shù)據(jù)來說，第一靜止圖像)的顯示窗口 W57。注意在顯示區(qū)55上 可顯示多個顯示窗口 W57。這種狀態(tài)下，用戶能夠點擊顯示窗口 W57,使圖像處理設(shè)備2 在顯示區(qū)55上重放拖放的AV數(shù)據(jù)，并快進(jìn)、快倒、或者停止顯示 的重放圖像。從而，在通過顯示區(qū)55上的多個顯示窗口 W57視覺地確認(rèn)包含 在AV數(shù)據(jù)中的視頻數(shù)據(jù)的重放圖像的同時，用戶能夠搜索所希望的 一幀，并且能夠指定將從AV數(shù)據(jù)中切掉的所希望的視頻/音頻部分的 起點(下面稱為入點)和終點(下面稱為出點)。當(dāng)這樣指定了入點和出點時，圖像處理設(shè)備2的微處理器3進(jìn)入編輯模式。這種狀態(tài)下，通過拖放操作，用戶能夠在情節(jié)串連圖板區(qū)52中，粘貼在這樣指定的AV數(shù)據(jù)的入點和出點之間的視頻/音頻數(shù) 據(jù)作為新的AV數(shù)據(jù)。編輯窗口 50在情節(jié)串連圖板區(qū)52中布置編輯目標(biāo)AV數(shù)據(jù)的剪 輯，這使得用戶能夠容易地想象編輯的視頻。情節(jié)串連圖板區(qū)52顯 示與每個粘貼的剪輯的第一圖像等對應(yīng)的主圖像的縮略圖和詳細(xì)信 息。隨后，通過拖放操作，用戶把粘貼在情節(jié)串連圖板區(qū)52上的剪 輯依次布置在時間線區(qū)53的視軌上。此時，以時間線作為索引，與 每個粘貼的剪輯的長度對應(yīng)的條帶(未示出)出現(xiàn)在視軌上。當(dāng)粘貼的 視頻伴隨有音頻時，在時間線指示的相同位置，具有相同長度的條帶 (未示出)出現(xiàn)在音軌上。由于所述條帶存在于時間線區(qū)53中的視軌和音軌上，因此在時 間線上指定的時間顯示和輸出與所述條帶對應(yīng)的剪輯的視頻和音頻。 于是，能夠創(chuàng)建把待重放的一系列剪輯指定為編輯的視頻/音頻的編輯 列表。(2-2)圖像組的顯示此外，圖像處理設(shè)備2的微處理器3在編輯窗口 50的顯示區(qū)55 上顯示多個顯示窗口 W57，從而呈現(xiàn)圖像組58，每個顯示窗口 W57 具有預(yù)定的框架尺寸，表現(xiàn)用戶從顯示在剪輯列表顯示區(qū)51中的剪 輯列表中選擇，并放到顯示區(qū)55的AV數(shù)據(jù)。在圖像處理設(shè)備2的微處理器3中，能夠把一個附加剪輯從剪輯 列表顯示區(qū)51拖放到表現(xiàn)至少一個顯示窗口 W57的顯示區(qū)55,按照 用戶的選擇/刪除操作，能夠刪除存在于顯示區(qū)55上的一個或多個顯 示窗口。這里，如圖3中所示，圖像組58指的是在三維顯示空間中，根 據(jù)視頻數(shù)據(jù)的特征量(基于畫面或者基于GOP)，以顯示窗口 W57的 形式布置的視頻數(shù)據(jù)的多個第一畫面(靜止圖像)，或者典型畫面(靜止 圖像)，在所述三維顯示空間中，"紅(R)"，"藍(lán)(B)"和"亮度"分別被設(shè)置成構(gòu)成顯示軸的X軸，Y軸和Z軸。構(gòu)成三維顯示空間中的各顯示軸(X軸，Y軸和Z軸)的參數(shù)被共 同稱為代表包含視頻數(shù)據(jù)的AV數(shù)據(jù)的特征的"特征參數(shù)"?；旧希?對于構(gòu)成視頻數(shù)據(jù)的每個畫面來說，包括在特征參數(shù)中的特征量是不 同的，除非相同靜止圖像的畫面在時間方面相互連續(xù)。盡管如圖3中所示的三維顯示區(qū)的各顯示軸實際上未被明確地 顯示在編輯窗口 50的顯示區(qū)55上，不過顯示窗口 W57是按照各顯 示軸布置的，使得表現(xiàn)具有包括在圖像組58中的高紅色等級視頻數(shù) 據(jù)的畫面(靜止圖像)的顯示窗口 W57被置于顯示區(qū)55的右下側(cè)，表 現(xiàn)具有包括在圖像組58中的高亮度等級視頻數(shù)據(jù)的畫面的顯示窗口 W57被置于顯示區(qū)55的正中上方，表現(xiàn)具有包括在圖像組58中的高 藍(lán)色等級視頻數(shù)據(jù)的畫面的顯示窗口 57被設(shè)置在顯示區(qū)55的左下 方。這種布置使用戶可以直觀地識別包含在作為圖像的多個視頻數(shù)據(jù) 中的亮度或顏色分量的粗略分布。順便提及，在該三維顯示空間中，只有相對于原點的正象P艮被用 于"紅(R)"(X軸)，"藍(lán)(B)，，(Y軸)和"亮度"(Z軸)中的各參數(shù)，多個顯 示窗口 W57被布置在與所述象限對應(yīng)的空間中。但是，作為選擇， 象限可包括相對于原點的負(fù)方向。對于包含在圖像組58中的視頻數(shù)據(jù)，圖像處理設(shè)備2的微處理 器3能夠以與顯示窗口 W57中的預(yù)定幀頻率相應(yīng)的更新速度，順序 更新構(gòu)成視頻數(shù)據(jù)的畫面，從而將視頻數(shù)據(jù)顯示為運動圖像。此時，由于每次更新畫面時，構(gòu)成視頻數(shù)據(jù)的畫面的特征量發(fā)生 變化，因此圖像處理設(shè)備2的微處理器3按照特征量在三維顯示空間 中重新布置顯示窗口 W57，從而視頻數(shù)據(jù)的顯示窗口 57在三維顯示 空間上移動的同時被顯示。通過改變畫面的更新速度，圖像處理設(shè)備2能夠控制視頻數(shù)據(jù)的 重放速度。當(dāng)更新速度被增大時，視頻數(shù)據(jù)能夠快速重放，因此，顯 示窗口 W57的移動速度被增大，從而使得顯示窗口 W57能夠在三維 顯示空間上高速移動。另一方面，當(dāng)更新速度被增大時，顯示窗口W57的移動速度被降低，從而使得顯示窗口 57以好像漂浮在三維顯 示空間上的方式慢速移動。此外，圖像處理設(shè)備2能夠在顯示窗口 W57中快倒重放視頻數(shù) 據(jù)。這種情況下，顯示窗口 W57沿著與上述情況相反的方向移動。 順《更提及，在顯示窗口 W57沿正向方向或反向方向移動的同時，圖 像處理設(shè)備2能夠在用戶所希望的定時停止顯示窗口 W57，以顯示與 該定時對應(yīng)的畫面(靜止圖像)。(2-3)視頻數(shù)據(jù)的顯示圖像處理設(shè)備2預(yù)先提取代表構(gòu)成視頻數(shù)據(jù)的畫面的特征量的 特征參數(shù)作為元數(shù)據(jù)，并且當(dāng)通過顯示窗口 W57顯示視頻數(shù)據(jù)的重 放圖像時，圖像處理設(shè)備2按照待更新的各畫面的特征量，在三維虛 擬空間上重新布置顯示窗口 W57。下面對于由微處理器3和GPU 4 構(gòu)成的功能塊說明移動顯示窗口 W57的上述配置。這里，將說明下面的三種配置。第一配置例子是預(yù)先從構(gòu)成視頻 數(shù)據(jù)的各畫面中提取特征參數(shù)作為元數(shù)據(jù)，并使用所提取的特征參數(shù) 來顯示視頻數(shù)據(jù)的方法。第二配置例子是在根據(jù)構(gòu)成視頻數(shù)據(jù)的各畫 面產(chǎn)生元數(shù)據(jù)的同時，使用元數(shù)據(jù)來顯示視頻數(shù)據(jù)的方法。第三配置 例子是當(dāng)視頻數(shù)據(jù)被編碼以便記錄時，在產(chǎn)生作為元數(shù)據(jù)的特征參數(shù) 的同時，使用特征參數(shù)來顯示視頻數(shù)據(jù)的方法。(2-3-l)第一配置例子如圖4中所示，元數(shù)據(jù)提取部分61提取代表包括在包含視頻數(shù) 據(jù)的AV數(shù)據(jù)中的各種特征量的特征參數(shù)，并把所提取的特征參數(shù)登 記在元數(shù)據(jù)數(shù)據(jù)庫(下面稱為"元數(shù)據(jù)DB")62中，作為與視頻數(shù)據(jù)對 應(yīng)的基于畫面或者基于多個畫面(例如基于GOP)的元數(shù)據(jù)文件MDF。壓縮圖像生成部分63壓縮通過元數(shù)據(jù)提取部分61供給的視頻數(shù) 據(jù)的各個畫面，以便把壓縮的畫面登記在視頻數(shù)據(jù)庫(下面稱為"視頻 DB，，)64中作為主視頻流HD1，以及以預(yù)定的比率減少視頻數(shù)據(jù)中的 各個畫面的像素數(shù)目，從而把像素數(shù)目減少的畫面登記在視頻DB 64 中作為子^見頻流LD1。這種配置使得能夠以視頻數(shù)據(jù)為單位，或者以預(yù)定的時間段為單位，把像素數(shù)目未被減少的主視頻流HD1和像素數(shù)目已被減少的子 視頻流LD1被保存在視頻DB 64中。從而，微處理器3能夠按照在 三維顯示空間上的位置，有選擇地使用主視頻流和子視頻流。例如， 當(dāng)顯示窗口 W57的圖像尺寸需要被縮小時，使用子視頻流LD1;另 一方面，當(dāng)顯示窗口 W57的圖像尺寸需要被放大時，使用主視頻流 HD1。顯示空間控制器66識別用于生成由用戶通過顯示在顯示區(qū)55 上的圖形用戶界面(GUI)65指定的三維顯示空間的顯示軸的參數(shù)，識 別向用戶呈現(xiàn)圖像組58的視點坐標(biāo)，或者做出關(guān)于所述顯示的各種 確定，比如確定在三維顯示空間上用戶選擇的AV數(shù)據(jù)的布置。于是，顯示空間控制器66根據(jù)確定結(jié)果，把與構(gòu)成將作為圖像 組58(圖3)顯示在顯示區(qū)55上的視頻數(shù)據(jù)的多個畫面對應(yīng)的幀編號輸 出給元數(shù)據(jù)DB 62，以使得元數(shù)據(jù)DB 62可以使用與幀編號對應(yīng)的畫 面的特征參數(shù)作為元數(shù)據(jù)，從中讀取元數(shù)據(jù)文件MDF，并把元數(shù)據(jù) 文件MDF發(fā)給坐標(biāo)計算部分67。此外，根據(jù)確定結(jié)果，顯示空間控制器66還把構(gòu)成視頻數(shù)據(jù)的 畫面的幀編號輸出給視頻DB 64。這使得當(dāng)通過顯示窗口 W57顯示視 頻數(shù)據(jù)的重放圖像時，與幀編號對應(yīng)的子視頻流LD1可被發(fā)給解碼器 68，并且使得當(dāng)以放大的形式顯示視頻數(shù)據(jù)的重放圖像時，與幀編號 對應(yīng)的主視頻流HD1可被發(fā)給解碼器68。解碼器68對從視頻DB 64供給的子視頻流LD1和主視頻流HD1 解碼，并把解碼后的子視頻數(shù)據(jù)和主視頻數(shù)據(jù)發(fā)給圖像顯示部分69。坐標(biāo)計算部分67對顯示空間的顯示軸設(shè)置從顯示空間控制器66 供給的特征參數(shù)，通過計算把特征參數(shù)轉(zhuǎn)換成三維顯示空間的坐標(biāo)(坐標(biāo)參數(shù))，并按照所獲得的坐標(biāo)參數(shù)值，確定在三維顯示空間上的布置。 隨后，根據(jù)相對于包括將在三維顯示空間上布置的多個顯示窗口 W57 的圖像組58的視點坐標(biāo)，以及各個顯示窗口 W57的位置，坐標(biāo)計算 部分67確定每個顯示窗口 W57的顯示尺寸，并把和每個顯示窗口W57的顯示有關(guān)的各種信息(顯示參數(shù))發(fā)給圖像顯示部分69。圖像顯示部分69使用從坐標(biāo)計算部分67接收到的坐標(biāo)參數(shù)來確 定在其上布置從解碼器68供給的子視頻數(shù)據(jù)的三維顯示空間上的三 維坐標(biāo)位置，并在三維顯示空間上布置與子視頻數(shù)據(jù)對應(yīng)的顯示窗口 W57。在對于與其它視頻數(shù)據(jù)對應(yīng)的顯示窗口 W57執(zhí)行上述處理之 后，圖像顯示部分69把顯示窗口 W57的坐標(biāo)參數(shù)轉(zhuǎn)換成顯示區(qū)55 的二維坐標(biāo)位置(顯示位置參數(shù))，從而在顯示區(qū)55上顯示包括多個顯 示窗口 W57的圖4象組58。 (2-3-2)第二配置例子參見圖5,圖5中，與圖4中的組件相同的組件用與圖4中的相 應(yīng)部分相同的附圖標(biāo)記表示，顯示空間控制器66識別對用戶通過顯 示在顯示區(qū)55上的GUI 65指定的三維顯示空間的顯示軸設(shè)置的特征 參數(shù)，或者識別用于向用戶呈現(xiàn)圖像組58的視點坐標(biāo)。此外，顯示 空間控制器66做出關(guān)于所述顯示的各種確定，比如確定在三維顯示 空間上對用戶選擇的視頻數(shù)據(jù)的布置，并把該確定發(fā)給坐標(biāo)計算部分 67。于是，顯示空間控制器66還根據(jù)確定結(jié)果，把構(gòu)成視頻數(shù)據(jù)的 畫面的幀編號輸出給視頻DB64，從而使得當(dāng)通過顯示窗口 W57顯示 視頻數(shù)據(jù)的重放圖像時，與幀編號對應(yīng)的子視頻流LD1可被發(fā)給解碼 器68，并且使得當(dāng)以放大的方式顯示視頻數(shù)據(jù)的重放圖像時，與幀編 號對應(yīng)的主視頻流HD1可被發(fā)給解碼器68。順便提及，與上面的第一配置例子的情況一樣，以其l^素數(shù)目未 被減少的方式編碼的主視頻流HD1和以其像素數(shù)目被減少的方式編 碼的子視頻流LD1被預(yù)先保存在視頻DB 64中。解碼器68對從視頻DB 64供給的子視頻流LD1和主視頻流HD1 解碼，并把解碼的主視頻數(shù)據(jù)發(fā)給元數(shù)據(jù)提取部分61，把解碼的子視 頻數(shù)據(jù)發(fā)給圖像顯示部分69。元數(shù)據(jù)提取部分61提取包括在從解碼器68供給的主視頻數(shù)據(jù)中 的特征參數(shù)作為元數(shù)據(jù)，并把提取的元數(shù)據(jù)登記在元數(shù)據(jù)DB62中作為元數(shù)據(jù)文件MDF，以及把該元數(shù)據(jù)文件MDF發(fā)給坐標(biāo)計算部分 67。坐標(biāo)計算部分67生成三維顯示空間，其中通過計算對顯示軸設(shè) 置從顯示空間控制器66供給的特征參數(shù)，把由將在各個顯示窗口 W57 上顯示的視頻數(shù)據(jù)的特征參數(shù)代表的特征量轉(zhuǎn)換成三維顯示空間中 的坐標(biāo)參數(shù)，并按照獲得的坐標(biāo)參數(shù)值，確定在三維顯示空間上的布 置。隨后，根據(jù)相對于包括將在三維顯示空間上布置的多個顯示窗口 W57的圖像組58的視點坐標(biāo)，以及各個顯示窗口 W57的位置，坐標(biāo) 計算部分67確定每個顯示窗口 W57的顯示尺寸，并把和每個顯示窗 口 W57的顯示有關(guān)的各種信息(顯示參數(shù))發(fā)給圖像顯示部分69。圖像顯示部分69使用從坐標(biāo)計算部分67接收到的坐標(biāo)參數(shù)來確 定從解碼器68供給的子視頻數(shù)據(jù)在三維顯示空間上布置的三維坐標(biāo) 位置(坐標(biāo)參數(shù))，并在三維顯示空間上布置與子視頻數(shù)據(jù)對應(yīng)的顯示 窗口 W57。在對與其它視頻數(shù)據(jù)對應(yīng)的顯示窗口 W57執(zhí)行上述處理 之后，圖像顯示部分69把多個顯示窗口 W57的三維坐標(biāo)參數(shù)轉(zhuǎn)換成 顯示區(qū)55的二維坐標(biāo)位置(顯示位置參數(shù))，從而在顯示區(qū)55上顯示 包括多個顯示窗口 W57的圖像組58。(2_3-3)第三配置例子參見圖6，圖6中，與圖5中的組件相同的組件用與圖5中的對 應(yīng)部分相同的附圖標(biāo)記表示，顯示空間控制器66識別對用戶通過GUI 65指定的三維顯示空間的顯示軸設(shè)置的特征參數(shù)，或者識別向用戶呈 現(xiàn)圖像組58的視點坐標(biāo)。此外，顯示空間控制器66做出關(guān)于所述顯 示的各種確定，比如確定在三維顯示空間上對用戶選擇的視頻數(shù)據(jù)的 布置，并把該確定發(fā)給坐標(biāo)計算部分67。于是，顯示空間控制器66根據(jù)確定結(jié)果，把構(gòu)成視頻數(shù)據(jù)的畫 面的幀編號輸出給元數(shù)據(jù)和視頻數(shù)據(jù)庫(下面稱為"元數(shù)據(jù)/視頻 DB)"70。元數(shù)據(jù)/視頻DB 70保存圖像拍攝設(shè)備拍攝和編碼的主視頻流 HD1，以及通過對經(jīng)減少主圖像數(shù)據(jù)的像素數(shù)目而獲得的子視頻數(shù)據(jù)編碼得到的子視頻流LD1。當(dāng)通過顯示窗口 57顯示視頻數(shù)據(jù)的重放 圖像時，元數(shù)據(jù)/視頻DB 70把與幀編號對應(yīng)的子視頻流LD1發(fā)給解 碼器68。當(dāng)以放大的方式顯示視頻數(shù)據(jù)的重放圖像時，元數(shù)據(jù)/視頻 DB 70把與幀編號對應(yīng)的主視頻流HD1發(fā)給解碼器68。此外，元數(shù)據(jù)/視頻DB 70把包括在主視頻數(shù)據(jù)中的特征參數(shù)保 存為元數(shù)據(jù)文件MDF，所述主視頻數(shù)據(jù)由包括在圖像拍攝設(shè)備中的 元數(shù)據(jù)提取部分在拍攝主視頻數(shù)據(jù)的時候提取。于是，元數(shù)據(jù)/視頻DB 70把與從顯示空間控制器66供給的幀編 號對應(yīng)的特征參數(shù)作為元數(shù)據(jù)文件MDF發(fā)給坐標(biāo)計算部分67。坐標(biāo)計算部分67生成三維顯示空間，其中通過計算對顯示軸設(shè) 置從顯示空間控制器66供給的特征參數(shù)，把將在各個顯示窗口 W57 上顯示的視頻數(shù)據(jù)的特征參數(shù)轉(zhuǎn)換成三維顯示空間中的坐標(biāo)參數(shù)，并 按照獲得的坐標(biāo)參數(shù)值，確定在三維顯示空間上的布置。隨后，根據(jù) 對應(yīng)于包括將在三維顯示空間上布置的多個顯示窗口 W57的圖像組 58的視點坐標(biāo)，以及各個顯示窗口的位置，坐標(biāo)計算部分67確定每 個顯示窗口 W57的顯示尺寸，并把和每個顯示窗口 W57的顯示有關(guān) 的各種信息發(fā)給圖像顯示部分69。解碼器68對從元數(shù)據(jù)/視頻DB 70供給的子視頻流LD1或主視 頻流HD1解碼，并把解碼的主視頻數(shù)據(jù)或子視頻數(shù)據(jù)發(fā)給圖像顯示 部分69。圖像顯示部分69使用從坐標(biāo)計算部分67接收到的坐標(biāo)參數(shù)來確 定從解碼器68供給的子視頻數(shù)據(jù)在三維顯示空間上布置的三維坐標(biāo) 位置(坐標(biāo)參數(shù))，并在三維顯示空間上布置與子視頻數(shù)據(jù)對應(yīng)的顯示 窗口 W57。在對與其它視頻數(shù)據(jù)對應(yīng)的顯示窗口 W57執(zhí)行上述處理 之后，圖像顯示部分69把多個顯示窗口 W57的三維坐標(biāo)參數(shù)轉(zhuǎn)換成 顯示區(qū)55的二維坐標(biāo)位置(顯示位置參數(shù))，從而在顯示區(qū)55上顯示 包括多個顯示窗口 W57的圖像組58。(2-4)元數(shù)據(jù)提取部分的具體配置下面將說明上面提及的元數(shù)據(jù)提取部分61的具體配置。如圖7中所示，元數(shù)據(jù)提取部分61包括密度信息計算部分71，運動檢測部 分72, DCT垂直/水平頻率分量檢測部分73，顏色分量檢測部分76， 音頻檢測部分80，亮度/色差檢測部分83，和元數(shù)據(jù)文件生成部分86， 以便提取特征參數(shù)，所述特征參數(shù)包括與構(gòu)成視頻數(shù)據(jù)的每個畫面的 密度(復(fù)雜度)，運動向量，DCT(離散余弦變換)垂直/水平頻率分量， 顏色分量和音頻電平對應(yīng)的各種特征量。元數(shù)據(jù)提取部分61可包括 用于提取除上述之外的參數(shù)的特征量的附加檢測部分。 (2-4-l)密度信息計算部分的配置密度信息計算部分71包括平均值計算部分1071，差值計算部分 1072和累加部分1073。視頻數(shù)據(jù)被供給平均值計算部分1071和差值 計算部分1072。平均值計算部分1071順序地把構(gòu)成視頻數(shù)據(jù)的各幀設(shè)置成目標(biāo) 幀，并把目標(biāo)幀分成例如如圖8中所示的8x8像素塊。此外，平均值 計算部分1071計算目標(biāo)幀上的各個塊的像素值的平均值，并把所獲 得的平均值供給差值計算部分1072。這里假定對于8x8像素塊，按照光柵掃描順序的第k個像素的 像素值為Pk,平均值計算部分1071按照下面的表達(dá)式計算平均值Pave=l/(8x8)xi:Pk 其中求和2表示從k=l到k-64(-8x8)相對于k的求和。差值計算部分1072按照和平均值計算部分1071相同的方式把目 標(biāo)幀分成例如8x8像素塊，并計算每個塊的像素值Pk與8x8像素塊 的像素值的平均值Pave之間的差值的絕對值IPk-Pave卜并順序把所 獲得的值提供給累加部分1073。累加部分1073累加順序地從差值計算部分1072供給的對于各個 塊的相應(yīng)像素計算的差值的絕對值IPk-Pave卜從而獲得累加值 Q=i:|Pk-Pave|，其中求和2表示從k=l到k-64(-8x8)相對于k的求 和。此外，累加部分1073計算對于目標(biāo)幀的所有塊獲得的累加值Q的總和，并把所述總和輸出給元數(shù)據(jù)文件生成部分86作為目標(biāo)幀密 度信息QS1。對于目標(biāo)幀獲得的累加值Q的總和被稱為"Intra-AC"。Intra-AC 的值變得越大，那么在目標(biāo)幀中的像素值中存在更大的變差。于是， 可以認(rèn)為當(dāng)作為累加值Q的總和的密度信息QS1變得更大時，目標(biāo) 幀的靜止圖像變得更密集(更復(fù)雜)。(2-4-2)運動檢測部分的配置在運動檢測部分72(圖7)中，如圖9中所示，運動向量檢測部分 1041把在先幀分成均具有16x16像素的宏塊，并檢測目標(biāo)幀中與在先 幀中的每個宏塊最相似的16x16像素塊(下面稱為"相似塊")中的每一 個。隨后，運動向量檢測部分1041計算始于該宏塊的左上部，并止 于相似塊的左上部的向量，作為該宏塊的運動向量AF0(h，v)?，F(xiàn)在假定在先幀中從左端起的笫h個和從上端起的笫v個宏塊的 位置由F0(h，v)表示，并且目標(biāo)幀中已從宏塊F0(h,v)移動與運動向量 AF0(h，v)對應(yīng)的距離的16x16像素塊，即相似塊的位置由Fl(h，v)表示， 那么宏塊F0(h，v)的運動向量AF0(h，v)由下面的表達(dá)式表示AF0(h，v)=Fl(h，v)-F0(h，v)統(tǒng)計量計算部分1042計算對于在先幀中的宏塊獲得的運動向量 的統(tǒng)計量。更具體地說，統(tǒng)計量計算部分1042計算在先幀中的所有 宏塊的運動向量AFO(h，v)的量值的總和D0=E|AF0(h，v)|，并輸出所獲 得的總和DO作為目標(biāo)幀的運動信息。上述表達(dá)式D0-5:iAF0(h，v)l中的求和2表示相對于h(h-l ~ h= 在先幀中的宏塊的水平數(shù)目)和v(v=l ~\^在先幀中的宏塊的垂直數(shù) 目)的求和。在先幀中的每個宏塊FO(h，v)的運動向量AFO(h，v)的量值越大， 作為運動向量的總和的運動信息DO變得越大。于是，可以認(rèn)為當(dāng)目 標(biāo)幀的運動信息DO變得更大時，目標(biāo)幀的圖像的運動變得更大(更劇 烈)。在上面的情況下，作為對于在先幀中的宏塊獲得的運動向量的統(tǒng)計量，獲得在先幀中的所有宏塊的運動向量AFO(h，v)的量值的總和 D0=2|AF0(h,v)|。但是，作為選擇，對于在先幀中的宏塊荻得的運動 向量的離差可被用作統(tǒng)計量。這種情況下，統(tǒng)計量計算部分1042計算在先幀中的所有宏塊的 運動向量AFO(h，v)的平均值A(chǔ)ave，并例如利用下面的表達(dá)式計算在先 幀中的所有宏塊FO(h，v)的運動向量AFO(h，v)的離差oO:赤i:(AF0(h，v)-Aave)/2其中求和x:表示相對于h(h-i h-在先幀中的宏塊的水平數(shù)目)和 v(v=1 ~ v-在先幀中的宏塊的垂直數(shù)目)的求和。和總和do的情況一樣，當(dāng)目標(biāo)幀的圖像的運動變得更大(更劇烈)時，離差crO變得更大。圖IO表示圖7的運動檢測部分72的另一配置。該運動檢測部分 72A包括直方圖創(chuàng)建部分1051，直方圖存儲部分1052和差值計算部 分1053。當(dāng)視頻數(shù)據(jù)被供給直方圖創(chuàng)建部分1051時，直方圖創(chuàng)建部分 1051順序地把構(gòu)成視頻數(shù)據(jù)的幀設(shè)置成目標(biāo)幀，創(chuàng)建目標(biāo)幀的像素值 的簡單直方圖，并把為每個目標(biāo)創(chuàng)建的直方圖供給直方圖存儲部分 1052和差值計算部分1053。直方圖存儲部分1052保存從直方圖創(chuàng)建部分1051供給的目標(biāo)幀 的直方圖。直方圖存儲部分1052具有大到足以保存至少與兩幀對應(yīng) 的直方圖的存儲容量，從而保存從直方圖創(chuàng)建部分1051供給的目標(biāo) 幀的直方圖和在先目標(biāo)幀(即，在先幀)的直方圖。差值計算部分1053計算從直方圖創(chuàng)建部分1051供給的目標(biāo)幀的 直方圖與保存在直方圖存儲部分1052中的在先幀的直方圖的差值絕 對值總和(后面說明)，并輸出計算結(jié)果作為目標(biāo)幀的運動信息D0。參考圖11,更詳細(xì)地說明在圖10的運動檢測部分72A中進(jìn)行的 上述處理。假定供給直方圖創(chuàng)建部分1051的視頻數(shù)據(jù)的像素值通過8 位以值0~ 255表示，那么直方圖創(chuàng)建部分1051把0~255的范圍均 分成例如八個小范圍0-31， 32-63， 64-95， 96-127, 127-159， 160-191,192-223和224-255,并計算包括在每個小范圍中的像素值的出現(xiàn)頻 率，從而創(chuàng)建目標(biāo)幀的簡單直方圖。例如，假定第(i+l)幀是目標(biāo)幀，差值計算部分1053計算在相同 的小范圍中，作為目標(biāo)幀的第(i+l)幀中的頻率和作為在先幀的第i幀 中的頻率之間的差值的絕對值A(chǔ)(圖11中的陰影部分)。此外，差值計 算部分1053計算對于直方圖中的相應(yīng)8個小范圍獲得的頻率的差值 的絕對值的總和(差值絕對值總和)SA，并把獲得的總和￡A作為目標(biāo) 幀的運動信息DO輸出給元數(shù)據(jù)文件生成部分86。當(dāng)目標(biāo)幀的運動較大(劇烈)時，目標(biāo)幀中的像素值的頻率分布不 同于在先幀中的像素值的頻率分布。于是，可以認(rèn)為當(dāng)目標(biāo)幀的差值 絕對值總和i:A變得更大時，目標(biāo)幀的圖像的運動變得更大(更劇烈)。(2-4-3)DCT垂直/水平頻率分量檢測部分的配置圖12表示DCT垂直/水平頻率分量檢測部分73(圖7)中的頻率分 析部分74的配置例子。頻率分析部分74包括DCT變換部分1061， 加權(quán)系數(shù)計算部分1062和累加部分1063。當(dāng)視頻數(shù)據(jù)被供給DCT變換部分1061時，DCT變換部分1061 順序地把構(gòu)成視頻數(shù)據(jù)的幀設(shè)置成目標(biāo)幀，并把目標(biāo)幀分成8x8 <象素 塊。此外，DCT變換部分1061DCT變換目標(biāo)幀中的各塊，并把對于 各塊獲得的8x8 DCT系數(shù)供給累加部分1063。加權(quán)系數(shù)計算部分1062計算將分別加到8x8 DCT系數(shù)中的權(quán) 重，并把所述權(quán)重供給累加部分1063。累加部分1063把從加權(quán)系數(shù) 計算部分1062供給的權(quán)重分別和從DCT變換部分1061供給的8x8 DCT系數(shù)相加，以便進(jìn)行累加，從而獲得每個塊的累加值。另外，累 加部分1063計算對于各個塊獲得的累加值的總和，并把所述總和發(fā) 給垂直線/水平線級別計算部分75(圖7)作為目標(biāo)幀的密度信息。參見圖13，更詳細(xì)地說明在圖12的頻率分析部分74中執(zhí)行的 處理。圖13的左側(cè)表示在DCT變換之后的基本圖像。該基本圖像由 8x8圖案(頻率分量)構(gòu)成。在該基本圖像中，朝著右側(cè)和下方，頻率 分量變高。說明書第22/61頁圖13的右側(cè)示出DCT系數(shù)F(i-l，j-l)，它是每個塊的8x8 DCT 系數(shù)中從左側(cè)起的第i個(i-l，2，…，8)，從頂部起的第j個(〗=1，2，...， 8)DCT系數(shù)。DCT系數(shù)F(i-l，j-l)表示基本圖像的從左側(cè)起的第i個， 從頂部起的第j個圖案的頻率分量被包含在基本圖像中的程度(比率)。出現(xiàn)在圖13的左側(cè)的基本圖像中的數(shù)字都指示由圖12的加權(quán)系 數(shù)計算部分1062計算的權(quán)重G(M，j-l)。權(quán)重G(i-l，j-l)是將加到DCT 系數(shù)F(i-l，j-l)中的權(quán)重。加權(quán)系數(shù)計算部分1062按照下面的表達(dá)式 計算權(quán)重G(i-l，j-l):G(i-l，j-l)=ixj因此，在加權(quán)系數(shù)計算部分1062中，當(dāng)DCT系數(shù)F(i-l,j-l)的頻率分 量變亮?xí)r，將加到DCT系數(shù)F(i-l，j-l)中的權(quán)重G(i-l，j-l)變大。累加部分1063(圖12)把從DCT變換部分1061供給的塊的DCT 系數(shù)F(i-l，j-l)乘以從加權(quán)系數(shù)計算部分1062供給的權(quán)重G(i-l，j-l)， 以獲得乘積值G(i-l，j-l)xF(i-l，j-l)。隨后，累加部分1063累加對于塊 中的各8x8DCT系數(shù)F(i-l，j-l)獲得的乘積值G(i-l，j-l)xF(i-l，j-l)，以 獲得累加值V-SG(i-l，j-l)xF(i-l,j-l)。 V-SG(i-l，j-l)xF(i-l，j-l)中的求 和￡表示相對于i(i=l ~ i-8)和j(j=l ~ J-8)的求和。此外，累加部分1063計算對于目標(biāo)幀的所有塊獲得的累加值V 的總和K，并把總和K輸出給垂直線/水平線級別計算部分75，作為 目標(biāo)幀的密度信息。包括在目標(biāo)幀中的頻率分量越高，作為累加值V的總和K的密 度信息的值就越大，目標(biāo)幀的靜止圖像就越密集(越復(fù)雜)。DCT垂直/水平頻率分量檢測部分73的垂直線/水平線級別計算 部分75根據(jù)目標(biāo)幀的區(qū)域AR1中的DCT系數(shù)，檢測到目標(biāo)幀的圖 像包括細(xì)的垂直線，即，該圖像在水平方向上具有高頻分量，或者根 據(jù)目標(biāo)幀的區(qū)域AR2中的DCT系數(shù)，檢測到目標(biāo)幀的圖像包括細(xì)的 水平線，即，該圖像在垂直方向上具有高頻分量。從而，DCT垂直/水平頻率分量檢測部分73能夠利用頻率分析 部分74,確定目標(biāo)幀的圖像的密度(復(fù)雜度)級別，并利用垂直線/水平線級別計算部分75確定水平頻率和垂直頻率的級別。所獲得的信息 隨后作為DCT垂直/水平頻率分量信息FVH被輸出給元數(shù)據(jù)文件生 成部分86。(2-4-4)顏色分量檢測部分的配置顏色分量檢測部分76包括像素RGB級別檢測部分77， RGB級 別統(tǒng)計量/離差檢測部分78，和HLS級別統(tǒng)計量/離差檢測部分79。 供給的視頻數(shù)據(jù)被輸入像素RGB級別檢測部分77。像素RGB級別檢測部分77檢測視頻數(shù)據(jù)的目標(biāo)幀中的每個像 素的RGB級別，并把檢測到的RGB級別發(fā)給RGB級別統(tǒng)計量/離差 檢測部分78和HLS級別統(tǒng)計量/離差檢測部分79。RGB級別統(tǒng)計量/離差檢測部分78計算從像素RGB級別檢測部 分77供給的目標(biāo)幀中的每個像素的RGB級別的統(tǒng)計量和離差，并把 代表目標(biāo)幀中的RGB的各顏色分量的級別的統(tǒng)計量，和代表是全局 還是局部地增加目標(biāo)幀中的顏色分量的離差值作為顏色分量信息 CL1輸出給元數(shù)據(jù)文件生成部分86。HLS級別統(tǒng)計量/離差檢測部分79把從像素RGB級別檢測部分 77供給的目標(biāo)幀中的每個像素的RGB級別轉(zhuǎn)換成"色調(diào)"、"飽和度，， 和"亮度/明度，，三個分量，計算在如圖14中所示由色調(diào)、飽和度和亮 度構(gòu)成的HLS空間中上述元素中的每一個的統(tǒng)計量和離差值，并把 檢測結(jié)果作為HLS信息CL2輸出給元數(shù)據(jù)文件生成部分86。HLS空間中的色調(diào)由從0。到359。的角度表示，其中0。為紅色， 180。為與紅色相對的藍(lán)綠色。即，在HLS空間中，易于找出相對的顏 色。HLS空間中的飽和度是彩色的混合率。和HSV(色調(diào)，飽和度和 明暗關(guān)系)空間不同，HLS空間是基于從純色降低飽和度意味著該顏 色具有更多的灰色的思想的。即，較低的飽和度意味著該顏色接近灰 色，較高的飽和度意味著該顏色遠(yuǎn)離灰色。與其中亮度100%被設(shè)置成純色，并且表現(xiàn)從100%亮度狀態(tài)失 去多少亮度級別的HSV空間的情況不同，HLS空間中的亮度是其中亮度0%為黑色，亮度100%為白色，亮度50%為純白色的索引。于是，HLS級別統(tǒng)計量/離差檢測部分79能夠向元數(shù)據(jù)文件生成部分86輸出HLS信息CL2， HLS信息CL2以遠(yuǎn)遠(yuǎn)比RGB空間更好理解的方式表現(xiàn)色調(diào)。(2-4-5)音頻檢測部分的配置在上面的說明中，特征參數(shù)提取自視頻數(shù)據(jù)。但是，在音頻數(shù)據(jù) 包括在AV數(shù)據(jù)中的情況下，可根據(jù)與視頻數(shù)據(jù)對應(yīng)的音頻數(shù)據(jù)計算 代表音頻數(shù)據(jù)的特征的特征量，作為特征參數(shù)。即，特征參數(shù)是既可 應(yīng)用于視頻數(shù)據(jù)又可應(yīng)用于音頻數(shù)據(jù)的參數(shù)。音頻檢測部分80(圖7)包括頻率分析部分81和電平檢測部分82。 供給音頻檢測部分80的視頻數(shù)據(jù)被輸入到頻率分析部分81中。頻率分析部分81分析與視頻數(shù)據(jù)的目標(biāo)幀對應(yīng)的音頻數(shù)據(jù)的頻 率，并把其頻帶通知電平檢測部分82。電平檢測部分82檢測在從頻 率分析部分81通知的頻帶中音頻數(shù)據(jù)的電平，并把檢測的電平作為 音頻電平信息AL輸出給元數(shù)據(jù)文件生成部分86。(2-4-6)亮度/色差檢測部分的配置亮度/色差檢測部分83(圖7)包括Y/Cb/Cr級別檢測部分84和 Y/Cb/Cr級別統(tǒng)計量/離差檢測部分85。供給亮度/色差檢測部分83的 視頻數(shù)據(jù)被輸入到Y(jié)/Cb/Cr級別檢測部分84中。Y/Cb/Cr級別檢測部分84對于視頻數(shù)據(jù)的目標(biāo)幀中的每個像素， 檢測亮度信號Y的亮度級別和色差信號Cb及Cr的信號級別，并把 檢測到的級別供給Y/Cb/Cr級別統(tǒng)計量/離差檢測部分85。Y/Cb/Cr級別統(tǒng)計量/離差檢測部分85計算從Y/Cb/Cr級別檢測 部分84供給的目標(biāo)幀中的每個像素的亮度信號Y的亮度級別和色差 信號Cb及Cr的信號級別的統(tǒng)計量和離差值，并把代表亮度信號Y， 色差信號Cb和Cr的級別的統(tǒng)計量，和目標(biāo)幀中的亮度信號Y，色差 信號Cb和Cr的離差值作為顏色分量信息CL3輸出給元數(shù)據(jù)文件生 成部分86。(2-4-7)元數(shù)據(jù)文件生成部分的配置根據(jù)從密度信息計算部分71供給的密度信息QS1，從運動檢測 部分72供給的目標(biāo)幀的運動信息D0，從DCT垂直/水平頻率分量檢 測部分73供給的DCT垂直/水平頻率分量信息FVH，從顏色分量檢 測部分76供給的顏色分量信息CL1和HLS信息CL2，從音頻檢測 部分80供給的音頻電平信息AL,和從亮度/色差檢測部分83供給的 顏色分量信息CL3，元數(shù)據(jù)文件生成部分86分別產(chǎn)生構(gòu)成視頻數(shù)據(jù) 的畫面的特征參數(shù)，和與視頻數(shù)據(jù)對應(yīng)的音頻數(shù)據(jù)的特征參數(shù)，作為 包括元數(shù)據(jù)的元數(shù)據(jù)文件MDF，并輸出它們。在元數(shù)據(jù)文件MDF中，如圖15中所示，為構(gòu)成視頻數(shù)據(jù)的各 個畫面(從第 一 幀到最后 一 幀)登記各種特征參數(shù)，比如"時間代碼，，， "運動量，，，"密度，，，"紅"，"藍(lán)"，"綠"，"亮度"，"紅色離差 (dispersion)"，"綠色離差，，,"色調(diào)"，"飽和度，，,"垂直線"，"水平線"， "運動離差"和"音頻電平"。盡管在本例中，0和1之間的歸一化相對值被用作元數(shù)據(jù)文件 MDF的各特征參數(shù)中的特征量值，不過也可以使用絕對值。此外， 元數(shù)據(jù)文件MDF的內(nèi)容并不局限于上面提及的特征參數(shù)。例如，在 顯示窗口 W57已經(jīng)被布置在三維顯示空間上之后，實際布置顯示窗 口 W57的三維顯示空間上的坐標(biāo)值可被登記成元數(shù)據(jù)。在圖像處理設(shè)備2中，當(dāng)如上所述把三維顯示空間上的坐標(biāo)值登 記在元數(shù)據(jù)文件MDF中時，不必為了把視頻數(shù)據(jù)的下一個顯示窗口 W57布置在三維顯示空間上，而根據(jù)特征參數(shù)另外計算三維顯示空間 中的坐標(biāo)參數(shù)，從而能夠立刻把顯示窗口 W57布置在三維顯示空間 上。(2-5)顯示處理程序下面利用流程圖具體說明由圖像處理設(shè)備2的微處理器3執(zhí)行的 對于視頻數(shù)據(jù)的顯示處理程序和對于多個視頻數(shù)據(jù)的顯示處理程序。 (2-5-l)對于視頻數(shù)據(jù)的畫面(靜止圖像)的分類顯示處理程序 如圖16中所示，圖像處理設(shè)備2的微處理器3執(zhí)行例程RT1的 初始化步驟，并進(jìn)入下一步驟SP1，在步驟SP1，微處理器3確定用戶指定的三維顯示空間的顯示軸，和向用戶顯示圖像組58的視點坐 標(biāo)，之后進(jìn)入步驟SP2。在步驟SP1，圖像處理設(shè)備2的微處理器3能夠確定顯示軸，從 而生成各種三維顯示空間，比如由代表RGB的顏色分量的R軸，G 軸和B軸定義的三維顯示空間(圖17(A));由亮度級別軸，R軸和B 軸定義的三維顯示空間(圖17(B));由運動向量軸，Cb軸和Cr軸定 義的三維顯示空間(圖17(C));由密度信息軸，亮度級別軸和色調(diào)軸定 義的三維顯示空間(圖17(D));由R軸，DCT垂直頻率軸和DCT水 平頻率軸定義的三維顯示空間(圖17(E));由DCT垂直頻率軸，Cb 軸和Cr軸定義的三維顯示空間(圖17(F));和由作為HLS空間的元素 的L(亮度)軸，H(色調(diào))軸和S(飽和度)軸定義的三維顯示空間(圖 17(G))。但是，用于生成三維顯示空間的顯示軸并不局限于上面所述， 相反，可以把登記在元數(shù)據(jù)文件中的特征參數(shù)的另一組合用作顯示 軸。在步驟SP2中，圖像處理設(shè)備2的微處理器3識別用戶指定的 待重放的視頻數(shù)據(jù)的畫面(靜止圖像)，隨后進(jìn)入步驟SP3。在步驟SP3， 微處理器3把該靜止圖像設(shè)置成目標(biāo)幀，解碼其子視頻流LD1，把解 碼的子視頻數(shù)據(jù)傳給GPU4，并進(jìn)入步驟SP4。在步驟SP4，圖像處理設(shè)備2的微處理器3詢問用作三維顯示空 間的顯示軸的特征參數(shù)的特征量，從與該靜止圖像關(guān)聯(lián)的元數(shù)據(jù)文件 MFD接收它們，并進(jìn)入步驟SP5。在步驟SP5，圖像處理設(shè)備2的微處理器3根據(jù)在步驟SP4中接 收到的特征參數(shù)的特征量，計算在其上粘貼靜止圖像的顯示窗口 W57 的三維顯示空間上的坐標(biāo)位置(坐標(biāo)參數(shù))，并進(jìn)入步驟SP6。即，圖 像處理設(shè)備2的微處理器3把靜止圖像具有的與顯示軸對應(yīng)的特征量 轉(zhuǎn)換成三維顯示空間上的坐標(biāo)值。在步驟SP6中，圖像處理設(shè)備2的微處理器3確定當(dāng)前靜止圖 像是否是待顯示的最后圖像。當(dāng)獲得肯定的結(jié)果(這意味用戶未指定除 當(dāng)前靜止圖像之外的靜止圖像，即，不存在待顯示的任何其它顯示窗口 W57)時，微處理器3進(jìn)入步驟SP7。另一方面，當(dāng)在步驟SP6中獲得否定結(jié)果(這意味用戶指定了除 當(dāng)前靜止圖像之外的視頻數(shù)據(jù)的畫面(靜止圖像)，即，存在與待顯示 的靜止圖像的另一顯示窗口 W57)時，圖像處理設(shè)備2的微處理器3 返回步驟SP2，重復(fù)上述處理，從而按照在各靜止圖像的特征參數(shù)中 設(shè)置的特征量，為與多個靜止圖像對應(yīng)的多個顯示窗口 W57計算在 三維顯示空間上的坐標(biāo)位置。在步驟SP7中，圖像處理設(shè)備2的微處理器3使得GPU 4能夠 根據(jù)在步驟SP5中計算的坐標(biāo)參數(shù)(坐標(biāo)位置)，把與靜止圖像對應(yīng)的 顯示窗口 W57粘貼在三維顯示空間上，根據(jù)在步驟SP1中確定的視 點坐標(biāo)，把三維顯示空間上的坐標(biāo)參數(shù)(坐標(biāo)位置)轉(zhuǎn)換成顯示區(qū)55的 二維屏幕上的二維坐標(biāo)位置(顯示位置參數(shù))，確定每個顯示窗口 W57 的顯示尺寸，并在二維坐標(biāo)位置上畫出顯示窗口 W57以供顯示。之 后，圖像處理設(shè)備2的微處理器3進(jìn)入步驟SP8。此時，在用戶指定多個視頻數(shù)據(jù)的靜止圖像(畫面)的情況下，圖 像處理設(shè)備2的微處理器3按照靜止圖像的特征參數(shù)，在相應(yīng)的坐標(biāo) 位置(由坐標(biāo)參數(shù)代表的位置)上布置與多個靜止圖像對應(yīng)的多個顯示 窗口W57，作為由所述多個顯示窗口 W57構(gòu)成的圖4象組58。在步驟SP8中，圖像處理設(shè)備2的微處理器3根據(jù)用戶是否已 經(jīng)發(fā)出了終止指令，或者是否已經(jīng)過去了預(yù)定的時間，確定是否結(jié)束 對顯示窗口 W57的顯示處理。當(dāng)獲得了肯定的結(jié)果時，微處理器3 進(jìn)入步驟SPll，結(jié)束顯示處理。另一方面，當(dāng)在步驟SP8中獲得了否定結(jié)果時，圖像處理設(shè)備2 的微處理器3進(jìn)入步驟SP9，而不結(jié)束對顯示窗口 W57的顯示處理。 在步驟SP9中，圖像處理設(shè)備2的微處理器3進(jìn)行等待，直到顯示窗 口 W57的視點坐標(biāo)被用戶的光標(biāo)操作改變?yōu)橹梗S后進(jìn)入下一步驟 SPIO。在步驟SPIO，圖像處理設(shè)備2的微處理器3確定顯示窗口 W57 的視點坐標(biāo)是否已被用戶實際改變。當(dāng)獲得否定的結(jié)果時，微處理器3返回步驟SP7，在步驟SP7，微處理器3繼續(xù)在初始坐標(biāo)位置顯示 靜止圖像的顯示窗口 W57。另一方面，當(dāng)獲得肯定的結(jié)果時，微處理 器3返回步驟SP1，在步驟SP1中，微處理器3確定變化后的新的視 點坐標(biāo)，重復(fù)步驟SP2和后續(xù)步驟的處理，并根據(jù)新的視點坐標(biāo)在三 維顯示空間上重新布置顯示窗口 W57。當(dāng)根據(jù)新的視點坐標(biāo)在三維顯示空間上重新布置顯示窗口 W57 時，圖像處理設(shè)備2的微處理器3布置顯示窗口 W57,使得顯示窗口 W57總是被設(shè)置成正對用戶，而與視點的變化無關(guān)，從而使得用戶總 是能夠從正面視覺地確認(rèn)顯示窗口 W57。如上所述，圖像處理設(shè)備2的微處理器3能夠按照視頻數(shù)據(jù)的靜 止圖像具有的特征參數(shù)，把靜止圖像的顯示窗口 W57布置在三維顯 示空間上的坐標(biāo)位置。從而，在指定多個視頻數(shù)據(jù)的畫面(靜止圖像) 的情況下，微處理器3能夠把所述多個靜止圖像呈現(xiàn)成由與多個視頻 數(shù)據(jù)對應(yīng)的靜止圖像的顯示窗口 W57構(gòu)成的圖像組58(圖3),從而使 用戶能夠通過圖像組58，以一個圖像的方式直觀地掌握多個視頻數(shù)據(jù) 的總趨勢。在與視頻數(shù)據(jù)的畫面(靜止圖像)對應(yīng)的顯示窗口 W57被布置在 例如由DCT水平頻率軸，R軸和G軸定義的三維顯示空間上的狀態(tài) 下，當(dāng)通過用戶的放大操作，視點坐標(biāo)被移動到偏向DCT水平頻率 軸的水平頻率較高的位置時，圖像處理設(shè)備2的微處理器3能夠呈現(xiàn) 一個放大圖像組58Zl，其中大量的具有細(xì)的垂直線的靜止圖像的顯 示窗口 W57被布置在DCT水平頻率軸附近，如圖18中所示。此外，在與視頻數(shù)據(jù)的靜止圖像對應(yīng)的顯示窗口 W57被布置在 例如由DCT水平頻率軸，R軸和G軸定義的三維顯示空間上的狀態(tài) 下，當(dāng)通過用戶的放大操作，視點坐標(biāo)被移動到偏向R軸的R值較 大的位置時，圖像處理設(shè)備2的微處理器3能夠呈現(xiàn)一個放大圖像組 58Z2,其中大量的具有較強紅色分量的靜止圖像的顯示窗口 W57被 布置在R軸附近，如圖19中所示。此外，在與視頻數(shù)據(jù)的靜止圖像對應(yīng)的顯示窗口 W57被布置在例如由DCT水平頻率軸，R軸和G軸定義的三維顯示空間上的狀態(tài) 下，當(dāng)通過用戶的放大操作，視點坐標(biāo)被移動到偏向G軸的G值較 大的位置時，圖像處理設(shè)備2的微處理器3能夠呈現(xiàn)一個放大圖像組 58Z3,其中大量的具有較強綠色分量的靜止圖像的顯示窗口 W57被 布置在G軸附近，如圖20中所示。(2-5-2)視頻數(shù)據(jù)(運動畫面)的分類顯示處理程序下面說明視頻數(shù)據(jù)(運動畫面)的顯示處理程序。視頻數(shù)據(jù)(運動畫 面)的顯示處理程序基于上和上面提及的關(guān)于視頻數(shù)據(jù)的畫面(靜止圖 像)的顯示處理例程RT1相同。即，每次按照預(yù)定的幀頻率更新構(gòu)成 視頻數(shù)據(jù)的畫面(靜止圖像)時，執(zhí)行和對于靜止圖像的顯示處理例程 RT1相同的處理。具體地說，如圖21中所示，圖像處理設(shè)備2的微處理器3執(zhí)行 例程RT2的初始化步驟，并進(jìn)入下一步驟SP21,在步驟SP21，微處 理器3確定用戶指定的三維顯示空間的顯示軸，和向用戶顯示圖像組 58的視點坐標(biāo)，之后進(jìn)入步驟SP22。在步驟SP22中，圖像處理設(shè)備2的微處理器3識別用戶指定的 待重放的視頻數(shù)據(jù)的靜止圖像，隨后進(jìn)入步驟SP23。在步驟SP23中， 圖像處理設(shè)備2的微處理器3把靜止圖像設(shè)置成目標(biāo)幀，解碼其子視 頻流LD1，把解碼的子視頻數(shù)據(jù)傳給GPU4，并進(jìn)入步驟SP24。在步驟SP24，圖像處理設(shè)備2的微處理器3詢問用作三維顯示 空間的顯示軸的特征參數(shù)的特征量，從與靜止圖像關(guān)聯(lián)的元數(shù)據(jù)文件 MDF接收它們，并進(jìn)入步驟SP25。在步驟SP25中，圖像處理設(shè)備2的微處理器3根據(jù)在步驟SP24 中接收到的特征參數(shù)的特征量，計算在其上粘貼與構(gòu)成視頻數(shù)據(jù)的靜 止圖像對應(yīng)的顯示窗口 W57的三維顯示空間上的坐標(biāo)參數(shù)(坐標(biāo)位 置)，并進(jìn)入下一子例程SRT1。即，圖像處理設(shè)備2的微處理器3把 特征參數(shù)的特征量轉(zhuǎn)換成三維顯示空間的坐標(biāo)參數(shù)(坐標(biāo)位置)，所述 三維顯示空間具有顯示軸，對顯示軸設(shè)置構(gòu)成視頻數(shù)據(jù)的各個畫面(靜 止圖像)所具有的特征參數(shù)。在子例程SRT1中，圖像處理設(shè)備2的微處理器3根據(jù)先前顯示 的靜止圖像的三維顯示空間上的坐標(biāo)參數(shù)(坐標(biāo)位置)和將在更新之后 顯示的靜止圖像的三維顯示空間上的坐標(biāo)參數(shù)(坐標(biāo)位置)之間的相互 位置關(guān)系，進(jìn)行坐標(biāo)補償處理，以計算補償?shù)淖鴺?biāo)，并進(jìn)入步驟SP26。 子例程SRT1中的該坐標(biāo)補償處理程序?qū)⒃诤竺嬲f明。在步驟SP26中，圖像處理設(shè)備2的微處理器3使得GPU 4能夠 根據(jù)在步驟SP25中計算的三維顯示空間上的坐標(biāo)位置，或者在子例 程SRT1中獲得的補償坐標(biāo)，在三維顯示空間上粘貼與構(gòu)成視頻數(shù)據(jù) 的靜止圖像對應(yīng)的顯示窗口 W57，根據(jù)在步驟SP21中確定的視點坐 標(biāo)，把三維顯示空間上的坐標(biāo)位置轉(zhuǎn)換成顯示區(qū)55上的二維屏幕上 的二維坐標(biāo)位置(顯示位置參數(shù))，確定每個顯示窗口 W57的顯示尺 寸，并按照靜止圖像的更新順序在二維坐標(biāo)位置上畫出顯示窗口 W57 以供顯示。之后，圖像處理設(shè)備2的微處理器3進(jìn)入步驟SP27。在步驟SP27中，圖像處理設(shè)備2的微處理器3根據(jù)用戶是否已 經(jīng)發(fā)出了終止指令，或者是否已經(jīng)過去了預(yù)定的時間，確定是否終止 對與視頻數(shù)據(jù)的靜止圖像對應(yīng)的顯示窗口 W57的顯示處理。當(dāng)獲得 肯定的結(jié)果時，微處理器3進(jìn)入步驟SP28，在步驟SP28中，微處理 器3結(jié)束對顯示窗口 W57的顯示處理。另一方面，當(dāng)在步驟SP27中獲得否定結(jié)果時，圖像處理設(shè)備2 的微處理器3不結(jié)束對顯示窗口 W57的顯示處理，而是返回步驟 SP21，在步驟SP21，微處理器3執(zhí)行對與接下來要指定的視頻數(shù)據(jù) 對應(yīng)的顯示窗口 W57的顯示處理。如上所述，圖像處理設(shè)備2的微處理器3在對顯示軸設(shè)置構(gòu)成視 頻數(shù)據(jù)的靜止圖像所具有的特征參數(shù)的三維顯示空間上的坐標(biāo)位置 上，布置靜止圖像的顯示窗口 W57，并且根據(jù)每次按照預(yù)定幀頻率更 新布置在三維顯示空間上的顯示窗口 W57的靜止圖像時產(chǎn)生的靜止 圖像的特征參數(shù)的特征量的變化，改變?nèi)S顯示空間上的坐標(biāo)位置(坐 標(biāo)參數(shù))以便重新布置，從而使用戶產(chǎn)生每次更新顯示窗口 W57的靜 止圖像時，顯示窗口 W57好像以浮動的方式在三維顯示空間上移動的印象。當(dāng)顯示窗口 W57的運動圖像隨著重放圖像的前進(jìn)而改變時， 這使得用戶能夠直觀并且立即識別視頻數(shù)據(jù)的時序特征(趨勢)。(2-5-3)對多個視頻數(shù)據(jù)(運動畫面)的同時顯示處理程序下面，說明對多個視頻數(shù)據(jù)的顯示處理程序。對多個視頻數(shù)據(jù)的 顯示處理程序基本上與上面提及的對一個視頻數(shù)據(jù)的顯示處理例程 RT2相同。即，圖像處理設(shè)備2的微處理器3并行地同時執(zhí)行對每個 視頻數(shù)據(jù)的顯示處理，以便在改變?nèi)S顯示空間上的位置的同時，按 照每次更新各靜止圖像時發(fā)生的靜止圖像的特征參數(shù)的變化，以運動 的方式顯示顯示窗口 W57。具體地說，如圖22中所示，圖像處理設(shè)備2的微處理器3執(zhí)行 例程RT3的初始化步驟，并進(jìn)入下一步驟SP31，在步驟SP31中， 微處理器3確定用戶指定的三維顯示空間的顯示軸，和對用戶顯示圖 像組58的視點坐標(biāo)，之后進(jìn)入步驟SP32。在步驟SP32中，圖像處理設(shè)備2的微處理器3識別用戶指定的 待重放的多個視頻數(shù)據(jù)的相應(yīng)的靜止圖像，隨后進(jìn)入步驟SP33、SP36 和SP39。在步驟SP33、 SP36和SP39中，圖像處理設(shè)備2的微處理器3 把靜止圖像設(shè)置成目標(biāo)幀，解碼它們的子視頻流LD1，把解碼的子視 頻數(shù)據(jù)分別傳給GPU4，并進(jìn)入步驟SP34、 SP37和SP40。在步驟SP34、 SP37和SP40中，圖像處理設(shè)備2的微處理器3 詢問用作三維顯示空間的顯示軸的特征參數(shù)的特征量，從與各靜止圖 像關(guān)聯(lián)的元數(shù)據(jù)文件MDF接收它們，并進(jìn)入后續(xù)步驟SP35、 SP38 和SP41。在步驟SP35、 SP38和SP41中，圖像處理設(shè)備2的微處理器3 根據(jù)在步驟SP34、 SP37和SP40中接收到的特征參數(shù)的特征量，計 算在其上粘貼與構(gòu)成各視頻數(shù)據(jù)的靜止圖像對應(yīng)的顯示窗口 W57的 三維顯示空間上的坐標(biāo)參數(shù)(坐標(biāo)位置)，并進(jìn)入下一子例程SRT1。即， 圖像處理設(shè)備2的微處理器3把特征參數(shù)的特征量轉(zhuǎn)換成三維顯示空 間的坐標(biāo)參數(shù)(坐標(biāo)位置)，所述三維顯示空間具有顯示軸，對顯示軸設(shè)置構(gòu)成多個視頻數(shù)據(jù)的各靜止圖像所具有的特征參數(shù)。在子例程SRT1中，圖像處理設(shè)備2的微處理器3根據(jù)先前顯示 的靜止圖像的三維顯示空間上的坐標(biāo)參數(shù)(坐標(biāo)位置)和將在更新之后 顯示的靜止圖像的三維顯示空間上的坐標(biāo)參數(shù)(坐標(biāo)位置)之間的相互 位置關(guān)系，進(jìn)行坐標(biāo)補償處理，以計算補償?shù)淖鴺?biāo)，并進(jìn)入步驟SP42。在步驟SP42中，圖像處理設(shè)備2的微處理器3使GPU 4能夠根 據(jù)在步驟SP35、 SP38和SP41中計算的三維顯示空間上的相應(yīng)的坐 標(biāo)位置，在三維顯示空間上粘貼與構(gòu)成視頻數(shù)據(jù)的靜止圖像對應(yīng)的顯 示窗口 W57,根據(jù)在步驟SP31中確定的視點坐標(biāo)，分別把三維顯示 空間上的坐標(biāo)位置轉(zhuǎn)換成顯示區(qū)55上的二維屏幕上的二維坐標(biāo)位置 (顯示位置參數(shù))，確定各顯示窗口 W57的顯示尺寸，并在二維坐標(biāo)位 置畫出顯示窗口 W57，從而顯示圖像組58。之后，圖^^處理設(shè)備2 的微處理器3進(jìn)入后續(xù)步驟SP43。在步驟SP43中，圖像處理設(shè)備2的微處理器3根據(jù)用戶是否已 經(jīng)發(fā)出了終止指令，或者是否已經(jīng)過去了預(yù)定的時間，確定是否終止 對圖像組58的顯示處理。當(dāng)獲得肯定的結(jié)果時，微處理器3進(jìn)入步 驟SP44，在步驟SP44中，微處理器3結(jié)束對由與多個視頻數(shù)據(jù)對應(yīng) 的多個顯示窗口 W57構(gòu)成的圖像組58的顯示處理。另一方面，在步驟SP44中獲得否定結(jié)果，圖像處理設(shè)備2的微 處理器3不結(jié)束對圖像組58的顯示處理，而是返回步驟SP31，在步 驟SP31,微處理器3執(zhí)行對與接下來要指定的視頻數(shù)據(jù)對應(yīng)的顯示 窗口 W57的顯示處理。如上所述，圖像處理設(shè)備2的微處理器3按照多個視頻數(shù)據(jù)中的 各靜止圖像具有的顯示軸的特征參數(shù)的特征量，在三維顯示空間上的 坐標(biāo)參數(shù)(坐標(biāo)位置)上布置與多個靜止圖像對應(yīng)的多個顯示窗口 W57，并且根據(jù)每次按照預(yù)定幀頻率更新布置在三維顯示空間上的顯 示窗口 W57的靜止圖像時產(chǎn)生的靜止圖像的特征參數(shù)的特征量的變 化，分別改變?nèi)S顯示空間上的坐標(biāo)參數(shù)(坐標(biāo)位置)以便重新布置， 從而使用戶產(chǎn)生每次更新顯示窗口 W57的靜止圖像時，顯示窗口 W57好像以浮動的方式在三維顯示空間上移動的印象。當(dāng)顯示窗口 W57 的運動圖像隨著重放圖像的前進(jìn)而改變時，這使得用戶能夠直觀并且 立即識別多個視頻數(shù)據(jù)的時序特征(趨勢)。即，在構(gòu)成多個不同視頻數(shù)據(jù)的靜止圖像的特征彼此非常相似的 情況下，與各視頻數(shù)據(jù)對應(yīng)的顯示窗口 W57按照相同的浮動方式沿 相同的方向移動。另一方面，在構(gòu)成多個不同視頻數(shù)據(jù)的靜止圖像的 特征彼此不同的情況下，與各視頻數(shù)據(jù)對應(yīng)的顯示窗口 W57按照不 同的浮動方式沿不同的方向移動。因此，當(dāng)用戶選擇該用戶想要關(guān)注的視頻數(shù)據(jù)時，用戶易于把注 意力僅僅集中在與所選擇的視頻數(shù)據(jù)對應(yīng)的顯示窗口 W57上，于是， 通過代表顯示窗口 W57的運動的變化的有效圖像，用戶能夠容易地 掌握視頻數(shù)據(jù)的特征(趨勢)。具體地說，如圖23中所示，在與給定的視頻數(shù)據(jù)對應(yīng)的顯示窗 口 W57的第一靜止圖像包括與B軸對應(yīng)的強藍(lán)色分量的情況下，圖 像處理設(shè)備2的微處理器3按照靜止圖像具有的對應(yīng)于B軸的特征參 數(shù)代表的特征量，把顯示窗口 W57布置在屏幕的左下角的位置POl 處。在更新視頻數(shù)據(jù)的靜止圖像之后，圖像處理設(shè)備2的微處理器3 按照該更新的靜止圖像中的藍(lán)色分量的特征量，在不同于位置POl 的位置P02處重新布置更新的靜止圖像的顯示窗口 W57。在進(jìn)一步更新視頻數(shù)據(jù)的靜止圖像之后，圖像處理設(shè)備2的微處 理器3按照此更新的靜止圖像中的藍(lán)色分量的特征量，在不同于位置 P02的位置P03處重新布置更新的靜止圖像的顯示窗口 W57。如上所述，每次視頻數(shù)據(jù)的靜止圖像被更新時，在按照各靜止圖 像的特征參數(shù)的特征量改變?nèi)S顯示空間上的坐標(biāo)位置的同時，圖像處理設(shè)備2的微處理器3重新布置顯示窗口 W57。這使用戶可以視覺 地確認(rèn)對應(yīng)于視頻數(shù)據(jù)的顯示窗口 W57好像以浮動的方式在顯示區(qū) 55的屏幕上移動的狀態(tài)。(2-5-4)坐標(biāo)補償處理程序下面說明例程RT2中的子例程SRT1(圖21)的坐標(biāo)補償處理程序 和例程RT3中的子例程SRT1(圖22)的坐標(biāo)補償處理程序。這兩個程 序彼此相同。在圖24中所示的坐標(biāo)補償處理例程SRT1中，當(dāng)顯示窗口 W57 的靜止圖像被更新，從而使該顯示窗口 W57按照其靜止圖像的特征 量順序移動時，在如圖25中所示的場景變化的時候，圖像處理設(shè)備2 的微處理器3不使顯示窗口 W57通過單一動作跳到目的地，而是在 調(diào)節(jié)顯示窗口 W57的移動速度的同時，使顯示窗口 W57逐漸移動到 目的地(使顯示窗口 W57以步進(jìn)的方式移動)。即，圖像處理設(shè)備2的 微處理器3執(zhí)行補償計算，以獲得除初始目的地的坐標(biāo)之外的補償坐 標(biāo)，從而使顯示窗口 W57 —次移動到由補償坐標(biāo)代表的位置，于是 使用戶能夠跟隨顯示窗口 W57的運動。具體地說，圖像處理設(shè)備2的微處理器3執(zhí)行子例程SRT1的初 始化，并進(jìn)入下一步驟SP61。在步驟SP61，在更新視頻數(shù)據(jù)的靜止 圖像時，圖像處理設(shè)備2的微處理器3計算與當(dāng)前靜止圖像對應(yīng)的顯 示窗口 W57的三維顯示空間上的當(dāng)前坐標(biāo)(位置POn)和與下一靜止 圖像對應(yīng)的顯示窗口 W57的三維顯示空間上的目的地坐標(biāo)(位置 POn+l)之間的差值，從而獲得假定的移動距離(歐幾里德距離)，并進(jìn) 入步驟SP62。在步驟SP62中，圖像處理設(shè)備2的微處理器3計算目的地坐標(biāo) 和當(dāng)前坐標(biāo)，從而獲得差值為"l"的向量作為移動方向向量，并進(jìn)入 步驟SP63。在步驟SP63中，圖像處理設(shè)備2的微處理器3確定在步驟SP61 中獲得的假定移動距離是否小于預(yù)先設(shè)置的預(yù)定最小移動值。當(dāng)獲得 肯定的結(jié)果(這意味假定的移動距離小于最小移動值，即，與當(dāng)前靜止 圖像對應(yīng)的顯示窗口 W57的位置POn和與下一靜止圖像對應(yīng)的顯示 窗口 W57的位置POn+l之間的距離小到足以使用戶能夠跟隨顯示窗 口 W57的運動)時，那么圖像處理設(shè)備2的微處理器3進(jìn)入下一步驟 SP64。在步驟SP64中，圖像處理設(shè)備2的微處理器3認(rèn)為顯示窗口 W57將位于的目的地坐標(biāo)是按照下一個靜止圖像的特征量確定的坐 標(biāo)值本身，把顯示窗口 W57布置在對應(yīng)于該坐標(biāo)值的位置上，并進(jìn) 入步驟SP68，在步驟SP68中，圖像處理設(shè)備2的微處理器3結(jié)束該 處理流程。另一方面，當(dāng)在步驟SP63中獲得否定的結(jié)果(這意味假定的移動 距離大于最小移動值，即，與當(dāng)前靜止圖像對應(yīng)的顯示窗口 W57的 位置POn和與下一靜止圖像對應(yīng)的顯示窗口 W57的位置POn+l之間 的距離過大，以致用戶難以跟隨顯示窗口 W57的運動)時，圖像處理 設(shè)備2的微處理器3進(jìn)入步驟SP65。在步驟SP65中，圖像處理設(shè)備2的微處理器3確定在步驟SP61 中獲得的假定移動距離的l/2(下面稱為"假定移動距離/2")是否大于預(yù) 先設(shè)置的預(yù)定最大移動距離。當(dāng)獲得肯定的結(jié)果(這意味假定移動距離 /2大于最大移動距離，即，與當(dāng)前靜止圖像對應(yīng)的顯示窗口 W57的 位置POn和與假定移動距離/2對應(yīng)的補償坐標(biāo)位置之間的距離仍然 較大，因此用戶難以跟隨顯示窗口 W57的運動)時，那么圖像處理i殳 備2的微處理器3進(jìn)入下一步驟SP66。在步驟SP66中，圖像處理設(shè)備2的微處理器3計算補償坐標(biāo)(-當(dāng)前坐標(biāo)+移動方向向量x最大移動值)，把計算的補償坐標(biāo)設(shè)成顯示 窗口W57的目的地坐標(biāo)，并進(jìn)入步驟SP68，在步驟SP68中，圖像 處理設(shè)備2的微處理器3結(jié)束該處理流程。另一方面，當(dāng)在步驟SP65中獲得否定的結(jié)果(這意味假定移動距 離/2小于最大移動距離，即，與當(dāng)前靜止圖像對應(yīng)的顯示窗口 W57 的位置POn和與假定移動距離/2對應(yīng)的補償坐標(biāo)位置之間的距離小 到足以使用戶能夠容易地跟隨顯示窗口 W57的運動)時，那么圖像處 理設(shè)備2的微處理器3進(jìn)入步驟SP67。在步驟SP67中，圖像處理設(shè)備2的微處理器3計算補償坐標(biāo)(-當(dāng)前坐標(biāo)+移動方向向量x假定移動距離/2)，把計算的補償坐標(biāo)設(shè)成顯 示窗口 W57的目的地坐標(biāo)，并進(jìn)入步驟SP68,在步驟SP68中，圖像處理設(shè)備2的微處理器3結(jié)束該處理流程。如圖26中所示，假定發(fā)生場景變化，其中給定視頻數(shù)據(jù)的顯示 窗口 W57立刻從與此時的靜止圖像對應(yīng)的當(dāng)前坐標(biāo)位置POn移動到 與下一個靜止圖像對應(yīng)的位置POn+l。這種情況下，在顯示窗口 W57 的位置POn和目的地坐標(biāo)位置POn+l之間的假定移動距離大于最小 移動距離的情況下，圖像處理設(shè)備2的微處理器3執(zhí)行上面的坐標(biāo)補 償處理例程SRT1，來計算補償坐標(biāo)，以便把顯示窗口 W57移動與假 定移動距離/2或者最大移動距離對應(yīng)的量(這種情況下，對應(yīng)于假定移 動距離/2的坐標(biāo)位置)，并臨時把顯示窗口 W57布置在與計算的補償 坐標(biāo)對應(yīng)的位置POm以^更顯示。此時，圖像處理設(shè)備2的微處理器3通過顯示窗口 W57顯示場 景變化后的靜止圖像。但是，作為選擇，在場景變化之后的位置POn+l 之前，可通過顯示窗口 W57顯示場景變化之前的靜止圖像。此外， 可以采用另一種方法，其中在場景變化前后的位置之間的中間位置之 前，通過顯示窗口 W57顯示場景變化之前的靜止圖像，在所述中間 位置和后續(xù)位置，通過顯示窗口 W57顯示場景變化之后的靜止圖像。在顯示窗口 W57的位置POm和與最后更新的靜止圖像對應(yīng)的 位置POn+2之間的假定移動距離仍然大于最小移動值的情況下，圖 像處理設(shè)備2的微處理器3再次計算補償坐標(biāo)，以便把顯示窗口 W57 移動與假定移動距離/2或者最大移動距離對應(yīng)的量，并臨時把顯示窗 口 W57布置在與計算的補償坐標(biāo)對應(yīng)的位置POm+l以便顯示。隨后，在顯示窗口 W57的位置POm+l和與進(jìn)一步更新的靜止 圖像對應(yīng)的位置POn+3之間的假定移動距離仍然大于最小移動值的 情況下，圖像處理設(shè)備2的微處理器3再次計算補償坐標(biāo)，以便把顯 示窗口 W57移動與假定移動距離/2或者最大移動距離對應(yīng)的量，并 臨時把顯示窗口 W57布置在與計算的補償坐標(biāo)對應(yīng)的位置POm+2以 便顯示。之后，在顯示窗口 W57的位置POm+2和與進(jìn)一步更新的靜止 圖像對應(yīng)的位置POn+4之間的假定移動距離小于最小移動值時的時刻，圖像處理設(shè)備2的微處理器3直接把顯示窗口 W57移動到與假 定移動距離對應(yīng)的位置POn+4以便顯示。即，當(dāng)按照預(yù)定的幀頻率更新對應(yīng)于視頻數(shù)據(jù)的顯示窗口 W57 的靜止圖像，以便以幀為單位按照顯示窗口 W57的靜止圖像的特征 參數(shù)的特征量重新布置顯示窗口 W57時，即使由于場景變化的緣故， 需要使顯示窗口 W57進(jìn)行較大的跳躍，圖像處理設(shè)備2的微處理器3 也不使顯示窗口 W57通過單一動作跳到目的地，而是在以步進(jìn)的方 式縮短窗口 W57的移動距離的同時，使顯示窗口 W57逐漸接近目的 地，從而在場景變化時，使用戶能夠跟隨顯示窗口 W57的運動。(3)重新布置處理在本發(fā)明的圖像處理設(shè)備2中，即使在三維顯示空間上的確定顯 示軸上布置視頻數(shù)據(jù)的顯示窗口 W57之后，也能夠按照用戶的操作 任意改變定義三維顯示空間的顯示軸，從而重新布置顯示窗口 W57。 下面說明對顯示窗口 W57的這種重新布置處理。當(dāng)在三維顯示空間上布置視頻數(shù)據(jù)的顯示窗口 W57之后，用戶 通過GUI 65(圖4-6)發(fā)出改變顯示軸的參數(shù)的指令時，圖像處理設(shè)備2 的微處理器3根據(jù)新的顯示軸重新生成新的三維顯示空間。具體地說，圖像處理設(shè)備2的微處理器3執(zhí)行圖27中所示的例 程RT4的初始化步驟，并進(jìn)入下一步驟SP71，在步驟SP71，微處理 器3識別用戶相對于顯示軸的特征參數(shù)改變操作的內(nèi)容，從而確認(rèn)與 將從當(dāng)前顯示軸變成的新顯示軸對應(yīng)的特征參數(shù)，并進(jìn)入下一步驟 SP72。在步驟SP72中，圖像處理設(shè)備2的微處理器3確定新的三維顯 示空間的顯示軸和此時設(shè)置的視點坐標(biāo)，并進(jìn)入步驟SP73。如果視 頻坐標(biāo)沒有變化，那么微處理器3使用先前設(shè)置的視點坐標(biāo)，而不進(jìn) 行修改。在步驟SP72中，圖像處理設(shè)備2的微處理器3把通過構(gòu)成圖像 組58的多個顯示窗口W57顯示的視頻數(shù)據(jù)的靜止圖像設(shè)成目標(biāo)幀， 詢問用作新的三維顯示空間的顯示軸的特征參數(shù)的特征量，從與目標(biāo)幀關(guān)聯(lián)的元數(shù)據(jù)文件MDF接收它們，并進(jìn)入步驟SP74。在步驟SP74,圖像處理設(shè)備2的微處理器3根據(jù)在步驟SP73 中接收到的特征參數(shù)的特征量，計算在其上粘貼靜止圖像的顯示窗口 W57的新的三維顯示空間上的坐標(biāo)參數(shù)(坐標(biāo)位置)，并進(jìn)入步驟 SP75,在步驟SP75，圖像處理設(shè)備2的微處理器3確定是否不存在將 通過顯示窗口 W57顯示的視頻數(shù)據(jù)的任何其它靜止圖像。當(dāng)獲得肯定的結(jié)果(這意味不存在待顯示的視頻數(shù)據(jù)的任何其它 顯示窗口W57)時，微處理器3進(jìn)入后續(xù)步驟SP76。另一方面，當(dāng)在步驟SP75中獲得否定的結(jié)果(這意味存在待顯示 的視頻數(shù)據(jù)的另一顯示窗口 W57)時，圖像處理設(shè)備2的微處理器3 返回步驟SP72，在步驟SP72,微處理器3重復(fù)上述處理，從而按照 各靜止圖像的特征參數(shù)，為與多個視頻數(shù)據(jù)對應(yīng)的多個顯示窗口 W57 計算在新的三維顯示空間上的坐標(biāo)位置。在步驟SP76中，圖像處理設(shè)備2的微處理器3使GPU 4根據(jù)在 步驟SP74中計算的新的三維顯示空間的坐標(biāo)位置，把對應(yīng)于靜止圖 像的顯示窗口 W57粘貼在新的三維顯示空間上，根據(jù)在步驟SP72中 確定的視點坐標(biāo)，把三維顯示空間上的坐標(biāo)參數(shù)(坐標(biāo)位置)轉(zhuǎn)換成顯 示區(qū)55的二維屏幕上的二維坐標(biāo)位置(顯示位置參數(shù))，確定多個顯示 窗口 W57的顯示尺寸，在二維坐標(biāo)位置畫出顯示窗口 W57以〗更顯示， 從而能夠顯示由已在新的三維顯示空間上重新布置的多個顯示窗口 W57構(gòu)成的圖像組58。之后，圖像處理設(shè)備2的微處理器3進(jìn)入步 驟SP77。在步驟SP77中，圖像處理設(shè)備2的微處理器3根據(jù)用戶是否已 經(jīng)發(fā)出了終止指令，或者是否已經(jīng)過去了預(yù)定時間，確定是否結(jié)束對 圖像組58的顯示處理。當(dāng)獲得肯定的結(jié)果時，微處理器3進(jìn)入步驟 SP80，在步驟SP80，微處理器3結(jié)束圖像組58的顯示處理。另一方面，當(dāng)在步驟SP77中獲得否定的結(jié)果時，圖像處理設(shè)備 2的微處理器3進(jìn)入步驟SP78，而不結(jié)束對圖像組58的顯示處理。在步驟SP78中，微處理器3進(jìn)行等待，直到顯示窗口 W57的視點坐 標(biāo)被用戶的光標(biāo)操作改變?yōu)橹?，隨后進(jìn)入后續(xù)步驟SP79。在步驟SP79中，微處理器3確定用戶是否已經(jīng)實際改變了顯示 窗口 W57的視點坐標(biāo)。當(dāng)獲得否定的結(jié)果時，微處理器3返回步驟 SP76，在步驟S76微處理器3繼續(xù)在初始坐標(biāo)位置顯示圖像組58。 另一方面，當(dāng)獲得肯定的結(jié)果時，微處理器3返回步驟SP71,在步 驟SP71，微處理器3識別用戶相對于顯示軸的特征參數(shù)改變搮作的 內(nèi)容，以確認(rèn)與要從當(dāng)前顯示軸變成的新顯示軸對應(yīng)的特征參數(shù)，并 重復(fù)步驟SP72和后續(xù)步驟的處理。例如，如圖28中所示，假定顯示窗口 W571和W572 ^L布置在 由B軸、DCT垂直頻率軸和DCT水平頻率軸定義的三維顯示空間上。 這種情況下，當(dāng)定義三維顯示空間的顯示軸被變成R軸，B軸和G軸 時，圖像處理設(shè)備2的微處理器3按照與新設(shè)置的顯示軸對應(yīng)的視頻 數(shù)據(jù)的靜止圖像的特征參數(shù)的特征量，重新布置顯示窗口 W571和 W572。于是，圖像處理設(shè)備2的微處理器3任意改變定義三維顯示空間 的顯示軸，以適合用戶的重新布置顯示窗口 W57的需要或偏愛，從 而使得用戶能夠通過重排結(jié)果，直觀地掌握視頻數(shù)據(jù)的總體特征(趨 勢)。從而，例如，顯示在圖28的左側(cè)中的由B軸，DCT垂直頻率軸 和DCT水平頻率軸定義的三維顯示空間上的顯示窗口 W571和W572 使用戶產(chǎn)生窗口 W571和W572的靜止圖像(大海)具有相似特征量的 藍(lán)色分量的印象，而顯示在圖28的右側(cè)中的由R軸，B軸和G軸定 義的新的三維顯示空間上的顯示窗口 W571和W572使用戶產(chǎn)生窗口 W571和W572的靜止圖像(大海)具有不同特征量的綠色分量和紅色 分量的印象。利用這種配置，用戶能夠容易地管理和搜索視頻數(shù)據(jù)。(4)組顯示處理此外，在圖像處理設(shè)備2中，可以分組的方式顯示與其具有相似 特征的靜止圖像對應(yīng)的顯示窗口 W57。這里將說明分組顯示處理。例如，如圖29(A)和29(B)中所示，在圖像處理設(shè)備2的微處理 器3中，在對應(yīng)于多個視頻數(shù)據(jù)的多個顯示窗口 W571-W578被布置 在三維顯示空間上的情況下，當(dāng)所述多個視頻數(shù)據(jù)被重放時，每次更 新通過顯示窗口顯示的靜止圖像時，顯示窗口 W571-W578沿著相應(yīng) 的箭頭的方向一點一點地移動。隨后，如圖29(C)中所示，在視頻數(shù)據(jù)的重放過程中或之后，圖 像處理設(shè)備2的微處理器3計算相鄰的顯示窗口之間的距離Ll。當(dāng) 距離Ll小于預(yù)定閾值TH1時，微處理器3確定相鄰靜止圖像之間特 征量方面的相似性較高；另一方面，當(dāng)所述距離Ll大于預(yù)定閾值TH1 時，微處理器3確定相鄰靜止圖像之間特征量方面的相似性較低。例 如，圖像處理設(shè)備2的微處理器3把具有較高相似性的顯示窗口 W571 和W573放在一起作為第一組，并給予顯示窗口 W571和W573的框 架第一預(yù)定顏色，類似地，把顯示窗口 W572、 W577和W578放在 一起作為第二組，并給予顯示窗口 W572、 W577和W578的框架第 二預(yù)定顏色。這種情況下，例如就顯示窗口 W574、 W576和W575來說，彼 此之間的距離Ll大于閾值THl,因此相鄰靜止圖像之間特征量方面 的相似性較低，從而圖像處理設(shè)備2的微處理器3從分組目標(biāo)中除去 顯示窗口 W574、 W576和W575，并例如降低顯示窗口 W574、 W576 和W575的亮度級別，以產(chǎn)生與第一組和第二組的視覺差異。具體地說，如圖30中所示，圖像處理設(shè)備2的微處理器3執(zhí)行 例程RT5的初始化步驟，并進(jìn)入下一步驟SP91,在步驟SP91中， 微處理器3對于構(gòu)成顯示在顯示區(qū)55上的圖像組58的多個顯示窗口 W571-W578，計算相鄰的顯示窗口 W57之間的距離Ll，并進(jìn)入下一 步驟SP92。在步驟SP92，圖像處理設(shè)備2的微處理器3比較相鄰顯示窗口 W57之間的距離Ll和預(yù)先設(shè)置的預(yù)定閾值TH1，以確定距離Ll是 否小于閾值L1。當(dāng)獲得肯定的結(jié)果時，微處理器3進(jìn)入步驟SP93。在步驟SP93，由于相鄰顯示窗口 W57之間的距離Ll小于閾值TH1，因此圖像處理設(shè)備2的微處理器3認(rèn)為多個顯示窗口 W57被布 置在三維顯示空間上接近的位置，即，顯示窗口 W57的靜止圖像的 特征量彼此相似，從而確定顯示窗口 W57之間的相似性較高，并進(jìn) 入步驟SP94。在步驟SP94，圖像處理設(shè)備2的微處理器3給予被確定為具有 相似性的多個顯示窗口 W57的顯示框架第一或第二預(yù)定顏色，從而 把它們顯示成具有相似特征量的組，并進(jìn)入后續(xù)步驟SP95。在步驟SP95中，圖像處理設(shè)備2的微處理器3確定圖像組58 中的所有顯示窗口 W57的相似性是否都已被確定。當(dāng)獲得否定的結(jié) 果時，微處理器3返回步驟SP91，重復(fù)上述處理，并且當(dāng)完成關(guān)于 所有顯示窗口 W57的相似性的確定時，從而獲得肯定的結(jié)果。隨后 處理器3進(jìn)入步驟SP98，以結(jié)束該處理流程。另一方面，當(dāng)在步驟SP92中獲得否定的結(jié)果時，圖像處理設(shè)備 2的微處理器3進(jìn)入步驟SP96，在步驟SP96中，因為相鄰顯示窗口 W57之間的距離Ll不小于閾值TH1，因此微處理器3確定相鄰的顯 示窗口 W57不具有相似性，于是兩個顯示窗口 W57不被布置在三維 顯示空間上的接近位置，即，相鄰顯示窗口 W57的靜止圖像的特征 量并不彼此相似，微處理器3進(jìn)入步驟SP97。在步驟SP97中，圖像處理設(shè)備2的微處理器3并不把被確定為 無相似性的相鄰顯示窗口 W57放在一起，而是降低顯示窗口 W57的 亮度級別，從而使用戶能夠視覺地確認(rèn)這些顯示窗口 W57不能被分 類為一組，從而導(dǎo)致分組的顯示窗口 W57的突出顯示。之后，微處 理器3進(jìn)入步驟SP98，從而結(jié)束該處理流程。如上所述，在視頻數(shù)據(jù)的重放過程中或之后，圖像處理設(shè)備2 的微處理器3根據(jù)與多個視頻數(shù)據(jù)對應(yīng)的多個顯示窗口 W57的靜止 圖像，確定所述多個顯示窗口，從而把圖像組58分成具有相似性的 一組和無相似性的一組。此外，圖像處理設(shè)備2的微處理器3給予屬 于具有相似性的一組的顯示窗口 W57的框架預(yù)定顏色，同時降低屬 于無相似性的一組的顯示窗口 W57的亮度級別，從而使用戶能夠根據(jù)該突出顯示，立刻直觀地識別圖像組58的各顯示窗口 W57的特征 量的趨勢。圖像處理設(shè)備2的微處理器3可在開始對多個視頻數(shù)據(jù)的重放處 理之前的時刻，或者每次更新正被重放的視頻數(shù)據(jù)的靜止圖像時，根 據(jù)第一靜止圖像執(zhí)行分組顯示處理例程RT5。順便提及，代替降低無相似性的顯示窗口 W57的亮度級別，圖 像處理設(shè)備2的微處理器3可給予無相似性的顯示窗口 W57與分組 的顯示窗口 W57相反的顏色。此外，代替給予分組的顯示窗口 W57 預(yù)定顏色，微處理器3可增大分組的顯示窗口 W57的亮度級別或者 使分組的顯示窗口 W57閃爍。問題在于，只需要突出顯示屬于具有 相似性的一組的顯示窗口 W57，以便把它們和其它顯示窗口 W57區(qū) 分開。可以產(chǎn)生代表視頻數(shù)據(jù)的特征參數(shù)彼此相似，或者把具有相似性 的組表示成一個新的特征參數(shù)或關(guān)聯(lián)參數(shù)(后面說明)的相似性信息。 例如，為每個視頻數(shù)據(jù)提供用于計數(shù)相似性的出現(xiàn)次數(shù)的計數(shù)器，從 而測量視頻數(shù)據(jù)之間的相似性。這種情況下，可以僅僅自動顯示計數(shù) 值大于預(yù)定閾值的視頻數(shù)據(jù)。(5)顯示應(yīng)用例子下面，說明圖像處理設(shè)備2的微處理器3能夠執(zhí)行的對于顯示窗 口 W57的顯示應(yīng)用例子。(5-l)在顯示窗口的位置保持固定的情況下，移動三維顯示空間時 的顯示處理如上所述，在圖像處理設(shè)備2中，當(dāng)對應(yīng)于視頻數(shù)據(jù)的顯示窗口 W57的靜止圖像被更新時，每個靜止圖像的特征量被改變。此時，可 以采用這樣一種配置，其中在其上靜止圖像數(shù)據(jù)的特征量被更新的目 標(biāo)顯示窗口 W57的位置不被改變，而是移動三維顯示空間和其它顯 示窗口 W57以便重新布置。這里，將說明這種使目標(biāo)顯示窗口的位 置保持固定的顯示處理。在上面的說明中，在圖像處理設(shè)備2中，如圖23中所示，每次更新顯示窗口 W57的靜止圖像時，在三維顯示空間保持固定的情況 下，按照靜止圖像的特征量布置更新的靜止圖像的顯示窗口 W57的 三維顯示空間上的坐標(biāo)參數(shù)(坐標(biāo)位置)被改變，以便以浮動的方式把 顯示窗口 W57從位置POl移動到位置P03。但是，可以采用這樣一種配置，其中在顯示區(qū)55上固定目標(biāo)顯 示窗口 W57的顯示位置的狀態(tài)下，每次更新顯示窗口 W57的靜止圖 像時，按照靜止圖像的特征量移動和/或旋轉(zhuǎn)三維顯示空間本身，從而 改變目標(biāo)顯示窗口 W57和三維顯示空間之間的相對位置關(guān)系，使得 其它顯示窗口 W57以浮動的方式接近或遠(yuǎn)離固定的目標(biāo)顯示窗口 W57。具體地說，在如圖31中所示位于圖23中的位置POl的顯示窗 口 W57C的位置被固定到顯示區(qū)55的屏幕中心位置POc的情況下， 在保持與顯示窗口 W57C的相對位置關(guān)系的同時，圖像處理設(shè)備2的 微處理器3顯示存在于顯示窗口 W57C周圍的其它顯示窗口 W57。之后，如圖32中所示，當(dāng)更新顯示窗口 W57C的靜止圖像時， 在顯示窗口 W57C的位置被固定到屏幕中心位置POc的情況下，圖 像處理設(shè)備2的微處理器3按照更新的靜止圖像的特征量，移動其它 顯示窗口 W57和三維顯示空間。類似地，如圖33中所示，當(dāng)進(jìn)一步更新顯示窗口 W57C的靜止 圖像時，在顯示窗口 W57C的位置始終地被固定到屏幕中心位置POc 的情況下，圖像處理設(shè)備2的微處理器3按照更新的靜止圖像的特征 量，移動其它顯示窗口 W57和三維顯示空間。即，在按照逐幀地變化的靜止圖像的特征量，移動三維顯示空間 和其它顯示窗口 W57的時候，圖像處理設(shè)備2的微處理器3通過顯 示窗口 W57C顯示視頻數(shù)據(jù)的重放圖像，同時顯示窗口 W57C的位置 被保持固定到屏幕中心位置POc，從而使關(guān)注顯示窗口 W57C的用戶 產(chǎn)生用戶他或她自己和顯示窗口 W57C —起在三維顯示空間上移動 的印象，同時消除了用戶失去顯示窗口 W57的軌跡的風(fēng)險。下面具體說明在顯示窗口 W57C的位置保持固定的情況下執(zhí)行的這種顯示處理程序。如圖34中所示，圖像處理設(shè)備2的微處理器3 執(zhí)行例程RT6的初始化步驟，并進(jìn)入下一步驟SP101。在步驟SP101中，圖像處理設(shè)備2的微處理器3確定用戶指定 的三維顯示空間的顯示軸，和向用戶顯示圖像組58的視點坐標(biāo)，之 后進(jìn)入步驟SP102。在步驟SP102中，圖像處理設(shè)備2的微處理器3識別用戶指定 的待重放的視頻數(shù)據(jù)的靜止圖像，隨后進(jìn)入步驟SP103。在步驟SP103 中，微處理器3把該靜止圖像設(shè)置成目標(biāo)幀，解碼其子視頻流LD1， 把解碼的子視頻數(shù)據(jù)傳給GPU4，隨后進(jìn)入后續(xù)步驟SP104。在步驟SP104中，圖像處理設(shè)備2的微處理器3詢問用作三維 顯示空間的顯示軸的特征參數(shù)的特征量，從與該靜止圖像關(guān)聯(lián)的元數(shù) 據(jù)文件MDF接收它們，并進(jìn)入步驟SP105。在步驟SP105中，圖像處理設(shè)備2的微處理器3根據(jù)在步驟 SP104中接收到的特征參數(shù)的特征量，計算在其上粘貼靜止圖像的顯 示窗口 W57C的三維顯示空間上的坐標(biāo)參數(shù)(坐標(biāo)位置)，改變視點坐 標(biāo)，使得三維顯示空間上的坐標(biāo)位置對應(yīng)于屏幕中心位置POc,并進(jìn) 入步驟SP106。在步驟SP106,在目標(biāo)幀的顯示窗口 W57C的位置被固定到屏幕 中心位置POc的狀態(tài)下，圖像處理設(shè)備2的微處理器3顯示第一靜止 圖像，重新布置與存在于顯示窗口 W57C周圍的其它視頻數(shù)據(jù)對應(yīng)的 顯示窗口W57，并進(jìn)入后續(xù)步驟SP107。在步驟SP107，在顯示窗口 W57C的位置被固定到屏幕中心位置 POc的狀態(tài)下，圖像處理設(shè)備2的微處理器3按照例如預(yù)定的幀頻率 更新顯示窗口 W57C的靜止圖像，詢問用作顯示軸的特征參數(shù)的特征 量，從與更新的靜止圖像關(guān)聯(lián)的元數(shù)據(jù)文件MDF接收它們，并進(jìn)入 步驟SP108。在步驟SP108，在顯示窗口 W57C的位置被固定到屏幕中心位置 POc的情況下，圖像處理設(shè)備2的微處理器3使得GPU 4能夠按照 更新的靜止圖像的特征量，重新畫出三維顯示空間和存在于顯示窗口W57C周圍的其它顯示窗口 W57，并進(jìn)入步驟SP109。在步驟SP109，微處理器3根據(jù)用戶是否已經(jīng)發(fā)出了終止指令， 或者是否已經(jīng)過去了預(yù)定時間，確定是否結(jié)束對位于屏幕中心位置 POc的顯示窗口 W57C的顯示處理。當(dāng)獲得肯定的結(jié)果時，微處理器 3進(jìn)入步驟SP10，結(jié)束對顯示窗口 W57C的顯示處理。另一方面，當(dāng)在步驟SP109中獲得否定的結(jié)果時，微處理器3 并不結(jié)束對位于屏幕中心位置POc的顯示窗口 W57C的顯示處理， 而是返回步驟SPIOI，重復(fù)上述處理。如上所述，在按照待更新的靜止圖像的特征量移動三維顯示空間 和其它顯示窗口 W57C的時候，圖像處理設(shè)備2的微處理器3通過顯 示窗口 W57C顯示視頻數(shù)據(jù)的重放圖像，同時顯示窗口 W57C的位置 被固定到屏幕中心位置POc,從而使用戶能夠通過顯示窗口 W57C與 三維顯示空間和其它顯示窗口 W57之間的相對位置關(guān)系的變化，直 觀地識別目標(biāo)視頻數(shù)據(jù)的特征。(5-3)利用子瀏覽器的放大顯示例子在圖像處理設(shè)備2的微處理器3中，構(gòu)成圖像組58的各個顯示 窗口 W57的顯示尺寸并不總是足夠大。從而，可能存在用戶不能通 過顯示窗口 W57滿意地視覺確認(rèn)視頻的重放圖像的情況。為了解決該問題，在圖像處理設(shè)備2中，當(dāng)用戶通過雙擊操作從 顯示窗口 W57中選擇圖像組58的顯示窗口 W571和W572時，具有 相對較大尺寸的子瀏覽器彈出，并按照放大的方式通過子瀏覽器上的 放大的顯示窗口 BW571和BW572,顯示和通過顯示窗口 W571和 W572顯示的重放圖像相同的重放圖像，如圖35中所示。借助這種配置，即使當(dāng)取決于顯示窗口 W571和W572的位置或 顯示尺寸，以很小的尺寸顯示重放圖像時，圖像處理設(shè)備2也可使用 放大的顯示窗口 BW571和BW572，從而〗吏用戶能夠滿意地確i人重放 圖像的內(nèi)容，從而易于從與多個視頻數(shù)據(jù)對應(yīng)的多個顯示窗口 W57 中搜索用戶所希望的視頻數(shù)據(jù)。圖像處理設(shè)備2的微處理器3沿著顯示區(qū)55的邊緣布置放大的顯示窗口 BW571和BW572，給予顯示窗口 W571及其對應(yīng)的放大顯 示窗口 BW571的框架相同的顏色，給予顯示窗口 W572及其對應(yīng)的 放大顯示窗口 BW572的框架相同的顏色(不同于給予顯示窗口 W571 和放大的顯示窗口 BW571的顏色)。
這種配置使得用戶能夠容易地識別顯示在放大的顯示窗口 BW571和顯示窗口 W571上的重放圖像，或者顯示在放大的顯示窗口 BW572和顯示窗口 W572上的重放圖像之間的對應(yīng)關(guān)系。
放大的顯示窗口 BW571和BW572沿著顯示區(qū)55的邊緣布置， 使得當(dāng)放大的顯示窗口 BW571和BW572的數(shù)目過度增大時，圖像組 58的一些顯示窗口可能被放大的顯示窗口隱藏。為了避免這種情況， 當(dāng)放大的顯示窗口 BW571和BW572的數(shù)目超過預(yù)定值時，放大的顯 示窗口的縱向和橫向長度被減小，以減小其整個屏幕尺寸。
(6)顯示窗口軌跡顯示處理
如上所述，在圖像處理設(shè)備2中，當(dāng)通過顯示窗口 W57顯示視 頻數(shù)據(jù)的重放圖像時，每次更新構(gòu)成視頻數(shù)據(jù)的畫面(靜止圖像)時， 三維顯示空間上顯示窗口 W57的位置被改變。在這種配置中，可能 存在在預(yù)定時間已經(jīng)過去之后，位于給定位置的顯示窗口 W57被移 動到遠(yuǎn)離先前位置的位置的情況。在這種情況下，用戶難以記住在前 一定時，正在重放的圖像所具有的特征，其結(jié)果是用戶無法充分掌握 視頻數(shù)據(jù)的總體特征(趨勢)。
鑒于上述問題，在圖像處理設(shè)備2中，在三維顯示空間上移動顯 示窗口W57的時候，顯示窗口 W57的移動過程被顯示成軌跡，從而 在視頻數(shù)據(jù)的顯示過程中，使得用戶能夠視覺地確認(rèn)重放視頻數(shù)據(jù)圖 像在過去和/或未來已具有和/或?qū)⒕哂泻畏N特征。從而，即使在顯示 視頻數(shù)據(jù)的重放圖像之后，用戶也能夠充分識別視頻數(shù)據(jù)的特征(趨 勢)。下面將說明實現(xiàn)上述優(yōu)點的軌跡顯示處理。
(6-l)標(biāo)準(zhǔn)軌跡顯示模式
圖36表示其中選擇完整軌跡顯示模式的情況。這種情況下，每 次靜止圖像被更新時，圖像處理設(shè)備2的微處理器3沿著箭頭的方向移動視頻數(shù)據(jù)的顯示窗口 W57,同時把描述與正被顯示的靜止圖像關(guān) 聯(lián)地布置的顯示窗口 W57的過去移動的軌跡，和描述顯示窗口 W57 的未來移動的軌跡顯示成線條。當(dāng)顯示過去的軌跡時，圖像處理設(shè)備2的微處理器3通過連接每 次更新顯示窗口 W57的靜止圖像時隨同顯示窗口 W57的移動一起移 動的顯示窗口 W57的重心，產(chǎn)生線條，并用例如紅色把所產(chǎn)生的線 條顯示成過去的軌跡。當(dāng)顯示未來的軌跡時，圖像處理設(shè)備2的微處理器3根據(jù)將從現(xiàn) 在更新的顯示窗口 W57的靜止圖像的特征量，計算顯示窗口 W57將 移到的坐標(biāo)參數(shù)(坐標(biāo)位置)，通過順序連接位于計算的坐標(biāo)位置的顯 示窗口 W57的未來重心，產(chǎn)生線條，并用例如藍(lán)色把所產(chǎn)生的線條 顯示成未來的軌跡。即，在圖像處理設(shè)備2中，從顯示窗口 W57沿向后方向延伸的 過去軌跡被顯示成紅線，而從顯示窗口 W57沿向前方向延伸的未來 軌跡被顯示成藍(lán)線。如上所述，按照顏色編碼的方式顯示過去和未來 的軌跡，從而使得用戶能夠立即直觀地識別顯示窗口 W57將沿哪個方向移動o代替按照顏色編碼方式顯示過去和未來軌跡，圖像處理設(shè)備2 的微處理器3可采用任何其它顯示方式來表示軌跡。例如，可分別用 實線和虛線顯示過去的軌跡和未來的軌跡。盡管在上面的說明中，圖像處理設(shè)備2的微處理器3既顯示顯示 窗口 W57的過去軌跡，又顯示它的未來軌跡，不過按照用戶的模式 選捧，可以只顯示過去軌跡和未來軌跡之一。下面利用圖37的流程圖，說明由圖像處理設(shè)備2的微處理器3 執(zhí)行的上述軌跡顯示處理的程序。圖像處理設(shè)備2的微處理器3執(zhí)行例程RT9的初始化步驟，并 進(jìn)入下一步驟SP161，在步驟SP161，微處理器3接收用戶的選擇以 指定其軌跡將被顯示的視頻數(shù)據(jù)，并進(jìn)入步驟SP162。在步驟SP162中，圖像處理設(shè)備2的微處理器3識別位于與構(gòu)成目標(biāo)視頻數(shù)據(jù)的各個靜止圖像對應(yīng)的位置處的顯示窗口 W57的重 心，并進(jìn)入步驟SP163。
在步驟SP163中，圖像處理設(shè)備2的微處理器3連接在步驟 SP162中識別的重心，從而產(chǎn)生代表描述視頻數(shù)據(jù)的顯示窗口 W57 的移動軌跡的線條，并進(jìn)入步驟SP164。
在步驟SP164，圖像處理設(shè)備2的微處理器3確定用戶是否已經(jīng) 選擇了顯示過去軌跡的過去軌跡顯示模式。當(dāng)獲得肯定的結(jié)果時，圖 像處理設(shè)備2的微處理器3進(jìn)入步驟SP165，在步驟SP165中，微處 理器3顯示從當(dāng)前顯示窗口 W57沿過去方向延伸的線條作為過去軌 跡，并進(jìn)入步驟SP169，從而結(jié)束該處理流程。
另一方面，當(dāng)在步驟SP164中獲得否定的結(jié)果(這意味用戶已經(jīng) 選擇了顯示未來軌跡的未來軌跡顯示模式，或者顯示包括過去和未來 軌跡的整個軌跡的完整軌跡顯示模式)時，圖像處理設(shè)備2的微處理器 3進(jìn)入步驟SP166。
在步驟SP166中，圖像處理設(shè)備2的微處理器3確定用戶是否 已經(jīng)選擇了未來軌跡顯示模式。當(dāng)獲得肯定的結(jié)果時，微處理器3進(jìn) 入步驟SP167，在步驟SP167中，微處理器3顯示從當(dāng)前顯示窗口 W57沿未來方向延伸的線條作為未來軌跡，并進(jìn)入步驟SP169，從而 結(jié)束該處理流程。
另一方面，當(dāng)在步驟SP166中獲得否定的結(jié)果(這意味用戶選擇 了完整軌跡顯示模式)時，圖像處理設(shè)備2的微處理器3進(jìn)入步驟 SP168，在步驟SP168中，微處理器3顯示包括從當(dāng)前顯示窗口 W57 延伸的過去側(cè)線條和未來側(cè)線條的整個軌跡，并進(jìn)入步驟SP169，從 而結(jié)束該處理流程。
從而，在圖像處理設(shè)備2的微處理器3中，在相對于顯示窗口 W57只顯示過去軌跡的情況下，如圖38中所示，只有從當(dāng)前顯示窗 口 W57沿過去方向(即，沿向后方向)延伸的線條被顯示，使得用戶獲 得運動對象好像在排出空氣的同時移動的印象。
此外，在相對于顯示窗口 W57只顯示未來軌跡的情況下，如圖39中所示，只有從當(dāng)前顯示窗口 W57沿未來方向(即，沿向前方向) 延伸的線條被顯示，使得用戶獲得運動對象好像在照亮其移動方向的 同時移動的印象。順便提及，在顯示未來軌跡的情況下，可以釆用這樣一種配置， 其中一開始并不顯示直到結(jié)束位置POe(圖36)的整個未來軌跡，而只 有從當(dāng)前顯示的顯示窗口 W57延伸的預(yù)定長度的線條被顯示成未來 軌跡。當(dāng)如上所述一開始未向用戶呈現(xiàn)結(jié)束位置POe時，用戶能夠欣 賞顯示窗口 W57的移動，同時估計結(jié)束位置POe。此外，在對顯示窗口 W57顯示包括過去和未來軌跡二者的整個 軌跡的情況下，如圖40中所示顯示從當(dāng)前顯示窗口 W57沿向前方向 和向后方向延伸的線條，使得用戶獲得好像火車在軌道上移動的印 象。如上所述，圖像處理設(shè)備2的微處理器3使得用戶能夠從上述三 種模式中任意選擇軌跡顯示方式，從而借助最易于識別的軌跡模式， 呈現(xiàn)視頻數(shù)據(jù)的每個靜止圖像的特征(趨勢)。(6-2)利用多個顯示窗口的軌跡顯示模式如圖36中所示，圖像處理設(shè)備2的微處理器3被配置成不僅顯 示正在移動的顯示窗口 W57,而且還在視頻數(shù)據(jù)重放開始時刻的顯示 窗口 W57的開始位置POs和在視頻數(shù)據(jù)重放結(jié)束時刻的顯示窗口 W57的結(jié)束位置POe，保持顯示在該時刻各自顯示的靜止圖像的顯示 窗口 W57s和W57e。圖像處理設(shè)備2的這種配置使得用戶能夠視覺地確認(rèn)與該視頻 數(shù)據(jù)對應(yīng)的顯示窗口 W57,從而直觀地把從三維顯示空間上的開始位 置POs到三維顯示空間上的結(jié)束位置POe的整個過程識別為表示顯 示窗口 W57的整個軌跡的圖像。當(dāng)然，在圖像處理設(shè)備2的微處理器3中，并非總是需要顯示位 于開始位置POs和結(jié)束位置POe的顯示窗口 W57s和W57e，相反可 以通過用戶的選擇操作不顯示它們。此外，當(dāng)用戶雙擊設(shè)置在開始位置POs附近的所有窗口顯示按45中所示，圖像處理設(shè)備2的微處理器3在由 構(gòu)成視頻數(shù)據(jù)構(gòu)成的多個畫面(靜止圖像)確定的三維顯示空間上的位 置，以預(yù)定的間隔顯示一部分顯示窗口 W57(W57s W57e)或者所有 的顯示窗口 W57s~ W57e，從而代替顯示過去和未來軌跡，或者在顯 示過去和未來軌跡的同時，向用戶呈現(xiàn)由多個顯示窗口 W57(W57s W57e)形成的連續(xù)序列作為視頻數(shù)據(jù)的特征(趨勢)。此外，如圖42中所示，當(dāng)識別出用戶對軌跡上的給定點的點擊 操作時，圖像處理設(shè)備2的微處理器3啟動通過顯示窗口 W57的重 放處理，并執(zhí)行直到與顯示窗口 W57e對應(yīng)的結(jié)束位置POe的重放圖 像的預(yù)覽顯示。借助圖像處理設(shè)備2的這種配置，在使得用戶能夠通過重放視頻 數(shù)據(jù)視覺地確認(rèn)從開始位置POs到結(jié)束位置POe通過顯示窗口 W57 以移動的方式顯示靜止圖像的狀態(tài)之后，可以通過位于用戶所希望的 位置的顯示窗口 W57恢復(fù)顯示處理，從而顯著增強用戶的可操作性。順便提及，即使在顯示與視頻數(shù)據(jù)對應(yīng)的顯示窗口期間，當(dāng)用戶 點擊軌跡上的給定點時，圖像處理設(shè)備2的微處理器3通過位于所述 給定點的顯示窗口 W57開始重復(fù)處理，并且同時在可視性方面使此 時已被顯示的顯示窗口 W57消失，從而在軌跡線上只保留一個顯示 窗口 W57。但是，當(dāng)用戶確定在圖像處理設(shè)備2中不減弱可視性時，可同時 在軌跡線上以移動的方式顯示多個顯示窗口 W57。這種情況下，如圖43所示，圖像處理設(shè)備2的微處理器3以移 動的方式在軌跡上并行顯示兩個顯示窗口 W57，使得用戶更易于搜索 他或她所希望的場景。此外，如圖44中所示，圖像處理設(shè)備2的微處理器3可以在顯 示窗口 W57的軌跡上的預(yù)定位置，保持顯示預(yù)先已經(jīng)被設(shè)置成典型 場景的靜止圖像的顯示窗口 W57a、 W57b、 W57c和W57d。借助這種配置，即使在從開始位置POs到結(jié)束位置Poe以移動 的方式顯示顯示窗口 W57之后，顯示與典型場景對應(yīng)的靜止圖像的顯示窗口W57a、 W57b、 W57c和W57d保持顯示在軌跡上。從而， 僅僅通過經(jīng)顯示窗口 W57a、 W57b、 W57c和W57d視覺地確認(rèn)與典 型場景對應(yīng)的靜止圖像，用戶就不僅能夠容易地掌握視頻數(shù)據(jù)的總體 趨勢，而且能夠掌握各典型場景的特征的趨勢。
在視頻數(shù)據(jù)的來源是DVD的情況下，這樣的典型場景對應(yīng)于預(yù) 先已經(jīng)為每個章節(jié)設(shè)置的典型靜止圖像。因此，當(dāng)通過顯示窗口W57 重放DVD的視頻數(shù)據(jù)時，圖像處理設(shè)備2的微處理器3易于對保持 顯示的典型場景實現(xiàn)軌跡顯示處理。
在圖像處理設(shè)備2中，盡管在上面的說明中，對應(yīng)于典型場景的 顯示窗口 W57保持,皮顯示，不過可以基于時間，比如以恒定的時間 間隔保持顯示顯示窗口。這種情況下，用戶能夠視覺地確認(rèn)通過以恒 定的時間間隔存在的顯示窗口 W57顯示的靜止圖像，使得即使在利 用顯示窗口 W57的視頻數(shù)據(jù)的重放處理之后，用戶也能夠通過以恒 定的時間間隔保持顯示的顯示窗口 W57立即掌握視頻數(shù)據(jù)的特征(趨 勢)。
(6-3)場景變化時或快閃時的軌跡顯示模式
如圖45中所示，在通過顯示窗口 W57重放視頻數(shù)據(jù)的圖像的期 間，存在場景變化或快閃。當(dāng)在場景變化前的靜止圖像的特征量明顯 不同于在場景變化之后的靜止圖像的特征量時，在一些情況下，場景 變化之前的顯示窗口 W57be化re可顯著地跳躍到場景變化之后的顯 示窗口 W57after。
這種情況下，圖像處理設(shè)備2執(zhí)行如上所述的坐標(biāo)補償處理例程 SRT1(圖24)，從而不使顯示窗口 W57before通過一次動作跳躍到顯 示窗口 W57after,而是在以步進(jìn)的方式降低移動距離的同時，從對應(yīng) 于顯示窗口 W57before的位置朝著目的地順序布置顯示窗口 W57, 從而在場景變化的時候，使得用戶能夠視覺地確認(rèn)從顯示窗口 W57before到W57after的移動。
這種情況下，圖像處理設(shè)備2的微處理器3不使顯示窗口 W57 在其軌跡上通過一次動作跳躍到目的地，而是使顯示窗口 W57以步進(jìn)的方式從場景變化之前的顯示窗口 W57before的位置移動到場景 變化之后的顯示窗口 W57after的位置。此時，圖像處理設(shè)備2的微 處理器3僅僅突出顯示以步進(jìn)的方式移動的顯示窗口 W57(例如，用 半透明顏色，或者以閃爍的方式顯示顯示窗口 W57)。圖像處理設(shè)備2的微處理器3保持顯示場景變化之前的顯示窗口 W57before和場景變化之后的顯示窗口 W57after，從而使用戶總是能 夠視覺地確認(rèn)場景變化前后的內(nèi)容。順便提及，代替執(zhí)行上面提及的坐標(biāo)補償處理例程SRT1，圖像 處理設(shè)備2的微處理器3可以以恒定的間隔，反復(fù)顯示在顯示窗口 W57after的場景變化之前和之后的位置之間變化的靜止圖像。此時， 相對于跳躍速度，移動顯示速度極低。圖像處理設(shè)備2的微處理器3可以設(shè)置移動顯示速度，使得在顯 示窗口 W57after的場景變化之前和之后的位置之間的距離L2與顯示 窗口 W57移動距離L2所需的移動時間t2具有如圖46(A)中所示的線 性關(guān)系，或者4吏得距離L2和移動時間t2具有如圖46(B)和46(C)中所 示的非線性關(guān)系。這種情況下，當(dāng)使得顯示窗口 W57以步進(jìn)的方式從場景變化之 前的顯示窗口 W57before的位置移動到在場景變化之后的顯示窗口 W57after的位置時，圖像處理設(shè)備2的微處理器3能夠按照開始時高 速移動顯示窗口 W57并逐漸降低其移動顯示速度的方式改變顯示窗 口 W57的移動速度。此外，當(dāng)識別出用戶對在軌跡上移動的顯示窗口 W57的點擊操 作時，圖像處理設(shè)備2的微處理器3在按照此時的對應(yīng)靜止圖像的特 征量確定的位置，持續(xù)數(shù)秒或者半永久性地保持顯示點擊的顯示窗口 W57。當(dāng)識別出對該顯示窗口 W57的另一點擊操作時，圖像處理設(shè) 備2的微處理器3刪除點擊的顯示窗口 W57，或者在此時刻通過顯示 窗口 W57恢復(fù)圖像的重放。(6-4)利用時間代碼的軌跡顯示模式如圖47中所示，當(dāng)顯示窗口 W57位于三維顯示空間上的時候，通過顯示窗口 W57重放視頻數(shù)據(jù)時，圖像處理設(shè)備2的微處理器3 能夠沿著顯示窗口 W57的軌跡上的預(yù)定位置，顯示時間代碼顯示幀 TW1 ~TWn。
圖像處理設(shè)備2的微處理器3從與各靜止圖像對應(yīng)的元數(shù)據(jù)文件 MDF中讀出顯示在時間代碼顯示窗口 TWl TWn中的與視頻數(shù)據(jù) 關(guān)聯(lián)的時間代碼信息，并使用所讀出的時間代碼信息顯示時間代碼顯 示幀TW1 ~TWn的時間代碼。
此外，圖像處理設(shè)備2的微處理器3不僅能夠把對應(yīng)的時間代碼 添加到軌跡上的位置，而且還能夠通過時間代碼顯示幀TW3和TWe， 把時間代碼添加到保持被顯示的表示與典型場景對應(yīng)的靜止圖像的 顯示窗口 W57，和保持被顯示的位于結(jié)束位置Poe處的顯示窗口 W57e。
從而，不僅顯示窗口 W57的軌跡按照視頻數(shù)據(jù)的進(jìn)展以移動的 方式顯示，而且通過對軌跡線上的位置和顯示窗口 W57添加的時間 代碼顯示幀TWl~TWn，能夠向用戶呈現(xiàn)視頻數(shù)據(jù)的時間信息，從 而在通過時間代碼顯示幀TW1 TW4識別視頻數(shù)據(jù)的時間進(jìn)程的同 時，用戶能夠搜索他或她所希望的場景。
在具有非常相似特征的多個視頻數(shù)據(jù)通過它們各自的顯示窗口 W57被重放的情況下，所得到的各顯示窗口 W57的軌跡彼此非常類 似。這種情況下，顯示三個相似的軌跡。
通過視覺地確認(rèn)這種狀態(tài)，用戶能夠根據(jù)軌跡之間的相似性，估 計這三個視頻數(shù)據(jù)具有相似的內(nèi)容，從而易于管理和搜索視頻數(shù)據(jù)。
(6-5)軌跡顯示期間的顯示窗口控制模式
圖像處理設(shè)備2能夠按照視頻數(shù)據(jù)的重放圖像的進(jìn)展，以移動的 方式顯示顯示窗口 W57,同時除了顯示顯示窗口 W57的軌跡之外， 還能夠改變顯示窗口 W57的大小和形狀，這一點將在下面描述。
具體地說，在如圖48(A)中所示，沿著顯示窗口 W57在RGB顏 色分量被設(shè)置成顯示軸的參數(shù)的三維顯示空間上的軌跡，以移動的方 式顯示視頻數(shù)據(jù)的顯示窗口 W57的情況下，除了用作顯示軸的特征參數(shù)的RGB顏色分量中的特征量之外，圖像處理設(shè)備2的微處理器3 還從靜止圖像的相應(yīng)元數(shù)據(jù)文件MDF中，獲得例如構(gòu)成該視頻數(shù)據(jù) 的靜止圖像的密度信息的特征量。當(dāng)密度信息的特征量超過預(yù)定閾值 時，如圖48(B)中所示，圖像處理設(shè)備2的微處理器3按照預(yù)定的因 數(shù)放大與此時刻的靜止圖像對應(yīng)的顯示窗口 W57的尺寸。
當(dāng)靜止圖像的密度信息的特征量小于預(yù)定閾值時，如圖48(C)中 所示，圖像處理設(shè)備2的微處理器3按照預(yù)定的因數(shù)縮小與此時刻的 靜止圖像對應(yīng)的顯示窗口 W57的尺寸。
即，在靜止圖像包括大量的高頻分量，導(dǎo)致密度信息的特征量超 過預(yù)定閾值的情況下，圖像處理設(shè)備2的微處理器3放大與靜止圖像 對應(yīng)的顯示窗口 W57的尺寸，從而增強用戶的可視性。
另一方面，在靜止圖像幾乎不包括高頻分量，導(dǎo)致密度信息的特 征量小于預(yù)定閾值的情況下，圖像處理設(shè)備2的微處理器3確定即使 圖像尺寸被縮小，對于用戶來說的可視性也幾乎不發(fā)生變化，并縮小 顯示窗口W57的尺寸，從而導(dǎo)致處理負(fù)載的降低。
順便提及，盡管在上面的說明中，除了構(gòu)成顯示軸的顏色分量之 外，靜止圖像的密度信息還被用作放大或縮小顯示窗口 W57的顯示 尺寸的參數(shù)，不過也可使用其它各種特征量，比如運動量，色調(diào)和音 頻電平來放大或縮小顯示窗口 W57的尺寸。此外，不僅可以放大或 縮小顯示窗口 W57的尺寸，而且還可以改變顯示窗口 W57的框架的 形狀，或者同時控制顯示尺寸和框架形狀二者。
(7)操作和優(yōu)點
如上所述，當(dāng)通過顯示窗口 W57顯示視頻數(shù)據(jù)的重放圖像時， 每次按照構(gòu)成視頻數(shù)據(jù)的各靜止圖像的特征量更新視頻數(shù)據(jù)的幀時， 圖像處理設(shè)備2的微處理器3把顯示窗口 W57布置在利用用戶指定 的顯示軸產(chǎn)生的三維顯示空間上。
每次視頻數(shù)據(jù)的幀被更新時，特征量發(fā)生變化，從而改變顯示窗 口 W57的目的地坐標(biāo)位置，由此使用戶產(chǎn)生顯示窗口 W57好像以浮 動的方式在三維顯示空間上移動的印象。例如，當(dāng)在旅行目的地用攝像機拍攝的視頻數(shù)據(jù)被布置在三維顯示空間上，并通過顯示窗口 W57顯示視頻數(shù)據(jù)的重放圖像時，顯示 例如"大海"的顯示窗口 W57移動到其中布置在海灘上拍攝的視頻數(shù) 據(jù)的許多顯示窗口 W57的區(qū)域。當(dāng)視頻數(shù)據(jù)的場景隨后被更新到"山 脈，，的靜止圖像時，顯示窗口 W57相應(yīng)地移動到其中布置在山林中拍 攝的視頻數(shù)據(jù)的許多顯示窗口 W57的區(qū)域。當(dāng)視頻數(shù)據(jù)的場景隨后 被更新為"建筑物"的靜止圖像時，顯示窗口 W57相應(yīng)地移動到其中 布置在市區(qū)中拍攝的視頻數(shù)據(jù)的許多顯示窗口 W57的區(qū)域。顯示窗口 W57的運動本身代表視頻數(shù)據(jù)的特征，從而用戶能夠 通過三維顯示空間上顯示窗口 W57的位置變化，以及顯示窗口 W57 本身的運動圖像，直觀地識別視頻數(shù)據(jù)的特征(趨勢)。在常規(guī)方法中，只有構(gòu)成視頻數(shù)據(jù)的多個靜止圖像的第 一圖像被 顯示在縮略圖中。但是，上述方法不必表現(xiàn)視頻數(shù)據(jù)的趨勢。在本發(fā) 明中，由構(gòu)成視頻數(shù)據(jù)的靜止圖像的特征量的變化造成的顯示窗口 W57本身的移動以運動圖像的形式被呈現(xiàn)給用戶，使得用戶能夠正確 地理解視頻數(shù)據(jù)的特征(趨勢)，這便于視頻數(shù)據(jù)的搜索或管理。當(dāng)在視頻數(shù)據(jù)的重放期間，存在場景變化或快閃的情況下，圖像 處理設(shè)備2不使顯示窗口 W57通過一次動作從場景變化或快閃之前 的三維顯示空間上的位置跳到場景變化或快閃之后的三維顯示空間 上的位置，而是在朝著目的地以步進(jìn)的方式減小移動距離的同時，以 移動的方式顯示顯示窗口 W57,從而避免用戶失去顯示窗口 W57的 軌跡。從而，用戶能夠在不中斷的情況下掌握作為運動圖像的顯示窗 口 W57。此外，當(dāng)對應(yīng)于多個視頻數(shù)據(jù)的多個顯示窗口 W57被用于同時 進(jìn)行重放處理時，每次更新視頻數(shù)據(jù)的幀時，對應(yīng)于具有相似特征量 的視頻數(shù)據(jù)的顯示窗口 W57被集中在三維顯示空間上的特定區(qū)域， 從而使得用戶能夠通過集中或分散在三維顯示空間上的顯示窗口 W57的布置狀態(tài)，直觀且容易地識別多個視頻數(shù)據(jù)的特征(趨勢)。此外，當(dāng)在重放視頻數(shù)據(jù)，從而在三維顯示空間上顯示顯示窗口W57的狀態(tài)下，通過用戶的指令改變定義三維顯示空間的顯示軸的參 數(shù)時，圖像處理設(shè)備2產(chǎn)生新的三維顯示空間，從而明顯改變將在其 上顯示的顯示窗口 W57的布置狀態(tài)。即，用戶可以根據(jù)他或她所需 的參數(shù)，自由地改變顯示窗口 W57的布置狀態(tài)。此外，當(dāng)以移動的方式顯示顯示窗口 W57時，圖像處理設(shè)備2 按照用戶的選擇，連同顯示窗口 W57—起顯示顯示窗口 W57的過去 軌跡，其未來軌跡，或者其過去軌跡和未來軌跡二者，從而在三維顯 示空間上視覺地呈現(xiàn)顯示窗口 W57的過去和未來的移動。于是，僅 僅通過比較與多個視頻數(shù)據(jù)對應(yīng)的顯示窗口 W57的軌跡，用戶能夠 直觀地獲知在作為軌跡線圖像的視頻數(shù)據(jù)之間是否存在相似性。當(dāng)在編輯窗口的顯示區(qū)55上布置對應(yīng)于視頻數(shù)據(jù)的顯示窗口 W57，從而呈現(xiàn)顯示窗口作為圖像組58時，圖像處理設(shè)備2不顯示 定義三維顯示空間的顯示軸本身，并布置顯示窗口 W57，使得所有顯 示窗口 W57總是被置于用戶視界的正前方，使得用戶能夠容易地獲 知多個顯示窗口 W57^L布置在三維顯示空間上。如上所述，在重放視頻數(shù)據(jù)的情況下，每次構(gòu)成視頻數(shù)據(jù)的各個 靜止圖像被更新時，靜止圖像的特征量被改變。按照圖像的特征量的 變化，圖像處理設(shè)備2在顯示窗口 W57和三維顯示空間之間的相對 位置關(guān)系變化的同時，以移動的方式顯示顯示窗口 W57，從而按照畫 面的特征的變化，把視頻數(shù)據(jù)所具有的重放圖像的特征(趨勢)表示成 顯示窗口 W57的運動，使得用戶能夠直觀地識別顯示窗口 W57的運 動圖像。從而，可以通過直觀的圖像，促進(jìn)大量視頻數(shù)據(jù)的分類，管 理和搜索。(8)其它實施例盡管在上面的實施例中已經(jīng)說明了其中按照本發(fā)明的另 一實施 例的視頻處理設(shè)備被應(yīng)用于圖像處理設(shè)備2的情況，不過本發(fā)明并不 局限于此情況。作為選擇，視頻處理設(shè)備可適用于簡單計算機。這種 情況下，由攝像機拍攝的多個視頻數(shù)據(jù)被保存在計算機的內(nèi)部硬盤驅(qū) 動器中，所有視頻數(shù)據(jù)被布置在三維顯示空間上以供顯示，從而使得用戶能夠直觀地識別靜止圖像視頻數(shù)據(jù)的特征或總體趨勢，并易于搜 索他或她所希望的圖像。此外，盡管在上面的實施例中已經(jīng)說明了顯示窗口 W57被布置 在三維顯示空間上的情況，不過本發(fā)明并不局限于此情況。作為選擇， 如圖49中所示，顯示窗口 W57可被布置在二維顯示空間上，此外， 其軌跡可被顯示在二維顯示空間上。此外，盡管在上面的實施例中已經(jīng)說明了當(dāng)作為特征參數(shù)，對顯 示軸設(shè)置構(gòu)成視頻數(shù)據(jù)的畫面(靜止圖像)所具有的R(紅)，B(藍(lán))和亮 度時產(chǎn)生三維顯示空間的情況，不過本發(fā)明并不局限于此情況。另一 方面，可以使用與靜止圖像關(guān)聯(lián)的音頻信息或者時間信息作為顯示軸 的參數(shù)，或者可以使用R(紅)和B(藍(lán))兩者作為顯示軸的一個參數(shù)。如 上所述，可按照用戶的偏愛，為顯示窗口 W57的布置產(chǎn)生各種多維 顯示空間。例如，如圖50中所示，圖像處理設(shè)備2可沿著時間軸布置由亮 度，R(紅)和B(藍(lán))確定的顯示軸定義的三維顯示空間，和由運動量， DCT垂直頻率和DCT水平頻率確定的顯示軸定義的三維顯示空間， 以產(chǎn)生四維顯示空間，從而把視頻數(shù)據(jù)的顯示窗口 W57布置在四維 顯示空間上，并隨同重放處理一起以移動的方式顯示顯示窗口 W57。此外，盡管在上面的實施例中已經(jīng)說明了按照視頻數(shù)據(jù)的重放， 在三維顯示空間上以移動的方式顯示顯示窗口 W57的情況，不過本 發(fā)明并不局限于此情況。作為選擇，如圖51中所示，可以按照用戶 對設(shè)置在編輯窗口 50的顯示區(qū)55上的水平滾動條66上的標(biāo)簽67的 操作，沿著顯示窗口 W57的軌跡向過去或未來側(cè)移動顯示窗口 W57。這種情況下，用戶能夠按照他或她自己的意愿，自由地控制三維 顯示空間上顯示窗口 W57的位置，從而進(jìn)一步容易地搜索他或她所 希望的場景或者執(zhí)行編輯工作。此外，盡管在上面的實施例中，已經(jīng)說明了通過顯示窗口 W57 顯示視頻數(shù)據(jù)的重放圖像的情況，不過本發(fā)明并不局限于此情況。例 如，在構(gòu)成圖像組58的顯示窗口 W57相互重疊的情況下， 一些顯示窗口 W57可能被其它顯示窗口 W57隱藏。這種情況下，對于被隱藏 的顯示窗口 W57來說，可降低構(gòu)成視頻數(shù)據(jù)的靜止圖像的更新速率， 從而極大地減小重放速度，分辨率可被降低，可不更新靜止圖像，或 者不顯示任何圖像。如上所述，通過消除對用戶不能視覺確認(rèn)的顯示 窗口 W57的重放顯示處理，能夠降低微處理器3上的處理負(fù)栽。此外，盡管在上面的實施例中已經(jīng)說明了向軌跡線或者顯示窗口 W57添加時間代碼顯示幀TW(圖47)的情況，不過本發(fā)明并不局限于 此情況。作為選擇，可向顯示窗口 W57的軌跡線添加各種通知窗口， 比如幀編號通知窗口或者場編號通知幀，只要能夠向用戶通知過去的 重放時間即可。此外，盡管在上面的實施例中為視頻數(shù)據(jù)的每個畫面(靜止圖像) 計算特征參數(shù)或關(guān)聯(lián)參數(shù)，不過可基于多個畫面，例如以一個GOP 為單位計算特征參數(shù)或關(guān)聯(lián)參數(shù)。例如，可采用構(gòu)成一個GOP的所 有畫面的特征參數(shù)的平均值或者選自構(gòu)成一個GOP的畫面中的指定 I畫面的特征參數(shù)(關(guān)聯(lián)參數(shù))作為一個GOP的特征參數(shù)。在以多個畫面，例如一個GOP為單位計算特征參數(shù)或關(guān)聯(lián)參數(shù)， 以便保存為元數(shù)據(jù)的情況下，與基于一個畫面計算特征參數(shù)或關(guān)聯(lián)參 數(shù)的情況相比，元數(shù)據(jù)的大小可被降低，并且分析元數(shù)據(jù)所需的處理 負(fù)載也可被降低。在通過MPEG視頻格式編碼視頻數(shù)據(jù)的情況下，在生成元數(shù)據(jù) 的時候計算基于畫面或者基于GOP的特征參數(shù)或關(guān)聯(lián)參數(shù)時，所獲 得的特征參數(shù)或關(guān)聯(lián)參數(shù)可被包括在作為MPEG編碼處理的結(jié)果而 獲得的視頻流中的畫面頭或GOP頭中。(9)與視頻數(shù)據(jù)聯(lián)系的關(guān)聯(lián)參數(shù)盡管在上面的實施例中已經(jīng)說明了構(gòu)成視頻數(shù)據(jù)的畫面(靜止圖 像)的特征參數(shù)，不過本發(fā)明可應(yīng)用于利用與視頻數(shù)據(jù)聯(lián)系(關(guān)聯(lián))的參 數(shù)(關(guān)聯(lián)參數(shù))的配置。關(guān)聯(lián)參數(shù)的例子包括表示視頻數(shù)據(jù)的拍攝或記 錄的時間的時間信息，表示視頻數(shù)據(jù)的拍攝或記錄的地點的位置信息 (蟀度/經(jīng)度信息)，識別視頻數(shù)據(jù)的所有者或創(chuàng)者的標(biāo)識信息，識別的用戶的標(biāo)識信息，表示視頻數(shù)據(jù)被訪問的次 數(shù)的訪問次數(shù)，識別視頻數(shù)據(jù)的分組的分組標(biāo)識信息，識別包括在視 頻數(shù)據(jù)中的人臉的面部標(biāo)識信息，和包括在視頻數(shù)據(jù)中的標(biāo)題類別、 關(guān)鍵字或者字幕信息。這些關(guān)聯(lián)參數(shù)能夠利用已知的技術(shù)生成。術(shù)語"聯(lián)系(關(guān)聯(lián))，，狀態(tài)表示數(shù)據(jù)和參數(shù)(元數(shù)據(jù))相互聯(lián)系的狀 態(tài)。例如，即使當(dāng)視頻數(shù)據(jù)和元數(shù)據(jù)被記錄在不同的記錄介質(zhì)中，或 者傳輸自不同的傳輸線路時，如果用于識別視頻數(shù)據(jù)的信息或者視頻 數(shù)據(jù)的畫面編號被包括在參數(shù)(元數(shù)據(jù))中，那么之后可把視頻數(shù)據(jù)和 元數(shù)據(jù)相互關(guān)聯(lián)起來。在本實施例中，這樣的情況被包括在"聯(lián)系(關(guān) 聯(lián))"狀態(tài)中。這樣的關(guān)聯(lián)參數(shù)按照如上所述的相同處理程序，和特征參數(shù)一起 被用于實現(xiàn)上面提及的顯示配置。如圖52中所示，可以考慮以下應(yīng)用在服務(wù)器(視頻DB，元數(shù) 據(jù)/視頻DB)中集中管理從多個用戶1~N提供(上傳)的視頻數(shù)據(jù)，并 使得用戶能夠通過網(wǎng)絡(luò)訪問他或她感興趣的視頻數(shù)據(jù)，以便確認(rèn)視頻 數(shù)據(jù)的內(nèi)容。這種情況下，數(shù)據(jù)庫可管理對每個視頻數(shù)據(jù)的關(guān)聯(lián)參數(shù)。例如，況下，可按照訪問次數(shù)的增減，改變顯示窗口的顯示尺寸(例如，當(dāng)訪 問次數(shù)超過預(yù)先設(shè)置的閾值時，對應(yīng)的視頻數(shù)據(jù)被確定為是受歡迎 的，該視頻數(shù)據(jù)的顯示窗口的尺寸被增大，或者其顯示窗口被突出顯 示)。此外，在識別視頻數(shù)據(jù)的所有者或創(chuàng)作者的標(biāo)識信息被包括在關(guān) 聯(lián)參數(shù)中的情況下，可為每個用戶設(shè)置顯示空間。此外，可基于類別 產(chǎn)生顯示空間。例如，如圖53中所示，以比顯示窗口 W57_l， W57—3和W57—4 更大的尺寸顯示顯示窗口 W57—2， W57—5和W57—6。這意味對顯示 窗口 W57_2， W57—5和W57—6的訪問次數(shù)大于對顯示窗口 W57—1， W57—3和W57_4的訪問次數(shù)。在圖50中，已經(jīng)說明了時間軸被用于產(chǎn)生四維顯示空間窗口的情況。當(dāng)使用上面提及的關(guān)聯(lián)參數(shù)時，能夠?qū)崿F(xiàn)各種顯示配置。例如，在利用GPS產(chǎn)生的，并與視頻數(shù)據(jù)聯(lián)系的位置信息(綿度/經(jīng)度)被包括 在關(guān)聯(lián)參數(shù)中的情況下，如圖54中所示，產(chǎn)生向其增加位置信息作 為顯示軸的顯示空間。這種情況下，隨同位置信息方面的變化，視頻 數(shù)據(jù)和三維顯示空間相互聯(lián)合地移動。此外，在如圖52中所示，大量的用戶提供大量的視頻數(shù)據(jù)的情 況下，作為特征參數(shù)的相似性和關(guān)聯(lián)參數(shù)被用于在相似性和位置信息 方面對視頻數(shù)據(jù)分組，并為每個組產(chǎn)生一個顯示空間。特別地，在類 似于視頻張貼站點和SNS(社會性網(wǎng)絡(luò)服務(wù))的應(yīng)用中，為每個組產(chǎn)生 的顯示空間可被看作一個社區(qū)。從而，從許多用戶張貼的視頻數(shù)據(jù)可 用于促進(jìn)用戶之間的通信。(IO)本發(fā)明適用的設(shè)備盡管在上面的實施例中已經(jīng)說明了本發(fā)明應(yīng)用于具有如圖1中 所示配置的圖像處理設(shè)備2的情況，不過本發(fā)明并不局限于這種情況。 作為選擇，本發(fā)明可廣泛應(yīng)用于其它各種圖像處理設(shè)備，只要其能夠 實現(xiàn)作為圖像處理設(shè)備的功能即可。圖像處理設(shè)備的例子包括實現(xiàn)用于體現(xiàn)本發(fā)明的功能的計算機， 攝像機，數(shù)字照相機，游戲機，便攜式信息終端(便攜式計算機，移動 電話，便攜式游戲機)，存儲裝置(光盤裝置，家用服務(wù)器)，和處理板 或處理卡。在任意一種情況下，上述圖像處理設(shè)備共同包括機殼，信號處理 部分和外部接口，并且分別包括與其產(chǎn)品形式對應(yīng)的外圍單元。例如， 就攝像機或數(shù)字照相機來說，除了上面提及的公共組件之外，它包括 照相機單元和把拍攝的視頻圖像數(shù)據(jù)保存在存儲介質(zhì)中的寫入電路。 就具有通信功能的電子設(shè)備，比如移動電話來說，除了上面提及的公 共組件之外，它包括發(fā)射/接收電路和天線。此外，盡管在上面的實施例中已經(jīng)說明了微處理器3啟動保存在 硬盤驅(qū)動器7中的視頻處理程序，從而以移動的方式在三維空間上顯 示顯示窗口W57的情況，不過本發(fā)明并不局限于此情況。作為選擇，可對微處理器3安裝保存視頻處理程序的程序存儲介質(zhì)，以便執(zhí)行上 面提及的顯示處理。在把程序裝入硬盤驅(qū)動器7中之后，使用于執(zhí)行顯示處理的視頻 處理程序可被執(zhí)行的上述程序存儲介質(zhì)的例子不僅包括諸如軟盤， CD-ROM(光盤只讀存儲器)，DVD(數(shù)字萬用盤)之類的封裝介質(zhì)，而 且包括臨時或永久保存視頻處理程序的半導(dǎo)體存儲器或磁盤。另外， 作為把視頻處理程序保存在上述程序存儲介質(zhì)中的手段，可以利用有 線或者無線通信介質(zhì)，比如局域網(wǎng)，因特網(wǎng)，或者數(shù)字衛(wèi)星廣播，并 且在這種情況下，程序可通過諸如路由器或調(diào)制解調(diào)器之類的各種通 信接口被保存在程序存儲介質(zhì)中。此夕卜，盡管在上面的實施例中已經(jīng)說明了作為按照本發(fā)明的視頻處理設(shè)備的圖像處理設(shè)備2由充當(dāng)顯示空間生成裝置和轉(zhuǎn)換裝置的微 處理器3和充當(dāng)分類/布置裝置的微處理器3和GPU 4構(gòu)成，不過本 發(fā)明并不局限于此情況。作為選擇，按照本發(fā)明的圖像處理設(shè)備可由 借助其它各種電路配置實現(xiàn)的顯示空間生成裝置，轉(zhuǎn)換裝置和分類/ 布置裝置構(gòu)成。在本發(fā)明的精神和范圍內(nèi)可做出各種修改。此外，根據(jù)本發(fā)明的 上述說明可做出各種修改和應(yīng)用。 工業(yè)實用性按照本發(fā)明的圖像處理設(shè)備和圖像處理方法可廣泛應(yīng)用于在顯 示屏幕上重放視頻數(shù)據(jù)的各種圖像處理設(shè)備。
權(quán)利要求
1、一種圖像處理設(shè)備，其特征在于包括顯示空間生成裝置，用于生成由顯示軸定義的顯示空間，所述顯示軸由代表視頻數(shù)據(jù)或音頻數(shù)據(jù)的特征的特征參數(shù)，或者與視頻數(shù)據(jù)或音頻數(shù)據(jù)聯(lián)系的關(guān)聯(lián)參數(shù)確定；轉(zhuǎn)換裝置，用于把由特征參數(shù)指定的特征值或者由關(guān)聯(lián)參數(shù)指定的關(guān)聯(lián)值轉(zhuǎn)換成與顯示空間上的顯示軸上的位置對應(yīng)的坐標(biāo)參數(shù)；和顯示控制裝置，用于按照與轉(zhuǎn)換的坐標(biāo)參數(shù)對應(yīng)的位置的變化，通過顯示空間上的顯示窗口顯示視頻數(shù)據(jù)。
2、 按照權(quán)利要求l所述的圖像處理設(shè)備，其特征在于還包括 以畫面或者GOP為單位從視頻數(shù)據(jù)獲得特征參數(shù)的獲取裝置。
3、 按照權(quán)利要求1所述的圖像處理設(shè)備，還包括 以規(guī)定的時間間隔從音頻數(shù)據(jù)獲得特征參數(shù)的獲取裝置。
4、 按照權(quán)利要求1所述的圖像處理設(shè)備，還包括 選擇裝置，用于從多個特征參數(shù)或關(guān)聯(lián)參數(shù)中選擇用于改變通過其顯示視頻數(shù)據(jù)的顯示窗口的顯示模式的特征參數(shù)或關(guān)聯(lián)參數(shù)，作為 顯示參數(shù)，其特征在于，顯示控制裝置按照選擇裝置選擇的顯示參數(shù)的值，改變顯示視頻 數(shù)據(jù)的顯示窗口的顯示風(fēng)格。
5、 按照權(quán)利要求4所述的圖像處理設(shè)備，其特征在于， 顯示風(fēng)格包括顯示窗口的大小，顯示窗口內(nèi)的對比度，顯示窗口內(nèi)的透明度，或者顯示窗口的框架的加亮。
6、 按照權(quán)利要求1所述的圖像處理設(shè)備，還包括 選擇裝置，用于從多個特征參數(shù)或關(guān)聯(lián)參數(shù)中選擇用于選擇要顯示具有第一分辨率的第一視頻數(shù)據(jù)，還是分辨率低于第一分辨率的第 二視頻數(shù)據(jù)的特征參數(shù)或關(guān)聯(lián)參數(shù)，作為重放模式參數(shù)，其特征在于， 顯示控制裝置按照選擇裝置選擇的重放模式參數(shù)的值，選擇和顯 示第 一視頻數(shù)據(jù)或第二視頻數(shù)據(jù)。
7、 按照權(quán)利要求1所述的圖像處理設(shè)備，還包括 選擇裝置，用于從多個特征參數(shù)或關(guān)聯(lián)參數(shù)中選擇用于選擇要顯示基于第一格式的視頻數(shù)據(jù)，還是基于數(shù)據(jù)量小于第一格式的數(shù)據(jù)量 的第二格式的視頻數(shù)據(jù)的特征參數(shù)或關(guān)聯(lián)參數(shù)，作為重放模式參數(shù)，其特征在于，顯示控制裝置按照選擇裝置選擇的重放模式參數(shù)的值，選擇和顯 示基于第一格式的視頻數(shù)據(jù)或者基于第二格式的視頻數(shù)據(jù)。
8、 按照權(quán)利要求l所述的圖像處理設(shè)備，其特征在于， 顯示空間生成裝置從多個特征參數(shù)或關(guān)聯(lián)參數(shù)中選擇三個不同的特征參數(shù)或關(guān)聯(lián)參數(shù)來產(chǎn)生三維顯示空間。
9、 按照權(quán)利要求l所述的圖像處理設(shè)備，其特征在于， 顯示控制裝置分別通過對應(yīng)的顯示窗口顯示多個視頻數(shù)據(jù)。
10、 按照權(quán)利要求l所述的圖像處理設(shè)備，其特征在于， 顯示控制裝置把通過其顯示圖像視頻數(shù)據(jù)的顯示窗口隨著在顯示空間上顯示視頻數(shù)據(jù)經(jīng)過的時間而移動的移動路徑顯示成軌跡。
11、 按照權(quán)利要求10所述的圖像處理設(shè)備，其特征在于， 顯示控制裝置在軌跡上的對應(yīng)位置顯示包括在視頻數(shù)據(jù)中的靜止圖像。
12、 按照權(quán)利要求ll所述的圖像處理設(shè)備，其特征在于， 顯示控制裝置以規(guī)定的時間間隔，在軌跡上的對應(yīng)位置顯示靜止圖像。
13、 按照權(quán)利要求10所述的圖像處理設(shè)備，其特征在于， 顯示控制裝置在軌跡上顯示與視頻數(shù)據(jù)對應(yīng)的時間代碼。
14、 按照權(quán)利要求IO所述的圖像處理設(shè)備，其特征在于， 顯示控制裝置根據(jù)在當(dāng)前顯示的視頻數(shù)據(jù)的軌跡上的位置，顯示與過去對應(yīng)的軌跡和與未來對應(yīng)的軌跡，作為軌跡顯示模式。
15、 按照權(quán)利要求10所述的圖像處理設(shè)備，其特征在于， 顯示控制裝置根據(jù)當(dāng)前顯示的視頻數(shù)據(jù)的軌跡上的位置，只顯示與過去對應(yīng)的軌跡，作為過去軌跡顯示模式。
16、 按照權(quán)利要求10所述的圖像處理設(shè)備，其特征在于， 顯示控制裝置根據(jù)當(dāng)前顯示的視頻數(shù)據(jù)的軌跡上的位置，只顯示與未來對應(yīng)的軌跡作為未來軌跡顯示模式。
17、 按照權(quán)利要求l所述的圖像處理設(shè)備，還包括變差確定裝置，用于確定包括在特征參數(shù)中的特征量的變差是否 大于或等于閾值，在變差確定裝置確定所述變差大于或等于閾值的情 況下，在從改變前的坐標(biāo)參數(shù)到變化后的坐標(biāo)參數(shù)改變顯示視頻數(shù)據(jù) 的顯示窗口的移動速度的同時，進(jìn)行顯示。
18、 按照權(quán)利要求17所述的圖像處理設(shè)備，其特征在于， 顯示控制裝置進(jìn)行顯示，使得顯示窗口的移動速度將較緩慢。
19、 按照權(quán)利要求17所述的圖像處理設(shè)備，其特征在于， 在特征量大于或等于閾值的情況下，變差確定裝置確定發(fā)生了場景變化或快閃。
20、 按照權(quán)利要求1所述的圖像處理設(shè)備，還包括 解碼視頻流以產(chǎn)生視頻數(shù)據(jù)的視頻解碼器。
21、 按照權(quán)利要求1所述的圖像處理設(shè)備，其特征在于， 特征參數(shù)至少包括視頻數(shù)據(jù)的運動量，其亮度，其色調(diào)，其紅色分量，其藍(lán)色分量和其綠色分量之一。
22、 按照權(quán)利要求3所述的圖像處理設(shè)備，其特征在于， 特征參數(shù)包括音頻的信號電平。
23、 按照權(quán)利要求l所述的圖像處理設(shè)備，其特征在于， 關(guān)聯(lián)參數(shù)包括視頻數(shù)據(jù)的時間代碼。
24、 按照權(quán)利要求1所述的圖像處理設(shè)備，其特征在于， 關(guān)聯(lián)參數(shù)包括表示拍攝或記錄視頻數(shù)據(jù)的時間的時間信息。
25、 按照權(quán)利要求l所述的圖像處理設(shè)備，其特征在于， 關(guān)聯(lián)參數(shù)包括表示拍攝或記錄視頻數(shù)據(jù)的位置的位置信息。
26、 按照權(quán)利要求1所述的圖像處理設(shè)備，其特征在于， 關(guān)聯(lián)參數(shù)包括識別視頻數(shù)據(jù)的所有者或創(chuàng)作者的識別信息。
27、 按照權(quán)利要求1所述的圖像處理設(shè)備，其特征在于，關(guān)聯(lián)參數(shù)包括識別已經(jīng)訪問過該視頻數(shù)據(jù)的用戶的識別信息。
28、 按照權(quán)利要求l所述的圖像處理設(shè)備，其特征在于， 關(guān)聯(lián)參數(shù)包括AV數(shù)據(jù)被訪問的次數(shù)。
29、 按照權(quán)利要求l所述的圖像處理設(shè)備，其特征在于， 關(guān)聯(lián)參數(shù)包括識別視頻數(shù)據(jù)的組的組識別信息。
30、 按照權(quán)利要求l所述的圖像處理設(shè)備，其特征在于， 關(guān)聯(lián)參數(shù)包括識別包括在視頻數(shù)據(jù)中的人的面部的面部識別信息。
31、 按照權(quán)利要求l所述的圖像處理設(shè)備，其特征在于， 關(guān)聯(lián)參數(shù)包括包含在視頻數(shù)據(jù)中的標(biāo)題、關(guān)鍵字或字幕信息。
32、 按照權(quán)利要求l所述的圖像處理設(shè)備，還包括 記錄裝置，用于把特征參數(shù)或關(guān)聯(lián)參數(shù)作為元數(shù)據(jù)記錄在記錄介質(zhì)中，其特征在于，通過參考記錄在記錄介質(zhì)中的元數(shù)據(jù)，轉(zhuǎn)換裝置把由特征參數(shù)指 定的特征值或者由關(guān)聯(lián)參數(shù)指定的關(guān)聯(lián)值轉(zhuǎn)換成與顯示空間上的顯 示軸對應(yīng)的坐標(biāo)參數(shù)。
33、 按照權(quán)利要求1所述的圖像處理設(shè)備，還包括 記錄裝置，用于把轉(zhuǎn)換裝置轉(zhuǎn)換的坐標(biāo)參數(shù)作為元數(shù)據(jù)記錄在記錄介質(zhì)中，其特征在于，通過參考記錄在記錄介質(zhì)中的元數(shù)據(jù)，顯示控制裝置通過與坐標(biāo) 參數(shù)對應(yīng)的位置對應(yīng)于其改變的顯示窗口顯示視頻數(shù)據(jù)。
34、 按照權(quán)利要求1所述的圖像處理設(shè)備，還包括 顯示軸改變裝置，用于改變用于顯示空間上的顯示軸的特征參數(shù)或關(guān)聯(lián)參數(shù)的組合模式，其特征在于，顯示控制裝置通過具有顯示改變裝置改變的顯示軸的顯示空間 上的顯示窗口，顯示視頻數(shù)據(jù)。
35、 按照權(quán)利要求1所述的圖像處理設(shè)備，還包括元數(shù)據(jù)生成裝置，用于在顯示空間上的多個視頻數(shù)據(jù)之間的距離 落在預(yù)定值之內(nèi)的情況下，生成代表視頻數(shù)據(jù)的圖像彼此相似的相似性信息作為元數(shù)據(jù)，其特征在于，在相似性信息代表相似性的條件的情況下，顯示控制裝置改變與 多個視頻數(shù)據(jù)對應(yīng)的顯示窗口的顯示風(fēng)格。
36、 按照權(quán)利要求1所述的圖像處理設(shè)備，還包括 計數(shù)器生成裝置，用于在顯示空間上的多個視頻數(shù)據(jù)之間的距離落在預(yù)定值之內(nèi)的情況下，為每個視頻數(shù)據(jù)生成計數(shù)次數(shù)的計數(shù)器。
37、 按照權(quán)利要求36所述的圖像處理設(shè)備，其特征在于， 顯示控制裝置改變和顯示與由計數(shù)器生成裝置生成的計數(shù)器值大于或等于閾值的視頻數(shù)據(jù)對應(yīng)的顯示窗口的顯示風(fēng)格。
38、 按照權(quán)利要求36所述的圖像處理設(shè)備，其特征在于， 顯示控制裝置只顯示由計數(shù)器生成裝置生成的計數(shù)器值大于或等于閾值的視頻數(shù)據(jù)。
39、 按照權(quán)利要求36所述的圖像處理設(shè)備，其特征在于還包括 分組裝置，用于按照計數(shù)器生成裝置產(chǎn)生的計數(shù)器值，把視頻數(shù)據(jù)分成多個組，其特征在于，顯示控制裝置把歸入分組裝置劃分的組中的視頻數(shù)據(jù)顯示在每 個組的不同顯示空間上。
40、 按照權(quán)利要求36所述的圖像處理設(shè)備，還包括用于生成計數(shù)器的計數(shù)器生成裝置，所述計數(shù)器用于計數(shù)包括在 每個視頻數(shù)據(jù)的關(guān)聯(lián)參數(shù)中的訪問次數(shù)。
41、 按照權(quán)利要求40所述的圖像處理設(shè)備，其特征在于， 顯示控制裝置改變和顯示與由計數(shù)器生成裝置生成的計數(shù)器值大于或等于閾值的視頻數(shù)據(jù)對應(yīng)的顯示窗口的顯示風(fēng)格。
42、 按照權(quán)利要求41所述的圖像處理設(shè)備，其特征在于， 訪問次數(shù)包括用戶和計數(shù)器的訪問次數(shù)；以及 顯示控制裝置為每個用戶改變和顯示計數(shù)器值大于或等于閾值的視頻數(shù)據(jù)的顯示風(fēng)格。
43、 按照權(quán)利要求31所述的圖像處理設(shè)備，其特征在于還包括 計數(shù)器生成裝置，用于為每個視頻數(shù)據(jù)產(chǎn)生表示包括在關(guān)聯(lián)參數(shù)中的標(biāo)題，關(guān)鍵字或字幕信息與網(wǎng)頁中的關(guān)鍵字匹配的次數(shù)的計數(shù) 器。
44、 按照權(quán)利要求41所述的圖像處理設(shè)備，其特征在于， 顯示控制裝置改變和顯示由計數(shù)器生成裝置生成的計數(shù)器值大于或等于閾值的視頻數(shù)據(jù)的顯示風(fēng)格。
45、 一種圖像處理設(shè)備，其特征在于包括 顯示空間生成步驟，用于生成由顯示軸定義的顯示空間，所述顯示軸由代表視頻數(shù)據(jù)或音頻數(shù)據(jù)的特征的特征參數(shù)，或者與視頻數(shù)據(jù) 或音頻數(shù)據(jù)聯(lián)系的關(guān)聯(lián)參數(shù)確定；轉(zhuǎn)換步驟，用于把由特征參數(shù)指定的特征值或者由關(guān)聯(lián)參數(shù)指定 的關(guān)聯(lián)值轉(zhuǎn)換成與顯示空間上的顯示軸上的位置對應(yīng)的坐標(biāo)參數(shù)；和顯示控制步驟，用于按照與轉(zhuǎn)換的坐標(biāo)參數(shù)對應(yīng)的位置的變化， 通過顯示空間上的顯示窗口顯示視頻數(shù)據(jù)。
全文摘要
本發(fā)明涉及圖像處理設(shè)備和圖像處理方法，具體地，為了便于視頻數(shù)據(jù)的搜索或管理，做出了本發(fā)明。本發(fā)明生成由顯示軸定義的顯示空間，所述顯示軸由代表視頻數(shù)據(jù)或音頻數(shù)據(jù)的特征的特征參數(shù)，或者與視頻數(shù)據(jù)或音頻數(shù)據(jù)聯(lián)系的關(guān)聯(lián)參數(shù)確定，把由特征參數(shù)指定的特征值或者由關(guān)聯(lián)參數(shù)指定的關(guān)聯(lián)值轉(zhuǎn)換成與顯示空間上的顯示軸上的位置對應(yīng)的坐標(biāo)參數(shù)，并按照與轉(zhuǎn)換的坐標(biāo)參數(shù)對應(yīng)的位置的變化，通過顯示空間上的顯示窗口顯示視頻數(shù)據(jù)。
文檔編號H04N5/44GK101331760SQ200780000760
公開日2008年12月24日 申請日期2007年4月23日 優(yōu)先權(quán)日2006年4月24日
發(fā)明者荻窪純一 申請人:索尼株式會社