專利名稱：動態(tài)圖像數(shù)據(jù)處理的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及從動態(tài)圖像數(shù)據(jù)自動生成摘要(digest)動態(tài)圖像數(shù)據(jù)的技術(shù)。
背景技術(shù)：
近年來，隨著攝像機的普及，使用攝像機的拍攝正變得普遍。與此同時，強烈要求希望在短時間內(nèi)簡單地掌握長時間、多方面拍攝的動態(tài)圖像數(shù)據(jù)的內(nèi)容。因此，提議生成作為動態(tài)圖像數(shù)據(jù)之摘要信息的摘要動態(tài)圖像數(shù)據(jù)、所謂的摘要圖像的技術(shù)。
例如，在特開2002-142189號公報中，通過將動態(tài)圖像數(shù)據(jù)分割成多個場景(scene)，求出每個場景的評價值，連接評價值高的場景，來生成摘要動態(tài)圖像數(shù)據(jù)。在專利文獻(xiàn)1中，評價值根據(jù)場景內(nèi)幀圖像的亮度、幀圖像內(nèi)物體的數(shù)量或位置、聲音等來算出。
圖1是表示專利文獻(xiàn)1中摘要動態(tài)圖像數(shù)據(jù)的生成的說明圖。在圖表(chart)25的第3格，示出了構(gòu)成摘要動態(tài)圖像數(shù)據(jù)的生成對象之動態(tài)圖像數(shù)據(jù)的幀圖像。為了簡單，省略了幀圖像的內(nèi)容。作為將動態(tài)圖像數(shù)據(jù)分割成場景后的結(jié)果，在動態(tài)圖像數(shù)據(jù)的場景斷開處表示虛線L。
在圖1的圖表25的下方，示出了分別擴大顯示場景SA和場景SB的幀圖像中代表性的幀圖像a1、幀圖像am及幀圖像bn、幀圖像bp。場景SA是拍攝了山或天空等風(fēng)景的場景，場景SB是拍攝了船橫穿的樣子的場景。各場景由該狀態(tài)下某種程度在時間、內(nèi)容上連續(xù)的幀圖像構(gòu)成。
在圖表25的第2格，示出求得每個場景的評價值的結(jié)果、確定后的評價。如果評價為O，則表示該場景適于作為摘要動態(tài)圖像數(shù)據(jù)，如果評價為×，則表示該場景不適于作為摘要動態(tài)圖像數(shù)據(jù)。在圖表25的第1格，示出可連接評價為O的場景之摘要動態(tài)圖像數(shù)據(jù)的幀圖像。
但是，在這種現(xiàn)有的摘要動態(tài)圖像數(shù)據(jù)中，由于以場景為單位求解評價值，所以有時會漏掉適于摘要動態(tài)圖像的幀圖像，或包含不適當(dāng)?shù)膸瑘D像。
例如，幀圖像am是當(dāng)攝像機的拍攝者要拍攝建筑物10時、進(jìn)行圖像放大操作后結(jié)果拍攝的幀圖像，雖然對拍攝者是很重要的幀圖像，但卻從摘要動態(tài)圖像中漏掉。另外，幀圖像bn是只照船頭的、較不重要的圖像，但包含在摘要動態(tài)圖像中。

發(fā)明內(nèi)容
本發(fā)明是為解決上述問題而進(jìn)行的，其目的在于提供一種有效地活用動態(tài)圖像數(shù)據(jù)的幀圖像數(shù)據(jù)，生成管理摘要動態(tài)圖像的技術(shù)。
為了解決上述課題，本發(fā)明提供一種從動態(tài)圖像數(shù)據(jù)中抽取一部分動態(tài)圖像數(shù)據(jù)的動態(tài)圖像數(shù)據(jù)處理方法。該方法的特征在于，具備幀圖像評價工序，其根據(jù)規(guī)定條件，評價包含于所述動態(tài)圖像數(shù)據(jù)的多個幀圖像數(shù)據(jù)的每一個，對應(yīng)所述評價，生成第1圖像評價值；和動態(tài)圖像數(shù)據(jù)抽取工序，其對應(yīng)所述第1圖像評價值，抽取包含滿足規(guī)定條件的多個幀圖像數(shù)據(jù)的動態(tài)圖像數(shù)據(jù)。
在本發(fā)明的動態(tài)圖像處理方法中，由于動態(tài)圖像數(shù)據(jù)評價每個幀圖像數(shù)據(jù)，所以可生成由適于作為摘要動態(tài)圖像的幀圖像數(shù)據(jù)構(gòu)成的摘要動態(tài)圖像數(shù)據(jù)。
作為本發(fā)明一方式的動態(tài)圖像處理裝置，其從由在時間序列上連續(xù)的多個幀圖像數(shù)據(jù)構(gòu)成的動態(tài)圖像數(shù)據(jù)，生成摘要了其內(nèi)容的摘要動態(tài)圖像數(shù)據(jù)，其特征在于，具備取得所述動態(tài)圖像數(shù)據(jù)的取得部；算出部，其針對各個所述幀圖像數(shù)據(jù)，算出表示所述動態(tài)圖像數(shù)據(jù)的重要性之評價值；抽取部，從所述評價值及所述評價值的變動至少一方滿足規(guī)定條件的所述幀圖像數(shù)據(jù)中，抽取至少1個以上作為在時間序列上連續(xù)的幀圖像數(shù)據(jù)之集合的幀群；和生成部，其使用抽取出的所述幀群的至少一部分，生成所述摘要動態(tài)圖像數(shù)據(jù)。
根據(jù)本發(fā)明的動態(tài)圖像裝置，可對每個幀圖像數(shù)據(jù)評價動態(tài)圖像數(shù)據(jù)，生成由適于作摘要動態(tài)圖像的幀圖像數(shù)據(jù)構(gòu)成的摘要動態(tài)圖像數(shù)據(jù)。
評價值例如也可基于攝像機的變焦操作或搖場景(pan)操作來算出。所謂變焦操作是使用變焦透鏡擴大或縮小被攝體的圖像。所謂搖場景操作是固定相機的位置不變，改變相機的方向，拍攝寬的范圍。另外，評價值也可根據(jù)幀圖像內(nèi)運動物體的位置、運動物體的大小、背景的動作、膚色的大小等來算出。并且，評價值也可根據(jù)幀圖像內(nèi)物體的數(shù)量、幀圖像的亮度或顏色的直方圖、聲音數(shù)據(jù)等來算出。
上述的動態(tài)圖像處理裝置也可以具備分割部，其分割所述動態(tài)圖像數(shù)據(jù)，并分別設(shè)定多個包含多個所述幀圖像數(shù)據(jù)的場景，所述抽取部從各個所述場景中抽取至少1個以上的所述幀群。
據(jù)此，由于可在摘要動態(tài)圖像數(shù)據(jù)中包含全部場景的至少一部分，所以通過觀看摘要動態(tài)圖像，而容易地掌握全部的場景。分割部也可作成不是以場景為單位，而是以每個規(guī)定的間隔分割動態(tài)圖像數(shù)據(jù)，抽取部也可作成從分割后的數(shù)據(jù)中抽取至少1個以上的所述幀群。規(guī)定的間隔例如是基于時間或數(shù)據(jù)量的間隔。如果觀看這樣生成的摘要動態(tài)圖像，則用戶可判斷是否需要每個規(guī)定時間的動態(tài)圖像數(shù)據(jù)。因此，可生成用戶能利用于編輯操作中的摘要動態(tài)圖像數(shù)據(jù)。
并且，所述分割部也可根據(jù)所述評價值的不連續(xù)變化，來分割所述動態(tài)圖像數(shù)據(jù)。
在動態(tài)圖像中，在場景變化的場所，多數(shù)情況下各幀圖像數(shù)據(jù)的亮度或顏色的直方圖、聲音數(shù)據(jù)等相關(guān)的評價值不連續(xù)地變化。因此，通過根據(jù)這樣的評價值的不連續(xù)變化，從而可將動態(tài)圖像數(shù)據(jù)分割成場景。作為另一方法，也可根據(jù)2個幀圖像中各個象素值的差分，將動態(tài)圖像數(shù)據(jù)分割成場景。差分為規(guī)定值以上的場所可判斷為是場景變化的場所。
上述動態(tài)圖像處理裝置的所述規(guī)定的條件也可是所述評價值為規(guī)定閾值以上。并且，也可在規(guī)定的條件中增加所述評價值為規(guī)定閾值以上的狀態(tài)在規(guī)定時間以上連續(xù)。分割動態(tài)圖像數(shù)據(jù)時，也可對分割的各個數(shù)據(jù)使用不同的閾值。
并且，也可具備輸入所述摘要動態(tài)圖像數(shù)據(jù)的再生時間之希望值的再生時間輸入部；和對應(yīng)所述再生時間的希望值，調(diào)整所述閾值的調(diào)整部。
據(jù)此，可生成對應(yīng)于再生時間的希望值之摘要動態(tài)圖像數(shù)據(jù)。在生成的摘要動態(tài)圖像數(shù)據(jù)的再生時間超出包含希望值的規(guī)定范圍的時間時，也可使調(diào)整部調(diào)整閾值，再次生成摘要動態(tài)圖像數(shù)據(jù)。
上述的動態(tài)圖像處理裝置的所述抽取部也可優(yōu)先抽取所述評價值的變化率為0以上的幀群。
通常，變焦操作中及其后的幀群與變焦操作后的幀群相比，多數(shù)情況下作為動態(tài)圖像的重要性高。在基于變焦操作設(shè)定評價值時，變焦操作中及其后的幀群之評價值的變化率多為0以上，變焦操作后的幀群之評價值的變化率多為負(fù)。在變焦操作的前后，既便評價值相同，也存在變化率正負(fù)不同的幀圖像。若比較兩者，例如既便是相同的評價值，結(jié)果，多數(shù)情況下評價值的變化率為0以上的幀群與評價值的變化率為負(fù)的幀群相比，作為動態(tài)圖像的重要性高。因而，據(jù)此，可抽取更適宜作摘要動態(tài)圖像數(shù)據(jù)的幀群。
上述動態(tài)圖像處理裝置的所述抽取部也可就多個所述幀群中、所述幀群間的時間間隔為規(guī)定值以下的2個幀群，歸納所述2個幀群及其間的全部幀圖像數(shù)據(jù)，作為1個幀群抽取。
若抽取出的幀群與幀群的時間間隔窄，則觀看動態(tài)圖像的人有時感到像將摘要動態(tài)圖像不自然地中途切開似的不諧調(diào)感。根據(jù)本發(fā)明，可防止產(chǎn)生這樣的不諧調(diào)感。
并且，具備場景分割部，其分割所述動態(tài)圖像數(shù)據(jù)，分別設(shè)定多個包含多個所述幀圖像數(shù)據(jù)的場景。
并且，所述抽取部也可在所述2個幀群及其間的全部幀圖像數(shù)據(jù)在同一場景內(nèi)時，作為1個幀群抽取。
既便在場景的交替期間中途切開摘要動態(tài)圖像，觀看摘要動態(tài)圖像的人感到不諧調(diào)感也少。因此，通過在場景的交替期間不抽取2個幀群之間的幀圖像數(shù)據(jù)，可防止評價低的幀圖像數(shù)據(jù)進(jìn)入摘要動態(tài)圖像數(shù)據(jù)。
上述動態(tài)圖像處理裝置的所述抽取部也可抽取由規(guī)定數(shù)以上的幀圖像數(shù)據(jù)構(gòu)成的所述幀群。
這樣，就各幀群而言，可確保觀看摘要動態(tài)圖像的人可掌握其內(nèi)容之程度的長度。
上述之一的動態(tài)圖像處理裝置的所述算出部也可使用比較包含所述評價值的算出對象之所述幀圖像數(shù)據(jù)的2個所述幀圖像數(shù)據(jù)而求出的動作矢量，來算出所述評價值。
根據(jù)動作矢量可檢測圖像放大操作等，可特定拍攝者特別想要拍攝的幀圖像。也可將這樣的幀圖像判斷為動態(tài)圖像的重要性高，算出評價值。不必在評價值算出中必須使用動作矢量，例如也可事先在拍攝時記錄變焦操作或相機的姿勢等拍攝信息，使用該拍攝信息，算出評價值。
作為本發(fā)明的另一方式的動態(tài)圖像處理裝置，其從動態(tài)圖像數(shù)據(jù)中抽取一部分動態(tài)圖像數(shù)據(jù)，其特征在于，具備靜止圖像評價部，其根據(jù)規(guī)定的條件，評價包含于所述動態(tài)圖像數(shù)據(jù)中的多個靜止圖像數(shù)據(jù)的每一個，對應(yīng)所述評價，生成第1圖像評價值；動態(tài)圖像評價部，其對應(yīng)于所述多個靜止圖像數(shù)據(jù)各自的所述第1圖像評價值和所述第1圖像評價值時間序列上的變化率，生成所述多個靜止圖像數(shù)據(jù)各自的第2圖像評價值；和動態(tài)圖像數(shù)據(jù)抽取部，其根據(jù)所述第2圖像評價值，從所述動態(tài)圖像數(shù)據(jù)中抽取由所述第2圖像評價值比規(guī)定閾值大的多個靜止圖像數(shù)據(jù)構(gòu)成的動態(tài)圖像數(shù)據(jù)。
根據(jù)本發(fā)明的動態(tài)圖像數(shù)據(jù)處理裝置，由于不只考慮評價各幀圖像重要性的第1圖像評價值，還考慮第1圖像評價值的變化率來抽取動態(tài)圖像數(shù)據(jù)，所以可自動地抽取用戶希望的動態(tài)圖像數(shù)據(jù)。
在上述動態(tài)圖像數(shù)據(jù)處理裝置中，所述動態(tài)圖像評價部也可具有如下評價模式，即設(shè)增大所述第1圖像評價值在時間序列上的變化率為正的多個靜止圖像數(shù)據(jù)之第1圖像評價值而得到的值為所述第2圖像評價值，或者所述動態(tài)圖像評價部也可具有如下評價模式，即設(shè)降低所述第1圖像評價值在時間序列上的變化率為負(fù)的多個靜止圖像數(shù)據(jù)之第1圖像評價值而得到的值為所述第2圖像評價值。
據(jù)此，由于重點抽取在時間序列上比作為峰值時幀圖像的峰值圖像還靠前的動態(tài)圖像數(shù)據(jù)，所以可生成用戶希望的摘要圖像數(shù)據(jù)。重點抽取在時間序列上比峰值圖像還靠前的動態(tài)圖像數(shù)據(jù)多是由于朝向峰值圖像的動畫作為到達(dá)峰值圖像之前的心理準(zhǔn)備時期的動態(tài)圖像是重要的，另外，設(shè)超過峰值圖像后的圖像作為靜止圖像個體，既便增大重要性，用戶也不關(guān)心。
另外，作為增大第1圖像評價值的方法，例如有相加規(guī)定的正值的方法或乘以大于1的值的系數(shù)的方法。另外，作為增大第1圖像評價值的方法，例如有減去規(guī)定正值的方法或乘以不足1的系數(shù)的方法。并且還有一律降低為零的方法。
在上述動態(tài)圖像數(shù)據(jù)處理裝置中，所述動態(tài)圖像評價部也可具有設(shè)所述第1圖像評價值、與所述第1圖像評價值的時間序列之變化率乘以規(guī)定的正系數(shù)后的值之和為所述第2圖像評價值的評價模式。
據(jù)此，可通過操作規(guī)定的系數(shù)，而定量地調(diào)整在哪種程度重點地抽取在時間序列上比峰值圖像還靠前的動態(tài)圖像數(shù)據(jù)。該調(diào)整例如可對應(yīng)于用戶意圖的被攝物來設(shè)定。具體地說，根據(jù)用戶意圖的被攝物是動作要素大的人物還是動作要素小的風(fēng)景，適當(dāng)?shù)恼{(diào)整量不同。
在上述動態(tài)圖像數(shù)據(jù)處理裝置中，最好是所述規(guī)定系數(shù)設(shè)定成比1小的正值。因為通過發(fā)明人的實驗發(fā)現(xiàn)，規(guī)定系數(shù)一般最好是設(shè)定在0～1之間。
在上述動態(tài)圖像處理裝置中，所述動態(tài)圖像數(shù)據(jù)抽取部也可具有一種抽取模式，即根據(jù)所述第2圖像評價值，從所述動態(tài)圖像數(shù)據(jù)中僅抽取由所述第2圖像評價值比規(guī)定閾值大的多個靜止圖像數(shù)據(jù)構(gòu)成的、且再生時間比規(guī)定時間長的動態(tài)圖像數(shù)據(jù)。據(jù)此，可排除抽取用戶不希望的、非常短的動態(tài)圖像數(shù)據(jù)。
在上述動態(tài)圖像數(shù)據(jù)處理裝置中，具備對每個場景分割所述動態(tài)圖像數(shù)據(jù)的場景分割部，所述動態(tài)圖像數(shù)據(jù)抽取部也可對每個所述場景進(jìn)行所述抽取。
在上述動態(tài)圖像數(shù)據(jù)處理裝置中，所述動態(tài)圖像數(shù)據(jù)抽取部也可按每個所述場景算出所述第1圖像評價值和所述第2圖像評價值至少一方的平均值，對應(yīng)所述平均值，對每個所述場景使所述規(guī)定的閾值變化。
本發(fā)明的摘要圖像數(shù)據(jù)生成裝置，其特征在于，具備上述之一中記載的動態(tài)圖像數(shù)據(jù)處理裝置；和動態(tài)圖像數(shù)據(jù)連接部，其在所述抽取的動態(tài)圖像數(shù)據(jù)為多個時，連接所述抽取出的多個動態(tài)圖像數(shù)據(jù)，生成所述摘要圖像數(shù)據(jù)。
根據(jù)本發(fā)明的摘要圖像數(shù)據(jù)生成裝置，可連接考慮第1圖像評價值的變化率后抽取出的動態(tài)圖像數(shù)據(jù)，以自動生成摘要圖像數(shù)據(jù)。
在上述摘要圖像數(shù)據(jù)生成裝置中，所述動態(tài)圖像數(shù)據(jù)連接部也可具有按時間序列順序連接所述抽取出的多個動態(tài)圖像數(shù)據(jù)的連接模式，或者所述動態(tài)圖像數(shù)據(jù)連接部也可具有一種連接模式，即所述動態(tài)圖像數(shù)據(jù)連接部按對應(yīng)構(gòu)成所述抽取出的多個動態(tài)圖像數(shù)據(jù)各自之多個靜止圖像數(shù)據(jù)的所述第1圖像評價值和所述第2圖像評價值之一而決定的順序，連接所述抽取出的多個動態(tài)圖像數(shù)據(jù)。
另外，本發(fā)明可通過摘要圖像數(shù)據(jù)輸出裝置、動態(tài)圖像數(shù)據(jù)的屬性信息生成裝置、動態(tài)圖像數(shù)據(jù)的屬性信息存儲裝置、用于使計算機實現(xiàn)摘要圖像數(shù)據(jù)生成的方法或裝置的功能的計算機程序、記錄了該計算機程序的記錄介質(zhì)、包含該計算機程序并在載波內(nèi)具體化了的數(shù)據(jù)信號等各種方式來實現(xiàn)。


圖1是表示現(xiàn)有技術(shù)中的生成摘要動態(tài)圖像數(shù)據(jù)的說明圖。
圖2是表示本發(fā)明第1實施例中的動態(tài)圖像處理裝置的結(jié)構(gòu)示意的說明圖。
圖3是用于說明本發(fā)明第1實施例中的幀圖像的評價值的說明圖。
圖4是用于表示本發(fā)明第1實施例中變焦操作開始·結(jié)束時的幀圖像數(shù)據(jù)、搖場景操作開始·結(jié)束時的幀圖像數(shù)據(jù)之檢測方法的說明圖。
圖5是表示本發(fā)明第1實施例中運動物體mv的說明圖。
圖6是表示本發(fā)明第1實施例中合計圖3(b)～(g)的各評價值而求出的評價值「合計」的說明圖。
圖7是表示本發(fā)明第1實施例中動態(tài)圖像處理裝置100的摘要動態(tài)圖像數(shù)據(jù)生成處理的說明圖。
圖8是表示本發(fā)明第1實施例中各幀圖像的動作檢測處理的流程圖。
圖9是表示本發(fā)明第1實施例中幀群的抽取處理的流程圖。
圖10是表示本發(fā)明第1實施例中幀群的選擇處理的流程圖。
圖11是表示本發(fā)明第2實施例中圖像處理系統(tǒng)100的說明圖。
圖12是表示顯示在顯示器18a上的、圖像文件生成處理中操作顯示畫面200的說明圖。
圖13是表示本發(fā)明第2實施例中靜止圖像數(shù)據(jù)生成處理的內(nèi)容的流程圖。
圖14是表示本發(fā)明第2實施例中使用的動態(tài)圖像數(shù)據(jù)構(gòu)成的一例的說明圖。
圖15是表示本實施例的第2實施例中場景分割處理的結(jié)果的表。
圖16是表示本發(fā)明第2實施例中評價值計算處理的內(nèi)容的流程圖。
圖17是表示本發(fā)明第2實施例中動態(tài)圖像數(shù)據(jù)抽取處理的內(nèi)容的說明圖。
圖18是表示本發(fā)明第3實施例中動態(tài)圖像數(shù)據(jù)抽取處理的內(nèi)容的說明圖。
圖19是表示本發(fā)明第4實施例中圖像管理系統(tǒng)100a的說明圖。
圖20是表示本發(fā)明第4實施例的圖像管理中數(shù)據(jù)庫內(nèi)容的說明圖。
圖21是表示在本發(fā)明的第4實施例中、存儲于記錄介質(zhì)上的數(shù)據(jù)文件GF的內(nèi)容的說明圖。
圖22是表示印刷在記錄介質(zhì)上的目錄圖像的說明圖。
圖23是表示本發(fā)明第4實施例中圖像數(shù)據(jù)自動管理處理的內(nèi)容的說明圖。
具體實施例方式
下面，基于實施例，按下面的順序說明本發(fā)明的實施方式。
A、第1實施例A1、動態(tài)圖像處理裝置的結(jié)構(gòu)
A2、評價值的算出及幀群的抽取A3、第1實施例的處理A4、第1實施例的效果A5、第1實施例的變形例B、本發(fā)明第2實施例的圖像處理系統(tǒng)的結(jié)構(gòu)C、本發(fā)明第2實施例的摘要圖像數(shù)據(jù)生成處理D、本發(fā)明第3實施例的摘要圖像數(shù)據(jù)生成處理E、本發(fā)明第4實施例的摘要圖像數(shù)據(jù)的管理F、變形例A、第1實施例A1、動態(tài)圖像處理裝置的結(jié)構(gòu)圖2是表示作為實施例的動態(tài)圖像處理裝置的結(jié)構(gòu)示意的說明圖。左側(cè)表示動態(tài)圖像處理裝置100，右側(cè)表示動態(tài)圖像處理裝置100的功能塊。動態(tài)圖像處理裝置100是用于從由多個幀圖像數(shù)據(jù)構(gòu)成的動態(tài)圖像數(shù)據(jù)中，生成作為其摘要信息的摘要動態(tài)圖像數(shù)據(jù)的裝置。在本實施例中，稱幀圖像數(shù)據(jù)表示的圖像為幀圖像。該幀圖像意味著可用非交織方式顯示的靜止圖像。
動態(tài)圖像處理裝置100是通用的個人計算機，動態(tài)圖像處理裝置100中具備作為輸入信息裝置的鍵盤120及鼠標(biāo)130、和作為輸出信息的裝置的顯示器150。另外，在動態(tài)圖像處理裝置中，作為輸入動態(tài)圖像數(shù)據(jù)的裝置，備有攝像機30及CD-R/RW驅(qū)動器140。另外，作為輸入動態(tài)圖像數(shù)據(jù)的裝置，還可具備從CD-R/RW驅(qū)動器之外的DVD驅(qū)動器等各種信息存儲介質(zhì)中可讀出數(shù)據(jù)的驅(qū)動裝置。
動態(tài)圖像處理裝置100利用規(guī)定的操作系統(tǒng)下運行的應(yīng)用程序，可實現(xiàn)圖2右側(cè)中圖示的、摘要動態(tài)圖像生成控制部102、數(shù)據(jù)取得部104、場景分割部106、動作檢測部107、評價值算出部108、抽取部109、摘要動態(tài)圖像生成部110等功能。這些功能也可硬件地具備。
下面說明各功能。數(shù)據(jù)取得部104從CD-R/RW驅(qū)動器140內(nèi)的CD-RW或數(shù)字?jǐn)z像機30、或硬盤(未圖示)等中讀入動態(tài)圖像數(shù)據(jù)，在RAM上構(gòu)筑動態(tài)圖像數(shù)據(jù)庫101。另外，數(shù)據(jù)取得部104使用鍵盤120或鼠標(biāo)130也取得用戶輸入的摘要動態(tài)圖像的再生時間的希望值，并存儲在存儲器中。
場景分割部106檢測動態(tài)圖像的場景的交替期間，將動態(tài)圖像數(shù)據(jù)分割成場景。動態(tài)檢測部107通過幀圖像數(shù)據(jù)間的比較求出動作矢量，或根據(jù)動作矢量檢測運動物體塊。
價值算出部108根據(jù)動作矢量或運動物體塊等，算出幀圖像數(shù)據(jù)的后述的評價值。抽取部109根據(jù)評價值，抽取在時間序列上連續(xù)的幀圖像數(shù)據(jù)的集合(下面稱為幀群)。抽取部109從各場景中抽取1個幀群。摘要動態(tài)圖像生成部110連接抽取的幀群，生成摘要動態(tài)圖像數(shù)據(jù)，輸出到CD-R/RW驅(qū)動器140內(nèi)的CD-RW或數(shù)字?jǐn)z像機30、或硬盤中。摘要動態(tài)圖像生成控制部102整體控制以上各部的摘要動態(tài)圖像生成動作。
另外，也可具備利用摘要動態(tài)圖像數(shù)據(jù)，使摘要動態(tài)圖像在顯示器150上顯示的顯示部。
A2、評價值的算出及幀群的抽取評價值算出部108就變焦、搖場景、靜止、運動物體位置、運動物體大小、膚色大小等項目分別評價幀圖像數(shù)據(jù)，以算出評價值。
圖3是用于說明幀圖像數(shù)據(jù)的評價值的說明圖。圖3(a)是選出動態(tài)圖像的5張幀圖像并進(jìn)行示例的圖。從左側(cè)起按時間序列圖示幀圖像。圖3(a)中示出的幀圖像不連續(xù)，在從左側(cè)起第n張(n＝1～4)幀圖像和第n+1張幀圖像之間，就動態(tài)圖像而言存在多張幀圖像，但這里省略圖示。圖3(b)～(g)是就各項表示幀圖像數(shù)據(jù)的評價值之時刻變化的曲線。曲線的時刻對應(yīng)再生了動態(tài)圖像時從再生開始的經(jīng)過時間。曲線通過用線連結(jié)在再生動態(tài)圖像時在各經(jīng)過時間顯示的幀圖像數(shù)據(jù)的評價值來表示。另外，示出圖3(a)的各幀圖像數(shù)據(jù)的評價值在該幀圖像中央下方位置附近表示的曲線。
圖3(b)是評價值「變焦」的曲線?！缸兘埂故顷P(guān)于變焦操作的評價值。所謂變焦操作是放大、縮小被攝體的相機操作。評價值算出部108使用變焦操作函數(shù)、變焦結(jié)束函數(shù)等2種函數(shù)，算出評價值「變焦」。變焦操作函數(shù)是開始變焦操作后的經(jīng)過時間越大輸出越大的「變焦」、傾角為正的一次函數(shù)。變焦結(jié)束函數(shù)是開始變焦后的時間經(jīng)過越大輸出越小的「變焦」、傾角為負(fù)的一次函數(shù)。
評價值算出部108從開始變焦操作的時刻起到變焦操作結(jié)束、經(jīng)過30幀之前使用變焦操作函數(shù)，從變焦操作結(jié)束、經(jīng)過了30幀的時刻起使用變焦結(jié)束函數(shù)。變焦結(jié)束函數(shù)僅預(yù)先確定傾角。評價值算出部108求出碎片，以使由變焦結(jié)束函數(shù)求出的開頭的「變焦」與由變焦操作函數(shù)求出的最后的「變焦」一致。評價值算出部108到輸入0以下的值之前使用變焦結(jié)束函數(shù)?！缸兘埂篂?以下的值時修正成值0。評價值算出部108設(shè)在從開始變焦操作到輸出0以下的「變焦」之前的時間中未出現(xiàn)的幀圖像數(shù)據(jù)之「變焦」為值0。
變焦操作中及其后的幀圖像認(rèn)為是拍攝者特別想拍攝的幀圖像，如上述那樣設(shè)定變焦函數(shù)。關(guān)于變焦操作開始時或變焦操作結(jié)束時的檢測方法，將后述。
在變焦操作中，稱放大被攝體像的操作為推攝(zoom in)，稱縮小被攝體像的操作為拉攝(zoom out)。在推攝、拉攝兩者中使用變焦操作函數(shù)、變焦結(jié)束函數(shù)。在圖3(a)的幀圖像中，自左側(cè)起從第1張幀圖像開始推攝，自左側(cè)起在第2張幀圖像中結(jié)束推攝。因此，圖3(b)的評價值「變焦」如曲線所示那樣變動。
圖3(c)是評價值「搖場景」的曲線?！笓u場景」是關(guān)于搖場景操作的評價值。所謂「搖場景」是固定相機的位置不變，改變相機的方向，以拍攝寬的范圍的操作。評價值算出部108通過2個搖場景函數(shù)的函數(shù)算出評價值「搖場景」。2個搖場景函數(shù)是檢測搖場景操作開始、結(jié)束后的幀圖像數(shù)據(jù)使用的、與前述2個變焦函數(shù)相同結(jié)構(gòu)的函數(shù)。并且，使用2個搖場景函數(shù)的時間條件也與2個變焦函數(shù)相同。評價值算出部108算出除使用搖場景函數(shù)的時間之外的「搖場景」為值0。認(rèn)為搖場景操作中及其后的幀圖像是拍攝者特別想拍攝的幀圖像，如上面那樣設(shè)定搖場景函數(shù)。后述搖場景操作開始或搖場景操作結(jié)束的檢測方法。圖3(a)的幀圖像中，由于未進(jìn)行搖場景操作，圖3(c)的評價值如曲線所示那樣為值0不變。
圖3(d)是評價值「靜止」的曲線?！胳o止」是關(guān)于背景動作的評價值。評價值算出部108通過靜止函數(shù)的函數(shù)算出評價值「靜止」。靜止函數(shù)是若輸入背景動作的大小(下面簡稱動作的大小為速度)、則輸出「靜止」的函數(shù)。靜止函數(shù)，速度越接近于0輸出越大的值。另外，速度若變?yōu)橐?guī)定值以上，則輸出值0。認(rèn)為背景靜止的場面的幀圖像是拍攝者特別想拍攝的幀圖像，如上面那樣設(shè)定靜止函數(shù)。后面敘述背景速度的算出方法。圖3(a)的幀圖像在從左側(cè)起第二張幀圖像之前背景的動作依次變小，從第2張幀圖像開始背景靜止。因此，圖3(d)的評價值如曲線表示那樣動作。
圖3(e)是評價值「運動物體位置」的曲線?！高\動物體位置」是關(guān)于運動物體(被攝體)的位置的評價值。另外，下面說的運動物體是指在幀圖像內(nèi)最大的運動物體。評價值算出部108通過稱為運動物體位置函數(shù)的函數(shù)算出評價值「運動物體位置」。運動物體位置函數(shù)是若輸入運動物體在幀圖像內(nèi)的位置，則輸出評價值「運動物體位置」的函數(shù)。運動物體位置函數(shù)作為運動物體的位置，輸入越接近幀圖像中央的值，輸出越大的值。另外，作為運動物體的位置，在輸入包含幀圖像中央的規(guī)定范圍以外的值時，輸出值0。認(rèn)為運動物體在中央的場面的幀圖像是拍攝者特別想拍攝的幀圖像，如上面那樣設(shè)定運動物體位置函數(shù)。后述運動物體位置的算出方法。在圖3(a)的幀圖像中，從自左側(cè)起第三張幀圖像開始，運動物體(人物)逐漸向幀圖像的中央移動，在第4張幀圖像中運動物體(人物)大致位于幀圖像的中央。而且，從第4張幀圖像開始，運動物體(人物)從中央逐漸向左方向移動。因此，圖3(e)的評價值如曲線所示那樣變動。
圖3(f)是評價值「運動物體大小」的曲線?！高\動物體大小」是關(guān)于幀圖像內(nèi)的運動物體大小的評價值。評價值算出部108通過稱為運動物體大小函數(shù)的函數(shù)算出評價值「運動物體大小」。運動物體大小函數(shù)是若輸入幀圖像內(nèi)的運動物體大小、則輸出評價值「運動物體大小」的函數(shù)。運動物體大小函數(shù)，輸入越大的值、輸出越大的值。另外，在輸入規(guī)定值以下的值時，輸出值0。認(rèn)為拍攝運動物體大的幀圖像是拍攝者特別想拍攝的幀圖像，如上述那樣設(shè)定運動物體大小函數(shù)。后述運動物體大小的算出方法。在圖3(a)的幀圖像中，由于從自左側(cè)起第1張幀圖像開始，運動物體逐漸變大，從第2張幀圖像開始運動物體保持恒定的大小，所以圖3(f)的評價值如曲線所示那樣變動。
圖3(g)是評價值「膚色大小」的曲線。「膚色大小」是關(guān)于幀圖像內(nèi)的膚色大小的評價值。評價值算出部108通過稱為膚色大小函數(shù)的函數(shù)算出評價值「膚色大小」。膚色大小函數(shù)是若輸入幀圖像內(nèi)的膚色大小、則輸出評價值「膚色大小」的函數(shù)。膚色大小函數(shù)，輸入越大的值、輸出越大的值。另外，在輸入規(guī)定值以下的值時輸出值0。認(rèn)為拍攝膚色大的幀圖像是通過放大拍攝人物的幀圖像，是拍攝者特別想拍攝的幀圖像，這樣地設(shè)定。后述膚色大小的算出方法。在圖3(a)的幀圖像中，由于從自左側(cè)起第1張幀圖像開始，膚色逐漸變大，從第2張幀圖像開始膚色保持恒定大小，所以圖3(g)的評價值如曲線所示那樣變動。
以上，為算出評價值而使用的函數(shù)可各式各樣地設(shè)定。例如，用于算出評價值「靜止」的靜止函數(shù)也可是根據(jù)作為背景速度變?yōu)?后的第幾號的幀圖像數(shù)據(jù)，輸出不同的值。既便涉及運動物體位置，也可在運動物體的位置變?yōu)橹醒胫螅鶕?jù)是第幾幀圖案數(shù)據(jù)，輸出不同的值。另外，除以上的評價值之外，評價值算出部108也可算出關(guān)于并進(jìn)及運動物體的動作速度的評價值。所謂并進(jìn)就是如馬拉松轉(zhuǎn)播那樣，運動物體存在于幀圖像的中央，背景動作。所謂運動物體的動作速度就是相對于運動物體的背景的相對速度。在運動物體的動作速度為規(guī)定值以上時，使運動物體的動作速度相關(guān)的評價值為值0。
下面，說明變焦操作的開始或結(jié)束、搖場景操作的開始或結(jié)束的檢測方法。變焦操作的開始或結(jié)束、搖場景操作的開始或結(jié)束根據(jù)動作矢量來檢測。所謂動作矢量是表示可將幀圖像分割成多個的各塊的圖案在從1個幀圖像到另一個幀圖像之間怎樣移動的矢量。塊的圖案移動越大，即該塊的動作矢量越大，該塊的圖案表示的運動物體移動越快。后述動作矢量的算出方法，下面設(shè)已算出動作矢量來進(jìn)行說明。
圖4是用于表示變焦操作開始·結(jié)束時的幀圖像數(shù)據(jù)、搖場景操作開始·結(jié)束時的幀圖像數(shù)據(jù)之檢測方法的說明圖。在動態(tài)圖像數(shù)據(jù)中，各塊的動作矢量m如圖4(a)所示，在從幀圖像外側(cè)開始向中央時，評價值算出部108因而判斷為開始推攝，并檢測該幀圖像數(shù)據(jù)為開始了變焦操作的幀圖像數(shù)據(jù)。開始變焦操作之后，各塊的動作矢量m如圖4(a)所示，在未從幀圖像的外側(cè)朝向中央的時刻，檢測該幀圖像數(shù)據(jù)為變焦操作結(jié)束了的幀圖像數(shù)據(jù)。
各塊的動作矢量m如圖4(b)所示，在從幀圖像的中央開始向外側(cè)時，評價值算出部108因而判斷為開始拉攝，檢測該幀圖像數(shù)據(jù)為開始變焦操作的幀圖像數(shù)據(jù)。開始變焦操作之后，各塊的動作矢量m如圖4(b)，在未從幀圖像的外側(cè)朝向中央的時刻，檢測該幀圖像數(shù)據(jù)為變焦操作結(jié)束了的幀圖像數(shù)據(jù)。
而且，在動態(tài)圖像數(shù)據(jù)中，作為間位(meta)數(shù)據(jù)，有時附加表示是否按攝像機的變焦按鈕的變焦按鈕操作信息。開始了變焦操作的幀圖像數(shù)據(jù)或變焦操作結(jié)束了的幀圖像數(shù)據(jù)也可根據(jù)這樣的變焦按鈕操作信息來檢測。
另一方面，開始了搖場景操作的幀圖像或結(jié)束了搖場景操作的幀圖像根據(jù)整個幀圖像的錯(ズレ)S來檢測。所謂錯位S是表示在從1個幀圖像到另一幀圖像之間整個幀圖像沿怎樣的方向移動的矢量。改變攝像機的方向的速度越大，錯位S的大小變得越大。如圖4(c)所示，在時間序列上連續(xù)的規(guī)定數(shù)量以上的幀圖像中，在錯位S的方向變?yōu)橄嗤较驎r，判斷為開始搖場景操作。而且，檢測錯位S為相同方向的幀圖像數(shù)據(jù)中開頭的幀圖像數(shù)據(jù)為開始搖場景操作的幀圖像數(shù)據(jù)。而且，檢測錯位S為相同方向的幀圖像數(shù)據(jù)中最后的幀圖像數(shù)據(jù)為結(jié)束搖場景操作的幀圖像。
下面，說明各幀圖像的背景速度或運動物體位置、運動物體大小的算出方法。這些值根據(jù)作為動作矢量大小超過規(guī)定值的塊之集合的運動物體塊來算出。運動物體塊表示的圖案可推斷為運動物體。在幀圖像內(nèi)存在多個運動物體時，群集(clustering)動作矢量的大小超過規(guī)定值的塊，求出多個運動物體塊。圖5是表示運動物體mv的說明圖。
評價值算出部108根據(jù)運動物體塊以外的塊(下面稱為背景塊)的動作矢量的大小，算出背景的速度。也可設(shè)各背景塊的動作矢量大小的合計值為背景的速度。也可設(shè)各背景塊的動作矢量大小的平均值為背景的速度。在這里，設(shè)平均值為背景的速度。
評價值算出部108算出運動物體塊的重心，以作為運動物體位置。另外，評價值算出部108算出運動物體塊的大小，以作為運動物體大小。另外，運動物體大小在運動物體塊是多個時，也可是全部運動物體塊的大小。
下面，說明膚色大小的檢測方法。在下式中，膚色的區(qū)域可作為具有滿足0.1＜H＜0.9且G＜B的RGB值的象素的集合來求出。
H(色調(diào))＝1.732(G-B)/(2R-G-B) (1)S(彩度)＝{(B-R)2+(R-G)2+(G-B)2}/3 (2)V(亮度)＝R+G+B (3)評價值算出部108算出幀圖像中膚色象素的數(shù)量，以作為膚色大小。另外，膚色大小也可設(shè)為運動物體塊中膚色象素的數(shù)量。
接著，說明以如上所述求出的評價值為基礎(chǔ)，抽取幀群的方法。評價值算出部108按每個幀圖像數(shù)據(jù)相加如上所述求出的各項評價值。
圖6是表示合計圖3(b)～(g)的各評價值求出的評價值「合計」的說明圖。其中，比圖3(b)～(g)延長橫軸來表示。抽取部109抽取圖6的評價值「合計」為閾值以上的幀群。例如，在使用圖6曲線中的閾值b時，抽取相當(dāng)于時刻范圍A的幀群(下面稱為幀群A)、相當(dāng)于時刻范圍C的幀群(下面稱為幀群C)和相當(dāng)于時刻范圍D的幀群(下面稱為幀群D)。
在本實施例中，為了生成在用戶可識別的程度下再生1個場面的摘要動態(tài)圖像數(shù)據(jù)，附加幀群由數(shù)量比規(guī)定數(shù)大的數(shù)量的幀構(gòu)成的條件。這時，如幀群D那樣，不抽取幀數(shù)少、再生時間短的幀群。
在本實施例中，抽取部109從分割后的場景中僅抽取1個幀群。因此，如情況A(CASE A)那樣，在1個場景中2個幀群A、C成為抽取候補時，抽取幀群中幀群圖像數(shù)據(jù)的評價值的合計大者。在這里，由于(幀群A的評價值的合計)＞(幀群C的評價值的合計)，所以抽取部109抽取幀群A。另外，也可抽取幀群中評價值的最大值大者。在這里，由于(幀群A的評價值的最大值)＞(幀群C的評價值的最大值)，所以抽取幀群A。
在使用閾值C時，無論是情況A還是情況B(CASE B)，都不從1個場景中抽取全部幀群。在從1個場景中至少抽取1個幀群時，調(diào)整閾值(在圖6的實例中，閾值c→閾值a或b)，至少抽取1個幀群。
接著，說明使用閾值b的情況。在本實施例中，在抽取的幀群A和幀群C的間隔(時刻范圍B)窄時，與幀群A與幀群C一起抽取相當(dāng)于時刻范圍B的幀群(下面稱為幀群B)(圖6的情況2)。這是為了防止摘要動態(tài)圖像變成碎片。在本實施例中，在幀數(shù)比規(guī)定值Th(＝150)小時，判斷為時刻范圍窄。在幀群B的幀數(shù)為規(guī)定值Th以上時，幀群B不抽取(圖6的情況1)。另外，如情況B那樣，在未將一起抽取的幀群(幀群A、B、C的集合)收集在1個場景中時，既便時刻范圍B窄，幀群B也不抽取。這是由于因為場景中斷，所以不必連續(xù)再生幀圖像。
在本實施例中，對應(yīng)于摘要動態(tài)圖像的再生時間的希望值，限定抽取的幀圖像的總數(shù)(下面稱為總幀數(shù))。抽取部109在抽取出的總幀數(shù)不在規(guī)定范圍內(nèi)時，調(diào)整閾值，再次進(jìn)行幀群的抽取。例如，使用閾值b抽取幀群、總幀數(shù)不在規(guī)定范圍內(nèi)時，將閾值變更成閾值a，再次抽取幀群。
另外，抽取部109也可如時刻范圍A1、時刻范圍C1所示，抽取評價值上升或保持恒定值的范圍的幀群。
并且，圖6的評價值是單純地相加圖3(b)～(g)各評價值而求出的，但也可是評價值算出部108分別對圖3(b)～(g)各評價值進(jìn)行加權(quán)后相加，算出作為抽取部109的抽取基準(zhǔn)的評價值。
A3第1實施例的處理下面，說明動態(tài)圖像處理裝置100的處理。圖7是表示動態(tài)圖像處理裝置100的摘要動態(tài)圖像數(shù)據(jù)生成處理的說明圖。首先，動態(tài)圖像處理裝置100通過用戶的輸入，取得動態(tài)圖像數(shù)據(jù)或摘要動態(tài)圖像的再生時間的希望值(步驟S100)。而且，場景分割所取得的動態(tài)圖像數(shù)據(jù)(步驟S200)。場景分割通過使用顏色或亮度的直方圖、聲音數(shù)據(jù)等動態(tài)圖像數(shù)據(jù)的特征量并比較各幀圖像數(shù)據(jù)的已知技術(shù)來進(jìn)行。根據(jù)再生時間的希望值，算出對應(yīng)于該希望值的總幀數(shù)的希望范圍。由于恰好抽取再生時間為希望值數(shù)量的幀圖像數(shù)據(jù)是困難的，所以為了持有若干余裕，算出希望范圍。
接著，檢測各幀圖像的動作(步驟S300)。圖8是表示各幀圖像的動作檢測處理的流程圖。在本處理中，首先，動態(tài)圖像處理裝置100從動態(tài)圖像的多個幀圖像中，選擇1個作為檢測動作的對象的基準(zhǔn)幀圖像n，檢測基準(zhǔn)幀圖像n與其之前的幀圖像(n-1)的整個幀圖像的錯位S(步驟S301)。錯位S例如可使用梯度法或圖案匹配法等已知的技術(shù)來檢測。
這里檢測的錯位S相當(dāng)于前述的、用于檢測搖場景的錯位S。
在圖中，示出在幀圖像(n-1)和基準(zhǔn)幀圖像n中拍攝山為背景、球為運動物體的實例。如果比較幀圖像(n-1)和基準(zhǔn)幀圖像n，則可知山向幀圖像的右下方移動，球向幀圖像的右方移動，另外，球的移動量比山的移動量相對大，山在幀圖像內(nèi)占的面積也比球的面積大。若對這樣的幀圖像適用上述勾配法或圖案匹配法，則在整個幀圖像中占的面積比例大的山的錯位比在整個幀圖像中占的面積小的球的錯位優(yōu)先檢測。即，整個幀圖像的錯位與山的錯位幾乎一致。
另外，在2個幀之間產(chǎn)生上下左右方向的并進(jìn)錯位和旋轉(zhuǎn)方向的旋轉(zhuǎn)錯位，但這里為簡化說明，設(shè)不產(chǎn)生旋轉(zhuǎn)錯位來說明。
在檢測了整個幀圖像的錯位S后，動態(tài)圖像處理裝置100將基準(zhǔn)幀圖像n和其之前的幀圖像(n-1)分別分割成多個塊(步驟S302)。在圖中，示出將各個幀圖像沿橫方向分割成4份，沿縱方向分割成3份的實例。
在分割幀圖像后，動態(tài)圖像處理裝置100通過檢測對應(yīng)于基準(zhǔn)幀圖像n各塊的幀圖像(n-1)各塊的錯位Sb(步驟S303)，得到各塊的錯位Sb與整個錯位S的差分，算出各塊的動作矢量m(步驟S304)。在這里，算出的動作矢量m相當(dāng)于前述的、檢測推攝或拉攝所用的動作矢量。在圖示的實例中，拍攝球的右上方的塊之外的塊的錯位Sb由于與在步驟S301中檢測出的整個幀圖像的錯位S幾乎相等，所以被刪除，動作矢量m變?yōu)榱?。僅檢測右上方的塊的動作矢量m。
接著，動態(tài)圖像處理裝置100判斷動作矢量m是否超過規(guī)定的閾值，作為運動物體，檢測超過規(guī)定閾值的動作矢量m的塊(步驟S305)。在這里，檢測的運動物體的塊相當(dāng)于前述的、檢測靜止或運動物體位置或運動物體大小所用的運動物體塊。設(shè)置閾值是為了排除塊之間的輕微的錯位(例如，微小的旋轉(zhuǎn)錯位)。作為閾值，例如可設(shè)為30象素(pixel)。在圖示的實例中，基準(zhǔn)幀圖像n內(nèi)右上方的塊特定為運動物體塊。
對動態(tài)圖像數(shù)據(jù)中除開頭的幀圖像數(shù)據(jù)之外的全部幀圖像數(shù)據(jù)，進(jìn)行以上的步驟S301～S305的處理。
再次返回圖7進(jìn)行說明。動態(tài)圖像處理裝置100接著根據(jù)步驟S300中檢測出的錯位S、動作矢量或運動物體塊，算出各幀圖像數(shù)據(jù)的評價值(步驟S400)。算出方法如在前項A2中所述，評價值算出部108就變焦、搖場景、靜止、運動物體位置、運動物體大小、膚色大小等項，分別算出評價值。而且，相加這些值，求出合計的評價值。
而且，以求出的合計的評價值為基礎(chǔ)，抽取摘要動態(tài)圖像數(shù)據(jù)中使用的幀群(步驟S500)。圖9是表示幀群的抽取處理的流程圖。動態(tài)圖像處理裝置100檢索開頭場景中的各幀圖像數(shù)據(jù)的評價值，全部抽取包含于摘要動態(tài)圖像數(shù)據(jù)中的、成為候補的幀群(步驟S501)。具體地說，抽取全部幀圖像數(shù)據(jù)的評價值為閾值以上的幀群。
接著，挑選抽取的幀群(步驟S502)。圖10是表示幀群的挑選處理的流程圖。在幀群的挑選處理中，在步驟S501中抽取的幀群為2以上時(步驟S503是)，控制(check)任意2個幀群的間隔(步驟S504)。這里所說的間隔，是存在于2個幀群之間的幀圖像數(shù)據(jù)的數(shù)量，在圖6的實例中相當(dāng)于時刻范圍B。
在間隔比規(guī)定值小時(步驟S505否)，重新抽取幀群(步驟S506)。在重新抽取中，匯總間隔比規(guī)定值小的2個幀群、和存在于其間的幀圖像數(shù)據(jù)，作為1個幀群抽取。在圖6的實例中，幀群B的幀數(shù)比規(guī)定值Th小的情況(圖6的情況2)相當(dāng)于與幀群A和幀群C一起抽取相當(dāng)于時刻范圍B的幀群。如果調(diào)查在步驟S501中抽取的全部幀群的間隔，則前進(jìn)到下一步驟。另外，在步驟S501中抽取的幀群為1以下時(步驟S503否)，省略步驟S504～步驟S506的處理。
接著，動態(tài)圖像處理裝置100判別是否抽取的幀群的幀圖像數(shù)比規(guī)定值大(步驟S507)。在幀圖像數(shù)據(jù)數(shù)為規(guī)定值以下時(步驟S507否)，從摘要動態(tài)圖像數(shù)據(jù)的候補中去除該幀群(步驟S508)。在圖6的實例中，相當(dāng)于幀群D。在幀群的幀圖像數(shù)據(jù)數(shù)比規(guī)定值大時(步驟S508是)，仍向候補中加入幀群，前進(jìn)到下一步驟。
再次返回圖9進(jìn)行說明。接著，動態(tài)圖像處理裝置100檢測在場景中在候補中剩余的幀群是否為1個以上(步驟S512)。
如果在場景中幀群為1個(步驟S512否)，則調(diào)整閾值(步驟S514)，再次返回場景的開頭(步驟S515)。而且，重復(fù)步驟S501以后的處理。所謂閾值處理，例如在圖6中相當(dāng)于從閾值b到閾值a變更閾值。在一定范圍內(nèi)增減閾值來調(diào)整。
在場景中，在候補中剩余的幀群為1個以上時(步驟S512是)，選擇抽取構(gòu)成幀群的各幀圖像數(shù)據(jù)之評價值的合計為最大的幀群(步驟S516)。這是因為評價值的合計最大的幀群可推測為最適宜表示該場景的幀群。在候補中剩余的幀群為1個時，省略步驟S516的處理。另外，省略步驟S516的處理，也可從1個場景中抽取2個以上的幀群。
而且，如果在動態(tài)圖像數(shù)據(jù)最后之前處理結(jié)束(步驟S509否)，則移向下一場景(步驟S510)，就該場景重復(fù)步驟S501以后的處理。
在動作圖像數(shù)據(jù)的最后之前處理結(jié)束時(步驟S517是)，檢測總幀數(shù)是否在希望范圍內(nèi)(步驟S519)。如果不在希望范圍內(nèi)(步驟S519否)，則調(diào)整閾值(步驟S520)。這里的閾值調(diào)整與步驟S514中的閾值調(diào)整相同，相當(dāng)于圖6中從閾值b到閾值a變更閾值。其中，在步驟S514中調(diào)整該場景中使用的閾值，但這里調(diào)整在整個動態(tài)圖像數(shù)據(jù)中使用的閾值。閾值可在一定范圍內(nèi)增減來調(diào)整，也可根據(jù)規(guī)定函數(shù)(例如，設(shè)不足部分幀圖像數(shù)或過剩幀圖像數(shù)為變量的函數(shù))來調(diào)整。另外，調(diào)整閾值以成為按場景分類而不同的閾值。而且，返回動態(tài)圖像數(shù)據(jù)的開頭(步驟S522)，清除此前的候補，再次從抽取開頭場景中的幀群開始。
總幀數(shù)在希望范圍內(nèi)時(步驟S519)，確定此前作為候補抽取出的幀群為是摘要動態(tài)圖像數(shù)據(jù)中使用的幀群，前進(jìn)到下一處理。
再次返回圖7進(jìn)行說明。如果抽取幀圖像數(shù)據(jù)，則接著生成摘要動態(tài)圖像數(shù)據(jù)(步驟S600)。摘要動態(tài)圖像數(shù)據(jù)通過連接抽取出的幀群來生成。而且，輸出生成的摘要動態(tài)圖像數(shù)據(jù)(步驟S700)。輸出端是數(shù)字?jǐn)z像機30或CD-R/RW驅(qū)動器140。用戶通過用數(shù)字?jǐn)z像機30等再生所輸出的摘要動態(tài)圖像數(shù)據(jù)，從而可觀看摘要動態(tài)圖像。
A4第1實施例的效果根據(jù)上述實施例的動態(tài)圖像處理裝置100，按每個幀圖像數(shù)據(jù)評價動態(tài)圖像數(shù)據(jù)，可生成由適宜作摘要動態(tài)圖像的幀圖像數(shù)據(jù)構(gòu)成的摘要動態(tài)圖像數(shù)據(jù)。由于在1個場景內(nèi)摘要動態(tài)圖像數(shù)據(jù)中一定包含著1個幀群，所以不存在摘要動態(tài)圖像內(nèi)未再生的場景。即，如果用戶再生摘要動態(tài)圖像，則可觀看全部的場景，容易掌握整個動態(tài)圖像。并且，由于包含于摘要動態(tài)圖像數(shù)據(jù)的幀群選擇場景中認(rèn)為最佳的幀群，所以用戶更容易掌握原來的整個動態(tài)圖像。
另外，由于限定總幀數(shù)為已達(dá)到再生時間希望值的幀圖像數(shù)，所以可生成對應(yīng)于再生時間希望值的摘要動態(tài)圖像數(shù)據(jù)。在抽取的2個幀群的間隔窄時，通過連接兩者及存在于兩者間的幀圖像數(shù)據(jù)，可防止感到如中途切斷摘要動態(tài)圖像那樣的不諧調(diào)。另外，在場景的交替期間內(nèi)，即便2個幀群的間隔窄，也不必連接兩者，通過不連接兩者，從而防止在摘要動態(tài)圖像中包含評價低的幀圖像數(shù)據(jù)。并且，通過在摘要動態(tài)圖像數(shù)據(jù)中使用幀圖像數(shù)據(jù)數(shù)為規(guī)定數(shù)以上的幀群，從而可防止1個場景過短、難以掌握摘要動態(tài)圖像的內(nèi)容的事態(tài)。
A5第1實施例的變形例以上說明了本發(fā)明的實施例，但本發(fā)明不限于此，可在不脫離其精神的范圍內(nèi)采用各種結(jié)構(gòu)。例如，在步驟512中幀群不是1個時，在步驟S508中存在去除的幀群時，也可不是調(diào)整閾值、再次抽取幀群，而是從去除的幀群中選擇最佳的幀群，包含在摘要動態(tài)圖像數(shù)據(jù)的候補中。這時，也可重新對該最佳幀群追加該最佳幀群前后的、任意數(shù)的幀圖像數(shù)據(jù)。在步驟S507中，也可追加不足的幀圖像數(shù)據(jù)數(shù)份。在選擇最佳幀群時，也可根據(jù)構(gòu)成幀群的各幀圖像數(shù)據(jù)的評價值之合計、或評價值的最大值來選擇。
實施例的處理必要時也可省略。例如，在無再生時間希望值時可省略步驟S519～步驟S522的處理。
B本發(fā)明第2實施例的圖像處理系統(tǒng)的結(jié)構(gòu)圖11是表示本發(fā)明第2實施例的圖像處理系統(tǒng)100的說明圖。圖像處理系統(tǒng)100備有供給動態(tài)圖像數(shù)據(jù)的動態(tài)圖像數(shù)據(jù)庫部30；從動態(tài)圖像數(shù)據(jù)中抽取其一部分，以生成摘要圖像數(shù)據(jù)的個人計算機PC；提供所用的用戶接口的用戶接口部18。用戶接口部18具備顯示從動態(tài)圖像數(shù)據(jù)庫部30供給的動態(tài)圖像或后述的操作顯示畫面的顯示器18a；和接受來自用戶的輸入的鍵盤18b或鼠標(biāo)18c。
個人計算機PC備有執(zhí)行從動態(tài)圖像數(shù)據(jù)生成摘要圖像數(shù)據(jù)的生成處理的圖像處理應(yīng)用程序10；管理動態(tài)圖像數(shù)據(jù)庫部30或用戶接口部18等外部設(shè)備間的接口的接口部(I/F部)15。
圖像處理應(yīng)用程序10備有對每個場景分割動態(tài)圖像數(shù)據(jù)的場景分割處理部11；評價動態(tài)圖像數(shù)據(jù)的圖像評價部12；根據(jù)該評價，抽取一部分動態(tài)圖像數(shù)據(jù)的動態(tài)圖像數(shù)據(jù)抽取部13；按時間序列的順序連接所抽取的多個動態(tài)圖像數(shù)據(jù)，生成摘要圖像數(shù)據(jù)的動態(tài)圖像數(shù)據(jù)連接部14。另外，圖像評價部12在技術(shù)方案范圍中用作「動態(tài)圖像評價部」及「靜止圖像評價部」。
動態(tài)圖像數(shù)據(jù)庫部30具有數(shù)字?jǐn)z像機30a、DVD30b及硬盤30c來作為動態(tài)圖像數(shù)據(jù)的供給源。動態(tài)圖像數(shù)據(jù)在本實施例中，設(shè)為表示非交織方式的靜止圖像的幀圖像數(shù)據(jù)的集合。
圖12是表示顯示器18a中顯示的圖像文件生成處理中的操作顯示畫面200的說明圖。操作顯示畫面200包含選擇作為處理對象的原圖像數(shù)據(jù)的種類的原圖像數(shù)據(jù)種類選擇開關(guān)121；從選擇的種類的原圖像數(shù)據(jù)中選擇1個所用的原圖像數(shù)據(jù)選擇窗口122；顯示由作為處理對象的原圖像數(shù)據(jù)表示的圖像的圖像顯示區(qū)域123；靜止圖像數(shù)據(jù)生成處理用的操作按鈕。另外，在圖12的實例中，示出在原圖像數(shù)據(jù)選擇窗口122中選擇了動態(tài)圖像數(shù)據(jù)Gs的狀態(tài)。
在動態(tài)圖像數(shù)據(jù)的摘要圖像生成處理用的操作按鈕中包含用于自動生成摘要圖像數(shù)據(jù)的摘要圖像自動制作按鈕124；和用于控制圖像顯示區(qū)域123中顯示的動態(tài)圖像或摘要手動制作的各種按鈕。在控制動態(tài)圖像用的各種按鈕中包含再生按鈕231、停止按鈕232、暫停按鈕233、倒退按鈕234、快進(jìn)按鈕235及動態(tài)圖像抽取按鈕236。動態(tài)圖像抽取按鈕236是用于手動抽取動態(tài)圖像數(shù)據(jù)的按鈕。
在上述說明的系統(tǒng)結(jié)構(gòu)中，若按下摘要圖像自動制作按鈕124，則如下面所示那樣，通過在從動態(tài)圖像數(shù)據(jù)中抽取一部分動態(tài)圖像數(shù)據(jù)的同時，連接抽取的多個動態(tài)圖像數(shù)據(jù)，從而自動生成摘要圖像數(shù)據(jù)。
C本發(fā)明第2實施例的摘要圖像數(shù)據(jù)生成處理圖13是表示本發(fā)明第2實施例的摘要圖像數(shù)據(jù)生成處理的內(nèi)容的流程圖。在步驟S10000中，圖像處理應(yīng)用程序10(圖11)從動態(tài)圖像數(shù)據(jù)庫部30接受動態(tài)圖像數(shù)據(jù)的供給。所供給的動態(tài)圖像數(shù)據(jù)在未圖示的存儲器中緩沖的同時，在圖像顯示區(qū)域123(圖12)中顯示。
圖14是表示本發(fā)明實施例中使用的動態(tài)圖像數(shù)據(jù)的結(jié)構(gòu)之一實例的說明圖。動態(tài)圖像數(shù)據(jù)是在1幀時間為33ms的時間序列上連接的幀圖像數(shù)據(jù)的集合，對各幀圖像數(shù)據(jù)按時間序列的順序附加幀序號。在圖14的實例中，動態(tài)圖像數(shù)據(jù)表示馬拉松選手正在行走的情形。
在步驟S20000中，場景分割處理部11執(zhí)行場景分割處理。所謂場景分割處理，是對每個場景分割動態(tài)圖像數(shù)據(jù)的處理。在本實施例中，所謂「每個場景」意味在動態(tài)圖像數(shù)據(jù)取得時相機的記錄開始和記錄停止的期間。即，各場景因記錄開始而開始，因記錄停止而結(jié)束。場景分割處理例如可通過識別圖像的急劇變化來實現(xiàn)。
圖15是表示本實施例的第2第2實施例中的場景分割處理結(jié)果的表。在該表中，所謂分割場景序號是對分割的各場景按時間序列的順序附加的序號。開始時刻和結(jié)束時刻以4組2位的數(shù)字表示各場景的開始時刻和結(jié)束時刻。具體地說，開頭的2位表示時間，下2位表示分，再下2位表示秒，且最后2位表示各秒中的幀序號。例如4號場景構(gòu)成為從0時1分12秒的第13號幀到0時1分13秒的第15號幀的幀集合。
在步驟S30000(圖13)中，圖像評價部12執(zhí)行幀圖像評價處理。所謂幀圖像評價處理，是數(shù)值化幀圖像數(shù)據(jù)表示的靜止圖像的重要性，以作為靜止圖像評價值的處理。在該評價方法中存在各種方法，例如可利用特開2002-142189號公報或特開平10-224736號公報中公開的方法。以往，對應(yīng)于構(gòu)成動態(tài)圖像的多個靜止圖像的各種重要性來判斷動態(tài)圖像的重要性。
在步驟S40000中，圖像評價部12執(zhí)行動態(tài)圖像評價處理。動態(tài)圖像評價處理是與上述的評價方法不同，還考慮構(gòu)成動態(tài)圖像的多個靜止圖像各自的時間序列信息，來評價構(gòu)成動態(tài)圖像的各個靜止圖像數(shù)據(jù)的評價方法。
圖16是表示本發(fā)明第2實施例的動態(tài)圖像評價處理的內(nèi)容的流程圖。在步驟S41000中，圖像評價部12對靜止圖像評價值進(jìn)行平滑化處理。平滑化處理例如可使用移動平均濾波器來進(jìn)行。由此，可在時間序列上使靜止圖像評價值平滑。
在步驟S42000中，圖像評價部12執(zhí)行變化率算出處理。所謂變化率算出處理是算出執(zhí)行平滑化處理后變得平滑的靜止圖像評價值之變化率的處理。該變化率可表示各靜止圖像的重要性慢慢地提高后是趨向重要性為峰值的峰值圖像，還是超過峰值圖像。趨向峰值圖像的動態(tài)圖像作為到達(dá)峰值圖像之前的心理準(zhǔn)備期間的動態(tài)圖像是重要的。另外，超過峰值圖像后的圖像作為靜止圖像單體，即便重要性高，多數(shù)情況下用戶關(guān)心也少。因此，通過重點地抽取峰值圖像前的動態(tài)圖像數(shù)據(jù)，可進(jìn)一步生成用戶希望的摘要圖像數(shù)據(jù)。
在步驟S430000中，圖像評價部12執(zhí)行動態(tài)圖像評價值確定處理。在這里，所謂「動態(tài)圖像評價值」是表示評價作為動態(tài)圖像一部分的各靜止圖像數(shù)據(jù)的值，與用靜止圖像數(shù)據(jù)單體評價的靜止圖像評價值不同。在本實施例中，動態(tài)圖像評價值確定處理是使用靜止圖像評價值和靜止圖像評價值的變化率來確定作為動態(tài)圖像的一部分的幀圖像的評價值的處理。具體地說，例如著眼于靜止圖像評價值的變化率的正負(fù)，在靜止圖像評價值的變化率為正時，將靜止圖像評價值直接確定為動態(tài)圖像評價值，另外，在靜止圖像評價值的變化率為負(fù)時，確定靜止圖像評價值一律為0。另外，「動態(tài)圖像評價值」相當(dāng)于技術(shù)方案范圍中的第2圖像評價值。
在步驟S50000(圖13)中，動態(tài)圖像數(shù)據(jù)抽取部13執(zhí)行動態(tài)圖像數(shù)據(jù)抽取處理。動態(tài)圖像數(shù)據(jù)抽取處理是抽取動態(tài)圖像評價值比規(guī)定的閾值Th大的、連續(xù)的多個幀圖像數(shù)據(jù)的集合的處理。
圖17是表示本發(fā)明第2實施例的動態(tài)圖像數(shù)據(jù)抽取處理的內(nèi)容的說明圖。該圖示出通過場景分割處理分割的某1個場景的靜止圖像評價值和動態(tài)圖像評價值。在該圖中，為了容易區(qū)分兩者，在靜止圖像評價值的變化率為正時，確定靜止圖像評價值的2倍為動態(tài)圖像評價值。另外，在靜止圖像評價值的變化率為負(fù)時，確定靜止圖像評價值一律為零。
如從圖17可知那樣，已知在從時刻T1到時刻T2間的時間P1r、和從時刻T3到時刻T4間的時間P2r中，動態(tài)圖像評價值超過閾值th。這2個時間P1r、P2r是包含成為抽取候補的動態(tài)圖像數(shù)據(jù)的時間。在本實施例中，從成為候補的動態(tài)圖像數(shù)據(jù)中排除比規(guī)定時間短的數(shù)據(jù)。因為通常用戶不希望非常短的動態(tài)圖像。在本例中，時間P2r成為該場景中的抽取對象時間的一部分。
抽取對象時間在峰值圖像的后側(cè)僅延長規(guī)定時間。具體地說，抽取對象時間從時間P2r變更成時間P2e。這是由于與在峰值圖像直接切換場景相比，在峰值圖像后還有些動態(tài)圖像的一方在峰值時動態(tài)圖像不突然結(jié)束，所以最好是作為動態(tài)圖像。這樣，不僅抽取峰值圖像的前側(cè)，還可抽取重點抽取峰值圖像前側(cè)的動態(tài)圖像數(shù)據(jù)。
在步驟S60000中，動態(tài)圖像數(shù)據(jù)連接部14執(zhí)行動態(tài)圖像數(shù)據(jù)連接處理。所謂動態(tài)圖像數(shù)據(jù)連接處理，是按時間序列的順序連接所抽取的多個動態(tài)圖像數(shù)據(jù)的處理。這樣連接后的動態(tài)圖像數(shù)據(jù)成為摘要圖像數(shù)據(jù)。
這樣，在第2實施例中，由于可重點地抽取圖像的重要性為峰值的圖像前方的圖像，所以可在進(jìn)行各靜止圖像的時間序列的考慮之后，生成用戶希望的摘要圖像數(shù)據(jù)。并且，由于僅著眼于靜止圖像評價值之變化率的正負(fù)來進(jìn)行處理，所以存在可高速處理的優(yōu)點。
另外，在第2實施例中，在靜止圖像評價值的變化率為負(fù)時，確定靜止圖像評價值一律為零來確定動態(tài)圖像評價值，但也可利用以下之一或組合來確定動態(tài)評價值。
(1)設(shè)增大靜止圖像評價值在時間序列上的變化率為正的多個靜止圖像數(shù)據(jù)之靜止圖像評價值而得到的值為動態(tài)圖像評價值。
(2)設(shè)降低靜止圖像評價值在時間序列上的變化率為負(fù)的多個圖像數(shù)據(jù)之靜止圖像評價值而得到的值為動態(tài)圖像評價值。
另外，作為增大靜止圖像評價值的方法，例如有加上規(guī)定的正值的方法或乘以比1大的值的系數(shù)的方法。另外，作為降低圖像評價值的方法，例如有減去規(guī)定的正值的方法或乘以不足1的系數(shù)。
D本發(fā)明第3實施例的摘要圖像數(shù)據(jù)生成處理圖18是表示本發(fā)明第3實施例的動態(tài)圖像數(shù)據(jù)抽取處理的內(nèi)容的說明圖。第3實施例僅動態(tài)圖像評價值的確定法與第2實施例不同，其他結(jié)構(gòu)相同。第3實施例的動態(tài)圖像評價值的確定法是作為靜止圖像評價值的變化率乘以規(guī)定正系數(shù)k的值與靜止圖像評價值的和來算出的方法。示出這樣算出的2個動態(tài)圖像評價值和靜止圖像評價值。2個動態(tài)圖像評價值是通過使用2個規(guī)定系數(shù)k的計算來算出的每個系數(shù)k的動態(tài)圖像評價值。
從圖18可知動態(tài)圖像評價值與靜止圖像評價值相比，在時間序列上峰值向前方移動。這樣，由于即便利用第3實施例的動態(tài)圖像評價值的確定法，動態(tài)圖像評價值的峰值在時間序列上也向前方移動，所以在時間序列上在峰值圖像的前側(cè)重點地抽取圖像。
與第2實施例不同，這樣的峰值移動量可通過操作規(guī)定的正系數(shù)k而簡單地調(diào)整。從圖18可知，具有若規(guī)定的正系數(shù)k變大、則峰值的移動量也變大，若規(guī)定的正系數(shù)k變小、則峰值的移動量也變小的傾向。
這樣，第3實施例可通過操作規(guī)定的系數(shù)k，而簡單地調(diào)整以哪種程度重點地抽取比峰值圖像在時間序列上還靠前的動態(tài)圖像數(shù)據(jù)。該調(diào)整例如可對應(yīng)于用戶謀求的被攝體來設(shè)定。具體地說，因用戶謀求的被攝體是動態(tài)要素大的人物或是動態(tài)要素小的風(fēng)景而適宜的調(diào)整量不同。
另外，通過發(fā)明者的實驗發(fā)現(xiàn)通常最好是規(guī)定的系數(shù)在0至1間設(shè)定。
E本發(fā)明第4實施例的摘要圖像數(shù)據(jù)的管理圖19是本發(fā)明第4實施例的圖像數(shù)據(jù)管理系統(tǒng)100a的說明圖。圖像數(shù)據(jù)管理系統(tǒng)100a與圖像處理系統(tǒng)100在以下方面不同。即，第1在個人計算機PCa中安裝圖像管理應(yīng)用程序20a。第2將可在動態(tài)圖像數(shù)據(jù)的記錄介質(zhì)(例如DVD-R)上進(jìn)行打印的打印裝置111連接于個人計算機PCa。
打印裝置111具備打印頭部件60、供紙盤(tray)105、手動用供紙口103。供紙口103在不能彎曲的厚紙或如記錄介質(zhì)D那樣的光盤上打印時使用。在記錄介質(zhì)D上進(jìn)行打印時，如圖所示，記錄介質(zhì)D在安裝于記錄介質(zhì)用盤T的狀態(tài)下被插入供紙口103，進(jìn)行打印。圖像管理應(yīng)用程序20可數(shù)據(jù)庫化管理存儲在各記錄介質(zhì)中的圖像數(shù)據(jù)。
圖20是表示本發(fā)明第4實施例的圖像管理中數(shù)據(jù)庫的內(nèi)容的說明圖。在本例中，在該數(shù)據(jù)庫中由4個字段構(gòu)成，注冊8個記錄(record)。4個字段包含記錄介質(zhì)的種類、最終數(shù)據(jù)存儲時間、內(nèi)容信息和關(guān)聯(lián)數(shù)據(jù)存儲位置。例如，記錄序號是3的數(shù)據(jù)分別存儲DVD-R、2005年1月21日16時39分24秒、家庭旅行及目錄(C￥mov￥mpeg￥file￥3)作為介質(zhì)種類、最終數(shù)據(jù)存儲時間、內(nèi)容信息及關(guān)聯(lián)數(shù)據(jù)存儲位置。對應(yīng)每個記錄介質(zhì)注冊各記錄。
圖21是表示在本發(fā)明第4實施例中存儲于記錄介質(zhì)中的數(shù)據(jù)文件GF之內(nèi)容的說明圖。數(shù)據(jù)文件GF包含屬性信息存儲區(qū)域80和圖像數(shù)據(jù)存儲區(qū)域90。在屬性信息存儲區(qū)域80中，存儲有對應(yīng)于上述數(shù)據(jù)庫的各字段的數(shù)據(jù)。圖像數(shù)據(jù)存儲區(qū)域90中存儲有在上述各實施例中生成的摘要圖像數(shù)據(jù)。
最終數(shù)據(jù)存儲時間將最后在記錄介質(zhì)上存儲動態(tài)圖像數(shù)據(jù)的時間記錄到秒。利用最終數(shù)據(jù)存儲時間是難以存在相同數(shù)據(jù)的唯一數(shù)據(jù)這一點，可利用作記錄介質(zhì)的識別管理序號。內(nèi)容信息是用戶可自由地輸入的信息。關(guān)聯(lián)數(shù)據(jù)存儲位置是表示存儲關(guān)聯(lián)數(shù)據(jù)的硬盤30c(圖19)內(nèi)的目錄(directory)的數(shù)據(jù)。
在本實施例中，關(guān)聯(lián)數(shù)據(jù)存儲位置中包含代表圖像數(shù)據(jù)、配置信息和圖像位置信息。作為代表圖像數(shù)據(jù)，例如在各場景中可利用評價值最高的靜止圖像數(shù)據(jù)的低分辨率數(shù)據(jù)、或包含該靜止圖像數(shù)據(jù)的、在低分辨率下短時間的動態(tài)圖像數(shù)據(jù)。配置信息例如可利用表示在記錄介質(zhì)上打印多個代表圖像數(shù)據(jù)所用的配置的數(shù)據(jù)。作為圖像位置信息，例如可利用特定包含代表圖像數(shù)據(jù)的場景的信息或在場景內(nèi)部的開始時間。
圖22是表示在記錄介質(zhì)上打印的2個摘要圖像的說明圖。在記錄介質(zhì)D和記錄介質(zhì)Da上，作為摘要圖像，分別打印6個和9個代表圖像。用戶知道記錄介質(zhì)的內(nèi)容的同時，為了特定記錄介質(zhì)，可利用索引圖像。圖像管理應(yīng)用程序20a使用代表圖像數(shù)據(jù)和配置信息，可在顯示器18中顯示索引圖像。例如，可構(gòu)成為在用戶通過使用圖像管理應(yīng)用程序20a，檢索數(shù)據(jù)庫(圖20)，而在發(fā)現(xiàn)期望的動態(tài)圖像數(shù)據(jù)時，在顯示器18a中顯示摘要圖像，可特定期望的記錄介質(zhì)。
而且，包含各代表圖像的摘要圖像最好是作為在其周圍有向圖像輪廓變薄的層次(gradation)的打印圖像來打印。這是為了控制打印位置偏移所導(dǎo)致的、對記錄介質(zhì)的打印圖像的圖像質(zhì)量惡化。由于對記錄介質(zhì)的打印圖像通常具有(1)空白易變小，(2)打印的位置偏移易變得較大等特有的傾向，由此具有打印的位置偏移所導(dǎo)致的、對記錄介質(zhì)的打印圖像的圖像質(zhì)量惡化易變大，即易明顯等特有的情況。
圖23是本發(fā)明第4實施例中圖像數(shù)據(jù)自動管理處理的內(nèi)容的說明圖。圖像數(shù)據(jù)自動管理處理例如可構(gòu)成為在DVD-R中存儲動態(tài)圖像數(shù)據(jù)后，對應(yīng)基于用戶的結(jié)束處理命令自動起動。
在步驟S10100中，圖像處理應(yīng)用程序10(圖19)以第1至第3實施例中公開的方法執(zhí)行摘要圖像生成處理，生成包含代表圖像數(shù)據(jù)的摘要圖像數(shù)據(jù)。
代表圖像數(shù)據(jù)如前所述，作為評價值成為峰值的時間的靜止圖像數(shù)據(jù)或動態(tài)圖像數(shù)據(jù)(在低分辨率下短時間的數(shù)據(jù))來生成。代表圖像數(shù)據(jù)也可自動生成預(yù)先設(shè)定數(shù)的數(shù)據(jù)，或也可生成成為候補的代表圖像數(shù)據(jù)，并使用戶選擇。
在步驟S10200中，圖像管理應(yīng)用程序20(圖19)執(zhí)行屬性數(shù)據(jù)生成處理。所謂屬性數(shù)據(jù)生成處理是生成除存儲于屬性信息存儲區(qū)域80(圖21)的代表圖像數(shù)據(jù)以外的各數(shù)據(jù)的處理。
配置信息例如是用于生成如圖22所示的打印圖像的信息。配置信息可構(gòu)成為包含特定打印圖像中代表圖像數(shù)據(jù)的尺寸和位置的信息。
代表圖像分析日期例如可通過從PCa的內(nèi)部時鐘(未圖示)取得代表圖像數(shù)據(jù)的生成結(jié)束日期來生成。最終數(shù)據(jù)存儲時間例如可根據(jù)最后追述動態(tài)圖像數(shù)據(jù)的日期而同樣地生成。經(jīng)未圖示的用戶接口輸入內(nèi)容信息。
在步驟S10300中，圖像管理應(yīng)用程序20執(zhí)行屬性數(shù)據(jù)存儲處理。屬性數(shù)據(jù)存儲處理是將生成的屬性信息存儲在記錄介質(zhì)中的處理。若將屬性信息全部存儲在記錄介質(zhì)上，則在本實施例中自動地執(zhí)行定案(finalize)處理。
在步驟S10400中，圖像管理應(yīng)用程序20執(zhí)行屬性數(shù)據(jù)注冊處理。所謂屬性數(shù)據(jù)注冊處理是將生成的屬性信息作為記錄而在數(shù)據(jù)庫中注冊的處理。由此，可在硬盤30c上管理存儲于未裝載在個人計算機PCa上的多個記錄介質(zhì)中的動態(tài)圖像數(shù)據(jù)。
在步驟S10500中，圖像管理應(yīng)用程序20執(zhí)行代表圖像打印處理。代表圖像打印處理在記錄介質(zhì)(例如DVD-R)上打印包含如圖22所示的代表圖像的摘要圖像。
由此，例如如果用戶使用圖像管理應(yīng)用程序20，使用聲音檢索或文本檢索、將來使用圖案匹配等的圖像檢索等探索方法來特定期望的動態(tài)圖像數(shù)據(jù)，則可向用戶提供存儲該動態(tài)圖像數(shù)據(jù)的記錄介質(zhì)的目錄圖像。索引圖像的提供通過在顯示器18a上顯示或打印到打印用紙上來進(jìn)行。用戶可使用提供的目錄圖像來簡單地特定記錄介質(zhì)。
這樣，在將代表圖像數(shù)據(jù)打印到記錄介質(zhì)的同時，若利用包含代表圖像數(shù)據(jù)的屬性數(shù)據(jù)來進(jìn)行數(shù)據(jù)庫管理，則可大大地減輕用戶管理動態(tài)圖像數(shù)據(jù)的負(fù)擔(dān)。并且，在記錄介質(zhì)上，可根據(jù)內(nèi)容信息等屬性信息打印圖像，可供用戶利用。
并且，在本實施例中，由于在記錄介質(zhì)上也存儲屬性數(shù)據(jù)，所以在其他個人計算機所具有的數(shù)據(jù)庫中也可簡單地注冊。例如可構(gòu)成為如果在記錄介質(zhì)中存儲注冊用的代理(agent)，則只要在其他的個人計算機上加載記錄介質(zhì)，就自動地在數(shù)據(jù)庫中注冊。
另外，在本實施例中，在最后動態(tài)圖像數(shù)據(jù)的存儲后生成屬性信息，但例如也可構(gòu)成為對每個動態(tài)圖像數(shù)據(jù)的附記更新屬性信息。
另外，例如對如DCD-RW那樣可隨時改寫或附記的記錄介質(zhì)，可通過本系統(tǒng)監(jiān)視是否在其他的圖像處理裝置中追加進(jìn)行處理。這時，最好是顯示用于促使用戶注意的用戶接口。該用戶接口最好是具有詢問用戶是否更新屬性信息的功能。
并且，在不包含屬性數(shù)據(jù)時，最好是同樣地在使用戶知道不包含屬性數(shù)據(jù)的意圖的同時，提供容許來自用戶的屬性數(shù)據(jù)的生成指示之接口。
F變形例另外，本發(fā)明不限于上述實施例或?qū)嵤┓绞?，在不脫離其精神的范圍內(nèi)，可以各種形式實施，例如也可如下的變形。
F-1、在上述實施例中，構(gòu)成為排除比規(guī)定時間還短的動態(tài)圖像數(shù)據(jù)，但也可構(gòu)成為不是自動排除，而是在自動生成摘要圖像后用戶可用手動排除。另外，上述規(guī)定的時間最好是構(gòu)成為用戶可調(diào)整。
F-2、在上述實施例中，按時間序列順序連接所抽取的多個動態(tài)圖像數(shù)據(jù)，但例如也可對應(yīng)于靜止圖像評價值來確定，也可對應(yīng)動態(tài)圖像評價值來確定，或也可對應(yīng)兩者來確定。
F-3、在上述實施例中，對每個場景分割動態(tài)圖像數(shù)據(jù)，對每個分割的場景抽取動態(tài)圖像數(shù)據(jù)，但也可不對每個場景分割，而進(jìn)行與上述各實施例相同的處理。
F-4、在上述實施例中，作為動態(tài)圖像的抽取基準(zhǔn)使用的規(guī)定閾值th是恒定的，但例如也可對每個場景算出動態(tài)圖像評價值的平均值，對應(yīng)該平均值，按每個場景使規(guī)定的閾值th變化。據(jù)此，進(jìn)一步可抽取符合用戶需要的動態(tài)圖像數(shù)據(jù)。
另外，規(guī)定的閾值th也可使用靜止圖像評價值和動態(tài)圖像評價值兩者、或僅靜止圖像評價值替代動態(tài)圖像評價值，對每個場景使規(guī)定的閾值th變化。
F-5、在上述的實施例中，在抽取多個動態(tài)圖像數(shù)據(jù)時，動態(tài)圖像數(shù)據(jù)連接部14(圖11)連接所抽取的多個動態(tài)圖像數(shù)據(jù)，生成摘要圖像數(shù)據(jù)，但例如也可構(gòu)成本發(fā)明為不連接而單獨地向用戶提供所抽取的多個動態(tài)圖像數(shù)據(jù)的動態(tài)圖像數(shù)據(jù)處理方法。
F-6、在上述實施例中，公開作為在包含各代表圖像的索引圖像有層次的打印圖像來打印的結(jié)構(gòu)，但例如對文本等其他的打印圖像也可適用同樣的結(jié)構(gòu)。
另外，最好采用就是否在打印圖像中有層次，用戶可自由地選擇的結(jié)構(gòu)(例如提供允許用戶選擇是否有層次的接口畫面)。這時，也構(gòu)成為設(shè)有層次的打印為初始設(shè)定，也可構(gòu)成為設(shè)未有層次的打印為初始設(shè)定，或也可構(gòu)成為可變更層次的寬度或程度。
F-7、在上述實施例中，動態(tài)圖像數(shù)據(jù)由非交織方式的幀圖像數(shù)據(jù)構(gòu)成，但本發(fā)明也可適用交織方式的動態(tài)圖像數(shù)據(jù)。這時，在上述實施例中的各幀圖像數(shù)據(jù)相當(dāng)于根據(jù)由奇數(shù)號掃描線的圖像數(shù)據(jù)構(gòu)成的奇數(shù)場之靜止圖像數(shù)據(jù)、和由偶數(shù)號掃描線的圖像數(shù)據(jù)構(gòu)成的偶數(shù)場之靜止圖像數(shù)據(jù)生成的靜止圖像數(shù)據(jù)。
在上述實施例中，也可將由硬件實現(xiàn)的結(jié)構(gòu)的一部分替換成軟件，相反，也可將由軟件實現(xiàn)的結(jié)構(gòu)的一部分替換成硬件。
在本發(fā)明功能的一部分或全部由軟件來實現(xiàn)時，該軟件(計算機程序)可以存儲在計算機可讀取的記錄介質(zhì)上的形式來提供。在本發(fā)明中，所謂「計算機可讀取的記錄介質(zhì)」不限于如軟盤或CD-ROM那樣的便攜型記錄介質(zhì)，還包含各種RAM或ROM等計算機內(nèi)的內(nèi)部存儲裝置、或硬盤等固定于計算機的外部存儲裝置。
最后，本申請通過參照在公開中包含作為優(yōu)先權(quán)主張的基礎(chǔ)的下面2個日本專利申請。
特愿2004-60004(申請日平成16年3月4目)特愿2004-74298(申請日平成16年3月16日)(產(chǎn)業(yè)上的可利用性)本發(fā)明可適用于動態(tài)圖像數(shù)據(jù)的處理技術(shù)。
權(quán)利要求
1.一種動態(tài)圖像數(shù)據(jù)處理方法，其從動態(tài)圖像數(shù)據(jù)中抽取一部分動態(tài)圖像數(shù)據(jù)，其特征在于，具備幀圖像評價工序，其根據(jù)規(guī)定的條件，評價包含于所述動態(tài)圖像數(shù)據(jù)中的多個幀圖像數(shù)據(jù)的每一個，并對應(yīng)所述評價來生成第1圖像評價值；和動態(tài)圖像數(shù)據(jù)抽取工序，其對應(yīng)所述第1圖像評價值，抽取包含滿足規(guī)定條件的多個幀圖像數(shù)據(jù)的動態(tài)圖像數(shù)據(jù)。
2.根據(jù)權(quán)利要求1所述的動態(tài)圖像處理方法，其中，還具備取得所述動態(tài)圖像數(shù)據(jù)的取得工序，所述動態(tài)圖像數(shù)據(jù)抽取工序包含從所述第1圖像評價值和所述第1圖像評價值的變動的至少一方滿足規(guī)定條件的所述幀圖像數(shù)據(jù)中，抽取1個以上作為在時間序列上連續(xù)的幀圖像數(shù)據(jù)之集合的幀群的工序，所述動態(tài)圖像處理方法還具備使用所述抽取幀群的至少一部分，生成所述摘要動態(tài)圖像數(shù)據(jù)的摘要動態(tài)圖像數(shù)據(jù)生成工序。
3.根據(jù)權(quán)利要求2所述的動態(tài)圖像處理方法，其中，還具備分割所述動態(tài)圖像數(shù)據(jù)，分別設(shè)定多個包含多個所述幀圖像數(shù)據(jù)的場景的分割工序；所述動態(tài)圖像數(shù)據(jù)抽取工序包含從各所述場景中抽取至少1個以上所述幀群的工序。
4.根據(jù)權(quán)利要求3所述的動態(tài)圖像處理方法，其中，所述分割工序包含根據(jù)所述第1圖像評價值的不連接變化，分割所述動態(tài)圖像數(shù)據(jù)的工序。
5.根據(jù)權(quán)利要求2所述的動態(tài)圖像處理方法，其中，所述規(guī)定條件包含所述第1圖像評價值為規(guī)定閾值以上。
6.根據(jù)權(quán)利要求5所述的動態(tài)圖像處理方法，其中，還具備輸入所述摘要動態(tài)圖像數(shù)據(jù)的再生時間之希望值的再生時間輸入工序；和對應(yīng)所述再生時間的希望值，調(diào)整所述閾值的調(diào)整工序。
7.根據(jù)權(quán)利要求2所述的動態(tài)圖像處理方法，其中，所述動態(tài)圖像數(shù)據(jù)抽取工序包含優(yōu)先抽取所述第1圖像評價值的變化率為0以上的幀群的工序。
8.根據(jù)權(quán)利要求2所述的動態(tài)圖了像處理方法，其中，所述動態(tài)圖像數(shù)據(jù)抽取工序包含如下工序，即就多個所述幀群中、所述幀群間的時間間隔為規(guī)定值以下的2個幀群，歸納所述2個幀群及其間的全部幀圖像數(shù)據(jù)后作為1個幀群抽取。
9.根據(jù)權(quán)利要求8所述的動態(tài)圖像處理方法，其中，還具備場景分割工序，其分割所述動態(tài)圖像數(shù)據(jù)，分別設(shè)定多個包含多個所述幀圖像數(shù)據(jù)的場景；所述動態(tài)圖像數(shù)據(jù)抽取工序還包含在所述2個幀群及其間的全部幀圖像數(shù)據(jù)處于相同場景內(nèi)時，作為1個幀群提取的工序。
10.根據(jù)權(quán)利要求2所述的動態(tài)圖像處理方法，其中，所述動態(tài)圖像數(shù)據(jù)抽取工序包含抽取由規(guī)定數(shù)以上的幀圖像數(shù)據(jù)構(gòu)成的所述幀群的工序。
11.根據(jù)權(quán)利要求2～10中任一項所述的動態(tài)圖像處理方法，其中，所述幀圖像評價工序包含如下工序，即使用比較包含所述第1圖像評價值的算出對象之所述幀圖像數(shù)據(jù)的2個所述幀圖像數(shù)據(jù)而求出的動作矢量，算出所述第1圖像評價值。
12.根據(jù)權(quán)利要求1所述的動態(tài)圖像處理方法，其中，具備動態(tài)圖像評價工序，其對應(yīng)多個幀圖像數(shù)據(jù)各自的所述第1圖像評價值和所述第1圖像評價值的時間序列變化率，生成所述多個幀圖像數(shù)據(jù)各自的第2圖像評價值；所述動態(tài)圖像數(shù)據(jù)抽取工序包含如下工序，即根據(jù)所述第2圖像評價值，從所述動態(tài)圖像數(shù)據(jù)中抽取由所述第2圖像評價值比規(guī)定閾值大的多個幀圖像數(shù)據(jù)構(gòu)成的動態(tài)圖像數(shù)據(jù)
13.根據(jù)權(quán)利要求12所述的動態(tài)圖像數(shù)據(jù)處理方法，其中，所述動態(tài)圖像評價部具有設(shè)增大所述第1圖像評價值的時間序列變化率為正的多個幀圖像數(shù)據(jù)之第1圖像評價值而得到的值為所述第2圖像評價值的評價模式。
14.根據(jù)權(quán)利要求12或13所述的動態(tài)圖像數(shù)據(jù)處理方法，其中，所述動態(tài)圖像評價部具有設(shè)降低所述第1圖像評價值的時間序列變化率為負(fù)的多個幀圖像數(shù)據(jù)之第1圖像評價值而得到的值為所述第2圖像評價值的評價模式。
15.根據(jù)權(quán)利要求12～14中任一項所述的動態(tài)圖像數(shù)據(jù)處理方法，其中，所述動態(tài)圖像評價部具有設(shè)所述第1圖像評價值與所述第1圖像評價值的時間序列變化率乘以規(guī)定正系數(shù)的值之和為所述第2圖像評價值的評價模式。
16.根據(jù)權(quán)利要求15所述的動態(tài)圖像數(shù)據(jù)處理方法，其中，所述規(guī)定系數(shù)是比1小的正值。
17.根據(jù)權(quán)利要求12～16中任一項所述的動態(tài)圖像數(shù)據(jù)處理方法，其中，所述動態(tài)圖像數(shù)據(jù)抽取工序具有如下抽取模式，即根據(jù)所述第2圖像評價值，從所述動態(tài)圖像中僅抽取由所述第2圖像評價值比規(guī)定閾值大的多個幀圖像數(shù)據(jù)構(gòu)成的動態(tài)圖像數(shù)據(jù)，且再生時間比規(guī)定時間還長的圖像數(shù)據(jù)。
18.根據(jù)權(quán)利要求12～17中任一項所述的動態(tài)圖像數(shù)據(jù)處理方法，其中，還具備對每個場景分割所述動態(tài)圖像數(shù)據(jù)的場景分割工序；所述動態(tài)圖像數(shù)據(jù)抽取工序包含在每個所述場景中進(jìn)行所述抽取的工序。
19.根據(jù)權(quán)利要求18所述的動態(tài)圖像數(shù)據(jù)處理方法，其中所述動態(tài)圖像數(shù)據(jù)抽取工序包含如下工序，即按每個所述場景算出所述第1圖像評價值和所述第2圖像評價值至少之一的平均值，對應(yīng)所述平均值，按每個所述場景使所述規(guī)定閾值變化。
20.一種摘要圖像數(shù)據(jù)生成方法，其從動態(tài)圖像數(shù)據(jù)中抽取一部分，生成作為在時間上縮短的動態(tài)圖像數(shù)據(jù)之摘要圖像數(shù)據(jù)，其特征在于，具備權(quán)利要求12～19中任一項所述的動態(tài)圖像數(shù)據(jù)處理方法；和動態(tài)圖像數(shù)據(jù)連接工序，其在存在多個所述抽取的動態(tài)圖像數(shù)據(jù)時，連接所述抽取的多個動態(tài)圖像數(shù)據(jù)，生成所述摘要圖像數(shù)據(jù)。
21.根據(jù)權(quán)利要求20所述的摘要圖像數(shù)據(jù)生成方法，其中，所述動態(tài)圖像數(shù)據(jù)連接工序具有按時間序列順序連接所述抽取的多個動態(tài)圖像數(shù)據(jù)的連接模式。
22.根據(jù)權(quán)利要求20或21所述的摘要圖像生成方法，其中，所述動態(tài)圖像數(shù)據(jù)連接工序具有如下連接模式，即按對應(yīng)構(gòu)成所述抽取的多個動態(tài)圖像數(shù)據(jù)各自之多個幀圖像數(shù)據(jù)的所述第1圖像評價值和所述第2圖像評價值至少之一而確定的順序，連接所述抽取的多個動態(tài)圖像數(shù)據(jù)。
23.一種打印方法，其在存儲動態(tài)圖像數(shù)據(jù)的記錄介質(zhì)上進(jìn)行打印，其特征在于，具備權(quán)利要求1～19中任一項所述的動態(tài)圖像數(shù)據(jù)處理方法；和對應(yīng)所述多個幀圖像數(shù)據(jù)的至少一部分，在所述記錄介質(zhì)的表面上進(jìn)行打印的工序。
24.一種動態(tài)圖像數(shù)據(jù)存儲方法，其在記錄介質(zhì)上存儲動態(tài)圖像數(shù)據(jù)和所述動態(tài)圖像數(shù)據(jù)的屬性信息，其特征在于，具備在所述記錄介質(zhì)上存儲所述動態(tài)圖像數(shù)據(jù)的工序；權(quán)利要求1～19中任一項所述的動態(tài)圖像數(shù)據(jù)處理方法；生成包含對應(yīng)所述多個幀圖像數(shù)據(jù)至少之一部分而生成的數(shù)據(jù)的屬性信息的工序；和在所述記錄介質(zhì)上存儲所述生成的屬性信息的工序。
25.一種動態(tài)圖像數(shù)據(jù)處理裝置，其從動態(tài)圖像數(shù)據(jù)中抽取一部分動態(tài)圖像數(shù)據(jù)，其特征在于，具備幀圖像評價部，其根據(jù)規(guī)定條件，評價包含于所述動態(tài)圖像數(shù)據(jù)中的多個幀圖像數(shù)據(jù)的每一個，并對應(yīng)所述評價，生成第1圖像評價值；和動態(tài)圖像數(shù)據(jù)抽取部，其對應(yīng)所述第1圖像評價值，抽取包含滿足規(guī)定條件的多個幀圖像數(shù)據(jù)的動態(tài)圖像數(shù)據(jù)。
26.一種打印裝置，其在存儲動態(tài)圖像數(shù)據(jù)的記錄介質(zhì)上進(jìn)行打印，其特征在于，具備幀圖像評價部，其根據(jù)規(guī)定條件，評價包含于所述動態(tài)圖像數(shù)據(jù)中的多個幀圖像數(shù)據(jù)的每一個，并對應(yīng)所述評價值，生成第1圖像評價值；代表圖像數(shù)據(jù)抽取部，其對應(yīng)所述第1圖像評價值，抽取滿足規(guī)定條件的幀圖像數(shù)據(jù)；和打印部，其對應(yīng)所述幀圖像數(shù)據(jù)，在所述記錄介質(zhì)表面上進(jìn)行打印。
27.一種計算機程序，其使計算機執(zhí)行用于從動態(tài)圖像數(shù)據(jù)中抽取一部分動態(tài)圖像數(shù)據(jù)的處理，其特征在于，具備使所述計算機實現(xiàn)如下功能的程序幀圖像評價功能，其根據(jù)規(guī)定的條件，評價包含于所述動態(tài)圖像數(shù)據(jù)中的多個幀圖像數(shù)據(jù)的每一個，并對應(yīng)所述評價，生成第1圖像評價值；和動態(tài)圖像數(shù)據(jù)抽取功能，其對應(yīng)所述第1圖像評價值，抽取包含滿足規(guī)定條件的多個幀圖像數(shù)據(jù)的動態(tài)圖像數(shù)據(jù)。
28.一種計算機程序，其使計算機執(zhí)行用于在存儲動態(tài)圖像數(shù)據(jù)的記錄介質(zhì)上進(jìn)行打印的處理，其特征在于，具備使所述計算機實現(xiàn)如下功能的程序幀圖像評價功能，其根據(jù)規(guī)定條件，評價包含于所述動態(tài)圖像數(shù)據(jù)中的多個幀圖像數(shù)據(jù)的每一個，并對應(yīng)所述評價，生成第1圖像評價值；代表圖像數(shù)據(jù)抽取功能，其對應(yīng)所述第1圖像評價值，抽取滿足規(guī)定條件的幀圖像數(shù)據(jù)；和控制對應(yīng)所述幀圖像數(shù)據(jù)而在所述記錄介質(zhì)的表面上進(jìn)行打印的打印部的功能。
29.一種計算機程序產(chǎn)品，其特征在于，具備計算機可讀取的介質(zhì)；和存儲于所述計算機可讀取的介質(zhì)上的權(quán)利要求27或28所述的計算機程序。
全文摘要
本發(fā)明提供一種從動態(tài)圖像數(shù)據(jù)中抽取一部分動態(tài)圖像數(shù)據(jù)的動態(tài)圖像數(shù)據(jù)處理方法。該方法的特征在于，具備幀圖像評價工序，其根據(jù)規(guī)定條件，評價包含于動態(tài)圖像數(shù)據(jù)中的多個幀圖像數(shù)據(jù)的每一個，并對應(yīng)評價，生成第1圖像評價值；和動態(tài)圖像數(shù)據(jù)抽取工序，其對應(yīng)第1圖像評價值，抽取包含滿足規(guī)定條件的多個幀圖像數(shù)據(jù)之動態(tài)圖像數(shù)據(jù)。
文檔編號H04N5/91GK1839625SQ20058000075
公開日2006年9月27日 申請日期2005年3月3日 優(yōu)先權(quán)日2004年3月4日
發(fā)明者細(xì)田達(dá)矢, 鍬田直樹, 筱崎順一郎, 向山文昭 申請人:精工愛普生株式會社