專利名稱：圖像感測設(shè)備及其控制方法，信息處理設(shè)備，打印設(shè)備，打印數(shù)據(jù)生成方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像感測設(shè)備和該圖像感測設(shè)備的控制方法，以及信 息處理設(shè)備，打印設(shè)備，和打印數(shù)據(jù)生成方法，更具體來說，涉及通 過圖像感測設(shè)備、信息處理設(shè)備和打印設(shè)備執(zhí)行的運(yùn)動(dòng)圖像的圖像感 測和打印，以及該圖像感測設(shè)備的控制方法，和打印數(shù)據(jù)生成方法。
背景技術(shù)：
近年來，諸如數(shù)字?jǐn)z像機(jī)和數(shù)字視頻攝像機(jī)之類的可以利用簡單 操作感測圖像并將該感測的圖像轉(zhuǎn)換為數(shù)字圖像數(shù)據(jù)的圖像感測設(shè)
備已經(jīng)得到廣泛使用。結(jié)果，在PC顯示監(jiān)視器和電視屏幕上查看利
用數(shù)字?jǐn)z像機(jī)或數(shù)字視頻攝像機(jī)感測的靜止圖像和運(yùn)動(dòng)圖像以及使 用工作室打印服務(wù)或家用個(gè)人打印機(jī)打印它們的機(jī)會(huì)增加。
此外，利用數(shù)字?jǐn)z像機(jī)的技術(shù)性能的新發(fā)展，不僅組合了靜止圖 像感測，而且還組合了運(yùn)動(dòng)圖像感測功能的數(shù)字?jǐn)z像機(jī)正在變得普遍。
在這些情況下，常規(guī)上，到打印店并使用底片或索引打印，以手 寫方式指定用于創(chuàng)建打印的信息，如希望打印的幀以及這樣的幀的數(shù) 量，日期打印等。近年來，已經(jīng)可以在自己的數(shù)字?jǐn)z像機(jī)中設(shè)置此類 信息，并直接記錄到諸如存儲(chǔ)卡之類的可移動(dòng)介質(zhì)中。此功能通過簡 單地將可移動(dòng)介質(zhì)附連到打印機(jī)，使得能夠自動(dòng)地根據(jù)指定進(jìn)行打 印。替代在核對數(shù)字?jǐn)z像機(jī)或打印機(jī)上的數(shù)字圖像的同時(shí)一次一張地 打印每一個(gè)圖像，這可以節(jié)省時(shí)間和避免麻煩，減輕對用戶的負(fù)擔(dān)。
為了實(shí)現(xiàn)上文所描述的功能，已知稱為DPOF (Digital Print Order Format,數(shù)字打印命令格式)的標(biāo)準(zhǔn)。DPOF是這樣的一種格式為了實(shí)現(xiàn)上文所描述的對于用戶的優(yōu)點(diǎn)，獲取自動(dòng)打印信息，如
打印的數(shù)量、大小、是否包括日期、標(biāo)題、修整等，并將它與圖像文
件一起存儲(chǔ)在可移動(dòng)介質(zhì)中，以便在打印時(shí)使用。
目前廣泛公知的DPOF假設(shè)要打印的是靜止圖像，并具有下列
類型的打印
標(biāo)準(zhǔn)打印...每1張打印布置1個(gè)圖像文件。 索引打印和多圖像打印...每1張打印布置多個(gè)圖像文件。 特定大小打印...每1張打印布置1個(gè)圖像文件，但是指定圖像尺寸。
那么，自動(dòng)打印信息被存儲(chǔ)在文本文件中，存儲(chǔ)該信息的文件稱 為DPOF文件。
此外，近來，已經(jīng)開發(fā)了直接打印系統(tǒng)，該系統(tǒng)使得數(shù)字圖像數(shù) 據(jù)能夠直接從數(shù)字?jǐn)z像機(jī)傳輸?shù)酱蛴C(jī)并打印，而無需經(jīng)過PC。此 外，還開發(fā)出了這樣的打印機(jī)，其中，利用數(shù)字?jǐn)z像機(jī)感測的圖像被 保存到諸如存儲(chǔ)卡之類的介質(zhì)中，該介質(zhì)被直接附連到打印機(jī)，并且 該介質(zhì)中存儲(chǔ)的圖像被打印。
此外，還需要運(yùn)動(dòng)圖像打印，不僅打印靜止圖像，而且打印運(yùn)動(dòng) 圖像的幀。例如，在專利文件1中提出了用于打印運(yùn)動(dòng)圖像的技術(shù)。 此外，例如，在專利文件2中還提出了在以DPOF打印運(yùn)動(dòng)圖像中包 括的技術(shù)。
此外，在專利文件3中，公開了這樣的技術(shù)連續(xù)地計(jì)算幀間差 值，并提取運(yùn)動(dòng)圖像的場景變化的時(shí)刻。
專利文件l:日本專利特開No. 2004-040393 專利文件2:日本專利特開No. 2001-251573 專利文件3:日本專利特開No. 2004-080599

發(fā)明內(nèi)容
本發(fā)明要解決的問題
然而，在常規(guī)的發(fā)明中，對于運(yùn)動(dòng)圖像的單個(gè)指定的幀圖像，
行諸如邊緣突出和亮度校正之類的普通的圖像校正，此后，生成用于 打印的靜止圖像。結(jié)果，難以去除運(yùn)動(dòng)圖像所特有的圖像噪聲。此夕卜，
為了從運(yùn)動(dòng)圖像中提取場景的變化，如在專利文件3中那樣，必須一 次一個(gè)地檢查幀之間的相關(guān)性，而這樣的處理花費(fèi)時(shí)間。
此外，對于靜止圖像，圖像感測條件數(shù)據(jù)存儲(chǔ)在頭部中，此外， 靜止圖像本身基本上記錄了時(shí)間上的凍結(jié)瞬間(frozen moment)， 從而，當(dāng)靜止圖像被打印時(shí)，只使用單個(gè)打印的數(shù)據(jù)來執(zhí)行圖像校正 以及打印靜止圖像。
相反，對于運(yùn)動(dòng)圖像打印，從時(shí)間上連續(xù)的圖像中提取單個(gè)打印， 并進(jìn)行打印。在此情況下，已知這樣的技術(shù)，所述技術(shù)使用要打印的 圖像的之前和之后在時(shí)間上連續(xù)的圖像，并將圖像分割為運(yùn)動(dòng)區(qū)域和 靜止區(qū)域，并執(zhí)行兩種圖像處理，或者所述技術(shù)在放大并打印來自場 圖像的幀圖像時(shí)執(zhí)行像素插入。
執(zhí)行這種合成或校正在提供增強(qiáng)的圖像分辨率和感光度時(shí)是有 效的，如果對象靜止不動(dòng)，則隨著用于合成和校正的圖像的數(shù)量增大， 效果會(huì)提高。然而，在進(jìn)行運(yùn)動(dòng)圖像感測時(shí)，很可能視角或曝光發(fā)生 變化。結(jié)果，當(dāng)嘗試打印單個(gè)場景時(shí)，按原樣利用常規(guī)技術(shù)，難以最 佳地校正圖像和改進(jìn)其質(zhì)量。
本發(fā)明是在考慮到上文描述的現(xiàn)有技術(shù)的問題而作出的，并且其 目的在于使得能夠更可靠并迅速地生成用于高質(zhì)量打印的運(yùn)動(dòng)圖像 數(shù)據(jù)。
解決問題的手段
要實(shí)現(xiàn)上文所描述的目標(biāo)，本發(fā)明提供了一種能夠感測運(yùn)動(dòng)圖像 的圖像感測設(shè)備，包括存儲(chǔ)單元，存儲(chǔ)在運(yùn)動(dòng)圖像的圖像感測期間 感測的運(yùn)動(dòng)圖像的圖像數(shù)據(jù)，并且存儲(chǔ)所述運(yùn)動(dòng)圖像的圖像感測條件 數(shù)據(jù)；選擇單元，從存儲(chǔ)在所述存儲(chǔ)單元中的構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀
的圖像數(shù)據(jù)中選擇用于打印的幀；合成單元，合成構(gòu)成運(yùn)動(dòng)圖像的多 個(gè)幀的圖像數(shù)據(jù)并生成用于打印的圖像數(shù)據(jù)；以及確定單元，基于由
所述選擇單元選擇的幀的圖像感測條件，確定要合成的幀的數(shù)量，所 測的由所述確定單元確定的所述數(shù)量的幀的圖像數(shù)據(jù)。
在另一個(gè)配置中，本發(fā)明的圖像處理設(shè)備包括輸入單元，輸入 構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和所述運(yùn)動(dòng)圖像的圖像感測條件 數(shù)據(jù)；選擇單元，從所輸入的多個(gè)幀中選擇用于打印的幀；合成單元，
以及確定單元，基于由所述選擇單元選擇的幀的圖像感測條件，確定 要合成的幀的數(shù)量，所述合成單元合成所選擇的幀的圖像數(shù)據(jù)和所選 擇的幀之前和之后感測的由所述確定單元確定的所述數(shù)量的幀的圖 像數(shù)據(jù)。
在另一個(gè)配置中，本發(fā)明的打印設(shè)備包括輸入單元，輸入構(gòu)成 運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和所述運(yùn)動(dòng)圖像的圖像感測條件數(shù)據(jù)； 選擇單元，從所輸入的多個(gè)幀中選擇用于打印的幀；合成單元，合成
單元，基于由所述選擇單元選擇的幀的圖像感測條件，確定要合成的 幀的數(shù)量；以及打印單元，打印由所述合成單元合成的用于打印的圖 像數(shù)據(jù)，所述合成單元合成所選擇的幀的圖像數(shù)據(jù)和所選擇的幀之前 和之后感測的由所述確定單元確定的所述數(shù)量的幀的圖像數(shù)據(jù)。
本發(fā)明的打印數(shù)據(jù)生成方法包括獲取步驟，獲取構(gòu)成運(yùn)動(dòng)圖像 的多個(gè)幀的圖像數(shù)據(jù)和所述運(yùn)動(dòng)圖像的圖像感測條件數(shù)據(jù)；選擇步 驟，從所獲取的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打印的幀；合成步驟， 合成構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)并生成用于打印的圖像數(shù)據(jù)； 以及確定步驟，基于在所述選擇步驟中選擇的幀的圖像感測條件，確 定要在所述合成步驟中合成的幀的數(shù)量，所述合成步驟合成所選擇的
述數(shù)量的幀的圖像數(shù)據(jù)。
在另 一個(gè)配置中， 一種能夠感測運(yùn)動(dòng)圖像的圖像感測設(shè)備包括 圖像感測單元，感測運(yùn)動(dòng)圖像；以及記錄單元，將由所述圖像感測單
元新獲取的幀的圖像數(shù)據(jù)與所述新獲取的幀緊前面感測的幀的圖像 數(shù)據(jù)之間的相關(guān)性連同所述新獲取的幀的圖像數(shù)據(jù) 一起記錄在記錄 介質(zhì)上。
在另 一個(gè)和其它配置中，本發(fā)明的圖像處理設(shè)備包括輸入單元， 輸入構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和所述多個(gè)幀的圖像數(shù)據(jù)之 間的相關(guān)性；選擇單元，從所輸入的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打 印的幀；提取單元，基于所述相關(guān)性，提取與所選擇的幀具有相關(guān)性 的另一個(gè)幀；合成單元，合成所選擇的幀的圖像數(shù)據(jù)和由所述提取單 元提取的幀的圖像數(shù)據(jù)，并生成用于打印的圖像數(shù)據(jù)；以及輸出單元， 將由所述合成單元合成的用于打印的圖像數(shù)據(jù)輸出到打印設(shè)備。
在另一個(gè)和其它配置中，本發(fā)明的打印設(shè)備包括輸入單元，輸
的相關(guān)性J選擇單元，從所輸入的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打印 的幀；提取單元，基于所述相關(guān)性，提取與所選擇的幀具有相關(guān)性的 另一個(gè)幀；合成單元，合成所選擇的幀的圖像數(shù)據(jù)和由所述提取單元 提取的幀的圖像數(shù)據(jù)，并生成用于打印的圖像數(shù)據(jù)；以及打印單元， 打印由所述合成單元合成的用于打印的圖像數(shù)據(jù)。
一種能夠感測運(yùn)動(dòng)圖像的圖像感測設(shè)備的控制方法包括圖像感 測步驟，利用圖像感測單元感測運(yùn)動(dòng)圖像；以及記錄步驟，將在所述
測的幀的圖像數(shù)據(jù)之間的相關(guān)性連同所述新獲取的幀的圖像數(shù)據(jù)一 起記錄在記錄介質(zhì)上。
在另一個(gè)和其它配置中，本發(fā)明的打印數(shù)據(jù)生成方法包括獲取 步驟，獲取構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和涉及所述多個(gè)幀的圖 像數(shù)據(jù)之間的相關(guān)性的信息；選擇步驟，從所獲取的多個(gè)幀的圖像數(shù) 據(jù)中選擇用于打印的幀；提取步驟，基于所述相關(guān)性，提取與所選擇 的幀具有相關(guān)性的另一個(gè)幀；合成步驟，合成所選擇的幀的圖像數(shù)據(jù) 和在所述提取步驟中提取的幀的圖像數(shù)據(jù)，并生成用于打印的圖像數(shù) 據(jù)；以及輸出步驟，將在所述合成步驟中合成的用于打印的圖像數(shù)據(jù)
輸出到打印單元。
通過下面的結(jié)合附圖的描述，本發(fā)明的其它特征和優(yōu)點(diǎn)將變得顯 而易見，其中，在多個(gè)視圖中類似的參考字符表示類似或相同的部分。


附圖包括在本說明書中，并構(gòu)成本說明書的一部分，示出本發(fā)明 的實(shí)施例，并與本說明書的描述一起用于描述本發(fā)明的基本原理，其
中
圖l是示出本發(fā)明第一實(shí)施例的系統(tǒng)的配置的方框圖； 圖2是示出本發(fā)明第一實(shí)施例的圖像感測設(shè)備的運(yùn)動(dòng)圖像感測 過程的流程圖3是示出本發(fā)明第一實(shí)施例的生成運(yùn)動(dòng)圖像打印用靜止圖像 的過程的流程圖4是示出本發(fā)明第一實(shí)施例中的記錄在記錄介質(zhì)上的圖像文 件的目錄結(jié)構(gòu)示例的示圖5是示出本發(fā)明第一實(shí)施例中的記錄在記錄介質(zhì)上的圖像文 件的目錄結(jié)構(gòu)示例的示圖6是示出本發(fā)明第一實(shí)施例的運(yùn)動(dòng)圖像幀圖像和相關(guān)性標(biāo)記 的示意圖7是示出本發(fā)明第一實(shí)施例的用于打印的靜止圖像的示例的
示圖8是示出本發(fā)明第一實(shí)施例的記錄在存儲(chǔ)介質(zhì)上的管理文件
的結(jié)構(gòu)示例的示圖9是示出本發(fā)明第一實(shí)施例的變型例的系統(tǒng)的配置的示圖； 圖IOA是示出本發(fā)明第二實(shí)施例的系統(tǒng)的配置的方框圖； 圖IOB是示出本發(fā)明第二實(shí)施例的系統(tǒng)的配置的方框圖； 圖11是示出本發(fā)明第二實(shí)施例中的以時(shí)間序列示出曝光變化的
圖像感測條件數(shù)據(jù)的示例的示圖12是示出本發(fā)明第二實(shí)施例中的指定打印圖像的時(shí)刻和曝光
12
變化之間的關(guān)系的示圖；以及
圖13是示出本發(fā)明第二實(shí)施例中的生成運(yùn)動(dòng)圖像打印用靜止圖 像的過程的流程圖。
具體實(shí)施例方式
現(xiàn)在將根據(jù)附圖詳細(xì)描述本發(fā)明的優(yōu)選實(shí)施例。 (第一實(shí)施例)
圖1是示出本發(fā)明第一實(shí)施例的系統(tǒng)的配置的方框圖，主要包括 圖像感測設(shè)備1和打印設(shè)備3。
圖像感測設(shè)備1是能夠感測運(yùn)動(dòng)圖像的圖像感測設(shè)備，如數(shù)字靜 態(tài)照相機(jī)、數(shù)字視頻攝像機(jī)等。在本發(fā)明第一實(shí)施例的圖像感測設(shè)備 1中，參考標(biāo)號ll表示包括聚焦透鏡、變焦透鏡等的透鏡，12表示 配備有光圏功能的快門(在數(shù)字視頻攝像機(jī)100的情況下，表示光圏)， 以及13表示由CCD傳感器、CMOS傳感器等所代表的圖像感測元件。
參考標(biāo)號14表示相關(guān)雙取樣/自動(dòng)增益控制電路(CDS/AGC)， 15表示數(shù)字信號處理電路，16表示具有能夠存儲(chǔ)至少兩個(gè)幀的數(shù)據(jù) 的容量的幀存儲(chǔ)器。應(yīng)該指出的是，雖然第一實(shí)施例被描述為如稍后 所描述的，在從圖像感測元件13的單個(gè)輸出操作中讀出單個(gè)幀的圖 像信號，但是不言而喻，也可以通過隔行掃描輸出單個(gè)場的圖像信號。 此外，不管它是幀還是場，在單個(gè)輸出操作中從圖像感測元件13輸 出的運(yùn)動(dòng)圖像在本實(shí)施例中都稱為"幀"。
參考標(biāo)號17表示主微型計(jì)算機(jī)，該主微型計(jì)算機(jī)控制圖像感測 設(shè)備l的總體操作。參考標(biāo)號18表示圖像總線，19表示圖像編解碼 器，20表示記錄單元，該記錄單元將由圖像編解碼器19壓縮的圖像 數(shù)據(jù)記錄到諸如存儲(chǔ)卡、數(shù)字視頻磁帶、DVD等之類的可移動(dòng)外部記 錄介質(zhì)29，并從外部記錄介質(zhì)29中讀出圖像數(shù)據(jù)。
參考標(biāo)號21表示諸如液晶顯示器(LCD)等之類的顯示單元，22 表示控制顯示單元21的顯示的顯示控制器。參考標(biāo)號23表示NTSC 編碼器，24表示視頻輸出終端，而25表示IEEE 1394標(biāo)準(zhǔn)、USB標(biāo)
準(zhǔn)或其它這樣的標(biāo)準(zhǔn)通信接口(I/F)。參考標(biāo)號26表示相關(guān)性確定單 元，其判斷圖像數(shù)據(jù)之間的相關(guān)性，而28表示由按鈕、開關(guān)、轉(zhuǎn)盤、 觸摸面板等構(gòu)成的操作單元。
打印設(shè)備3包括CPU31、存儲(chǔ)器32、內(nèi)部總線38、諸如存儲(chǔ) 卡、HDD等之類的存儲(chǔ)介質(zhì)33、顯示操作面板和預(yù)覽屏幕的顯示單 元35、以及控制顯示單元35的顯示的顯示控制器34。此外，打印設(shè) 備3包括IEEE 1394標(biāo)準(zhǔn)、USB標(biāo)準(zhǔn)或其它這樣的標(biāo)準(zhǔn)通信接口 (I/F)37、打印機(jī)引擎36等。
圖像感測設(shè)備1和打印設(shè)備3通過通信電纜2連接，并傳輸打印 數(shù)據(jù)，以及交換各種控制數(shù)據(jù)。應(yīng)該指出的是，雖然在圖l所示的示 例中，設(shè)備通過電纜連接，但是本發(fā)明不受通信標(biāo)準(zhǔn)或連接形式的限 制。例如，在通信接口是基于諸如紅外通信、藍(lán)牙標(biāo)準(zhǔn)等之類的通信 標(biāo)準(zhǔn)的無線通信裝置的情況下，可以以無線方式進(jìn)行通信。此外，圖 像感測設(shè)備l的記錄介質(zhì)29可以作為打印設(shè)備3的存儲(chǔ)介質(zhì)33安裝， 并且經(jīng)由記錄介質(zhì)29交換打印數(shù)據(jù)和各種類型的控制數(shù)據(jù)。
現(xiàn)在參照圖2所示的流程圖，描述利用具有圖1所示配置的圖像 感測設(shè)備1執(zhí)行的運(yùn)動(dòng)圖像感測操作。
來自對象的光進(jìn)入透鏡ll和快門12,撞擊圖像感測元件13，并 被轉(zhuǎn)換為電信號。此時(shí)，如果從操作單元28指示運(yùn)動(dòng)圖像記錄，則 圖像感測元件13在清除已存儲(chǔ)電信號后的預(yù)定時(shí)間段上存儲(chǔ)電信號 之后，將單個(gè)幀的存儲(chǔ)電荷(圖像信號)輸出到CDS/AGC 14。 CDS/AGC14取樣保持如此獲得的圖像信號，并將它調(diào)節(jié)到適當(dāng)?shù)男?號電平。已經(jīng)由CDS/AGC14進(jìn)行了電平調(diào)節(jié)的圖像信號在數(shù)字信號 處理電路15處經(jīng)受數(shù)字信號處理，生成的圖像數(shù)據(jù)被存儲(chǔ)在幀存儲(chǔ) 器16的預(yù)定區(qū)域中(步驟Sll)。
隨后，在步驟S12中，確定在幀存儲(chǔ)器16中是否存在之前幀的 圖像數(shù)據(jù)。如果幀存儲(chǔ)器16中沒有之前幀的圖像數(shù)據(jù)，那么，因?yàn)?在步驟Sl 1中獲取的圖像數(shù)據(jù)是該運(yùn)動(dòng)圖像感測操作中的第 一 圖像數(shù) 據(jù)，所以處理返回到步驟Sll。如果在幀存儲(chǔ)器16中存在之前幀的圖
像數(shù)據(jù)(在步驟S12中"是，，)，那么，處理轉(zhuǎn)到步驟S13，并且相關(guān) 性確定單元26從幀存儲(chǔ)器1中6讀出此時(shí)獲取的圖像數(shù)據(jù)和之前幀 的圖像數(shù)據(jù)，并確定相關(guān)性。應(yīng)該指出的是，相關(guān)性確定單元26使 用已知的方法確定相關(guān)性。
如果由相關(guān)性確定單元26執(zhí)行的確定結(jié)果表明相關(guān)性高于預(yù)定 級別(在步驟S14中為"是")，則相關(guān)性標(biāo)記被設(shè)置為Y(步驟S16)， 如果低于預(yù)定級別(在步驟S14中為"否，，)，則相關(guān)性標(biāo)記被設(shè)置為 N (步驟S15)。
隨后，在步驟S17中，圖像編解碼器19從幀存儲(chǔ)器16中讀出此 時(shí)獲取的圖像數(shù)據(jù)，利用適合于運(yùn)動(dòng)圖像的方法對圖像數(shù)據(jù)進(jìn)行壓縮 編碼，并將經(jīng)過壓縮編碼的圖像數(shù)據(jù)傳輸?shù)接涗泦卧?0。在記錄單元 20，經(jīng)過壓縮編碼的圖像數(shù)據(jù)被轉(zhuǎn)換為適合于記錄的格式，并連同從 相關(guān)性確定單元26中獲得的相關(guān)性標(biāo)記一起記錄到記錄介質(zhì)29上。
一旦完成了通過上文所描述的處理記錄一個(gè)幀的圖像數(shù)據(jù)，則在 步驟S18中，確定是否由操作單元28指示運(yùn)動(dòng)圖像感測結(jié)束，如果 指示，則結(jié)束圖像感測處理。如果沒有指示圖像感測結(jié)束，則處理返 回到步驟Sll，并且讀出下一個(gè)幀的圖像信號。應(yīng)該指出的是，在下 一個(gè)例程中，新輸出的圖像數(shù)據(jù)被存儲(chǔ)在幀存儲(chǔ)器16的這樣的區(qū)域 中，在前一例程中在該區(qū)域處存儲(chǔ)了之前幀的圖像數(shù)據(jù)。
如此，如上文所描述的，在本發(fā)明第一實(shí)施例中的運(yùn)動(dòng)圖像感測 期間，每一個(gè)幀的圖像數(shù)據(jù)和與之前幀的圖像數(shù)據(jù)的相關(guān)性標(biāo)記被記 錄在記錄介質(zhì)29上。
圖4是示出記錄在記錄介質(zhì)29上的圖像文件的目錄結(jié)構(gòu)示例的 示圖。圖4示出這樣的狀態(tài)，在圖像感測設(shè)備l能夠形成靜止圖像的 情況下，感測的靜止圖像和運(yùn)動(dòng)圖像混合在一起存儲(chǔ)在同 一記錄介質(zhì) 29上。
圖5是示出記錄在記錄介質(zhì)29上的運(yùn)動(dòng)圖像文件的一般結(jié)構(gòu)的 示意圖。如上文參考圖2所描述的，當(dāng)預(yù)先研究各個(gè)運(yùn)動(dòng)圖像幀之間 的相關(guān)性并將這些幀的圖像數(shù)據(jù)記錄在運(yùn)動(dòng)圖像文件中時(shí)，圖像感測 設(shè)備1將相關(guān)性標(biāo)記作為屬性信息添加到每一個(gè)幀中。
現(xiàn)在將參考圖3，描述當(dāng)打印上文所述記錄的運(yùn)動(dòng)圖像時(shí)執(zhí)行 的、由圖像感測設(shè)備1執(zhí)行的生成用于打印的靜止圖像的過程。
首先，等待用戶指定要打印的運(yùn)動(dòng)圖像的幀(步驟S21)。在如 如圖4所示那樣的圖像文件被保存在記錄介質(zhì)29上的情況下，用戶 選擇他/她希望打印的運(yùn)動(dòng)圖像的圖像文件，然后，在重放選擇的圖像 文件的同時(shí)選擇要打印的幀。
例如，在運(yùn)動(dòng)圖像的幀圖像和相關(guān)性標(biāo)記被如圖6所示的那樣記 錄的情況下，首先，提取場景變化點(diǎn)，并在該幀停止運(yùn)動(dòng)圖像。這里， 由于幀2和幀l之間的變化量大，所以運(yùn)動(dòng)圖像在幀2處停止。此后， 用戶利用顯示單元21檢查圖像的幀，同時(shí)從幀2開始向顯示屏幕一 次傳送一個(gè)幀，并使用操作單元28在所期望的幀指定打印。這里， 例如，指定幀3來進(jìn)行打印。
一旦指定了打印，從指定的運(yùn)動(dòng)圖像幀開始，檢查之前運(yùn)動(dòng)圖像 幀的相關(guān)性標(biāo)記，以查找連續(xù)相關(guān)幀的第一幀編號(相關(guān)開始幀)(步 驟S22)。這里，首先，確認(rèn)指定幀的相關(guān)性標(biāo)記是否是Y。如果相 關(guān)性標(biāo)記是N，那么確定指定的幀是相關(guān)開始幀。相反，如果標(biāo)記是 Y,那么檢查指定幀之前的幀的相關(guān)性標(biāo)記。如果該之前的幀的相關(guān) 性標(biāo)記是N，那么確定該之前的幀是相關(guān)開始幀。相反，如果該之前 的幀的相關(guān)性標(biāo)記是Y ，那么檢查指定幀兩幀之前的幀的相關(guān)性標(biāo)記。 重復(fù)此相關(guān)性標(biāo)記確認(rèn)操作，直到到達(dá)其相關(guān)性標(biāo)記是N的幀，并且 確定其相關(guān)性標(biāo)記是N的幀是相關(guān)開始幀。然后，存儲(chǔ)相關(guān)開始幀(步 驟S23)。在圖6所示的示例中，幀2被存儲(chǔ)作為相關(guān)開始幀。
隨后，從指定的運(yùn)動(dòng)圖像，連續(xù)地檢查下列運(yùn)動(dòng)圖像幀的相關(guān)性 標(biāo)記，以查找連續(xù)相關(guān)幀的最后一個(gè)幀編號(相關(guān)結(jié)束幀X步驟S24)。 這里，首先，確認(rèn)指定幀之后的幀的相關(guān)性標(biāo)記是否是Y。如果相關(guān) 性標(biāo)記是N,那么，確定指定幀是相關(guān)結(jié)束幀。相反，如果標(biāo)記是Y， 那么，檢查指定幀兩幀之后的幀的相關(guān)性標(biāo)記。如果指定幀兩幀之后 的幀的相關(guān)性標(biāo)記是N,那么，確定指定幀之后的幀是相關(guān)結(jié)束幀。
相反，如果指定幀兩幀之后的幀的相關(guān)性標(biāo)記是Y,那么，檢查指定 幀三幀之后的幀的相關(guān)性標(biāo)記。重復(fù)此相關(guān)性標(biāo)記確認(rèn)操作，直到到 達(dá)其相關(guān)性標(biāo)記是N的幀，此時(shí)，確定其相關(guān)性標(biāo)記是N的幀之前 的幀是相關(guān)結(jié)束幀。那么，存儲(chǔ)相關(guān)結(jié)束幀(步驟S25)。在如圖6 所示的示例中，幀5作為相關(guān)結(jié)束幀存儲(chǔ)。
通過上文所描述的過程，可以獲得與在步驟S21中指定用于打印 的運(yùn)動(dòng)圖像幀具有高相關(guān)性的幀的范圍。在圖6所示的示例中，對于 指定用于打印的幀3，獲得幀2-5作為相關(guān)性高的幀。
隨后，在步驟S26中，合成上文所描述的檢測到的范圍(在圖6 中的示例中，幀2-5)內(nèi)的所有幀的圖像數(shù)據(jù)，使得能夠生成用于打 印所需運(yùn)動(dòng)圖像幀的靜止圖像。
圖7是示出通過合成圖6所示的高相關(guān)性的多個(gè)運(yùn)動(dòng)圖像幀(幀 2-5)所產(chǎn)生的用于打印的靜止圖像示例的示圖。運(yùn)動(dòng)圖像信號是以幀 周期重復(fù)相似圖像信息的信號，并且?guī)g的相關(guān)性極其強(qiáng)。相反， 對于圖像信號中包括的噪聲分量沒有相關(guān)性。結(jié)果，作為合成的圖像， 例如，當(dāng)以幀為單位對圖像信號進(jìn)行時(shí)間平均時(shí)，在信號分量基本上 保持原狀的同時(shí)只有噪聲分量減小，由此使得噪聲能夠減少。
圖像感測設(shè)備l通過通信接口25將以此方式生成的用于打印的 靜止圖像傳送到打印設(shè)備3。在打印設(shè)備3中，打印通過通信接口 I/F 37接收到的用于打印的靜止圖像。
如此，如上文所描述的，根據(jù)本發(fā)明第一實(shí)施例，由于在記錄運(yùn) 動(dòng)圖像期間將表示相關(guān)性的信息連同幀的圖像數(shù)據(jù)一起記錄，所以當(dāng) 進(jìn)行打印時(shí)，可以快速地提取相關(guān)的幀。此外，合成提取的幀的圖像 數(shù)據(jù)，以生成用于打印的靜止圖像，以高質(zhì)量地快速地打印運(yùn)動(dòng)圖像 場景。
(第一實(shí)施例的變型例)
雖然在上面所描述的第一實(shí)施例中，描述了在圖像感測設(shè)備1 處生成用于打印的靜止圖像數(shù)據(jù)，但是，另選地，可以在打印設(shè)備3 處生成用于打印的這樣的靜止圖像數(shù)據(jù)。在這樣的情況下，可以由打
印設(shè)備3執(zhí)行參考圖3描述的處理。
此外，參考圖3描述的處理可以在圖像感測設(shè)備1和打印設(shè)備3 之間分配。例如，在圖像感測設(shè)備l處，由用戶指定用于打印的幀可 以作為管理文件保持在記錄介質(zhì)29上，打印設(shè)備3基于該管理文件 生成用于打印的靜止圖像。
圖8是示出記錄在記錄介質(zhì)29上的管理文件的結(jié)構(gòu)示例的示圖。 可以對于單個(gè)文件"運(yùn)動(dòng)圖像文件A"記錄多個(gè)被指定用于打印的幀。 這樣做，使得能夠在執(zhí)行單個(gè)打印時(shí)指定用于打印的多個(gè)用于打印的 幀。此外，如圖8所示，可以向管理文件添加相關(guān)性標(biāo)記信息。在這 樣的情況下，因?yàn)橄嚓P(guān)性標(biāo)記不需要嵌入在運(yùn)動(dòng)圖像文件中，因此， 它具有易于安裝的優(yōu)點(diǎn)。
此夕卜，也可以由圖像感測設(shè)備1和打印設(shè)備3之外的圖像處理設(shè) 備執(zhí)行參考圖3所描述的處理。圖9示出這樣的系統(tǒng)配置的示例。
在圖9中，在圖像感測設(shè)備l和打印設(shè)備3之間插入圖像處理設(shè) 備的處理不同于圖1所示的系統(tǒng)的配置。在此配置中，通過記錄介質(zhì) 29或通信I/F向圖像處理設(shè)備4輸入由圖像感測設(shè)備1記錄的運(yùn)動(dòng)圖 像文件，由圖像處理設(shè)備4執(zhí)行圖3所示的處理，并生成用于打印的 靜止圖像數(shù)據(jù)。然后，向打印設(shè)備3傳送用于打印的生成的靜止圖像 數(shù)據(jù)。
此外，在上文所描述的第一實(shí)施例中，在指定用于打印之后，產(chǎn) 生用于打印的靜止圖像。相反，在圖像感測設(shè)備l中，可以使用在圖 3所示的步驟S22-S26中描述的算法，與運(yùn)動(dòng)圖像感測同時(shí)產(chǎn)生用于 打印的靜止圖像，并將該用于打印的靜止圖像記錄在運(yùn)動(dòng)圖像數(shù)據(jù)中 或存儲(chǔ)介質(zhì)23中。在這樣的情況下，當(dāng)在打印設(shè)備3中指定用于打 印的給定運(yùn)動(dòng)圖像幀時(shí)，簡單地檢索和打印使用該運(yùn)動(dòng)圖像幀生成的 用于打印的靜止圖像，使得能夠縮短從打印指定到打印的時(shí)間，并提 高生產(chǎn)率。
(第二實(shí)施例)
現(xiàn)在描述本發(fā)明第二實(shí)施例。
圖IOA和圖10B是示出本發(fā)明第二實(shí)施例的系統(tǒng)的一般配置的 方框圖，主要包括圖像感測設(shè)備5(圖10A)和打印設(shè)備8(圖10B)。
在圖像感測設(shè)備5中，參考標(biāo)號51表示包括聚焦透鏡、變焦透 鏡等的透鏡，而52表示配備有光圖功能的快門(在數(shù)字視頻攝像機(jī) 的情況下，為光圏)。參考標(biāo)號53表示由CCD傳感器、CMOS傳感 器等代表的圖像感測元件。參考標(biāo)號60表示控制圖像感測設(shè)備5的 總體操作的控制器。參考標(biāo)號61表示AF處理器，該AF處理器從控 制器60接收指令，并且驅(qū)動(dòng)透鏡51的聚焦透鏡，并執(zhí)行AF處理， 參考標(biāo)號62表示AE處理器，該AE處理器從控制器60接收指令， 并且控制光圏和快門速度，并執(zhí)行AE處理。
參考標(biāo)號54是A/D轉(zhuǎn)換器，該A/D轉(zhuǎn)換器將從圖像感測元件 53輸出的模擬圖像信號轉(zhuǎn)換為數(shù)字圖像信號，55是圖像處理器，該 圖像處理器對由A/D轉(zhuǎn)換器54轉(zhuǎn)換的數(shù)字圖像信號執(zhí)行特定像素插 入處理和顏色轉(zhuǎn)換處理。參考標(biāo)號56表示格式轉(zhuǎn)換器，該格式轉(zhuǎn)換 器將由圖像處理器55處理過的圖像數(shù)據(jù)轉(zhuǎn)換為適合于進(jìn)行記錄的格 式，如MPEG或JPEG等。參考標(biāo)號58表示具有用于臨時(shí)存儲(chǔ)圖像 數(shù)據(jù)的緩沖功能的存儲(chǔ)器，57表示圖像記錄單元，該圖像記錄單元將 由格式轉(zhuǎn)換器56進(jìn)行了格式轉(zhuǎn)換的圖像數(shù)據(jù)記錄在緩沖區(qū)58中。
參考標(biāo)號63表示閃光單元，64表示EF (Electric Flash,電子 閃光)處理器，59表示由按鈕和開關(guān)、觸摸面板、轉(zhuǎn)盤等構(gòu)成的操作 單元。參考標(biāo)號65表示諸如LCD之類的顯示單元，66表示用于將圖 像感測設(shè)備5連接到另一個(gè)設(shè)備的外部連接器。
參考標(biāo)號67表示運(yùn)動(dòng)圖像感測條件數(shù)據(jù)產(chǎn)生單元，該單元在運(yùn) 動(dòng)圖像感測期間生成圖像感測條件數(shù)據(jù)。稍后描述圖像感測條件數(shù) 據(jù)。參考標(biāo)號72表示圖像感測條件數(shù)據(jù)傳送器單元，該單元向打印 設(shè)備8傳送圖像感測條件數(shù)據(jù)。
參考標(biāo)號68表示運(yùn)動(dòng)圖像擴(kuò)展單元，該單元擴(kuò)展臨時(shí)存儲(chǔ)在緩 沖區(qū)58中的預(yù)定格式的圖像數(shù)據(jù)，69表示打印圖像確定單元，該單 元確定要打印的圖像。參考標(biāo)號70表示圖像壓縮單元，該單元再一次壓縮由打印圖像確定單元69確定的要打印的圖像數(shù)據(jù)(靜止圖像)， 71表示將由圖像壓縮單元70壓縮的圖像數(shù)據(jù)傳送到打印設(shè)備8的圖 像傳送器。
在打印設(shè)備8中，參考標(biāo)號81和85分別表示圖像接收器和圖像 感測條件數(shù)據(jù)接收器，它們分別接收從圖像感測設(shè)備5傳送的圖像數(shù) 據(jù)和圖像感測條件數(shù)據(jù)。參考標(biāo)號82表示臨時(shí)存儲(chǔ)經(jīng)由圖像接收器 81接收的圖像數(shù)據(jù)的圖像緩沖區(qū)，而83表示圖像擴(kuò)展單元，該圖像 擴(kuò)展單元擴(kuò)展存儲(chǔ)在圖像緩沖區(qū)82中的圖像數(shù)據(jù)。參考標(biāo)號86表示 之前/之后圖像啄光值計(jì)算器，該計(jì)算器計(jì)算已經(jīng)擴(kuò)展的多個(gè)圖像數(shù)據(jù) 的啄光值。參考標(biāo)號84表示打印機(jī)校正值計(jì)算器，該計(jì)算器使用經(jīng) 由圖像感測條件數(shù)據(jù)接收器85接收的圖像感測條件數(shù)據(jù)來確定在打 印中使用的校正值，而87表示打印機(jī)圖像處理器，該打印機(jī)圖像處 理器使用確定的校正值對圖像數(shù)據(jù)執(zhí)行校正處理。參考標(biāo)號88表示 打印機(jī)控制器，該打印機(jī)控制器響應(yīng)于圖像感測設(shè)備5的控制器60 的控制，對打印機(jī)進(jìn)行控制，而89表示打印單元，該打印單元打印 由打印機(jī)圖像處理器87處理的圖像。
現(xiàn)在參考圖IOA和圖IOB，描述圖像感測設(shè)備5中的運(yùn)動(dòng)圖像 感測期間的處理。
當(dāng)用戶首先使用操作單元59指示運(yùn)動(dòng)圖像感測時(shí)，控制器60 分別向AF處理器61和AE處理器62發(fā)出AF和AE處理指令，移動(dòng) 透鏡51和配備有光圏功能的快門52,并執(zhí)行適當(dāng)?shù)腁F和AE處理。 通過透鏡51和快門52入射的光撞擊圖像感測元件53并被轉(zhuǎn)換為模 擬圖像信號，進(jìn)一步被A/D轉(zhuǎn)換器54轉(zhuǎn)換為數(shù)字圖像信號，并被向 圖像處理器55傳送。以預(yù)定周期重復(fù)前面的處理，直到從操作單元 59輸入運(yùn)動(dòng)圖像感測結(jié)束指令。在運(yùn)動(dòng)圖像感測結(jié)束指令之后，由格 式轉(zhuǎn)換器56確定并產(chǎn)生從圖像處理器55傳送的數(shù)據(jù)的格式，并且圖 像記錄單元57將圖像文件保存在緩沖區(qū)58中。
此外，與運(yùn)動(dòng)圖像數(shù)據(jù)一起，還保存運(yùn)動(dòng)圖像感測期間的圖像感 測條件數(shù)據(jù)。此外，作為產(chǎn)生縮略圖文件(獨(dú)立于圖像文件保存)，
描述第二實(shí)施例。由運(yùn)動(dòng)圖像感測條件數(shù)據(jù)產(chǎn)生單元67產(chǎn)生的圖像 感測條件數(shù)據(jù)被附加到縮略圖文件，并被存儲(chǔ)。
作為縮略圖文件中描述的圖像感測條件數(shù)據(jù)，例如有諸如光團(tuán)、 快門速度、ISO感光度、Bv值、膝光校正值、閃光量、圖像感測場景 信息、光度加權(quán)信息等之類的曝光條件；來自角速度傳感器的攝像機(jī) 抖動(dòng)信息；以及透鏡信息。此外，為了實(shí)現(xiàn)運(yùn)動(dòng)圖像感測，第二實(shí)施 例還提供了運(yùn)動(dòng)圖像感測期間參數(shù)隨時(shí)間的變化量的圖像感測條件 數(shù)據(jù)。例如，雖然在運(yùn)動(dòng)圖像感測期間可能發(fā)生視角變化，但是，在 這樣的情況下，還有啄光變化，而這樣的變化數(shù)據(jù)也包括在圖像感測 條件數(shù)據(jù)中。然而，因?yàn)榇嬖谶@樣的風(fēng)險(xiǎn)，即，如果要存儲(chǔ)所有幀圖 像的啄光信息，則數(shù)據(jù)量會(huì)變得非常大，所以例如，存儲(chǔ)膝光變化的 開始時(shí)間和結(jié)束時(shí)間時(shí)的光圏Av、快門速度Tv以及增益Gain。
作為圖像感測條件數(shù)據(jù)的示例，圖ll是示出亮度Bv、光團(tuán)Av、 快門速度Tv，以及增益Gain的隨著時(shí)間的變化的關(guān)系，作為以時(shí)間 序列顯示曝光變化的參數(shù)的示圖。在圖11的情況下，第一膝光變化 開始時(shí)間是tll,第一曝光變化結(jié)束時(shí)間是t13。類似地，第二曝光變 化開始時(shí)間是t14,第二曝光變化結(jié)束時(shí)間是t16。相應(yīng)地，曝光穩(wěn)定 區(qū)域是tl3-U4和tl6-tl7。此信息在運(yùn)動(dòng)圖像打印輸出期間使用。
此外，涉及視角變化和對象運(yùn)動(dòng)的變化開始時(shí)間、變化結(jié)束時(shí)間、 變化量以及矢量，也作為以時(shí)間序列顯示變化的參數(shù)來記錄。使用了 涉及視角變化的角速度傳感器和針對對象運(yùn)動(dòng)的電子防振等的使用 的技術(shù)。
此外，有關(guān)更換透鏡(像單透鏡反光式照相機(jī)中的更換透鏡)的 信息被包括在由上文所描述的運(yùn)動(dòng)圖像感測條件數(shù)據(jù)產(chǎn)生單元67產(chǎn) 生的攝像機(jī)特性數(shù)據(jù)中。除了諸如名稱/類型/設(shè)計(jì)值/變焦位置/F值等 之類的圖像感測條件之外，該透鏡信息的內(nèi)容包括，諸如環(huán)境光量損 耗數(shù)據(jù)/色差信息之類的特性數(shù)據(jù)。在可分離的更換透鏡的情況下，當(dāng) 直接連接時(shí)，透鏡本身保存的信息可以通過攝像機(jī)傳輸?shù)酱蛴C(jī)側(cè)。
諸如上文所描述的膝光變化、視角變化、對象運(yùn)動(dòng)等之類的圖像 感測條件數(shù)據(jù)被連續(xù)地記錄在縮略像中，在圖像感測結(jié)束時(shí)連同
運(yùn)動(dòng)圖像數(shù)據(jù)一起被格式轉(zhuǎn)換器56轉(zhuǎn)換，并被圖像記錄單元57記錄 在緩沖區(qū)58中。
應(yīng)該指出的是，雖然上面的示例是作為將爆光變化數(shù)據(jù)附加到縮 略圖文件(該文件單獨(dú)地附加到運(yùn)動(dòng)圖像數(shù)據(jù))描述的，但是，本發(fā) 明不限于此，運(yùn)動(dòng)圖像的每一個(gè)瞬間的曝光數(shù)據(jù)可以記錄在運(yùn)動(dòng)圖像 數(shù)據(jù)本身中。
現(xiàn)在將參照圖12和圖13，描述當(dāng)打印運(yùn)動(dòng)圖像時(shí)的處理。
圖12是示出當(dāng)對于發(fā)生了如圖ll所示的爆光變化的圖像執(zhí)行打 印指令時(shí)的時(shí)序的示圖。圖13是示出運(yùn)動(dòng)圖像打印過程的流程圖。 圖12所示的示例示出tl3-tl4之間的運(yùn)動(dòng)圖像幀(指定的圖像a)、 tl4-tl5之間的運(yùn)動(dòng)圖像幀(指定的圖像b)，以及tl6-tl7之間的運(yùn) 動(dòng)圖像幀(指定的圖像c)被指定用于打印的情況。
首先，當(dāng)用戶在顯示單元65上重放運(yùn)動(dòng)圖像文件并使用打印圖 像確定單元69從感測的圖像中指定他/她希望打印的圖像幀時(shí)，由打 印機(jī)圖像處理器87開始圖13所示的處理。
在步驟S31中，確定是否將圖像感測條件數(shù)據(jù)附加到被指定用于 打印的運(yùn)動(dòng)圖像幀中。作為圖像感測條件數(shù)據(jù)，如上文所描述的，有 諸如光圏(Av)、快門速度(Tv)、增益(Gain)等之類的膝光變化，以及視 角和對象運(yùn)動(dòng)。然而，這里，作為曝光變化，描述圖像感測條件數(shù)據(jù)。
當(dāng)沒有圖像感測條件數(shù)據(jù)時(shí)，處理轉(zhuǎn)到步驟S35，選擇被指定用 于打印的運(yùn)動(dòng)圖像幀之前和之后的運(yùn)動(dòng)圖像幀(總共三個(gè)幀)，并且 處理轉(zhuǎn)到步驟S40。
當(dāng)有圖像感測條件數(shù)據(jù)時(shí)，確定被指定用于打印的運(yùn)動(dòng)圖像幀是 否是膝光穩(wěn)定性區(qū)域幀(步驟S32)。在如圖12所示的示例中，指定 的圖像a和指定的圖像c是曝光穩(wěn)定性區(qū)域中的被指定用于打印的運(yùn) 動(dòng)圖像幀。當(dāng)在曝光穩(wěn)定性區(qū)域中沒有被指定用于打印的運(yùn)動(dòng)圖像幀 時(shí)，處理轉(zhuǎn)到步驟S36，只選擇被指定用于打印的運(yùn)動(dòng)圖像幀，并且 處理轉(zhuǎn)到步驟S40。
在步驟S32中，當(dāng)被指定用于打印的運(yùn)動(dòng)圖像幀是位于膝光穩(wěn)定 性區(qū)域中的幀時(shí)，在步驟S33中，確定快門速度(Tv)是否低于預(yù)定值 (TvTH)。 一般而言，快門速度越慢，攝像機(jī)抖動(dòng)越大，如此，如果 Tv<TvTH，則處理轉(zhuǎn)到步驟S37，選擇被指定用于打印的運(yùn)動(dòng)圖像幀 分別之前和之后三個(gè)幀(總共七個(gè)幀)，并且處理轉(zhuǎn)到步驟S40。
如果Tv^TvTH，則處理轉(zhuǎn)到步驟S34，并確定增益(Gain)是否 大于閾值(GainTH)。由于增益越大，噪聲越大，優(yōu)選情況下，增大在 稍后所描述的圖像合成中所使用的幀的數(shù)量，并去除噪聲。因此，如 果Gain>GainTH，則處理轉(zhuǎn)到步驟S39，選擇被指定用于打印的運(yùn)動(dòng) 圖像幀分別之前和之后的五個(gè)幀(總共11個(gè)幀)。如果 Gain^GainTH，在步驟S38中，選擇分別之前和之后的三個(gè)幀(總 共七個(gè)幀)，并且處理轉(zhuǎn)到步驟S40。
應(yīng)該指出的是，上文所描述的步驟S35-S39中選擇的幀的數(shù)量是 其一個(gè)示例，但是，本發(fā)明不限于這些數(shù)量的幀。此外，用于確定要 選擇的幀的數(shù)量的參數(shù)不僅是TV和Gain，另選地，可以使用光圏、 視角變化量、對象運(yùn)動(dòng)量，或圖像感測條件數(shù)據(jù)中的任何其它信息。
在步驟S40中，在步驟S35-S39中的任何一個(gè)步驟中選擇的運(yùn)動(dòng) 圖像幀中，只選擇曝光穩(wěn)定性區(qū)域中的圖像，并且在步驟S41中，通 過平均進(jìn)行合成。然后，經(jīng)由圖像傳送器71傳送合成的圖像數(shù)據(jù)， 并經(jīng)由圖像感測條件數(shù)據(jù)傳送器單元72向打印設(shè)備8傳送圖像感測 條件數(shù)據(jù)(步驟S42)。應(yīng)該指出的是，打印設(shè)備8分別通過圖像接 收器81和圖像感測條件數(shù)據(jù)接收器85接收傳送的圖像數(shù)據(jù)和圖像感 測條件數(shù)據(jù)，并進(jìn)行打印。
此外，在一次性地全部指定所指定的圖像a-c (多個(gè)圖像)的情 況下， 一次只保留指定的幀圖像的時(shí)間，然后，在打印處理期間一次 性地全部進(jìn)行處理。當(dāng)指定時(shí)間時(shí)，由圖像記錄單元57調(diào)用重放運(yùn) 動(dòng)圖像文件的縮略像，從記錄的圖像感測條件數(shù)據(jù)中使要打印的 指定的圖像a-c的曝光變化信息和指定的時(shí)間相關(guān)，確定要在合成中 使用的圖像(幀)的數(shù)量。
(變型例)
在上文所描述的第二實(shí)施例中，描述了這樣的情況 一旦在圖4 所示的步驟S35-S40中確定要傳送到打印設(shè)備8的幀，在圖像感測設(shè) 備5側(cè)合成相關(guān)的運(yùn)動(dòng)圖像幀，并將用于打印的合成的靜止圖像傳送 到打印設(shè)備8。
然而，可以在打印設(shè)備8中執(zhí)行合成確定的運(yùn)動(dòng)圖像幀的過程， 在這種情況下，要被傳送到在圖5所示的步驟S35-S40中確定的打印 設(shè)備8的幀被按原樣傳送到打印設(shè)備8并且在那里執(zhí)行合成過程。
雖然在上文所描述的第二實(shí)施例中，當(dāng)攝像機(jī)和打印機(jī)彼此直接 連接時(shí)，由用戶設(shè)置圖像校正處理，但是在PC和打印機(jī)之間存在連 接的配置也在本發(fā)明的范圍內(nèi)。
(其它實(shí)施例)
也可以按如下方式實(shí)現(xiàn)本發(fā)明的目的。首先，將在其上面記錄有 實(shí)現(xiàn)上文所描述的實(shí)施例的功能的軟件程序代碼的存儲(chǔ)介質(zhì)(或記錄 介質(zhì))提供到系統(tǒng)或設(shè)備。然后，系統(tǒng)或設(shè)備的計(jì)算機(jī)(或CPU、 MPU等)讀取并執(zhí)行存儲(chǔ)在存儲(chǔ)介質(zhì)上的程序代碼。在此情況下，
并且存儲(chǔ)程序代碼的存儲(chǔ)介質(zhì)構(gòu)成了本發(fā)明。
除了通過由計(jì)算機(jī)執(zhí)行讀取的程序來實(shí)現(xiàn)根據(jù)實(shí)施例的如前所 述的功能的情況，在計(jì)算機(jī)上運(yùn)行的操作系統(tǒng)(OS)等可以執(zhí)行實(shí)際處 理的全部或一部分，以便可以通過此處理實(shí)現(xiàn)前述實(shí)施例的功能。可 以用于提供程序代碼的存儲(chǔ)介質(zhì)的示例有軟盤、硬盤、ROM 、 RAM、 磁帶、非易失性存儲(chǔ)卡、CD-ROM、 CD-R、 DVD、光盤、磁光盤以 及MO。此外，諸如LAN (局域網(wǎng))或WAN (廣域網(wǎng))之類的計(jì)算 機(jī)網(wǎng)絡(luò)可以用于提供程序代碼。
本發(fā)明不限于上文所描述的實(shí)施例，可以在不偏離本發(fā)明的精神 和范圍的情況下，對本發(fā)明進(jìn)行許多修改和變型。因此，為了公開本 發(fā)明的范圍，附加以下權(quán)利要求。
本申請要求于2006年6月26日提出的日本專利申請No. 2006-175786的優(yōu)先權(quán)，通過引用將該申請全部并入本文
權(quán)利要求
1.一種能夠感測運(yùn)動(dòng)圖像的圖像感測設(shè)備，包括存儲(chǔ)單元，存儲(chǔ)在運(yùn)動(dòng)圖像的圖像感測期間感測的運(yùn)動(dòng)圖像的圖像數(shù)據(jù)，并且存儲(chǔ)所述運(yùn)動(dòng)圖像的圖像感測條件數(shù)據(jù)；選擇單元，從存儲(chǔ)在所述存儲(chǔ)單元中的構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打印的幀；合成單元，合成構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)并生成用于打印的圖像數(shù)據(jù)；以及確定單元，基于由所述選擇單元選擇的幀的圖像感測條件，確定要合成的幀的數(shù)量，所述合成單元合成所選擇的幀的圖像數(shù)據(jù)和所選擇的幀之前和之后感測的由所述確定單元確定的所述數(shù)量的幀的圖像數(shù)據(jù)。
2. 根據(jù)權(quán)利要求1所述的圖像感測設(shè)備，其中，所述圖像感測條 件數(shù)據(jù)包括以下中的至少一個(gè)光圏值、快門速度、感光度、亮度值、 視角變化發(fā)生時(shí)間和視角變化量、以及對象運(yùn)動(dòng)發(fā)生時(shí)間和對象運(yùn)動(dòng) 量。
3. 根據(jù)權(quán)利要求1或2所述的圖像感測設(shè)備，其中，所述存儲(chǔ)單 元將所述圖像感測條件數(shù)據(jù)附加到運(yùn)動(dòng)圖像的圖像數(shù)據(jù)。
4. 根據(jù)權(quán)利要求1或2所述的圖像感測設(shè)備，其中，所述存儲(chǔ)單 元將所述圖像感測條件數(shù)據(jù)作為與運(yùn)動(dòng)圖像的圖像數(shù)據(jù)獨(dú)立的文件 存儲(chǔ)。
5. 根據(jù)權(quán)利要求1到4中的任何一個(gè)權(quán)利要求所述的圖像感測設(shè) 備，其中，在所選擇的幀的圖像感測條件不同于所選擇的幀之前和之 后的幀的圖像感測條件的情況下，所述確定單元將要合成的圖像的數(shù) 量設(shè)為0。
6. —種圖像處理設(shè)備，包括輸入單元，輸入構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和所述運(yùn)動(dòng)圖 像的圖像感測條件數(shù)據(jù)； 選擇單元，從所輸入的多個(gè)幀中選擇用于打印的幀； 合成單元，合成構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)并生成用于打印的圖像數(shù)據(jù)；以及確定單元，基于由所述選擇單元選擇的幀的圖像感測條件，確定要合成的幀的數(shù)量，之后感測的由所述確定單元確定的所述數(shù)量的幀的圖像數(shù)據(jù)。
7. —種打印設(shè)備，包括輸入單元，輸入構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和所述運(yùn)動(dòng)圖像的圖像感測條件數(shù)據(jù)；選擇單元，從所輸入的多個(gè)幀中選擇用于打印的幀； 合成單元，合成構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)并生成用于打印的圖像數(shù)據(jù)；確定單元，基于由所述選擇單元選擇的幀的圖像感測條件，確定要合成的幀的數(shù)量；以及打印單元，打印由所述合成單元合成的用于打印的圖像數(shù)據(jù)， 所述合成單元合成所選擇的幀的圖像數(shù)據(jù)和所選擇的幀之前和之后感測的由所述確定單元確定的所述數(shù)量的幀的圖像數(shù)據(jù)。
8. —種能夠感測運(yùn)動(dòng)圖像的圖像感測設(shè)備，包括 圖像感測單元，感測運(yùn)動(dòng)圖像；以及記錄單元，將由所述圖像感測單元新獲取的幀的圖像數(shù)據(jù)與所述 新獲取的幀緊前面感測的幀的圖像數(shù)據(jù)之間的相關(guān)性連同所述新獲 取的幀的圖像數(shù)據(jù)一起記錄在記錄介質(zhì)上。
9. 根據(jù)權(quán)利要求8所述的圖像感測設(shè)備，進(jìn)一步包括生成單元， 所述生成單元基于所述相關(guān)性生成表示互相關(guān)的幀的信息，其中，所述記錄單元將所生成的表示互相關(guān)的幀的信息記錄在所 述t己錄介質(zhì)上。
10. 根據(jù)權(quán)利要求8或9所述的圖像感測設(shè)備，進(jìn)一步包括合成 單元，所述合成單元基于所述相關(guān)性合成互相關(guān)的幀的圖像數(shù)據(jù)，并 生成合成的圖像數(shù)據(jù)，其中，所述記錄單元將所述合成的圖像數(shù)據(jù)記錄在所述記錄介質(zhì)上。
11. 根據(jù)權(quán)利要求8到10中的任何一個(gè)所述的圖像感測設(shè)備，進(jìn) 一步包括選擇單元，從構(gòu)成記錄在所述記錄介質(zhì)上的運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)中選擇要打印的幀；提取單元，基于所述相關(guān)性，提取與所選擇的幀具有相關(guān)性的幀； 合成單元，合成所選擇的幀的圖像數(shù)據(jù)和由所述提取單元提取的幀的圖像數(shù)據(jù)，并生成合成的圖像；以及輸出單元，將由所述合成單元合成的用于打印的圖像數(shù)據(jù)輸出到打印設(shè)備。
12. —種圖像處理設(shè)備，包括輸入單元，輸入構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和所述多個(gè)幀 的圖像數(shù)據(jù)之間的相關(guān)性；選擇單元，從所輸入的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打印的幀；提取單元，基于所述相關(guān)性，提取與所選擇的幀具有相關(guān)性的另 一個(gè)幀；合成單元，合成所選擇的幀的圖像數(shù)據(jù)和由所述提取單元提取的 幀的圖像數(shù)據(jù)，并生成用于打印的圖像數(shù)據(jù)；以及輸出單元，將由所述合成單元合成的用于打印的圖像數(shù)據(jù)輸出到 打印設(shè)備。
13. —種打印設(shè)備，包括輸入單元，輸入構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和所述多個(gè)幀的圖像數(shù)據(jù)之間的相關(guān)性；選擇單元，從所輸入的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打印的幀； 提取單元，基于所述相關(guān)性，提取與所選擇的幀具有相關(guān)性的另一個(gè)幀；合成單元，合成所選擇的幀的圖像數(shù)據(jù)和由所述提取單元提取的幀的圖像數(shù)據(jù)，并生成用于打印的圖像數(shù)據(jù)；以及打印單元，打印由所述合成單元合成的用于打印的圖像數(shù)據(jù)。
14. 一種打印數(shù)據(jù)生成方法，包括獲取步驟，獲取構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和所述運(yùn)動(dòng)圖 像的圖像感測條件數(shù)據(jù)；選擇步驟，從所獲取的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打印的幀；合成步驟，合成構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)并生成用于打 印的圖像數(shù)據(jù)；以及確定步驟，基于在所述選擇步驟中選擇的幀的圖像感測條件，確 定要在所述合成步驟中合成的幀的數(shù)量，所述合成步驟合成所選擇的幀的圖像數(shù)據(jù)和所述幀之前和之后 感測的由所述確定裝置確定的所述數(shù)量的幀的圖像數(shù)據(jù)。
15. 根據(jù)權(quán)利要求14所述的打印數(shù)據(jù)生成方法，其中，由打印設(shè) 備打印在所述合成步驟中合成的用于打印的圖像數(shù)據(jù)。
16. —種能夠感測運(yùn)動(dòng)圖像的圖像感測設(shè)備的控制方法，包括 圖像感測步驟，利用圖像感測單元感測運(yùn)動(dòng)圖像；以及記錄步驟，將在所述圖像感測步驟中新獲取的幀的圖像數(shù)據(jù)與所 述新獲取的幀緊前面感測的幀的圖像數(shù)據(jù)之間的相關(guān)性連同所述新 獲取的幀的圖像數(shù)據(jù)一起記錄在記錄介質(zhì)上。
17. 根據(jù)權(quán)利要求16所述的控制方法，進(jìn)一步包括生成步驟，所 述生成步驟基于所述相關(guān)性生成表示互相關(guān)的幀的信息，其中，所述記錄步驟將所生成的表示互相關(guān)的幀的信息記錄在所 述記錄介質(zhì)上。
18. 根據(jù)權(quán)利要求16或17所述的控制方法，進(jìn)一步包括合成步 驟，所述合成步驟基于所述相關(guān)性合成互相關(guān)的幀的圖像數(shù)據(jù)，并生 成合成的圖像數(shù)據(jù)，其中，所述記錄步驟將所述合成的圖像數(shù)據(jù)記錄在所述記錄介質(zhì)上。
19. 一種打印數(shù)據(jù)生成方法，包括 獲取步驟，獲取構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和涉及所述多個(gè)幀的圖像數(shù)據(jù)之間的相關(guān)性的信息；選擇步驟，從所獲取的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打印的幀； 提取步驟，基于所述相關(guān)性，提取與所選擇的幀具有相關(guān)性的另一個(gè)幀；合成步驟，合成所選擇的幀的圖像數(shù)據(jù)和在所述提取步驟中提取 的幀的圖像數(shù)據(jù)，并生成用于打印的圖像數(shù)據(jù)；以及輸出步驟，將在所述合成步驟中合成的用于打印的圖像數(shù)據(jù)輸出 到打印單元。
20. 根據(jù)權(quán)利要求19所述的打印數(shù)據(jù)生成方法，其中，由打印設(shè) 備打印在所述合成步驟中合成的用于打印的圖像數(shù)據(jù)。
21. —種計(jì)算機(jī)可執(zhí)行程序，用于使執(zhí)行所述程序的計(jì)算機(jī)充當(dāng) 根據(jù)權(quán)利要求6或權(quán)利要求12所述的圖像處理設(shè)備。
22. —種程序，用于使計(jì)算機(jī)執(zhí)行根據(jù)權(quán)利要求16到18中的任 何一個(gè)所述的控制方法的步驟。
23. —種程序，用于使計(jì)算機(jī)執(zhí)行根據(jù)權(quán)利要求14、 15、 19和20 中的任何一個(gè)所述的打印數(shù)據(jù)生成方法的步驟。
24. —種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，存儲(chǔ)根據(jù)權(quán)利要求21到23中的 任何一個(gè)所述的程序。
全文摘要
在能夠感測運(yùn)動(dòng)圖像的圖像感測設(shè)備中，存儲(chǔ)當(dāng)感測運(yùn)動(dòng)圖像時(shí)感測的運(yùn)動(dòng)圖像的圖像數(shù)據(jù)和該運(yùn)動(dòng)圖像的圖像感測條件數(shù)據(jù)，從構(gòu)成存儲(chǔ)的運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打印的幀，并且基于所選擇的幀的圖像感測條件，確定要合成的幀的數(shù)量。在構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)中，選擇的幀的圖像數(shù)據(jù)以及選擇的幀之前和之后感測的所確定數(shù)量的幀的圖像數(shù)據(jù)被合成，以生成用于打印的圖像數(shù)據(jù)。
文檔編號H04N5/76GK101356805SQ20078000133
公開日2009年1月28日 申請日期2007年6月13日 優(yōu)先權(quán)日2006年6月26日
發(fā)明者宮崎康嘉, 高木淳 申請人:佳能株式會(huì)社