圖像處理系統(tǒng)和圖像處理方法
【專利摘要】本發(fā)明提供能夠獲取反映了拍攝者意圖的動態(tài)圖像的圖像處理系統(tǒng)和圖像處理方法。圖像處理系統(tǒng)(600)具有:動態(tài)圖像獲取部(12),其獲取動態(tài)圖像并生成幀圖像;操作受理部(15),其在所述動態(tài)圖像獲取部進行的所述動態(tài)圖像的拍攝過程中受理來自操作者的操作;指定部(14),其獲取由所述操作受理部受理所述操作的時間信息,根據(jù)所述時間信息,指定包含在由所述操作受理部受理所述操作的期間內(nèi)由所述動態(tài)圖像獲取部生成的幀圖像在內(nèi)的至少一個以上的幀圖像作為指定幀;以及動態(tài)圖像處理部(13),其在將由所述動態(tài)圖像獲取部生成的幀圖像中的、與所述指定幀隔開規(guī)定時間的幀圖像作為非指定幀時,對所述非指定幀進行使所述非指定幀相對于所述指定幀變得不明顯的圖像處理。
【專利說明】圖像處理系統(tǒng)和圖像處理方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及進行動態(tài)圖像的圖像處理的圖像處理系統(tǒng)。
【背景技術(shù)】
[0002]以往,在進行動態(tài)圖像再現(xiàn)的裝置中,提出了使用被攝體識別等判別重要的幀和除此之外的幀從而減輕數(shù)據(jù)的裝置(例如專利文獻1、專利文獻2)。
[0003]另一方面,還提出了如下的拍攝裝置:利用能夠在拍攝時變更幀率的成像設備,根據(jù)拍攝定時對所述成像設備的操作方法(幀率)進行變更(例如專利文獻3、專利文獻4)。
[0004]【專利文獻1】日本特開2006-109119號公報
[0005]【專利文獻2】日本特開2011-193300號公報
[0006]【專利文獻3】日本特開2010-88050號公報
[0007]【專利文獻4】日本特開2010-88049號公報
[0008]利用專利文獻1、2中所提出的技術(shù),在拍攝后,能夠根據(jù)該圖像的特征或關(guān)鍵字進行動態(tài)圖像的編集。在拍攝者自身進行動態(tài)圖像的編集的情況下,容易進行在某種程度上反映了拍攝者意圖的編集,但是,在非拍攝者的人進行編集的情況下,不容易進行符合拍攝者意圖的編集。
[0009]另一方面,在專利文獻3、4中所提出的技術(shù)中,由于能夠?qū)崟r進行拍攝和動態(tài)圖像的畫質(zhì)變更=幀率變更,所以,能夠?qū)討B(tài)圖像附加反映了拍攝者意圖的效果。但是,成像器的幀率是在拍攝開始時的設定中決定的,此后無法變更,靈活性較差。
【發(fā)明內(nèi)容】
[0010]鑒于上述課題,本申請發(fā)明的目的在于,提供能夠獲取反映了拍攝者意圖的動態(tài)圖像的圖像處理系統(tǒng)。
[0011]為了實現(xiàn)上述目的,圖像處理系統(tǒng)具有:動態(tài)圖像獲取部,其獲取動態(tài)圖像并生成幀圖像;操作受理部,其在所述動態(tài)圖像獲取部獲取所述動態(tài)圖像時受理來自操作者的操作;指定部,其獲取由所述操作受理部受理所述操作的時間信息,根據(jù)所述時間信息,指定包含在由所述操作受理部受理所述操作的期間內(nèi)由所述動態(tài)圖像獲取部生成的幀圖像在內(nèi)的至少一個以上的幀圖像作為指定幀;以及動態(tài)圖像處理部,在將由所述動態(tài)圖像獲取部生成的幀圖像中的、與所述指定幀隔開規(guī)定時間的幀圖像作為非指定幀時,所述動態(tài)圖像處理部對所述非指定幀進行使所述非指定幀相對于所述指定幀變得不明顯的圖像處理。
[0012]由此,由于進行相對強調(diào)了通過拍攝者的操作而指定的幀圖像的圖像處理,所以,能夠獲取反映了拍攝者意圖的動態(tài)圖像。
[0013]根據(jù)本發(fā)明,能夠提供能夠獲取反映了拍攝者意圖的動態(tài)圖像的圖像處理系統(tǒng)。
【專利附圖】
【附圖說明】
[0014]圖1是應用了本實施方式的圖像處理系統(tǒng)600中包含的圖像處理裝置I的框圖。[0015]圖2是說明圖像處理裝置I的處理步驟的流程圖。
[0016]圖3是說明圖像處理裝置I的其他處理步驟的流程圖。
[0017]圖4是圖像處理裝置2的框圖。
[0018]圖5是示出由圖像處理裝置2進行的圖像處理的區(qū)間的圖。
[0019]圖6是圖像處理裝置3的框圖。
[0020]圖7是說明圖像處理裝置3的處理步驟的流程圖。
[0021]圖8是說明圖像處理裝置3的其他處理步驟的流程圖。
[0022]圖9是圖像處理裝置4的框圖。
[0023]圖10是示出對比度降低處理的例子的圖。
[0024]圖11是示出彩度降低處理的例子的圖。
[0025]圖12是說明第2實施方式的處理步驟的流程圖。
[0026]圖13是示出第2實施方式的亮度降低處理的范圍(區(qū)間)的圖。
[0027]圖14是說明第3實施方式的處理步驟的流程圖。
[0028]圖15是示意地示出第4實施方式的幀率轉(zhuǎn)換(插值處理)的過程的圖。
[0029]圖16是說明第4實施方式的幀間的濾波處理的圖。
[0030]標號說明
[0031]1、2、3、4:圖像處理裝直;12:動態(tài)圖像猶取部;13:動態(tài)圖像處理部;14:指定部;15:操作受理部;20:圖像獲取部;30:圖像處理部;41:記錄部A ;42:記錄部B ;43:記錄部C ;50、51:用戶接口 ;60:控制部;62:存儲器;64:輸出端子;66:顯示部;70:外部處理裝置;201:攝像鏡頭;202:攝像部;301:幀存儲器;304:靜態(tài)圖像處理部;501 =REC按鈕;502:指定按鈕;503:釋放按鈕;600:圖像處理系統(tǒng)。
【具體實施方式】
[0032]下面,根據(jù)附圖對本發(fā)明的實施方式進行說明。
[0033](第I實施方式)(第I結(jié)構(gòu))
[0034]圖1是應用了本實施方式的圖像處理系統(tǒng)600中包含的圖像處理裝置的第I結(jié)構(gòu)的框圖。將圖像處理裝置的第I結(jié)構(gòu)表示為圖像處理裝置I。第I結(jié)構(gòu)是用于實現(xiàn)第I實施方式的最小結(jié)構(gòu)。
[0035]圖像處理裝置I具有動態(tài)圖像獲取部12、動態(tài)圖像處理部13、指定部14、操作受理部15。在包含圖1在內(nèi)的以后的框圖中,用粗線示出圖像數(shù)據(jù)流,用虛線示出控制信號流,用細線示出用于對指定幀進行指定的數(shù)據(jù)流。
[0036]動態(tài)圖像獲取部12獲取動態(tài)圖像并生成幀圖像。動態(tài)圖像獲取部12本身可以是動態(tài)圖像拍攝部,也可以獲取從其他設備提供的動態(tài)圖像。
[0037]操作受理部15在動態(tài)圖像獲取部12獲取動態(tài)圖像的過程中,受理來自圖像處理系統(tǒng)600的操作者的操作。操作受理部15例如是開關(guān)。作為開關(guān)的形式,可以是所謂的瞬時類型,也可以是能夠保持第I位置和第2位置這兩個狀態(tài)的按壓類型的2級式開關(guān)或機械式滑動開關(guān)。此外,還可以是觸摸面板。
[0038]此外,操作受理部15只要檢測操作者進行操作的意向即可,例如可以是檢測操作者的腦波的裝置、檢測操作者的動作的所謂的動作捕獲裝置。[0039]指定部14獲取由操作受理部15受理操作的時間信息,根據(jù)時間信息,指定包含在由操作受理部15受理操作的期間內(nèi)由動態(tài)圖像獲取部12生成的幀圖像在內(nèi)的至少一個以上的幀圖像作為指定幀。
[0040]動態(tài)圖像處理部13將由動態(tài)圖像獲取部12生成的幀圖像中的、與指定幀隔開規(guī)定時間或規(guī)定幀數(shù)的幀圖像中的至少一部分作為非指定幀,對非指定幀進行使非指定幀相對于指定幀變得相對不明顯的圖像處理(以下稱為低畫質(zhì)化處理或降低處理)。
[0041]作為非指定幀,是屬于與指定幀隔開規(guī)定時間(或規(guī)定幀數(shù))的一定范圍的多個幀圖像,但是,也可以是單一的幀圖像。并且,將從指定幀起的規(guī)定時間(或規(guī)定幀數(shù))以內(nèi)的范圍、即指定幀附近的范圍作為指定區(qū)間。并且,將非指定幀所屬的區(qū)間稱為非指定區(qū)間,非指定區(qū)間是與指定幀隔開規(guī)定時間(或規(guī)定幀數(shù))的一定范圍即指定區(qū)間的外側(cè)的范圍。
[0042]作為要降低的圖像處理的種類,動態(tài)圖像處理部13實施亮度/顏色/對比度等各種圖像處理。而且,動態(tài)圖像處理部13對屬于非指定區(qū)間的幀圖像進行降低處理,相對地強調(diào)包含指定幀的圖像(屬于指定區(qū)間的圖像)并進行顯示。動態(tài)圖像處理部13也可以不僅對非指定區(qū)間的圖像進行降低處理,而還對指定區(qū)間的圖像進行強調(diào)處理。將降低處理和強調(diào)處理統(tǒng)稱為降低等處理。
[0043]圖2是說明圖像處理裝置I的處理步驟的流程圖。判斷動態(tài)圖像獲取部12是否開始獲取動態(tài)圖像(步驟S100)。在動態(tài)圖像獲取部12例如為動態(tài)圖像拍攝部的情況下,動態(tài)圖像獲取部12根據(jù)操作者對未圖示的拍攝指示按鈕的操作而開始獲取動態(tài)圖像。
[0044]在動態(tài)圖像獲取部12未開始獲取動態(tài)圖像的情況下(步驟SlOO:否),在開始獲取動態(tài)圖像之前循環(huán)進行步驟S100。在動態(tài)圖像獲取部12開始獲取動態(tài)圖像的情況下(步驟SlOO:是), 指定部14判斷是否在操作受理部15中進行了操作(步驟S102)。
[0045]指定部14在判斷為未在操作受理部15中進行了操作的情況下(步驟S102:否),循環(huán)進行步驟S102。指定部14在判斷為在操作受理部15中進行了操作的情況下(步驟S102:是),指定與進行該操作的時刻對應的幀圖像。指定部14對從動態(tài)圖像獲取部12輸出的幀編號或時間信息與操作受理部15中的操作時刻進行對比,指定與進行操作的時刻對應的幀圖像(步驟S104)。
[0046]作為已指定的幀圖像(指定幀,以下表示為F[b] ) (D102),指定部14將F[b]的信息輸出到動態(tài)圖像處理部13。這里,F(xiàn)[b]的b為整數(shù),表示幀的編號。另外,下面,將由操作者對操作受理部15進行操作的場景稱為指定場景。
[0047]將指定區(qū)間的長度(期間)設為Thl、非指定區(qū)間的長度(期間)設為Th2,ThU Th2例如由幀圖像數(shù)(例如200幀)表示。Thl、Th2的值存儲在動態(tài)圖像處理部13中。關(guān)于Thl、Th2的值,可以缺省預先確定,也可以由操作者任意設定。
[0048]在F[b]以后獲取的幀圖像F[b+i] (i=l、2…、i為整數(shù))中,動態(tài)圖像處理部13對屬于F[b+Thl]~F[b+Thl+Th2]之間(非指定區(qū)間)的幀圖像進行降低處理,以相對地強調(diào)F[b]~F[b+Thl]之間(指定區(qū)間)的幀圖像(步驟S106)。
[0049]例如,當設為Thl相當于等于2秒、Th2相當于等于4秒時,動態(tài)圖像處理部13對操作后2秒~6秒這4秒期間的動態(tài)圖像進行降低處理,以強調(diào)操作受理部15的操作后2秒期間的動態(tài)圖像。
[0050]作為降低處理的種類,如上所述,例如為對比度降低、亮度降低、彩度降低、銳度降低等。進而,在本實施方式中,還將僅降低非指定區(qū)間的分辨率的處理、對幀圖像進行間隔剔除而生成快進圖像的處理、增加噪聲的處理作為降低處理之一。并且,也可以將這些處理中的多個進行組合。
[0051]圖3是說明圖像處理裝置I的其他處理步驟的流程圖。在圖3中,動態(tài)圖像處理部13對操作受理部15進行受理操作之前的幀圖像進行降低處理,對受理操作后的指定區(qū)間的幀圖像進行通常或強調(diào)處理。進而,動態(tài)圖像處理部13對指定區(qū)間后的非指定區(qū)間的幀圖像進行降低處理。
[0052]判斷動態(tài)圖像獲取部12是否開始獲取動態(tài)圖像(步驟S110)。通過操作者對上述拍攝指示按鈕等進行操作,動態(tài)圖像獲取部12開始獲取動態(tài)圖像。
[0053]在動態(tài)圖像獲取部12未開始獲取動態(tài)圖像的情況下(步驟SllO:否),循環(huán)進行步驟S110。在動態(tài)圖像獲取部12開始獲取動態(tài)圖像的情況下(步驟SllO:是),指定部14判斷是否在操作受理部15中進行了操作(步驟S112)。
[0054]指定部14在判斷為未在操作受理部15中進行了操作的情況下(步驟S112:否),動態(tài)圖像處理部13對所獲取的幀圖像實施降低處理(步驟S114)。即,如果降低處理的種類為對比度,則動態(tài)圖像處理部13對所獲取的幀圖像進行對比度降低處理,直到在操作受理部15中進行了操作為止。
[0055]指定部14在判斷為在操作受理部15中進行了操作的情況下(步驟S112:是),指定與該操作的時刻對應的幀圖像(步驟S116)。指定部14對從動態(tài)圖像獲取部12輸出的幀編號或時間信息與操作受理部15中的操作時刻進行對比,指定與進行操作的時刻對應的幀圖像。指定部14將所指定的幀圖像的編號設為b (D112),將F[b]的信息輸出到動態(tài)圖像處理部13。
[0056]動態(tài)圖像處理部13對F[b]以后獲取的幀圖像中的F[b+Thl]?F[b+Thl+Th2]間的幀圖像進行降低處理(例如對比度)(步驟S118)。
[0057]根據(jù)圖3的例子,在對操作受理部15進行操作之前,畫質(zhì)降低,在緊接著操作之后,畫質(zhì)提高,然后畫質(zhì)再次降低。這樣,在操作前后使畫質(zhì)更大地變化,能夠生成強烈反映了拍攝者意圖的圖像。另外,動態(tài)圖像處理部13也可以在對操作受理部15進行操作后的Thl區(qū)間內(nèi)進行強調(diào)處理(例如對比度)。由此,能夠進一步對觀看側(cè)賦予操作前后不同的印象。
[0058](第2結(jié)構(gòu))
[0059]圖4是圖像處理裝置的第2結(jié)構(gòu)的框圖。將第2結(jié)構(gòu)表示為圖像處理裝置2。圖像處理系統(tǒng)600中包含的圖像處理裝置2具有圖像獲取部20、圖像處理部30、記錄部A41、受理操作者對圖像處理裝置2的操作指示的用戶接口 50、控制部60。另外,對與結(jié)構(gòu)I相同的部位標注相同標號進行表示,并且,利用虛線、細線和粗線表示的流的意思與結(jié)構(gòu)I相同。
[0060]控制部60經(jīng)由用戶接口 50從操作者接收指示,進行圖像獲取部20、記錄部A41和圖像處理部30等的驅(qū)動控制??刂撇?0由CPU構(gòu)成,連接有存儲器62。CPU讀入存儲器62中存儲的控制程序,執(zhí)行各控制處理。
[0061]圖像獲取部20為結(jié)構(gòu)I的動態(tài)圖像獲取部12的I個方式,具有攝像鏡頭部201和攝像部202。攝像鏡頭部201對圖像進行攝影(或攝像),具有由I個以上的透鏡要素構(gòu)成且對從外部取入的光進行成像的攝像鏡頭(或攝影鏡頭)201a (未圖示)。
[0062]攝像部202由對成像光進行光電轉(zhuǎn)換的成像器、和對來自成像器的信號進行處理的信號處理部構(gòu)成。攝像部202將由攝影鏡頭201a成像的光學像轉(zhuǎn)換為電信號,進而,將該電信號轉(zhuǎn)換為數(shù)字信號,生成圖像數(shù)據(jù)。
[0063]記錄部A41保存記錄從圖像處理部30輸出的圖像數(shù)據(jù),是HDD(Hard Disk Drive:硬盤驅(qū)動器)或半導體存儲器。
[0064]用戶接口 50具有REC按鈕501和指定按鈕502。REC按鈕501從操作者受理動態(tài)圖像的拍攝記錄的開始和結(jié)束指示。指定按鈕502為結(jié)構(gòu)I的操作受理部15的I個方式,在動態(tài)圖像的拍攝記錄動作中,從操作者受理指定的指示。
[0065]圖像處理部30對由圖像獲取部20獲取的動態(tài)圖像實施圖像處理,具有幀存儲器301、指定部14、動態(tài)圖像處理部13。幀存儲器301由DRAM等構(gòu)成,是暫時記錄從攝像部202輸出的多張圖像數(shù)據(jù)的暫時存儲部。
[0066]指定部14在動態(tài)圖像的拍攝記錄動作中受理操作者對指定按鈕502的指示(按下)。然后,指定部14對幀存儲器301中記錄的動態(tài)圖像的各幀圖像的拍攝時刻所涉及的數(shù)據(jù)和指定按鈕502被按下的時間進行對照,將用于指定與按下指定按鈕502的時間對應的幀圖像即指定幀F(xiàn)[b]的數(shù)據(jù)提供給動態(tài)圖像處理部13。
[0067]動態(tài)圖像處理部13根據(jù)用于指定指定幀F(xiàn)[b]的數(shù)據(jù),對幀存儲器301中記錄的動態(tài)圖像的幀數(shù)據(jù)實施圖像處理。例如,動態(tài)圖像處理部13針對位于包含指定幀F(xiàn)[b]的指定區(qū)間的前后的非 指定區(qū)間,進行圖像的降低處理(例如亮度降低)。動態(tài)圖像處理部13可以對屬于指定區(qū)間的幀圖像進行通常的處理,也可以對其進行強調(diào)處理。
[0068]圖5是示出由第2結(jié)構(gòu)的圖像處理裝置2進行的圖像處理的區(qū)間的圖。橫軸表示沿著時間軸的幀圖像F[j]的排列,左側(cè)為幀編號較小、即較早的拍攝圖像。設I < j < N,用II表示指定區(qū)間,用I和III表示非指定區(qū)間。并且,如上所述,Thl為指定區(qū)間的長度,Th2為非指定區(qū)間的長度,將Thl和Th2設為規(guī)定的幀數(shù)。
[0069]包含指定幀F(xiàn)[b]的指定區(qū)間II為F[b_Thl]~F[b+Thl]。非指定區(qū)間I為F[b-Thl-Th2]~F[b_Thl]。并且,非指定區(qū)間 III 為 F[b+Thl]~F[b+Thl+Th2]。
[0070]動態(tài)圖像處理部13針對幀存儲器中蓄積的數(shù)據(jù)F[l]…F[b] " + [N],對非指定區(qū)間I和III的幀圖像實施降低(例如亮度)處理。動態(tài)圖像處理部13對指定區(qū)間II的幀圖像實施通?;蜻M行強調(diào)(例如亮度)的處理。
[0071]但是,在b-Thl ( O的情況下,即,在拍攝開始且經(jīng)過Thl前從操作受理部15進行了操作的情況下,在前方向的時間內(nèi)不設置非指定區(qū)間。并且,在b+Thl≤N的情況下,gp,在從操作受理部15進行了操作后經(jīng)過Thl前結(jié)束了拍攝的情況下,在后方向的時間內(nèi)不設置非指定區(qū)間。
[0072]根據(jù)第2結(jié)構(gòu)的圖像處理裝置2,通過具有幀存儲器301,對按下指定按鈕以前的幀圖像也能夠?qū)嵤┙档吞幚恚軌蜻M一步演繹指定場景開始之前的部分。
[0073](第3結(jié)構(gòu))
[0074]圖6是第3結(jié)構(gòu)的框圖。將圖像處理裝置的第3結(jié)構(gòu)表示為圖像處理裝置3。圖像處理系統(tǒng)600中包含的圖像處理裝置3具有指定部14、圖像獲取部20、圖像處理部30、記錄圖像數(shù)據(jù)的記錄部B42、受理操作者對圖像處理裝置3的指示的用戶接口 50、控制部60和輸出端子64。另外,對與結(jié)構(gòu)1、2相同的部位標注相同標號進行表示,并且,用虛線、細線和粗線表示的流的意思與結(jié)構(gòu)1、2相同。
[0075]控制部60經(jīng)由用戶接口 50從操作者接收指示,進行圖像獲取部20、圖像處理部30和記錄部B42等的驅(qū)動控制。控制部60由CPU構(gòu)成,連接有存儲器62。CPU讀入存儲器62中存儲的控制程序,執(zhí)行各控制處理。
[0076]由于圖像獲取部20和用戶接口 50的結(jié)構(gòu)與結(jié)構(gòu)2相同,所以省略說明。
[0077]記錄部B42記錄由圖像獲取部20獲取的幀圖像的圖像數(shù)據(jù),將所記錄的圖像數(shù)據(jù)輸出到圖像處理部30。記錄部B42是HDD或半導體存儲器。
[0078]指定部14從按下設于用戶接口 50中的指定按鈕502的時刻起指定指定幀F(xiàn) [b]。
[0079]圖像處理部30具有動態(tài)圖像處理部13。動態(tài)圖像處理部13從記錄部B42中讀出進行圖像處理的數(shù)據(jù)和指定幀F(xiàn)[b]的圖像數(shù)據(jù),根據(jù)指定幀F(xiàn)[b]對所讀出的圖像數(shù)據(jù)實施規(guī)定的圖像處理。
[0080]由于由動態(tài)圖像處理部13實施的圖像的降低處理與結(jié)構(gòu)2相同,所以省略說明。圖像處理部30將實施降低處理而生成的圖像數(shù)據(jù)輸出到記錄部B42或輸出端子64。
[0081]記錄部B42與原來的動態(tài)圖像一起、或以覆蓋原來的動態(tài)圖像的形式再次記錄由動態(tài)圖像處理部13進行降低處理后的動態(tài)圖像。輸出端子64將從圖像處理部30輸出的圖像數(shù)據(jù)輸出到外部。
[0082]另外,圖像處理部30也可以構(gòu)成為與圖像處理裝置3分體。在分體的情況下,為了與內(nèi)置的圖像處理部30進行區(qū)分,下面將其稱為外部處理裝置70。
[0083]在分體的情況下,與拍攝同時或在拍攝結(jié)束后,經(jīng)由輸出端子64在圖像處理裝置3上連接外部處理裝置70,從記錄部B42對外部處理裝置70輸出圖像數(shù)據(jù)和指定幀F(xiàn)[b]的數(shù)據(jù)。
[0084]在外部處理裝置70中,由動態(tài)圖像處理部13進行降低處理,使實施了降低處理后的圖像數(shù)據(jù)返回到記錄部B42。記錄部B42與原來的動態(tài)圖像一起、或以覆蓋原來的動態(tài)圖像的形式再次記錄實施了降低處理后的圖像數(shù)據(jù)。
[0085]圖7是說明第3結(jié)構(gòu)的圖像處理裝置3的處理步驟的流程圖。判斷圖像獲取部20和記錄部B42是否開始記錄動態(tài)圖像(步驟S130)。通過接收到操作者按下了 REC按鈕501的通知的控制部60的指示,圖像獲取部20和記錄部B42開始記錄動態(tài)圖像。
[0086]在圖像獲取部20和記錄部B42未開始記錄動態(tài)圖像的情況下(步驟S130:否),循環(huán)進行步驟S130。在圖像獲取部20和記錄部B42開始了記錄動態(tài)圖像的情況下(步驟S130:是),指定部14判斷是否操作了指定按鈕502 (步驟S132)。
[0087]指定部14在未按下指定按鈕502的情況下(步驟S132:否),循環(huán)進行步驟S132。指定部14在按下了指定按鈕502的情況下(步驟S132:是),與幀圖像一起記錄該按下的時亥Ij (步驟S134)。在記錄部B42中記錄按下的時刻的數(shù)據(jù)和幀圖像數(shù)據(jù)(動態(tài)圖像記錄數(shù)據(jù))(D130)。
[0088]動態(tài)圖像處理部13對按下的時刻和幀圖像的時刻進行對照,對幀圖像進行指定(步驟S136)。具體而言,動態(tài)圖像處理部13讀出記錄部B42中存儲的指定按鈕502的按下時刻,進行幀圖像的時刻對照,指定與按下時刻對應的幀圖像,設為指定幀F(xiàn)[b](D132)。另夕卜,此時,在按下時刻為2張幀圖像的邊界的情況下,將前側(cè)的幀圖像作為指定幀F(xiàn)[b]。[0089]動態(tài)圖像處理部13 對滿足 F[b-Thl_Th2]≤ F[j]<F[b_Thl]、F[b+Thl]〈F[j]≤F[b+Thl+Th2]的幀圖像F[j]進行降低處理(例如亮度降低處理)(步驟S138)。如上所述,Th2和Thl為幀數(shù)。即,動態(tài)圖像處理部13對屬于圖5所示的非指定區(qū)間1、III的幀圖像進行降低處理(例如亮度降低處理)。
[0090]另外,如上所述,動態(tài)圖像處理部13也可以與圖像處理裝置3分體而構(gòu)成為外部處理裝置70。在使圖像處理部30分體構(gòu)成的情況下,圖7的虛線示出圖像處理裝置3和外部處理裝置70的處理的劃分。該情況下,圖像處理裝置3進行步驟S130~步驟S134的處理,外部處理裝置70進行步驟S136和步驟S138的處理。
[0091]圖8是說明第3結(jié)構(gòu)的圖像處理裝置3的其他處理步驟的流程圖。在圖7的處理中,指定部14在記錄部B42中記錄按下指定按鈕502的時間,但是,在圖8的處理中,指定部14根據(jù)按下指定按鈕502的時間來指定幀圖像(指定幀F(xiàn)[b]),將指定幀F(xiàn)[b]的數(shù)據(jù)記錄在記錄部B42中。
[0092]由于圖8的步驟S150、S152、S154的處理與步驟S130、S132、S134的處理相同,所以省略說明。
[0093]指定部14對按下的時刻和幀圖像的時刻進行對照,對幀圖像進行指定(步驟S156)。具體而言,指定部14讀出指定按鈕502的按下時刻,與記錄部B42中記錄的幀圖像進行時刻對照,指定與按下時刻對應的幀圖像,設為指定幀F(xiàn)[b] (D152),將其圖像編號等記錄在記錄部B42中(D150)。
[0094]與步驟S138同樣,動態(tài)圖像處理部13對滿足F[b-Thl_Th2] ( F[j]<F[b_Thl]、F[b+Thl]〈F[j]≤F[b+Thl+Th2]的幀圖像F[j]進行降低處理(例如亮度降低處理)(步驟S158)。
[0095]這里,在圖像處理部30與圖像處理裝置3分體而構(gòu)成為外部處理裝置70的情況下,圖像處理裝置3進行步驟S150~步驟S156的處理,外部處理裝置70進行步驟S158的處理。
[0096]如以上說明的那樣,根據(jù)第3結(jié)構(gòu)的圖像處理裝置3,在對指定按鈕進行了操作的情況下,首先,僅將對指定按鈕的操作時刻(時間或指定幀的圖像編號等)記錄在記錄部B42中,在記錄結(jié)束后,根據(jù)所記錄的對指定按鈕的操作時刻來進行動態(tài)圖像處理。
[0097]由此,可以不與拍攝同時進行降低處理,不需要高速的處理。并且,還能夠使進行動態(tài)圖像的降低處理的圖像處理部30與圖像處理裝置3分體構(gòu)成,能夠防止圖像處理裝置3的大型化等。
[0098](第4結(jié)構(gòu))
[0099]圖9是第4結(jié)構(gòu)的圖像處理裝置4的框圖。圖像處理系統(tǒng)600中包含的圖像處理裝置4具有圖像獲取部20、圖像處理部30、記錄圖像數(shù)據(jù)的記錄部C43、從操作者受理圖像處理裝置4的控制的用戶接口 51、控制部60、顯示進行攝影(或攝像)而得到的圖像的顯示部66。另外,對與結(jié)構(gòu)I~3相同的部位標注相同標號進行表示,并且,利用虛線、細線和粗線表不的流的意思與結(jié)構(gòu)I等相同。
[0100]由于圖像獲取部20、控制部60的結(jié)構(gòu)與結(jié)構(gòu)2相同,所以省略說明。
[0101]用戶接口 51具有REC按鈕501和釋放按鈕503。REC按鈕501從操作者受理動態(tài)圖像拍攝的開始和結(jié)束指示。[0102]釋放按鈕503是在從操作者受理靜態(tài)圖像拍攝指示的同時受理指定指示的按鈕。釋放按鈕503與結(jié)構(gòu)2的指定按鈕502同樣,是結(jié)構(gòu)I的操作受理部15的I個方式。另外,雖然僅在動態(tài)圖像的拍攝記錄動作中受理指定指示,但是,與有無動態(tài)圖像拍攝無關(guān),均受理靜態(tài)圖像拍攝指示。
[0103]圖像處理部30具有動態(tài)圖像處理部13、指定部14、幀存儲器301和靜態(tài)圖像處理部304。由于動態(tài)圖像處理部13、指定部14、幀存儲器301與結(jié)構(gòu)2相同,所以省略說明。
[0104]靜態(tài)圖像處理部304對進行拍攝而得到的圖像實施靜態(tài)圖像用的圖像處理,對在按下釋放按鈕503的時刻獲取的靜態(tài)圖像用幀圖像進行圖像處理。
[0105]記錄部C43是HDD或半導體存儲器,其分別記錄從動態(tài)圖像處理部13和靜態(tài)圖像處理部304輸出的動態(tài)圖像數(shù)據(jù)和靜態(tài)圖像數(shù)據(jù)。并且,在根據(jù)指定部14的指示而由動態(tài)圖像處理部13進行了上述降低處理的情況下,記錄部C43還記錄進行降低處理后的動態(tài)圖像數(shù)據(jù)。
[0106]并且,根據(jù)指定部14的指示而由動態(tài)圖像處理部13進行了降低處理后的動態(tài)圖像還被輸出到顯示部66,操作者還能夠在拍攝時進行監(jiān)視。
[0107]根據(jù)第4結(jié)構(gòu)的圖像處理裝置4,由于通過靜態(tài)圖像拍攝用的釋放按鈕503進行指定指示,所以,不需要指定按鈕,還提高了操作性。
[0108]圖10和圖11是示出第2?4結(jié)構(gòu)的動態(tài)圖像的降低處理的具體例的圖。圖10是示出對比度降低處理的例子的圖。圖10的(A)是示出進行降低處理和通常(或強調(diào))處理的區(qū)間的圖,由于處理區(qū)間與圖5的例子相同,所以省略說明。圖10的(B)?(D)是示出對應的處理曲線的圖。
[0109]針對屬于非指定區(qū)間I (F[b-Thl-Th2]?F[b-Thl])和非指定區(qū)間III(F[b+Thl]?F[b+Thl+Th2])的幀圖像,通過動態(tài)圖像處理部13,以圖10的(B)和(D)所示的輸入輸出灰度進行對比度降低處理。
[0110]然后,針對屬于以指定幀F(xiàn)[b]為中心的指定區(qū)間II的幀圖像,通過動態(tài)圖像處理部13,以圖10的(C)所示的輸入輸出灰度進行對比度通常處理(實線)或?qū)Ρ榷葟娬{(diào)處理(虛線)。另外,作為對比度強調(diào)或降低處理,動態(tài)圖像處理部13可以對動態(tài)圖像的亮度(Y)、顏色(Cr、Cb)成分雙方進行上述灰度轉(zhuǎn)換處理,也可以僅對亮度成分(Y)進行灰度轉(zhuǎn)換處理。
[0111]并且,在第I結(jié)構(gòu)的動態(tài)圖像的強調(diào)處理中,針對指定幀F(xiàn)[b]以后的Thl進行圖10的(C)所示的通?;?qū)Ρ榷葟娬{(diào)處理,針對Thl以后的Th2進行圖10的(D)所示的對比度降低處理。
[0112]圖11是示出彩度強調(diào)的例子的圖。由于指定區(qū)間II和降低處理的非指定區(qū)間1、III與圖10的情況相同,所以省略說明。針對屬于非指定區(qū)間1、III的幀圖像的顏色成分(Cr、Cb),通過動態(tài)圖像處理部13,以圖11的(B)、(D)所示的輸入輸出關(guān)系進行彩度降低處理。針對屬于指定區(qū)間II的幀圖像的顏色成分(Cr、Cb),通過動態(tài)圖像處理部13,以圖11的(C)所示的輸入輸出關(guān)系進行通?;虿识葟娬{(diào)處理。
[0113]并且,在第I結(jié)構(gòu)的動態(tài)圖像的強調(diào)處理中,針對指定幀F(xiàn)[b]以后的Thl區(qū)間進行圖11的(C)的通?;虿识葟娬{(diào)處理,針對Thl以后的Th2進行圖11的(D)所示的彩度降低處理。[0114]另外,如上所述,可以僅進行針對非指定區(qū)間的降低處理,也可以在針對非指定區(qū)間的降低處理中組合針對指定區(qū)間的強調(diào)處理,這是任意的。并且,可以使非指定區(qū)間1、III的長度(范圍)Th2在區(qū)間1、III中不同。并且,指定區(qū)間的長度Thl也可以在F[b]的前后不是相同的長度(范圍)。
[0115]進而,將非指定區(qū)間1、III的長度Th2設為固定值進行了說明,但是,也可以將從拍攝開始到拍攝結(jié)束之間的指定區(qū)間以外全部設為非指定區(qū)間,進行降低處理。即,也可以是,在從拍攝開始到拍攝結(jié)束的期間內(nèi),在按下指定按鈕的時刻的前后(2Thl)以外全部進行降低處理。
[0116]此外,如上所述,降低處理的種類為對比度降低、亮度降低等各種處理,關(guān)于其選擇和組合,可以在菜單畫面中,事先選擇或每次進行選擇。此外,也可以是,在非指定區(qū)間和指定區(qū)間的降低處理中,不是立刻切換參數(shù),而是使其隨著時間逐漸變化,進行所謂的淡入淡出的處理。
[0117]如上所述,根據(jù)第I實施方式的圖像處理裝置(圖像處理系統(tǒng)),操作者在喜歡的場景中,例如僅按下按鈕,就能夠進行降低其前后的時間(區(qū)間)的圖像的處理,所以,操作者即使不進行麻煩的編集操作,也能夠獲取使喜歡的場景明顯或加深印象的動態(tài)圖像。
[0118]例如,在希望鮮艷地表現(xiàn)在動態(tài)圖像中拍入的花的情況下,僅在拍攝了花的場景(指定區(qū)間)內(nèi)進行通常的彩度設定,在未拍入花的場景(非指定區(qū)間沖,進行襯托花的顏色鮮艷度的低畫質(zhì)化處理(彩度較低的設定)即可。由此,能夠使花的鮮艷度相對明顯。
[0119]并且,在運動會中很多孩子到達終點時,為了使自己的孩子到達終點的瞬間變得明顯、并且不喪失情節(jié)的連續(xù)性(例如,在自己的孩子到達終點的前后,有多少人到達終點等),對自己的孩子到達終點的場景(指定區(qū)間)的分辨率和對比度進行通常的設定,除此以外(非指定區(qū)間)則設定較低的分辨率/對比度/亮度即可。通過進行這種能夠保持連續(xù)性的程度的低畫質(zhì)化處理,在持續(xù)相同場景的動態(tài)圖像內(nèi),也能夠使重要的瞬間變得明顯,而不會喪失情節(jié)的連續(xù)性。
[0120]這些低畫質(zhì)化處理的參數(shù)設定只要是保持動態(tài)圖像的連續(xù)性(降低至能夠知道動態(tài)圖像的前后關(guān)系的程度)、同時不會注視非指定區(qū)間的設定即可,也可以結(jié)合動態(tài)圖像整體的拍攝狀況來改變參數(shù)的設定(降低畫質(zhì)的方法/程度)。并且,也可以與動態(tài)圖像的再現(xiàn)對應地,以時序圖表顯示參數(shù)值,表現(xiàn)場景的重要度。
[0121]這樣,通過使非指定區(qū)間內(nèi)的幀圖像低畫質(zhì)化,能夠使非指定區(qū)間內(nèi)的幀圖像發(fā)揮保持動態(tài)圖像整體的情節(jié)、襯托指定區(qū)間內(nèi)的幀圖像的作用。
[0122]并且,使非指定區(qū)間內(nèi)的幀圖像低畫質(zhì)化還具有以下效果。第一,具有能夠減輕動態(tài)圖像的鑒賞者的眼睛負擔的效果。
[0123]近年來的顯示器中顯示的圖像由于高亮度化/高分辨率化/高色溫度化的發(fā)展而變得艷麗,相反,對鑒賞者的眼睛造成較大負擔。在這種狀況下持續(xù)地觀察持續(xù)相同場景的長時間的動態(tài)圖像時,對于鑒賞者而言將感到不舒適。通過對不重要的場景(非指定區(qū)間)進行適于眼睛的低畫質(zhì)化處理(成為適于眼睛的對比度、亮度等的處理),能夠減輕鑒賞者的眼睛的負擔,能夠降低不舒適感。
[0124]并且,低畫質(zhì)化提示鑒賞者進行動態(tài)圖像的快進,縮短鑒賞時間,通過縮短鑒賞時間,能夠進一步減輕眼睛的負擔。并且,通過使鑒賞時間變短,更容易集中于希望觀看的場景(指定區(qū)間)。另外,在快進的過程中,也能夠確認各場面的畫質(zhì),所以,能夠順暢地進行關(guān)注場景的檢索。
[0125]第二,通過使非指定區(qū)間內(nèi)的幀圖像低畫質(zhì)化,其結(jié)果,代碼量減少,能夠減少存儲器內(nèi)使用的數(shù)據(jù)容量,并且,還能夠快速進行針對PC (個人計算機)的數(shù)據(jù)轉(zhuǎn)送。
[0126](第2實施方式)
[0127]在第2實施方式中,操作者指定指定幀的開始和結(jié)束這2個時刻,進行圖像處理以強調(diào)基于該時刻的動態(tài)圖像。作為第2實施方式的圖像處理裝置,可以應用第I實施方式的圖像處理裝置I~4中的任意一個,但是,下面,以應用圖像處理裝置2為例進行說明。另外,由于對應的框圖與圖4相同,所以省略。通過指定按鈕502的按下開始和按下結(jié)束,來指定指定幀的開始和結(jié)束這2個時刻。
[0128]圖12是具體說明第2實施方式的處理步驟的流程圖。判斷圖像獲取部20是否開始獲取動態(tài)圖像(步驟S200)。通過接收到操作者按下了 REC按鈕501的通知的控制部60的指示,圖像獲取部20開始獲取動態(tài)圖像。
[0129]在圖像獲取部20未開始 獲取動態(tài)圖像的情況下(步驟S200:否),循環(huán)進行步驟S200。在圖像獲取部20開始了獲取動態(tài)圖像的情況下(步驟S200:是),在幀存儲器301中記錄由圖像獲取部20獲取的幀圖像作為動態(tài)圖像記錄數(shù)據(jù)Fj(D200)。然后,指定部14判斷是否按下了指定按鈕502 (步驟S202)。
[0130]指定部14在未按下指定按鈕502的情況下(步驟S202:否),循環(huán)進行步驟S202。指定部14在按下了指定按鈕502的情況下(步驟S202:是),記錄指定按鈕502的按下開始時刻和按下結(jié)束時刻(步驟S204)。
[0131]指定部14對按下開始時刻和按下結(jié)束時刻與幀存儲器301中記錄的幀圖像的時刻進行對照,指定按下開始時刻和按下結(jié)束時刻之間的幀圖像(步驟S206)。指定部14將按下開始時刻的幀圖像設為F[bl],將按下結(jié)束時刻的幀圖像設為F[b2],將F[bl]~F[b2]中包含的多個幀圖像作為指定幀(D202)。
[0132]動態(tài)圖像處理部13 對屬于 F[bl-Thl_Th2] ( F[j]〈F[bl_Thl]和F[b2+Thl]〈F[j] ^F[b2+Thl+Th2]的非指定區(qū)間的幀圖像F[j]進行降低處理(例如亮度降低處理)(步驟S208)。與實施方式I同樣,Th2、Thl表示非指定區(qū)間和指定區(qū)間的長度。
[0133]圖13是示出步驟S208的亮度降低處理的范圍(區(qū)間)的線圖。橫軸表示幀圖像F[j]的排列,左側(cè)為編號較小、即較早的拍攝圖像。F[bl-Thl-Th]~F[bl-Thl]為非指定區(qū)間IV,F(xiàn)[b2+Thl]~F[b2+Thl+Th2]為非指定區(qū)間V,對這些區(qū)間進行降低處理(例如亮度降低處理)。并且,也可以對F[bl-Thl]與F[b2+Thl]之間的指定區(qū)間VI進行通常處理或強調(diào)處理(例如亮度強調(diào)處理)。
[0134]另外,如第I實施方式中敘述的那樣,圖像處理的種類不限于亮度處理,還可以是對比度處理等。在非指定區(qū)間IV和V、指定區(qū)間VI中,也可以使降低處理的參數(shù)隨時間逐漸變化,進行所謂的淡入淡出的處理。
[0135]并且,在第2實施方式的圖像處理裝置由第I實施方式的圖像處理裝置4構(gòu)成的情況下,也可以通過相當于指定按鈕502的釋放按鈕503的半按下操作的開始/結(jié)束,來檢測按下開始時刻和按下結(jié)束時刻。
[0136]并且,作為第2實施方式的圖像處理裝置,在應用第I實施方式的圖像處理裝置I的情況下,在步驟S208中,不對F[bl]以前的幀圖像進行降低處理,對按下指定按鈕502以后、即F[b2]后的Thl幀數(shù)以后的幀圖像進行降低處理。
[0137]根據(jù)第2實施方式的圖像處理裝置(圖像處理系統(tǒng)),由于操作者能夠指定希望強調(diào)的場景的最開始和最后,所以,能夠得到在操作者意圖的期間內(nèi)進行了強調(diào)處理的動態(tài)圖像。
[0138](第3實施方式)
[0139]在第3實施方式中,在短期間內(nèi)多次按下指定按鈕502的情況下,將該期間的連續(xù)的幀圖像作為指定幀,進行強調(diào)基于該指定幀的動態(tài)圖像的圖像處理。
[0140]作為第3實施方式的圖像處理裝置,可以應用第I實施方式的圖像處理裝置I~4中的任意一個,但是,下面,以應用圖像處理裝置2為例進行說明。另外,由于框圖與圖4相同,所以省略。
[0141]圖14是具體說明第3實施方式的處理步驟的流程圖。判斷圖像獲取部20是否開始了獲取動態(tài)圖像(步驟S300)。通過接收到操作者按下了 REC按鈕501的通知的控制部60的指示,圖像獲取部20開始獲取動態(tài)圖像。
[0142]在圖像獲取部20未開始獲取動態(tài)圖像的情況下(步驟S300:否),循環(huán)進行步驟S300。在圖像獲取部20開始了獲取動態(tài)圖像的情況下(步驟S300:是),指定部14判斷是否按下了指定按鈕502 (步驟S302)。在幀存儲器301中記錄由圖像獲取部20獲取的幀圖像作為動態(tài)圖像記錄數(shù)據(jù)F[j] (D300)。
[0143]指定部14在未按下指定按鈕502的情況下(步驟S302:否),循環(huán)進行步驟S302。指定部14在按下了指定按鈕502的情況下(步驟S302:是),記錄按下開始時刻tl和按下結(jié)束時刻t2 (步驟S304)。
[0144]在按下結(jié)束后,指定部14再次進行指定按鈕502的按下受理(步驟S306)。指定部14判斷從t2起未按下的狀態(tài)是否經(jīng)過了規(guī)定時間(步驟S308)。規(guī)定時刻例如為5秒。指定部14判斷為未經(jīng)過規(guī)定時間時(步驟S308:否),記錄按鈕按下結(jié)束時刻t4(步驟S310),用t4替換t2 (步驟S310),返回步驟S306。
[0145]指定部14判斷為從t2起未按下的狀態(tài)經(jīng)過了規(guī)定時間時(步驟S308:是),進入步驟S314。指定部14對按下開始時刻tl和按下結(jié)束時刻t2與幀存儲器301中記錄的幀圖像的時刻進行對照,指定按下開始時刻和按下結(jié)束時刻之間的幀圖像(步驟S314)。將按下開始時刻的幀圖像設為F[bl],將按下結(jié)束時刻的幀圖像設為F[b2],指定部14將F[bl]~F[b2]之間的幀圖像作為指定幀(D302)。
[0146]然后,動態(tài)圖像處理部13對屬于F[bl-Thl_Th2] ( F[j]<F[bl_Th2]和F[b2+Thl]〈F[j] ^ F[b2+Thl+Th2]的非指定區(qū)間的幀圖像F[j]進行亮度降低處理(步驟S316)。是與圖12的步驟S208中說明的處理相同的處理。與實施方式I同樣,Th2、Thl是非指定區(qū)間和指定區(qū)間的長度。
[0147]返回步驟S308,指定部14判斷為按下了指定按鈕502時(步驟S308:是),將按下結(jié)束時刻t2置換為t4(步驟S310)。即,視為在t2~t3之間也按下了指定按鈕502,返回步驟S306。
[0148] 這樣,指定部14在指定按鈕502的上次結(jié)束與下次按下開始之間的間隔較短的情況下,進行處理以將兩者連接起來。[0149]另外,在本實施方式的圖像處理裝置由第I實施方式的圖像處理裝置I構(gòu)成的情況下,在步驟S316中,對從按下指定按鈕502起規(guī)定幀數(shù)以后的幀圖像進行降低處理。
[0150]在降低處理對畫面的切換頻繁時,觀看側(cè)大多感到煩躁,但是,在拍攝過程中指示指定場景的情況下,很難預測該情況來進行指示。根據(jù)實施方式3的圖像處理裝置(圖像處理系統(tǒng)),在短期間內(nèi)反復進行按下指示的情況下,將它們連接起來并視為在該時間內(nèi)連續(xù)按下,指定對應的幀圖像,所以,能夠防止頻繁的切換,能夠獲取穩(wěn)定的圖像。
[0151](第4實施方式)
[0152]在此前的第I~第3實施方式中,作為動態(tài)圖像處理,以單一的圖像為單位來變更畫質(zhì)。在第4實施方式中,進行組合多個幀圖像等的動態(tài)圖像處理。作為基于多個幀圖像的處理的例子,對幀率轉(zhuǎn)換處理和濾波處理進行說明。作為第4實施方式的圖像處理裝置,可以應用第I實施方式的圖像處理裝置I~4中的任意一個,但是,下面,以應用圖像處理裝置2為例進行說明。
[0153]在幀率轉(zhuǎn)換處理中,圖像處理部30針對非指定區(qū)間的幀圖像,以適當間隔對幀圖像進行間隔剔除并進行記錄,例如,通過每隔I個進行間隔剔除,在非指定區(qū)間內(nèi)使幀圖像數(shù)減少為1/2。當對這樣記錄的動態(tài)圖像進行再現(xiàn)時,以快進再現(xiàn)的方式進行顯示。
[0154]圖像處理部30針對指定區(qū)間的幀圖像,不進行間隔剔除而記錄幀圖像,或者對圖像進行幀插值處理并記錄。
[0155]在幀插值處理中,例如對120幀進行插值而成為2倍的240幀。關(guān)于幀的插值生成的方法,可以是一般的幀率轉(zhuǎn)換,也可以在進行“基于運動的圖像內(nèi)的移動”的補償即運動物體追蹤補償后,進行幀率轉(zhuǎn)換的處理。
[0156]圖15是示意地示出基于插值處理的幀率轉(zhuǎn)換的過程的圖。進行基于幀間插值的高幀率化,提高針對主要被攝體的注視度。
[0157]圖15的(A)是示意地示出所獲取的幀圖像的排列的圖。里側(cè)是較早的圖像,前側(cè)是較新的圖像,中央是指定幀F(xiàn)[b]。在圖15的(B)、(C)中,示出根據(jù)指定幀F(xiàn)[b]的前面第2張和第3張生成其中間圖像的例子。
[0158]在幀間插值中,根據(jù)相鄰的幀圖像F[b_3]和F[b_2]檢測特征點、對應點,生成中間的幀數(shù)據(jù),生成幀圖像F[b-2.5](圖15 (O)0
[0159]針對指定幀F(xiàn)[b]的附近區(qū)間(F[b-3]~F[b+3]),同樣,生成中間幀的數(shù)據(jù),將中間幀圖像與原來的動態(tài)圖像進行合成時,生成圖15的(D)所示的動態(tài)圖像。用虛線表示通過插值處理而生成的圖像,括號內(nèi)的編號表示原來的圖像的幀編號。
[0160]當對這種幀率轉(zhuǎn)換后的動態(tài)圖像進行再現(xiàn)時,在指定幀F(xiàn)[b]的附近再現(xiàn)成為慢動作的圖像。進而,也可以越接近指定幀F(xiàn)[b],越增加合成圖像的數(shù)量,在指定幀的更近的位置強調(diào)慢動作效果。
[0161]并且,動態(tài)圖像處理部13也可以進行幀間的濾波處理,來代替變更幀率的幀插值處理。圖16是說明動態(tài)圖像處理部13的幀間的濾波處理的圖。
[0162]動態(tài)圖像處理部13針對非指定區(qū)間的幀圖像F[m],使用其前后的幀圖像(F[m-1]~F[m+i])進行下式所示的合成處理,生成F' [m]。
[0163]【數(shù)學式I】
【權(quán)利要求】
1.一種圖像處理系統(tǒng),其特征在于,該圖像處理系統(tǒng)具有: 動態(tài)圖像獲取部,其獲取動態(tài)圖像并生成幀圖像; 操作受理部,其在所述動態(tài)圖像獲取部獲取所述動態(tài)圖像時受理來自操作者的操作; 指定部,其獲取由所述操作受理部受理所述操作的時間信息,根據(jù)所述時間信息,指定包含在由所述操作受理部受理所述操作的期間內(nèi)由所述動態(tài)圖像獲取部生成的幀圖像在內(nèi)的至少一個以上的幀圖像作為指定幀;以及 動態(tài)圖像處理部,在將由所述動態(tài)圖像獲取部生成的幀圖像中的、與所述指定幀隔開規(guī)定時間的幀圖像作為非指定幀時,所述動態(tài)圖像處理部對所述非指定幀進行使所述非指定幀相對于所述指定幀變得不明顯的圖像處理。
2.根據(jù)權(quán)利要求1所述的圖像處理系統(tǒng),其特征在于, 在對所述操作受理部進行 了再次操作的情況下,在未受理所述操作的非操作期間比規(guī)定的間隔短的情況下,所述指定部將在所述非操作期間中由所述動態(tài)圖像獲取部生成的幀圖像包含在所述指定幀中。
3.根據(jù)權(quán)利要求1所述的圖像處理系統(tǒng),其特征在于, 所述動態(tài)圖像處理部針對從如下的第I幀圖像到如下的第2幀圖像之間的幀圖像,與所述指定幀同樣,將其從所述變得不明顯的圖像處理的對象中排除,所述第I幀圖像是從由所述操作受理部受理了所述操作的時刻起規(guī)定時間之前由所述動態(tài)圖像獲取部生成的幀圖像,所述第2幀圖像是從受理了所述操作的時刻起規(guī)定時間后由所述動態(tài)圖像獲取部生成的幀圖像。
4.根據(jù)權(quán)利要求1~3中的任意一項所述的圖像處理系統(tǒng),其特征在于, 所述操作受理部受理所述操作的開始指示和所述操作的結(jié)束指示, 所述指定部將包含在從由所述操作受理部受理所述開始指示后起到受理所述結(jié)束指示為止的期間內(nèi)由所述動態(tài)圖像獲取部生成的幀圖像在內(nèi)的至少一個以上的幀圖像作為指定中貞。
5.根據(jù)權(quán)利要求1~3中的任意一項所述的圖像處理系統(tǒng),其特征在于, 所述操作受理部具有作為未受理所述操作的狀態(tài)的第I位置和作為受理了所述操作的狀態(tài)的第2位置。
6.根據(jù)權(quán)利要求1~5中的任意一項所述的圖像處理系統(tǒng),其特征在于, 作為使所述非指定幀相對于所述指定幀變得不明顯的圖像處理,所述動態(tài)圖像處理部使所述圖像處理的參數(shù)在所述指定幀和所述非指定幀中不同。
7.根據(jù)權(quán)利要求1~5中的任意一項所述的圖像處理系統(tǒng),其特征在于, 作為針對所述非指定幀的圖像處理,所述動態(tài)圖像處理部進行使所述非指定幀相對于所述指定幀提高噪聲的處理、降低亮度的處理、降低銳度的處理、或降低分辨率的處理中的至少一個圖像處理。
8.根據(jù)權(quán)利要求1~5中的任意一項所述的圖像處理系統(tǒng),其特征在于, 作為所述圖像處理,所述動態(tài)圖像處理部進行使用在處理對象的所述幀圖像之前由所述動態(tài)圖像獲取部生成的所述幀圖像的圖像數(shù)據(jù)的圖像處理。
9.根據(jù)權(quán)利要求1~5中的任意一項所述的圖像處理系統(tǒng),其特征在于, 所述動態(tài)圖像處理部將所述非指定幀作為屬于與所述指定幀隔開規(guī)定時間的范圍的多個幀圖像,作為所述圖像處理,所述動態(tài)圖像處理部對所述非指定幀進行規(guī)定間隔的間隔剔除處理,進行與所述指定幀的期間或所述指定幀的附近期間的幀相比減小幀率的處理。
10.根據(jù)權(quán)利要求1~5中的任意一項所述的圖像處理系統(tǒng),其特征在于, 所述動態(tài)圖像處理部將所述非指定幀作為屬于與所述指定幀隔開規(guī)定時間的范圍的多個幀圖像,作為所述圖像處理,所述動態(tài)圖像處理部進行將所述非指定幀和至少I個以上的其他非指定幀進行合成處理并作為新的所述非指定幀的圖像處理。
11.根據(jù)權(quán)利要求1~5中的任意一項所述的圖像處理系統(tǒng),其特征在于, 作為所述圖像處理,所述動態(tài)圖像處理部進行生成在所述非指定幀中使模糊量增多的圖像的圖像處理。
12.根據(jù)權(quán)利要求1所述的圖像處理系統(tǒng),其特征在于, 所述圖像處理系統(tǒng)還具有暫時存儲部,該暫時存儲部暫時記錄由所述動態(tài)圖像獲取部生成的所述幀圖像, 所述動態(tài)圖像處理部針對從由所述操作受理部受理了所述操作的時刻起向前的規(guī)定時間內(nèi)由所述動態(tài)圖像獲取部生成并存儲在所述暫時存儲部中的所述幀圖像,與所述指定幀同樣,從所述變得不明顯的圖像處理的對象中排除。
13.根據(jù)權(quán)利要求12所述的圖像處理系統(tǒng),其特征在于, 所述動態(tài)圖像處理部使用在所述指定幀的所述規(guī)定時間之前由所述動態(tài)圖像獲取部生成并存儲在所述暫時存儲部中的所述非指定幀圖像的圖像數(shù)據(jù),進行所述變得不明顯的圖像處理。
14.根據(jù)權(quán)利要求12所述的圖像處理系統(tǒng),其特征在于, 所述動態(tài)圖像處理部將存儲在所述暫時記錄部中且屬于與所述指定幀隔開規(guī)定時間的范圍的幀圖像作為所述非指定幀,作為所述圖像處理,所述動態(tài)圖像處理部對所述非指定幀進行規(guī)定間隔的間隔剔除處理,進行與所述指定幀的期間或所述指定幀的附近期間的幀相比減少幀數(shù)的處理。
15.根據(jù)權(quán)利要求12所述的圖像處理系統(tǒng),其特征在于, 所述動態(tài)圖像處理部針對存儲在所述暫時存儲部中的所述幀圖像中的所述非指定幀,進行將所述非指定幀和至少一個以上的其他非指定幀進行合成處理的圖像處理。
16.根據(jù)權(quán)利要求1所述的圖像處理系統(tǒng),其特征在于, 所述圖像處理系統(tǒng)還具有記錄部,該記錄部將由所述動態(tài)圖像獲取部生成的多個所述幀圖像作為動態(tài)圖像文件進行記錄, 所述圖像處理部輸入存儲在所述記錄部中的動態(tài)圖像文件,進行圖像處理。
17.根據(jù)權(quán)利要求1所述的圖像處理系統(tǒng),其特征在于, 所述圖像處理系統(tǒng)還具有記錄部,該記錄部將當所述操作受理部受理了所述操作時由所述動態(tài)圖像獲取部生成的幀圖像作為靜態(tài)圖像進行記錄。
18.一種圖像處理方法,其特征在于,該圖像處理方法包括以下步驟: 獲取動態(tài)圖像并生成幀圖像; 在獲取所述動態(tài)圖像時受理來自操作者的操作;獲取受理了所述操作的時間信息,根據(jù)所述時間信息,指定包含在受理所述操作的期間內(nèi)生成的所述幀圖像在內(nèi)的至少一個以上的幀圖像作為指定幀;以及在將所生成的所述幀圖像中的、與所述指定幀隔開規(guī)定時間的幀圖像作為非指定幀時,對所述非指定幀進行使所述 非指定幀相對于所述指定幀變得相對不明顯的圖像處理。
【文檔編號】H04N19/85GK104010127SQ201410056580
【公開日】2014年8月27日 申請日期:2014年2月19日 優(yōu)先權(quán)日:2013年2月21日
【發(fā)明者】小林賢司, 渡邊伸之, 川合澄夫 申請人:奧林巴斯映像株式會社, 奧林巴斯株式會社