圖像處理裝置以及圖像處理方法
【專利摘要】本發(fā)明的圖像處理裝置等具備：確定部(102)，確定對(duì)同一被攝體進(jìn)行拍攝的、對(duì)焦位置不同的多個(gè)圖像各自的第一對(duì)焦區(qū)域；顯示部(104)，顯示多個(gè)圖像中的第一圖像，在顯示部(104)顯示的第一圖像的規(guī)定位置受指定的情況下，至少選擇具有包含規(guī)定位置的第一對(duì)焦區(qū)域的第二圖像，并在顯示部(104)顯示被選擇的第二圖像。
【專利說明】圖像處理裝置以及圖像處理方法

【技術(shù)領(lǐng)域】
[0001 ] 本發(fā)明涉及一種圖像處理裝置以及圖像處理方法。

【背景技術(shù)】
[0002]現(xiàn)已技術(shù)中已有能夠通過對(duì)攝像裝置所拍攝的圖像等進(jìn)行圖像變焦來擴(kuò)大顯示的功能(變焦功能)。例如在數(shù)碼相機(jī)等攝像裝置中，變焦功能是準(zhǔn)配置，用于想對(duì)圖像的特定區(qū)域進(jìn)行擴(kuò)大細(xì)看等的情況。
[0003]例如專利文獻(xiàn)I中公開了利用者利用照相機(jī)進(jìn)行變焦時(shí)能夠隨意選擇變焦地點(diǎn)的技術(shù)。
[0004]專利文獻(xiàn)1:特開平9-102945號(hào)公報(bào)
[0005]但是，包含規(guī)定位置(變焦地點(diǎn))的、圖像的特定區(qū)域如果不是對(duì)焦?fàn)顟B(tài)，將造成變焦后的圖像(變焦圖像)不鮮明的問題。


【發(fā)明內(nèi)容】

[0006]鑒于這種情況，本發(fā)明的目的在于提供能夠以鮮明的狀態(tài)對(duì)顯示圖像的包含受指定的規(guī)定位置的圖像區(qū)域進(jìn)行顯示的圖像處理裝置以及圖像處理方法。
[0007]為了達(dá)成上述目的，本發(fā)明的一形態(tài)的圖像處理裝置具備:確定部，確定對(duì)同一被攝體進(jìn)行拍攝的、對(duì)焦位置不同的多個(gè)圖像各自的第一對(duì)焦區(qū)域；顯示部，顯示上述多個(gè)圖像中的第一圖像，在上述顯示部顯示的上述第一圖像的規(guī)定位置受指定的情況下，從上述多個(gè)圖像中至少選擇第二圖像，并在上述顯示部顯示被選擇的上述第二圖像，上述第二圖像是具有包含上述規(guī)定位置的上述第一對(duì)焦區(qū)域的圖像。
[0008]在此，這些整體性或者具體性的形態(tài)可由系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序或者計(jì)算機(jī)可讀取的CD-ROM等記錄介質(zhì)實(shí)現(xiàn)，亦可由系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序以及記錄介質(zhì)的任意組合來實(shí)現(xiàn)。
[0009]發(fā)明效果
[0010]本發(fā)明的圖像處理裝置以及圖像處理方法能夠以鮮明的狀態(tài)對(duì)顯示圖像的包含受指定的規(guī)定位置的圖像區(qū)域進(jìn)行顯示。

【專利附圖】

【附圖說明】
[0011]圖1A是表示進(jìn)行對(duì)焦時(shí)使用的圖像的一個(gè)例子的圖。
[0012]圖1B是表示在以圖1A所示的圖像的中心坐標(biāo)作為變焦地點(diǎn)進(jìn)行變焦的情況下的變焦圖像的一個(gè)例子的圖。
[0013]圖2是表示實(shí)施方式I的圖像處理裝置的概略結(jié)構(gòu)的方框圖。
[0014]圖3A是表示由攝影部拍攝的對(duì)焦距離不同的圖像的一個(gè)例子的圖。
[0015]圖3B是表示由攝影部拍攝的對(duì)焦距離不同的圖像的一個(gè)例子的圖。
[0016]圖3C是表示由攝影部拍攝的對(duì)焦距離不同的圖像的一個(gè)例子的圖。
[0017]圖4是表示圖3A?圖3C的圖像中的被攝體的深度圖的圖。
[0018]圖5A是表示由攝影部拍攝的對(duì)焦距離不同的圖像的對(duì)焦區(qū)域的一個(gè)例子的圖。
[0019]圖5B是表示由攝影部拍攝的對(duì)焦距離不同的圖像的對(duì)焦區(qū)域的一個(gè)例子的圖。
[0020]圖5C是表示由攝影部攝影的對(duì)焦距離不同的圖像的對(duì)焦區(qū)域的一個(gè)例子的圖。
[0021]圖是表示利用圖5A?圖5C合成的合成對(duì)焦區(qū)域的圖。
[0022]圖6A是表示拍攝到的多個(gè)圖像的深度值的深度信息的圖。
[0023]圖6B是表示圖6A所示的被攝體的進(jìn)深的圖。
[0024]圖7是用于說明在變焦前以及變焦后，由顯示部顯示的圖像的一個(gè)例子的圖。
[0025]圖8是用于說明在變焦前以及變焦后，由顯示部顯示的圖像的一個(gè)例子的圖。
[0026]圖9是用于說明從變焦前到變焦后，由顯示部顯示的圖像的變遷的一個(gè)例子的圖。
[0027]圖10是用于說明從變焦前到變焦后，由顯示部顯示的圖像的變遷的一個(gè)例子的圖。
[0028]圖11是用于說明實(shí)施方式I的圖像處理裝置的處理流程的圖。
[0029]圖12是表示實(shí)施方式2的圖像處理裝置的概略結(jié)構(gòu)的方框圖。
[0030]圖13A是用于說明實(shí)施方式2中采用檢測(cè)部和校正部的目的的圖。
[0031]圖13B是用于說明實(shí)施方式2中采用檢測(cè)部和校正部的目的的圖。
[0032]圖13C是用于說明實(shí)施方式2中采用檢測(cè)部和校正部的目的的圖。
[0033]圖13D是用于說明實(shí)施方式2中采用檢測(cè)部和校正部的目的的圖。
[0034]圖14是表示實(shí)施方式3的圖像處理裝置的概略結(jié)構(gòu)的方框圖。
[0035]圖15是表示本發(fā)明的圖像處理裝置的最小結(jié)構(gòu)的方框圖。
[0036]圖16是表示本發(fā)明的圖像處理裝置的最小結(jié)構(gòu)部的處理的圖。

【具體實(shí)施方式】
[0037](本發(fā)明的基礎(chǔ)知識(shí))
[0038]本發(fā)明的
【發(fā)明者】發(fā)現(xiàn)“【背景技術(shù)】”一欄中記載的現(xiàn)有的圖像處理裝置中存在著如下問題。
[0039]現(xiàn)有技術(shù)中已有能夠?qū)z像裝置所拍攝的圖像等進(jìn)行圖像變焦來擴(kuò)大顯示的功能(變焦功能)。例如在數(shù)碼相機(jī)等攝像裝置中，變焦功能是標(biāo)準(zhǔn)配置，用于想對(duì)圖像的特定區(qū)域進(jìn)行擴(kuò)大細(xì)看等的情況。
[0040]圖1A是表示進(jìn)行變焦時(shí)使用的圖像的一個(gè)例子的圖，圖1B是表示在以圖1A的中心坐標(biāo)作為變焦地點(diǎn)進(jìn)行變焦的情況下的變焦圖像的一個(gè)例子的圖。
[0041]在圖1A所示的I張圖像I中，拍攝了被攝體10、被攝體20以及被攝體30。圖1B所示的圖像la、lb、Ic、Id以及Ie表示以圖像I的被攝體20作為變焦對(duì)象或者變焦地點(diǎn)(中心坐標(biāo))進(jìn)行變焦時(shí)的變焦圖像。圖1B所示的圖像la、lb、lc、Id以及Ie表示變焦倍率不同的變焦圖像，表示了以被選擇的變焦地點(diǎn)或者變焦對(duì)象相一致的方式對(duì)圖像I進(jìn)行了擴(kuò)大的變焦圖像。在此，圖像Ia?Ie的大小相同是因?yàn)閷?duì)圖像I進(jìn)行擴(kuò)大之后(變焦圖像)，根據(jù)需要進(jìn)行了修剪。通過修剪，作為變焦后的圖像的圖像la、lb、lc、ld、le的尺寸與作為變焦前的圖像的圖像I的尺寸相一致。
[0042]另外，在對(duì)圖像I進(jìn)行變焦之前(事先)，進(jìn)行變焦地點(diǎn)或者變焦對(duì)象的選擇。對(duì)于照相機(jī)等一般的攝像裝置而言，初始值(初始設(shè)置)中多是將圖像的中心位置設(shè)定為變焦地點(diǎn)。
[0043]在此，例如在專利文獻(xiàn)I中公開了利用者利用照相機(jī)進(jìn)行變焦時(shí)能夠任意選擇變焦地點(diǎn)的技術(shù)。專利文獻(xiàn)I中公開了通過操作附帶照相機(jī)的觸屏來設(shè)定變焦地點(diǎn)的技術(shù)。具體而言，通過用手或者鼠標(biāo)指定照相機(jī)上的圖標(biāo)，來進(jìn)行照相機(jī)的搖動(dòng)、傾斜、變焦和對(duì)焦控制的技術(shù)。由此，通過觸屏指定，能夠設(shè)定變焦時(shí)的任意變焦地點(diǎn)。
[0044]另一方面，通常而言，圖像的變焦功能用于想細(xì)看圖像的特定區(qū)域(變焦對(duì)象)的情況等。因此，優(yōu)選在對(duì)焦?fàn)顟B(tài)下拍攝變焦對(duì)象。
[0045]但是，就照相機(jī)等攝像裝置而言，圖像變焦功能實(shí)際上會(huì)根據(jù)設(shè)定而受到限制，有時(shí)會(huì)導(dǎo)致拍攝出違背用戶意圖的淺景深圖像。
[0046]S卩，根據(jù)歷來的技術(shù)，有時(shí)會(huì)不顧用戶的意圖，在非對(duì)焦?fàn)顟B(tài)的狀態(tài)下進(jìn)行拍攝。并且，若對(duì)非對(duì)焦?fàn)顟B(tài)的變焦對(duì)象即模糊的變焦對(duì)象進(jìn)行變焦的話，會(huì)造成變焦后(擴(kuò)大顯示后)的圖像變得更不鮮明的問題。
[0047]尤其是，在對(duì)拍攝后的圖像進(jìn)行電子變焦(擴(kuò)大顯示)的情況下，變焦后的圖像會(huì)變得更不鮮明。進(jìn)而，在擴(kuò)大到了超過圖像分辯率的倍率的情況下，甚至?xí)霈F(xiàn)難以理解變焦對(duì)象的情況。為此，為了保證變焦后的圖像(變焦圖像)足夠鮮明或者說為了使人能夠理解變焦圖像中的變焦對(duì)象，優(yōu)選在對(duì)焦?fàn)顟B(tài)下拍攝變焦前的變焦對(duì)象。
[0048]對(duì)此，鑒于這種狀況，本發(fā)明的一形態(tài)的目的在于提供能夠以鮮明的狀態(tài)對(duì)顯示圖像中的包含受指定的規(guī)定位置的圖像區(qū)域進(jìn)行顯示的圖像處理裝置以及圖像處理方法。
[0049]為了達(dá)成上述目的，本發(fā)明的一形態(tài)的圖像處理裝置具備:確定部，確定對(duì)同一被攝體進(jìn)行拍攝的、對(duì)焦位置不同的多個(gè)圖像各自的第一對(duì)焦區(qū)域；顯示部，顯示上述多個(gè)圖像中的第一圖像，在上述顯示部顯示的上述第一圖像的規(guī)定位置受指定的情況下，從上述多個(gè)圖像中至少選擇第二圖像，并在上述顯示部顯示被選擇的上述第二圖像，上述第二圖像是具有包含上述規(guī)定位置的上述第一對(duì)焦區(qū)域的圖像。
[0050]根據(jù)以上，能夠以鮮明的狀態(tài)對(duì)顯示圖像的包含受指定的規(guī)定位置的圖像區(qū)域進(jìn)行顯示。
[0051]另外，例如，上述圖像處理裝置還具備合成部，該合成部通過合成由上述確定部確定的多個(gè)圖像各自的第一對(duì)焦區(qū)域的合計(jì)區(qū)域來生成第二對(duì)焦區(qū)域，上述顯示部顯示上述第一圖像并顯示被重疊在上述第一圖像上的上述第二對(duì)焦區(qū)域。
[0052]另外，例如，上述圖像處理裝置還具備攝影部，該攝影部通過在時(shí)間上連續(xù)拍攝攝影參數(shù)不同的多個(gè)圖像，來拍攝上述多個(gè)圖像，上述攝影參數(shù)至少包含對(duì)焦位置的信息。
[0053]另外，例如，上述確定部利用與上述多個(gè)圖像分別對(duì)應(yīng)的深度信息，來確定上述多個(gè)圖像各自的第一對(duì)焦區(qū)域。
[0054]另外，例如，上述圖像處理裝置還具備:設(shè)定部，在上述顯示部顯示的上述第一圖像的上述規(guī)定位置受指定的情況下，從上述多個(gè)圖像中至少選擇上述第二圖像，并對(duì)上述顯示部顯示出上述第二圖像為止的切換方法進(jìn)行設(shè)定；圖像生成部，按照由上述設(shè)定部設(shè)定的上述切換方法，生成至少對(duì)上述第二圖像的包含上述第一對(duì)焦區(qū)域的區(qū)域進(jìn)行擴(kuò)大的變焦圖像，上述顯示部至少將由上述圖像生成部生成的上述第二圖像的變焦圖像，作為上述第二圖像來顯示。
[0055]另外，例如，上述設(shè)定部還取得與上述多個(gè)圖像分別對(duì)應(yīng)的深度信息，并根據(jù)取得的上述深度信息來設(shè)定上述切換方法。
[0056]另外，例如，上述設(shè)定部根據(jù)取得的上述深度信息來選擇第三圖像，該第三圖像是具有深度值在上述第二圖像的第一對(duì)焦區(qū)域的深度值和上述第一圖像的第一對(duì)焦區(qū)域的深度值之間的第一對(duì)焦區(qū)域的圖像，并且，上述設(shè)定部將上述切換方法設(shè)定為:在上述顯示部顯示出上述第二圖像為止的期間，在上述顯示部顯示上述第三圖像，上述圖像生成部按照上述切換方法，至少生成第一變焦圖像和第二變焦圖像，上述第一變焦圖像是對(duì)包含與上述第二圖像的上述第一對(duì)焦區(qū)域?qū)?yīng)的上述第三圖像的區(qū)域和上述第三圖像的上述第一對(duì)焦區(qū)域的區(qū)域進(jìn)行擴(kuò)大的圖像，上述第二變焦圖像是對(duì)包含上述第二圖像的上述第一對(duì)焦區(qū)域的區(qū)域進(jìn)行擴(kuò)大的圖像，上述顯示部對(duì)由上述圖像生成部生成的上述第一變焦圖像和上述第二變焦圖像，按照此順序進(jìn)行顯示。
[0057]另外，例如，上述設(shè)定部將上述切換方法設(shè)定為:在顯示部顯示出上述第二圖像為止的期間，在顯示部顯示通過按規(guī)定比例合成上述第二圖像以及上述第一圖像而成的第三圖像，上述圖像生成部按照上述切換方法，至少生成第一變焦圖像和第二變焦圖像，上述第一變焦圖像是對(duì)包含與上述第二圖像的上述第一對(duì)焦區(qū)域?qū)?yīng)的上述第三圖像的區(qū)域和上述第三圖像的第一對(duì)焦區(qū)域的區(qū)域進(jìn)行擴(kuò)大的圖像，上述第二變焦圖像是對(duì)包含上述第二圖像的第一對(duì)焦區(qū)域的區(qū)域進(jìn)行擴(kuò)大的圖像，上述顯示部對(duì)由上述圖像生成部生成的上述第一變焦圖像和上述第二變焦圖像，按照此順序進(jìn)行顯示。
[0058]另外，例如，上述圖像處理裝置還具備決定部，該決定部自動(dòng)決定并指定上述規(guī)定位置。
[0059]另外，例如，上述決定部，在由上述合成部生成的上述第二對(duì)焦區(qū)域內(nèi)，決定上述規(guī)定位置。
[0060]另外，例如，上述圖像處理裝置還具備接受部，該接受部接受用戶的輸入，并指定上述規(guī)定位置。
[0061]另外，例如，上述圖像處理裝置還具備:檢測(cè)部，檢測(cè)上述同一被攝體在上述多個(gè)圖像間的偏位量；校正部，根據(jù)上述檢測(cè)部檢測(cè)出的偏位量，對(duì)上述同一被攝體在上述多個(gè)圖像間的偏位量進(jìn)行校正。
[0062]另外，另外達(dá)成上述目的，本發(fā)明的一形態(tài)的圖像處理方法包括:確定步驟，確定對(duì)同一被攝體進(jìn)行拍攝的、對(duì)焦位置不同的多個(gè)圖像各自的第一對(duì)焦區(qū)域；顯示步驟，在顯示部顯示上述多個(gè)圖像中的第一圖像，在上述顯示步驟顯示的上述第一圖像的規(guī)定位置受指定的情況下，從上述多個(gè)圖像中至少選擇第二圖像，并在上述顯示部顯示被選擇的上述第二圖像，上述第二圖像是具有包含上述規(guī)定位置的上述第一對(duì)焦區(qū)域的圖像。
[0063]在此，這些整體性或者具體性的形態(tài)可由系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序或者計(jì)算機(jī)可讀取的CD-ROM等記錄介質(zhì)實(shí)現(xiàn)，亦可由系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序以及記錄介質(zhì)的任意組合實(shí)現(xiàn)。
[0064]以下，關(guān)于本發(fā)明的一形態(tài)的圖像處理裝置以及圖像處理方法，參照附圖來進(jìn)行具體說明。
[0065]在此，以下說明的實(shí)施方式均表示本發(fā)明的一具體例。以下實(shí)施方式中給出的結(jié)構(gòu)要素、結(jié)構(gòu)要素的連接形態(tài)、步驟，步驟的順序等也都表示一個(gè)例子，并不意味本發(fā)明限定于此。另外，關(guān)于以下實(shí)施方式的結(jié)構(gòu)要素中的未被記載于表不最上位概念的獨(dú)立權(quán)利要求中的結(jié)構(gòu)要素，作為任意的結(jié)構(gòu)要素進(jìn)行說明。
[0066](實(shí)施方式I)
[0067]圖2是表示實(shí)施方式I的圖像處理裝置的概略結(jié)構(gòu)的方框圖。
[0068]如圖2所示的圖像處理裝置100具備攝影部101、確定部102、合成部103、顯示部104、設(shè)定部105以及圖像生成部106。
[0069]攝影部101通過在時(shí)間上的連續(xù)拍攝攝影參數(shù)不同的多個(gè)圖像，來拍攝對(duì)同一被攝體進(jìn)行拍攝的、不同對(duì)焦位置的多個(gè)圖像，該攝影參數(shù)至少包含對(duì)焦位置的信息。
[0070]具體是，攝影部101取得用于多個(gè)圖像的攝影參數(shù)，并以不同的攝影參數(shù)拍攝至少2張以上的圖像。在此，攝影參數(shù)至少包含圖像的對(duì)焦位置，例如包含表示對(duì)焦距離、開口等的參數(shù)。在以下的說明中，簡(jiǎn)單起見，說明多個(gè)圖像分別以不同的對(duì)焦距離被拍攝的情況，但并不限定于此。
[0071]如上所述，攝影部101通過拍攝(攝像)不同對(duì)焦距離的多張圖像，來獲得對(duì)焦區(qū)域不同的多個(gè)圖像。另外，多個(gè)圖像可以是通過包圍式對(duì)焦拍攝來連續(xù)拍攝的圖像，也可以利用作為某種處理的中間圖像而被拍攝的圖像。作為后者的例子，可舉出利用攝影參數(shù)不同的多個(gè)圖像來推測(cè)深度信息的DFD(Depth from Defocus)、根據(jù)多個(gè)圖像來決定焦點(diǎn)位置的 AF(auto focus)等。
[0072]圖3A至圖3C是表示由攝影部拍攝的對(duì)焦距離不同的圖像的一個(gè)例子的圖。圖4是表示圖3A?圖3C的圖像中的被攝體的深度圖的圖。在此，圖4的深度圖中，越白表示與照相機(jī)的距離越近，越黑表示與照相機(jī)的距離越遠(yuǎn)。另外，圖3A?圖3C是相對(duì)于圖4的深度圖所示的距離上的被攝體的，對(duì)焦距離分別不同的3張圖像的例子。
[0073]另外，圖3A?圖4所示的被攝體lla、21a以及31a，被攝體llb、21b以及31b，被攝體llc、21c以及31c，被攝體lld、21d以及31d分別表示同一被攝體。另外，圖3A所示的圖像2a是將對(duì)焦距離設(shè)定在深處拍攝的圖像，因此在被攝體lla、21a以及31a中的由實(shí)線表示的被攝體Ila對(duì)焦。圖3B所示的圖像2b是將對(duì)焦距離設(shè)定在中距離拍攝的圖像，因此在被攝體llb、21b、31b中的由實(shí)線所示的被攝體21b對(duì)焦。圖3C所示的圖像是將對(duì)焦距離設(shè)定在近處拍攝的圖像，因此在被攝體llc、21c、31c中的由實(shí)線所示的被攝體31c對(duì)焦。
[0074]確定部102確定對(duì)同一被攝體進(jìn)行拍攝的、對(duì)焦位置不同的多個(gè)圖像各自的第一對(duì)焦區(qū)域。例如，確定部102利用與多個(gè)圖像分別對(duì)應(yīng)的深度信息，來確定多個(gè)圖像各自的第一對(duì)焦區(qū)域。
[0075]在本實(shí)施方式中，確定部102取得(被輸入)由攝影部101拍攝的不同對(duì)焦距離的多個(gè)圖像和對(duì)多個(gè)圖像分別進(jìn)行拍攝時(shí)的對(duì)焦距離以及深度信息，從而確定各圖像的對(duì)焦區(qū)域(第一對(duì)焦區(qū)域)。具體是，確定部102通過對(duì)拍攝各圖像時(shí)的對(duì)焦距離和深度信息進(jìn)行對(duì)照，例如像圖5A?圖5C那樣確定各圖像中的對(duì)焦區(qū)域(第一對(duì)焦區(qū)域)。
[0076]在此，圖5A?圖5C是表示由攝影部拍攝的對(duì)焦距離不同的圖像的對(duì)焦區(qū)域的一個(gè)例子的圖。圖5A的對(duì)焦區(qū)域3001是與圖3A的被攝體Ila對(duì)應(yīng)的區(qū)域(包含被攝體Ila的區(qū)域)。同樣，圖5B的對(duì)焦區(qū)域3002是與圖3B的被攝體21b對(duì)應(yīng)的區(qū)域，圖5C的對(duì)焦區(qū)域3003是與圖3C的被攝體31c對(duì)應(yīng)的區(qū)域。另外，對(duì)焦區(qū)域3001?對(duì)焦區(qū)域3003是第一對(duì)焦區(qū)域的一個(gè)例子，是與對(duì)焦位置的被攝體對(duì)應(yīng)的區(qū)域。另外，對(duì)焦區(qū)域3001?對(duì)焦區(qū)域3003與對(duì)焦位置的被攝體被重疊顯示。
[0077]合成部103通過合成由確定部102確定的多個(gè)圖像各自的第一對(duì)焦區(qū)域的合計(jì)區(qū)域，來生成第二對(duì)焦區(qū)域。
[0078]具體是，由確定部102確定的各圖像的對(duì)焦區(qū)域面(表示第一對(duì)焦區(qū)域的面)被輸入到合成部103，合成部103生成表示由攝影部101拍攝的多個(gè)圖像全體的對(duì)焦區(qū)域的面(表示第二對(duì)焦區(qū)域的面)。以下，利用附圖進(jìn)行具體說明。圖是表示利用圖5A?圖5C合成的合成對(duì)焦區(qū)域的圖。另外，圖6A是表示被拍攝的多個(gè)圖像的深度值的深度信息的圖。圖6B是表示圖6A所示被攝體的進(jìn)深的圖。
[0079]合成部103通過合成由確定部102確定的第一對(duì)焦區(qū)域，即，合成對(duì)焦區(qū)域3001?對(duì)焦區(qū)域3002的合計(jì)區(qū)域，來生成圖所示的合成對(duì)焦區(qū)域3004(第二對(duì)焦區(qū)域)。在此，合成部103可以在生成合成對(duì)焦區(qū)域3004(第二對(duì)焦區(qū)域)的同時(shí)，例如像圖6A或者圖6B所表示的那樣，生成表示由攝影部101拍攝的圖像的被攝體llf、21f、31f的進(jìn)深值的深度信息。另外，被攝體llf、21f、31f與圖5A?圖5C所示的被攝體Ila?11c、21a?21c和31a?31c是同一被攝體。
[0080]顯示部104顯示多個(gè)圖像中的第一圖像。
[0081]在此，顯示部104可以在顯示多個(gè)圖像中的第一圖像的同時(shí)，在第一圖像上重疊顯示第二對(duì)焦區(qū)域。在此情況下，例如，顯示部104利用由合成部103生成的合成對(duì)焦區(qū)域面(第二對(duì)焦區(qū)域的面)，來顯示用于由利用者決定規(guī)定位置(變焦地點(diǎn))的參照?qǐng)D像。在此，參照?qǐng)D像是表示將如圖所示的合成對(duì)焦區(qū)域3004(第二對(duì)焦區(qū)域)重疊在圖像2c上的圖像2e，S卩，表示多個(gè)圖像的第一圖像與被重疊在第一圖像上的第二對(duì)焦區(qū)域的圖像。顯示部104，作為使合成對(duì)焦區(qū)域面(第二對(duì)焦區(qū)域的面)起到作用(重疊)的參照?qǐng)D像(第一圖像)，將圖3A?圖3C的任意圖像用作第一圖像。
[0082]另外，顯示部104可以根據(jù)圖3A?圖3C重新生成用于顯示的圖像，并作為第一圖像而顯示。另外，顯示部104可以根據(jù)需要，將由如圖6B所示的合成部103生成的深度信息，作為利用者決定規(guī)定位置(變焦地點(diǎn))時(shí)的補(bǔ)助信息而顯示。
[0083]另外，利用者，針對(duì)顯示部104所顯示的參照?qǐng)D像上顯示的合成對(duì)焦區(qū)域(第二對(duì)焦區(qū)域)，例如利用觸屏等接口來決定規(guī)定位置(變焦地點(diǎn))。在此，觸屏等接口是接受部的一個(gè)例子，接受部接受來自用戶的輸入(變焦地點(diǎn)的決定)，并指定合成對(duì)焦區(qū)域(第二對(duì)焦區(qū)域)中的變焦地點(diǎn)的位置。
[0084]另外，顯示部104顯示由圖像生成部106生成的至少第二圖像的變焦圖像，詳情后述。另外，顯示部104對(duì)圖像生成部106生成的第一變焦圖像和第二變焦圖像，按照此順序進(jìn)行顯示。
[0085]另外，在此說明了顯示部104被形成在圖像處理裝置200的情況，但并不限定于此。也可以被形成在圖像處理裝置200的外部。另外，顯示部104顯示上述參照?qǐng)D像，另外，由圖像生成部106生成的變焦圖像也可以由被設(shè)置在圖像處理裝置200外部的顯示裝置等顯不O
[0086]設(shè)定部105，在顯示部104顯示的第一圖像(或第二對(duì)焦區(qū)域)內(nèi)的規(guī)定位置(例如變焦地點(diǎn))受指定的情況下，從多個(gè)圖像中至少選擇具有包括該規(guī)定位置的第一對(duì)焦區(qū)域的第二圖像，并設(shè)定到顯示部104顯示出第二圖像為止的切換方法。
[0087]在此，設(shè)定部105可以取得與多個(gè)圖像分別對(duì)應(yīng)的深度信息，并根據(jù)所取得的深度信息來設(shè)定切換方法。
[0088]例如，設(shè)定部105根據(jù)所取得的深度信息，選擇具有深度值在第二圖像的第一對(duì)焦區(qū)域的深度值和第一圖像的第一對(duì)焦區(qū)域的深度值之間的第一對(duì)焦區(qū)域的第三圖像。并且，設(shè)定部105，作為切換方法，可以設(shè)定為:在顯示部104顯示出第二圖像為止的期間，顯示部104顯示第三圖像。另外，例如，設(shè)定部105作為切換方法，可以設(shè)定為:在顯示部104顯示第二圖像為止的期間，在顯示部104顯示按規(guī)定比率對(duì)第二圖像以及第一圖像進(jìn)行合成之后的第三圖像。
[0089]具體例為，設(shè)定部105利用受指定的規(guī)定位置(變焦地點(diǎn))、由確定部102確定的各圖像的對(duì)焦區(qū)域(第一對(duì)焦區(qū)域)以及由合成部103生成的合成對(duì)焦區(qū)域(第二對(duì)焦區(qū)域)，來設(shè)定切換方法。關(guān)于切換方法詳見后述。
[0090]圖像生成部106按照由設(shè)定部105設(shè)定的切換方法，生成至少對(duì)第二圖像的第一對(duì)焦區(qū)域進(jìn)行擴(kuò)大的變焦圖像。
[0091]例如，圖像生成部106可以按照由設(shè)定部105設(shè)定的切換方法，至少生成第一變焦圖像和第二變焦圖像，該第一變焦圖像是對(duì)包含與第二圖像的第一對(duì)焦區(qū)域?qū)?yīng)的第三圖像的區(qū)域和第三圖像的第一對(duì)焦區(qū)域的區(qū)域進(jìn)行擴(kuò)大的圖像，該第二變焦圖像是對(duì)包含第二圖像的第一對(duì)焦區(qū)域的區(qū)域進(jìn)行擴(kuò)大的圖像。另外，例如，圖像生成部106可以按照由設(shè)定部105設(shè)定的切換方法，至少生成對(duì)第三圖像的第一對(duì)焦區(qū)域進(jìn)行擴(kuò)大的第一變焦圖像，和對(duì)第二圖像的第一對(duì)焦區(qū)域進(jìn)行擴(kuò)大的第二變焦圖像。
[0092]在此，以由設(shè)定部105設(shè)定的切換方法為例進(jìn)行了說明。以下，將說明圖像生成部106生成由設(shè)定部105選擇的第二圖像的變焦圖像，并在顯示部104顯示的情況。
[0093]作為切換方法，例如有，在顯示第二圖像為止的中途切換圖像的選擇方法，或者從第一圖像到顯示出第二圖像為止的圖像的變遷方法。
[0094]首先，關(guān)于圖像的選擇方法進(jìn)行說明。
[0095]以下，作為第二圖像，選擇圖3A所示的圖像2a。
[0096]具體而言，首先，例如像圖所示，在合成對(duì)焦區(qū)域3004(第二對(duì)焦區(qū)域)被重疊在圖3C的圖像2c上而被顯示在顯示部104的情況下，視為合成對(duì)焦區(qū)域3004中的規(guī)定位置(變焦地點(diǎn))受了指定。在此情況下，設(shè)定部105確認(rèn)與受指定的規(guī)定位置對(duì)應(yīng)的合成對(duì)焦區(qū)域3004的部分(圖5A的對(duì)焦區(qū)域3001)的深度值(深度距離)。由此，設(shè)定部105可知以受指定的規(guī)定位置作為第一對(duì)焦區(qū)域(對(duì)焦區(qū)域3001)的圖像是圖3A所示的圖像2a。然后，設(shè)定部105，作為變焦后的圖像(第二圖像或者第二圖像的變焦圖像)選擇圖3A所示的圖像2a。
[0097]另外，圖中，作為顯示部104顯示的變焦前的圖像(第一圖像)，表示了選擇圖3C所示的圖像2c的例子，但并不限定于此。也可以選擇被攝體21b被映在對(duì)焦位置的圖3B所示的圖像2b。即，可以在攝影部101拍攝的多個(gè)圖像中，選擇對(duì)焦、映出了比規(guī)定位置(變焦地點(diǎn))的深度值更為淺處的深度值的被攝體的圖像。其理由在于，根據(jù)變焦圖像的特性，在被攝體的對(duì)焦距離與變焦倍率連動(dòng)變化時(shí)看起來更自然，因此，優(yōu)選為，變焦前的圖像的被攝體距離比變焦后的圖像的被攝體距離更為淺側(cè)。
[0098]圖7以及圖8是用于說明變焦前以及變焦后在顯示部上顯示的圖像的一個(gè)例子的圖。圖7以及圖8都表示了，受指定的被攝體在變焦前是模糊的狀態(tài)，開始變焦并達(dá)到最大變焦倍率時(shí)該被攝體成為對(duì)焦?fàn)顟B(tài)。
[0099]在圖7所示的例子中，首先，設(shè)定部105作為變焦前的圖像選擇圖3B所示的圖像2b，作為變焦后的圖像選擇圖3A所示的圖像2a。另外，設(shè)定部105設(shè)定表示該選擇方法的切換方法(參數(shù))。然后，圖像生成部106按照該選擇方法，對(duì)圖3A所示的圖像2a (至少包含被攝體Ila的區(qū)域)進(jìn)行擴(kuò)大而生成變焦圖像3。然后，顯示部104作為變焦前的圖像顯示圖像2b，并作為變焦后的圖像顯示變焦圖像3
[0100]另一方面，在圖8所示的例子中，首先，設(shè)定部105作為變焦前的圖像選擇圖3C所示的圖像2c，作為變焦途中的圖像選擇圖3B所示的圖像2b，作為變焦后的圖像選擇圖3A所示的圖像2a。另外，設(shè)定部105設(shè)定表示該選擇方法的切換方法(參數(shù))。然后，圖像生成部106按照該選擇方法，對(duì)圖3B所示的圖像2b (至少包括被攝體Ilb和被攝體21b的區(qū)域)進(jìn)行擴(kuò)大而生成變焦圖像2b’，對(duì)圖3A所示的圖像2a(至少包含被攝體Ila的區(qū)域)進(jìn)行擴(kuò)大而生成變焦圖像3。并且，顯示部104作為變焦前的圖像顯示圖像2c，作為變焦途中的圖像顯示變焦圖像2b’，作為變焦后的圖像顯示變焦圖像3。
[0101]另外，在位于通過顯示部104而指定的規(guī)定位置上的被攝體被映在最前方的情況下，在變焦前和變焦后都可與選擇圖3C所示的圖像2c。即，在顯示部104，可以作為變焦前的圖像顯示圖3C所示的圖像2c，作為變焦后的圖像也顯示圖3C所示的圖像2c的變焦圖像。另外，也可以作為變焦后的圖像選擇圖3C所示的圖像2c的變焦圖像，作為變焦前的圖像選擇圖3A所示的圖像2a。即，變焦倍率和被攝體的對(duì)焦距離并非一定是連動(dòng)的。
[0102]另外，最大變焦倍率可以是預(yù)先決定的固定值，也可以是與通過顯示部104指定的被攝體的物體距離相應(yīng)地變動(dòng)的值。
[0103]以下，關(guān)于變焦圖像的變遷方法進(jìn)行說明。
[0104]以下，也例舉作為第二圖像選擇了圖3A所示的圖像2a的情況進(jìn)行說明。
[0105]圖9以及圖10是用于說明從變焦前到變焦后，顯示部顯示的圖像的變遷的一個(gè)例子的圖。
[0106]在圖9所示的例子中，作為變遷方法表示了以在從變焦開始到變焦途中持續(xù)使用圖3B所示的圖像2b，達(dá)到最大變焦倍率時(shí)(變焦后)切換成圖3A所示的圖像2a的方式來使變焦圖像變遷的例子。
[0107]具體是，首先，設(shè)定部105，作為從變焦前至變焦途中的圖像選擇圖3B所示的圖像2b，作為變焦后的圖像選擇圖3A所示的圖像2a，并設(shè)定表示這種變遷方法的切換方法(參數(shù))。然后，圖像生成部106按照該變遷方法，擴(kuò)大圖3B所示的圖像2b，生成變焦倍率不同的變焦圖像4以及5。另外，圖像生成部106，擴(kuò)大圖3A所示的圖像2a(包括至少與被攝體Ila對(duì)應(yīng)的區(qū)域的區(qū)域)，生成變焦圖像3。并且，顯示部104，作為變焦前(變焦開始)的圖像顯示圖像2b，作為變焦途中的圖像顯示變焦圖像4及5，作為變焦后的圖像顯示變焦圖像3。
[0108]另外，在圖10所示的例子中，作為變遷方法表示了在變焦開始時(shí)使用圖3B所示的圖像2b，最大變焦倍率時(shí)(變焦后)使用圖3A所示的圖像2a，在兩者之間的期間一邊切換成按規(guī)定比例對(duì)圖3B所示的圖像2b和圖3A所示的圖像2a進(jìn)行合成(混合)的圖像，一邊使變焦圖像變遷的例子。
[0109]具體是，首先，設(shè)定部105，作為變焦前(變焦開始)的圖像選擇圖3B所示的圖像2b，作為變焦途中的圖像選擇按規(guī)定比率對(duì)圖3B所示的圖像2b和圖3A所示的圖像2a進(jìn)行合成(混合)的圖像，作為變焦后的圖像選擇圖3A所示的圖像2a，并設(shè)定表示這種變遷方法的切換方法(參數(shù))。然后，圖像生成部106，按照該變遷方法，對(duì)按照規(guī)定比率合成(混合)了圖3B所示的圖像2b和圖3A所示的圖像2a而成的圖像進(jìn)行擴(kuò)大，生成變焦倍率不同的變焦圖像6以及7。另外，圖像生成部106擴(kuò)大圖3A所示的圖像2a(包括至少與被攝體Ila對(duì)應(yīng)的區(qū)域的區(qū)域)，生成變焦圖像3。并且，顯示部104，作為變焦前的圖像顯示圖像2b，作為變焦途中的圖像顯示變焦圖像6以及7，作為變焦后的圖像顯示變焦圖像3。
[0110]如上所述，根據(jù)由設(shè)定部105設(shè)定的選擇方法以及變遷方法等切換方法(參數(shù))，由攝影部101拍攝的多個(gè)圖像，由圖像生成部106生成變焦圖像，并由顯示部104顯示。
[0111]另外，在上述的切換方法中，說明了變焦圖像是原圖像的放大圖像的情況，但并不限定于此。等倍，即，1.0倍的圖像也可以作為變焦圖像。采用等倍圖像的情況下，只是切換成具有包含由設(shè)定部105選擇的規(guī)定位置的對(duì)焦區(qū)域的圖像。
[0112]以下，關(guān)于具有如上所述的結(jié)構(gòu)的圖像處理裝置100的處理流程，參照?qǐng)D11進(jìn)行說明。
[0113]圖11是用于說明本實(shí)施方式的圖像處理裝置的處理流程的圖。
[0114]首先，攝影部101以不同的攝影參數(shù)拍攝對(duì)焦位置不同的多個(gè)圖像(SlOl)。
[0115]然后，確定部102，對(duì)拍攝了同一被攝體的、對(duì)焦位置不同的多個(gè)圖像各自的第一對(duì)焦區(qū)域進(jìn)行確定(S102)。具體而言，首先，向確定部102輸入在SlOl拍攝的多個(gè)圖像，并與各圖像對(duì)應(yīng)地取得至少包含對(duì)焦位置的信息的攝影參數(shù)(S1021)。接下來，確定部102取得在SlOl拍攝的多個(gè)圖像的深度信息(S1022)。然后，確定部102利用深度信息，在SlOl拍攝的多個(gè)圖像的第一對(duì)焦區(qū)域分別進(jìn)行確定(S1023)。
[0116]然后，合成部103合成由確定部102確定的第一對(duì)焦區(qū)域的合計(jì)區(qū)域，從而生成第二對(duì)焦區(qū)域(S103)。S卩，合成部103通過對(duì)在S105分別確定的第一對(duì)焦區(qū)域進(jìn)行合成，來生成對(duì)焦于多個(gè)圖像全體的區(qū)域(第二對(duì)焦區(qū)域)。
[0117]然后，顯示部104顯示多個(gè)圖像中的第一圖像，并在第一圖像上重疊顯示第二對(duì)焦區(qū)域(S104)。即，顯示部104顯示在S105生成的第二對(duì)焦區(qū)域。另外，顯示部104通過UI顯示等，提醒利用者對(duì)變焦地點(diǎn)進(jìn)行指定。在此，顯示部104也可以不顯示第二對(duì)焦區(qū)域，而顯示多個(gè)圖像中的第一圖像。
[0118]然后，設(shè)定部105在第二對(duì)焦區(qū)域內(nèi)的變焦地點(diǎn)受指定的情況下，至少選擇具備包含該變焦地點(diǎn)的第一對(duì)焦區(qū)域的第二圖像，并設(shè)定顯示部104顯示被選擇的上述第二圖像為止的切換方法(S105)。
[0119]具體而言，首先，設(shè)定部105將利用者所指定的規(guī)定位置設(shè)定為變焦圖像的變焦地點(diǎn)(S1051)。接下來，設(shè)定部105利用受指定為變焦地點(diǎn)的第二對(duì)焦區(qū)域的深度信息，從在SlOl拍攝的多個(gè)圖像中選擇用于顯示的圖像(S1052)。在此，也可以選擇用于生成變焦圖像的圖像。即，設(shè)定部105設(shè)定在顯示第二圖像為止的途中被切換的圖像的選擇方法。接下來，設(shè)定部105決定使在S1052中選擇的圖像例如與變焦倍率的變化一同變遷等的變遷方法(S1053)。S卩，設(shè)定部105對(duì)于切換第一圖像到顯示第二圖像為止的圖像的變遷方法。
[0120]然后，圖像生成部106按照由設(shè)定部105設(shè)定的切換方法，生成至少對(duì)第二圖像的第一對(duì)焦區(qū)域進(jìn)行擴(kuò)大的變焦圖像(S106)。例如，圖像生成部106根據(jù)在S1052選擇的圖像和在S1053決定的變遷方法來生成變焦圖像。
[0121]最后，顯示部104顯示在S1052選擇的圖像。在此，如果有在S106由圖像生成部106生成的變焦圖像，就切換成對(duì)應(yīng)的圖像顯示變焦圖像。
[0122]以上，根據(jù)本實(shí)施方式，可實(shí)現(xiàn)能夠以鮮明的狀態(tài)顯示包含顯示圖像的受指定的規(guī)定位置的圖像區(qū)域的圖像處理裝置以及圖像處理方法。
[0123]例如，對(duì)包括模糊區(qū)域的圖像(包含規(guī)定位置的圖像區(qū)域)使用變焦功能時(shí)，能夠擴(kuò)大可變焦的區(qū)域，因此能夠有效體現(xiàn)變焦功能。
[0124]另外，根據(jù)本實(shí)施方式的圖像處理裝置以及圖像處理方法，能夠根據(jù)變焦倍率來切換攝影參數(shù)不同的多張圖像。由此，不僅能夠緩解因圖像的對(duì)焦?fàn)顟B(tài)而實(shí)際有限制的現(xiàn)有變焦功能(對(duì)焦?fàn)顟B(tài)對(duì)變焦功能的限制)，還能夠擴(kuò)大變焦功能的有效區(qū)域。
[0125]如上所述，根據(jù)本實(shí)施方式，通過利用對(duì)焦位置不同的多個(gè)圖像，即使是模糊區(qū)域也能夠切換成鮮明狀態(tài)的圖像，或者顯示變焦圖像。
[0126]更具體是，根據(jù)本實(shí)施方式的圖像處理裝置以及圖像處理方法，確定多個(gè)圖像的第一對(duì)焦區(qū)域，接收顯示圖像包括模糊區(qū)域，也顯示橫跨多個(gè)圖像的第二對(duì)焦區(qū)域。由此，在通過觸摸等指定了第二對(duì)焦區(qū)域的變焦地點(diǎn)的情況下，在提高對(duì)焦倍率的同時(shí)，切換成具有與此時(shí)的變焦倍率對(duì)應(yīng)的對(duì)焦范圍的圖像并進(jìn)行變焦，從而在模糊區(qū)域也能夠以鮮明的狀態(tài)進(jìn)行變焦。
[0127]另外，根據(jù)本實(shí)施方式的圖像處理裝置以及圖像處理方法，例如在決定圖像變焦的變焦地點(diǎn)時(shí)，可通過觸屏等輸入(指定)。
[0128](實(shí)施方式2)
[0129]關(guān)于實(shí)施方式2的圖像處理裝置200，參照?qǐng)D12進(jìn)行說明。
[0130]圖12是表示實(shí)施方式2的圖像處理裝置的概略結(jié)構(gòu)的方框圖。在此，對(duì)于與圖2相同的要素賦予相同的符號(hào)，就其詳情省略不述。圖12所示的圖像處理裝置200具備攝影部101、確定部102、合成部103、顯示部104、設(shè)定部105、圖像生成部106、檢測(cè)部207和校正部208。圖12所示的圖像處理裝置200相對(duì)于圖2所示的圖像處理裝置100而言，不同點(diǎn)在于具備檢測(cè)部207和校正部208。以下，只對(duì)與實(shí)施方式I的圖像處理裝置100不同的結(jié)構(gòu)要素進(jìn)行說明。
[0131]在此，采用檢測(cè)部207和校正部208的目的如下。由攝影部101拍攝的多個(gè)圖像分別是在不同的時(shí)間被攝影的圖像。因此，例如在拍攝第一張和第二張之間的期間，具備攝影部101的照相機(jī)或者被攝體若有移動(dòng)的話，可能會(huì)導(dǎo)致第一張和第二張圖像的被攝體位置不符。在利用這種情況的多個(gè)圖像來生成變焦圖像時(shí)，由于在對(duì)顯示部104顯示的圖像進(jìn)行切換時(shí)，被攝體位置同時(shí)也被切換，從而有可能給利用者造成不協(xié)調(diào)感。
[0132]圖13A?圖13D是用于說明本實(shí)施方式中采用檢測(cè)部和校正部的目的的圖。圖13A以及圖13B是表示本實(shí)施方式中的時(shí)間上連續(xù)拍攝的多個(gè)圖像的一個(gè)例子的圖，表示了被攝體的位置有變化的例子。圖13C是用于說明圖13A以及圖13B所示的圖像被顯示在顯示部時(shí)的偏位的圖。
[0133]在顯示部104上，從圖13A所示的圖像8a切換成圖13B所示的圖像8b時(shí)，如圖13C所示，例如，被攝體12a和被攝體12b，以及被攝體22a和被攝體22b的偏位會(huì)變得顯眼。另夕卜，被攝體32a和被攝體32b的偏位不顯眼。
[0134]在此，為了避免上述問題，利用檢測(cè)部207和校正部208，對(duì)攝影部101拍攝的多個(gè)圖像之間的偏位進(jìn)行校正，如圖13D所示，使被攝體在多個(gè)圖像的位置相一致。
[0135]檢測(cè)部207檢測(cè)多個(gè)圖像中的同一被攝體的偏位量。
[0136]具體是，攝影部101拍攝的多個(gè)圖像被輸入到檢測(cè)部207，由檢測(cè)部207對(duì)輸入的多個(gè)圖像的偏位量進(jìn)行檢測(cè)。在此，作為偏位量的檢測(cè)方法，可以利用運(yùn)動(dòng)矢量算出等歷來的方法來檢測(cè)運(yùn)動(dòng)，在此省略贅述。另外，檢測(cè)部207，為了對(duì)多個(gè)圖像中的被攝體的位置進(jìn)行合計(jì)，在檢測(cè)偏位量時(shí)，以多個(gè)圖像中的I張作為基準(zhǔn)來算出偏位量。例如，在多個(gè)圖像是3張圖像的情況下，檢測(cè)部207檢測(cè)第一張圖像相對(duì)于第二張圖像的偏位量、第三張圖像相對(duì)于第二張圖像的偏位量。
[0137]校正部208根據(jù)由檢測(cè)部207檢測(cè)出的偏位量，對(duì)多個(gè)圖像中的被攝體的偏位量進(jìn)行校正。
[0138]具體是，校正部208以由攝影部101拍攝的多個(gè)圖像和由檢測(cè)部207檢測(cè)出的偏位量作為輸入，對(duì)多個(gè)圖像的偏位量進(jìn)行校正。校正部208,例如在算出了圖13A所不的圖像8a和圖13B所示的圖像Sb的偏位量的情況下，通過由檢測(cè)部207檢測(cè)第二張相對(duì)于第一張的偏位量，如圖13D所示的圖像9那樣，校正被攝體的偏位。
[0139]以上，根據(jù)本實(shí)施方式，可實(shí)現(xiàn)能夠以鮮明的狀態(tài)對(duì)包含顯示圖像的受指定的規(guī)定位置的圖像區(qū)域進(jìn)行顯示的圖像處理裝置以及圖像處理方法。
[0140](實(shí)施方式3)
[0141]關(guān)于實(shí)施方式3的圖像處理裝置300，參照?qǐng)D14進(jìn)行說明。
[0142]圖14是表示實(shí)施方式3的圖像處理裝置的概略結(jié)構(gòu)的方框圖。在此，對(duì)于與圖2相同的要素賦予相同的符號(hào)，就其詳情省略贅述。圖14所示的圖像處理裝置200具備攝影部101、確定部102、合成部103、設(shè)定部105、圖像生成部106、檢測(cè)部207和校正部208。圖14所示的圖像處理裝置300相對(duì)于圖2所示的圖像處理裝置100而言，不同之處在于不具備顯示部104，而具備決定部309。
[0143]在實(shí)施方式I中說明了通過顯示部104的顯示來由利用者指定變焦地點(diǎn)(規(guī)定位置)的情況的例子。相對(duì)于此，在實(shí)施方式3中，取代于由利用者指定變焦地點(diǎn)(規(guī)定位置)，由決定部309自動(dòng)設(shè)定變焦地點(diǎn)。
[0144]決定部309自動(dòng)決定并指定規(guī)定位置。另外，決定部309，在由合成部103生成的第二對(duì)焦區(qū)域內(nèi)，決定規(guī)定位置。即，決定部309，根據(jù)第二對(duì)焦區(qū)域，在第二對(duì)焦區(qū)域的范圍內(nèi)自動(dòng)設(shè)定變焦地點(diǎn)。
[0145]另外，決定部309可以采用由攝影部101拍攝的圖像中的任一個(gè)圖像，來作為重疊第二對(duì)焦區(qū)域的檢測(cè)用圖像(第一圖像)。也可以利用通過對(duì)檢測(cè)用圖進(jìn)行合成等而生成的圖像。變焦地點(diǎn)的檢測(cè)方法也可以采用任意的方法，例如，可以將通過面部檢測(cè)所檢測(cè)出的人物面孔作為變焦地點(diǎn)。
[0146]如上所述，根據(jù)本發(fā)明，可實(shí)現(xiàn)能夠以鮮明的狀態(tài)對(duì)包含顯示圖像的受指定的規(guī)定位置的圖像區(qū)域進(jìn)行顯示的圖像處理裝置以及圖像處理方法。
[0147]另外，實(shí)施方式I~3的圖像處理裝置至少具備攝影部101、確定部102、合成部103、設(shè)定部105和圖像生成部106，但并不限定于此。如圖15所示，作為圖像處理裝置的最小結(jié)構(gòu)，具備最小結(jié)構(gòu)部10a即可。即，具備確定部102以及顯示部104即可。在此，圖15是表示本發(fā)明的圖像處理裝置的最小結(jié)構(gòu)的方框圖。另外，對(duì)于與圖2相同的要素賦予相同的符號(hào)，就其詳情省略贅述。
[0148]本發(fā)明的圖像處理裝置通過至少具備最小結(jié)構(gòu)部100a，能夠以鮮明的狀態(tài)對(duì)顯示圖像的包含受指定的規(guī)定位置的圖像區(qū)域進(jìn)行顯示。
[0149]另外，本發(fā)明的圖像處理方法進(jìn)行的典型處理如圖11所示，但并不限定于此。通過圖15所示的最小結(jié)構(gòu)部100a，至少進(jìn)行圖16所示的步驟即可。在此，圖16是表示本發(fā)明的圖像處理裝置的最小結(jié)構(gòu)部的處理的圖。
[0150]更具體是，首先，確定部102確定對(duì)同一被攝體進(jìn)行拍攝的、對(duì)焦位置不同的多個(gè)圖像各自的第一對(duì)焦區(qū)域(S201)。詳情與S102相同，在此省略贅述。
[0151]然后，顯示部104顯示多個(gè)圖像中的第一圖像(S202)。詳情見S104的說明，在此省略贅述。
[0152]然后，最小結(jié)構(gòu)部100a，在顯示的第一圖像的規(guī)定位置受指定的情況下，從多個(gè)圖像中至少選擇包含上述規(guī)定位置的上述第一對(duì)焦區(qū)域的第二圖像，并在顯示部104顯示所選擇的第二圖像(S203)。
[0153]另外，S203所示的處理是S105以及S106的處理的一部分，至少包括S1052和S106
的處理。
[0154]另外，在上述各實(shí)施方式中，各結(jié)構(gòu)要素可由專用的硬件構(gòu)成，也可以通過執(zhí)行適合于各結(jié)構(gòu)要素的軟件程序來實(shí)現(xiàn)。各結(jié)構(gòu)要素可通過由CPU或者處理器等程序執(zhí)行部，讀取并執(zhí)行被記錄在硬盤或被半導(dǎo)體存儲(chǔ)器等記錄介質(zhì)中的軟件程序來實(shí)現(xiàn)。在此，實(shí)現(xiàn)上述各實(shí)施方式的圖像處理裝置等的軟件，是如下程序。
[0155]即，該程序使計(jì)算機(jī)執(zhí)行:確定步驟，確定對(duì)同一被攝體進(jìn)行拍攝的、對(duì)焦位置不同的多個(gè)圖像各自的第一對(duì)焦區(qū)域；顯示步驟，在顯示部顯示上述多個(gè)圖像中的第一圖像，在上述顯示步驟顯示的上述第一圖像的規(guī)定位置受指定的情況下，從上述多個(gè)圖像中至少選擇第二圖像，并在上述顯示部顯示被選擇的上述第二圖像，上述第二圖像是具有包含上述規(guī)定位置的上述第一對(duì)焦區(qū)域的圖像。
[0156]以上，關(guān)于本發(fā)明的一個(gè)或者多個(gè)形態(tài)的圖像處理裝置以及圖像處理方法，根據(jù)實(shí)施方式進(jìn)行了說明，但本發(fā)明并不限定于該實(shí)施方式。在不超出本發(fā)明的宗旨的情況下，將本領(lǐng)域技術(shù)人員想出的各種變形方式結(jié)合于本實(shí)施方式的形態(tài)，對(duì)不同實(shí)施方式的結(jié)構(gòu)要素進(jìn)行組合而構(gòu)成的形態(tài)也都屬于本發(fā)明的一個(gè)或者多個(gè)形態(tài)的范圍內(nèi)。
[0157]工業(yè)實(shí)用性
[0158]本發(fā)明能夠利用于民用或者業(yè)務(wù)用的攝像裝置(數(shù)碼靜態(tài)相機(jī)、攝像機(jī))或者便攜式終端等設(shè)備，尤其可利用于，能夠根據(jù)由攝像裝置以不同的攝影參數(shù)拍攝的多個(gè)圖像和深度信息，在切換圖像的同時(shí)生成變焦圖像的圖像處理裝置以及圖像處理方法利用。
[0159]符號(hào)說明
[0160]1、la、lb、lc、Id、le、2、2a、2b、2c、2e、8a、8b、9 圖像
[0161] 2b’、3、4、6、7變焦圖像
[0162]10、lla、lib、11c、I Id、I If、12a、12b、20、21b、22a、22b、30、31c、，32a、32b被攝體
[0163]100,200,300圖像處理裝置
[0164]100a 最小結(jié)構(gòu)部
[0165]101攝影部
[0166]102 確定部
[0167]103合成部
[0168]104 顯示部
[0169]105設(shè)定部
[0170]106圖像生成部
[0171]207 檢測(cè)部
[0172]208 校正部
[0173]309決定部
[0174]3001,3002,3003 對(duì)焦區(qū)域
[0175] 3004 合成對(duì)焦區(qū)域
【權(quán)利要求】
1.一種圖像處理裝置，具備: 確定部，確定對(duì)同一被攝體進(jìn)行拍攝的、對(duì)焦位置不同的多個(gè)圖像各自的第一對(duì)焦區(qū)域；以及 顯示部，顯示上述多個(gè)圖像中的第一圖像， 在上述顯示部顯示的上述第一圖像的規(guī)定位置受指定的情況下，從上述多個(gè)圖像中至少選擇第二圖像，并在上述顯示部顯示被選擇的上述第二圖像，上述第二圖像是具有包含上述規(guī)定位置的上述第一對(duì)焦區(qū)域的圖像。
2.如權(quán)利要求1所述的圖像處理裝置， 上述圖像處理裝置還具備合成部，該合成部通過合成由上述確定部確定的多個(gè)圖像各自的第一對(duì)焦區(qū)域的合計(jì)區(qū)域，來生成第二對(duì)焦區(qū)域， 上述顯示部顯示上述第一圖像，并顯示被重疊在上述第一圖像上的上述第二對(duì)焦區(qū)域。
3.如權(quán)利要求1或者2所述的圖像處理裝置， 上述圖像處 理裝置還具備攝影部，該攝影部通過在時(shí)間上連續(xù)拍攝攝影參數(shù)不同的多個(gè)圖像，來拍攝上述多個(gè)圖像，上述攝影參數(shù)至少包含對(duì)焦位置的信息。
4.如權(quán)利要求1至3的任一項(xiàng)所述的圖像處理裝置， 上述確定部利用與上述多個(gè)圖像分別對(duì)應(yīng)的深度信息，來確定上述多個(gè)圖像各自的第一對(duì)焦區(qū)域。
5.如權(quán)利要求1至4的任一項(xiàng)所述的圖像處理裝置， 上述圖像處理裝置還具備: 設(shè)定部，在上述顯示部顯示的上述第一圖像的上述規(guī)定位置受指定的情況下，從上述多個(gè)圖像中至少選擇上述第二圖像，并對(duì)上述顯示部顯示出上述第二圖像為止的切換方法進(jìn)行設(shè)定；以及 圖像生成部，按照由上述設(shè)定部設(shè)定的上述切換方法，生成至少對(duì)上述第二圖像的包含上述第一對(duì)焦區(qū)域的區(qū)域進(jìn)行擴(kuò)大的變焦圖像， 上述顯示部至少將由上述圖像生成部生成的上述第二圖像的變焦圖像，作為上述第二圖像來顯示。
6.如權(quán)利要求5所述的圖像處理裝置， 上述設(shè)定部還取得與上述多個(gè)圖像分別對(duì)應(yīng)的深度信息，并根據(jù)取得的上述深度信息來設(shè)定上述切換方法。
7.如權(quán)利要求6所述的圖像處理裝置， 上述設(shè)定部根據(jù)取得的上述深度信息來選擇第三圖像，該第三圖像是具有深度值在上述第二圖像的第一對(duì)焦區(qū)域的深度值和上述第一圖像的第一對(duì)焦區(qū)域的深度值之間的第一對(duì)焦區(qū)域的圖像，并且，上述設(shè)定部將上述切換方法設(shè)定為:在上述顯示部顯示出上述第二圖像為止的期間，在上述顯示部顯示上述第三圖像， 上述圖像生成部按照上述切換方法，至少生成第一變焦圖像和第二變焦圖像，上述第一變焦圖像是對(duì)包含與上述第二圖像的上述第一對(duì)焦區(qū)域?qū)?yīng)的上述第三圖像的區(qū)域和上述第三圖像的上述第一對(duì)焦區(qū)域的區(qū)域進(jìn)行擴(kuò)大的圖像，上述第二變焦圖像是對(duì)包含上述第二圖像的上述第一對(duì)焦區(qū)域的區(qū)域進(jìn)行擴(kuò)大的圖像，上述顯示部對(duì)由上述圖像生成部生成的上述第一變焦圖像和上述第二變焦圖像，按照此順序進(jìn)行顯示。
8.如權(quán)利要求6所述的圖像處理裝置， 上述設(shè)定部將上述切換方法設(shè)定為:在上述顯示部顯示出上述第二圖像為止的期間，在上述顯示部顯示通過按規(guī)定比例合成上述第二圖像以及上述第一圖像而成的第三圖像， 上述圖像生成部按照上述切換方法，至少生成第一變焦圖像和第二變焦圖像，上述第一變焦圖像是對(duì)包含與上述第二圖像的上述第一對(duì)焦區(qū)域?qū)?yīng)的上述第三圖像的區(qū)域和上述第三圖像的第一對(duì)焦區(qū)域的區(qū)域進(jìn)行擴(kuò)大的圖像，上述第二變焦圖像是對(duì)包含上述第二圖像的第一對(duì)焦區(qū)域的區(qū)域進(jìn)行擴(kuò)大的圖像， 上述顯示部對(duì)由上述圖像生成部生成的上述第一變焦圖像和上述第二變焦圖像，按照此順序進(jìn)行顯示。
9.如權(quán)利要求1至8的任一項(xiàng)所述的圖像處理裝置， 上述圖像處理裝置還具備決定部，該決定部自動(dòng)決定并指定上述規(guī)定位置。
10.如權(quán)利要求9所述的圖像處理裝置， 上述圖像處理裝置還具備合成部，該合成部通過合成由上述確定部確定的多個(gè)圖像各自的第一對(duì)焦區(qū)域的合計(jì)區(qū)域，來生成第二對(duì)焦區(qū)域， 上述決定部，在由上述合成部生成的上述第二對(duì)焦區(qū)域內(nèi)，決定上述規(guī)定位置。
11.如權(quán)利要求1至10的任一項(xiàng)所述的圖像處理裝置， 上述圖像處理裝置還具備接受部，該接受部接受用戶的輸入，并指定上述規(guī)定位置。
12.如權(quán)利要求1至11的任一項(xiàng)所述的圖像處理裝置， 上述圖像處理裝置還具備: 檢測(cè)部，檢測(cè)上述同一被攝體在上述多個(gè)圖像間的偏位量；以及 校正部，根據(jù)上述檢測(cè)部檢測(cè)出的偏位量，對(duì)上述同一被攝體在上述多個(gè)圖像間的偏位量進(jìn)行校正。
13.一種圖像處理方法，包括: 確定步驟，確定對(duì)同一被攝體進(jìn)行拍攝的、對(duì)焦位置不同的多個(gè)圖像各自的第一對(duì)焦區(qū)域；以及 顯示步驟，在顯示部顯示上述多個(gè)圖像中的第一圖像， 在上述顯示步驟顯示的上述第一圖像的規(guī)定位置受指定的情況下，從上述多個(gè)圖像中至少選擇第二圖像，并在上述顯示部顯示被選擇的上述第二圖像，上述第二圖像是具有包含上述規(guī)定位置的上述第一對(duì)焦區(qū)域的圖像。
14.一種集成電路: 具備確定部，該確定部確定對(duì)同一被攝體進(jìn)行拍攝的、對(duì)焦位置不同的多個(gè)圖像各自的第一對(duì)焦區(qū)域， 在顯示上述多個(gè)圖像中的第一圖像的顯示部所顯示的上述第一圖像的規(guī)定位置受指定的情況下，從上述多個(gè)圖像中至少選擇第二圖像，并在上述顯示部顯示被選擇的上述第二圖像，上述第二圖像是具有包含上述規(guī)定位置的上述第一對(duì)焦區(qū)域的圖像。
【文檔編號(hào)】H04N5/232GK104081755SQ201380007444
【公開日】2014年10月1日 申請(qǐng)日期:2013年10月1日 優(yōu)先權(quán)日:2012年11月30日
【發(fā)明者】山田整 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社