圖像處理裝置、攝像裝置、圖像處理方法及圖像處理程序的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及圖像處理裝置、攝像裝置、圖像處理方法及圖像處理程序。
【背景技術(shù)】
[0002]作為數(shù)碼相機(jī)，除了具備使用了相位差檢測(cè)方式、對(duì)比度檢測(cè)方式的自動(dòng)對(duì)焦外還具備能夠由使用者手動(dòng)進(jìn)行調(diào)焦的所謂手動(dòng)對(duì)焦模式的相機(jī)已經(jīng)廣為人們所知。
[0003]作為具有手動(dòng)對(duì)焦模式的數(shù)碼相機(jī)，已知采用了如下方法的結(jié)構(gòu):以能夠?qū)Ρ粩z體進(jìn)行確認(rèn)并進(jìn)行調(diào)焦的方式設(shè)置反射鏡，使用了顯示目視的相位差的分裂式微棱鏡屏。另外，也已知采用了確認(rèn)基于目視的對(duì)比度的方法。
[0004]然而，在近年來(lái)普及的省略了反射鏡的數(shù)碼相機(jī)中，由于沒(méi)有反射鏡，因此沒(méi)有顯示相位差并對(duì)被攝體像進(jìn)行確認(rèn)的方法，不得不依賴于對(duì)比度檢測(cè)方式。可是，在該情況下，不能顯示(liquid crystal display:液晶顯示器)等顯示裝置的分辨率以上的對(duì)比度，不得不采用進(jìn)行局部放大等而顯示的方法。
[0005]因此，近年來(lái)，為了在手動(dòng)對(duì)焦模式時(shí)操作者容易進(jìn)行使焦點(diǎn)與被攝體對(duì)焦的作業(yè)，將裂像顯示在即時(shí)預(yù)覽圖像(也稱作實(shí)時(shí)取景圖像)內(nèi)。在此，裂像例如是指如下的分割圖像:是分割成兩份的分割圖像(例如沿上下方向分割后的各圖像)，且根據(jù)焦點(diǎn)的偏離而沿視差產(chǎn)生方向(例如左右方向)產(chǎn)生偏離，當(dāng)處于對(duì)焦的狀態(tài)時(shí)視差產(chǎn)生方向的偏離消失。操作者(例如攝影者)操作手動(dòng)聚焦環(huán)而進(jìn)行對(duì)焦，以使裂像(例如沿上下方向分割后的各圖像)的偏離消失。
[0006]日本特開2009-147665號(hào)公報(bào)(以下，稱作專利文獻(xiàn)I)記載的攝像裝置中，生成對(duì)由來(lái)自攝像光學(xué)系統(tǒng)的光束中的、由瞳分割部分割后的光束形成的第一被攝體像和第二被攝體像分別進(jìn)行光電轉(zhuǎn)換而成的第一圖像和第二圖像。并且，使用這些第一圖像和第二圖像來(lái)生成裂像，并且對(duì)由沒(méi)有被瞳分割部分割的光束形成的第三被攝體像進(jìn)行光電轉(zhuǎn)換而生成第三圖像。并且，將第三圖像顯示于顯示部，并且在第三圖像內(nèi)顯示所生成的裂像，且將從第三圖像提取的顏色信息附加于裂像。通過(guò)如此將從第三圖像提取的顏色信息附加于裂像，能夠使裂像的視覺(jué)確認(rèn)性良好。
[0007]日本特開2000-078607號(hào)公報(bào)(以下，稱作專利文獻(xiàn)2)記載的圖像處理裝置具有對(duì)從圖像輸入裝置輸入的圖像信號(hào)進(jìn)行色彩平衡調(diào)整的色彩平衡調(diào)整處理單元。該色彩平衡調(diào)整處理單元根據(jù)圖像信號(hào)來(lái)推定圖像信號(hào)的圖像取得時(shí)的照明光源的色度，并基于所推定的照明光源的色度對(duì)圖像信號(hào)進(jìn)行色彩平衡調(diào)整。

【發(fā)明內(nèi)容】

[0008]發(fā)明要解決的課題
[0009]然而，專利文獻(xiàn)I記載的攝像裝置中，存在第三圖像的顯示顏色的顏色特性和裂像的顯示顏色的顏色特性近似的情況。在該情況下，存在第三圖像與裂像的邊界線變得難于目視確認(rèn)這樣的問(wèn)題點(diǎn)。
[0010]另外，即使利用專利文獻(xiàn)2記載的圖像處理裝置而對(duì)裂像、除裂像以外的圖像(例如背景圖像)進(jìn)行色彩平衡調(diào)整，也存在除裂像以外的圖像與裂像的邊界線變得難于目視確認(rèn)這樣的問(wèn)題點(diǎn)。
[0011]本發(fā)明鑒于這種實(shí)際情況而提出，其目的在于提供能夠提高第一顯示用圖像與用于對(duì)焦確認(rèn)的第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性的圖像處理裝置、攝像裝置、圖像處理方法及圖像處理程序。
[0012]用于解決課題的手段
[0013]本發(fā)明的第一方式所涉及的圖像處理裝置包括:第一顯示用圖像生成部，基于從包含第一像素組和第二像素組的攝像元件輸出的圖像信號(hào)而生成第一顯示用圖像，上述第一像素組和第二像素組使通過(guò)了攝影透鏡中的第一區(qū)域和第二區(qū)域的被攝體像進(jìn)行光瞳分割而分別成像；第二顯示用圖像生成部，基于從上述第一像素組和第二像素組輸出的第一圖像信號(hào)和第二圖像信號(hào)，生成用于對(duì)焦確認(rèn)的第二顯示用圖像；獲取部，取得由上述第一顯示用圖像生成部生成的上述第一顯示用圖像的顏色信息；確定部，基于由上述獲取部取得的顏色信息，將具有與上述第一顯示用圖像的顏色特性不同的顏色特性的顏色確定為上述第二顯示用圖像的顯示顏色；顯示部，顯示圖像；及顯示控制部，使上述顯示部顯示由上述第一顯示用圖像生成部生成的上述第一顯示用圖像并且在該第一顯示用圖像的顯示區(qū)域內(nèi)顯示由上述第二顯示用圖像生成部生成的上述第二顯示用圖像。由此，與不具有本結(jié)構(gòu)的情況相比，能夠提高第一顯示用圖像與用于對(duì)焦確認(rèn)的第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性。
[0014]本發(fā)明的第二方式在本發(fā)明的第一方式的基礎(chǔ)上，也可以將具有上述不同的顏色特性的顏色設(shè)為能夠目視確認(rèn)是與上述第一顯示用圖像的顏色特性不同的顏色特性這一情況的顏色。由此，與不具有本結(jié)構(gòu)的情況相比，能夠視覺(jué)性地識(shí)別第一顯示用圖像和第二顯不用圖像。
[0015]本發(fā)明的第三方式在本發(fā)明的第一方式或第二方式的基礎(chǔ)上，也可以是，上述獲取部從上述第一顯示用圖像的一部分或全部取得上述顏色信息。由此，與不具有本結(jié)構(gòu)的情況相比，能夠以簡(jiǎn)單的結(jié)構(gòu)使第二顯示用圖像的顏色特性和第一顯示用圖像的顏色特性高精度地不同。
[0016]本發(fā)明的第四方式在本發(fā)明的第一方式或第二方式的基礎(chǔ)上，也可以是，上述獲取部基于上述第一顯示用圖像和上述第一圖像、或者基于上述第一顯示用圖像和上述第二圖像、或基于上述第一顯示用圖像和上述第二顯示用圖像，取得上述顏色信息。由此，與不具有本結(jié)構(gòu)的情況相比，能夠使第二顯示用圖像的顏色特性和第一顯示用圖像的顏色特性高精度地不同。另外，根據(jù)第四技術(shù)方案記載的發(fā)明，即使第一顯示用圖像發(fā)白，第一像素組和第二像素組的靈敏度也較低，因此能夠取得顏色信息。
[0017]本發(fā)明的第五方式在本發(fā)明的第一方式至第四方式中的任一方式的基礎(chǔ)上，也可以是，上述攝像元件具有:用于拍攝上述第一顯示用圖像的通常攝像區(qū)域和用于拍攝上述第二顯示用圖像并且與上述通常攝像區(qū)域相鄰的對(duì)焦確認(rèn)攝像區(qū)域，上述獲取部從上述第一顯示用圖像中的、從上述通常攝像區(qū)域中的與上述對(duì)焦確認(rèn)攝像區(qū)域的邊界側(cè)的邊緣部輸出的圖像取得上述顏色信息。由此，與不具有本結(jié)構(gòu)的情況相比，能夠使第一顯示用圖像與第二顯示用圖像的邊界鮮明。
[0018]本發(fā)明的第六方式在本發(fā)明的第一方式至第五方式中的任一方式的基礎(chǔ)上，也可以將上述顏色信息設(shè)為表示上述第一顯示用圖像的物體顏色的顏色特性的顏色信息。由此，與不具有本結(jié)構(gòu)的情況相比，即使在第一顯示用圖像中與光源色相比物體顏色處于支配地位的情況下，也能夠提高第一顯示用圖像與第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性。
[0019]本發(fā)明的第七方式在本發(fā)明的第六方式的基礎(chǔ)上，也可以將上述顏色特性設(shè)為色相。由此，與不具有本結(jié)構(gòu)的情況相比，能夠以簡(jiǎn)單的結(jié)構(gòu)更進(jìn)一步提高第一顯示用圖像與第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性。
[0020]本發(fā)明的第八方式在本發(fā)明的第六方式或第七方式的基礎(chǔ)上，也可以將具有上述不同的顏色特性的顏色設(shè)為在色相環(huán)中與上述第一顯示用圖像的物體顏色隔開預(yù)先規(guī)定的角度的顏色。由此，與不具有本結(jié)構(gòu)的情況相比，能夠容易地確定適當(dāng)?shù)奈矬w顏色作為具有與第一顯示用圖像的顏色特性不同的顏色特性的顏色。
[0021]本發(fā)明的第九方式在本發(fā)明的第六方式至第八方式中的任一方式的基礎(chǔ)上，也可以將上述第一顯示用圖像的物體顏色的顏色特性設(shè)為上述第一顯示用圖像中的原色成分的構(gòu)成比。由此，與不具有本結(jié)構(gòu)的情況相比，能夠在提高第一顯示用圖像與第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性的基礎(chǔ)上容易地確定適當(dāng)?shù)念伾匦宰鳛榈谝伙@示用圖像的物體顏色的顏色特性。
[0022]本發(fā)明的第十方式在本發(fā)明的第九方式的基礎(chǔ)上，也可以將利用包含減函數(shù)的輸入輸出函數(shù)對(duì)上述構(gòu)成比進(jìn)行轉(zhuǎn)換而得到的轉(zhuǎn)換后的上述構(gòu)成比設(shè)為上述不同的顏色特性。由此，與不具有本結(jié)構(gòu)的情況相比，能夠以簡(jiǎn)單的結(jié)構(gòu)提高第一顯示用圖像與第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性。
[0023]本發(fā)明的第十一方式在本發(fā)明的第九方式的基礎(chǔ)上，也可以將利用顏色轉(zhuǎn)換數(shù)據(jù)對(duì)上述構(gòu)成比進(jìn)行轉(zhuǎn)換而得到的轉(zhuǎn)換后的上述構(gòu)成比設(shè)為上述不同的顏色特性。由此，與不具有本結(jié)構(gòu)的情況相比，能夠以簡(jiǎn)單的結(jié)構(gòu)提高第一顯示用圖像與第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性。
[0024]本發(fā)明的第十二方式在本發(fā)明的第十一方式的基礎(chǔ)上，也可以將上述顏色轉(zhuǎn)換數(shù)據(jù)設(shè)為基于包含減函數(shù)的輸入輸出函數(shù)而生成的顏色轉(zhuǎn)換數(shù)據(jù)。由此，與不具有本結(jié)構(gòu)的情況相比，能夠以簡(jiǎn)單的結(jié)構(gòu)提高第一顯示用圖像與第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性。
[0025]本發(fā)明的第十三方式在本發(fā)明的第一方式至第五方式中的任一方式的基礎(chǔ)上，也可以將上述顏色信息設(shè)為表示上述第一顯示用圖像的光源色的顏色特性的顏色信息。由此，與不具有本結(jié)構(gòu)的情況相比，即使在第一顯示用圖像中與物體顏色相比光源色處于支配地位的情況下，也能夠提高第一顯示用圖像與第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性。
[0026]本發(fā)明的第十四方式在本發(fā)明的第一方式至第十三方式中的任一方式的基礎(chǔ)上，也可以是，將上述第一像素組和第二像素組分別設(shè)為單色的像素組，上述第二顯示用圖像生成部基于從上述第一像素組和第二像素組輸出的上述第一圖像信號(hào)和第二圖像信號(hào)，生成無(wú)彩色的圖像作為上述第二顯示用圖像。由此，與不具有本結(jié)構(gòu)的情況相比，能夠以簡(jiǎn)單的結(jié)構(gòu)得到無(wú)彩色的第二顯示用圖像。
[0027]本發(fā)明的第十五方式在本發(fā)明的第十四方式的基礎(chǔ)上，也可以是，在上述第二顯示用圖像是無(wú)彩色圖像的情況下，上述確定部基于由上述獲取部取得的顏色信息，將具有與上述第一顯示用圖像的顏色特性不同的顏色特性的有彩色確定為上述第二顯示用圖像的顯示顏色。由此，與不具有本結(jié)構(gòu)的情況相比，能夠以簡(jiǎn)單的結(jié)構(gòu)確定作為第二顯示用圖像的顯示顏色的有彩色。
[0028]本發(fā)明的第十六方式在本發(fā)明的第一方式至第十五方式中的任一方式的基礎(chǔ)上，也可以是，在上述第一顯示用圖像和第二顯示用圖像是無(wú)彩色圖像的情況下，上述確定部基于由上述獲取部取得的顏色信息，將具有與上述第一顯示用圖像的顏色特性不同的顏色特性的有彩色確定為上述第二顯示用圖像的顯示顏色。由此，與不具有本結(jié)構(gòu)的情況相比，能夠提高第一顯示用圖像與第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性。
[0029]本發(fā)明的第十七方式在本發(fā)明的第一方式至第十六方式中的任一方式的基礎(chǔ)上，也可以是，上述確定部基于由上述獲取部取得的顏色信息，將在上述第二顯示用圖像中的基于上述第一圖像的區(qū)域和基于上述第二圖像的區(qū)域中不同的有彩色確定為所述第二顯示用圖像的顯示顏色，該有彩色具有與上述第一顯示用圖像的顏色特性不同的顏色特性。由此，與不具有本結(jié)構(gòu)的情況相比，在第二顯示用圖像中基于第一圖像的圖像和基于第二圖像的圖像變得易于視覺(jué)性地識(shí)別。
[0030]本發(fā)明的第十八方式在本發(fā)明的第一方式至第十七方式中的任一方式的基礎(chǔ)上，也可以是，在滿足使上述第一顯示用圖像的顏色特性和上述第二顯示用圖像的顏色特性接近的預(yù)先規(guī)定的條件的情況下，上述確定部基于由上述獲取部取得的顏色信息，將具有以預(yù)先規(guī)定的程度與上述第一顯示用圖像的顏色特性接近的顏色特性的顏色進(jìn)一步確定為上述第二顯示用圖像的顯示顏色。由此，與不具有本結(jié)構(gòu)的情況相比，能夠使第一顯示用圖像與第二顯示用圖像的邊界難于視覺(jué)性地識(shí)別。
[0031]本發(fā)明的第十九方式在本發(fā)明的第一方式至第十八方式中的任一方式的基礎(chǔ)上，也可以是，上述攝像元件具有第三像素組，該第三像素組使被攝體像不進(jìn)行光瞳分割而成像并輸出第三圖像信號(hào)，上述第一顯示用圖像生成部基于從上述第三像素組輸出的上述第三圖像信號(hào)，生成上述第一顯示用圖像。由此，與不具有本結(jié)構(gòu)的情況相比，能夠提高第一顯示用圖像的畫質(zhì)。
[0032]本發(fā)明的第二十方式所涉及的攝像裝置包括:本發(fā)明的第一方式至第十九方式中的任一圖像處理裝置；及存儲(chǔ)從上述攝像元件輸出的圖像的存儲(chǔ)部。由此，與不具有本結(jié)構(gòu)的情況相比，能夠提高第一顯示用圖像與第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性。
[0033]本發(fā)明的第二十一方式所涉及的圖像處理方法包括:第一顯示用圖像生成工序，基于從包含第一像素組和第二像素組的攝像元件輸出的圖像信號(hào)而生成第一顯示用圖像，上述第一像素組和第二像素組使通過(guò)了攝影透鏡中的第一區(qū)域和第二區(qū)域的被攝體像進(jìn)行光瞳分割而分別成像；第二顯示用圖像生成工序，基于從上述第一像素組和第二像素組輸出的第一圖像信號(hào)和第二圖像信號(hào)，生成第二顯示用圖像；獲取工序，取得由上述第一顯示用圖像生成部生成的上述第一顯示用圖像的顏色信息；確定工序，基于由上述獲取工序取得的顏色信息，將具有與上述第一顯示用圖像的顏色特性不同的顏色特性的顏色確定為上述第二顯示用圖像的顯示顏色；及顯示控制工序，使顯示圖像的顯示部顯示由上述第一顯示用圖像生成工序生成的上述第一顯示用圖像并且在該第一顯示用圖像的顯示區(qū)域內(nèi)顯示由上述第二顯示用圖像生成工序生成的上述第二顯示用圖像。由此，與不具有本結(jié)構(gòu)的情況相比，能夠提高第一顯示用圖像與第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性。
[0034]為了實(shí)現(xiàn)上述目的，本發(fā)明的第二十二方式所涉及的程序用于使計(jì)算機(jī)作為本發(fā)明的第一方式至第十九方式中的任一圖像處理裝置中的上述第一顯示用圖像生成部、上述第二顯示用圖像生成部、上述獲取部、上述確定部和上述顯示控制部而發(fā)揮功能。由此，與不具有本結(jié)構(gòu)的情況相比，能夠提高第一顯示用圖像與第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性。
[0035]發(fā)明效果
[0036]根據(jù)本發(fā)明，可得到能夠提高第一顯示用圖像與第二顯示用圖像的邊界線的視覺(jué)確認(rèn)性這樣的效果。
【附圖說(shuō)明】
[0037]圖1是表示第一實(shí)施方式所涉及的作為鏡頭互換式相機(jī)的攝像裝置的外觀的一例的立體圖。
[0038]圖2是表示圖1所示的攝像裝置的背面?zhèn)鹊暮笠晥D。
[0039]圖3是表示第一實(shí)施方式所涉及的攝像裝置的電氣系統(tǒng)的結(jié)構(gòu)的一例的框圖。
[0040]圖4是表示設(shè)于第一實(shí)施方式所涉及的攝像裝置所包含的攝像元件上的濾色器的配置的一例的概略配置圖。
[0041]圖5是用于說(shuō)明根據(jù)圖4所示的濾色器所包含的2X2像素的G像素的像素值來(lái)判別相關(guān)方向的方法的圖。是用于說(shuō)明基本排列圖案的概念的圖。
[0042]圖6是用于說(shuō)明圖4所示的濾色器所包含的基本排列圖案的概念的圖。
[0043]圖7是表示設(shè)于第一實(shí)施方式所涉及的攝像裝置所包含的攝像元件上的遮光構(gòu)件的配置的一例的概略配置圖。
[0044]圖8是表示第一實(shí)施方式所涉及的攝像裝置的攝像元件所包含的相位差像素(第一像素和第二像素)的結(jié)構(gòu)的一例的概略結(jié)構(gòu)圖。
[0045]圖9是表示第一實(shí)施方式所涉及的攝像裝置的主要部分功能的一例的框圖。
[0046]圖10是表示第一實(shí)施方式所涉及的攝像裝置的顯示裝置中的通常圖像和裂像各自的顯示區(qū)域的一例的示意圖。
[0047]圖11是表示作為相對(duì)于第一實(shí)施方式的比較例而顯示于顯示裝置的即時(shí)預(yù)覽圖像中的通常圖像和裂像的一例的畫面形態(tài)圖。
[0048]圖12是表示第一實(shí)施方式所涉及的攝像裝置中使用的第一輸入輸出函數(shù)的一例的曲線圖。
[0049]圖13是表示第一實(shí)施方式所涉及的攝像裝置中使用的第二輸入輸出函數(shù)的一例的曲線圖。
[0050]圖14是表示由第一實(shí)施方式所涉及的攝像裝置所包含的圖像處理部進(jìn)行的圖像輸出處理的流程的一例的流程圖。
[0051]圖15是表示由第一實(shí)施方式所涉及的攝像裝置所包含的圖像處理部進(jìn)行的WB處理的流程的一例的流程圖。
[0052]圖16是表示由第一實(shí)施方式所涉及的攝像裝置所包含的圖像處理部進(jìn)行的有彩色賦予處理的流程的一例的流程圖。
[0053]圖17是表示由第一實(shí)施方式所涉及的攝像裝置所包含的圖像處理部進(jìn)行的顯示顏色差別化處理的流程的一例的流程圖。
[0054]圖18是表示由第一實(shí)施方式所涉及的攝像裝置所包含的圖像處理部進(jìn)行的顯示顏色同化處理的流程的一例的流程圖。
[0055]圖19是表示是在第一實(shí)施方式中顯示于攝像裝置的顯示裝置上的即時(shí)預(yù)覽圖像且為執(zhí)行了顯示顏色差別化處理后的情況下的通常圖像和裂像的一例的畫面形態(tài)圖。
[0056]圖20是表示是在第一實(shí)施方式中顯示于攝像裝置的顯示裝置上的即時(shí)預(yù)覽圖像且為執(zhí)行了顯示顏色差別化處理后的情況下的通常圖像和用顏色進(jìn)行區(qū)分后的裂像的一例的畫面形態(tài)圖。
[0057]圖21是表示是在第一實(shí)施方式中顯示于攝像裝置的顯示裝置上的即時(shí)預(yù)覽圖像且分別為無(wú)彩色的通常圖像和裂像的一例的畫面形態(tài)圖。
[0058]圖22是表示是在第一實(shí)施方式中顯示于攝像裝置的顯示裝置上的即時(shí)預(yù)覽圖像且為無(wú)彩色的通常圖像和有彩色的裂像的一例的畫面形態(tài)圖。
[0059]圖23是表示是在第一實(shí)施方式中顯示于攝像裝置的顯示裝置上的即時(shí)預(yù)覽圖像且為顏色特性近似的通常圖像和裂像的一例的畫面形態(tài)圖。
[0060]圖24是表示第二實(shí)施方式所涉及的智能手機(jī)的外觀的一例的立體圖。
[0061]圖25是表示第二實(shí)施方式所涉及的智能手機(jī)的電氣系統(tǒng)的主要部分結(jié)構(gòu)的一例的框圖。
【具體實(shí)施方式】
[0062]以下，根據(jù)附圖，對(duì)本發(fā)明所涉及的攝像裝置的實(shí)施方式的一例進(jìn)行說(shuō)明。
[0063][第一實(shí)施方式]
[0