本發(fā)明涉及攝像裝置、圖像取得方法以及圖像取得程序以及存儲(chǔ)介質(zhì)。

背景技術(shù)：

公知有如下的攝像裝置：通過使對被攝體進(jìn)行攝像的攝像元件的一部分像素(以下，稱為相位差像素。)的光學(xué)特性與其他的攝像像素不同以用于焦點(diǎn)檢測，而不需要用于焦點(diǎn)檢測的2次光學(xué)系統(tǒng)(例如，參照專利文獻(xiàn)1。)。

相位差像素與通常的攝像像素開口等不同，由于取得與攝像像素不同的像素值，因此，失去了與周邊的像素值的連續(xù)性，當(dāng)繼續(xù)進(jìn)行通常的圖像化處理時(shí)，會(huì)發(fā)現(xiàn)存在傷痕。作為解決該問題的方法，公知有通過使用了周邊的攝像像素的像素值的插值對與相位差像素的位置相當(dāng)?shù)南袼刂颠M(jìn)行校正的方法。

此外，公知有將使攝像元件偏移地進(jìn)行拍攝而得的多張低分辨率的拜耳排列圖像配置于高分辨率區(qū)域上，來取得更高分辨率的圖像的技術(shù)(以下，稱為像素偏移超分辨率重構(gòu)。)(例如，參照專利文獻(xiàn)2。)。

現(xiàn)有技術(shù)文獻(xiàn)

專利文獻(xiàn)

專利文獻(xiàn)1：日本特許第5371331號公報(bào)

專利文獻(xiàn)2：日本特開2015-076796號公報(bào)

技術(shù)實(shí)現(xiàn)要素：

發(fā)明要解決的課題

當(dāng)通過能夠進(jìn)行基于相位差像素的像面焦點(diǎn)檢測的裝置執(zhí)行像素偏移超分辨率重構(gòu)時(shí)，不容易將相位差像素變更為通常的攝像像素，不得不利用通過插值進(jìn)行校正而得的像素值。但是，在像素值的空間的變動(dòng)劇烈的被攝體區(qū)域中，如果是攝像像素，則對于得到的像素值，大多數(shù)情況下具有誤差，有時(shí)通過像素偏移超分辨率重構(gòu)得到的高分辨率圖像的分辨率劣化。此外，在像素偏移超分辨率重構(gòu)中，有時(shí)會(huì)產(chǎn)生由于多張低分辨率圖像的拍攝時(shí)間不同而產(chǎn)生的像素值變動(dòng)所導(dǎo)致的偽像。

本發(fā)明是鑒于上述情況而完成的，其目的在于提供能夠?qū)ο辔徊钕袼氐牟逯嫡`差導(dǎo)致的分辨率劣化以及低分辨率圖像間的像素值變動(dòng)導(dǎo)致的偽像的雙方進(jìn)行校正的攝像裝置、圖像取得方法、圖像取得程序以及存儲(chǔ)介質(zhì)。

用于解決課題的手段

本發(fā)明的一個(gè)方式是攝像裝置，其中，該攝像裝置具有：攝像元件，其具有通常攝像像素和相位差檢測像素，該通常攝像像素周期性地具有包含多個(gè)顏色的濾色器，該相位差檢測像素用于焦點(diǎn)檢測；移位部，其使該攝像元件以小數(shù)像素單位的移位量向規(guī)定的移位方向移位；相位差像素校正部，其通過插值將利用所述相位差檢測像素取得的像素值校正為與通常攝像像素相當(dāng)；像素存儲(chǔ)部，其將該相位差像素校正部進(jìn)行校正后的所述攝像元件的各所述像素的像素值配置于與所述移位部的移位方向和移位量對應(yīng)的存儲(chǔ)區(qū)域來存儲(chǔ)；以及高分辨率圖像合成部，其通過對存儲(chǔ)于該像素存儲(chǔ)部的多個(gè)像素的像素值進(jìn)行合成來生成分辨率比所述攝像元件的分辨率高的高分辨率圖像，所述移位部使所述攝像元件移位，以使得對于設(shè)置于所述通常攝像像素的至少1種濾色器的特定顏色，在所述高分辨率圖像中的與所述相位差檢測像素相同的像素位置處，存在與所述特定顏色對應(yīng)的包含至少1個(gè)所述通常攝像像素的像素值在內(nèi)的多個(gè)像素值，所述高分辨率圖像合成部以規(guī)定的合成比率將與所述特定顏色對應(yīng)的多個(gè)像素值合成。

根據(jù)本方式，通過移位部使具有通常攝像像素和相位差檢測像素的攝像元件移位而反復(fù)攝像，在通過相位差像素校正部將利用相位差像素而取得的像素值校正為與通常攝像像素相當(dāng)之后，通過像素存儲(chǔ)部將其配置于與移位部的移位方向和移位量對應(yīng)的存儲(chǔ)區(qū)域來存儲(chǔ)，通過高分辨率圖像合成部將存儲(chǔ)于存儲(chǔ)區(qū)域的多個(gè)像素的像素值合成，由此，生成分辨率比攝像元件的分辨率高的高分辨率圖像。

在該情況下，移位部使攝像元件移位，以使得與特定顏色對應(yīng)的包含通常攝像像素的像素值在內(nèi)的多個(gè)像素值存在于高分辨率圖像中的與相位差檢測像素相同的像素位置，高分辨率圖像合成部以規(guī)定的合成比率將與特定顏色對應(yīng)的多個(gè)像素值合成，因此，在高分辨率圖像的合成中，能夠不使用相位差檢測像素的像素值而使用通常攝像像素的像素值來合成高分辨率圖像，能夠防止分辨率的劣化。此外，通過將未在同一時(shí)刻取得的多個(gè)像素的像素值合成，能夠降低照明等的變動(dòng)導(dǎo)致的像素值差的產(chǎn)生，抑制偽像的產(chǎn)生。

在上述方式中，可以是，所述高分辨率圖像合成部在所述高分辨率圖像中的至少與相位差檢測像素對應(yīng)的位置，根據(jù)該位置的對比度對所述合成比率進(jìn)行控制。

在對比度大的區(qū)域，相位差檢測像素的插值導(dǎo)致的校正誤差容易變大，照明等的變動(dòng)導(dǎo)致的像素值差不容易明顯。此外，在對比度小的區(qū)域，相位差檢測像素的插值導(dǎo)致的校正誤差小，照明等的變動(dòng)導(dǎo)致的像素值差容易明顯。因此，通過根據(jù)對比度來控制合成比率，能夠抑制由校正的誤差和照明等的變動(dòng)而導(dǎo)致的像素值差的影響。

在上述方式中，可以是，該攝像裝置具有運(yùn)動(dòng)物體檢測部，該運(yùn)動(dòng)物體檢測部根據(jù)在相同顏色中存在多個(gè)像素值的像素的像素值來檢測其位置的運(yùn)動(dòng)物體程度，所述高分辨率圖像合成部根據(jù)其位置的運(yùn)動(dòng)物體程度來對所述合成比率進(jìn)行控制。

這樣，在存在運(yùn)動(dòng)物體的區(qū)域，由于根據(jù)攝像時(shí)刻與配置的關(guān)系，運(yùn)動(dòng)物體的像素值與背景的像素值在空間方向上不連續(xù)地配置，因此，通過根據(jù)運(yùn)動(dòng)物體程度控制多個(gè)像素值的合成比率，能夠使圖像的混亂平均而降低混亂情況。

此外，在上述方式中，可以是，所述運(yùn)動(dòng)物體檢測部不將所述相位差檢測像素的校正后的像素值用于所述運(yùn)動(dòng)物體程度的檢測。

這樣，由于在相位差檢測像素的位置，運(yùn)動(dòng)物體檢測的精度下降，因此，通過不使用該像素值，能夠高精度地進(jìn)行運(yùn)動(dòng)物體程度的檢測。

此外，本發(fā)明的其他的方式是圖像取得方法，其中，該圖像取得方法包含如下步驟：移位步驟，使攝像元件以小數(shù)像素單位的移位量向規(guī)定的移位方向移位，該攝像元件具有通常攝像像素和相位差檢測像素，該通常攝像像素周期性地具有包含多個(gè)顏色的濾色器，該相位差檢測像素用于焦點(diǎn)檢測；相位差像素校正步驟，通過插值將利用所述相位差檢測像素取得的像素值校正為與通常攝像像素相當(dāng)；像素存儲(chǔ)步驟，將在該相位差像素校正步驟中進(jìn)行校正后的所述攝像元件的各所述像素的像素值配置于與所述移位步驟的移位方向和移位量對應(yīng)的存儲(chǔ)區(qū)域來存儲(chǔ)；以及高分辨率圖像合成步驟，對通過該像素存儲(chǔ)步驟存儲(chǔ)的多個(gè)像素的像素值進(jìn)行合成，由此，生成分辨率比所述攝像元件的分辨率高的高分辨率圖像，在所述移位步驟中，使所述攝像元件移位，以使得對于設(shè)置于所述通常攝像像素的至少1種濾色器的特定顏色，在所述高分辨率圖像中的與所述相位差檢測像素相同的像素位置處，存在與所述特定顏色對應(yīng)的包含至少1個(gè)所述通常攝像像素的像素值在內(nèi)的多個(gè)像素值，在所述高分辨率圖像合成步驟中，以規(guī)定的合成比率將與所述特定顏色對應(yīng)的多個(gè)像素值合成。

此外，本發(fā)明的其他的方式是圖像取得程序，其使計(jì)算機(jī)執(zhí)行如下步驟：移位步驟，使攝像元件以小數(shù)像素單位的移位量向規(guī)定的移位方向移位，該攝像元件具有通常攝像像素和相位差檢測像素，該通常攝像像素周期性地具有包含多個(gè)顏色的濾色器，該相位差檢測像素用于焦點(diǎn)檢測；相位差像素校正步驟，通過插值將利用所述相位差檢測像素取得的像素值校正為與通常攝像像素相當(dāng)；像素存儲(chǔ)步驟，將在該相位差像素校正步驟中進(jìn)行校正后的所述攝像元件的各所述像素的像素值配置于與所述移位步驟的移位方向和移位量對應(yīng)的存儲(chǔ)區(qū)域來存儲(chǔ)；以及高分辨率圖像合成步驟，對通過該像素存儲(chǔ)步驟存儲(chǔ)的多個(gè)像素的像素值進(jìn)行合成，由此，生成分辨率比所述攝像元件的分辨率高的高分辨率圖像，其中，在所述移位步驟中，使所述攝像元件移位，以使得對于設(shè)置于所述通常攝像像素的至少1種濾色器的特定顏色，在所述高分辨率圖像中的與所述相位差檢測像素相同的像素位置處，存在與所述特定顏色對應(yīng)的包含至少1個(gè)所述通常攝像像素的像素值在內(nèi)的多個(gè)像素值，在所述高分辨率圖像合成步驟中，以規(guī)定的合成比率將與所述特定顏色對應(yīng)的多個(gè)像素值合成。

此外，本發(fā)明的其他的方式是存儲(chǔ)介質(zhì)，其是存儲(chǔ)圖像取得程序的非暫時(shí)的計(jì)算機(jī)可讀取的存儲(chǔ)介質(zhì)，該圖像取得程序使計(jì)算機(jī)執(zhí)行如下步驟：移位步驟，使攝像元件以小數(shù)像素單位的移位量向規(guī)定的移位方向移位，該攝像元件具有通常攝像像素和相位差檢測像素，該通常攝像像素周期性地具有包含多個(gè)顏色的濾色器，該相位差檢測像素用于焦點(diǎn)檢測；相位差像素校正步驟，通過插值將利用所述相位差檢測像素取得的像素值校正為與通常攝像像素相當(dāng)；像素存儲(chǔ)步驟，將在該相位差像素校正步驟中進(jìn)行校正后的所述攝像元件的各所述像素的像素值配置于與所述移位步驟的移位方向和移位量對應(yīng)的存儲(chǔ)區(qū)域來存儲(chǔ)；以及高分辨率圖像合成步驟，對通過該像素存儲(chǔ)步驟存儲(chǔ)的多個(gè)像素的像素值進(jìn)行合成，由此，生成分辨率比所述攝像元件的分辨率高的高分辨率圖像，其中，在所述移位步驟中，使所述攝像元件移位，以使得對于設(shè)置于所述通常攝像像素的至少1種濾色器的特定顏色，在所述高分辨率圖像中的與所述相位差檢測像素相同的像素位置處，存在與所述特定顏色對應(yīng)的包含至少1個(gè)所述通常攝像像素的像素值在內(nèi)的多個(gè)像素值，在所述高分辨率圖像合成步驟中，以規(guī)定的合成比率將與所述特定顏色對應(yīng)的多個(gè)像素值合成。

發(fā)明效果

根據(jù)本發(fā)明，發(fā)揮了能夠?qū)ο辔徊钕袼氐牟逯嫡`差導(dǎo)致的分辨率劣化以及低分辨率圖像間的像素值變動(dòng)導(dǎo)致的偽像的雙方進(jìn)行校正的效果。

附圖說明

圖1是示出本發(fā)明的一個(gè)實(shí)施方式的攝像裝置的框圖。

圖2是局部地示出圖1的攝像裝置的攝像元件的像素配置的一例的圖。

圖3是示出通過圖1的攝像裝置的相位差像素校正部輸出的像素值的一例的圖。

圖4是示出圖1的攝像裝置中的移位控制部的移位控制的一例的時(shí)序圖。

圖5A是示出通過圖4的移位控制得到的Gr像素或者Gp像素的高分辨率配置數(shù)據(jù)的像素配置例的圖。

圖5B是示出通過圖4的移位控制得到的Gb像素的高分辨率配置數(shù)據(jù)的像素配置例的圖。

圖5C是示出通過圖4的移位控制得到的R像素的高分辨率配置數(shù)據(jù)的像素配置例的圖。

圖5D是示出通過圖4的移位控制得到的B像素的高分辨率配置數(shù)據(jù)的像素配置例的圖。

圖6是示出圖5A以及圖5B所示的Gr像素或者Gp像素的像素值和Gb像素的像素值的加權(quán)平均中使用的權(quán)重與對比度的關(guān)系的圖。

圖7是示出圖1的攝像裝置的變形例的框圖。

圖8是示出通過圖7的運(yùn)動(dòng)物體檢測部檢測的運(yùn)動(dòng)物體程度與Gb的權(quán)重的關(guān)系的圖。

具體實(shí)施方式

以下，參照附圖對本發(fā)明的一個(gè)實(shí)施方式的攝像裝置100以及圖像取得方法進(jìn)行說明。

本實(shí)施方式的攝像裝置100如圖1所示具有攝像元件101、相位差像素校正部102、移位機(jī)構(gòu)(移位部)200、移位控制部201、像素存儲(chǔ)部202以及高分辨率圖像合成部203。

攝像元件101如圖2所示具有：包含多個(gè)顏色Gr、Gb、R、B的濾色器的拜耳排列的攝像像素(以下，稱為Gr像素、Gb像素、R像素、B像素。)；以及將Gr像素的一部分在縱橫上隔開1個(gè)進(jìn)行置換而得的相位差像素Ph。例如通過配置偏移的縫(省略圖示)而替代濾色器，相位差像素Ph能夠取得相位差圖像信息。

相位差像素校正部102根據(jù)從攝像元件101接受的像素值來通過插值對相位差像素的像素值進(jìn)行校正(相位差像素校正步驟)。

移位機(jī)構(gòu)200能夠使攝像元件101在與其光軸中心垂直的2方向上，例如，在攝像元件101的中心軸如圖1所示那樣配置為大致水平的情況下，與中心軸垂直的水平方向以及鉛直方向上以小數(shù)像素單位移位。

移位控制部201按照每次攝像來對通過移位機(jī)構(gòu)200使攝像元件101移位的方向和移位量進(jìn)行控制(移位步驟)。

像素存儲(chǔ)部202根據(jù)通過移位控制部201控制的移位方向以及移位量將來自相位差像素校正部102的像素值數(shù)據(jù)配置于規(guī)定的位置(像素存儲(chǔ)步驟)。

高分辨率圖像合成部203對由像素存儲(chǔ)部202配置的像素值實(shí)施后述的合成處理，合成高分辨率的靜止圖像并輸出(高分辨率圖像合成步驟)。

未圖示的光學(xué)系統(tǒng)對來自被攝體的光進(jìn)行聚光，當(dāng)在攝像元件101的像面上形成被攝體的光學(xué)像時(shí)，攝像元件101按照每個(gè)像素，輸出與在其位置入射的被攝體的光學(xué)像對應(yīng)的像素值。

相位差像素校正部102對來自攝像元件101的像素值中的相位差像素Ph的像素值使用其附近的通常攝像像素的像素值進(jìn)行插值，計(jì)算像素值Gp。

插值方法存在對在傾斜方向上相鄰的4個(gè)Gb像素的像素值進(jìn)行平均的簡單的方法和檢測像素值的連續(xù)方向來選擇用于插值的像素值的復(fù)雜的方法等。由于越是復(fù)雜的方法，越能夠抑制插值誤差，但向裝置的安裝變得困難，因此，可以按照與畫質(zhì)劣化的平衡來進(jìn)行選擇。

移位控制部201進(jìn)行控制，以使得如圖5A以及圖5B所示，在構(gòu)成為棋盤形圖案的高分辨率配置區(qū)域的同一位置上分別配置1個(gè)Gr像素或者Gp像素以及Gb像素。Gr像素、Gp像素以及Gb像素是與特定顏色G對應(yīng)的像素。

在圖4中示出本實(shí)施方式的攝像裝置100中的移位控制部201的控制方法。

在攝像張數(shù)N為N＝8且生成縱橫2倍的高分辨率圖像時(shí)，如圖4所示那樣，使具有圖2的拜耳排列構(gòu)造的攝像元件101以1張為基準(zhǔn)，移位并且按時(shí)間序列拍攝8張，取得低分辨率圖像，該移位的量相當(dāng)于：

第2張是在X方向上0.5像素，在Y方向上0.5像素，

第3張是在X方向上1.0像素，在Y方向上0.0像素，

第4張是在X方向上1.5像素，在Y方向上0.5像素，

第5張是在X方向上1.0像素，在Y方向上1.0像素，

第6張是在X方向上1.5像素，在Y方向上1.5像素，

第7張是在X方向上0.0像素，在Y方向上1.0像素，

第8張是在X方向上0.5像素，在Y方向上1.5像素。

當(dāng)在通過相位差像素校正部102對這樣取得的低分辨率圖像進(jìn)行校正后，通過像素存儲(chǔ)部202進(jìn)行像素配置時(shí)，成為圖5A至圖5D所示的高分辨率配置數(shù)據(jù)。圖5A至圖5D示出配置有圖3的縱橫4像素的范圍。

圖5A表示配置有第1張至第8張的Gr像素或者Gp像素的高分辨率配置數(shù)據(jù)(像素內(nèi)的數(shù)值表示攝像張數(shù))。此外，圖5B表示配置有第1張至第8張的Gb像素的高分辨率配置數(shù)據(jù)。

在同一位置分別配置1個(gè)Gr像素或者Gp像素和Gb像素，至少1個(gè)是基于通常的攝像像素的顏色G的像素。此外，對于R像素和B像素，也能夠得到同樣地配置為棋盤形圖案的高分辨率配置數(shù)據(jù)(圖5C以及圖5D)。

高分辨率圖像合成部203根據(jù)像素存儲(chǔ)部202所生成的(Gr或者Gp、Gb、R、B的棋盤狀的)高分辨率配置數(shù)據(jù)生成RGB三板數(shù)據(jù)。

這里，RGB顏色中的G的值是對同一位置的Gr或者Gp和Gb進(jìn)行加權(quán)平均而成為1個(gè)像素值Gs。

來自相位差像素的Gp像素的位置中的Gb像素的加法權(quán)重W＿Gb(0至1)如以下那樣計(jì)算。

首先，根據(jù)Gp像素位置附近的Gb像素的像素值計(jì)算該位置的局部對比度值。這里，利用Gb像素是由于，一般情況下G顏色能夠代用作亮度值，并且在本實(shí)施方式中不存在相位差像素。

這里，找出以該位置為中心的5×5像素的范圍的最大值Gb＿max和最小值Gb_min，

作為對比度值contr＝Gb＿max-Gb＿min

進(jìn)行計(jì)算。

Gb側(cè)的權(quán)重：W＿Gb＝f1(contr)

這里，函數(shù)f1如圖6那樣是對比度越大則越接近1.0，對比度越小則越接近0.5的函數(shù)。函數(shù)f1根據(jù)圖像的噪聲電平和插值的方法等進(jìn)行調(diào)整即可。

此外，在不來自相位差像素的Gr像素的位置，W＿Gb＝0.5。

而且，加權(quán)平均值Gs為，

Gs＝Gb*W_Gb+Gr*(1.0-W_Gb) (1)。

在理想的狀況下，在相位差像素位置，只利用Gb即可，但由于同一位置的Gr像素和Gb像素在結(jié)構(gòu)上未在同一時(shí)刻取得，因此，有時(shí)因照明等的變動(dòng)而產(chǎn)生像素值差，通過對Gr像素和Gb像素的像素值進(jìn)行平均，具有如下效果：抑制該像素值差作為偽像而顯現(xiàn)于輸出圖像上。

在對比度大的區(qū)域，由于相位差像素插值的誤差容易變大，因此，通過使Gb像素的像素值的權(quán)重變大，能夠接近本來的值，使被攝體本來的分辨率再現(xiàn)。另一方面，照明等的變動(dòng)導(dǎo)致的像素值差在對比度高的區(qū)域不容易明顯。

相反地，在對比度小的區(qū)域，插值導(dǎo)致的誤差小，相反地，在僅相位差像素位置成為Gb像素時(shí)，照明等的變動(dòng)導(dǎo)致的差在與Gb像素和Gr像素的像素值均等平均的周邊之間變得明顯，因此，優(yōu)選與周圍同樣地，與Gr像素的像素值均等地進(jìn)行平均。

高分辨率圖像合成部203對在這樣生成的Gs、R、B的棋盤形圖案上不存在像素值的位置進(jìn)行插值而作為RGB三板數(shù)據(jù)而輸出。最后，未圖示的圖像處理部接受RGB三板數(shù)據(jù)，進(jìn)行灰度轉(zhuǎn)換等處理，生成顯示或保存用的輸出圖像。

這樣，根據(jù)本實(shí)施方式的攝像裝置100，具有如下優(yōu)點(diǎn)：以在構(gòu)成為棋盤形圖案的高分辨率配置數(shù)據(jù)的同一位置分別配置1個(gè)Gr像素或者Gp像素和Gb像素的方式，控制移位方向以及移位量，將得到的像素值以與該像素的局部對比度對應(yīng)的權(quán)重進(jìn)行加權(quán)平均，因此，能夠校正相位差像素的插值誤差，并且也能夠有效校正在低分辨率圖像之間產(chǎn)生的變動(dòng)。由此，能夠抑制偽像的產(chǎn)生并且防止分辨率的劣化。

與此相對，在專利文獻(xiàn)1中，通過相位差像素的校正控制利用空間頻率的高度(標(biāo)準(zhǔn)偏差/平均值)。空間頻率是與對比度一部分類似的概念，但相比于對比度，需要計(jì)算方法復(fù)雜且大量的計(jì)算。根據(jù)本實(shí)施方式，在即使頻率高振幅成分也小的情況下，由于校正導(dǎo)致的誤差具有不太明顯的傾向，因此，在對比度的利用上具有優(yōu)點(diǎn)。

此外，基于G像素的對比度的加權(quán)平均無需僅限于相位差像素，為了提高圖像的連續(xù)性，可以對全部G像素進(jìn)行。即使在該情況下，當(dāng)僅利用Gb像素時(shí)，各像素位置的攝像時(shí)刻不同，因此，照明等的變動(dòng)導(dǎo)致的差在Gb高分辨率配置數(shù)據(jù)上作為相鄰像素間的像素值差而顯現(xiàn)，因此，與Gr像素的像素值的平均有效。

另外，在本實(shí)施方式中，如圖7所示?？梢赃€具有運(yùn)動(dòng)物體檢測部204。

運(yùn)動(dòng)物體檢測部204按照每個(gè)像素從來自像素存儲(chǔ)部202的高分辨率配置數(shù)據(jù)檢測在多張低分辨率圖像拍攝中是否存在運(yùn)動(dòng)物體。

而且，在運(yùn)動(dòng)物體檢測部204中，在檢測為存在運(yùn)動(dòng)物體的區(qū)域，根據(jù)低分辨率圖像的攝像與運(yùn)動(dòng)物體的移動(dòng)的時(shí)刻，利用存在Gb像素和Gr像素的像素值能夠區(qū)分是運(yùn)動(dòng)物體與背景中的哪一個(gè)的像素、且其差分值變大的情況，來按照每個(gè)像素生成運(yùn)動(dòng)物體存在的可能性越高則越大的值(運(yùn)動(dòng)物體程度，Pmove)。

此時(shí)，在相位差像素的位置，有時(shí)差分值由于像素值的插值誤差而變大，從而運(yùn)動(dòng)物體不存在但運(yùn)動(dòng)物體程度變大，因此，期望不進(jìn)行運(yùn)動(dòng)物體檢測。如果需要的話，也可以在相位差像素的位置進(jìn)行運(yùn)動(dòng)物體程度的空間插值。

在檢測到存在運(yùn)動(dòng)物體的區(qū)域中，根據(jù)攝像時(shí)刻與配置的關(guān)系，運(yùn)動(dòng)物體與背景的像素值在空間方向上不連續(xù)地配置，因此，Gb像素的高分辨率配置數(shù)據(jù)成為運(yùn)動(dòng)物體與背景在空間方向上混入而得的混亂圖像，并且，根據(jù)Gb像素計(jì)算的對比度有時(shí)成為大的值。

例如，在低分辨率攝像中的第1張至第4張是背景，第5張至第8張是運(yùn)動(dòng)物體的區(qū)域中，在圖5B的Gb像素的高分辨率配置數(shù)據(jù)中，背景的像素值與運(yùn)動(dòng)物體的像素值每隔2行交替配置。此外，此時(shí)，在圖5A的Gr像素的高分辨率配置數(shù)據(jù)中，背景與運(yùn)動(dòng)物體相反。

在該區(qū)域中，Gr像素的高分辨率配置數(shù)據(jù)也同樣地混亂，但由于拍攝時(shí)刻與同一像素位置的Gb像素不同，因此，通過將Gb像素的像素值與Gr像素的像素值均等地進(jìn)行平均，能夠降低混亂情況。

為了實(shí)現(xiàn)上述目的，進(jìn)行使基于式(1)中的對比度的Gb權(quán)重W＿Gb隨著運(yùn)動(dòng)物體程度Pmove變大而接近0.5的處理即可。

W_Gb＝f2(W_Gb，Pmove)

在圖8中示出函數(shù)f2的例子。函數(shù)f2只要根據(jù)運(yùn)動(dòng)物體的性質(zhì)等而調(diào)整即可。

在上述實(shí)施方式中，對放大成縱橫2倍的分辨率的情況進(jìn)行了說明，但如果移位機(jī)構(gòu)200的亞像素移位的控制精度充分，則放大倍率也可以設(shè)定為2倍以上。此外，攝像元件101的移位控制部201的移位方向的順序和移位量也可以設(shè)定為任意的方式。

而且，在上述實(shí)施方式中，示出僅在G像素中存在相位差像素的情況，但本發(fā)明不僅限于G像素，也能夠應(yīng)用于在其他的濾色器中存在相位差像素的攝像元件。

此外，除了通過上述那樣的攝像裝置100實(shí)施本實(shí)施方式的圖像取得方法的情況之外，也能夠通過能夠由計(jì)算機(jī)執(zhí)行的圖像取得程序來實(shí)施。在該情況下，CPU等處理器執(zhí)行圖像取得程序，由此，實(shí)施本實(shí)施方式的圖像取得方法。

具體而言，讀出在存儲(chǔ)介質(zhì)中存儲(chǔ)的圖像取得程序，通過CPU等處理器執(zhí)行所讀出的圖像取得程序。這里，存儲(chǔ)介質(zhì)存儲(chǔ)程序或數(shù)據(jù)等，其功能能夠通過光盤(DVD、CD等)、硬盤驅(qū)動(dòng)器或者存儲(chǔ)器(卡片型存儲(chǔ)器、ROM等)等實(shí)現(xiàn)。

標(biāo)號說明

100：攝像裝置；101：攝像元件；102：相位差像素校正部；200：移位機(jī)構(gòu)(移位部)；202：像素存儲(chǔ)部；203：高分辨率圖像合成部；204：運(yùn)動(dòng)物體檢測部。