本發(fā)明涉及攝像裝置、圖像處理方法和圖像處理程序。

背景技術(shù)：
在將由光學(xué)系統(tǒng)成像的光學(xué)像轉(zhuǎn)換為電信號的攝像元件中，公知有構(gòu)成為一部分像素輸出焦點(diǎn)檢測用的信號的攝像元件。例如在日本特開2000-156823號公報(bào)中公開了如下的攝像元件的技術(shù)：為了使一部分像素具有基于光瞳相位差方式的測距功能，對該像素的受光面的一部分進(jìn)行遮光。由具有這種測距功能的相位差像素取得的信息例如用于將光學(xué)系統(tǒng)設(shè)定為對焦?fàn)顟B(tài)的自動(dòng)對焦處理。為了針對所有頻率的被攝體得到正確的對焦，優(yōu)選相位差檢測像素配置在攝像元件的整個(gè)面上。但是，當(dāng)配置多個(gè)相位差檢測像素時(shí)，構(gòu)成圖像的像素顯著減少，產(chǎn)生很大的畫質(zhì)劣化。因此，提出了離散配置相位差檢測像素的方式。關(guān)于相位差檢測像素的離散的配置方法，為了檢測所有頻率的相位差，例如如果是用于檢測橫線的像素，則優(yōu)選配置成在垂直方向上盡量沒有間隙。因此，提出了如下研究：在與相位差檢測方向不同的方向上以具有階梯差的方式配置相位差檢測像素，以使得配置成高密度。相位差檢測像素的輸出無法直接作為圖像數(shù)據(jù)進(jìn)行使用。因此，需要進(jìn)行輸出值的校正。因此，考慮利用其周邊的像素的輸出值對相位差檢測像素的輸出值進(jìn)行校正。這里，當(dāng)簡單地根據(jù)周邊的像素的輸出值的平均對相位差檢測像素的輸出值進(jìn)行校正時(shí)，可能產(chǎn)生畫質(zhì)的劣化。特別是在以設(shè)置階梯差的方式配置相位差檢測像素的情況下，產(chǎn)生不規(guī)則的圖案。另一方面，例如在日本特開2010-062640號公報(bào)中公開了如下的校正的方法。即，根據(jù)從相位差檢測像素的周邊的像素輸出的值的標(biāo)準(zhǔn)偏差判斷是否是高頻成分，對相位差檢測像素的輸出值及其周邊的像素的輸出值的利用比例進(jìn)行調(diào)整。但是，這樣，當(dāng)使用根據(jù)周邊的像素值而自適應(yīng)地調(diào)整濾波器系數(shù)的算法時(shí)，電路規(guī)模容易增大，消耗電力容易增大。

技術(shù)實(shí)現(xiàn)要素：
本發(fā)明的目的在于，提供攝像裝置、圖像處理方法和圖像處理程序，針對由包含相位差檢測像素這樣的具有攝像以外的功能的功能性像素在內(nèi)的攝像元件得到的圖像數(shù)據(jù)，實(shí)施抑制運(yùn)算量并提高畫質(zhì)的圖像處理。為了實(shí)現(xiàn)所述目的，根據(jù)本發(fā)明的一個(gè)方式，攝像裝置具有：攝像元件，其具有包含攝像用的通常像素和具有攝像以外的功能的功能性像素在內(nèi)的二維配置的多個(gè)像素，所述功能性像素在規(guī)定的第1方向上以不均等的間隔配置；記錄部，其記錄所述攝像元件中的所述功能性像素的配置；插值方向判斷部，其根據(jù)從所述記錄部取得的所述功能性像素的所述配置，取得作為所述第1方向的方向信息；權(quán)重計(jì)算部，其根據(jù)從所述記錄部取得的所述功能性像素的所述配置，分別計(jì)算所述第1方向上的加權(quán)量即第1權(quán)重和小于所述第1權(quán)重的至少一個(gè)加權(quán)量即第2權(quán)重，該第2權(quán)重是與所述第1方向不同的方向上的加權(quán)量；以及插值處理部，其進(jìn)行如下的像素插值：針對由所述攝像元件得到的圖像數(shù)據(jù)，對由所述第1方向上配置的所述通常像素得到的像素值應(yīng)用所述第1權(quán)重，對由與所述第1方向不同的方向上配置的所述通常像素得到像素值應(yīng)用所述第2權(quán)重，根據(jù)由所述功能性像素的周圍的所述通常像素得到的所述像素值對該功能性像素的像素值進(jìn)行插值。為了實(shí)現(xiàn)所述目的，根據(jù)本發(fā)明的一個(gè)方式，圖像處理方法是對使用攝像元件得到的圖像數(shù)據(jù)實(shí)施的圖像處理方法，該攝像元件具有包含攝像用的通常像素和具有攝像以外的功能的功能性像素在內(nèi)的二維配置的多個(gè)像素，所述功能性像素在規(guī)定的第1方向上以不均等的間隔配置，所述圖像處理方法包括以下步驟：根據(jù)從記錄所述攝像元件中的所述功能性像素的配置的記錄部取得的所述功能性像素的所述配置，取得作為所述第1方向的方向信息；根據(jù)從所述記錄部取得的所述功能性像素的所述配置，分別計(jì)算所述第1方向上的加權(quán)量即第1權(quán)重和小于所述第1權(quán)重的至少一個(gè)加權(quán)量即第2權(quán)重，該第2權(quán)重是與所述第1方向不同的方向上的加權(quán)量；以及進(jìn)行如下的像素插值：針對由所述攝像元件得到的圖像數(shù)據(jù)，對由所述第1方向上配置的所述通常像素得到像素值應(yīng)用所述第1權(quán)重，對由與所述第1方向不同的方向上配置的所述通常像素得到的像素值應(yīng)用所述第2權(quán)重，根據(jù)由所述功能性像素的周圍的所述通常像素得到的所述像素值對該功能性像素的像素值進(jìn)行插值。為了實(shí)現(xiàn)所述目的，根據(jù)本發(fā)明的一個(gè)方式，圖像處理程序用于使計(jì)算機(jī)執(zhí)行對使用攝像元件得到的圖像數(shù)據(jù)實(shí)施的圖像處理，該攝像元件具有包含攝像用的通常像素和具有攝像以外的功能的功能性像素在內(nèi)的二維配置的多個(gè)像素，所述功能性像素在規(guī)定第1方向上以不均等的間隔進(jìn)行配置，其中，所述圖像處理程序用于使計(jì)算機(jī)執(zhí)行以下步驟：根據(jù)從記錄所述攝像元件中的所述功能性像素的配置的記錄部取得的所述功能性像素的所述配置，取得作為所述第1方向的方向信息；根據(jù)從所述記錄部取得的所述功能性像素的所述配置，分別計(jì)算所述第1方向上的加權(quán)量即第1權(quán)重和小于所述第1權(quán)重的至少一個(gè)加權(quán)量即第2權(quán)重，該第2權(quán)重是與所述第1方向不同的方向上的加權(quán)量；以及進(jìn)行如下的像素插值：針對由所述攝像元件得到的圖像數(shù)據(jù)，對由所述第1方向上配置的所述通常像素得到像素值應(yīng)用所述第1權(quán)重，對由與所述第1方向不同的方向上配置的所述通常像素得到的像素值應(yīng)用所述第2權(quán)重，根據(jù)由所述功能性像素的周圍的所述通常像素得到的所述像素值對該功能性像素的像素值進(jìn)行插值。根據(jù)本發(fā)明，能夠提供針對由包含相位差檢測像素這樣的具有攝像以外的功能的功能性像素在內(nèi)的攝像元件得到的圖像數(shù)據(jù)，實(shí)施抑制運(yùn)算量并提高畫質(zhì)的圖像處理的攝像裝置、圖像處理方法和圖像處理程序。附圖說明圖1是示出本發(fā)明的一個(gè)實(shí)施方式的攝像裝置的結(jié)構(gòu)例的概略的框圖。圖2是示出一個(gè)實(shí)施方式的攝像元件的結(jié)構(gòu)例的概略的圖。圖3A是用于說明使用一個(gè)實(shí)施方式的攝像元件的基于相位差法的焦點(diǎn)檢測的原理的圖。圖3B是用于說明使用一個(gè)實(shí)施方式的攝像元件的基于相位差法的焦點(diǎn)檢測的原理的圖。圖4是示出一個(gè)實(shí)施方式的攝像控制電路的結(jié)構(gòu)例的概略的框圖。圖5是示出一個(gè)實(shí)施方式的動(dòng)態(tài)圖像記錄處理的一例的流程圖。圖6A是示出一個(gè)實(shí)施方式的攝像元件的結(jié)構(gòu)例的概略的圖，是示出左開口相位差檢測像素和右開口相位差檢測像素的配置例的圖。圖6B是示出一個(gè)實(shí)施方式的攝像元件的結(jié)構(gòu)例的概略的圖，是示出上開口相位差檢測像素和下開口相位差檢測像素的配置例的圖。圖7A是用于說明像素插值的圖，是示出被攝體像的概略的示意圖。圖7B是用于說明像素插值的圖，是用于說明使用左開口相位差檢測像素或右開口相位差檢測像素的水平方向上相鄰的通常像素的像素值進(jìn)行插值的示意圖。圖7C是用于說明像素插值的圖，是示出使用水平方向上相鄰的通常像素的像素值進(jìn)行插值的情況下得到的圖像的概略的示意圖。圖8A是用于說明像素插值的圖，是用于說明使用左開口相位差檢測像素或右開口相位差檢測像素的垂直方向上相鄰的通常像素的像素值進(jìn)行插值的示意圖。圖8B是用于說明像素插值的圖，是示出使用垂直方向上相鄰的通常像素的像素值進(jìn)行插值的情況下得到的圖像的概略的示意圖。圖9A是用于說明像素插值的圖，是示出被攝體像的概略的示意圖。圖9B是用于說明像素插值的圖，是用于說明使用左開口相位差檢測像素或右開口相位差檢測像素的垂直方向上相鄰的通常像素的像素值進(jìn)行插值的示意圖。圖9C是用于說明像素插值的圖，是示出使用垂直方向上相鄰的通常像素的像素值進(jìn)行插值的情況下得到的圖像的概略的示意圖。圖10A是用于說明像素插值的圖，是示出被攝體像的概略的示意圖。圖10B是用于說明像素插值的圖，是用于說明使用上開口相位差檢測像素或下開口相位差檢測像素的垂直方向上相鄰的通常像素的像素值進(jìn)行插值的示意圖。圖10C是用于說明像素插值的圖，是示出使用垂直方向上相鄰的通常像素的像素值進(jìn)行插值的情況下得到的圖像的概略的示意圖。圖11A是用于說明像素插值的圖，是用于說明使用上開口相位差檢測像素或下開口相位差檢測像素的水平方向上相鄰的通常像素的像素值進(jìn)行插值的示意圖。圖11B是用于說明像素插值的圖，是示出使用水平方向上相鄰的通常像素的像素值進(jìn)行插值的情況下得到的圖像的概略的示意圖。圖12A是用于說明像素插值的圖，是示出被攝體像的概略的示意圖。圖12B是用于說明像素插值的圖，是用于說明使用上開口相位差檢測像素或下開口相位差檢測像素的水平方向上相鄰的通常像素的像素值進(jìn)行插值的示意圖。圖12C是用于說明像素插值的圖，是示出使用水平方向上相鄰的通常像素的像素值進(jìn)行插值的情況下得到的圖像的概略的示意圖。圖13A是用于說明右開口相位差檢測像素的像素插值的圖。圖13B是用于說明上開口相位差檢測像素的像素插值的圖。圖14是示出一個(gè)實(shí)施方式的攝像元件的結(jié)構(gòu)例的概略的圖，是示出功能性像素的配置的一例的示意圖。圖15A是用于說明像素相加的圖。圖15B是用于說明像素相加的圖。具體實(shí)施方式參照附圖對本發(fā)明的一個(gè)實(shí)施方式進(jìn)行說明。圖1是示出作為本發(fā)明的一個(gè)實(shí)施方式的攝像裝置的一例的數(shù)字照相機(jī)1的結(jié)構(gòu)的框圖。這里，在圖1中，帶箭頭的實(shí)線表示數(shù)據(jù)流，帶箭頭的虛線表示控制信號流。圖1所示的數(shù)字照相機(jī)1具有攝影鏡頭11、光圈13、機(jī)械快門15、驅(qū)動(dòng)部17、操作部19、包含攝像元件23和攝像控制電路25的攝像部21、CentralProcessingUnit(CPU)29、顯影處理部31、焦點(diǎn)檢測電路33、視頻編碼器35、顯示部37、總線39、DynamicRandomAccessMemory(DRAM)41、ReadOnlyMemory(ROM)43、記錄介質(zhì)45。攝影鏡頭11是用于在攝像元件23上形成被攝體100的像的由一個(gè)或多個(gè)透鏡構(gòu)成的光學(xué)系統(tǒng)。攝影鏡頭11可以是單焦點(diǎn)鏡頭，也可以是變焦鏡頭。光圈13配置在攝影鏡頭11的光軸上，構(gòu)成為其口徑能夠變化。光圈13限制穿過攝影鏡頭11的來自被攝體100的光束的量。機(jī)械快門15配置在光圈13的后方，構(gòu)成為開閉自如。機(jī)械快門15通過調(diào)節(jié)其開放時(shí)間，對從被攝體100到來的被攝體光束入射到攝像元件23的入射時(shí)間進(jìn)行調(diào)節(jié)。即，機(jī)械快門15對攝像元件23的曝光時(shí)間進(jìn)行調(diào)整。作為機(jī)械快門15，可以采用公知的焦面快門、中心式快門等。驅(qū)動(dòng)部17根據(jù)來自CPU29的控制信號進(jìn)行攝影鏡頭11的焦點(diǎn)調(diào)節(jié)、光圈13的開口直徑控制和機(jī)械快門15的開閉控制。操作部19包括電源按鈕、釋放按鈕、再現(xiàn)按鈕、菜單按鈕這樣的各種操作按鈕和觸摸面板等各種操作部件。能夠通過基于CPU29的處理來識別針對該操作部19的輸入。攝像元件23配置在攝影鏡頭11的光軸上的機(jī)械快門15的后方且通過攝影鏡頭11使被攝體光束成像的位置。攝像元件23構(gòu)成為二維配置有構(gòu)成像素的光電二極管。構(gòu)成攝像元件23的光電二極管生成與受光量對應(yīng)的電荷。光電二極管產(chǎn)生的電荷蓄積在與各光電二極管連接的電容器中。該電容器中蓄積的電荷被作為圖像信號讀出。這里，本實(shí)施方式中的攝像元件23具有多個(gè)不同的電荷的讀出方式。根據(jù)來自攝像控制電路25的控制信號讀出攝像元件23中蓄積的電荷。在構(gòu)成像素的光電二極管的前表面配置有例如拜耳排列的濾色器。拜耳排列具有在水平方向上交替配置R像素和G(Gr)像素的行、以及交替配置G(Gb)像素和B像素的行。并且，在本實(shí)施方式中的攝像元件23中，在一部分配置有相位差檢測像素。即，在攝像元件23中，除了用于取得記錄或顯示用的圖像的攝像像素以外，還設(shè)置有相位差檢測像素。在相位差檢測像素中，與其他像素不同，對一部分區(qū)域進(jìn)行遮光。該相位差檢測像素作為焦點(diǎn)檢測所使用的焦點(diǎn)檢測像素發(fā)揮功能。使用圖2對攝像元件23的結(jié)構(gòu)例進(jìn)行說明。圖2是示出攝像元件23的像素排列例的示意圖。在圖2中，“R”表示設(shè)有紅色濾色器的R像素，“G”表示設(shè)有綠色濾色器的G像素，“B”表示設(shè)有藍(lán)色濾色器的B像素。并且，涂滿黑色的區(qū)域表示被遮光的區(qū)域。圖2示出拜耳排列的例子，但是，濾色器的排列不限于拜耳排列，可以使用各種排列。如上所述，拜耳排列的攝像元件23具有在水平方向上交替配置R像素和G(Gr)像素的行、以及交替配置G(Gb)像素和B像素的行。換言之，拜耳排列的攝像元件23在水平和垂直方向上反復(fù)配置Gr像素、R像素、Gb像素、B像素這4個(gè)像素的組。在本實(shí)施方式中，與設(shè)有紅色濾色器、綠色濾色器或藍(lán)色濾色器的通常像素23a混合來配置設(shè)有遮光膜的相位差檢測像素。相位差檢測像素例如是通過遮光膜對上下左右的任意區(qū)域進(jìn)行遮光的像素。在圖2的例子中，設(shè)置有對左半面進(jìn)行遮光的相位差檢測像素即右開口相位差檢測像素23R、對右半面進(jìn)行遮光的相位差檢測像素即左開口相位差檢測像素23L、對上半面進(jìn)行遮光的相位差檢測像素即下開口相位差檢測像素23B、對下半面進(jìn)行遮光的相位差檢測像素即上開口相位差檢測像素23T。在高像素?cái)?shù)的攝像元件的情況下，由于各個(gè)像素的面積較小，所以，認(rèn)為在接近配置的像素中形成大致相同的像。因此，通過如圖2所示配置相位差檢測像素，能夠利用接近的右開口相位差檢測像素23R和左開口相位差檢測像素23L的對兒來檢測相位差。根據(jù)右開口相位差檢測像素23R和左開口相位差檢測像素23L的對兒，能夠檢測水平方向的相位差。同樣，能夠利用接近的下開口相位差檢測像素23B和上開口相位差檢測像素23T的對兒來檢測相位差。根據(jù)下開口相位差檢測像素23B和上開口相位差檢測像素23T的對兒，能夠檢測垂直方向的相位差。另外，只要具有某種程度的面積即可，遮光面積也可以不是像素區(qū)域的1/2。進(jìn)而，在圖2所示的例子中，右開口相位差檢測像素23R和左開口相位差檢測像素23L配置在Gr像素中，下開口相位差檢測像素23B和上開口相位差檢測像素23T配置在B像素中，但是，這些配置可以適當(dāng)變更。并且，圖2的例子示出了通過對相位差檢測像素的一部分區(qū)域進(jìn)行遮光來進(jìn)行光瞳分割的例子，但是，相位差檢測像素只要能夠選擇性地接收穿過攝影鏡頭11的不同光瞳區(qū)域的成對兒的被攝體光束中的一方即可。因此，也可以不采用對一部分區(qū)域進(jìn)行遮光的結(jié)構(gòu)，例如可以通過光瞳分割用的微鏡頭進(jìn)行光瞳分割。參照圖3A和圖3B對使用圖2所示的攝像元件的基于相位差法的焦點(diǎn)檢測的原理進(jìn)行說明。這里，圖3A示出通常像素23a中的成像狀態(tài)。圖3B示出相位差檢測像素23p中的成像狀態(tài)。當(dāng)設(shè)被攝體為點(diǎn)光源時(shí)，在攝影鏡頭11為對焦?fàn)顟B(tài)時(shí)，從被攝體射出且穿過關(guān)于攝影鏡頭11的光軸中心對稱的不同光瞳區(qū)域的成對兒的被攝體光束在攝像元件23上的同一位置成像。另一方面，在攝影鏡頭11為非對焦?fàn)顟B(tài)時(shí)，從被攝體射出且穿過攝影鏡頭11的不同光瞳區(qū)域的成對兒的被攝體光束在攝像元件23上的不同位置成像。換言之，在由這些成對兒的被攝體光束形成的像之間產(chǎn)生相位差。例如根據(jù)在右開口相位差檢測像素23R和左開口相位差檢測像素23L中分別檢測到的像的相關(guān)關(guān)系來檢測該相位差，由此，能夠檢測攝影鏡頭11的散焦量和散焦方向。另外，由于相位差檢測像素23p的一部分區(qū)域被遮光，所以，產(chǎn)生光量的降低。除了相位差檢測像素23p中形成的遮光膜的面積以外，該光量的降低還根據(jù)遮光膜的位置、入射到相位差檢測像素23p的光的角度、像高而不同。攝像控制電路25根據(jù)來自CPU29的控制信號設(shè)定攝像元件23的讀出方式，根據(jù)所設(shè)定的讀出方式對來自攝像元件23的圖像信號的讀出進(jìn)行控制。此時(shí)，攝像控制電路25進(jìn)行對由相位差檢測像素23p取得的信號進(jìn)行插值的處理。根據(jù)數(shù)字照相機(jī)1的攝像模式來設(shè)定來自攝像元件23的像素?cái)?shù)據(jù)的讀出方式。例如，在來自攝像元件23的像素?cái)?shù)據(jù)的讀出要求實(shí)時(shí)性的情況下(例如實(shí)時(shí)取景顯示時(shí)或動(dòng)態(tài)圖像記錄時(shí))，為了能夠高速進(jìn)行像素?cái)?shù)據(jù)的讀出，混合讀出來自多個(gè)相同顏色像素的像素?cái)?shù)據(jù)，或間疏讀出特定像素的像素?cái)?shù)據(jù)。另一方面，在與實(shí)時(shí)性相比更加要求畫質(zhì)的情況下(例如靜態(tài)圖像的記錄時(shí))，不進(jìn)行混合讀出或間疏讀出，通過讀出全部像素的像素?cái)?shù)據(jù)來維持分辨率。進(jìn)一步對攝像控制電路25進(jìn)行說明。圖4示出攝像控制電路25的結(jié)構(gòu)例的概略。攝像控制電路25具有A-AMP102、ADC104、像素插值處理部110、像素間疏處理部122、像素混合處理部124。A-AMP102進(jìn)行從攝像元件23輸出的圖像信號的模擬增益調(diào)整。ADC104是模擬數(shù)字轉(zhuǎn)換器，將由A-AMP102進(jìn)行模擬增益調(diào)整后的圖像信號轉(zhuǎn)換為數(shù)字形式的圖像信號(像素?cái)?shù)據(jù))。下面，在本說明書中，將多個(gè)像素?cái)?shù)據(jù)的集合記載為攝像數(shù)據(jù)。并且，將由像素?cái)?shù)據(jù)表示的各個(gè)像素的值記載為像素值。像素插值處理部110進(jìn)行相位差檢測像素23p中取得的圖像數(shù)據(jù)的插值的處理。即，相位差檢測像素23p的一部分被遮光。因此，相位差檢測像素23p中取得的圖像數(shù)據(jù)與通常像素23a中取得的圖像數(shù)據(jù)不同。因此，在進(jìn)行取得圖像的曝光時(shí)，像素插值處理部110通過周邊的通常像素23a中取得的圖像數(shù)據(jù)對相位差檢測像素23p中取得的圖像數(shù)據(jù)進(jìn)行插值。另外，在焦點(diǎn)檢測用曝光時(shí)，由相位差檢測像素23p取得的圖像數(shù)據(jù)直接寫入DRAM41中。像素插值處理部110具有插值方向判斷部112、權(quán)重計(jì)算部114、插值處理部116。插值方向判斷部112決定相位差檢測像素23p的圖像數(shù)據(jù)的插值所使用的通常像素23a的方向。即，插值方向判斷部112決定使用位于哪個(gè)方向的通常像素23a的像素值對作為插值對象的相位差檢測像素23p進(jìn)行插值。權(quán)重計(jì)算部114在對用于插值的像素的像素值進(jìn)行混合時(shí)，決定要混合的像素各自的權(quán)重。插值處理部116進(jìn)行基于由權(quán)重計(jì)算部114計(jì)算出的權(quán)重值的相加平均，計(jì)算像素值。插值處理部116利用計(jì)算出的像素值對插值對象像素的像素值進(jìn)行置換。像素間疏處理部122進(jìn)行像素?cái)?shù)據(jù)的間疏讀出的處理。像素混合處理部124進(jìn)行像素?cái)?shù)據(jù)的混合讀出的處理。這樣，由攝像控制電路生成的攝像數(shù)據(jù)被寫入DRAM41中。CPU29根據(jù)后述ROM43中存儲的程序進(jìn)行數(shù)字照相機(jī)1的整體控制。顯影處理部31例如由ASIC(ApplicationSpecificIntegratedCircuit)構(gòu)成。顯影處理部31從DRAM41中讀出圖像數(shù)據(jù)，進(jìn)行顯影處理，作為顯示用圖像數(shù)據(jù)而寫回到DRAM中。例如，顯影處理部31在靜態(tài)圖像的記錄時(shí)，實(shí)施靜態(tài)圖像記錄用的圖像處理并生成靜態(tài)圖像數(shù)據(jù)。同樣，顯影處理部31在動(dòng)態(tài)圖像的記錄時(shí)，實(shí)施動(dòng)態(tài)圖像記錄用的圖像處理并生成動(dòng)態(tài)圖像數(shù)據(jù)。進(jìn)而，顯影處理部31在實(shí)時(shí)取景顯示時(shí)，實(shí)施顯示用的圖像處理并生成顯示用圖像數(shù)據(jù)。焦點(diǎn)檢測電路33例如由ASIC構(gòu)成。焦點(diǎn)檢測電路33從DRAM41中讀出由相位差檢測像素23p取得的數(shù)據(jù)。焦點(diǎn)檢測電路33根據(jù)由相位差檢測像素23p取得的數(shù)據(jù)進(jìn)行焦點(diǎn)位置的檢測的處理。視頻編碼器35讀出由顯影處理部31生成并暫時(shí)存儲在DRAM41中的顯示用圖像數(shù)據(jù)，將所讀出的顯示用圖像數(shù)據(jù)輸出到顯示部37。顯示部37例如是液晶顯示器或有機(jī)EL顯示器這樣的顯示部，例如配置在數(shù)字照相機(jī)1的背面等。該顯示部37根據(jù)從視頻編碼器35輸入的顯示用圖像數(shù)據(jù)來顯示圖像。顯示部37用于實(shí)時(shí)取景顯示和已記錄圖像的顯示等?？偩€39與攝像控制電路25、CPU29、顯影處理部31、焦點(diǎn)檢測電路33、視頻編碼器35、DRAM41、ROM43和記錄介質(zhì)45連接。這些各部中產(chǎn)生的各種數(shù)據(jù)經(jīng)由總線39進(jìn)行轉(zhuǎn)送。DRAM41是可電改寫的存儲器，暫時(shí)存儲所述攝像數(shù)據(jù)(像素?cái)?shù)據(jù))、記錄用圖像數(shù)據(jù)、顯示用圖像數(shù)據(jù)、CPU29中的處理數(shù)據(jù)這樣的各種數(shù)據(jù)。另外，也可以使用SynchronousDynamicRandomAccessMemory(SDRAM)來進(jìn)行暫時(shí)存儲。作為存儲部的一例發(fā)揮功能的ROM43是掩模ROM或閃存等非易失性存儲器。ROM43存儲CPU29中使用的程序、數(shù)字照相機(jī)1的調(diào)整值等各種數(shù)據(jù)。記錄介質(zhì)45構(gòu)成為內(nèi)置或自由裝填在數(shù)字照相機(jī)1中，將記錄用圖像數(shù)據(jù)記錄為規(guī)定形式的圖像文件。對本實(shí)施方式的數(shù)字照相機(jī)1的動(dòng)作進(jìn)行說明。參照圖5所示的流程圖對本實(shí)施方式的數(shù)字照相機(jī)1進(jìn)行的動(dòng)態(tài)圖像記錄的處理的一例進(jìn)行說明。例如在動(dòng)態(tài)圖像拍攝模式中按壓了釋放按鈕時(shí)，開始進(jìn)行動(dòng)態(tài)圖像記錄。并且，這里，對動(dòng)態(tài)圖像記錄的處理進(jìn)行說明，但是，在靜態(tài)圖像記錄的動(dòng)作中也能夠進(jìn)行同樣的處理。另外，根據(jù)ROM43中存儲的程序，參照圖5說明的處理由CPU29執(zhí)行，或者由ASIC執(zhí)行。這些處理的程序還可以記錄在光盤、磁盤或半導(dǎo)體存儲器等各種記錄介質(zhì)中。在步驟S101中，CPU29設(shè)定接著進(jìn)行的曝光是焦點(diǎn)檢測用曝光還是記錄用的圖像取得用曝光。在步驟S102中，CPU29判定步驟S101中設(shè)定的曝光是否是焦點(diǎn)檢測用曝光。在焦點(diǎn)檢測用曝光時(shí)，處理進(jìn)入步驟S103。在步驟S103中，攝像部21進(jìn)行攝像取入。即，攝像元件23進(jìn)行光電轉(zhuǎn)換，攝像控制電路25將數(shù)字化的數(shù)據(jù)配置在DRAM41中。在步驟S104中，焦點(diǎn)檢測電路33根據(jù)由相位差檢測像素23p取得的數(shù)據(jù)，進(jìn)行利用了相位差的焦點(diǎn)檢測。CPU29根據(jù)焦點(diǎn)檢測的結(jié)果，使驅(qū)動(dòng)部17驅(qū)動(dòng)攝影鏡頭11以進(jìn)行對焦。然后，處理進(jìn)入步驟S111。在步驟S102中判定為不是焦點(diǎn)檢測用曝光時(shí)，處理進(jìn)入步驟S105。在步驟S105中，攝像部21進(jìn)行攝像動(dòng)作。即，攝像元件23進(jìn)行光電轉(zhuǎn)換，A-AMP102進(jìn)行模擬增益調(diào)整，ADC104將模擬信號轉(zhuǎn)換為數(shù)字信號。在步驟S106中，攝像部21的像素插值處理部110對相位差檢測像素23p進(jìn)行像素插值處理。該像素插值處理在后面敘述。在步驟S107中，攝像部21的像素間疏處理部122進(jìn)行必要的像素的間疏處理，攝像部21的像素混合處理部124進(jìn)行必要的像素的混合處理。攝像部21將如上所述生成的圖像數(shù)據(jù)寫入DRAM41中。在步驟S108中，顯影處理部31從DRAM41中讀出圖像數(shù)據(jù)，進(jìn)行顯影處理。在步驟S109中，顯影處理部31對顯影處理后的數(shù)據(jù)進(jìn)行記錄用的圖像處理。在步驟S110中，CPU29將步驟S109中生成的記錄用的圖像記錄在記錄介質(zhì)45中。然后，處理進(jìn)入步驟S111。在S111中，CPU29判定是否輸入了動(dòng)態(tài)圖像記錄停止的指示。例如，通過在動(dòng)態(tài)圖像記錄動(dòng)作中按壓釋放按鈕，來輸入動(dòng)態(tài)圖像記錄停止的指示。在未輸入動(dòng)態(tài)圖像記錄停止的指示時(shí)，處理返回步驟S101。另一方面，在輸入了動(dòng)態(tài)圖像記錄停止的指示時(shí)，本動(dòng)態(tài)圖像記錄處理結(jié)束。接著，詳細(xì)敘述步驟S106中進(jìn)行的相位差檢測像素23p的像素插值。首先，參照圖6A和圖6B進(jìn)一步對相位差檢測像素23p的配置進(jìn)行說明。圖6A是在圖2所示的圖中顯示相位差檢測像素23p中的為了檢測水平方向的相位差而設(shè)置的右開口相位差檢測像素23R和左開口相位差檢測像素23L的圖。圖6A不顯示為了檢測垂直方向的相位差而設(shè)置的下開口相位差檢測像素23B和上開口相位差檢測像素23T。另一方面，圖6B顯示下開口相位差檢測像素23B和上開口相位差檢測像素23T，不顯示右開口相位差檢測像素23R和左開口相位差檢測像素23L。首先，對右開口相位差檢測像素23R和左開口相位差檢測像素23L的配置進(jìn)行說明。根據(jù)圖6A可知，在水平方向上在交替配置了R像素和G(Gr)像素的行中，等間隔地配置右開口相位差檢測像素23R。右開口相位差檢測像素23R的間隔為4個(gè)像素。在配置有右開口相位差檢測像素23R的行中不配置左開口相位差檢測像素23L。同樣，在水平方向上在交替配置了R像素和G(Gr)像素的行中，按照每4個(gè)像素等間隔地配置左開口相位差檢測像素23L。在配置有左開口相位差檢測像素23L的行中不配置右開口相位差檢測像素23R。另一方面，當(dāng)在垂直方向上觀察時(shí)，右開口相位差檢測像素23R和左開口相位差檢測像素23L各自的間隔不均等。即，在圖6A中，當(dāng)從上側(cè)起依次數(shù)出配置有右開口相位差檢測像素23R和左開口相位差檢測像素23L的列時(shí)，在從右開口相位差檢測像素23R起的第4個(gè)像素處配置左開口相位差檢測像素23L，但是，在從左開口相位差檢測像素23L起的第12個(gè)像素處配置右開口相位差檢測像素23R。如上所述，右開口相位差檢測像素23R和左開口相位差檢測像素23L在水平方向(行方向)上均等地配置，但是，在垂直方向(列方向)上不均等地配置。相位差檢測像素23p的配置不均等是由于如下原因引起的：針對由攝像元件23得到的圖像數(shù)據(jù)，為了盡可能地抑制由于存在相位差檢測像素23p而產(chǎn)生的圖像劣化，削減相位差檢測像素23p的數(shù)量。接著，對上開口相位差檢測像素23T和下開口相位差檢測像素23B的配置進(jìn)行說明。根據(jù)圖6B可知，在垂直方向上在交替配置了B像素和G(Gb)像素的列中，按照每4個(gè)像素等間隔地配置上開口相位差檢測像素23T。在配置有上開口相位差檢測像素23T的列中不配置下開口相位差檢測像素23B。同樣，在垂直方向上在交替配置了B像素和G(Gb)像素的列中，按照每4個(gè)像素等間隔地配置下開口相位差檢測像素23B。在配置有下開口相位差檢測像素23B的列中不配置上開口相位差檢測像素23T。另一方面，當(dāng)在水平方向上觀察時(shí)，上開口相位差檢測像素23T和下開口相位差檢測像素23B的間隔不均等。即，在圖6B中，當(dāng)從左側(cè)起依次數(shù)出配置有上開口相位差檢測像素23T和下開口相位差檢測像素23B的行時(shí)，在從上開口相位差檢測像素23T起的第4個(gè)像素處配置下開口相位差檢測像素23B，但是，在從下開口相位差檢測像素23B起的第12個(gè)像素處配置上開口相位差檢測像素23T。如上所述，上開口相位差檢測像素23T和下開口相位差檢測像素23B在垂直方向(列方向)上均等地配置，但是，在水平方向(行方向)上不均等地配置。接著，說明使用由周邊的通常像素23a得到的像素值對由如上所述配置的相位差檢測像素23p取得的亮度的值(像素值)進(jìn)行插值的情況。首先，考慮圖6A所示的右開口相位差檢測像素23R和左開口相位差檢測像素23L的情況。例如如圖7A示意地示出的那樣，設(shè)為使用攝像元件23對縱條紋的被攝體像進(jìn)行攝像。這里，在圖7A中，附加了斜線的像素表示被攝體像中光量較低的昏暗場所，未附加斜線的像素表示被攝體像中光量較高的明亮場所。圖7B示意地示出圖7A所示的被攝體像入射時(shí)得到的插值后的每個(gè)像素的像素值。在圖7B中，設(shè)為附加了間隔較窄的斜線的像素的像素值較低，附加了間隔較寬的斜線的像素的像素值稍高，未附加斜線的像素的像素值更高。在通常像素23a中，得到與被攝體像對應(yīng)的像素值。另一方面，在相位差檢測像素23p中，由于像素的一部分被遮蔽，所以未得到正確的像素值，因此，使用周圍存在的通常像素23a的像素值對相位差檢測像素23p的像素值進(jìn)行插值。這里，設(shè)為使用在左右存在(水平方向/行方向上相鄰)的通常像素23a的像素值對相位差檢測像素23p的像素值進(jìn)行插值。于是，如圖7B所示，會通過與本來應(yīng)該得到的像素值不同的像素值進(jìn)行插值。其結(jié)果，圖7C示意地示出所得到的圖像。圖7C示出根據(jù)由Gr像素、R像素、B像素、Gb像素這4個(gè)像素得到的像素值來決定一個(gè)像素值的情況。這里，在圖7C中，設(shè)為附加了間隔較窄的斜線的像素的像素值較低，附加了間隔較寬的斜線的像素的像素值稍高，未附加斜線的像素的像素值更高。如圖7C所示，在對縱條紋的被攝體像進(jìn)行攝像時(shí)，在條紋圖案中混入“卷曲(ちぢれ)”圖案。即，關(guān)于縱條紋，圖7C中的上側(cè)的4段向左側(cè)偏移，下側(cè)的4段向右側(cè)偏移，成為鋸齒狀。這樣，在使用相位差檢測像素23p的左右存在的通常像素23a的像素值對相位差檢測像素23p的像素值進(jìn)行插值的情況下，所得到的圖像的畫質(zhì)非常劣化。在圖7B和圖7C所示的例子中，示出使用相位差檢測像素23p的左右存在的通常像素23a的像素值對相位差檢測像素23p的像素值進(jìn)行插值的情況，但是，如下示出使用相位差檢測像素23p的上下存在(垂直方向/列方向上相鄰)的通常像素23a的像素值對相位差檢測像素23p的像素值進(jìn)行插值的情況。在使用相位差檢測像素23p的上下存在的通常像素23a的像素值對相位差檢測像素23p的像素值進(jìn)行插值的情況下，與圖7B相當(dāng)?shù)膱D如圖8A所示。其結(jié)果，與圖7C相當(dāng)?shù)膱D如圖8B所示。此時(shí)，不會如圖7C中看到的那樣在條紋圖案中混入“卷曲”圖案，得到清晰的縱條紋圖案。即，在使用相位差檢測像素23p的上下存在的通常像素23a的像素值對相位差檢測像素23p的像素值進(jìn)行插值的情況下，所得到的圖像中不會看到劣化。同樣考慮對橫條紋的被攝體像進(jìn)行攝像的情況。即，圖9A是與圖7A所示的圖相當(dāng)?shù)氖境霰粩z體像的圖。此時(shí)，當(dāng)使用相位差檢測像素23p的上下存在的通常像素23a的像素值對相位差檢測像素23p的像素值進(jìn)行插值時(shí)，如下所述。即，與圖7B和圖8A相當(dāng)?shù)膱D如圖9B所示。并且，與圖7C和圖8B相當(dāng)?shù)膱D如圖9C所示。該情況下，如圖9C所示，所得到的圖像稍微劣化，但是，條紋圖案的邊界稍微滲出而變得模糊。即，在圖9C所示的圖的情況下，橫條紋的圖案被維持，不會看到上下偏移而混入“卷曲”圖案這樣的大幅的畫質(zhì)劣化。如上所述，右開口相位差檢測像素23R和左開口相位差檢測像素23L在水平方向(行方向)上均等地配置，但是，在垂直方向(列方向)上不均等地配置。該情況下，在對相位差檢測像素23p的像素值進(jìn)行插值時(shí)，當(dāng)使用該相位差檢測像素23p的垂直方向(列方向)上相鄰的通常像素23a的像素值進(jìn)行插值時(shí)，能夠防止畫質(zhì)劣化。即，在進(jìn)行相位差檢測像素23p的插值時(shí)，當(dāng)使用不均等地配置的方向的通常像素23a進(jìn)行插值時(shí)，能夠防止畫質(zhì)劣化。同樣，考慮圖6B所示的上開口相位差檢測像素23T和下開口相位差檢測像素23B的情況。例如如圖10A示意地示出的那樣，設(shè)為使用攝像元件23對橫條紋的被攝體像進(jìn)行攝像。此時(shí)，當(dāng)使用相位差檢測像素23p的上下存在(垂直方向/列方向上相鄰)的通常像素23a的像素值對相位差檢測像素23p的像素值進(jìn)行插值時(shí)，如圖10B所示那樣進(jìn)行插值，得到圖10C所示的圖像。即，在所得到的圖像中，在橫條紋圖案中混入“卷曲”圖案，畫質(zhì)非常劣化。對橫條紋的被攝體像進(jìn)行攝像，設(shè)為使用相位差檢測像素23p的左右存在(水平方向/行方向上相鄰)的通常像素23a的像素值對相位差檢測像素23p的像素值進(jìn)行插值。此時(shí)，如圖11A所示那樣進(jìn)行插值，得到圖11B所示的圖像。即，在所得到的圖像中不會看到畫質(zhì)劣化。并且，如圖12A所示，對縱條紋的被攝體像進(jìn)行攝像，設(shè)為使用相位差檢測像素23p的左右存在(水平方向/行方向上相鄰)的通常像素23a的像素值對相位差檢測像素23p的像素值進(jìn)行插值。此時(shí)，如圖12B所示那樣進(jìn)行插值，得到圖12C所示的圖像。即，在所得到的圖像中不會看到大幅的畫質(zhì)劣化。如上所述，上開口相位差檢測像素23T和下開口相位差檢測像素23B在垂直方向(列方向)上均等地配置，但是，在水平方向(行方向)上不均等地配置。該情況下，在對相位差檢測像素23p的像素值進(jìn)行插值時(shí)，當(dāng)使用該相位差檢測像素23p的水平方向(行方向)上相鄰的通常像素23a的像素值進(jìn)行插值時(shí)，能夠防止畫質(zhì)劣化。即，在進(jìn)行相位差檢測像素23p的插值時(shí)，當(dāng)使用不均等地配置的方向的通常像素23a進(jìn)行插值時(shí)，能夠防止畫質(zhì)劣化。如上所述，在本實(shí)施方式中，在使用由周邊的通常像素23a得到的像素值對左開口相位差檢測像素23L和右開口相位差檢測像素23R的像素值進(jìn)行插值時(shí)，使用水平方向和垂直方向中的、左開口相位差檢測像素23L和右開口相位差檢測像素23R不均等地配置的方向上相鄰的通常像素23a的像素值，進(jìn)行相位差檢測像素23p的像素值的插值。同樣，在使用由周邊的通常像素23a得到的像素值對上開口相位差檢測像素23T和下開口相位差檢測像素23B的像素值進(jìn)行插值時(shí)，使用水平方向和垂直方向中的、上開口相位差檢測像素23T和下開口相位差檢測像素23B不均等地配置的方向上相鄰的通常像素23a的像素值，進(jìn)行相位差檢測像素23p的像素值的插值?？紤]插值中的像素值的各種計(jì)算方法。在使用上述圖7A～圖12C的說明中，以使用作為插值對象的相位差檢測像素23p的上下的通常像素23a和左右的通常像素23a中的任意一方的情況為例進(jìn)行說明，但是，也可以使用上下的通常像素23a和左右的通常像素23a雙方并使它們的加權(quán)不同。例如如圖13A所示，考慮根據(jù)周邊的G像素的像素值對右開口相位差檢測像素23R的像素值進(jìn)行插值的情況。設(shè)該右開口相位差檢測像素23R的上側(cè)相鄰的G像素的像素值為G1，設(shè)下側(cè)相鄰的G像素的像素值為G2，設(shè)左側(cè)相鄰的G像素的像素值為G3，設(shè)右側(cè)相鄰的G像素的像素值為G4。在相位差檢測像素23p的配置為圖2所示的配置的情況下，由于右開口相位差檢測像素23R的配置在列方向上不均等，所以，使用上下的通常像素23a的像素值。因此，插值后的像素值I例如由下式給出：I＝(G1+G2)/2并且，插值后的像素值I例如也可以由下式給出：I＝(K1G1+K1G2+K2G3+K2G4)/(K1+K1+K2+K2)其中，K1和K2是權(quán)重系數(shù)，設(shè)為K1>K2另外，I＝(G1+G2)/2可以說是K1＝1、K2＝0的情況。同樣，例如如圖13B所示，考慮根據(jù)周邊的B像素的像素值對上開口相位差檢測像素23T的像素值進(jìn)行插值的情況。設(shè)該上開口相位差檢測像素23T的左側(cè)相鄰的B像素的像素值為B1，設(shè)右側(cè)相鄰的B像素的像素值為B2，設(shè)上側(cè)相鄰的B像素的像素值為B3，設(shè)下側(cè)相鄰的B像素的像素值為B4。在相位差檢測像素23p的配置為圖2所示的配置的情況下，由于上開口相位差檢測像素23T的配置在行方向上不均等，所以，使用左右的通常像素23a的像素值。因此，插值后的像素值I例如由下式給出：I＝(B1+B2)/2并且，插值后的像素值I例如也可以由下式給出：I＝(K3B1+K3B2+K4B3+K4B4)/(K3+K3+K4+K4)其中，K3和K4是權(quán)重系數(shù)，設(shè)為K3>K4上述權(quán)重系數(shù)K1、K2、K3和K4是預(yù)先決定的，例如使用任何時(shí)候都相同的權(quán)重系數(shù)。即，由于攝像元件23中的相位差檢測像素23p的排列是固定的，所以，根據(jù)該排列等預(yù)先求出最佳的權(quán)重系數(shù)，使用該權(quán)重系數(shù)進(jìn)行插值，由此，能夠?qū)崿F(xiàn)最佳的插值。攝像元件23中的相位差檢測像素23p的配置、進(jìn)行像素插值時(shí)被插值的相位差檢測像素23p與插值所使用的通常像素23a的位置關(guān)系、權(quán)重系數(shù)等信息例如預(yù)先記錄在ROM43中。這樣，例如，ROM43作為記錄攝像元件中的功能性像素的配置的記錄部發(fā)揮功能。另外，像素值I的計(jì)算方法不限于相加平均。并且，在像素值I的計(jì)算中，雖然是無法直接作為圖像進(jìn)行利用的值，但是在相位差檢測像素23p中也取得像素值，所以，也可以使用由被插值的相位差檢測像素23p取得的像素值。即，上述說明不限于不使用相位差檢測像素23p的像素值的情況，也可以應(yīng)用于使用相位差檢測像素23p的像素值的情況。這樣，在插值時(shí)，不僅包含不使用相位差檢測像素23p的像素值而通過其他像素的像素值來決定像素值的情況，還包含使用該相位差檢測像素23p的像素值的情況。當(dāng)設(shè)以不均等的間隔配置相位差檢測像素的方向?yàn)榈?方向時(shí)，在像素插值中，首先取得第1方向。接著，在將第1方向的加權(quán)作為第1權(quán)重、將與第1方向不同的方向的加權(quán)作為第2權(quán)重時(shí)，決定第1權(quán)重和第2權(quán)重。這里，第1權(quán)重大于第2權(quán)重。然后，使用第1權(quán)重和第2權(quán)重進(jìn)行插值處理。根據(jù)本實(shí)施方式，在包含由于在攝像元件23的攝像面中設(shè)置相位差檢測像素23p而需要的像素插值在內(nèi)的像素插值中，也能夠防止畫質(zhì)劣化。并且，例如，與通過根據(jù)相位差檢測像素23p的周邊的像素值自適應(yīng)地變更插值所使用的參數(shù)來抑制畫質(zhì)劣化的情況等相比，根據(jù)本實(shí)施方式，能夠減小電路規(guī)模，并且，能夠減小消耗電力。這在動(dòng)態(tài)圖像記錄和實(shí)時(shí)取景顯示時(shí)特別發(fā)揮效果。另外，在上述例子中，如圖6A和圖6B所示，相位差檢測像素23p的均等排列的方向的間隔為4個(gè)像素。在間隔為4個(gè)像素以上時(shí)，容易出現(xiàn)卷曲的影響，所以，在間隔為4個(gè)像素以上時(shí)，本實(shí)施方式特別發(fā)揮效果。另外，在上述例子中，示出使用相位差檢測像素23p的上下左右的通常像素23a的像素值進(jìn)行像素插值的例子，但是，也可以使用這些方向以外的方向上配置的通常像素23a的像素值進(jìn)行像素插值。該情況下，通過將以不均等的間隔配置相位差檢測像素23p的方向的權(quán)重設(shè)定為較大，將除此以外的方向的權(quán)重設(shè)定為較小，能夠防止畫質(zhì)劣化。[第1變形例]對上述實(shí)施方式的變形例進(jìn)行說明。這里，對與上述實(shí)施方式的不同之處進(jìn)行說明，對相同部分標(biāo)注相同標(biāo)號并省略其說明。在上述實(shí)施方式中，示出針對相位差檢測像素對像素值進(jìn)行插值的例子。但是，對像素值進(jìn)行插值的對象不限于相位差檢測像素，在攝像元件內(nèi)配置具有攝像以外的功能的像素且需要插值時(shí)，能夠應(yīng)用上述實(shí)施方式。作為具有攝像以外的功能的像素，例如考慮配置測光用的像素。這樣，將具有攝像以外的功能的像素稱為功能性像素。圖14示出功能性像素的配置例。在圖14中涂黑而示出的像素中設(shè)置具有攝像以外的功能的功能性像素23f。在功能性像素23f中，無法取得圖像數(shù)據(jù)，所以，需要使用由周圍的通常像素23a得到的像素值對該功能性像素23f的像素值進(jìn)行插值。因此，能夠應(yīng)用上述實(shí)施方式。在圖14所示的像素配置的例子中，功能性像素23f在水平方向上均等地配置，在垂直方向上不均等地配置。因此，在插值中，與水平方向上配置的像素的像素值相比，使垂直方向上配置的像素的像素值具有較大權(quán)重來進(jìn)行插值即可。當(dāng)進(jìn)行這種加權(quán)時(shí)，能夠抑制基于插值的畫質(zhì)劣化。[第2變形例]對上述實(shí)施方式的變形例進(jìn)行說明。這里，對與上述實(shí)施方式的不同之處進(jìn)行說明，對相同部分標(biāo)注相同標(biāo)號并省略其說明。在本變形例中，考慮進(jìn)行像素相加的情況。作為右開口相位差檢測像素23R和左開口相位差檢測像素23L的排列，舉出以圖6A所示的配置來配置功能性像素23f的攝像元件23為例進(jìn)行說明?？紤]將Gr、R、B、Gb這4個(gè)像素以縱兩個(gè)和橫兩個(gè)作為一組的方式進(jìn)行像素相加的情況。圖15A示出該情況下的像素的位置關(guān)系的一例。在圖15A中，粗線示出要進(jìn)行像素相加的一組像素，對粗線所示的框內(nèi)的相同顏色的像素值進(jìn)行相加。同樣，圖15B示出將Gr、R、B、Gb這4個(gè)像素以縱三個(gè)和橫三個(gè)作為一組的方式進(jìn)行像素相加的情況下的像素的位置關(guān)系的一例。在圖15B中，粗線示出要進(jìn)行像素相加的一組像素，對粗線所示的框內(nèi)的相同顏色的像素值進(jìn)行相加。要進(jìn)行像素相加的一組所包含的像素?cái)?shù)可以根據(jù)攝像模式而變更。根據(jù)圖15A可知，在將2×2作為一組來進(jìn)行像素相加的情況下，這一組像素所包含的功能性像素23f分別為1個(gè)像素。這是因?yàn)?，功能性像?3f的間隔為4個(gè)像素，一組所包含的像素為4像素×4像素。與此相對，在如圖15B所示將3×3作為一組來進(jìn)行像素相加的情況下，這一組像素所包含的功能性像素23f為1個(gè)像素、或2個(gè)像素、或4個(gè)像素。根據(jù)要進(jìn)行像素相加的范圍的組合，一組所包含的功能性像素23f還可能為3個(gè)像素。這樣，當(dāng)要進(jìn)行像素相加的像素?cái)?shù)不同時(shí)，一組像素所包含的功能性像素23f的數(shù)量可能不同。當(dāng)要進(jìn)行像素相加的一組像素所包含的功能性像素23f的數(shù)量不同時(shí)，使用周圍的通常像素23a的像素值進(jìn)行的功能性像素23f的像素值的插值對一組像素的像素相加的結(jié)果造成的影響按照每組而不同。因此，在本變形例中，根據(jù)要進(jìn)行相加的像素?cái)?shù)，例如設(shè)定為上述權(quán)重系數(shù)K1、K2、K3和K4不同。即，在功能性像素23f的插值中，進(jìn)行以下處理。首先，判定相加像素?cái)?shù)。根據(jù)該判定結(jié)果決定權(quán)重系數(shù)等功能性像素23f的插值的參數(shù)。使用所決定的參數(shù)進(jìn)行像素插值。根據(jù)本變形例，在像素相加中，根據(jù)要進(jìn)行相加的像素?cái)?shù)來進(jìn)行最佳的功能性像素23f的像素值的插值。其結(jié)果，能夠抑制基于該插值的畫質(zhì)劣化。另外，設(shè)以不均等的間隔配置應(yīng)該插值的功能性像素23f的方向?yàn)榈?方向。此時(shí)，在像素相加中，在作為相加對象的一組像素的第1方向的像素?cái)?shù)小于第1方向的功能性像素23f的間隔時(shí)，容易由于插值而在圖像中產(chǎn)生卷曲。因此，在一組像素的第1方向的像素?cái)?shù)小于第1方向的功能性像素23f的間隔時(shí)，權(quán)重系數(shù)K1和權(quán)重系數(shù)K2設(shè)定為不同值特別發(fā)揮效果。在上述這種插值處理中，在功能性像素的密度較疏時(shí)，可以在像素相加后進(jìn)行插值。在較密地配置功能性像素時(shí)，在進(jìn)行像素相加的一組像素中必定包含1個(gè)以上的功能性像素。因此，在功能性像素的密度較密時(shí)，優(yōu)選在像素相加之前進(jìn)行功能性像素的像素值的插值。另外，在上述實(shí)施方式及其變形例中，以使用拜耳排列的情況為例進(jìn)行了說明。但是，不限于拜耳排列，在功能性像素的排列存在均等的方向和不均等的方向時(shí)，能夠應(yīng)用上述技術(shù)。因此，不限于水平方向或垂直方向，能夠應(yīng)用于傾斜方向等各種方向。如上所述，本技術(shù)以如下情況為對象：在包含攝像用的通常像素和具有攝像以外的功能的功能性像素的攝像元件中，在某個(gè)第1方向上以不均等的間隔配置功能性像素。該情況下，在利用周邊的通常像素的像素值對功能性像素的像素值進(jìn)行插值時(shí)，增大第1方向上配置的通常像素的像素值的加權(quán)，減小第1方向以外的方向上配置的通常像素的加權(quán)。這樣，能夠?qū)崿F(xiàn)抑制了畫質(zhì)劣化的像素插值。