專利名稱：圖像處理設(shè)備、圖像處理方法和程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及具有作為構(gòu)成諸如數(shù)字照相機(jī)或攝像機(jī)等的攝像元件的像素的一部分的具有特定功能的功能像素的攝像設(shè)備，尤其涉及用于基于來自攝像元件的輸出來執(zhí)行圖像處理的圖像處理設(shè)備。
背景技術(shù)：
作為具有作為構(gòu)成攝像元件的像素的一部分的具有特定功能的功能像素的攝像元件的例子，公開了以下技術(shù)將被攝體圖像的相位差檢測功能添加至攝像元件，以使得不需要專用的AF(自動調(diào)焦)傳感器并且實現(xiàn)了高速相位差A(yù)F。例如，在專利文獻(xiàn)I的官方公報中，在作為攝像元件的一部分的光接收元件(像素)中，通過針對片上微透鏡的光軸偏移光接收部的感光區(qū)域來實現(xiàn)光瞳分割功能。這些像素用作焦點(diǎn)檢測像素，并以預(yù)定間隔被配置在攝像像素之間，由此進(jìn)行相位差型焦點(diǎn)檢 測。由于配置焦點(diǎn)檢測像素的部分與攝像像素的缺陷區(qū)域相對應(yīng)，因而通過使用焦點(diǎn)檢測像素周圍的攝像像素信息進(jìn)行插值來形成焦點(diǎn)檢測像素的圖像信息。在專利文獻(xiàn)2的官方公報中，用于形成焦點(diǎn)檢測像素的位置處的圖像信息的単元具有用于根據(jù)焦點(diǎn)檢測像素的圖像信息利用増益校正生成圖像數(shù)據(jù)的生成単元；用于根據(jù)焦點(diǎn)檢測像素周圍的攝像像素的信息利用插值生成圖像信息的生成単元；以及用于檢測被攝體圖像的空間頻率成分的頻率成分檢測單元，其中，根據(jù)所檢測到的空間頻率成分來切換這些生成単元。然而，上述傳統(tǒng)的技術(shù)具有以下問題。如專利文獻(xiàn)I所述，如果基于焦點(diǎn)檢測像素周圍的像素的圖像信號來對焦點(diǎn)檢測像素的圖像信號進(jìn)行插值，則對于根據(jù)這些周圍像素所獲得的圖像數(shù)據(jù)，可能計算出與在其位置本來應(yīng)當(dāng)存在的攝像像素的輸出顯著偏離的值。在接收到具有低空間頻率的被攝體的光的情況下，焦點(diǎn)檢測像素的位置處的圖像相對于配置在焦點(diǎn)檢測像素周圍的僅用于攝像的像素的位置處的圖像具有高連續(xù)性。因此，期望基于周圍像素的圖像信號對焦點(diǎn)檢測像素的位置處的圖像數(shù)據(jù)進(jìn)行插值。在該情況下，由于被攝體圖像的空間頻率低，因而通過插值處理引起的清晰度的劣化不明顯。在接收到具有高空間頻率的被攝體的光的情況下，由于焦點(diǎn)檢測像素的位置處的圖像對于配置在焦點(diǎn)檢測像素周圍的僅用于攝像的像素的位置處的圖像具有低連續(xù)性，因而插值處理的結(jié)果根據(jù)插值參考像素的選擇有很大不同。在接收到圖像的連續(xù)性在特定方向上低的被攝體的光的情況下，期望將相對于焦點(diǎn)檢測像素的位置配置在圖像的連續(xù)性高的方向上的僅用于攝像的像素選擇為插值參考像素。對于圖像的連續(xù)性在所有方向上低的圖像，難以從周圍像素的圖像信號估計焦點(diǎn)檢測像素的位置處的圖像信號。根據(jù)專利文獻(xiàn)2所述的傳統(tǒng)技術(shù)，在接收到具有高空間頻率的被攝體的光的情況下，根據(jù)焦點(diǎn)檢測像素的圖像信息利用増益校正來形成焦點(diǎn)檢測像素的位置處的圖像信息。如果根據(jù)焦點(diǎn)檢測像素的輸出信號利用増益校正來形成圖像信號，則可以形成相對不依賴于被攝體的圖像信號。然而，如果將焦點(diǎn)檢測像素的配置密度設(shè)置為高，則在配置焦點(diǎn)檢測像素的區(qū)域中獲得的圖像有噪聲感的可能性高。在根據(jù)焦點(diǎn)檢測像素周圍的僅用于攝像的像素進(jìn)行插值的情況下，盡管圖像可能不太有噪聲感，但為了獲得好的圖像，也需要正確地選擇插值參考像素。引用列表專利文獻(xiàn)專利文獻(xiàn)I :日本特開2000-156823專利文獻(xiàn)2 :日本特開2009-4463
發(fā)明內(nèi)容
摶術(shù)問是頁本發(fā)明的方面提供一種可以減少在焦點(diǎn)檢測像素的位置處生成圖像數(shù)據(jù)所引起的圖像質(zhì)量劣化的圖像處理設(shè)備。用于解決問題的方案根據(jù)本發(fā)明的方面，ー種圖像處理設(shè)備，包括輸入單元，用于輸入攝像元件的輸出，其中，所述攝像元件具有在水平方向和垂直方向上配置的普通像素和在所述普通像素之間離散配置的功能像素；第一估計單元，用于對所述功能像素的輸出進(jìn)行増益校正運(yùn)算，從而估計所述功能像素的位置處的圖像信號；第二估計單元，用于從所述功能像素周圍的普通像素選擇參考像素，并基于所選擇的多個參考像素的輸出來估計所述功能像素的位置處的圖像信號的輸出；以及選擇單元，用于基于所述第一估計單元的輸出，從所述第二估計単元基于所述多個參考像素的組合所獲得的一個或多個估計結(jié)果中選擇所述功能像素的位置處的圖像信號。發(fā)明的有益效果根據(jù)本發(fā)明，為了生成焦點(diǎn)檢測像素的位置處的圖像信號，可以基于通過相對不依賴于被攝體的増益校正處理所生成的圖像信號來選擇插值處理中要參考的多個像素。因此，可以減少由于插值處理所生成的圖像信號而引起的圖像質(zhì)量的劣化。通過以下參考附圖對典型實施例的說明，本發(fā)明的其它特征和方面將變得明顯。


圖I是根據(jù)本發(fā)明實施例的照相機(jī)的結(jié)構(gòu)圖。圖2是根據(jù)本發(fā)明實施例的固態(tài)攝像元件的框圖。圖3A是根據(jù)本發(fā)明實施例的攝像元件的攝像像素的平面圖和截面圖。圖3B是根據(jù)本發(fā)明實施例的攝像元件的攝像像素的平面圖和截面圖。圖4A是根據(jù)本發(fā)明實施例的攝像元件的焦點(diǎn)檢測像素的平面圖和截面圖。圖4B是根據(jù)本發(fā)明實施例的攝像元件的焦點(diǎn)檢測像素的平面圖和截面圖。圖5A是根據(jù)本發(fā)明實施例的攝像元件的焦點(diǎn)檢測像素的平面圖和截面圖。圖5B是根據(jù)本發(fā)明實施例的攝像元件的焦點(diǎn)檢測像素的平面圖和截面圖。圖6是示出根據(jù)本發(fā)明實施例的攝像元件的焦點(diǎn)檢測區(qū)域的圖。
圖7是示出根據(jù)本發(fā)明實施例的攝像元件的焦點(diǎn)檢測區(qū)域中的像素配置圖案的圖。圖8是示出根據(jù)本發(fā)明實施例的照相機(jī)的操作的流程圖。圖9是示出根據(jù)本發(fā)明實施例的焦點(diǎn)檢測操作的流程圖。圖10是示出根據(jù)本發(fā)明實施例的拍攝操作的流程圖。圖11是示出根據(jù)本發(fā)明實施例的圖像處理操作的流程圖。 圖12是根據(jù)本發(fā)明實施例的焦點(diǎn)檢測像素周圍的像素的配置圖。圖13是示出根據(jù)本發(fā)明的變形實施例的焦點(diǎn)檢測像素的配置圖案的圖。圖14是示出根據(jù)本發(fā)明的變形實施例的焦點(diǎn)檢測像素周圍的像素的配置圖案的圖。圖15是示出根據(jù)本發(fā)明的變形實施例的圖像處理操作的流程圖。
具體實施例方式將根據(jù)附圖詳細(xì)說明本發(fā)明的典型實施例。實施例以下將參考

本發(fā)明的實施例。圖I是根據(jù)本發(fā)明的照相機(jī)的結(jié)構(gòu)圖，并示出具有攝像元件的照相機(jī)主體和拍攝鏡頭一體化的電子照相機(jī)100。在該圖中，第一透鏡組101被配置在拍攝光學(xué)系統(tǒng)(聚焦光學(xué)系統(tǒng))的前端并被保持為可以在光軸方向上前后移動。光圈快門102用作光圈和快門，以使得通過調(diào)節(jié)其開ロ直徑來實現(xiàn)拍攝用的光量調(diào)節(jié)，并且光圈快門102用作用于調(diào)節(jié)靜止圖像拍攝的快門速度的快門。還設(shè)置第二透鏡組103。光圈快門102和第二透鏡組103在光軸方向上一體化地前后移動，并以與第一透鏡組101的前后移動連動的方式進(jìn)行變倍操作(變焦功能)。第三透鏡組105通過光軸方向上的前后移動來進(jìn)行焦點(diǎn)調(diào)節(jié)。光學(xué)低通濾波器106是用于減少所拍攝圖像的偽色和摩爾紋的光學(xué)元件。攝像元件107由C-MOS傳感器及其外圍電路構(gòu)成。作為攝像元件，使用以下的ニ維單板顔色傳感器，在該傳感器中，在由橫向方向上的m個像素和縱向方向上的n個像素構(gòu)成的光接收像素上以片上方式形成有拜耳陣列的原色馬賽克濾波器。變焦致動器111通過轉(zhuǎn)動凸輪筒(未示出)來驅(qū)動第一透鏡組101和第二透鏡組103在光軸方向上前后移動，從而進(jìn)行變焦操作。光圈和快門致動器112通過控制光圈快門102的開ロ直徑來調(diào)節(jié)拍攝光量，并控制靜止圖像的拍攝用的曝光時間。調(diào)焦致動器114驅(qū)動第三透鏡組105在光軸方向上前后移動,從而進(jìn)行焦點(diǎn)調(diào)節(jié)。設(shè)置拍攝用的被攝體照明電子閃光燈115。期望將使用氙管的閃光燈照明設(shè)備用作閃光燈115。然而，可以使用具有連續(xù)發(fā)光的LED的照明設(shè)備。AF輔助光單元116經(jīng)由光投射透鏡將具有預(yù)定開ロ圖案的掩模的圖像投射至視野，并提高針對暗的被攝體或低對比度的被攝體的焦點(diǎn)檢測能力。CPU(照相機(jī)控制單元)121是照相機(jī)中的CPU，并且進(jìn)行照相機(jī)主體的各種控制。CPU 121具有運(yùn)算單元、R0M、RAM、A/D轉(zhuǎn)換器、D/A轉(zhuǎn)換器和通信接ロ電路等，基于ROM中存儲的預(yù)定程序來驅(qū)動照相機(jī)中設(shè)置的各種電路，以及執(zhí)行諸如AF拍攝、圖像處理和記錄等的一系列操作。電子閃光燈控制電路122與拍攝操作同步地控制照明単元115的開啟和關(guān)閉。輔助光驅(qū)動電路123與焦點(diǎn)檢測操作同步地控制AF輔助光単元116的開啟和關(guān)閉。攝像元件驅(qū)動電路124控制攝像元件107的攝像操作，對所獲得的圖像信號進(jìn)行A/D轉(zhuǎn)換，并將轉(zhuǎn)換后的圖像信號發(fā)送至CPU 121。圖像處理電路125對攝像元件107所獲得的圖像執(zhí)行諸如伽瑪轉(zhuǎn)換、顔色插值和JPEG壓縮等的處理。調(diào)焦驅(qū)動電路126基于焦點(diǎn)檢測結(jié)果來驅(qū)動調(diào)焦致動器114并驅(qū)動第三透鏡組105在光軸方向上前后移動，從而進(jìn)行焦點(diǎn)調(diào)節(jié)。光圈快門驅(qū)動電路128驅(qū)動光圈和快門致動器112并控制光圈快門102的開ロ。變焦驅(qū)動電路129根據(jù)拍攝者的變焦操作來驅(qū)動變焦致動器111。諸如IXD等的顯示裝置131顯示關(guān)于照相機(jī)的拍攝模式的信息、拍攝前的預(yù)覽圖像、拍攝后的確認(rèn)圖像和焦點(diǎn)檢測時的聚焦?fàn)顟B(tài)顯示圖像等。操作開關(guān)組132由電源開關(guān)、釋放(拍攝觸發(fā)器)開關(guān)、變焦操作開關(guān)和拍攝模式選擇開關(guān)等構(gòu)成?？刹鹦堕W速存儲器133記錄所拍攝圖像。圖2示出攝像元件的框圖。圖2的框圖示出用于說明讀取操作所需的最小結(jié)構(gòu)。省略像素復(fù)位信號等。在圖2中，光電轉(zhuǎn)換単元(以下省略為PDmn :m表示X方向地址，m=0、I、.、m-l ;n表示Y方向地址，n=0、l、. . .、n_l)201由光電ニ極管、像素放大器和復(fù)位開關(guān)等構(gòu)成。在本發(fā)明的攝像元件中，mXn光電轉(zhuǎn)換單元被ニ維連續(xù)配置。僅對左上部的光電轉(zhuǎn)換單元TOcitl附近配置的光電轉(zhuǎn)換単元提供附圖標(biāo)記，以避免圖的復(fù)雜性。開關(guān)202利用垂直掃描電路208逐行選擇光電轉(zhuǎn)換單元PDnm的輸出。線存儲器203用于臨時存儲光電轉(zhuǎn)換単元PDmn 201的輸出。線存儲器203存儲由垂直掃描電路所選擇的一行的光電轉(zhuǎn)換単元的輸出。通常，使用電容器作為線存儲器。開關(guān)204連接至水平輸出線，并用于將水平輸出線復(fù)位至預(yù)定電位VHRST，并且開關(guān)204由信號HRST來控制。開關(guān)205用于將線存儲器203中所存儲的光電轉(zhuǎn)換單元PDmn 201的輸出順次發(fā)送至水平輸出線。通過利用后述的水平掃描電路206順次掃描開關(guān)HcTHnrl，讀出一行的光電轉(zhuǎn)換的輸出。水平掃描電路206順次掃描線存儲器中所存儲的光電轉(zhuǎn)換單元的輸出并發(fā)送至水平輸出線。信號PHST是水平掃描電路的數(shù)據(jù)輸入。PHl和PH2表示移位時鐘輸入端。當(dāng)PHl=H時，設(shè)置數(shù)據(jù)。根據(jù)輸入至PH2的移位時鐘來鎖存數(shù)據(jù)。通過將移位時鐘輸入至移位時鐘輸入端PHl和PH2使PHST順次移位，從而使得開關(guān)HcTHnrl順次接通?？刂贫俗虞斎攵薙KIP用于在間隔剔除讀出時進(jìn)行設(shè)置。通過將SKIP端子設(shè)置為H(高)水平，可以以預(yù)定間隔跳過水平掃描。垂直掃描電路208順次掃描輸出并以掃描方式發(fā)送V0xVlri,從而選擇光電轉(zhuǎn)換單元PDnm的選擇開關(guān)202。以與水平掃描電路相同的方式，利用數(shù)據(jù)輸入PVST、移位時鐘PVl和PV2、以及間隔剔除讀出設(shè)置SKIP來控制控制信號。由于操作與水平掃描電路的操作相同，因而省略其詳細(xì)說明。在該圖中，未示出上述控制信號。圖3A、3B、4A、4B、5A和5B是用于說明攝像像素和焦點(diǎn)檢測像素的結(jié)構(gòu)的圖。在該實施例中，使用如下的拜耳陣列，其中在4(=2X2)個像素中，對角配置具有G(緑色)的光、譜靈敏度的兩個像素，并且使用具有R(紅色)的光譜靈敏度的一個像素和具有B (藍(lán)色)的光譜靈敏度的一個像素作為其它兩個像素。根據(jù)預(yù)定規(guī)則在拜耳陣列之間分散配置具有后述的結(jié)構(gòu)的焦點(diǎn)檢測像素。即，本發(fā)明的攝像元件具有以下結(jié)構(gòu)使用對紅色、緑色和藍(lán)色感光的三種像素的拜耳陣列為單位，ニ維連續(xù)地配置多個拜耳陣列單元，并且在該陣列中離散配置功能像素。圖3A和3B中示出攝像像素的配置和結(jié)構(gòu)。圖3A是(2X2)攝像像素的平面圖。如已知的那樣，在拜耳陣列中，對角配置G像素，并且配置R像素和B像素作為其它兩個像素。重復(fù)配置(2行X2列)的結(jié)構(gòu)。圖3B是沿著圖3A中的線3B-3B的截面圖。將片上微透鏡ML配置在各像素的最前面。設(shè)置R(紅色)的顏色濾波器CFR和G(緑色)的顏色濾波器CFG。示意性示出C-MOS傳感器的光電轉(zhuǎn)換単元H)。設(shè)置配線層CL以形成用于傳送C-MOS傳感器中的各種信號的 信號線。示意性示出拍攝光學(xué)系統(tǒng)TL。 攝像像素的片上微透鏡ML和光電轉(zhuǎn)換單元ro被構(gòu)造成使得穿過拍攝光學(xué)系統(tǒng)TL的光被盡可能有效地會聚。換句話說，拍攝光學(xué)系統(tǒng)TL的有效光瞳EP和光電轉(zhuǎn)換單元ro具有經(jīng)由微透鏡ML的共軛關(guān)系，并且光電轉(zhuǎn)換単元的有效區(qū)域被設(shè)計為具有大的區(qū)域。盡管在圖3B中說明了 G像素的入射光，但R像素和B (藍(lán)色)像素也具有與G像素相同的結(jié)構(gòu)。因此，與RGB攝像像素的各像素相對應(yīng)的出射光瞳EP具有大的直徑，從而能夠有效接收來自被攝體的光井提高圖像信號的S/N比。圖4A和4B示出在拍攝透鏡的水平方向(橫向方向)上進(jìn)行光瞳分割的焦點(diǎn)檢測像素的配置和結(jié)構(gòu)。即，根據(jù)本發(fā)明的焦點(diǎn)檢測像素是用于接收利用光學(xué)系統(tǒng)所獲得的圖像光、并利用光瞳分割方法檢測光學(xué)系統(tǒng)的焦點(diǎn)調(diào)節(jié)狀態(tài)的功能像素。水平方向或橫向方向被如下定義。即，當(dāng)用戶保持照相機(jī)以使得拍攝光學(xué)系統(tǒng)的光軸變得水平時，該方向表示沿著與光軸垂直并在水平方向上延伸的直線的方向。圖4A是包括焦點(diǎn)檢測像素的(2行X2列)的像素的平面圖。在本實施例中，由于焦點(diǎn)檢測像素的信號用于圖像創(chuàng)建，因而即使在焦點(diǎn)檢測像素的信號中也要求S/N比高。因此，R和B的像素留作攝像像素，并且G的像素用作焦點(diǎn)檢測像素。即，根據(jù)本發(fā)明的功能像素被配置在與對攝像元件上的緑色感光的像素相對應(yīng)的位置處。圖4A中的SA和SB示出功能像素。圖4B是沿著圖4A的線4B-4B的截面圖。微透鏡ML和光電轉(zhuǎn)換單元I3D各自具有與圖3B所示的攝像像素相同的結(jié)構(gòu)。在本實施例中，由于焦點(diǎn)檢測像素的信號用于圖像創(chuàng)建，因而不改變地配置顔色分離顏色濾波器。然而，可以使用透明薄膜CFW(白色)來代替G的濾波器。為了在攝像元件中進(jìn)行光瞳分割，將配線層CL的開ロ部相對于微透鏡ML的中心線向ー個方向偏移。具體地說，由于將像素SA及其開ロ部OPHA偏移至右側(cè)，因而接收到穿過拍攝透鏡TL的左側(cè)上的出射光瞳EPHA的光。同樣，由于將像素SB的開ロ部OPHB偏移至左側(cè)，因而接收到穿過拍攝透鏡TL的右側(cè)上的出射光瞳EPHB的光。因此，在水平方向上規(guī)則配置像素SA，并將利用這些像素組獲得的被攝體圖像假定為A圖像。還在水平方向上規(guī)則配置像素SB，并將利用這些像素組獲得的被攝體圖像假定為B圖像。通過檢測A圖像和B圖像的相對位置，可以檢測被攝體圖像的散焦量。在像素SA和SB中，盡管可以對在拍攝顯示畫面的橫向方向具有亮度分布的被攝體、例如垂直線進(jìn)行焦點(diǎn)檢測，但不能對在垂直方向上具有亮度分布的橫線進(jìn)行焦點(diǎn)檢測。當(dāng)用戶想要檢測垂直方向上的散焦量時，通過使像素SA及其開ロ部OPHA向上偏移并通過使像素SB及其開ロ部OPHB向下偏移來構(gòu)造就足夠了。圖5A和5B示出在拍攝光學(xué)系統(tǒng)的垂直方向上進(jìn)行光瞳分割的焦點(diǎn)檢測像素的配置和結(jié)構(gòu)。如下定義垂直方向和橫向方向。即，當(dāng)用戶保持照相機(jī)以使得拍攝光學(xué)系統(tǒng)的光軸變得水平時，沿著與光軸以直角相交并在垂直方向上延伸的直線的方向表示垂直方向。圖5A是包括焦點(diǎn)檢測像素的2行X2列的像素的平面圖。以與圖4A相同的方式，將R和B的像素留作攝像像素，并且G的像素用作焦點(diǎn)檢測像素。通過圖5A中的SC和SD示出焦點(diǎn)檢測像素。圖5B是沿著圖5A中的線5B-5B的截面圖。盡管圖4B中的像素具有在橫向方向上進(jìn)行光瞳分割的結(jié)構(gòu)，但圖5B中的像素除了僅將光瞳分割方向設(shè)置為縱向方向(垂直方向)以外與圖4B中的像素具有相同的結(jié)構(gòu)。即，由于將像素SC的開ロ部OPVC向下偏移，因而接收到穿過拍攝光學(xué)系統(tǒng)TL的上側(cè)的出射光瞳EPVC的光。同樣，由于將像素SD的開ロ部OPVD向上偏移，因而接收到穿過拍攝光學(xué)系統(tǒng)TL的下側(cè)的出射光瞳EPVD的光。因此，在垂直方向上規(guī)則配置像素SC，并將利用這些像素組獲得的被攝體圖像假定為C圖像。還 在垂直方向上規(guī)則配置像素SD，并將利用這些像素組獲得的被攝體圖像假定為D圖像。通過檢測C圖像和D圖像的相對位置，可以檢測在垂直方向上具有亮度分布的被攝體圖像的散焦量。圖6是示出攝像顯示畫面上的焦點(diǎn)檢測區(qū)域的例子。將多個焦點(diǎn)檢測區(qū)域I飛設(shè)置在攝像顯示畫面上，并且與攝像顯示畫面上的焦點(diǎn)檢測區(qū)域I飛相對應(yīng)地配置焦點(diǎn)檢測像素。即，對于攝像元件上的焦點(diǎn)檢測像素組，通過從在與焦點(diǎn)檢測區(qū)域I飛相對應(yīng)的區(qū)域中聚焦的被攝體圖像來采樣圖像，進(jìn)行焦點(diǎn)檢測。圖7是示出攝像像素和焦點(diǎn)檢測像素的配置的圖。在該圖中，配置涂布有綠色濾波器的像素G、涂布有紅色濾波器的像素R和涂布有藍(lán)色濾波器的像素B。在該圖中，SA表示配置有通過在水平方向上偏移像素部的開ロ所形成的焦點(diǎn)檢測像素，并且SA是用于檢測SA像素組和后述的SB像素組之間的水平方向上的圖像偏移量的參考像素組。SB表示配置有通過在與SA像素相反的方向上偏移像素的開ロ部而形成的焦點(diǎn)檢測像素，并且SB是用于檢測相對于SA像素組的水平方向上的圖像散焦量的參考像素組。SA和SB的反色部分表示偏移后的像素的開ロ位置。根據(jù)本發(fā)明的焦點(diǎn)檢測像素接收針對大小等于或大于普通攝像像素的光瞳的大小的一半的光瞳的圖像光。圖8是示出本實施例中的照相機(jī)的操作的流程圖。當(dāng)拍攝者接通照相機(jī)的電源開關(guān)(主開關(guān))時(步驟S801)，在步驟S802中，CPU121確認(rèn)照相機(jī)中各致動器的操作和攝像元件的操作，初始化存儲器中的內(nèi)容和執(zhí)行程序，并執(zhí)行拍攝準(zhǔn)備操作。在步驟S803中，開始攝像元件的攝像操作并輸出用于預(yù)覽的低分辨率運(yùn)動圖像。在步驟S804中，將所讀出的運(yùn)動圖像顯示到照相機(jī)的背面上所設(shè)置的顯示裝置131，并且拍攝者觀察預(yù)覽圖像并確定拍攝的圖像構(gòu)圖。在步驟S805中，從圖6中的圖像區(qū)域確定焦點(diǎn)檢測區(qū)域。之后，進(jìn)入步驟S901并執(zhí)行焦點(diǎn)檢測子例程。圖9是焦點(diǎn)檢測子例程的流程圖。當(dāng)處理例程從主流程的步驟S901跳到該子例程時，在步驟S902中，讀出步驟S805中確定的焦點(diǎn)檢測區(qū)域中所包括的焦點(diǎn)檢測像素。在步驟S903中，執(zhí)行所獲得的兩個圖像的相關(guān)運(yùn)算并計算兩個圖像的相對位置差的量。在步驟S904中，判斷相關(guān)運(yùn)算結(jié)果的可靠性。這里的可靠性表示兩個圖像的一致度，并且當(dāng)兩個圖像的一致度大時，焦點(diǎn)檢測結(jié)果的可靠性通常高。因此，如果選擇了多個焦點(diǎn)檢測區(qū)域，則優(yōu)先使用具有高可靠性的信息。在步驟S905中，根據(jù)高可靠性的檢測結(jié)果計算散焦量。在步驟S906中，處理例程返回至圖8的主流程中的步驟S807。在圖8中的步驟S807中，判斷圖9的步驟S905中計算出的散焦量是否等于或小于容許值。如果散焦量大于容許值，則判斷為焦點(diǎn)狀態(tài)是失焦?fàn)顟B(tài)。在步驟S808中，驅(qū)動調(diào)焦透鏡。之后，重復(fù)執(zhí)行步驟S90fS807。如果在步驟S807中確定為焦點(diǎn)狀態(tài)達(dá)到聚焦?fàn)顟B(tài)，則在步驟S809中進(jìn)行聚焦顯示并且處理例程進(jìn)入步驟S810。在步驟S810中，判斷是否接通拍攝開始開關(guān)。如果未接通拍攝開始開關(guān)，則在步 驟S810中維持拍攝待機(jī)狀態(tài)。如果在步驟S810中接通了拍攝開始開關(guān)，則進(jìn)入步驟S1001并執(zhí)行拍攝子例程。圖10是拍攝子例程的流程圖。當(dāng)接通拍攝開始開關(guān)時，處理例程從步驟S1001開始。在步驟S1002中，驅(qū)動光量調(diào)節(jié)光圈，并進(jìn)行指定曝光時間的機(jī)械快門的開ロ控制。在步驟S1003中，進(jìn)行用于高分辨率的靜止圖像拍攝的圖像讀出，即所有像素的讀出。在步驟SllOl中，在所讀出的圖像信號中，生成各焦點(diǎn)檢測像素的位置處的圖像數(shù)據(jù)。圖11是用于生成各焦點(diǎn)檢測像素的位置處的圖像數(shù)據(jù)的子例程的流程圖。在焦點(diǎn)檢測像素中，從圖5A、5B和6中可以理解，通過每個像素所設(shè)置的遮光層來限制視野。因此，來自焦點(diǎn)檢測像素的圖像信號的水平不同于來自位于焦點(diǎn)檢測像素周圍的攝像像素的圖像信號的水平。照相機(jī)100具有多個用于生成(估計)焦點(diǎn)檢測像素行的各像素位置處的圖像數(shù)據(jù)的單元。第一個是增益校正単元(第一估計單元)，用于在圖像創(chuàng)建時使用焦點(diǎn)檢測像素的信號來執(zhí)行增益校正運(yùn)算。第二個是插值單元(第二估計單元)，用于基于焦點(diǎn)檢測像素周圍的攝像像素的攝像像素信號來生成圖像數(shù)據(jù)。插值單元計算焦點(diǎn)檢測像素周圍的攝像像素的輸出的單純平均，由此獲得焦點(diǎn)檢測像素的位置處的圖像數(shù)據(jù)。因此，在焦點(diǎn)檢測像素附近拍攝高對比度的被攝體的情況下，通過插值處理所獲得的圖像數(shù)據(jù)可能與假定為代替焦點(diǎn)檢測像素配置在該位置處的攝像像素的輸出有很大不同。另一方面，與插值單元相比，増益校正単元可以生成不依賴于被攝體的圖像數(shù)據(jù)。因此，利用増益校正単元所獲得的圖像數(shù)據(jù)用作用于確定執(zhí)行插值處理時所參考的攝像像素的組合的指標(biāo)。圖12示出焦點(diǎn)檢測像素組和焦點(diǎn)檢測像素周圍的攝像像素的配置。假定在應(yīng)當(dāng)配置G像素的位置處配置的焦點(diǎn)檢測像素的輸出是J(AFG)，并且J周圍的G像素的輸出是I(G1)"I(G8)。在步驟S1102中，通過校正焦點(diǎn)檢測像素的輸出J(AFG)的増益來生成焦點(diǎn)檢測像素組的各像素位置處的圖像數(shù)據(jù)。將通過増益校正計算出的圖像數(shù)據(jù)假定為Ig(AFG)。關(guān)于各焦點(diǎn)檢測像素中的増益校正值，預(yù)先將針對透鏡和光圈的每個條件基于各像素的位置計算出的數(shù)字表達(dá)式存儲在照相機(jī)中?；蛘?，設(shè)備可以具有増益調(diào)節(jié)單元，該增益調(diào)節(jié)單元用于在每當(dāng)進(jìn)行攝像時，基于焦點(diǎn)檢測像素的輸出和焦點(diǎn)檢測像素周圍配置的相同顔色的攝像像素的輸出，以實時方式獲得增益校正值。
在步驟S1103中，將通過根據(jù)焦點(diǎn)檢測像素周圍的攝像像素的攝像數(shù)據(jù)執(zhí)行插值處理生成焦點(diǎn)檢測像素的位置處的圖像數(shù)據(jù)時所參考的攝像像素的組合數(shù)設(shè)置為Cnmax。將說明將執(zhí)行插值處理時所參考的攝像像素的組合假定為(G1，G8)、(G4，G5)、(G3, G6)和(G2，G7)的例子(在該情況下，Cnmax的最大值等于4)。盡管在本實施例中公開了插值參考像素的四種組合，但作為插值處理中所參考的攝像像素，可以使用離焦點(diǎn)檢測像素更遠(yuǎn)的像素。在步驟S1104中，判斷所參考的上述攝像像素(Gl, G8)、(G4, G5)、(G3, G6)和(G2, G7)中是否包括缺陷像素。如果存在包括缺陷像素的參考像素的組合，則減去這些組合的數(shù)量Cnmax的值。如果G2是缺陷像素，則G2’可以用作插值參考像素來代替G2。S卩，本發(fā)明具有缺陷像素判斷単元，用于判斷多個插值參考像素中是否包括缺陷像素；以及插值參考像素選擇單元，用于根據(jù)缺陷像素判斷単元的判斷結(jié)果來選擇插值參考像素的組合。在步驟S1105中，將優(yōu)先順序分配給多個插值參考像素的組合。作為分配優(yōu)先順序的方法，將所參考的像素的攝像數(shù)據(jù)的差的絕對值進(jìn)行比較。abs (I (Gl) -I (G8))、abs (I (G4) -I (G5))、abs (I (G3) -I (G6))、abs (I (G2) -I (G7))abs()是表示絕對值的符號。按照從所參考的像素的攝像數(shù)據(jù)的差的絕對值中較小的絕對值起的順序?qū)?yōu)先順序設(shè)置得較高，并且按照優(yōu)先順序從最高到最低的降序來分配數(shù)值(如果參考像素中不存在缺陷像素，則從較高優(yōu)先順序起順次為1、2、3和4)。根據(jù)上述攝像像素的組合基于插值處理所獲得的圖像數(shù)據(jù)由以下等式(1廣(4)表示。Icl (AFG) = (KGl)+1(68))/2. . . (I)Ic2 (AFG) = (I (G4) +I (G5) )/2. . . (2)Ic3 (AFG) = (I (G3) +I (G6) )/2. . . (3)Ic4 (AFG) = (I (G2) +I (G7) )/2. . . (4)在步驟S1106中，將基于所參考的攝像像素的優(yōu)先順序在數(shù)值分配中所設(shè)置的數(shù)值I設(shè)置為P。在步驟S1107中，利用根據(jù)所設(shè)置的p的值的插值參考像素來執(zhí)行插值處理，由此計算圖像數(shù)據(jù)。在步驟S1108中，進(jìn)行以下條件判斷以判斷針對焦點(diǎn)檢測像素的位置處的圖像數(shù)據(jù)、通過插值處理所生成的圖像數(shù)據(jù)是否是正確的。當(dāng)通過插值處理所生成的圖像數(shù)據(jù)滿足以下表達(dá)式(5)時，判斷為所生成的圖像數(shù)據(jù)是正確的。abs ((Ic (AFG)-Ig (AFG))/Ig (AFG))〈T . . . (5)在表達(dá)式(5)中，T表示預(yù)定閾值。在該表達(dá)式中，基于通過插值處理所生成的圖像數(shù)據(jù)和通過增益校正處理所生成的圖像數(shù)據(jù)之間的差相對于通過增益校正處理所生成的圖像數(shù)據(jù)的比率來進(jìn)行上述判斷。判斷表達(dá)式不限于表達(dá)式(5)，但是可以基于通過增益校正處理所生成的圖像數(shù)據(jù)和通過插值處理所生成的圖像數(shù)據(jù)之間的差來進(jìn)行上述判斷。即，本發(fā)明具有圖像輸出選擇單元，用于基于第一和第二估計單元所獲得的估計結(jié)果來選擇功能像素的位置處的圖像輸出，其中，特別地，根據(jù)第二估計單元根據(jù)多個插值參考像素的組合所獲得的多個估計結(jié)果和第一估計單元所獲得的估計結(jié)果之間的差是否落在預(yù)定值以下來選擇功能像素的位置處的圖像輸出。如果確定為通過插值處理所生成的圖像數(shù)據(jù)是正確的，則處理例程進(jìn)入步驟S1109o將焦點(diǎn)檢測像素的位置處的圖像數(shù)據(jù)設(shè)置為步驟S1107中獲得的Ic(AFG)。、
如果在步驟S1108中確定為通過插值處理所生成的圖像數(shù)據(jù)不正確，則處理例程進(jìn)入步驟S1110。在步驟SlllO中，判斷是否存在執(zhí)行插值處理時要參考的攝像像素的其它組合。如果存在其它組合(步驟SlllO中為“否”)，則根據(jù)具有下一高優(yōu)先順序的參考像素的組合通過插值處理再次計算圖像數(shù)據(jù)，并重復(fù)與上述相同的處理步驟(步驟S1112)。在重復(fù)處理并且不存在執(zhí)行插值處理時要參考的攝像像素的其它組合的情況下(步驟SlllO中為“是”)，判斷為難以通過插值處理生成圖像數(shù)據(jù)。處理例程進(jìn)入步驟Sllll并且將焦點(diǎn)檢測像素的位置處的圖像數(shù)據(jù)設(shè)置為通過増益校正處理所生成的圖像數(shù)據(jù)Ig(AFG)。在該情況下，代替通過增益校正處理所生成的圖像數(shù)據(jù)，可以將利用通過增益校正處理所生成的圖像數(shù)據(jù)和通過插值處理所生成的圖像數(shù)據(jù)的加權(quán)相加所獲得的值用作圖像數(shù)據(jù)。在該情況下，假定通過增益校正處理所生成的圖像數(shù)據(jù)是Ig(AFG)、并且利用產(chǎn)生與増益校正結(jié)果最接近的值的插值處理的圖像數(shù)據(jù)是Ic(AFG)，將利用以下等式(6)表達(dá)的圖像數(shù)據(jù)設(shè)置為焦點(diǎn)檢測像素的位置處的圖像數(shù)據(jù)。I=kl X Ig(AFG) +k2 X Ic (AFG)... (6)
其中，kl和k2表示滿足kl+k2=l的加權(quán)系數(shù)。S卩，根據(jù)本發(fā)明的圖像輸出選擇單元，如果對于由第二估計單元根據(jù)多個插值參考像素的組合所獲得的多個估計結(jié)果中任意一者，該估計結(jié)果和第一估計單元所獲得的估計結(jié)果之間的差都未落在預(yù)定值以下，則可以選擇第一估計單元所獲得的估計結(jié)果或者通過第一和第二估計單元所獲得的估計結(jié)果的加權(quán)相加所形成的估計結(jié)果作為功能像素的位置處的圖像的輸出。現(xiàn)在將說明焦點(diǎn)檢測像素是缺陷像素的情況下的圖像處理操作，盡管省略其說明以避免圖11變得復(fù)雜。如果焦點(diǎn)檢測像素是缺陷像素，則步驟S1102中獲得的増益校正處理結(jié)果變成與假定為配置在焦點(diǎn)檢測像素的位置處的攝像像素的圖像信號有很大不同的圖像信號的可能性高。因此，輸出設(shè)置P=I時所計算出的插值處理結(jié)果作為圖像信號。針對這點(diǎn)，本發(fā)明的圖像處理設(shè)備具有缺陷像素判斷単元，用于判斷普通攝像像素和功能像素是否是缺陷像素，其中圖像輸出選擇單元根據(jù)缺陷像素判斷単元的結(jié)果來選擇由第一和第二估計單元所獲得的估計結(jié)果之一作為功能像素的位置處的圖像輸出。而且，針對焦點(diǎn)檢測像素組中另一像素的位置處的圖像數(shù)據(jù)，同樣基于通過增益校正處理所生成的圖像數(shù)據(jù)和通過插值處理所生成的圖像數(shù)據(jù)之間的比較來生成圖像數(shù)據(jù)。當(dāng)在所有焦點(diǎn)檢測像素的位置處生成了圖像數(shù)據(jù)時，處理例程返回至S1005。在步驟S1005中，執(zhí)行圖像的諸如伽瑪校正和邊緣強(qiáng)調(diào)等的圖像處理。在步驟S1006中，將所拍攝圖像記錄至閃速存儲器133。在步驟S1007中，將所拍攝圖像顯示到顯示裝置131上。在步驟S1008中，處理例程返回至圖8的主流程。當(dāng)處理例程返回至圖8的主流程時，在步驟S812中結(jié)束一系列拍攝操作。如上所述，在本發(fā)明中，針對焦點(diǎn)檢測像素的位置處的圖像信號的生成，基于通過相對不依賴于被攝體的増益校正處理所生成的圖像信號來選擇插值處理中所參考的多個像素。因此，可以減少由于通過插值處理所生成的圖像信號而引起的圖像質(zhì)量的劣化。結(jié)果，在本發(fā)明中，由于可以生成適當(dāng)?shù)牟逯迪袼兀蚨梢栽诰S持減小由于插值引起的圖像質(zhì)量的劣化的效果的同時增大焦點(diǎn)檢測像素數(shù)。此外，根據(jù)本發(fā)明，檢測焦點(diǎn)檢測像素是否是缺陷像素，并且可以提供不使用這些像素值的像素值插值結(jié)構(gòu)，以使得可以更有效地完成圖像質(zhì)量劣化的減少。上述實施例僅僅是典型例子，并且在實施本發(fā)明吋，實施例的各種修改和改變是可能的。例如，盡管在圖7所示的攝像元件中示出每四個像素配置焦點(diǎn)檢測像素、并且將像素SA和SB配置到不同行的例子，但如圖13所示，即使將焦點(diǎn)檢測像素SA和SB交替配置在構(gòu)成特定焦點(diǎn)檢測區(qū)域中的一行的所有G像素的位置，也獲得相同的效果。然而，在如圖13所示密集地配置焦點(diǎn)檢測像素的情況下，對焦點(diǎn)檢測像素的位置處的圖像數(shù)據(jù)進(jìn)行插值運(yùn)算時所參考的像素的組合數(shù)減小。圖14是圖12中的焦點(diǎn)檢測像素和焦點(diǎn)檢測像素周圍的像素的配置圖。在該圖中，在根據(jù)焦點(diǎn)檢測像素周圍的普通像素的輸出對焦點(diǎn)檢測像素AFG2的位置處的圖像信息進(jìn)行插值運(yùn)算的情況下，在插值運(yùn)算中所使用的參考像素是(Gl, G8)、(G3, G6)和(G2, G7)。在用于生成圖12中所示的焦點(diǎn)檢測像素的位置處的圖像數(shù)據(jù)的處理中，相對于 插值處理中所參考的像素的組合方向，將所參考的像素的攝像信號的差的絕對值進(jìn)行比較，預(yù)先分配優(yōu)先順序，從根據(jù)參考像素的優(yōu)先順序高的組合進(jìn)行插值處理的圖像數(shù)據(jù)開始，逐一與通過增益校正處理所生成的圖像數(shù)據(jù)進(jìn)行比較。然而，如圖15所示，可以使用以下方法首先，將利用等式(I廣(4)所計算出的所有Ic (AFG)(步驟S1504)與通過增益校正處理所生成的圖像數(shù)據(jù)Ig(AFG)進(jìn)行比較，并且將用于獲得與通過增益校正處理所生成的圖像數(shù)據(jù)最接近的圖像數(shù)據(jù)的插值結(jié)果用作圖像數(shù)據(jù)(步驟S1505)。即，在本發(fā)明中，還可以利用這種方法來構(gòu)造圖像輸出選擇單元，以使得在第二估計單元根據(jù)多個插值參考像素的組合所獲得的多個估計結(jié)果中，將與第一估計單元所獲得的估計結(jié)果最接近的估計結(jié)果選擇為功能像素的位置處的圖像的輸出。利用這種方法也獲得同樣的效果。照相機(jī)控制單元121可以通過ー個硬件來控制，或者可以利用多個硬件分擔(dān)處理的方法來控制整個設(shè)備。盡管以上針對典型實施例詳細(xì)說明了本發(fā)明，但本發(fā)明不限于這些具體實施例，并且在不背離本發(fā)明的實質(zhì)的范圍內(nèi)的各種修改也包括在本發(fā)明中。此外，上述實施例中的各實施例僅示出本發(fā)明的實施例并且還可以適當(dāng)?shù)亟Y(jié)合這些實施例。關(guān)于上述實施例的處理，可以將記錄了實現(xiàn)各功能的軟件的程序代碼的存儲介質(zhì)提供至系統(tǒng)或設(shè)備。系統(tǒng)或設(shè)備的計算機(jī)(或CPU或MPU)讀出并執(zhí)行存儲介質(zhì)中存儲的程序代碼，從而實現(xiàn)要實現(xiàn)的上述實施例的功能。在該情況下，從存儲介質(zhì)讀出的程序代碼本身實現(xiàn)上述實施例的功能，并且存儲了程序代碼的存儲介質(zhì)構(gòu)成本發(fā)明。作為用于供給這種程序代碼的存儲介質(zhì)，例如，可以使用軟盤(注冊商標(biāo))、硬盤、光盤或磁盤等?；蛘撸€可以使用CD-ROM、CD-R、磁帶、非易失性存儲卡或ROM等。不僅包括計算機(jī)執(zhí)行所讀出的程序代碼以實現(xiàn)上述實施例的功能的情況，還包括在計算機(jī)中運(yùn)行的OS(操作系統(tǒng))等基于程序代碼的指示執(zhí)行實際處理的一部分或全部并且通過這些處理實現(xiàn)上述實施例的功能。此外，可以將從存儲介質(zhì)讀出的程序代碼寫入針對插在計算機(jī)中的功能擴(kuò)展板或針對連接至計算機(jī)的功能擴(kuò)展單元裝備的存儲器。還包括以下情況之后，針對功能擴(kuò)展板或功能擴(kuò)展單元設(shè)置的CPU等基于程序代碼的指示執(zhí)行實際處理的部分或全部并且通過這些處理實現(xiàn)上述實施例的功能。
產(chǎn)業(yè)卜.的可利用件可以將圖像處理設(shè)備應(yīng)用至圖像信號的處理。盡管已經(jīng)參考典型實施例說明了本發(fā)明，但是應(yīng)該理解，本發(fā)明不限于所公開的典型實施例。所附權(quán)利要求書的范圍符合最寬的解釋，以包含所有這類修改、等同結(jié)構(gòu)和功倉^:。
本申請要求于2009年12月9日提交的日本專利申請2009-279528的優(yōu)先權(quán)，其全部內(nèi)容通過引用包含于此。
權(quán)利要求
1.ー種圖像處理設(shè)備，包括 輸入單元，用于輸入攝像元件的輸出，其中，所述攝像元件具有在水平方向和垂直方向上配置的普通像素和在所述普通像素之間離散配置的功能像素； 第一估計單元，用于對所述功能像素的輸出進(jìn)行増益校正運(yùn)算，從而估計所述功能像素的位置處的圖像信號； 第二估計單元，用于從所述功能像素周圍的普通像素選擇參考像素，并基于所選擇的多個參考像素的輸出來估計所述功能像素的位置處的圖像信號的輸出；以及 選擇單元，用于基于所述第一估計單元的輸出，從所述第二估計單元基于所述多個參考像素的組合所獲得的一個或多個估計結(jié)果中選擇所述功能像素的位置處的圖像信號。
2.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備，其特征在于，所述選擇単元根據(jù)所述功能像素的位置處的圖像信號和所述第一估計單元所獲得的估計結(jié)果之間的差是否落在預(yù)定值以下，來選擇所述功能像素的位置處的圖像信號。
3.根據(jù)權(quán)利要求2所述的圖像處理設(shè)備，其特征在于，如果針對所述第二估計單元根據(jù)所選擇的所述多個參考像素的組合所獲得的多個估計結(jié)果中的任意估計結(jié)果，所述功能像素的位置處的圖像信號和所述第一估計單元所獲得的估計結(jié)果之間的差都未落在所述預(yù)定值以下，則所述選擇單元將所述第一估計單元所獲得的估計結(jié)果或者通過所述第一估計單元和所述第二估計單元所獲得的估計結(jié)果的加權(quán)相加所獲得的估計結(jié)果設(shè)置為所述功能像素的位置處的圖像信號。
4.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備，其特征在于，所述選擇単元將所述第二估計単元根據(jù)所述多個參考像素的組合所獲得的多個估計結(jié)果中、與所述第一估計單元所獲得的估計結(jié)果最接近的估計結(jié)果設(shè)置為所述功能像素的位置處的圖像信號。
5.根據(jù)權(quán)利要求廣4中任一項所述的圖像處理設(shè)備，其特征在于，還包括缺陷像素判斷単元，所述缺陷像素判斷単元用于判斷所述普通像素或所述功能像素是否是缺陷像素， 其中，所述選擇単元根據(jù)所述缺陷像素判斷単元的判斷結(jié)果，將所述第一估計單元和所述第二估計單元所獲得的估計結(jié)果之一設(shè)置為所述功能像素的位置處的圖像信號。
6.根據(jù)權(quán)利要求廣4中任一項所述的圖像處理設(shè)備，其特征在于，還包括 缺陷像素判斷単元，用于判斷所述多個參考像素是否包括缺陷像素；以及 參考像素選擇單元，用于根據(jù)所述缺陷像素判斷単元的判斷結(jié)果來選擇參考像素的組ムロ o
7.根據(jù)權(quán)利要求I飛中任一項所述的圖像處理設(shè)備，其特征在于，所述攝像元件通過以拜耳陣列單元為單位ニ維配置多個像素來形成，所述拜耳陣列由對紅色、緑色和藍(lán)色感光的三種像素構(gòu)成，并且所述攝像元件具有在像素陣列中離散配置的功能像素。
8.根據(jù)權(quán)利要求7所述的圖像處理設(shè)備，其特征在干，所述功能像素配置在與所述攝像元件的像素陣列中的對綠色感光的像素相對應(yīng)的位置處。
9.根據(jù)權(quán)利要求廣8中任一項所述的圖像處理設(shè)備，其特征在于，所述功能像素經(jīng)由光學(xué)系統(tǒng)接收圖像光并輸出利用光瞳分割方法檢測所述光學(xué)系統(tǒng)的焦點(diǎn)調(diào)節(jié)狀態(tài)的信號。
10.根據(jù)權(quán)利要求9所述的圖像處理設(shè)備，其特征在于，所述功能像素接收針對大小等于或大于所述普通像素的光瞳的大小的一半的光瞳的圖像光。
11.ー種攝像設(shè)備的控制方法，所述攝像設(shè)備具有在水平方向和垂直方向上配置的普通像素和在所述普通像素之間離散配置的功能像素，所述控制方法包括 第一估計步驟，用于對所述功能像素的輸出進(jìn)行増益校正運(yùn)算，從而估計所述功能像素的位置處的圖像信號； 第二估計步驟，用于從所述功能像素周圍的普通像素選擇參考像素，并基于所選擇的多個參考像素的輸出來估計所述功能像素的位置處的圖像信號的輸出；以及 選擇步驟，用于基于所述第一估計步驟的輸出，從所述第二估計步驟中基于所選擇的多個參考像素的組合所獲得的一個或多個估計結(jié)果中選擇所述功能像素的位置處的圖像信號。
12.一種用于使計算機(jī)執(zhí)行攝像設(shè)備的控制方法的程序代碼，所述攝像設(shè)備具有在水平方向和垂直方向上配置的普通像素和在所述普通像素之間離散配置的功能像素，所述控制方法包括 從攝像元件中讀出所述普通像素和所述功能像素的輸出的步驟； 第一估計步驟，用于對所述功能像素的輸出進(jìn)行増益校正運(yùn)算，從而估計所述功能像素的位置處的圖像信號； 第二估計步驟，用于從所述功能像素周圍的普通像素選擇參考像素，并基于所選擇的多個參考像素的輸出來估計所述功能像素的位置處的圖像信號的輸出；以及 選擇步驟，用于基于所述第一估計步驟的輸出，從所述第二估計步驟中基于所選擇的多個參考像素的組合所獲得的一個或多個估計結(jié)果中選擇所述功能像素的位置處的圖像信號。
13.一種存儲根據(jù)權(quán)利要求12所述的程序代碼的計算機(jī)可讀存儲介質(zhì)。
全文摘要
一種用于處理攝像元件的輸出的圖像處理設(shè)備，攝像元件具有在水平方向和垂直方向上配置的普通像素和在普通像素之間離散配置的功能像素，圖像處理設(shè)備被配置為通過功能像素的輸出的增益校正運(yùn)算來估計功能像素的位置處的圖像信號，基于從功能像素周圍的普通像素所選擇的參考像素的輸出來估計功能像素的位置處的圖像信號的輸出，并且從使用參考像素所獲得的一個或多個估計結(jié)果、基于利用增益校正的估計結(jié)果來選擇功能像素的位置處的圖像信號。
文檔編號G02B7/34GK102652432SQ20108005626
公開日2012年8月29日 申請日期2010年12月3日 優(yōu)先權(quán)日2009年12月9日
發(fā)明者石井宏和 申請人:佳能株式會社