圖像處理裝置、圖像處理方法、程序及記錄介質(zhì)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及圖像處理裝置、圖像處理方法、程序及記錄介質(zhì)，特別是涉及進(jìn)行與有無異常傾斜入射光對(duì)應(yīng)的混色校正的技術(shù)。
【背景技術(shù)】
[0002]一般來說，在具有馬賽克狀的濾色器排列的單板方式的攝像元件中，發(fā)生由來自相鄰像素的光的漏入導(dǎo)致的混色。如果對(duì)混色的影響大的RGB的顏色信號(hào)進(jìn)行數(shù)字信號(hào)處理而生成圖像，則圖像的顏色再現(xiàn)性(畫質(zhì))降低，另外，難以根據(jù)混色的影響大的RGB的顏色信號(hào)來高精度地計(jì)算白平衡(WB)校正用的WB增益。
[0003]另外，如果在通過數(shù)碼相機(jī)等攝像裝置對(duì)被攝體圖像進(jìn)行攝影時(shí)強(qiáng)光入射到透鏡，則有時(shí)由攝影透鏡、大鏡頭的表面反射后的光在透鏡內(nèi)部、相機(jī)內(nèi)部復(fù)雜地進(jìn)行反射，以無法預(yù)料的角度前進(jìn)的光由攝像元件接收。這樣一來，從無法預(yù)料的角度入射到攝像元件的異常傾斜入射光會(huì)引起所謂的重影、眩光等現(xiàn)象，使攝影圖像的畫質(zhì)劣化。
[0004]特別是在異常傾斜入射光的角度大的情況下，異常傾斜入射光的至少一部分入射到與所通過的濾色器相鄰的像素的光電二極管。這樣一來，在異常傾斜入射光所通過的濾色器與實(shí)際接收到光的光電二極管不完全對(duì)應(yīng)的情況下，通過該異常傾斜入射光而較大程度地引起所謂的混色現(xiàn)象，導(dǎo)致攝影圖像的顏色再現(xiàn)性劣化。
[0005]作為減輕混色的影響的方法，例如專利文獻(xiàn)I公開抑制伴隨著重影的顏色噪聲的產(chǎn)生的攝像裝置。在該攝像裝置中，使用RAW數(shù)據(jù)來檢測(cè)伴隨著重影的顏色噪聲的產(chǎn)生，校正被檢測(cè)到顏色噪聲的產(chǎn)生的像素?cái)?shù)據(jù)的亮度電平值。
[0006]另外，專利文獻(xiàn)2公開提高對(duì)各像素的混色校正處理的精度的攝像裝置。在該攝像裝置中，存儲(chǔ)表示與從周邊像素混入到校正對(duì)象像素的信號(hào)成分相關(guān)的特性的混色特性信息，根據(jù)像素排列中的校正對(duì)象像素的位置和混色特性信息來求出校正系數(shù)，對(duì)從校正對(duì)象像素讀出的信號(hào)進(jìn)行校正。
[0007]專利文獻(xiàn)
[0008]專利文獻(xiàn)1:日本特開2005-333251號(hào)公報(bào)
[0009]專利文獻(xiàn)2:日本特開2010-130583號(hào)公報(bào)

【發(fā)明內(nèi)容】

[0010]發(fā)明所要解決的課題
[0011 ] 以往一直使用的攝像元件大多具有比較單一的濾色器排列。例如，在廣泛使用的拜耳排列中，由相鄰配置的“R像素和G像素”及“G像素和B像素”構(gòu)成的2個(gè)像素(水平方向)X 2個(gè)像素(垂直方向)的合計(jì)4個(gè)像素在水平方向和垂直方向上重復(fù)配置，從而構(gòu)成濾色器排列。
[0012]在這樣的具有單一的濾色器排列的攝像元件中，混色現(xiàn)象也比較簡單，所以能夠通過比較簡單的混色校正來降低在圖像數(shù)據(jù)上混色的影響。
[0013]然而，最近，具有比較復(fù)雜的濾色器排列的攝像元件也正在被使用，即使是具有同色的濾色器的像素彼此之間，有時(shí)相鄰的像素(濾色器)的種類不同的像素也存在有多個(gè)。例如具有綠色的濾色器的像素(G像素)在拜耳排列中根據(jù)相鄰的像素類型(濾色器類型)而被分為兩類，但在復(fù)雜的濾色器排列中被分為非常多個(gè)種類(例如10種以上)。
[0014]混色的影響根據(jù)相鄰像素的種類而變動(dòng)，所以即使是具有同色的濾色器的像素，也優(yōu)選進(jìn)行與相鄰的像素(濾色器)的種類對(duì)應(yīng)的混色校正。
[0015]然而，在具有復(fù)雜的濾色器排列的攝像元件中，混色現(xiàn)象也復(fù)雜化，即使是本來輸出相同或近似的像素?cái)?shù)據(jù)的接近同色像素，由于混色現(xiàn)象，也有時(shí)從接近同色像素輸出與相鄰像素的濾色器的種類對(duì)應(yīng)的不同的像素?cái)?shù)據(jù)。
[0016]特別是，如果像重影光那樣入射角與普通光不同的光(異常傾斜入射光)入射到攝像元件，則由于通過了相鄰像素的濾色器的重影光的漏入，在接近同色像素之間產(chǎn)生像素?cái)?shù)據(jù)的不自然的差異(同色級(jí)差)。關(guān)于該級(jí)差現(xiàn)象，即使是同色像素，與相鄰像素類型對(duì)應(yīng)的種類越多，則也越復(fù)雜化。在具有復(fù)雜的濾色器排列的攝像元件中，由于重影光的入射而產(chǎn)生的復(fù)雜的混色現(xiàn)象有時(shí)通過通常的混色校正無法充分地校正。特別是在從關(guān)于濾色器排列而具有由“3個(gè)像素(水平方向)X 3個(gè)像素(垂直方向)”以上的像素?cái)?shù)構(gòu)成的基本排列圖案的攝像元件輸出的圖像數(shù)據(jù)中，有時(shí)通過通常的混色校正無法完全應(yīng)對(duì)。
[0017]這樣一來，在像重影光那樣的異常傾斜入射光入射到攝像元件的情況下，有時(shí)顯著地產(chǎn)生基于從接近同色像素輸出的“與相鄰的像素類型對(duì)應(yīng)的不同的像素?cái)?shù)據(jù)”的級(jí)差現(xiàn)象，所以優(yōu)選盡可能地去除這樣的級(jí)差。特別是，在重影光入射到具有復(fù)雜的濾色器排列的攝像元件的狀態(tài)下得到的圖像數(shù)據(jù)中，期望有效地去除重影光所引起的“同色像素之間的像素?cái)?shù)據(jù)的級(jí)差”。
[0018]另一方面，即使在重影光不入射到攝像元件的情況下，根據(jù)攝像元件的像素特性(基于微透鏡、濾色器、光電二極管、布線等的配置、尺寸、物性值等的特性)，會(huì)發(fā)生來自相鄰像素的光的漏入而產(chǎn)生混色現(xiàn)象。因此，在重影光不入射到攝像元件的情況下，期望通過使這樣的攝像元件的像素特性最優(yōu)化的混色校正，降低由來自相鄰像素的光的漏入導(dǎo)致的混色。
[0019]本發(fā)明是鑒于上述的情況而完成的，其目的在于，提供一種技術(shù)，對(duì)重影光等異常傾斜入射光入射到的像素的像素?cái)?shù)據(jù)，降低該異常傾斜入射光所引起的同色像素間的像素?cái)?shù)據(jù)的級(jí)差，另外對(duì)異常傾斜入射光未入射到的像素的像素?cái)?shù)據(jù)，校正由像素特性引起的混色，從而得到高品質(zhì)的圖像數(shù)據(jù)。
[0020]用于解決課題的手段
[0021]本發(fā)明的一種方式涉及一種圖像處理裝置，具備:異常傾斜入射光檢測(cè)單元，根據(jù)從具有多個(gè)像素的攝像元件輸出的圖像數(shù)據(jù)，檢測(cè)有無異常傾斜入射光，該多個(gè)像素包括濾色器及光電二極管并且輸出與受光量對(duì)應(yīng)的像素?cái)?shù)據(jù)；第一混色校正單元，基于校正對(duì)象像素的相鄰像素的像素?cái)?shù)據(jù)，對(duì)校正對(duì)象像素的像素?cái)?shù)據(jù)進(jìn)行第一混色校正；第二混色校正單元，基于校正對(duì)象像素的周邊像素的像素?cái)?shù)據(jù)，對(duì)校正對(duì)象像素的像素?cái)?shù)據(jù)進(jìn)行第二混色校正；及混色校正判定單元，根據(jù)異常傾斜入射光檢測(cè)單元的檢測(cè)結(jié)果，判定由第一混色校正單元和第二混色校正單元中的哪一個(gè)混色校正單元進(jìn)行圖像數(shù)據(jù)的校正，混色校正判定單元進(jìn)行以下判定:在由異常傾斜入射光檢測(cè)單元未檢測(cè)到異常傾斜入射光的情況下，由第一混色校正單元進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的校正，在由異常傾斜入射光檢測(cè)單元檢測(cè)出異常傾斜入射光的情況下，由第二混色校正單元進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的校正。
[0022]根據(jù)本方式，在未檢測(cè)到異常傾斜入射光的情況下，對(duì)校正對(duì)象像素的像素?cái)?shù)據(jù)進(jìn)行基于校正對(duì)象像素的相鄰像素的像素?cái)?shù)據(jù)的第一混色校正，在檢測(cè)到異常傾斜入射光的情況下，對(duì)校正對(duì)象像素的像素?cái)?shù)據(jù)進(jìn)行基于校正對(duì)象像素的周邊像素的像素?cái)?shù)據(jù)的第二混色校正。
[0023]因此，特別是對(duì)排列矩陣尺寸大的攝像元件，也能夠應(yīng)用本方式，能夠解決由于異常傾斜入射光(重影光等)漏入到相鄰像素的影響而產(chǎn)生的同色像素的級(jí)差，抑制由異常傾斜入射光導(dǎo)致的畫質(zhì)劣化。
[0024]在這里所說的“校正對(duì)象像素的相鄰像素”是指與校正對(duì)象像素相鄰的像素，例如具有與校正對(duì)象像素的濾色器相鄰的濾色器的像素能夠成為“校正對(duì)象像素的相鄰像素”。例如，能夠?qū)鼑Ｕ龑?duì)象像素的8個(gè)像素(在第一方向、第二方向及相對(duì)于第一方向和第二方向而具有角度的方向上與校正對(duì)象像素相鄰的像素)、在第一方向和第二方向上與校正對(duì)象像素相鄰的4個(gè)像素設(shè)為“校正對(duì)象像素的相鄰像素”。另外，“校正對(duì)象像素的周邊像素”是指在從校正對(duì)象像素起的規(guī)定范圍內(nèi)包含的像素，既可以與校正對(duì)象像素相鄰，也可以不相鄰。因此“校正對(duì)象像素的周邊像素”是能夠包含“校正對(duì)象像素的相鄰像素”的概念。另外，從作為“校正對(duì)象像素的周邊像素”的基準(zhǔn)的校正對(duì)象像素起的范圍能夠根據(jù)第二混色校正的具體內(nèi)容來適當(dāng)確定。
[0025]在第一混色校正中，能夠基于校正對(duì)象像素的相鄰像素的全部或一部分像素?cái)?shù)據(jù)，對(duì)校正對(duì)象像素的像素?cái)?shù)據(jù)進(jìn)行校正，在第二混色校正中，能夠基于校正對(duì)象像素的周邊像素的全部或一部分像素?cái)?shù)據(jù)，對(duì)校正對(duì)象像素的像素?cái)?shù)據(jù)進(jìn)行校正。
[0026]在異常傾斜入射光不入射的情況下的混色主要是由來自相鄰像素的光的漏入所導(dǎo)致的，所以能夠基于校正對(duì)象像素的相鄰像素的像素?cái)?shù)據(jù)來有效地校正。另一方面，重影光等異常傾斜入射光入射到具有攝像元件內(nèi)這樣大小的范圍(多個(gè)像素)內(nèi)，所以異常傾斜入射光所引起的混色的影響能夠通過綜合考量了校正對(duì)象像素的周邊像素的像素?cái)?shù)據(jù)的混色校正來有效地降低。
[0027]此外，在這里所說的“異常傾斜入射光”是指與構(gòu)成被攝體圖像的普通光不同的未意料到的光要素，是指所通過的濾色器和光電二極管不包含在同一像素中的光要素。作為該異常傾斜入射光，例如可以包括引起重影、眩光等現(xiàn)象的光要素。一般來說，重影是指如下現(xiàn)象:通過經(jīng)由透鏡表面、攝像元件表面的反射而通過與本來的成像光(有效成像光)的光路不同的光路并到達(dá)像面上的光(無用光)來形成在視覺上能夠辨認(rèn)一定形狀的光學(xué)圖像。另外，眩光是指如下現(xiàn)象:在強(qiáng)光入射到光學(xué)系統(tǒng)的情況下，入射光的一部分被透鏡表面、攝像元件表面反射而作為無用光到達(dá)像面上，導(dǎo)致在視覺上無法辨認(rèn)一定形狀的圖像異常，在生成圖像中產(chǎn)生對(duì)比度的降低、光的滲透等。
[0028]另外，對(duì)“第一方向”及“第二方向”沒有特別的限定，只要是形成相互垂直(包括實(shí)質(zhì)上垂直)的方向即可。例如，既可以將在由攝像裝置進(jìn)行攝像時(shí)的相對(duì)于被攝體的“水平方向”及“垂直方向”設(shè)為“第一方向”及“第二方向”，也可以將相對(duì)于這些“水平方向”及“垂直方向”而具有任意的角度的方向設(shè)為“第一方向”及“第二方向”。因此，在按照使在水平方向和垂直方向上二維地排列的多個(gè)像素旋轉(zhuǎn)45度而得到的所謂“蜂窩型的排列”來配置多個(gè)像素的情況下，可以將與“水平方向”及“垂直方向”呈45度的方向作為“第一方向”及“第二方向”來處理。
[0029]優(yōu)選的是，第二混色校正單元將具有與校正對(duì)象像素同色的濾色器的4個(gè)以上的像素作為周邊像素，對(duì)校正對(duì)象像素的像素?cái)?shù)據(jù)進(jìn)行第二混色校正。
[0030]在這種情況下，在第二混色校正中，使用具有與校正對(duì)象像素同色的濾色器的像素的像素?cái)?shù)據(jù)，并且使用4個(gè)以上的像素的像素?cái)?shù)據(jù)，所以能夠進(jìn)行高精度的混色校正。
[0031]優(yōu)選的是，周邊像素由相對(duì)于周邊像素而相鄰的像素的濾色器的種類(相鄰像素配置類型)相互不同的像素構(gòu)成。
[0032]在這種情況下，基于相鄰的像素的濾色器的種類相互不同的周邊像素的像素?cái)?shù)據(jù)來進(jìn)行第二混色校正，對(duì)異常傾斜入射光所引起的各種類型的混色，能夠靈活應(yīng)對(duì)。
[0033]優(yōu)選的是，攝像元件的多個(gè)像素具有基本排列圖案，該基本排列圖案是M像素XN像素(其中，M為3以上的整數(shù)，N為3以上的整數(shù))的基本排列圖案，并在第一方向和與第一方向垂直的第二方向上排列有多個(gè)，周邊像素是在包括校正對(duì)象像素的M像素XN像素的范圍內(nèi)包含的像素，并且具有與校正對(duì)象像素同色的濾色器。
[0034]在這種情況下，能夠以基本排列圖案為單位進(jìn)行第二混色校正，能夠高效地進(jìn)行高精度的混色校正。
[0035]優(yōu)選的是，攝像元件的多個(gè)像素具有基本排列圖案，該基本排列圖案是M像素XN像素(其中，M為3以上的整數(shù)，N為3以上的整數(shù))的基本排列圖案，并在第一方向和與第一方向垂直的第二方向上排列有多個(gè)，周邊像素是在比包括校正對(duì)象像素的M像素XN像素的范圍大的范圍內(nèi)包含的像素，并且具有與校正對(duì)象像素同色的濾色器。
[0036]在這種情況下，能夠基于在比基本排列圖案大的范圍內(nèi)包含的像素的像素?cái)?shù)據(jù)來進(jìn)行第二混色校正，能夠基于大量的像素?cái)?shù)據(jù)來進(jìn)行高精度的混色校正。
[0037]優(yōu)選的是，第二混色校正單元基于從校正對(duì)象像素和周邊像素的像素?cái)?shù)據(jù)導(dǎo)出的代表值，進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的第二混色校正。
[0038]在這種情況下，能夠基于從校正對(duì)象像素和周邊像素的像素?cái)?shù)據(jù)導(dǎo)出的代表值來簡化第二混色校正處理。
[0039]優(yōu)選的是，代表值是校正對(duì)象像素和周邊像素的像素?cái)?shù)據(jù)的平均值或加權(quán)平均值。
[0040]優(yōu)選的是，代表值是校正對(duì)象像素和周邊像素的像素?cái)?shù)據(jù)的中位數(shù)或眾數(shù)。
[0041]通過將這些校正對(duì)象像素和周邊像素的像素?cái)?shù)據(jù)的“平均值”、“加權(quán)平均值”、“中位數(shù)”及“眾數(shù)”中的任一個(gè)設(shè)為“代表值”，能夠簡化第二混色校正，有效地消除同色像素間的像素?cái)?shù)據(jù)的級(jí)差。
[0042]優(yōu)選的是，多個(gè)像素包括由包含至少I種以上的顏色的第一顏色的濾色器構(gòu)成的第一色像素及由包含第一顏色以外的至少2種以上的顏色的第二顏色的濾色器構(gòu)成的第二色像素，第一色像素具有用于得到亮度信號(hào)的貢獻(xiàn)率比第二色像素的濾色器高的顏色的濾色器，校正對(duì)象像素是第一色像素。
[0043]亮度是影響畫質(zhì)的很大的原因，但根據(jù)本方式，通過將用于得到亮度信號(hào)的貢獻(xiàn)率高的第一色像素設(shè)為校正對(duì)象像素，能夠有效地改善所得到的圖像的品質(zhì)。
[0044]優(yōu)選的是，第一色像素具有綠色、透明或白色的濾色器。
[0045]在這種情況下，將具有用于得到亮度信號(hào)的貢獻(xiàn)率比其他顏色高的綠色、透明或白色的濾色器的像素設(shè)為校正對(duì)象像素，所以能夠有效地改善所得到的圖像的品質(zhì)。
[0046]此外，透明的濾色器及白色的濾色器是紅波長區(qū)域的光、藍(lán)波長區(qū)域的光及綠波長區(qū)域的光中的任一個(gè)都透過的濾色器，透明的濾色器具有較高的光透射率(例如70%以上的光透射率)，白色的濾色器具有比透明的濾色器低的光透射率。
[0047]也可以是，攝像元件的多個(gè)像素具有基本排列圖案，該基本排列圖案是M像素XN像素(其中，M為3以上的整數(shù)，N為3以上的整數(shù))的基本排列圖案，并在第一方向和與第一方向垂直的第二方向上排列有多個(gè)，基本排列圖案中，相鄰像素的濾色器的種類相互不同的第一色像素包括至少5個(gè)。
[0048]根據(jù)本方式，特別是相鄰像素的濾色器的種類相互不同的第一色像素在基本排列圖案中包括5個(gè)以上的情況下，濾色器排列變得復(fù)雜，本發(fā)明所涉及的混色校正的有效性較高。
[0049]例如，關(guān)于拜耳排列的G(綠)像素，與相鄰像素配置類型對(duì)應(yīng)的種類為2種，由混色導(dǎo)致的同色G像素間的級(jí)差(同色級(jí)差)為I種圖案，所以容易進(jìn)行混色校正。另一方面，在M像素XN像素的基本排列圖案中包括5個(gè)以上(例如Gl?G5)相鄰像素的濾色器的種類相互不同的第一色像素的復(fù)雜的濾色器排列中，同色像素間的級(jí)差變得復(fù)雜，對(duì)畫質(zhì)劣化造成大的影響。根據(jù)本方式，基本排列圖案包括至少5個(gè)相鄰像素的濾色器的種類相互不同的第一色像素，即使對(duì)復(fù)雜的濾色器排列，也能夠有效地進(jìn)行第一混色校正及第二混色校正，抑制畫質(zhì)劣化。
[0050]本發(fā)明的其他方式涉及一種圖像處理方法，具備以下步驟:根據(jù)從具有多個(gè)像素的攝像元件輸出的圖像數(shù)據(jù)，檢測(cè)有無異常傾斜入射光，該多個(gè)像素包括濾色器及光電二極管并且輸出與受光量對(duì)應(yīng)的像素?cái)?shù)據(jù)；基于校正對(duì)象像素的相鄰像素的像素?cái)?shù)據(jù)，進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的第一混色校正；基于校正對(duì)象像素的周邊像素的像素?cái)?shù)據(jù)，進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的第二混色校正；及根據(jù)異常傾斜入射光檢測(cè)單元的檢測(cè)結(jié)果，判定通過第一混色校正和第二混色校正中的哪一個(gè)混色校正來進(jìn)行圖像數(shù)據(jù)設(shè)為校正，在判定是否進(jìn)行圖像數(shù)據(jù)的校正的步驟中，進(jìn)行以下判定:在檢測(cè)有無異常傾斜入射光的步驟中未檢測(cè)到異常傾斜入射光的情況下，通過第一混色校正來進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的校正，在檢測(cè)有無異常傾斜入射光的步驟中檢測(cè)到異常傾斜入射光的情況下，通過第二混色校正來進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的校正。
[0051]本發(fā)明的其他方式涉及一種程序，用于使計(jì)算機(jī)執(zhí)行以下步驟:根據(jù)從具有多個(gè)像素的攝像元件輸出的圖像數(shù)據(jù)，檢測(cè)有無異常傾斜入射光，該多個(gè)像素包括濾色器及光電二極管并且輸出與受光量對(duì)應(yīng)的像素?cái)?shù)據(jù)；基于校正對(duì)象像素的相鄰像素的像素?cái)?shù)據(jù)，進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的第一混色校正；基于校正對(duì)象像素的周邊像素的像素?cái)?shù)據(jù)，進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的第二混色校正；及根據(jù)異常傾斜入射光檢測(cè)單元的檢測(cè)結(jié)果，判定通過第一混色校正和第二混色校正中的哪一個(gè)混色校正來進(jìn)行圖像數(shù)據(jù)的校正，在判定是否進(jìn)行圖像數(shù)據(jù)的校正的步驟中，進(jìn)行以下判定:在檢測(cè)有無異常傾斜入射光的步驟中未檢測(cè)到異常傾斜入射光的情況下，通過第一混色校正來進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的校正，在檢測(cè)有無異常傾斜入射光的步驟中檢測(cè)到異常傾斜入射光的情況下，通過第二混色校正來進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的校正。
[0052]本發(fā)明的其他方式一種記錄介質(zhì)，記錄有用于使計(jì)算機(jī)執(zhí)行以下步驟的程序的計(jì)算機(jī)能夠讀取的代碼:根據(jù)從具有多個(gè)像素的攝像元件輸出的圖像數(shù)據(jù)，檢測(cè)有無異常傾斜入射光，該多個(gè)像素包括濾色器及光電二極管并且輸出與受光量對(duì)應(yīng)的像素?cái)?shù)據(jù)；基于校正對(duì)象像素的相鄰像素的像素?cái)?shù)據(jù)，進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的第一混色校正；基于校正對(duì)象像素的周邊像素的像素?cái)?shù)據(jù)，進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的第二混色校正；及根據(jù)異常傾斜入射光檢測(cè)單元的檢測(cè)結(jié)果，判定通過第一混色校正及第二混色校正中的哪一個(gè)混色校正來進(jìn)行圖像數(shù)據(jù)的校正，在判定是否進(jìn)行圖像數(shù)據(jù)的校正的步驟中，進(jìn)行以下判定:在檢測(cè)有無異常傾斜入射光的步驟中未檢測(cè)到異常傾斜入射光的情況下，通過第一混色校正來進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的校正，在檢測(cè)有無異常傾斜入射光的步驟中檢測(cè)到異常傾斜入射光的情況下，通過第二混色校正來進(jìn)行校正對(duì)象像素的像素?cái)?shù)據(jù)的校正。
[0053]發(fā)明效果
[0054]根據(jù)本發(fā)明，在未檢測(cè)到異常傾斜入射光的情況下，對(duì)校正對(duì)象像素的像素?cái)?shù)據(jù)進(jìn)行基于校正對(duì)象像素的相鄰像素的像素?cái)?shù)據(jù)的第一混色校正，在檢測(cè)到異常傾斜入射光的情況下，對(duì)校正對(duì)象像素的像素?cái)?shù)據(jù)進(jìn)行基于校正對(duì)象像素的周邊像素的像素?cái)?shù)據(jù)的第二混色校正。
[0055]因此，對(duì)重影光等異常傾斜入射光入射到的像素的像素?cái)?shù)據(jù)，能夠進(jìn)行基于校正對(duì)象像素的周邊像素的像素?cái)?shù)據(jù)的第二混色校正，以降低該異常傾斜入射光所引起的同色像素間的像素?cái)?shù)據(jù)的級(jí)差。另一方面，對(duì)異常傾斜入射光未入射到的像素的像素?cái)?shù)據(jù)，能夠進(jìn)行基于校正對(duì)象像素的相鄰像素的像素?cái)?shù)據(jù)的第一混色校正，以降低像素特性所引起的混色的影響。
[0056]這樣一來，根據(jù)本發(fā)明，能夠通過與混色原因?qū)?yīng)的靈活的混色校正處理來得到高品質(zhì)的圖像數(shù)據(jù)，能夠有效地抑制通過簡單的混色校正無法完全校正的“異常傾斜入射光所引起的同色像素間的像素?cái)?shù)據(jù)的級(jí)差”。
【附圖說明】
[0057]圖1是表示數(shù)碼相機(jī)的一個(gè)結(jié)構(gòu)例的框圖。
[0058]圖2A是表示彩色攝像元件的濾色器(像素)的基本排列圖案例的俯視圖，表示在水平方向和垂直方向上排列了 4個(gè)基本排列圖案P的狀態(tài)。
[0059]圖2B是表示彩色攝像元件的濾色器(像素)的基本排列圖案例的俯視圖，是I個(gè)基本排列圖案P的放大圖。
[0060]圖3是圖像處理電路的功能框圖。
[0061]圖4A是說明異常傾斜入射光(重影光等)所引起的混色現(xiàn)象的機(jī)制的剖視圖，表示G像素、R像素和G像素的相鄰配置例。
[0062]圖4B是說明異常傾斜入射光(重影光等)所引起的混色現(xiàn)象的機(jī)制的剖視圖，表示G像素、B像素和G像素的相鄰配置例。
[0063]圖5是混色判定校正部的功能框圖。
[0064]圖6是表示圖2的濾色器排列中的G像素的種類的圖。
[0065]圖7是表示由混色判定校正部實(shí)施的混色校正的流程的流程圖。
[0066]圖8是表示第二實(shí)施方式的彩色攝像元件的濾色器排列(像素排列)的圖。
[0067]圖9是表示濾色器排列的基本排列圖案的其他例子的圖。
[0068]圖10是表示濾色器排列的基本排列圖案的其他例子的圖。
[0069]圖11是表示濾色器排列的基本排列圖案的其他例子的圖。
[0070]圖12是表示濾色器排列的基本排列圖案的其他例子的圖。
[0071]圖13A是表示濾色器排列的基本排列圖案的其他例子的圖。
[0072]圖13B是表示濾色器排列的基本排列圖案的其他例子的圖。
[0073]圖14是表示濾色器的分光靈敏度的圖。
[0074]圖15是表示2X2的4個(gè)像素共享I個(gè)放大器的攝像元件的一例的圖。
[0075]圖16是對(duì)表不混色率的校正表格的一例進(jìn)行表不的圖表。
[0076]圖17是表示馬賽克圖像的8X8的分割區(qū)域的圖。
[0077]圖18是表示第一混色校正部的內(nèi)部結(jié)構(gòu)的一例的框圖。
[0078]圖19是表示混色校正A的一例的流程的流程圖。
[0079]圖20是表示在攝像元件中設(shè)置的濾色器排列的圖。
[0080]圖21A是說明將異常傾斜入射光的入射方向利用于混色校正的圖。
[0081]圖21B是說明將異常傾斜入射光的入射方向利用于混色校正的圖。
[0082]圖21C是說明將異常傾斜入射光的入射方向利用于混色校正的圖。
[0083]圖21D是說明將異常傾斜入射光的入射方向利用于混色校正的圖。
[0084]圖21E是說明將異常傾斜入射光的入射方向利用于混色校正的圖。
[0085]圖22A是說明將異常傾斜入射光的入射方向利用于混色校正的圖。
[0086]圖22B是說明將異常傾斜入射光的入射方向利用于混色校正的圖。
[0087]圖22C是說明將異常傾斜入射光的入射方向利用于混色校正的圖。
[0088]圖22D是說明將異常傾斜入射光的入射方向利用于混色校正的圖。
[0089]圖22E是說明將異常傾斜入射光的入射方向利用于混色校正的圖。
[0090]圖23是表示其他濾色器排列的圖。
[0091]圖24是表示將圖23所示的濾色器排列的基本排列像素組分割成第一子排列及第二子排列的情形的圖。
[0092]圖25是表示其他濾色器排列的圖。
[0093]圖26是表示將圖25所示的濾色器排列的基本排列像素組分割成第一子排列及第二子排列的情形的圖。
[0094]圖27是說明在圖25所示的濾色器排列中判別異常傾斜入射光的入射方向的圖。
[0095]圖28是說明在圖25所示的濾色器排列中判別異常傾斜入射光的入射方向的圖。
[0096]圖29是表示其他濾色器排列的圖。
[0097]圖30是表示將圖29所示的濾