專利名稱：攝像裝置、圖像處理裝置、圖像處理方法、圖像處理方法的程序以及記錄其的記錄介質(zhì)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及攝像裝置、圖像處理裝置、圖像處理方法、圖像處 理方法的程序以及記錄圖像處理方法的程序的記錄介質(zhì)，可以適用 于例如數(shù)碼相機(jī)。在本發(fā)明中，將各注目像素的像素值變換為以在 各注目像素中具有相同顏色信號(hào)成分的處理基準(zhǔn)像素值為基準(zhǔn)的 去噪用像素值并除去噪聲，然后通過(guò)反向變換成原來(lái)的像素值，從
而可以有效地避免畫(huà)質(zhì)的劣化，并去除在RAW數(shù)據(jù)包括的顏色噪:聲。
背景技術(shù)：
以往，在凄t碼相才幾中，對(duì)以4聶像元件的像素陣列依次得到的
RAW數(shù)據(jù)進(jìn)行去馬賽克處理并生成全色圖像，然后變換成亮度信 號(hào)、色差信號(hào)的圖像數(shù)據(jù)并記錄于記錄介質(zhì)中。公知有以下技術(shù) 通過(guò)將這樣的彩色圖像的噪聲被分類為作為亮度信號(hào)成分的噪聲 的亮度噪聲、和作為除去亮度信號(hào)成分的顏色信號(hào)成分的噪聲的顏 色噪聲，通過(guò)除去顏色噪聲，乂人而可以進(jìn)一步^是高畫(huà)質(zhì)。
關(guān)于彰:碼相才幾，在曰本特開(kāi)2005-311455 />才艮中7>開(kāi)有以下方 法在降低噪聲的處理中，選擇適當(dāng)?shù)耐鈬袼兀⑹褂迷撨x擇的 外圍i象素進(jìn)4亍減^^喿聲的處理，/人而可以在RAW凄t據(jù)階,殳高效率 地除去噪聲。
此夕卜，在日本特開(kāi)2004-221838 7>才艮中7>開(kāi)有以下方法采用 沿邊鄉(xiāng)彖延長(zhǎng)方向的失見(jiàn)定范圍的^象素值，對(duì)注目^象素的像素值進(jìn)4亍內(nèi) 插運(yùn)算處理，從而在去馬賽克處理等中，高精度地再現(xiàn)邊舌彖。
因此，當(dāng)在RAW數(shù)據(jù)階段去除顏色噪聲時(shí)，存在以下問(wèn)題 影響將直至亮度信號(hào)成分，各顏色信號(hào)的亮度值也發(fā)生變化。其結(jié) 果是，存在以下情況通過(guò)4昔i吳的顏色表示邊纟彖部分等，且畫(huà)質(zhì)顯 著劣化。
作為解決該問(wèn)題的一個(gè)方法，可以考慮在亮度信號(hào)、色差信號(hào) 的階段除去噪聲。根據(jù)該方法，考慮可以在不對(duì)亮度信號(hào)賦予影響 的情況下去除顏色噪聲。
但是，在這種方法中，是在噪聲直接混入的狀態(tài)下進(jìn)行去馬賽 克處理，在噪聲混入多的情況下，存在對(duì)去馬賽克處理賦予影響的 問(wèn)題。具體而言，存在以下情況通過(guò)例如在日本特開(kāi)2004-221838 公報(bào)中公開(kāi)的方法，在去馬賽克處理等中再現(xiàn)邊緣的情況下，通過(guò) 噪聲《晉誤地再現(xiàn)邊緣，并以4晉誤的顏色表示邊緣部分等，因此發(fā)生 顏色噪聲，畫(huà)質(zhì)顯著劣化。并且，也存在以下問(wèn)題在亮度信號(hào)及 色差信號(hào)階段，由于從RAW數(shù)據(jù)開(kāi)始的一系列的處理，噪聲的特 性發(fā)生復(fù)雜的變化，其結(jié)果是，無(wú)法將顏色噪聲去除干凈。另外， 由于信號(hào)處理電路等結(jié)構(gòu)上的限制，存在無(wú)法設(shè)置噪聲去除電路的 結(jié)構(gòu)的情況，在這種情況下，存在無(wú)法適用的問(wèn)題。

發(fā)明內(nèi)容
本發(fā)明鑒于上述問(wèn)題，目的在于4是供可有效地避免畫(huà)質(zhì)劣化且 可除去包含在RAW數(shù)據(jù)中的顏色噪聲的攝像裝置、圖像處理裝置、 圖l象處理方法、圖^f象處理方法的禾呈序以及i己錄圖l象處理方法的程序 的記錄介質(zhì)。
為了解決上述問(wèn)題，本發(fā)明應(yīng)用于攝像裝置，其攝像部，用于
輸出RAW數(shù)據(jù)；變換部，在基于上述RAW數(shù)據(jù)的馬賽克圖像上 依次設(shè)定注目像素，并將上述注目像素的像素值變換成去噪用像素 值，其中，上述去噪用像素值以在上述各注目像素中具有相同顏色 信號(hào)成分的處理基準(zhǔn)的像素值為基準(zhǔn)；噪聲除去部，用于從上述去 噪用像素值中除去噪聲；反向變換部，通過(guò)與上述變換部相反的處 理，4巴在上述噪聲除去部中除去噪聲后的上述去噪用像素值變換成 原來(lái)的像素值；以及去馬賽克部，對(duì)基于在上述反向變換部中處理 后的像素值的馬賽克圖像進(jìn)行去馬賽克處理，并生成全色圖像數(shù) 據(jù)。
此外，本發(fā)明適用于抑制以攝像元件的像素排列依次得到的 RAW數(shù)據(jù)的噪聲的圖像處理裝置，其包括變換部，在基于上述 RAW數(shù)據(jù)的馬賽克圖像上依次設(shè)定注目像素，并將上述注目像素 的像素值變換成去噪用像素值，其中，上述去噪用像素值以在上述 各注目像素中具有相同顏色信號(hào)成分的處理基準(zhǔn)的像素值為基準(zhǔn)； 噪聲除去部，用于從上述去噪用像素值中除去噪聲；以及反向變換 部，通過(guò)與上述變換部相反的處理，4巴在上述噪聲除去部中除去噪 聲后的上述去噪用像素值變換成原來(lái)的像素值。
并且，本發(fā)明適用于用于抑制以攝像元件的像素排列依次得到 的RAW數(shù)據(jù)的噪聲的圖像處理方法，其包括變換步驟，在基于 上述RAW #:據(jù)的馬賽克圖<象上依次-沒(méi)定注目<象素，并將上述注目 像素的像素值變換成去噪用像素值，其中，上述去噪用像素值以在 上述各注目像素中具有相同顏色信號(hào)成分的處理基準(zhǔn)的像素值為 基準(zhǔn)；噪聲除去步驟，用于從上述去噪用像素值中除去噪聲；以及 反向變換步驟，通過(guò)與上述變換步驟相反的處理，4巴在上述噪聲除 去步驟中除去噪聲后的上述去噪用像素值變換成原來(lái)的像素值。
另夕卜，本發(fā)明適用于圖像處理方法的程序，其中，上述圖像處
理方法用于抑制以攝像元件的像素排列依次得到的RAW數(shù)據(jù)的噪 聲，上述圖像處理方法包括變換步驟，在基于上述RAW凄史據(jù)的 馬賽克圖像上依次設(shè)定注目像素，并將上述注目像素的像素值變換 成去噪用像素值，其中，上述去噪用像素值以在上述各注目像素中 具有相同顏色信號(hào)成分的處理基準(zhǔn)的〗象素值為基準(zhǔn)；i噪聲除去步 驟，用于從上述去噪用像素值中除去噪聲；以及反向變換步驟，通 過(guò)與上述變換步驟相反的處理，4巴在上述噪聲除去步驟中除去噪聲 后的上述去噪用像素值變換成原來(lái)的像素值。
并且，本發(fā)明適用于記錄介質(zhì)，記錄用于抑制以攝像元件的像 素排列依次得到的RAW數(shù)據(jù)的噪聲的圖像處理方法的程序，其中， 上述圖^f象處理方法的程序包括變換步驟，在基于上述RAW凄t據(jù) 的馬賽克圖像上依次i殳定注目像素，并將上述注目^f象素的像素值變 換成去噪用像素值，其中，上述去噪用像素值以在上述各注目像素 中具有相同顏色信號(hào)成分的處理基準(zhǔn)的像素值為基準(zhǔn)；噪聲除去步 驟，用于從上述去噪用像素值中除去噪聲；以及反向變換步驟，通 過(guò)與上述變換步驟相反的處理，4巴在上述噪聲除去步驟中除去噪聲 后的上述去噪用像素值變換成原來(lái)的像素值。
根據(jù)本發(fā)明的構(gòu)成，由于在以在各注目像素中具有相同的顏色 信號(hào)成分的處理基準(zhǔn)的像素值作為基準(zhǔn)的去噪用像素值中除去噪 聲，所以可以充分降低對(duì)亮度信號(hào)的影響并抑制顏色噪聲。因此， 可以有效;也回避畫(huà)質(zhì)的劣化并可除去包含在RAW lt據(jù)中的顏色p喿聲。
才艮據(jù)本發(fā)明，可以有效地回避畫(huà)質(zhì)的劣化并除去包含在RAW 數(shù)據(jù)中的顏色噪聲。


圖1是表示本發(fā)明實(shí)施例1的數(shù)碼相機(jī)的框圖2是表示圖1的數(shù)碼相機(jī)中的光學(xué)校正部和圖像處理部的結(jié) 構(gòu)的框圖3是表示圖1的數(shù)碼相機(jī)中的攝像元件的像素的配置的平面
圖4是用于i兌明圖2的光學(xué)才交正部中的簡(jiǎn)易去馬賽克部(simple demosaicing section ) 15的處玉里的平面圖5是表示圖4后續(xù)的平面圖6是用于說(shuō)明圖2的光學(xué)校正部中的簡(jiǎn)易去馬賽克部15的 藍(lán)色<象素的處理的平面圖7是表示圖6后續(xù)的平面圖8是用于說(shuō)明圖2的光學(xué)4交正部中的噪聲除去部的平面圖9是用于iJL明圖2的光學(xué)4交正部中的簡(jiǎn)易去馬賽克部18的 紅色^f象素的處理的平面圖IO是用于說(shuō)明圖2的光學(xué)才交正部中的簡(jiǎn)易去馬賽克部18的 藍(lán)色像素的處理的平面圖11是表示圖IO后續(xù)的平面圖12是表示圖11后續(xù)的平面圖13是表示圖2的圖像處理部中的邊緣(edge)辨別去馬賽 克部的框圖14是用于說(shuō)明圖13的邊緣辨別去馬賽克部的加權(quán)計(jì)算部23 的平面圖15是用于說(shuō)明圖14后續(xù)的平面圖；以及
圖16 (A)及圖16 (B)是用于說(shuō)明其它實(shí)施例中的簡(jiǎn)易去馬 賽克部15、 18的處理的平面圖。
具體實(shí)施例方式
以下，參照相應(yīng)的附圖來(lái)"i羊細(xì)it明本發(fā)明的實(shí)施例。 (1 )實(shí)施例1的構(gòu)成
圖1是表示本發(fā)明實(shí)施例的數(shù)碼相機(jī)的框圖。在該數(shù)碼相機(jī)l 中，攝像元件3由CCD ( Charge Coupled Device,電荷耦合裝置) 固體才聶^象元ff、 CMOS ( Complementary Metal-Oxide Semiconductor,
互補(bǔ)金屬氧化物半導(dǎo)體)固體攝像元件等構(gòu)成。攝像元件3對(duì)通過(guò) 未圖示的透鏡元件形成在4i/像面上的光學(xué)圖像進(jìn)4亍光電變換處理， 并4巴紅色、藍(lán)色、纟錄色的<象素<直以乂于應(yīng)于,早爾陣歹'J ( Bayer array ) 的順序依次輸出。
前處理部4對(duì)4l像元件3的輸出信號(hào)進(jìn)行相關(guān)雙重采樣處理、 自動(dòng)增益調(diào)整處理、才莫凄史變4灸處理，并l俞出RAW凄t才居Dl。
光學(xué)才交正部5對(duì)從該前處理部4輸出的RAW凄t據(jù)Dl進(jìn)行缺 陷才交正處理(defect correction process )、白平4軒調(diào)整處理，并llT出 RAWlt據(jù)D2。此外，在電荷積累時(shí)間短于^見(jiàn)定時(shí)間進(jìn)行l(wèi)聶影的情況等下，通過(guò)足夠的SN比(信噪比)無(wú)法取得RAW數(shù)據(jù)D1，在 這種情況下或者用戶指示顏色p桑聲(color noise)去除處理的情況 下，光學(xué)校正部5還執(zhí)行顏色噪聲去除處理，并輸出RAW數(shù)據(jù)D2。
圖l象處理部6對(duì)該RAW凄t據(jù)D2進(jìn)4亍去馬賽克處理、分辨率 變換處理、伽馬4交正處理、畫(huà)質(zhì)才交正處理等，并將其變換為亮度信 號(hào)及色差信號(hào)的圖像數(shù)據(jù)D3加以輸出。該凄史碼相機(jī)1把由圖像處 理部6處理后的圖^象數(shù)據(jù)D3顯示在未圖示的顯示裝置上，并顯示 攝影結(jié)果的監(jiān)視圖像。
編碼器(ENC) 7依靠例如JPEG (Joint Photographic Coding Experts Group,聯(lián)合圖像專家組)等靜止圖像的編碼方式，將從圖 像處理部6輸出的圖像凄t據(jù)D3進(jìn)4亍數(shù)據(jù)壓縮并輸出。
接口 (IF) 8^巴該編碼器7的輸出數(shù)據(jù)或者從光學(xué)校正部5輸 出的RAW凄t據(jù)D2 i己錄在i己錄介質(zhì)9中。另外，i己錄介質(zhì)9在本 實(shí)施例中是存儲(chǔ)卡，記錄介質(zhì)9用于記錄從接口 8輸出的各種數(shù)據(jù)。 此外，記錄介質(zhì)9并不僅限于存儲(chǔ)卡，可以廣泛地適用光碟、磁盤 等各種記錄介質(zhì)。
圖2是表示與光學(xué)校正部5及圖像處理部6的顏色噪聲去除的 結(jié)構(gòu)相關(guān)的框圖。在該圖2中，光學(xué)校正部5把RAW數(shù)據(jù)Dl輸 入至緩沖器(B ) 11。在此，該RAW數(shù)據(jù)Dl是按照攝像元件3的 拜爾陣列的順序依次排列的各像素的像素值連續(xù)圖像數(shù)據(jù)，圖3是 表示該攝像元件3的拜爾陣列的平面圖。攝像元件3在奇數(shù)行交替 配置綠色和紅色像素Gr、 R，在后續(xù)的偶數(shù)行交替配置藍(lán)色和綠色 的像素B、 Gb,并重復(fù)2像素x2像素的塊(block)而形成。此外， 下面，通過(guò)符號(hào)Gr、 Gb來(lái)表示在該一個(gè)塊中的2個(gè)#錄色<象素。因 此，RAW數(shù)據(jù)D1對(duì)應(yīng)于該拜爾陣列，在奇數(shù)行交替重復(fù)綠色、紅 色的像素值并存儲(chǔ)到緩沖器11中，在偶數(shù)行重復(fù)藍(lán)色、綠色的像
素值并存4諸到纟爰沖器11中。此外，以下，適當(dāng)?shù)?使用對(duì)應(yīng)的^f象素
的符號(hào)Gr、 Gb、 R、 B來(lái)表示綠色、紅色、藍(lán)色的^f象素值及圖像數(shù)據(jù)。
外圍像素參照部12由一定區(qū)域的緩沖器構(gòu)成，從存儲(chǔ)在緩沖 器ll中的RAW數(shù)據(jù)D1中依次以每個(gè)規(guī)定的大小讀出圖像數(shù)據(jù)Gr、 Gb、 R、 B并加以輸出。外圍4象素參照部12通過(guò)該圖像數(shù)據(jù)Gr、 Gb、 R、 B的處理，依次在基于RAW數(shù)據(jù)D1的馬賽克圖像上設(shè)定 注目像素，并且依次輸出該注目像素的像素值和外圍像素的像素 值。
四色分離部13將從該外圍像素參照部12依次輸出的圖像數(shù)據(jù) Gr、 Gb、 R、 B分離為圖3中上述的2像素x2像素的塊配置中的四 種圖像數(shù)據(jù)并加以輸出。
白平4軒部(WB ) 30對(duì)從該四色分離部13輸出的圖像數(shù)據(jù)Gr、 Gb、 R、 B進(jìn)4亍白平4軒調(diào)整后l敘出。，噪聲除去部14 乂人由該白平4軒部 30輸出的圖像數(shù)據(jù)Gr、 Gb、 R、 B中除去顏色噪聲并加以輸出。即， 在噪聲除去部14中，簡(jiǎn)易去馬賽克部15與圖像處理部6中的去馬 賽克處理相比，通過(guò)簡(jiǎn)單的運(yùn)算處理，對(duì)從四色分離部13輸出的 圖^f象H據(jù)Gr、 Gb、 R、 B進(jìn)4亍去馬賽克處理。更具體地說(shuō)，噪聲除 去部14相對(duì)于每個(gè)注目像素，從注目像素附近的像素中生成在各 注目像素中具有相同顏色信號(hào)成分的處理基準(zhǔn)的像素值。
在本實(shí)施例中，將綠色的像素值適用為該處理基準(zhǔn)的像素值， 簡(jiǎn)易去馬賽克部15只對(duì)于紅色、藍(lán)色的像素R、 B,生成處理基準(zhǔn) 的像素值。即，簡(jiǎn)易去馬賽克部15通過(guò)使用鄰接的綠色的像素Gr、 Gb的^f象素值的內(nèi)插運(yùn)算處理，從而分別計(jì)算出在紅色、藍(lán)色的l象 素R、 B的空間位置上的綠色的像素值，并對(duì)于這些紅色、藍(lán)色像 素R、 B，分別生成處理基準(zhǔn)的^象素i"直。
即，如圖3及圖4所示，p喿聲除去部14在注目4象素為紅色^f象 素R2的情況下，對(duì)鄰4妻該紅色像素R2的綠色像素Gb0、 Gr2、 Gr3、 Gb2取平均值，并求出注目像素R2的空間位置上的綠色的^f象素值 Gx2。噪聲除去部14把該計(jì)算出的綠色的像素值Gx2設(shè)定為該紅 色像素R2的處理基準(zhǔn)的像素值。另夕卜，對(duì)于藍(lán)色像素B，也同樣 地對(duì)鄰接的綠色像素值進(jìn)行平均化處理，并計(jì)算出在藍(lán)色4象素Bl 的空間位置上的綠色像素的像素值，并將其設(shè)定為處理基準(zhǔn)的像素 值Gy。簡(jiǎn)易去馬賽克部15把該計(jì)算出的紅色、藍(lán)色的像素R、 B 的空間位置上的綠色的像素值Gx、 Gy與從四色分離部13輸出的 4象素^f直Gr、 Gb、 R、 B—起豐針出。
色差計(jì)算部16使用從簡(jiǎn)易去馬賽克部15輸出的像素值Gr、 Gb、 R、 B、 Gx、 Gy，以處理基準(zhǔn)的像素值為基準(zhǔn)，生成表示紅色 像素、藍(lán)色像素的像素值的去噪(噪聲去除)用的像素值。更具體 地說(shuō)，在本實(shí)施例中，色差計(jì)算部16根據(jù)由簡(jiǎn)易去馬賽克部15輸 出的像素值Gr、 Gb、 R、 B、 Gx、 Gy計(jì)算色差，在本實(shí)施例中， 該色差的像素值被適用于去噪用的像素值。而且，以該處理基準(zhǔn)的 像素值為基準(zhǔn)的色差的像素值并不僅表示亮度信號(hào)及色差信號(hào)的 色差的像素值，廣義地講，其是通過(guò)與包含在處理基準(zhǔn)內(nèi)的顏色信 號(hào)成分的對(duì)比而表示注目像素的色調(diào)的像素值。
這里，在本實(shí)施例中，因?yàn)閷⒕G色的^f象素值適用為處理基準(zhǔn)的 像素值，因此，色差計(jì)算部16僅對(duì)于紅色、藍(lán)色的像素R、 B的像 素值，計(jì)算與綠色像素值相對(duì)的色差。即，通過(guò)與圖3及圖4之間 的對(duì)比，如圖5所示，對(duì)于紅色^f象素R2的色差Cr2, 4巴在該紅色 像素R2的位置上計(jì)算出的處理基準(zhǔn)的像素值Gx2從該紅色像素R2 的像素值R2中減去，并把結(jié)果所得的減法值(R2-Gx2)設(shè)定為紅 色像素R2的色差。并且，如圖6所示，對(duì)于藍(lán)色像素Bl的色差 Cbl,也同樣地把在該藍(lán)色像素Bl的位置上計(jì)算出的處理基準(zhǔn)的像
素值Gy2從該藍(lán)色像素Bl的像素值中減去，并把減法值(B1-Gyl ) 設(shè)定為藍(lán)色像素Bl的色差CM。
色差計(jì)算部16在全部的紅色以及藍(lán)色的像素R及B中沖丸行該 色差的計(jì)算，其結(jié)果是，通過(guò)與圖3的對(duì)比，如圖7所示，將紅色 像素R和藍(lán)色像素B的像素值分別變換成以綠色像素值為基準(zhǔn)的色 差像素值Cr、 Cb。
噪聲除去部17對(duì)于在色差計(jì)算部16中計(jì)算出的每個(gè)紅色及藍(lán) 色的色差，分別才丸ft去噪處理并輸出。具體而言，在本實(shí)施例中， 如圖8所示， <吏用9^f象素x9像素的s濾波器來(lái)去除p桑聲。這里，例 如在對(duì)紅色像素的色差Crc去除噪聲的情況下，在以該紅色像素為 中心的9像素x9像素區(qū)域內(nèi)，如陰影所示，包含25個(gè)紅色像素的 色差。因此，噪聲除去部17通過(guò)e濾波器對(duì)這25個(gè)像素的色差進(jìn) 行處理，并除去注目像素的噪聲。并且，同樣地對(duì)藍(lán)色Y象素的色差 進(jìn)行處理并除去噪聲。此外，在這種情況下，也可以對(duì)原來(lái)的綠色 像素值Gr、 Gb、或者對(duì)原來(lái)的綠色像素值Gr、 Gb和在簡(jiǎn)易去馬賽 克部15中計(jì)算出的綠色的l象素值Gx、 Gy進(jìn)行去p喿處理。
簡(jiǎn)易去馬賽克部18通過(guò)與簡(jiǎn)易去馬賽克部15同樣的內(nèi)插運(yùn)算 處理，對(duì)紅色〗象素、藍(lán)色像素的空間位置上的綠色的像素值Gx、 Gy進(jìn)行計(jì)算。
即，如圖9所示，簡(jiǎn)易去馬賽克部18在注目像素為紅色像素 R2的情況下，對(duì)鄰4妾于該紅色<象素的纟錄色<象素GbO、 Gr2、 Gr3、 Gb2的像素值進(jìn)行平均化處理，并將平均值設(shè)定成注目像素R2的 空間位置上的綠色像素值Gx。此外，對(duì)于藍(lán)色像素B,也同樣地對(duì) 鄰接的綠色像素的像素值取平均值，并將其設(shè)定成藍(lán)色像素B的空 間位置上的綠色的l象素值Gy。RB計(jì)算部19使用在簡(jiǎn)易去馬賽克部18中計(jì)算出的綠色像素
值Gx、 Gy來(lái)計(jì)算紅色l象素R、藍(lán)色^象素B的^f象素值。即，RB計(jì) 算部19把在簡(jiǎn)易去馬賽克部18中計(jì)算出的紅色像素R的空間位置 上的綠色像素值Gx加到該l象素的色差Cr2上，乂人而計(jì)算紅色像素 R的i象素值。因此，通過(guò)Cr2+Gx2來(lái)表示如圖9所示的紅色像素 R2的<象素<直R2。
此外，如圖10及圖11所示，對(duì)于藍(lán)色像素B1，也是將基于 鄰接的綠色像素Grl、 GbO、 Gbl、 Gr3的平均值的綠色像素值Gy 加到該藍(lán)色像素Bl的色差Cbl上，從而計(jì)算該藍(lán)色像素Bl的像 素值。通過(guò)在全部紅色及藍(lán)色的像素中執(zhí)行該色差的計(jì)算，從而通 過(guò)與圖9的對(duì)比，如圖12所示，生成4安照對(duì)應(yīng)于4聶^f象元件3的#早 爾陣列的順序重復(fù)紅色、藍(lán)色的顏色信號(hào)的RAW數(shù)據(jù)D2，光學(xué)校 正部5將該RAW凄史據(jù)D2輸出給圖^f象處理部6 、 4妻口 8。而且，例 如在只對(duì)紅色和藍(lán)色的色差才丸4亍去p喿處理的情況下，也可以對(duì)巴在簡(jiǎn) 易去馬賽克部15中生成的處理基準(zhǔn)的^象素值Gx、Gy在RB計(jì)算部 19的處理中加以j吏用，并省略在簡(jiǎn)易去馬賽克部18中的處理。
在圖〗象處理部6中，邊纟彖辨別去馬賽克部20 ^J"/人該光學(xué)才交正 部5 1#出的RAW凄t:梧D2作去馬賽克處理，并生成在揭/f象元件3 的各像素的空間位置上具有紅色、綠色、藍(lán)色的顏色數(shù)據(jù)R、 G、 B
的全色圖像數(shù)據(jù)。在此處理中，邊緣辨別去馬賽克部20通過(guò)使用 邊緣延長(zhǎng)方向的 <象素值對(duì)注目像素的^f象素值進(jìn)行內(nèi)插運(yùn)算處理，由 此高精度地再現(xiàn)邊纟彖。
即，圖13是表示邊緣辨別去馬賽克部20的結(jié)構(gòu)的框圖。邊緣 辨別去馬賽克部20把從光學(xué)校正部5輸出的RAW數(shù)據(jù)D2輸入給 注目像素確定部21 ，在此，依次切換注目像素，同時(shí)，輸出以各注 目像素為中心的局部區(qū)域的像素值。這里，在本實(shí)施例中，該局部 區(qū)域例如被設(shè)定為以注目像素為中心的7像素x7像素的區(qū)域。
邊緣方向算出部22相對(duì)于每個(gè)局部區(qū)域，才艮據(jù)從該注目像素
確定部21輸出的像素值來(lái)計(jì)算圖像梯度(image slope ),并計(jì)算表 示邊緣延長(zhǎng)方向的邊鄉(xiāng)彖方向矢量VI。另外，才艮據(jù)與通過(guò)邊》彖方向 矢量VI確定的方向正交的方向的圖^f象梯度的大小來(lái)一企測(cè)邊^(qū)^的強(qiáng) 度并加以l敘出。
權(quán)重算出部23通過(guò)在邊緣方向算出部22中計(jì)算出的邊緣方向 矢量V1來(lái)選擇用于內(nèi)插運(yùn)算處理的像素值，并進(jìn)一步計(jì)算各像素 值的一又重系凄t。即，如圖14所示， 一又重算出部23計(jì)算在通過(guò)邊纟彖 方向矢量VI確定的方向上各^f象素相對(duì)于通過(guò)注目l象素的直線L的 距離dl、 d2、 d3、 d4、...。并且，通過(guò)規(guī)定的閾值Thl來(lái)判定該距 離dl、 d2、 d3、 d4、...，并選擇該距離dl、 d2、 d3、 d4、...小于 等于閾值Thl的像素作為用于內(nèi)插運(yùn)算處理的像素。此外，生成分 別對(duì)該選擇的各像素進(jìn)行加權(quán)處理的第一權(quán)重系數(shù)Wl，以便隨該 3巨離dl、 d2、 d3、 d4、...變短而值變大。另外，如圖15所示，計(jì) 算在通過(guò)邊緣方向矢量VI確定的方向上的、選4奪的各^f象素距離注 目像素的距離II、 12、 13、 14、...，并生成分別對(duì)該選4奪的各^f象素 進(jìn)行加權(quán)處理的第二權(quán)重系數(shù)W2,以《更隨該距離I1、 12、 13、 14、 ...變4豆而<直變大。
第一內(nèi)插部24通過(guò)分別使用了第一和第二權(quán)重系數(shù)W1和W2 的相應(yīng)^象素^f直的加4又求和處理，乂人而通過(guò)內(nèi)插運(yùn)算處理來(lái)計(jì)算注目 ^象素的i象素值。此外，對(duì)4吏用了該第一和第二沖又重系數(shù)Wl和W2 的加權(quán)求和結(jié)果求平均值，并輸出平均值。
第二內(nèi)插部25通過(guò)^見(jiàn)定的閾值對(duì)在邊緣方向算出部22中求出 的邊緣強(qiáng)度進(jìn)行判定，在邊緣強(qiáng)度小于等于規(guī)定值的情況下，不考 慮任何邊緣方向，而從以注目像素為中心的規(guī)定范圍的像素值中計(jì) 算注目像素的4象素值并加以輸出。
選擇器26把從第 一 內(nèi)插部24輸出的平均值作為注目像素的像 素值進(jìn)行輸出。此外，通過(guò)規(guī)定的閾值來(lái)判定在邊^(qū)彖方向算出部22 中求出的邊緣強(qiáng)度，在邊緣強(qiáng)度小于等于規(guī)定值的情況下，將從第 一內(nèi)插部24輸出的平均值取而代之地選擇第二內(nèi)插部25的輸出值 力口以IIT出。
YCC變換部28 (圖2 )通過(guò)下式的運(yùn)算處理，對(duì)從邊緣辨別去 馬賽克部20輸出的全色圖像l史據(jù)D4進(jìn)行運(yùn)算處理，并4巴該圖^f象凄t 據(jù)D4變換成亮度信號(hào)、色差信號(hào)的圖像數(shù)據(jù)D5并輸出。
y = 0.29900x"0.58700xG + 0.11400x5 ( 1_1 )
= -0,16874xW-0.33126xG + 0.50000x5 ( 1_2 )
O = 0.50000xA — 0.41869xG —0.08131x5 ( 1—3 )
此外，YCC變換部28合并校正該式(1-1 ) ~(1-3)中的系數(shù)， 并執(zhí)行適用顏色變換陣列的顏色調(diào)整處理等。并且，設(shè)定生成的圖 像數(shù)據(jù)D5的伽馬。
YCC合成部29從由YCC變換部28輸出的圖4象數(shù)據(jù)D5中生 成YCC的圖像數(shù)據(jù)D3，并輸出給編碼器7、外部才幾器等。
(2)實(shí)施侈'J 1的云力4乍
在以上的結(jié)構(gòu)中，在該凄t碼相4幾1中(圖1 )，在才聶-像元件3 中，生成紅色、藍(lán)色、綠色的像素值以對(duì)應(yīng)于攝像元件3的拜爾陣 列的順序依次連續(xù)的攝像信號(hào)，該攝像信號(hào)在前處理部4中被進(jìn)行 模數(shù)變換并生成RAW數(shù)據(jù)Dl 。在數(shù)碼相機(jī)1中，在光學(xué)校正部5 中，抑制該RAW數(shù)據(jù)Dl的噪聲。此外，在后續(xù)的圖像處理部6 中，對(duì)RAW數(shù)據(jù)D2進(jìn)行去馬賽克處理并生成全色圖像數(shù)據(jù)，該
全色圖像數(shù)據(jù)D3被變換成基于亮度信號(hào)和色差信號(hào)的圖像數(shù)據(jù) D3,由編碼器7進(jìn)行數(shù)據(jù)壓縮后被記錄在記錄介質(zhì)9中。此外，當(dāng) 用戶指示基于RAW數(shù)據(jù)的記錄的情況下，將從光學(xué)校正部5輸出 的RAW數(shù)據(jù)D2記錄于記錄介質(zhì)9。
RAW數(shù)據(jù)D2在圖像處理部6中進(jìn)行去馬賽克處理(圖13), 在該處理中，選擇邊緣方向的像素，通過(guò)使用該選擇的像素的像素 值的內(nèi)插運(yùn)算處理，^v而生成全色圖^f象^:據(jù)D4。即，在這種情況 下，例如對(duì)于綠色的像素，分別從紅色及藍(lán)色的附近像素中4企測(cè)出 邊緣方向，并通過(guò)使用該邊緣方向的像素的內(nèi)插運(yùn)算處理來(lái)求出紅 色和藍(lán)色的像素值。并且，對(duì)于紅色的像素，則分別根據(jù)綠色及藍(lán) 色的附近像素來(lái)檢測(cè)出邊緣方向，并通過(guò)使用該邊緣方向的像素的 內(nèi)插運(yùn)算處理來(lái)求出綠色和藍(lán)色的4象素值。并且，對(duì)于藍(lán)色的像素， 則分別根據(jù)紅色及綠色的附近像素來(lái)檢測(cè)出邊緣方向，并通過(guò)使用 該邊緣方向的像素的內(nèi)插運(yùn)算處理來(lái)求出紅色和綠色的像素值。
因此，在該數(shù)碼相機(jī)l中，對(duì)應(yīng)于邊緣方向，相對(duì)于每個(gè)注目 像素切換內(nèi)插運(yùn)算對(duì)象的像素并進(jìn)行去馬賽克處理，其結(jié)果是，混 入RAW數(shù)據(jù)D2的噪聲的特性發(fā)生復(fù)雜的變化并混入到全色圖像 數(shù)據(jù)D4中。因此，如上述，在去馬賽克處理之后，無(wú)法簡(jiǎn)單地除 去顏色噪聲。
另外，在去馬賽克處理之后進(jìn)行噪聲除去的情況下，當(dāng)原本4巴 RAW數(shù)據(jù)D2直接記錄于記錄介質(zhì)9時(shí)，無(wú)法去除噪聲。
此外，在作為去馬賽克處理的處理對(duì)象的RAW數(shù)據(jù)D2中混 入有噪聲的情況下，會(huì)錯(cuò)誤檢測(cè)邊緣，并導(dǎo)致使得在去馬賽克處理 后的全色圖像數(shù)據(jù)D4中不自然地強(qiáng)調(diào)了邊緣。此外，恐怕會(huì)發(fā)生 顏色p喿聲、畫(huà)質(zhì)顯著劣4匕。
因此，雖然如本實(shí)施例所示，在構(gòu)成圖像處理部6的情況下，
需要在圖像處理部6中進(jìn)行去馬賽克處理之前的、RAW數(shù)據(jù)的階 段去除噪聲，但是若只是單純地相對(duì)于各種顏色的每個(gè)像素實(shí)行去 噪處理的話，恐怕亮度信號(hào)會(huì)受到影響，邊緣部分等被錯(cuò)誤的顏色 表示、畫(huà)質(zhì)顯著劣4匕。
因此，在本實(shí)施例中，在光學(xué)4交正部5 (圖2)中，通過(guò)外圍 i象素參照部12只于RAW It才居Dl依次i殳定注目i象素，并通過(guò)四色分 離部13將該注目像素和外圍像素的像素值輸入給簡(jiǎn)易去馬賽克部 15。在該簡(jiǎn)易去馬賽克部15中，RAW數(shù)據(jù)D1相對(duì)于每個(gè)注目傳_ 素，被計(jì)算具有相同顏色信號(hào)成分的處理基準(zhǔn)的^象素值。并且，在 后續(xù)的色差計(jì)算部16中，變換為以該處理基準(zhǔn)的l象素值為基準(zhǔn)的 去噪用的像素值，該去噪用的像素值在噪聲除去部17中被去除噪 聲。并且，然后變換成原來(lái)的像素值。
因此，在數(shù)碼相才幾l中，與直4妄分別對(duì)各像素的顏色信號(hào)去除 噪聲的情況下相比，可以只去除顏色"^喿聲，而沒(méi)有W武予亮度〗言號(hào)額 外的影響，與現(xiàn)有才支術(shù)相比，可以有效地避免畫(huà)質(zhì)的劣化，且可以 除去包含在RAW凄t據(jù)中的顏色噪聲。
此外，在除去p喿聲之后，通過(guò)變換為原來(lái)的RAW lt據(jù)，易于 與對(duì)其它RAW It據(jù)進(jìn)4亍噪聲除去處理相組合，乂人而可以進(jìn)一步損二 高去噪的效果。
具體地說(shuō)，在本實(shí)施例中，攝像元件3的拜爾陣列通過(guò)重復(fù)2 像素x2 ^象素的塊而形成，其中，該2 I象素x2〗象素的塊由兩個(gè)綠色 <象素Gr、 Gb、和紅色、藍(lán)色^f象素R、 B組成，在光學(xué)4交正部5中， 這些像素中的綠色像素的像素值被設(shè)定為處理基準(zhǔn)的像素值，求得 各注目像素的色差作為去噪用的像素值。因此，對(duì)于RAW數(shù)據(jù)D2 中像素?cái)?shù)最多的綠色像素的像素值，即使不求得任何色差，也能實(shí)
行去噪處理。因此，在凄史碼相才幾1中，將處理基準(zhǔn)的像素值i殳定為 綠色像素值，則省略了對(duì)于綠色像素的處理基準(zhǔn)的計(jì)算，從而使整 體結(jié)構(gòu)得以簡(jiǎn)化。
(3 )實(shí)施例1的效果
根據(jù)以上的構(gòu)成，從注目像素的附近像素中生成具有相同顏色 信號(hào)成分的處理基準(zhǔn)的像素值，并把各注目像素的像素值變換為以 該處理基準(zhǔn)的像素值為基準(zhǔn)的去噪用像素值并除去噪聲，然后變換 為原來(lái)的像素值，從而可以有效地避免畫(huà)質(zhì)的劣化，并可以除去包 含在RAW數(shù)據(jù)中的顏色噪聲。
此外，把構(gòu)成RAW數(shù)據(jù)的紅色、綠色、藍(lán)色的像素中的、綠 色像素的像素值設(shè)定為處理基準(zhǔn)的像素值，根據(jù)該處理基準(zhǔn)的像素 值和、紅色或綠色的像素值之間的差分值來(lái)生成色差的像素值，并 將其設(shè)定為去噪用像素值，從而可以省略對(duì)于綠色像素的處理，使 構(gòu)成得以簡(jiǎn)化。
并且，/人構(gòu)成RAW數(shù)據(jù)的綠色〗象素的像素值、或者該綠色傳_ 素的像素值和生成的處理基準(zhǔn)的^象素值中除去噪聲，從而可以進(jìn)一 步降低噪聲。
(4 )實(shí)施侈寸2
在本實(shí)施例中，把附近的綠色像素的中值適用于作為處理基準(zhǔn) 的綠色^f象素值Gx、 Gy。本實(shí)施例的數(shù)碼相機(jī)除了生成該處理基準(zhǔn) 的像素值的構(gòu)成不同之外，其它均與上述實(shí)施例1的數(shù)碼相機(jī)l的 構(gòu)成相同。
即，在本實(shí)施例中，如圖3所示，簡(jiǎn)易去馬賽克部15對(duì)于紅 色像素R2，將鄰接于該紅素像素的綠色像素Gb0、 Gr2、 Gr3、 Gb2 的像素值以從大到小的順序加以分類，并計(jì)算分類結(jié)果的第2個(gè)像 素值和第3個(gè)像素值之間的平均值。簡(jiǎn)易去馬賽克部15將該平均 值作為中值，并將其設(shè)定為該紅色^象素R2的位置上的綠色的像素 值。此外，同樣對(duì)于藍(lán)色像素，也是把鄰接像素的像素值進(jìn)行分類 后求中值，并將其i殳定為綠色的像素值。此外，在這樣的處理中， 也可以將鄰接四像素的中值取而代之地適用更寬范圍的像素的中 值。
與該簡(jiǎn)易去馬賽克部15的處理相對(duì)應(yīng)，簡(jiǎn)易去馬賽克部18通 過(guò)同樣的運(yùn)算處理計(jì)算出紅色像素和藍(lán)色像素的位置上的綠色的 -像素值，并生成原來(lái)的RAWlt才居。
如本實(shí)施例所示，在生成作為處理基準(zhǔn)的綠色的像素值時(shí)，即 使使用附近綠色像素的中值，也能得到與實(shí)施例1同樣的效果。
(5)實(shí)施例3
在本實(shí)施例中，以紅色像素以及對(duì)應(yīng)的藍(lán)色像素的空間位置相 同為例，計(jì)算與紅色像素及藍(lán)色像素的空間位置上的綠色的像素 值。此外，在本實(shí)施例中，除了該計(jì)算方法不同這點(diǎn)之外，其它均 與上述實(shí)施例構(gòu)成相同。
即，攝像元件3的拜爾陣列由重復(fù)2像素x2像素的塊形成，該 2Y象素x2^象素的塊的像素配置構(gòu)成如圖16 (A)所示。這里，以該 圖14中的紅色l象素R及藍(lán)色l象素B的空間位置是如點(diǎn)P所示的該 2像素x2像素的塊的中央位置為例。才艮據(jù)這樣的例子，如圖16(A) 及圖16(B)所示，簡(jiǎn)易去馬賽克部15、 18把該2像素x2像素的
塊的綠色l象素Gr、 Gb的平均值i殳定為紅色像素R及藍(lán)色像素B的 空間位置上的綠色的像素值。
根據(jù)本實(shí)施例，以紅色像素R及藍(lán)色像素B的空間位置相同為 例，計(jì)算綠色像素值，從而可以降低計(jì)算量并可得到與上述實(shí)施例 同樣的效果。
(6)實(shí)施例4
在本實(shí)施例中，耳又代4巴作為處理基準(zhǔn)的綠色像素值Gx、 Gy分 別從紅色以及藍(lán)色的像素值R及B中減去并生成去噪用的像素值， 而是根據(jù)與這些綠色像素值Gx、 Gy相對(duì)應(yīng)的紅色及藍(lán)色的像素的 像素值R及B之比來(lái)生成去噪用的像素值。此外，本實(shí)施例的數(shù)碼 相才幾除了有關(guān)該色差的構(gòu)成這點(diǎn)不同以外，其它均與上述實(shí)施例的 數(shù)碼相機(jī)1的構(gòu)成一樣。
即，在本實(shí)施例中，色差計(jì)算部16對(duì)于紅色像素R的色差Cr, 通過(guò)在該紅色像素R的位置上計(jì)算出的處理基準(zhǔn)的像素值Gx,對(duì) 該紅色像素R的像素值R進(jìn)行除法運(yùn)算，并將除法運(yùn)算后的值R/Gx 設(shè)定為該紅色像素R的去噪用的像素值。此外，同樣地對(duì)于藍(lán)色像 素B,通過(guò)在該藍(lán)色^象素R的4立置上計(jì)算出的處理基準(zhǔn)的i象素佳— Gy,對(duì)該藍(lán)色〗象素B的l象素值B進(jìn)行除法運(yùn)算，并將除法運(yùn)算后 的值B/Gy i殳定為該藍(lán)色〗象素B的去噪用〗象素值。
另夕卜，與該色差的生成處理相乂于應(yīng)，RB計(jì)算部19卄尋去p喿處理 后的色差Cr、 Cb分別乘以對(duì)應(yīng)的綠色〗象素值Gx、 Gy，從而變換成 原來(lái)的j象素^直R、 B。 如本實(shí)施例所示，即使根據(jù)處理基準(zhǔn)的像素值、和紅色或藍(lán)色 的像素值的比率來(lái)生成去噪用像素值，也能取得與實(shí)施例1同樣的效果。
(7 )實(shí)施仿J 5
在本實(shí)施例中，代替綠色的像素值，而將亮度值適用為處理基 準(zhǔn)的像素值。本實(shí)施例的數(shù)碼相機(jī)除了有關(guān)該處理基準(zhǔn)的像素值的 構(gòu)成這點(diǎn)不同之外，其它均與上述實(shí)施例1的構(gòu)成一樣。
在本實(shí)施例中，筒易去馬賽克部15對(duì)于綠色像素，通過(guò)使用 鄰接的紅色像素及藍(lán)色像素的像素值的內(nèi)插運(yùn)算處理，由此計(jì)算各
綠色像素的空間位置上的紅色像素及藍(lán)色像素的像素值。此外，同 樣地對(duì)于紅色像素，通過(guò)使用鄰接的綠色像素及藍(lán)色像素的像素值 的內(nèi)插運(yùn)算處理，由此計(jì)算各紅色像素的空間位置上的綠色像素及 藍(lán)色像素的像素值。并且，同樣地對(duì)于藍(lán)色像素，通過(guò)使用鄰接的 紅色像素及綠色像素的像素值的內(nèi)插運(yùn)算處理，由此計(jì)算各藍(lán)色像 素的空間位置上的紅色像素及綠色像素的像素值。
簡(jiǎn)易去馬賽克部15根據(jù)該計(jì)算結(jié)果相對(duì)于每個(gè)像素計(jì)算亮度 值。此外，對(duì)于該亮度值的計(jì)算，也可以單純地4巴紅色、綠色、藍(lán) 色的像素值相加并簡(jiǎn)單地計(jì)算亮度值，還可以執(zhí)行(1 - 1 )式的運(yùn) 算處理來(lái)正確地計(jì)算各〗象素的亮度值。
色差計(jì)算部16使用該處理基準(zhǔn)的像素值Y,相對(duì)于每個(gè)像素， 計(jì)算色差的像素值(R-Y)以及(B-Y)。此外，在這種情況下， 也可以使用(1-2)及(1-3)式來(lái)計(jì)算色差的像素值。
噪聲除去部17對(duì)該色差的像素值進(jìn)行去噪處理。簡(jiǎn)易去馬賽 克部18、RB計(jì)算部19將該去噪處理后的色差的〗象素值變換為原來(lái)
的馬賽克圖像的像素值。此外，在這種情況下，在使用(1-2)以 及(l-3)式計(jì)算色差的像素值的情況下，借助下式的運(yùn)算處理來(lái) 計(jì)算各像素值。
W = y +1.402 x O ( 2 — 1 )
G = 0.34414xC6 — 0.71414xO (2 — 2)
S = :r +1.772 xC6 (2_3)
此夕卜，在這些處理中，也可以省略(1 _ 1 )式的運(yùn)算，直接4吏 用(1-2)及(1-3)式來(lái)計(jì)算色差的像素值。并且，也可以省略
關(guān)于綠色像素的處理，而只進(jìn)行關(guān)于紅色像素、藍(lán)色像素的一系列 處理。
根據(jù)本實(shí)施例，即使將亮度值設(shè)定為處理基準(zhǔn)的像素值并求得 色差的4象素值，也可以得到與上述實(shí)施例相同的效果。
(8 )實(shí)施侈'J 6
本實(shí)施例的lt碼相扭/使用邊緣辨別去馬賽克部20中的第二內(nèi) 插部25來(lái)構(gòu)成簡(jiǎn)易去馬賽克部15、 18。
如本實(shí)施例所示，若利用原來(lái)的去馬賽克處理的結(jié)構(gòu)并構(gòu)成簡(jiǎn) 易去馬賽克部15、 18，則可以簡(jiǎn)化整體的構(gòu)成，并可得到與上述實(shí) 施例同樣的效果。
(9)其它實(shí)施例
此外，雖然在上述實(shí)施例中對(duì)通過(guò)s濾波器除去顏色噪聲的情 況進(jìn)行了說(shuō)明，但是本發(fā)明并不僅限于此，在使用小波變換(wavelet
conversion process)等來(lái)除去。桑聲的情況下、在4巴高頻成分和4氐頻 成分進(jìn)行頻帶分離并除去噪聲的情況下、采用雙邊濾光器或三邊濾 光器等去除噪聲的情況下等等，可以廣泛地適用各種去噪方法。
另外，雖然在上述實(shí)施例中僅對(duì)在噪聲除去部17中去除RAW 數(shù)據(jù)的噪聲的情況進(jìn)行了說(shuō)明，但本發(fā)明并不僅限于此，還可以把 其它各種噪聲除去方法加以組合來(lái)去除噪聲。
情況進(jìn)行了說(shuō)明，但本發(fā)明并不僅限于此，還可以廣泛適用于諸如 對(duì)運(yùn)動(dòng)圖像進(jìn)行攝影的攝像機(jī)、進(jìn)一步處理各種RAW數(shù)據(jù)的圖像 處理裝置、各種圖像處理程序。此外，該圖^象處理程序可以事先安 裝在計(jì)算機(jī)、圖像處理裝置等中加以提供，也可以取而代之地記錄 在光盤、磁盤、存儲(chǔ)卡等各種記錄介質(zhì)中加以提供，還可以通過(guò)互 耳關(guān)網(wǎng)等的網(wǎng)全各的下載而加以^是供。
產(chǎn)業(yè)上的可利用性
本發(fā)明可以適用于例如凄t碼相機(jī)。
權(quán)利要求
1. 一種攝像裝置，其特征在于，包括:攝像部，用于輸出RAW數(shù)據(jù)；變換部，在基于所述RAW數(shù)據(jù)的馬賽克圖像上依次設(shè)定注目像素，并將所述注目像素的像素值變換成去噪用像素值，其中，所述去噪用像素值以在所述各注目像素中具有相同顏色信號(hào)成分的處理基準(zhǔn)的像素值為基準(zhǔn)；噪聲除去部，用于從所述去噪用像素值中除去噪聲；反向變換部，通過(guò)與所述變換部相反的處理，把在所述噪聲除去部中除去噪聲后的所述去噪用像素值變換成原來(lái)的像素值；以及去馬賽克部，對(duì)基于在所述反向變換部中處理后的像素值的馬賽克圖像進(jìn)行去馬賽克處理，并生成全色圖像數(shù)據(jù)。
2. 根據(jù)權(quán)利要求1所述的攝像裝置，其特征在于，基于所述RAW數(shù)據(jù)的馬賽克圖像的^f象素是紅色、綠色、 藍(lán)色的像素，所述處理基準(zhǔn)的像素值是所述紅色以及藍(lán)色像素的空間 位置上的綠色的像素值，所述去噪用像素值是所述處理基準(zhǔn)的像素值、和所述紅 色或藍(lán)色像素的像素值之間的差分值。
3. 根據(jù)權(quán)利要求2所述的攝像裝置，其特征在于，所述噪聲除去部還從所述馬賽克圖像的綠色像素的像素 值中、或從所述馬賽克圖像的綠色像素的像素值和所述紅色及 藍(lán)色像素的空間位置上的綠色的像素值中除去噪聲。
4. 根據(jù)權(quán)利要求2所述的攝像裝置，其特征在于，所述處理基準(zhǔn)的像素值是所述紅色及藍(lán)色像素附近的綠 色像素的像素值的中值。
5. 根據(jù)權(quán)利要求2所述的攝像裝置，其特征在于，基于所述RAW數(shù)據(jù)的馬賽克圖像通過(guò)基于相同的像素 配置的塊的重復(fù)而形成，在 一個(gè)所述塊內(nèi)的紅色<象素及藍(lán)色像素的空間位置相同 的情況下，生成所述處理基準(zhǔn)的像素值。
6. 根據(jù)權(quán)利要求1所述的攝像裝置，其特征在于，基于所述RAW數(shù)據(jù)的馬賽克圖像是紅色、綠色、藍(lán)色的 像素，所述處理基準(zhǔn)的像素值是所述紅色及藍(lán)色像素的空間位 置上的綠色的像素值，所述去噪用像素值是通過(guò)所述處理基準(zhǔn)的像素值、和所 述紅色或藍(lán)色像素的像素值之比表示的像素值。
7. 根據(jù)權(quán)利要求1所述的攝像裝置，其特征在于，基于所述RAW數(shù)據(jù)的馬賽克圖像的像素是紅色、綠色、 藍(lán)色的像素，所述處理基準(zhǔn)的像素值是所述各像素的空間位置上的亮 度值，所述去噪用像素值是色差的像素值。
8. —種圖像處理裝置，用于抑制以攝像元件的像素排列依次得到的RAW H據(jù)的噪聲，其特征在于，包括變換部，在基于所述RAW數(shù)據(jù)的馬賽克圖像上依次設(shè)定 注目像素，并將所述注目像素的像素值變換成去噪用像素值， 其中，所述去噪用像素值以在所述各注目像素中具有相同顏色 信號(hào)成分的處理基準(zhǔn)的像素值為基準(zhǔn)；噪聲除去部，用于從所述去噪用像素值中除去噪聲；以及反向變換部，通過(guò)與所述變換部相反的處理，對(duì)巴在所述 噪聲除去部中除去噪聲后的所述去噪用像素值變換成原來(lái)的 像素值。
9. 一種圖像處理方法，用于抑制以攝像元件的像素排列依次得到 的RAW數(shù)據(jù)的噪聲，其特征在于，包括變換步驟，在基于所述RAW數(shù)據(jù)的馬賽克圖像上依次設(shè) 定注目像素，并將所述注目像素的像素值變換成去噪用像素 值，其中，所述去噪用^f象素值以在所述各注目^^素中具有相同 顏色信號(hào)成分的處理基準(zhǔn)的像素值為基準(zhǔn)；噪聲除去步驟，用于從所述去噪用像素值中除去噪聲；以及反向變換步驟，通過(guò)與所述變換步驟相反的處理，對(duì)巴在 所述噪聲除去步驟中除去噪聲后的所述去噪用像素值變換成 原來(lái)的像素值。
10. —種圖像處理方法的程序，其中，所述圖像處理方法用于抑制 以攝像元件的像素排列依次得到的RAW凄t據(jù)的噪聲，所述圖 像處理方法的程序的特征在于，包括變換步驟，在基于所述RAW數(shù)據(jù)的馬賽克圖像上依次設(shè) 定注目像素，并將所述注目像素的像素值變換成去噪用像素 值，其中，所述去噪用像素值以在所述各注目像素中具有相同顏色信號(hào)成分的處理基準(zhǔn)的像素值為基準(zhǔn)；噪聲除去步驟，用于從所述去噪用像素值中除去噪聲；以及反向變換步驟，通過(guò)與所述變換步驟相反的處理，把在 所述噪聲除去步驟中除去噪聲后的所述去噪用像素值變換成 原來(lái)的像素值。
11. 一種記錄介質(zhì)，記錄用于抑制以攝像元件的像素排列依次得到 的RAW數(shù)據(jù)的噪聲的圖像處理方法的程序，所述記錄介質(zhì)的 特征在于，所述圖像處理方法的程序包括變換步驟，在基于所述RAW數(shù)據(jù)的馬賽克圖像上依次設(shè) 定注目像素，并將所述注目像素的像素值變換成去噪用像素 值，其中，所述去噪用像素值以在所述各注目像素中具有相同 顏色信號(hào)成分的處理基準(zhǔn)的像素值為基準(zhǔn)；噪聲除去步驟，用于從所述去噪用像素值中除去噪聲；以及反向變換步驟，通過(guò)與所述變換步驟相反的處理，把在 所述噪聲除去步驟中除去噪聲后的所述去噪用像素值變換成 原來(lái)的像素值。
全文摘要
本發(fā)明提供了可以有效地避免畫(huà)質(zhì)劣化且可除去包括在RAW數(shù)據(jù)中的顏色噪聲的攝像裝置、圖像處理裝置、圖像處理方法、圖像處理方法的程序以及記錄圖像處理方法的程序的記錄介質(zhì)。在本發(fā)明中，通過(guò)在基于RAW數(shù)據(jù)的馬賽克圖像上依次設(shè)定注目像素，并將其變換成以在各注目像素中具有相同顏色信號(hào)成分的處理基準(zhǔn)的像素值為基準(zhǔn)的去噪用像素值，從上述去噪用像素值中除去噪聲，把除去噪聲后的上述去噪用像素值變換為原來(lái)的像素值，從而可以只除去顏色噪聲而不對(duì)亮度信號(hào)賦予影響。
文檔編號(hào)H04N9/07GK101385359SQ200780005498
公開(kāi)日2009年3月11日 申請(qǐng)日期2007年9月20日 優(yōu)先權(quán)日2006年12月15日
發(fā)明者中島健, 山田未希子, 松下伸行 申請(qǐng)人:索尼株式會(huì)社