專利名稱:圖像處理裝置及圖像處理方法
技術(shù)領(lǐng)域:
本發(fā)明涉及圖像處理裝置及圖像處理方法。
背景技術(shù):
例如,在專利文獻(xiàn)1 (日本特開(kāi)2006-121416號(hào)公報(bào))中公開(kāi)了一種如下技術(shù)對(duì) 拍攝到人物的數(shù)字圖像的面部區(qū)域,進(jìn)行使高光(加工)的部分更加明亮的美白處理。在上述專利文獻(xiàn)1所述的圖像處理方法中,從處理對(duì)象的原圖像生成模糊圖像, 利用該模糊圖像進(jìn)行了使高光加工的部分更加明亮的美白處理。在拍攝人物的情況下,根據(jù)面部表面的油脂分量等,攝影時(shí)的室內(nèi)照明或閃光燈 發(fā)光等會(huì)寫(xiě)入到人的面部,拍攝到的圖像會(huì)產(chǎn)生不自然的光澤。將該不自然的光澤稱為“反 光”。在上述專利文獻(xiàn)1所述的圖像處理方法中,在成為處理對(duì)象的面部圖像中存在反光分 量的情況下,通過(guò)美白處理會(huì)擴(kuò)大該反光分量的區(qū)域,無(wú)法減輕反光。
發(fā)明內(nèi)容
本發(fā)明的目的在于提供一種能減輕拍攝到的圖像中含有的面部的反光分量、能轉(zhuǎn) 換成更優(yōu)圖像的圖像處理裝置及圖像處理方法。為了達(dá)成上述目的,本發(fā)明的一個(gè)技術(shù)方案的一種圖像處理裝置,具備圖像取得 部件,其取得圖像;顏色區(qū)域檢測(cè)部件,從所述圖像取得部件取得的圖像中檢測(cè)規(guī)定的顏色 區(qū)域;區(qū)域指定部件,基于由所述顏色區(qū)域檢測(cè)部件檢測(cè)出的所述顏色區(qū)域的色飽和度及 亮度,來(lái)指定應(yīng)調(diào)整區(qū)域;和顏色調(diào)整部件,調(diào)整由所述區(qū)域指定部件指定出的所述應(yīng)調(diào)整 區(qū)域的像素的色調(diào)、色飽和度及亮度中的至少一個(gè)。為了達(dá)成上述目的,本發(fā)明的一個(gè)技術(shù)方案的一種圖像處理方法,包括圖像取得 步驟,取得圖像;顏色區(qū)域檢測(cè)步驟,從所述圖像取得步驟取得的圖像中檢測(cè)規(guī)定的顏色區(qū) 域;區(qū)域指定步驟,基于由所述顏色區(qū)域檢測(cè)步驟檢測(cè)出的所述顏色區(qū)域的色飽和度及亮 度,來(lái)指定應(yīng)調(diào)整區(qū)域;和顏色調(diào)整步驟,調(diào)整由所述區(qū)域指定步驟指定出的所述應(yīng)調(diào)整區(qū) 域的像素的色調(diào)、色飽和度及亮度中的至少一個(gè)。根據(jù)本發(fā)明,能夠減輕拍攝到的圖像中含有的面部的反光分量、能轉(zhuǎn)換成更優(yōu)圖像。
圖1是表示作為本發(fā)明的一實(shí)施方式所涉及的圖像處理裝置起作用的數(shù)碼照相 機(jī)的電路結(jié)構(gòu)的框圖。圖2是用于說(shuō)明RGB顏色空間的示意圖。圖3是用于說(shuō)明HSV顏色空間的示意圖。圖4是表示通過(guò)在圖1的數(shù)碼照相機(jī)拍攝到的圖像數(shù)據(jù)中減輕反光分量來(lái)抑制反 光的發(fā)光抑制處理、即第一實(shí)施方式所涉及的反光抑制處理的順序的流程圖。
圖5是在HSV顏色空間中色調(diào)值H分布的圓形區(qū)域的示意圖。圖6是圖3所示的HSV顏色空間的部分剖視圖。圖7是表示通過(guò)在圖1的數(shù)碼照相機(jī)拍攝到的圖像數(shù)據(jù)中減輕反光分量來(lái)抑制反 光的反光抑制處理、即第二實(shí)施方式所涉及的反光抑制處理的順序的流程圖。圖8是說(shuō)明圖7的第二實(shí)施方式所涉及的反光抑制處理中的個(gè)人目標(biāo)值的計(jì)算方 法的一個(gè)例子的圖、表示這樣的膚色取得區(qū)域的各像素所繪制的HSV空間部分頂視圖及部 分剖視圖。圖9是說(shuō)明圖7的第二實(shí)施方式所涉及的反光抑制處理中的個(gè)人目標(biāo)值的計(jì)算方 法的一個(gè)例子的圖、表示HVS空間的部分頂視圖。圖10是表示通過(guò)在圖1的數(shù)碼照相機(jī)拍攝到的圖像數(shù)據(jù)中減輕反光分量來(lái)抑制 反光的反光抑制處理、即第三實(shí)施方式所涉及的反光抑制處理的順序的流程圖。圖11是表示圖10的第三實(shí)施方式所涉及的反光抑制處理中的、反光抑制方式選 擇處理的順序的詳細(xì)的流程圖。
具體實(shí)施例方式以下,基于附圖對(duì)用于實(shí)施本發(fā)明的實(shí)施方式進(jìn)行說(shuō)明。第一實(shí)施方式圖1是表示作為本發(fā)明的第一實(shí)施方式所涉及的圖像處理裝置起作用的數(shù)碼照 相機(jī)1的電路結(jié)構(gòu)的圖。本實(shí)施方式的數(shù)碼照相機(jī)1,作為基本的動(dòng)作模式而具有用于拍攝靜止圖像或 運(yùn)動(dòng)圖像的記錄模式、和用于再現(xiàn)拍攝到的圖像的再現(xiàn)模式。此外,攝影模式具備普通模 式、場(chǎng)景模式、影片模式等。其中,作為場(chǎng)景模式的下位模式,設(shè)定了人物攝影模式、風(fēng)景攝 影模式、液晶攝影模式等。人物攝影模式是適用于拍攝人物的攝影模式。如圖1所示,數(shù)碼照相機(jī)1具備攝影鏡頭2、攝像部3、前處理部4、處理信息存儲(chǔ) 部5、程序存儲(chǔ)器6、圖像處理部7、控制部8、圖像記錄部9、顯示部10、鍵輸入部11、發(fā)光部 12。攝影鏡頭2是將入射來(lái)的被攝物體的光作為光學(xué)像成像于后述的攝像部3的光學(xué) 鏡頭,由聚焦透鏡和變焦透鏡等構(gòu)成。攝像部3 由 CMOS (Complementary Metal Oxide Semiconductor)等圖像傳感器構(gòu) 成,配置在攝影鏡頭2的光軸上。攝像部3接收由攝影鏡頭2會(huì)聚的攝影光,并且對(duì)成像于 受光面的被攝物體的光學(xué)像進(jìn)行光電轉(zhuǎn)換,作為模擬攝像信號(hào)輸出。攝影鏡頭2及攝像部 3作為本發(fā)明中的圖像取得部件起作用。前處理部4,輸入與攝像部3輸出的被攝物體的光學(xué)像相應(yīng)的模擬攝像信號(hào),并控 制CDS (相關(guān)二次采樣)和A/D轉(zhuǎn)換器(ADC)等,所述CDS (相關(guān)二次采樣)保持輸入來(lái)的 攝像信號(hào),所述A/D轉(zhuǎn)換器(ADC)放大該攝像信號(hào)后,將放大后的攝像信號(hào)轉(zhuǎn)換為數(shù)字圖像 數(shù)據(jù)。攝像部3輸出的攝像信號(hào)經(jīng)由前處理部4而作為數(shù)字圖像數(shù)據(jù)送至圖像記錄部9。 前處理部4的處理按照控制部8的命令執(zhí)行。處理信息存儲(chǔ)部5將在調(diào)整圖像數(shù)據(jù)時(shí)使用的數(shù)據(jù)作為處理信息存儲(chǔ)。處理信息 存儲(chǔ)部5在第一實(shí)施方式中至少具備白分量增益表格存儲(chǔ)部5a和反光分量增益表格存儲(chǔ)
5部5b。白分量增益表格存儲(chǔ)部5a,針對(duì)被指定為后述的膚色區(qū)域的各像素,將在判定白 度加減時(shí)使用的色飽和度增益值作為表格存儲(chǔ)。反光分量增益表格存儲(chǔ)部5b,針對(duì)同樣被 指定為膚色區(qū)域的各像素,將判定反光分量加減時(shí)使用的色飽和度增益值及亮度增益值作 為表格存儲(chǔ)。程序存儲(chǔ)器6存儲(chǔ)圖像處理部7、控制部8等執(zhí)行的各種處理所對(duì)應(yīng)的程序。圖像處理部7進(jìn)行與后述的圖像處理相關(guān)的各種處理。圖像處理部7作為本發(fā)明 中的顏色區(qū)域檢測(cè)部件、區(qū)域指定部件、顏色調(diào)整部件、顏色檢測(cè)部件、區(qū)域設(shè)定部件、攝影 條件設(shè)定部件、強(qiáng)度計(jì)算部件的各部件起作用。另外,圖像處理部7進(jìn)行如下的處理相互轉(zhuǎn)換拍攝到的圖像中的RGB顏色 空間信號(hào)和HSV顏色空間信號(hào)。所謂RGB顏色空間是指由紅(R)、綠(G)、藍(lán)⑶三個(gè) 分量構(gòu)成的顏色空間。另外,所謂HSV顏色空間是指通過(guò)由色調(diào)(H:Hue)、色飽和度 (S!Saturation · Chroma)、畠貞(V:Brightness · Lightness · Value) H^^fil^jj^^ HSV 模型(HVS model)表現(xiàn)的顏色空間。關(guān)于HSV顏色空間見(jiàn)后述。返回到圖1,控制部8例如是中央處理裝置(CPU),按照程序存儲(chǔ)器6中存儲(chǔ)的程 序來(lái)控制數(shù)碼照相機(jī)1的整體。控制部8也控制前處理部4、圖像處理部7的各處理部。另 外,根據(jù)后述的攝影模式設(shè)定鍵lib的操作設(shè)定攝影模式,根據(jù)設(shè)定出的攝影模式設(shè)定攝 像部的攝像條件??刂撇?是本發(fā)明中的設(shè)定部件及攝影條件設(shè)定部件。圖像記錄部9存儲(chǔ)由攝像部3拍攝的、由前處理部4進(jìn)行了前處理的圖像數(shù)據(jù)。在 圖像再現(xiàn)時(shí),控制部8從圖像記錄部9中讀取圖像數(shù)據(jù),并使顯示部10顯示該圖像數(shù)據(jù)。顯示部10 例如是彩色 TFT (Thin Film Transistor)液晶或 STN(Super Twisted Nematic)液晶等,按照控制部8的控制,顯示預(yù)覽(preview)圖像、或攝影后的圖像數(shù)據(jù)、設(shè) 定菜單等。鍵輸入部11輸入來(lái)自用戶的指示。鍵輸入部11包括快門鍵11a、攝影模式設(shè)定 鍵lib??扉T鍵Ila是輸入來(lái)自用戶的攝影開(kāi)始指示的輸入部。攝影模式設(shè)定鍵lib是由 用戶輸入期望的動(dòng)作模式設(shè)定指示的輸入部。發(fā)光部12是向被攝物體照射閃光的發(fā)光裝置。由于照射閃光后拍攝到的人物的 面部容易發(fā)生反光分量,因此在本實(shí)施方式中實(shí)施從伴隨著閃光拍攝到的圖像中去除反光 的后述反光去除處理。接著,對(duì)RGB顏色空間和HSV顏色空間進(jìn)行說(shuō)明。圖2是用于說(shuō)明RGB顏色空間 的示意圖,圖3是用于說(shuō)明HSV顏色空間的示意圖。如圖2所示,由前處理部4處理過(guò)的圖像數(shù)據(jù),通過(guò)由紅(R)、綠(G)、藍(lán)⑶三個(gè) 分量構(gòu)成的顏色空間表現(xiàn)。本實(shí)施方式的圖像處理部7具備如下功能將圖像數(shù)據(jù)從RGB 顏色空間向HSV顏色空間進(jìn)行顏色空間轉(zhuǎn)換。如圖3所示,HSV顏色空間能利用圓錐C表示。圓錐C表現(xiàn)的HSV顏色空間,將色 調(diào)H描繪成作為圓錐C的底面的圓形區(qū)域進(jìn)行表現(xiàn)。色調(diào)H表示紅色、藍(lán)色、黃色等顏色種 類,通過(guò)0° 359°范圍的強(qiáng)度分布表現(xiàn)。色飽和度S通過(guò)從圓錐C的底面即圓形區(qū)域中心至圓周方向的距離(半徑)來(lái)表 現(xiàn)。色飽和度S是顏色的鮮明度,通過(guò)以圓形區(qū)域的中央為0的0 255范圍來(lái)表現(xiàn)。在HSV顏色空間中,伴隨著色飽和度S的值變小,灰色變得顯著,用暗淡的顏色表現(xiàn)色飽和度 S。亮度V通過(guò)從圓錐C頂點(diǎn)至底面方向的距離表現(xiàn)。亮度V是顏色的明亮度,可通 過(guò)以頂點(diǎn)為0的0 255范圍來(lái)表現(xiàn)。在HSV顏色空間中,伴隨著亮度V的值變小,用暗色 表現(xiàn)亮度V。接著,參照?qǐng)D4所示的流程圖,對(duì)在第一實(shí)施方式的數(shù)碼照相機(jī)1中通過(guò)從拍攝到 的圖像數(shù)據(jù)中減輕反光分量來(lái)抑制反光的處理(以下,稱為“反光抑制處理”)的順序進(jìn)行 說(shuō)明。通過(guò)圖1所示的控制部8控制各部件來(lái)執(zhí)行以下的處理。另外,在用戶操作攝影模 式設(shè)定鍵lib設(shè)定任一攝影模式之后,在操作快門鍵Ila并指示了攝像的記錄開(kāi)始時(shí),開(kāi)始 本流程的處理。首先,在步驟Sl中,圖像處理部7從圖像記錄部9中取得由前處理部4處理過(guò)的 圖像數(shù)據(jù)。另外,在像素尺寸大的情況下,由于處理費(fèi)時(shí)間,故也可以縮小圖像記錄部9所 保存的圖像數(shù)據(jù),從而生成縮小圖像數(shù)據(jù),并對(duì)該縮小圖像數(shù)據(jù)實(shí)施以下的處理。在步驟S2中,圖像處理部7判斷取得出的圖像數(shù)據(jù)是否是伴隨著發(fā)光部12的閃 光所拍攝到的圖像數(shù)據(jù)。這里,控制部8例如可以基于發(fā)光部12是否照射了閃光來(lái)進(jìn)行判 斷,或者也可以通過(guò)圖像數(shù)據(jù)中所附加的攝影信息來(lái)判斷是否是伴隨著閃光的攝像。如果 步驟S2的判斷為“是”,則進(jìn)入步驟S3。在步驟S3中,圖像處理部7對(duì)圖像數(shù)據(jù)實(shí)施面部 檢測(cè)處理。關(guān)于面部檢測(cè)處理,由于是公知技術(shù),故省略詳細(xì)內(nèi)容。在步驟S4中,圖像處理部7判斷是否從圖像中檢測(cè)出面部區(qū)域。如果在步驟S4 的判斷中為“是”,則在步驟S5中,圖像處理部7將面部區(qū)域的圖像數(shù)據(jù)從RGB顏色空間向 HSV顏色空間進(jìn)行顏色空間轉(zhuǎn)換。在步驟S6中,圖像處理部7從HSV顏色空間的圖像中取 得色調(diào)H,指定相當(dāng)于人物膚色的膚色區(qū)域。圖5是在HSV顏色空間中色調(diào)H分布的圓形區(qū)域的示意圖。相當(dāng)于人物膚色的膚 色區(qū)域,大致是色調(diào)值H分布于圖中斜線表示的范圍的像素集合。圖像處理部7從HSV顏 色空間的圖像中,將處于該范圍內(nèi)的像素指定為膚色區(qū)域。在步驟S7中,圖像處理部7從膚色區(qū)域中,將由色飽和度S在規(guī)定值以下且亮度 V在規(guī)定值以上的像素構(gòu)成的區(qū)域指定為應(yīng)調(diào)整的區(qū)域(處理區(qū)域)。處理區(qū)域是在膚色 區(qū)域中被指定為反光分量的區(qū)域。接著,在步驟S8中,圖像處理部7計(jì)算處理區(qū)域中的反 光分量的強(qiáng)度。這里,對(duì)處理區(qū)域的各像素進(jìn)行判定白度加減和反光分量加減的處理。在白度加 減的判定中,比較白分量增益表格存儲(chǔ)部5a所存儲(chǔ)的色飽和度增益值、和成為判定對(duì)象的 像素的色飽和度。由于白分量的色飽和度非常低,故通過(guò)比較像素的色飽和度和色飽和度 增益值,能夠計(jì)算該像素的白度加減的程度。另外,在反光分量加減的判定中,比較反光分 量增益表格存儲(chǔ)部5b所存儲(chǔ)的色飽和度增益值及亮度增益值、和成為判定對(duì)象的像素的 色飽和度及亮度的值。由于反光分量的色飽和度低且亮度高,故通過(guò)比較色飽和度增益值 及亮度增益值、和像素的色飽和度及亮度的值,能夠計(jì)算該像素的反光分量加減。圖像處理 部7,針對(duì)成為判定對(duì)象的各像素,根據(jù)白度加減和反光分量加減來(lái)計(jì)算作為反光分量的強(qiáng) 度(反光強(qiáng)度)。在步驟S9中,圖像處理部7基于反光分量的強(qiáng)度,對(duì)處理區(qū)域的各像素調(diào)整色飽和度S及亮度V。圖6是圖3所示的HSV顏色空間的部分剖視圖。如圖6所示,構(gòu)成步驟 S7中被指定的處理區(qū)域的像素之一即像素A,處于色飽和度S低且亮度V高的位置。因此, 在步驟S9中,對(duì)構(gòu)成處理區(qū)域的所有像素,基于反光分量的強(qiáng)度提高色飽和度S且降低亮 度V,從而調(diào)整為接近膚色。這里,由于只降低了亮度V而變?yōu)榛疑?,故同時(shí)提高色飽和度S 能夠接近本來(lái)的膚色。通過(guò)如上調(diào)整色飽和度及亮度,圖6所示的處理區(qū)域中的像素A,從圖中實(shí)線所示 的位置被調(diào)整為虛線所示的位置。通過(guò)該處理能夠減輕膚色中的反光分量、能接近于本來(lái) 膚色的圖像。在步驟SlO中,圖像處理部7將包括減輕了反光分量的處理區(qū)域在內(nèi)的面部區(qū)域 的圖像數(shù)據(jù),從HSV顏色空間向RGB顏色空間進(jìn)行顏色空間轉(zhuǎn)換。由此,在第一實(shí)施方式所涉及的圖4的反光抑制處理中,通過(guò)步驟S5至SlO的一 連串處理,調(diào)整了處理區(qū)域以使色飽和度S變高且亮度V變低,減輕了處理區(qū)域中的反光分 量,其結(jié)果抑制了反光。因此,以下將步驟S5至SlO的一連串處理稱為“第一處理”。在這種SlO的“第一處理”結(jié)束后,處理進(jìn)入步驟Sl 1。在步驟Sll中,圖像處理部7將處理過(guò)的圖像數(shù)據(jù)記錄于圖像記錄部9。另外,如果步驟S2或步驟S4的判定為“否”,則進(jìn)入步驟S12。在步驟S12中,圖像 處理部7將拍攝到的圖像數(shù)據(jù)直接記錄(覆寫(xiě))于圖像記錄部9。在步驟Sll或步驟S12 之后,圖像處理部7及控制部8結(jié)束本流程圖的處理。根據(jù)第一實(shí)施方式的數(shù)碼照相機(jī)1,具有以下效果。(1)因?yàn)閺呐臄z到的圖像數(shù)據(jù)中指定人物面部中的反光分量即處理區(qū)域,并調(diào)整 該處理區(qū)域的色飽和度及亮度,所以能夠減輕圖像數(shù)據(jù)中含有的反光分量,將人物的面部 圖像區(qū)域轉(zhuǎn)換為更優(yōu)圖像。(2)因?yàn)橥ㄟ^(guò)面部檢測(cè)功能從圖像數(shù)據(jù)中檢測(cè)出面部區(qū)域,從該面部區(qū)域中指定 了膚色區(qū)域,所以能夠?qū)崿F(xiàn)處理高速化。(3)因?yàn)樵谀w色區(qū)域中將色飽和度在處理值以下且亮度在規(guī)定值以上的像素指定 為反光分量即處理區(qū)域,所以能有效地判別反光分量的像素。(4)因?yàn)樵谂臄z到的圖像數(shù)據(jù)是伴隨著閃光所拍攝的情況下,執(zhí)行了減輕反光分 量的反光抑制處理,所以對(duì)在容易產(chǎn)生反光分量的條件下拍攝到的圖像數(shù)據(jù),能夠執(zhí)行有 效減輕反光分量的反光抑制處理。(5)因?yàn)橛?jì)算出處理區(qū)域的色飽和度及亮度的強(qiáng)度,并基于該色飽和度及亮度的 強(qiáng)度來(lái)調(diào)整處理區(qū)域各像素的色飽和度及亮度,所以能夠更準(zhǔn)確地調(diào)整處理區(qū)域各像素中 的色飽和度及亮度。第二實(shí)施方式在第二實(shí)施方式中,執(zhí)行成為被攝物體的第二處理。此外,圖1的數(shù)碼照相機(jī)1也作為第二實(shí)施方式所涉及的圖像處理裝置起作用。因 此,關(guān)于其電路結(jié)構(gòu)的說(shuō)明與第一實(shí)施方式相同,在此省略。其中,第二實(shí)施方式的處理信 息存儲(chǔ)部5不具備白分量增益表格存儲(chǔ)部5a和反光分量增益表格存儲(chǔ)部5b,而存儲(chǔ)有在后 述圖7的反光抑制處理中使用的各種信息。接著,參照?qǐng)D7所示的流程圖,對(duì)由第二實(shí)施方式的數(shù)碼照相機(jī)1執(zhí)行的反光抑制
8處理的順序進(jìn)行說(shuō)明。通過(guò)圖1所示的控制部8控制各部件來(lái)執(zhí)行以下處理。另外,在用戶操作攝影模 式設(shè)定鍵lib設(shè)定了任一攝影模式之后,在操作快門鍵Ila并指示了攝像的記錄開(kāi)始時(shí),開(kāi) 始本流程圖的處理。在步驟S21中,圖像處理部7從圖像記錄部9中取得由前處理部4處理過(guò)的圖像 數(shù)據(jù)。此外,由于在像素尺寸大的情況下處理費(fèi)時(shí)間,故可以縮小圖像記錄部9所保存的圖 像數(shù)據(jù),從而生成縮小圖像數(shù)據(jù),并對(duì)該縮小圖像數(shù)據(jù)實(shí)施以下處理。在步驟S22中,圖像處理部7通過(guò)對(duì)圖像數(shù)據(jù)實(shí)施面部檢測(cè)處理,試圖從由該圖像 數(shù)據(jù)所表現(xiàn)的圖像中檢測(cè)面部區(qū)域。關(guān)于面部檢測(cè)處理,由于是公知技術(shù),故省略詳細(xì)內(nèi) 容。在步驟S23中,圖像處理部7判定從圖像中是否檢測(cè)到面部區(qū)域。在從圖像中未檢測(cè)到面部區(qū)域的情況下,在步驟S23中判定為“否”,處理進(jìn)入到 步驟S33。在步驟S33中,圖像處理部7將拍攝到的圖像數(shù)據(jù)直接記錄(覆寫(xiě))于圖像記錄 部9。由此,本流程圖的處理結(jié)束。與此相對(duì),在從圖像中檢測(cè)出面部區(qū)域的情況下,在步驟S23中判定為“是”,處理 進(jìn)入到步驟S24。在步驟S24中,圖像處理部7基于步驟S22的面部檢測(cè)處理的結(jié)果,取得與面部區(qū) 域內(nèi)含有的面部相關(guān)的各種信息(以下,將這些信息總稱為“面部信息”)。具體而言,例如作為面部信息取得包圍面部區(qū)域的框的坐標(biāo)、或該面部區(qū)域內(nèi)含 有的被攝物體的眼位置的坐標(biāo)(以下,稱為“眼位置坐標(biāo)”)。在步驟S25中,圖像處理部7基于步驟S24的處理中所取得的面部信息,取得與該 面部信息所特定的被攝物體的個(gè)人膚色相關(guān)的信息(以下,稱為“肌膚參數(shù)”)。具體而言,例如圖像處理部7基于面部信息中的眼位置信息,將眼周邊的規(guī)定區(qū) 域設(shè)定為“膚色取得區(qū)域”。該“膚色取得區(qū)域”是被判斷為能可靠地取得成為被攝物體的 個(gè)人肌膚參數(shù)的區(qū)域。此外,能成為膚色取得區(qū)域的區(qū)域,一般為眼的下方、鼻或面頰等周邊、即該被攝 物體的個(gè)人肌膚可靠地存在的區(qū)域。因此,為了計(jì)算膚色取得區(qū)域,在此利用眼位置信息。 但是,為了計(jì)算膚色取得區(qū)域,也并不限定于眼位置信息,只要是能計(jì)算出膚色取得區(qū)域的 面部信息,可利用任意信息。圖像處理部7將該膚色取得區(qū)域的圖像數(shù)據(jù)從RGB顏色空間向HSV顏色空間進(jìn)行 顏色空間轉(zhuǎn)換。而且,圖像處理部7從HSV顏色空間上的膚色取得區(qū)域的圖像數(shù)據(jù)中取得下述(a) 至(c)的信息,作為肌膚參數(shù)。此外,在以下(a)及(b)的信息中,所謂“該人物”表示檢測(cè)出面部區(qū)域的個(gè)人、即 具有膚色取得區(qū)域中含有的面部部分的個(gè)人。另外,所謂“(HSV) ”表示由色調(diào)H、色飽和度 S及亮度V的各值構(gòu)成了信息。(a)該人物的反光區(qū)域的平均參數(shù)(HSV值)(以下,略記為“第一參數(shù)”)(b)該人物的除反光以外的肌膚區(qū)域的平均參數(shù)(HSV值)(以下略記為“第二參
9數(shù)”)(c)膚色取得區(qū)域中反光區(qū)域的占有率也就是說(shuō),圖像處理部7將膚色取得區(qū)域劃分為反光區(qū)域和除此之外的膚色區(qū) 域。并且,圖像處理部7作為第一參數(shù)計(jì)算與構(gòu)成反光區(qū)域的各像素相關(guān)的、色調(diào)H、色飽和 度S及亮度V的各平均值。另一方面,圖像處理部7作為第二參數(shù)計(jì)算與構(gòu)成該人物的膚 色區(qū)域的各像素相關(guān)的、色調(diào)H、色飽和度S及亮度V的各平均值。另外,作為反光區(qū)域?qū)δw 色取得區(qū)域的占有率,圖像處理部7計(jì)算膚色取得區(qū)域中反光區(qū)域的占有率]。在步驟S26中,圖像處理部7基于步驟S25的處理中所取得的肌膚參數(shù),來(lái)計(jì)算目 標(biāo)值。這里,所謂“目標(biāo)值”是指在將處理區(qū)域的各像素中的、色調(diào)H、色飽和度S及亮度 V的值(以下,將這些值總稱為“HSV值”)調(diào)整(修正)為接近被攝物體的個(gè)人膚色的情況 下所利用的目標(biāo)值。該目標(biāo)值構(gòu)成為HSV值。例如,目標(biāo)值是基于步驟S25的處理中所取得的第一參數(shù)和第二參數(shù)的差分,根 據(jù)反光區(qū)域的占有率而計(jì)算出的。以上說(shuō)明的各種信息、即步驟S24的處理中所取得的面部信息、步驟S25的處理中 運(yùn)算出的肌膚參數(shù)(這里,是指第一參數(shù)、第二參數(shù)及反光區(qū)域?qū)∧w的占有率)、以及步 驟S26的處理中計(jì)算出的目標(biāo)值,被存儲(chǔ)于處理信息存儲(chǔ)部5。接著,在步驟S27中,圖像處理部7將步驟S22的處理中所取得的面部區(qū)域的圖像 數(shù)據(jù),從RGB顏色空間向HSV顏色空間進(jìn)行顏色空間轉(zhuǎn)換。在步驟S28中,圖像處理部7從HSV顏色空間的圖像中取得色調(diào)H,并基于該色調(diào) H指定膚色區(qū)域。在步驟S29中,圖像處理部7從步驟S28中圖像處理部7所指定的膚色區(qū)域中指 定處理區(qū)域。所謂處理區(qū)域如在第一實(shí)施方式所涉及的步驟S7的說(shuō)明所述那樣,是指在膚色 區(qū)域中被特定為反光分量的區(qū)域。因此,處理區(qū)域的指定方法雖然只要是可特定反光分量的方法就足夠了,但是在 第二實(shí)施方式中,采用與第一實(shí)施方式同樣的方法、即由色飽和度S在規(guī)定值以下且亮度V 在規(guī)定值以上的像素構(gòu)成的區(qū)域被指定為處理區(qū)域。在步驟S30中,圖像處理部7基于在步驟S26的處理中計(jì)算出的目標(biāo)值,來(lái)修正步 驟S29的處理中所指定的處理區(qū)域的各HSV值。由此,能夠減輕處理區(qū)域的反光分量、接近在攝像圖像中作為被攝物體而含有的 個(gè)人膚色。在步驟S31中,圖像處理部7將包括減輕了反光分量的處理區(qū)域在內(nèi)的面部區(qū)域 的圖像數(shù)據(jù),從HSV顏色空間向RGB顏色空間進(jìn)行顏色空間轉(zhuǎn)換。由此,在第二實(shí)施方式所涉及的圖7的反光抑制處理中,通過(guò)步驟S26至S31的一 連串的處理,考慮成為被攝物體的個(gè)人的膚色,來(lái)調(diào)整處理區(qū)域的HSV值的各值,減輕了處 理區(qū)域中的反光分量。因此,以下將步驟S26至S31的一連串的處理稱為“第二處理”。這樣的第二處理結(jié)束后,處理進(jìn)入到步驟S32。在步驟S32中,圖像處理部7將處理過(guò)的圖像數(shù)據(jù)記錄于圖像記錄部9。由此,本流程圖的處理結(jié)束。接著,參照?qǐng)D8及圖9,對(duì)圖7的步驟S26的處理的具體例、即目標(biāo)值的計(jì)算處理的 具體例進(jìn)行說(shuō)明。如上述,在之前的步驟S25中,作為膚色取得區(qū)域,計(jì)算面部區(qū)域中能準(zhǔn)確確保被 攝物體的個(gè)人膚色的區(qū)域。進(jìn)而,該膚色取得區(qū)域被劃分為反光區(qū)域和膚色區(qū)域,從反光區(qū) 域中計(jì)算出第一參數(shù),并且從膚色區(qū)域中計(jì)算出第二參數(shù)。圖8表示這樣的膚色取得區(qū)域的各像素所繪制的HSV空間。詳細(xì)而言,圖8(a)表 示HSV空間的部分頂視圖,圖8 (b)表示HSV空間的部分剖視圖。在圖8(a)中,X標(biāo)記表示膚色取得區(qū)域中構(gòu)成反光區(qū)域的各像素。作為第一參 數(shù)51,計(jì)算出與這些各像素相關(guān)的、色調(diào)H、色飽和度S及亮度V的平均值。在圖8(a)中,白色圓圈標(biāo)記(除了附帶符號(hào)52的圓圈標(biāo)記以外)表示膚色取得 區(qū)域中構(gòu)成膚色區(qū)域的各像素。作為第二參數(shù)52,計(jì)算出與這些各像素相關(guān)的、色調(diào)H、色 飽和度S及亮度V的平均值。如圖8(a)及圖8(b)所示,目標(biāo)值53表示為連接第一參數(shù)51和第二參數(shù)52的線 上的點(diǎn)(該圖中黑色圓圈標(biāo)記)的坐標(biāo)值、即該點(diǎn)中的色調(diào)H、色飽和度S及亮度V的各值。例如以如下的方式計(jì)算這樣的目標(biāo)值53。首先,圖像處理部7計(jì)算第二參數(shù)52的各HSV值與第一參數(shù)51的各HSV值之間 的各差分。接著,在計(jì)算出的各差分的絕對(duì)值大的情況下,圖像處理部7需要將目標(biāo)值53設(shè) 定在第一參數(shù)51附近。為了進(jìn)行這樣的設(shè)定,需要表示目標(biāo)值53接近第一參數(shù)51到何種 程度的指標(biāo)。在這樣的指標(biāo)中,將使用百分比值顯示以第一參數(shù)51為起點(diǎn)(0%)、第二參 數(shù)52為終點(diǎn)(100% )、連接第一參數(shù)51和第二參數(shù)52的線上的點(diǎn)的位置的值,稱為“修正 比例”。也就是說(shuō),所謂修正比例是表示目標(biāo)值53接近第一參數(shù)51到何種程度的指標(biāo),且 百分比值越小則越是接近第一參數(shù)51的值。圖9是用于說(shuō)明修正比例的HSV空間的部分頂視圖的例子。詳細(xì)而言,圖9(a)表 示修正比例為15%情況下的目標(biāo)值53。另一方面,圖9(b)是表示修正比例為50%情況下 的目標(biāo)值53。比較圖9(a)和圖9(b)可知,與圖9(b)的修正值為50%情況下的目標(biāo)值53 相比,圖9(a)的修正比例為15%情況下的目標(biāo)值53更接近第一參數(shù)51。這里,圖像處理部7基于是否是伴隨著發(fā)光部12的閃光進(jìn)行的拍攝、及第二參數(shù) 與第一參數(shù)之間的差分等的諸多條件,來(lái)設(shè)定修正比例。再有,圖像處理部7根據(jù)第一參數(shù)、第二參數(shù)及所設(shè)定的修正比例,來(lái)計(jì)算目標(biāo)值 53。以上,參照?qǐng)D8及圖9,對(duì)圖7的步驟S26的處理的具體例、即目標(biāo)值的計(jì)算處理的 具體例進(jìn)行了說(shuō)明。接著,通過(guò)圖7的步驟S30的處理,來(lái)修正處理對(duì)象區(qū)域的各像素的HSV值,使其 接近這樣的目標(biāo)值。以下,根據(jù)第二實(shí)施方式的數(shù)碼照相機(jī)1,除了具有與第一實(shí)施方式相同的效果 之外,還執(zhí)行考慮了成為被攝物體的個(gè)人的膚色之后的第二處理(參照?qǐng)D7的步驟S26至 S31)。也就是說(shuō),作為目標(biāo)值設(shè)定了基于個(gè)人的膚色的顏色,對(duì)處理對(duì)象區(qū)域的各像素進(jìn)行適當(dāng)修正,以使其接近該目標(biāo)值。由此,因?yàn)榛诒粩z物體的膚色能夠減輕反光分量,所以 能夠自然地抑制被攝物體的反光。第三實(shí)施方式在第三實(shí)施方式所涉及的反光抑制處理中,選擇性執(zhí)行第一實(shí)施方式所采用的 “第一處理”(參照?qǐng)D4的步驟S5至S10)、和第二實(shí)施方式所采用的“第二處理”(參照?qǐng)D7 的步驟S26至S31)。此外,圖1的數(shù)碼照相機(jī)1作為第三實(shí)施方式所涉及的圖像處理裝置起作用。因 此,關(guān)于該電路結(jié)構(gòu)的說(shuō)明與第一實(shí)施方式相同,所以在此省略說(shuō)明。因此,以下參照?qǐng)D10所示的流程圖,對(duì)由第三實(shí)施方式的數(shù)碼照相機(jī)1執(zhí)行的反 光抑制處理的順序進(jìn)行說(shuō)明。通過(guò)圖1所示的控制部8執(zhí)行各部件來(lái)執(zhí)行以下處理。另外,本流程圖的處理是 在用戶操作攝影模式設(shè)定鍵lib設(shè)定任一攝影模式后開(kāi)始的?;蛘?,在進(jìn)行半按下快門鍵 Ila的操作后開(kāi)始的。在步驟S41中,控制部8執(zhí)行攝像及預(yù)覽顯示??刂撇?在預(yù)覽攝像時(shí)依次讀出被暫時(shí)存儲(chǔ)于處理信息存儲(chǔ)部5等中的各幀圖像 的圖像數(shù)據(jù)后,使顯示部10依次顯示各自對(duì)應(yīng)的幀圖像。這樣的一連串處理在此稱為“預(yù) 覽顯示”。以下將通過(guò)這樣的預(yù)覽顯示而顯示在顯示部10上的幀圖像稱為“預(yù)覽圖像”。此外,攝像或預(yù)覽顯示當(dāng)然也在第一實(shí)施方式或第二實(shí)施方式的數(shù)碼照相機(jī)1中 執(zhí)行。也就是說(shuō),由于圖4或圖7所示的流程圖如上所述,表示在按下(全按下)快門鍵Ila 并指示進(jìn)行攝像圖像的記錄之后的處理,因此只是省略了進(jìn)行攝像或預(yù)覽顯示的步驟的圖
7J\ ο在步驟S42中,圖像處理部7通過(guò)對(duì)預(yù)覽圖像的圖像數(shù)據(jù)實(shí)施面部檢測(cè)處理,試圖 從該預(yù)覽圖像中檢測(cè)面部區(qū)域。由于關(guān)于面部檢測(cè)處理是公知技術(shù),故省略詳細(xì)的內(nèi)容。在步驟S43中,控制部8判定是否按下(全按下)了快門鍵11a。在用戶未全按下快門鍵Ila的情況下,在步驟S43中判定為“否”,處理返回至步驟 S41。也就是說(shuō),直至用戶全按下快門鍵Ila的期間,反復(fù)進(jìn)行步驟S41至S43的循環(huán)處理, 在顯示部10中繼續(xù)顯示預(yù)覽圖像,此期間反復(fù)執(zhí)行對(duì)預(yù)覽圖像的面部檢測(cè)處理。然后,在用戶全按下快門鍵Ila時(shí),步驟S43中被判定為“是”,處理進(jìn)入到步驟 S45,指示進(jìn)行攝像圖像的記錄。以后,由前處理部4處理過(guò)的幀圖像的圖像數(shù)據(jù)被記錄于 圖像記錄部9。在步驟S44中,圖像處理部7從圖像記錄部9中取得由前處理部4處理過(guò)的幀圖 像的圖像數(shù)據(jù)。此外,由于在圖像尺寸較大的情況下處理費(fèi)時(shí)間,故也可縮小圖像記錄部9 中所保存的圖像數(shù)據(jù),從而生成縮小圖像數(shù)據(jù),并對(duì)該縮小圖像數(shù)據(jù)實(shí)施以下處理。在步驟S45中,圖像處理部7通過(guò)對(duì)步驟S44的處理中所取得的幀圖像的圖像數(shù) 據(jù)實(shí)施面部檢測(cè)處理,試圖從該幀圖像中檢測(cè)面部區(qū)域。關(guān)于面部檢測(cè)處理由于是公知技 術(shù),故省略詳細(xì)內(nèi)容。在步驟S46中,圖像處理部7判定從幀圖像中是否檢測(cè)出面部區(qū)域。在從幀圖像中未檢測(cè)出面部區(qū)域的情況下,在步驟S46中判定為“否”,處理進(jìn)入 到步驟S54。
在步驟S54中,圖像處理部7將拍攝到的圖像數(shù)據(jù)直接記錄(覆寫(xiě))于圖像記錄 部9。由此,本流程圖的處理結(jié)束。與此相對(duì),從幀圖像中檢測(cè)出面部區(qū)域的情況下,在步驟S46中判定為“是”,處理 進(jìn)入到步驟S47。在步驟S47中,圖像處理部47基于步驟S45的面部檢測(cè)處理的結(jié)果取得面部信 肩、ο具體而言,例如作為面部信息,取得包圍面部區(qū)域的框的坐標(biāo)、或該面部區(qū)域內(nèi)含 有的被攝物體的眼位置信息等。在步驟S48中,圖像處理部7基于步驟S47的處理中所取得的面部信息,計(jì)算肌膚
參數(shù)等。具體而言,例如圖像處理部7與第二實(shí)施方式所涉及的圖7的步驟S25的處理同 樣地,基于眼位置信息,計(jì)算能準(zhǔn)確地取得面部區(qū)域中被攝物體的個(gè)人的肌膚信息的區(qū)域, 作為肌膚取得區(qū)域。圖像處理部7將該膚色確保區(qū)域的圖像數(shù)據(jù)從RGB顏色空間向HSV顏色空間進(jìn)行 顏色空間轉(zhuǎn)換。并且,作為肌膚參數(shù)等,圖像處理部7從HSV顏色空間上的膚色確保區(qū)域的圖像數(shù) 據(jù)中計(jì)算如下的(a)至(f)信息。(a)第一參數(shù)(b)第二參數(shù)(c)膚色取得區(qū)域中反光區(qū)域的占有率(d)第二參數(shù)的可靠度(e)相對(duì)于整個(gè)畫(huà)面的該人物的面部面積此外,(a)至(c)的信息由于在第二實(shí)施方式所涉及的圖7的步驟S25的處理中也 同樣地計(jì)算過(guò),故在此省略其說(shuō)明。因此,以下僅對(duì)第二實(shí)施方式所涉及的圖7的步驟S25 的處理中未未計(jì)算過(guò)的(d)及(e)的信息進(jìn)行說(shuō)明。也就是說(shuō),圖像處理部7在計(jì)算出第二參數(shù)之后,用百分比顯示計(jì)算其第二參數(shù) 的可靠度。此時(shí)的計(jì)算方法并不特別限定,例如一般能夠采用如下的方法等,即比較被視 為膚色的顏色的平均的HSV值、和作為被攝物體而含有的個(gè)人的第二參數(shù)的HSV值。另外,作為相對(duì)于整個(gè)畫(huà)面的該人物的面部面積,圖像處理部7例如計(jì)算幀圖像 (整個(gè)畫(huà)面)中面部區(qū)域的空間占有率(百分比顯示)。進(jìn)而,在第三實(shí)施方式中,作為步驟S48的處理的一部分圖像處理部7執(zhí)行如下處理。也就是說(shuō),在之前的步驟S47的處理中,作為面部信息之一取得包圍面部區(qū)域的 框的坐標(biāo)。因此,圖像處理部7基于包圍這樣的面部區(qū)域的框的坐標(biāo),作為背景區(qū)域計(jì)算幀 圖像中包圍面部區(qū)域的框以外的區(qū)域。圖像處理部7將該背景區(qū)域的圖像數(shù)據(jù)從RGB顏色空間向HSV顏色空間進(jìn)行顏色 空間轉(zhuǎn)換。并且,圖像處理部7作為肌膚參數(shù)等還從HSV顏色空間上的背景區(qū)域的圖像數(shù)據(jù)
13中計(jì)算如下的(f)及(g)的信息。此外,在以下的(f)及(g)的信息中,所謂“背景”表示背景區(qū)域含有的像。另外, 所謂“(HSV),,表示由色調(diào)H、色飽和度S及亮度V的各值構(gòu)成信息。(f)背景區(qū)域的反光區(qū)域的平均參數(shù)(HSV)(以下,略記為“第三參數(shù)”)(g)相對(duì)于背景膚色的背景部反光% (以下,略記為“背景部反光%”)也就是說(shuō),圖像處理部7將背景區(qū)域劃分為反光區(qū)域(具有與反光相同的HSV特 性的部分)、和除此之外的膚色區(qū)域。并且,圖像處理部7作為第三參數(shù)計(jì)算與構(gòu)成反光區(qū) 域的各像素相關(guān)的、色調(diào)H、色飽和度S及亮度V的各平均值。另外,圖像處理部7計(jì)算背景 區(qū)域中反光區(qū)域的占有率[%]。在步驟S49中,作為修正處理的方法,圖像處理部7選擇“第一處理”(參照?qǐng)D4的 步驟S5至S10)的方法、和“第二處理”(參照?qǐng)D7的步驟S26至S31)的方法中的其中一 個(gè)。所述修正處理基于上述步驟S48的處理中所取得的肌膚參數(shù)等來(lái)抑制反光。以下,將這樣的步驟S49的處理稱為“反光抑制方式選擇處理”。關(guān)于反光抑制方 式選擇處理參照?qǐng)D11在后面進(jìn)行敘述。在步驟S50中,圖像處理部7判定步驟S49的反光抑制方式選擇處理中所選擇的 方法是否是執(zhí)行第二處理的方法。在步驟S49的反光抑制方式選擇處理中,選擇了執(zhí)行“第一處理”的方法的情況 下,在步驟S50中判定為“否”,處理進(jìn)入到步驟S51。在步驟S51中,圖像處理部7執(zhí)行“第一處理”(參照?qǐng)D4的步驟S5至S10)。與此相對(duì),在步驟S49的反光抑制方式選擇處理中,選擇執(zhí)行“第二處理”的方法 的情況下,在步驟S50中判定為“是”,處理進(jìn)入到步驟S52。在步驟S52中,圖像處理部7執(zhí)行“第二處理”(參照?qǐng)D7的步驟S26至S31)。這樣,在對(duì)步驟S33的處理中所取得的圖像數(shù)據(jù)實(shí)施步驟S51的“第一處理”、或者 執(zhí)行步驟S52的“第二處理”后,處理進(jìn)入到步驟S53。在步驟S53中,圖像處理部7將步驟S51或S52中處理過(guò)的圖像數(shù)據(jù)記錄于圖像 記錄部9。由此,本流程圖的處理結(jié)束。接著,參照?qǐng)D11所示的流程圖,對(duì)圖10的步驟S49的反光抑制方式選擇處理的順 序進(jìn)行說(shuō)明。在步驟S61中,圖像處理部7判定在圖10的步驟S45的面部檢測(cè)處理中檢測(cè)出的 面部的人數(shù)的可靠性(以下,簡(jiǎn)單稱為“可靠性”)??煽啃缘呐卸ǚ椒](méi)有特別限定,例如在本實(shí)施方式中采用了如下方法。也就是說(shuō),在圖10的步驟S44的處理中所取得的幀圖像的圖像數(shù)據(jù)是伴隨著發(fā)光 部12的閃光所拍攝到的圖像數(shù)據(jù)的情況下,判定為可靠性為“1”。另外,在步驟S44的處理中所取得的幀圖像的圖像數(shù)據(jù)是不伴隨著發(fā)光部12的 閃光所拍攝到的圖像數(shù)據(jù)、且步驟S45的面部檢測(cè)處理中從該幀圖像檢測(cè)出面部的人數(shù)與 步驟S42的面部檢測(cè)處理中從預(yù)覽圖像檢測(cè)出面部的人數(shù)一致的情況下,判定為可靠性為 “1”。另一方面,在步驟S44的處理中所取得的幀圖像的圖像數(shù)據(jù)是不伴隨著發(fā)光部12 的閃光所拍攝到的圖像數(shù)據(jù)、且步驟S45的面部檢測(cè)處理中從該幀圖像檢測(cè)出面部的人數(shù)與步驟S42的面部檢測(cè)處理中從預(yù)覽圖像檢測(cè)出面部的人數(shù)不一致的情況下,判定為可靠 性為“0”。在步驟S62中,圖像處理部7設(shè)定削弱反光抑制處理效果的色飽和度S的邊界值 (以下,適當(dāng)稱為“邊界值S”)。也就是說(shuō),除了第三實(shí)施方式以外也包括第一實(shí)施方式或第二實(shí)施方式,在反光 抑制處理中預(yù)先設(shè)定邊界值S,并且以下將這樣的S值稱為“初始邊界值”。例如,初始設(shè) 定值一般設(shè)定成為熒光燈等白色區(qū)域和除此之外的區(qū)域的邊界的色飽和度S的值。即在 使用了初始邊界值的反光抑制處理中,僅對(duì)熒光燈等的白色區(qū)域降低反光抑制處理效果程度。但是,膚色確保取得區(qū)域中的第一參數(shù)的色飽和度S的值(以下,稱為“肌膚反光 平均S值”)卻超過(guò)了第三參數(shù)的色飽和度S的值(以下,稱為“背景反光平均S值”)。這樣,在肌膚反光平均S值超過(guò)了背景反光平均S值的狀態(tài)下,僅對(duì)膚色確保區(qū)域 中作為反光區(qū)域的區(qū)域?qū)嵤┓垂庖种铺幚砑纯伞R虼?,在這種狀態(tài)下,圖像處理部7作為邊界值S設(shè)定肌膚反光平均S值和背景反 光平均S值之間的值。由此,也可對(duì)背景區(qū)域降低反光抑制處理效果的程度。在步驟S63中,圖像處理部7判定在步驟S61的處理中判定出的可靠性是否為 “1”。在可靠性為“0”的情況下,在步驟S63中判定為“否”,處理進(jìn)入到步驟S69。在步 驟S69中,圖像處理部7作為反光抑制方式選擇執(zhí)行“第一處理”(參照?qǐng)D4的步驟S5至 S10)的方法。與此相對(duì),在可靠性為“ 1,,的情況下,在該階段中選定反光抑制方式仍不充分,故 在步驟S63中判定為“是”,處理進(jìn)入到步驟S64。在步驟S64中,圖像處理部7判定被攝物體是否為1人。對(duì)圖10的步驟S44的處理中所取得的幀圖像的數(shù)據(jù)實(shí)施了步驟S45的面部檢測(cè) 處理,結(jié)果檢測(cè)出多個(gè)人的面部的情況下、即被攝物體為多人的情況下,在步驟S64中判定 為“否”,處理進(jìn)入到步驟S69。在處理S69中,圖像處理部7作為反光抑制方式選擇執(zhí)行“第 一處理”的方式。與此相對(duì),對(duì)步驟S44的處理中多取得的幀圖像的圖像數(shù)據(jù)實(shí)施了步驟S45的面 部檢測(cè)處理,結(jié)果檢測(cè)出一人的面部的情況下、即被攝物體為1人的情況下,在該階段選定 反光抑制方式仍不充分,故在步驟S64中判定為“是”,處理進(jìn)入到步驟S65。此外,由于第三實(shí)施方式的“第二處理”以僅考慮1人被攝物體的個(gè)人膚色為前 提,故設(shè)置了步驟S64的處理。也就是說(shuō),在采用了可考慮多人被攝物體的各自的個(gè)人膚色 的“第二處理”的情況下,可省略步驟S64的處理。在步驟S65中,圖像處理部7判定第二參數(shù)的可靠度(圖10的步驟S48的處理中 所取得的(d)信息)是否在一定值以下。在第二參數(shù)的可靠度在一定值以下的情況下,在步驟S65中判定為“是”,處理進(jìn) 入到步驟S69。在步驟S69中,圖像處理部7作為反光抑制方式選擇執(zhí)行“第一處理”的方式。與此相對(duì),在第二參數(shù)的可靠度超過(guò)了一定值的情況下,在該階段選定反光抑制方式仍不充分,故在步驟S65中判定為“否”,處理進(jìn)入到步驟S66。在步驟S66中,圖像處理部7判定相對(duì)于整個(gè)畫(huà)面的該人物的面部面積(圖10的 步驟S48的處理中所取得的(e)信息)是否在一定值以上。在面部面積在一定值以上的情況下,在步驟S66中判定為“是”,處理進(jìn)入到步驟 S70。在步驟S70中,圖像處理部7作為反光抑制方式選擇執(zhí)行“第二處理”(參照?qǐng)D7的步 驟S26至S31)的方式。與此相對(duì),在面部面積低于一定值的情況下,在該階段選定反光抑制方式仍不充 分,故在步驟S66中判定為“否”,處理進(jìn)入到步驟S67。在步驟S67中,圖像處理部7判定第二參數(shù)的色飽和度S的值(在圖10的步驟 S48的處理中所取得的(b)信息,以下稱為“第二參數(shù)的S值”)是否在一定范圍內(nèi)。 在第二參數(shù)的S值是一定范圍內(nèi)的值的情況下,在步驟S67中判定為“是”,處理進(jìn) 入到步驟S70中。在步驟S70中,圖像處理部7作為反光抑制方式選擇執(zhí)行“第二處理”的 方式。與此相對(duì),在第二參數(shù)的S值是偏離一定范圍的值的情況下,在該階段選定反光 抑制方式仍不充分,故在步驟S67中判定為“否”,處理進(jìn)入到步驟S68。在步驟S68中,圖像處理部7判定背景區(qū)域中反光區(qū)域的占有率(在圖10的步驟 S48的處理中所取得的(g)信息)是否在一定值以下。在背景部反光%在一定值以下的情況下,在步驟S68中判定為“是”,處理進(jìn)入到 步驟S70。在步驟S70中,圖像處理部7作為反光抑制方式選擇執(zhí)行“第二處理”的方式。與此相對(duì),在背景部反光%超過(guò)一定值的情況下,在步驟S68中判定為“否”,處理 進(jìn)入到步驟S69。在步驟S69中,圖像處理部7作為反光抑制方式選擇執(zhí)行“第一處理”的 方式。這樣,在步驟S69或S70的處理中選擇反光抑制方式后,反光抑制方式選擇處理結(jié)
束ο也就是說(shuō),圖10的步驟S49的處理結(jié)束,處理進(jìn)入到步驟S50。在圖11的步驟S69的處理中選擇了執(zhí)行“第一處理”的方式的情況下,在步驟S50 中判定為“否”,在步驟S51的處理中執(zhí)行“第一處理”。與此相對(duì),在圖11的步驟S70的處理中選擇了執(zhí)行“第二處理”的方式的情況下, 在步驟S50中判定為“是”,在步驟S52的處理中執(zhí)行“第二處理”。根據(jù)第三實(shí)施方式的數(shù)碼照相機(jī)1,除了與第一實(shí)施方式同樣具有上述(1)至(5) 的效果、且與第二實(shí)施方式同樣具有上述(6)至(8)的效果之外,還具有如下效果。(9)通過(guò)執(zhí)行第二實(shí)施方式所涉及的“第二處理”(參照?qǐng)D7的步驟S26至S31), 從而可達(dá)到上述(6)的效果。也就是說(shuō),在第一實(shí)施方式所涉及的“第一處理”(參照?qǐng)D4 的步驟S5至S10)中產(chǎn)生紅色程度增加的問(wèn)題。所謂上述(6)的效果是指能解決該問(wèn)題的 效果。但是,在沒(méi)有適當(dāng)?shù)玫脚c被攝物體的個(gè)人的肌膚相關(guān)的信息的情況下等,也可能 存在即使執(zhí)行“第二處理”不但無(wú)法解決該問(wèn)題還會(huì)得到較差的處理結(jié)果的情況?;蛘撸?可能存在所需的信息不足、不能自行執(zhí)行“第二處理”的情況。在這種情況下,由于第三實(shí)施方式中能夠代替“第二處理”而執(zhí)行“第一處理”,故可得到一定值以上的反光抑制效果。以上,作為本發(fā)明的實(shí)施方式雖然對(duì)第一實(shí)施方式及第二實(shí)施方式進(jìn)行了說(shuō)明, 但是本發(fā)明并不限定于上述實(shí)施方式。也就是說(shuō),以下所示的、在能達(dá)成本發(fā)明目的的范圍 內(nèi)進(jìn)行的變形、改良等也包括在本發(fā)明中。(1)在設(shè)定人物攝影模式后,控制部8也可以執(zhí)行從拍攝到的圖像數(shù)據(jù)中減輕反 光分量的反光抑制處理。在人物攝影模式中,另外也存在閃光自動(dòng)發(fā)光的情況,在拍攝到的 人物的面部產(chǎn)生反光分量的概率較高。因此,在設(shè)定了人物攝影模式時(shí),與閃光燈發(fā)光的有 無(wú)無(wú)關(guān),通過(guò)對(duì)拍攝到的圖像數(shù)據(jù)執(zhí)行減輕反光分量的反光抑制處理,能夠得到減輕了反 光分量的、更優(yōu)圖像。(2)也可從面部檢測(cè)處理檢測(cè)出的面部區(qū)域中,提取相當(dāng)于容易發(fā)生反光分量的 人物的額頭、臉頰、鼻的部分,并從該部分中指定處理區(qū)域。由此,通過(guò)提取容易發(fā)生反光分 量的部分,可更準(zhǔn)確地指定處理區(qū)域。(3)用戶也可一邊觀看顯示部10所顯示的圖像,一邊經(jīng)由未圖示的操作輸入部件 指定膚色區(qū)域或處理區(qū)域。此時(shí),關(guān)于膚色區(qū)域,通過(guò)在顯示部10中彩色顯示圖2所示的 HSV顏色空間的示意圖,從而能夠使用戶在視覺(jué)上辨別色調(diào)H的分布。(4)關(guān)于上述的圖像處理部7的功能的一部分或全部,也可按照本發(fā)明所涉及的 圖像處理程序使控制部8動(dòng)作來(lái)實(shí)現(xiàn)。(5)在上述的實(shí)施方式中,雖然示例了以攝影鏡頭2及攝像部3作為本發(fā)明的圖像 取得部件的例子,但是也可構(gòu)成為將由其他數(shù)碼照相機(jī)等拍攝到的圖像讀取到數(shù)碼照相機(jī) 1中。此時(shí),也可將以自由拆卸的方式裝載記錄有圖像數(shù)據(jù)的記錄介質(zhì)的卡槽部、或與用于 以有線或無(wú)線的方式讀取圖像數(shù)據(jù)的電纜或傳送部之間的連接端子,作為圖像取得部件起 作用。(6)另外,在上述的實(shí)施方式中,雖然從膚色區(qū)域中檢測(cè)處理區(qū)域,但也可是其他 的顏色區(qū)域。此時(shí),指定期望的色調(diào)值H的范圍,并在所指定的色調(diào)值H的范圍內(nèi),指定由 色飽和度S在規(guī)定值以下且亮度V在規(guī)定值以上的像素構(gòu)成的區(qū)域作為處理區(qū)域。(7)此外,在第二實(shí)施方式中,雖然圖像處理部7根據(jù)膚色取得區(qū)域的第一參數(shù)和 第二參數(shù)設(shè)定了目標(biāo)值,但是也可僅考慮第二參數(shù)來(lái)設(shè)定目標(biāo)值。(8)而且,本發(fā)明并不特別限定于HSV空間,也可以廣泛應(yīng)用于其他空間,例如YUV 空間或RGB空間等各種色調(diào)空間。(9)本發(fā)明并不限定于數(shù)碼照相機(jī),例如能夠應(yīng)用于具備帶有照相機(jī)的移動(dòng)電話 等靜止圖像攝影功能的電子設(shè)備整個(gè)領(lǐng)域。另外,本發(fā)明也能應(yīng)用于具備圖像顏色處理功 能的任意圖像處理裝置。進(jìn)而,在本發(fā)明所涉及的圖像處理裝置中,也包括可基于規(guī)定程序 動(dòng)作來(lái)實(shí)現(xiàn)本實(shí)施方式的圖像處理部7的功能的計(jì)算機(jī)裝置。
1權(quán)利要求
一種圖像處理裝置,具備圖像取得部件,其取得圖像;顏色區(qū)域檢測(cè)部件,從所述圖像取得部件取得的圖像中檢測(cè)規(guī)定的顏色區(qū)域;區(qū)域指定部件,基于由所述顏色區(qū)域檢測(cè)部件檢測(cè)出的所述顏色區(qū)域的色飽和度及亮度,來(lái)指定應(yīng)調(diào)整區(qū)域;和顏色調(diào)整部件,調(diào)整由所述區(qū)域指定部件指定出的所述應(yīng)調(diào)整區(qū)域的像素的色調(diào)、色飽和度及亮度中的至少一個(gè)。
2.根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于,具備面部檢測(cè)部件,該面部檢測(cè)部件從所述圖像取得部件取得的圖像中檢測(cè)人物的面 部區(qū)域,所述顏色區(qū)域檢測(cè)部件從所述面部檢測(cè)部件檢測(cè)出的面部區(qū)域的圖像中檢測(cè)規(guī)定的 顏色區(qū)域。
3.根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于,所述顏色區(qū)域檢測(cè)部件檢測(cè)相當(dāng)于所述圖像中含有的人物的膚色的膚色區(qū)域,來(lái)作為 規(guī)定的所述顏色區(qū)域,所述區(qū)域指定部件在所述膚色區(qū)域中指定色飽和度在規(guī)定值以下且亮度在規(guī)定值以 上的像素,來(lái)作為所述應(yīng)調(diào)整區(qū)域,。
4.根據(jù)權(quán)利要求2所述的圖像處理裝置,其特征在于,所述顏色調(diào)整部件包括膚色信息取得部件,該膚色信息取得部件取得與所述圖像中含 有的人物的個(gè)人的膚色相關(guān)的膚色信息,所述顏色調(diào)整部件基于該膚色信息取得部件取得的所述膚色信息,來(lái)調(diào)整所述應(yīng)調(diào)整 區(qū)域的像素中的各個(gè)色調(diào)、色飽和度及亮度。
5.根據(jù)權(quán)利要求4所述的圖像處理裝置,其特征在于, 所述膚色信息取得部件,包括位置信息取得部件,其取得位置信息,該位置信息表示在所述面部檢測(cè)部件檢測(cè)出的 所述面部區(qū)域內(nèi)含有的所述人物的特定部位的位置;和設(shè)定部件,其基于所述位置信息取得部件取得的所述位置信息,將從所述面部區(qū)域中 要取得該人物的膚色信息的區(qū)域設(shè)定為膚色取得區(qū)域,所述膚色信息取得部件基于所述設(shè)定部件設(shè)定的所述膚色取得區(qū)域的圖像,求出所述 膚色信息。
6.根據(jù)權(quán)利要求5所述的圖像處理裝置,其特征在于,所述膚色信息取得部件取得第一平均值信息及第二平均值信息作為所述膚色信息,該 第一平均值信息由與所述應(yīng)調(diào)整區(qū)域中的各像素相關(guān)的色調(diào)、色飽和度及亮度的各平均值 構(gòu)成,該第二平均值信息由與所述膚色取得區(qū)域中的各像素相關(guān)的色調(diào)、色飽和度及亮度 的各平均值構(gòu)成,所述顏色調(diào)整部件基于所述膚色信息取得部件取得的所述第一平均值信息和所述第 二平均值信息的差分值,調(diào)整所述應(yīng)調(diào)整區(qū)域的像素的色調(diào)、色飽和度及亮度中的至少一 個(gè)。
7.根據(jù)權(quán)利要求6所述的圖像處理裝置,其特征在于,所述顏色調(diào)整部件,針對(duì)各色調(diào)、色飽和度及亮度求出所述第一平均值信息和所述第 二平均值信息的差分值,基于所述差分值求出所述應(yīng)調(diào)整區(qū)域的像素的色調(diào)、色飽和度及 亮度中的至少一個(gè)。
8.根據(jù)權(quán)利要求2所述的圖像處理裝置,其特征在于,所述顏色調(diào)整部件對(duì)所述應(yīng)調(diào)整區(qū)域的像素進(jìn)行提高色飽和度、降低亮度的調(diào)整。
9.根據(jù)權(quán)利要求8所述的圖像處理裝置,其特征在于,具備強(qiáng)度計(jì)算部件,該強(qiáng)度計(jì)算部件計(jì)算所述應(yīng)調(diào)整區(qū)域中的色飽和度及亮度的強(qiáng)度,所述顏色調(diào)整部件,按照所述強(qiáng)度計(jì)算部件計(jì)算出的所述應(yīng)調(diào)整區(qū)域的色飽和度及亮 度的強(qiáng)度,對(duì)所述應(yīng)調(diào)整區(qū)域的像素進(jìn)行色飽和度及亮度的調(diào)整。
10.根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于,在由所述圖像取得部件取得的圖像是伴隨著發(fā)光拍攝到的圖像時(shí),所述區(qū)域指定部件 指定所述應(yīng)調(diào)整區(qū)域。
11.根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于, 具備設(shè)定部件,能從多個(gè)攝影模式中設(shè)定一個(gè)攝影模式;和攝影條件設(shè)定部件,根據(jù)經(jīng)由所述設(shè)定部件設(shè)定出的攝影模式,設(shè)定所述圖像取得部 件中的攝像條件,在由所述設(shè)定部件設(shè)定出用于拍攝人物的攝影模式的情況下,所述區(qū)域指定部件指定 所述應(yīng)調(diào)整區(qū)域。
12.—種圖像處理方法,包括 圖像取得步驟,取得圖像;顏色區(qū)域檢測(cè)步驟,從所述圖像取得步驟取得的圖像中檢測(cè)規(guī)定的顏色區(qū)域; 處理區(qū)域指定步驟,基于由所述顏色區(qū)域檢測(cè)步驟檢測(cè)出的所述顏色區(qū)域的色飽和度 及亮度,來(lái)指定應(yīng)調(diào)整區(qū)域;和顏色調(diào)整步驟,調(diào)整由所述處理區(qū)域指定步驟指定出的所述應(yīng)調(diào)整區(qū)域的像素的色 調(diào)、色飽和度及亮度中的至少一個(gè)。
全文摘要
本發(fā)明提供一種圖像處理裝置,具備圖像取得部件,其取得圖像;顏色區(qū)域檢測(cè)部件,從所述圖像取得部件取得的圖像中檢測(cè)規(guī)定的顏色區(qū)域;區(qū)域指定部件,基于由所述顏色區(qū)域檢測(cè)部件檢測(cè)出的所述顏色區(qū)域的色飽和度及亮度,來(lái)指定應(yīng)調(diào)整的區(qū)域;和顏色調(diào)整部件,調(diào)整由所述區(qū)域指定部件指定出的所述應(yīng)調(diào)整的區(qū)域的像素的色調(diào)、色飽和度及亮度中的至少一個(gè)。
文檔編號(hào)G06K9/00GK101964874SQ20101023663
公開(kāi)日2011年2月2日 申請(qǐng)日期2010年7月23日 優(yōu)先權(quán)日2009年7月23日
發(fā)明者市川英里奈, 松本康佑 申請(qǐng)人:卡西歐計(jì)算機(jī)株式會(huì)社