專利名稱:圖像處理裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及應(yīng)用于對(duì)所拍攝的圖像,特別是以人物為被攝體的圖像的圖像處理的有效技術(shù)。
背景技術(shù):
以往,具有通過(guò)對(duì)以人物為被攝體的圖像進(jìn)行圖像校正,使被攝體的皮膚顯現(xiàn)光滑美觀的技術(shù)。作為這種圖像校正的具體例子,具有通過(guò)使用ε濾波器,對(duì)圖像整體的邊緣和亮度差實(shí)施局部暈映處理的技術(shù),以及僅對(duì)圖像整體中的膚色分量的區(qū)域?qū)嵤炗程幚淼募夹g(shù)(例如,參照專利文獻(xiàn)1)。
并且,作為以修正/去除臉圖像內(nèi)所包含的不期望的分量,例如皺紋、污點(diǎn)、皮膚粗糙、粉刺等為目的的技術(shù),還具有以下技術(shù)(參照專利文獻(xiàn)2)。
首先,針對(duì)形成以臉為主體的圖像的各像素的信號(hào)值,差分檢測(cè)部檢測(cè)各像素與周圍各像素的信號(hào)電平差。閾值判定部把該信號(hào)電平差與基準(zhǔn)值進(jìn)行比較。運(yùn)算部根據(jù)該比較結(jié)果使信號(hào)電平差與規(guī)定系數(shù)相乘,并與各像素值相加。根據(jù)該相加結(jié)果,通過(guò)按照像素的位置和圖像選擇比較中的基準(zhǔn)值和乘法部中的系數(shù),可獲得消除了臉圖像內(nèi)所包含的不期望的分量的圖像。
并且,作為現(xiàn)有技術(shù),具有針對(duì)人物圖像的身體部分,特別是其臉部分和頭部分,能夠在不使裝飾重疊之后附加裝飾的人物圖像處理裝置(參照專利文獻(xiàn)3)。該人物圖像處理裝置具有根據(jù)構(gòu)成人物圖像的身體部分的至少一個(gè)要素設(shè)定身體部分區(qū)域的位置和范圍的單元,以及把裝飾僅附加給除了身體部分區(qū)域以外的背景區(qū)域的單元。并且,該人物圖像處理裝置往往也被構(gòu)成為具有根據(jù)構(gòu)成人物圖像的身體部分的至少一個(gè)要素設(shè)定身體部分區(qū)域的位置和范圍的單元,以及沿著身體部分區(qū)域的外周圍附加裝飾的單元。
特許第3319727號(hào)公報(bào)[專利文獻(xiàn)2]特開(kāi)2000-105815號(hào)公報(bào)[專利文獻(xiàn)3]特開(kāi)2000-022929號(hào)公報(bào)在現(xiàn)有技術(shù)中,在進(jìn)行對(duì)被攝體的皮膚的暈映處理的情況下,以圖像內(nèi)存在的具有與膚色接近的分量的顏色的物體為對(duì)象執(zhí)行暈映處理。因此,要防止連具有與膚色不同的分量的顏色的物體都成為暈映處理對(duì)象而模糊。
然而,在現(xiàn)有技術(shù)中,在圖像內(nèi)存在具有與膚色接近的分量的顏色的物體或背景的情況下,連該部分都成為暈映處理對(duì)象。因此,具有的問(wèn)題是,連被攝體的人物以外的具有與膚色接近的分量的顏色的背景都模糊了。
并且,在現(xiàn)有技術(shù)中,預(yù)先固定地保持成為暈映處理對(duì)象的膚色分量。因此,在現(xiàn)有技術(shù)中,往往不能與由人種或個(gè)人差異所引起的膚色差異對(duì)應(yīng)起來(lái)。在這種情況下,往往不能準(zhǔn)確實(shí)施對(duì)皮膚區(qū)域的暈映處理。
并且,上述暈映處理中的問(wèn)題不限于暈映處理,在其他圖像處理中也成為問(wèn)題。
發(fā)明內(nèi)容
在本發(fā)明中,目的是解決這種問(wèn)題,防止對(duì)本來(lái)不成為暈映處理等的圖像處理的對(duì)象的區(qū)域?qū)嵤﹫D像處理。
例如,目的是通過(guò)僅限于成為被攝體的人物的指定區(qū)域(例如臉的皮膚部分)進(jìn)行圖像處理(例如暈映處理),防止具有與膚色接近的分量的顏色的背景因圖像處理而處于不自然的狀態(tài)(例如變得模糊)。
并且,例如,目的是通過(guò)從圖像中指定用于決定成為圖像處理(例如暈映處理)對(duì)象的區(qū)域的色分量,例如膚色分量,來(lái)實(shí)施與由人種或個(gè)人差異所引起的膚色差異對(duì)應(yīng)的圖像處理。
為了解決上述問(wèn)題,本發(fā)明采用以下結(jié)構(gòu)。本發(fā)明的第一方式是圖像處理裝置,具有規(guī)定區(qū)域指定單元和圖像生成單元。
規(guī)定區(qū)域指定單元指定以作為圖像中的被攝體的人物的身體部分為基準(zhǔn)所決定的規(guī)定區(qū)域。規(guī)定區(qū)域指定單元可以被構(gòu)成為由用戶通過(guò)手動(dòng)來(lái)指定規(guī)定區(qū)域。即,規(guī)定區(qū)域指定單元可以被構(gòu)成為,根據(jù)由用戶所指定的圖像中的區(qū)域來(lái)指定上述身體部分,以所指定的該身體部分為基準(zhǔn)還指定上述規(guī)定區(qū)域。例如,規(guī)定區(qū)域指定單元可以被構(gòu)成為把由用戶所指定的區(qū)域指定為身體部分,也可以被構(gòu)成為根據(jù)由用戶所指定的點(diǎn)、區(qū)域、顏色、形狀等指定身體部分。而且,規(guī)定區(qū)域指定單元可以被構(gòu)成為以這樣指定的身體部分為基準(zhǔn)來(lái)指定規(guī)定區(qū)域。
并且,規(guī)定區(qū)域指定單元可以被構(gòu)成為獨(dú)立于用戶的輸入來(lái)指定規(guī)定區(qū)域。例如,規(guī)定區(qū)域指定單元可以被構(gòu)成為具有檢測(cè)作為圖像中的被攝體的人物的身體部分的檢測(cè)單元,以及以由檢測(cè)單元所檢測(cè)的身體部分為基準(zhǔn)來(lái)指定規(guī)定區(qū)域的指定單元。
具體地說(shuō),檢測(cè)單元檢測(cè)被攝體的身體部分的位置和范圍(大小)等。“身體部分”是指頭、臉、手、足、軀體等的人物身體的一部分或整體。檢測(cè)單元使用現(xiàn)有的任何單元來(lái)構(gòu)成均可。
圖像生成單元生成對(duì)由規(guī)定區(qū)域指定單元所指定的規(guī)定區(qū)域?qū)嵤┝藞D像處理的圖像。這里所說(shuō)的“圖像處理”是操作圖像的處理。作為圖像處理的例子,具有圖像校正、紋理測(cè)繪等的處理。
并且,這里所說(shuō)的“圖像校正”,是指不改變圖像的被攝體的本質(zhì)來(lái)操作圖像的處理。作為圖像校正的例子,具有暈映處理、邊緣增強(qiáng)、亮度校正、色校正等。暈映處理在此是指用于通過(guò)使皮膚的皺紋或污點(diǎn)等的圖像部分暈映,使成為被攝體的人物的皮膚平滑顯現(xiàn)的處理。暈映處理是使用例如稱為平滑化的技術(shù)進(jìn)行的處理,通過(guò)去除皮膚圖像中的高頻分量來(lái)實(shí)施。例如,具有使用移動(dòng)平均濾波器、加權(quán)平均濾波器(包含高斯濾波器)或ε濾波器的方法。
根據(jù)本發(fā)明的第一方式,可取得對(duì)由規(guī)定區(qū)域指定單元所指定的規(guī)定區(qū)域以外的部分不實(shí)施圖像處理的圖像。即,可取得僅限于以成為被攝體的人物的身體部分為基準(zhǔn)的規(guī)定區(qū)域?qū)嵤┝藞D像處理的圖像。因此,可防止與應(yīng)成為圖像處理對(duì)象的被攝體不同的部分(例如背景)因圖像處理而處于不自然的狀態(tài)。換句話說(shuō),可防止對(duì)用戶不想要的部分實(shí)施圖像處理。
例如,在對(duì)圖像所實(shí)施的圖像處理是暈映處理的情況下,可取得對(duì)由規(guī)定區(qū)域指定單元所指定的規(guī)定區(qū)域以外的部分不實(shí)施暈映處理的圖像。換句話說(shuō),可取得僅限于成為被攝體的人物的規(guī)定區(qū)域?qū)嵤┝藭炗程幚淼膱D像。因此,可防止與被攝體不同的部分(例如背景)因暈映處理而成為模糊的圖像。
圖像生成單元可以被構(gòu)成為,生成實(shí)施了基于從成為由規(guī)定區(qū)域指定單元所指定的規(guī)定區(qū)域的基準(zhǔn)的身體部分所抽出的作為被攝體的人物的膚色的色分量的圖像處理的圖像。
通過(guò)按上述方式構(gòu)成圖像生成單元,執(zhí)行與作為被攝體的人物各自的膚色對(duì)應(yīng)的圖像處理。因此,與由人種或個(gè)人差異所引起的膚色差異對(duì)應(yīng),可取得對(duì)不同膚色的被攝體各自準(zhǔn)確實(shí)施了圖像處理的圖像。
作為取得相同效果的結(jié)構(gòu),圖像生成單元可以被構(gòu)成為,生成對(duì)由規(guī)定區(qū)域指定單元所指定的規(guī)定區(qū)域內(nèi)的區(qū)域,即具有與主要占據(jù)成為該規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量相等或接近的色分量的區(qū)域?qū)嵤┝藞D像處理的圖像。
在本發(fā)明的第二方式中,第一方式中的圖像生成單元被構(gòu)成為具有強(qiáng)度值計(jì)算單元、掩模單元、圖像處理單元以及色分量計(jì)算單元。
強(qiáng)度值計(jì)算單元針對(duì)成為處理對(duì)象的圖像的各像素,算出表示各像素的色分量如何接近預(yù)定的膚色分量的強(qiáng)度值。色分量可以是基于任何色空間的值,具有例如Lab值、RGB值、xy值等。膚色分量是預(yù)定的值,被存儲(chǔ)在例如圖像校正裝置的RAM(Random Access Memory隨機(jī)存取存儲(chǔ)器)內(nèi)。例如,強(qiáng)度值由從0到255的256級(jí)灰度值來(lái)表現(xiàn)。例如,強(qiáng)度值是0的情況下表示最遠(yuǎn)離膚色分量,是255的情況下表示最接近膚色分量(是膚色分量自身)。
掩模單元把由規(guī)定區(qū)域指定單元所指定的規(guī)定區(qū)域以外的像素的強(qiáng)度值設(shè)定為表示遠(yuǎn)離膚色分量的值。
例如,可應(yīng)用0作為表示最遠(yuǎn)離膚色分量的值,可應(yīng)用255作為表示最接近膚色分量的值。掩模單元生成用于對(duì)規(guī)定區(qū)域以外的區(qū)域進(jìn)行掩模處理的掩模圖像,通過(guò)進(jìn)行所生成的掩模圖像和表示各像素的強(qiáng)度值的圖像的乘法處理,可以按上述方式設(shè)定強(qiáng)度值。在上述例示的情況下,被構(gòu)成為,規(guī)定區(qū)域以外的區(qū)域的強(qiáng)度值是0,規(guī)定區(qū)域內(nèi)的強(qiáng)度值是大于等于0的值。
圖像處理單元對(duì)成為處理對(duì)象的圖像實(shí)施圖像處理。圖像處理單元實(shí)施的圖像處理的定義與在圖像生成單元的說(shuō)明中所定義的圖像處理相同。
在色分量計(jì)算單元中,各像素中的強(qiáng)度值越是表示遠(yuǎn)離膚色分量,就越是能算出接近上述原圖像的像素的色分量的色分量作為該像素的新色分量,各像素中的強(qiáng)度值越是表示接近膚色分量,就越是能算出接近由上述圖像處理單元所生成的圖像的像素的色分量作為該像素的新色分量。色分量計(jì)算單元根據(jù)由強(qiáng)度值計(jì)算單元和掩模單元所算出的強(qiáng)度值,算出各像素的新色分量(即成為輸出的圖像的各像素的色分量)。
例如,在圖像處理是暈映處理的情況下,色分量計(jì)算單元被構(gòu)成為,生成其強(qiáng)度值越大,就越是強(qiáng)烈地反映暈映圖像(對(duì)原圖像實(shí)施暈映處理后所獲得的圖像)的色分量的圖像。并且,色分量計(jì)算單元被構(gòu)成為,生成其強(qiáng)度值越小,就越是強(qiáng)烈地反映原圖像的色分量的圖像。通過(guò)這樣構(gòu)成,可防止圖像處理的影響及于膚色以外的區(qū)域等。在要最顯著地獲得這種效果的情況下,可把規(guī)定區(qū)域以外的像素的強(qiáng)度值設(shè)定成表示最遠(yuǎn)離膚色分量的值。
在本發(fā)明的第三方式中,本發(fā)明的第一方式中的圖像生成單元被構(gòu)成為具有強(qiáng)度值計(jì)算單元、掩模單元以及圖像處理單元。在本發(fā)明的第三方式中,圖像生成單元不具有色分量計(jì)算單元,由圖像處理單元算出成為輸出的圖像的色分量。第三方式中的強(qiáng)度值計(jì)算單元和掩模單元與第二方式中的強(qiáng)度值計(jì)算單元和掩模單元相同。另一方面,第三方式中的圖像處理單元針對(duì)成為處理對(duì)象的圖像,各像素中的強(qiáng)度值越是表示遠(yuǎn)離膚色分量,就越是減弱圖像處理的影響而實(shí)施對(duì)該像素的圖像處理,各像素中的強(qiáng)度值越是表示接近膚色分量,就越是增強(qiáng)圖像處理的影響而實(shí)施對(duì)該像素的圖像處理。該圖像處理單元根據(jù)由強(qiáng)度值計(jì)算單元和掩模單元所獲得的該圖像的各像素的強(qiáng)度值實(shí)施圖像處理。這樣,在本發(fā)明的第三方式中,沒(méi)有必要具有色分量計(jì)算單元。因此,可實(shí)現(xiàn)裝置的小型化、處理的高速化、成本削減等。
在本發(fā)明的第四方式中,圖像生成單元具有強(qiáng)度值計(jì)算單元、圖像處理單元以及色分量計(jì)算單元。在第四方式中,強(qiáng)度值計(jì)算單元所算出的強(qiáng)度值的定義與第二方式不同。在第四方式中,強(qiáng)度值表示各像素的色分量多么接近主要占據(jù)成為規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量。因此,第四方式中的強(qiáng)度值計(jì)算單元針對(duì)成為處理對(duì)象的圖像的各像素,算出表示各像素的色分量多么接近主要占據(jù)成為規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量的強(qiáng)度值。
并且,在第四方式中,與第二方式的不同點(diǎn)是,可以具有或不具有掩模單元。在不具有掩模單元的情況下,當(dāng)然,色分量計(jì)算單元不使用掩模圖像中的強(qiáng)度值而算出各像素的新色分量。并且,在不具有掩模單元的情況下,圖像處理單元被構(gòu)成為對(duì)成為處理對(duì)象的圖像的規(guī)定區(qū)域?qū)嵤﹫D像處理。
除了上述三點(diǎn)以外,第四方式和第二方式取相同的構(gòu)成。在第四方式中,與第二方式不同,強(qiáng)度值隨著規(guī)定區(qū)域指定單元的處理結(jié)果而變化。即,執(zhí)行與作為被攝體的人物各自的身體部分中的膚色對(duì)應(yīng)的圖像處理。因此,與由人種或個(gè)人差異所引起的膚色差異對(duì)應(yīng)地,可對(duì)不同膚色的被攝體分別準(zhǔn)確地實(shí)施圖像處理。
在本發(fā)明的第五方式中,圖像生成單元被構(gòu)成為具有強(qiáng)度值計(jì)算單元和圖像處理單元。并且,在本發(fā)明的第五方式中,與本發(fā)明的第三方式一樣,沒(méi)有必要具有色分量計(jì)算單元,使用圖像處理單元算出成為輸出的圖像的色分量。因此,根據(jù)本發(fā)明的第五方式,與本發(fā)明的第三方式一樣,可實(shí)現(xiàn)裝置的小型化、處理的高速化、成本削減等。然而,在本發(fā)明的第五方式中,與本發(fā)明的第四方式一樣,強(qiáng)度值不是以預(yù)定的膚色分量為基準(zhǔn)來(lái)求出的,而是根據(jù)主要占據(jù)成為規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量來(lái)求出的。因此,根據(jù)本發(fā)明的第五方式,與由人種或個(gè)人差異所引起的膚色差異對(duì)應(yīng)地,可對(duì)不同膚色的被攝體分別準(zhǔn)確地實(shí)施圖像處理。并且,在本發(fā)明的第五方式中,與第四方式一樣,可以具有或不具有掩模單元。
在本發(fā)明的第二至第五方式中,圖像處理單元可以被構(gòu)成為對(duì)具有規(guī)定范圍的強(qiáng)度值的像素不執(zhí)行圖像處理?!耙?guī)定范圍的強(qiáng)度值”是指表示不期望成為圖像處理對(duì)象的區(qū)域的強(qiáng)度值。作為具體的例子,具有表示最遠(yuǎn)離膚色分量或主要占據(jù)成為規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量的強(qiáng)度值。第二和第四方式中的色分量計(jì)算單元及第三和第五方式中的圖像處理單元往往被設(shè)定成針對(duì)具有規(guī)定范圍的強(qiáng)度值的像素生成不出現(xiàn)圖像處理影響的輸出圖像。在這種設(shè)定的情況下,沒(méi)有必要對(duì)具有規(guī)定范圍的強(qiáng)度值的像素特意執(zhí)行圖像處理。因此,通過(guò)省略對(duì)這種像素的圖像處理,可削減圖像處理單元的圖像處理所需要的時(shí)間。特別是,在不這樣構(gòu)成的第二和第四方式中,圖像處理單元不根據(jù)各像素的強(qiáng)度值來(lái)實(shí)施圖像處理。而且,與強(qiáng)度值對(duì)應(yīng)的處理由色分量計(jì)算單元執(zhí)行,其結(jié)果是,往往產(chǎn)生不完全反映由圖像處理單元所實(shí)施的圖像處理的像素。因此,這樣,圖像處理單元根據(jù)強(qiáng)度值判斷是否實(shí)施圖像處理的構(gòu)成在第二和第四方式中是特別有效的。
在本發(fā)明的第六方式中,圖像生成單元根據(jù)成為由規(guī)定區(qū)域指定單元所指定的規(guī)定區(qū)域的基準(zhǔn)的身體部分的大小來(lái)決定所實(shí)施的圖像處理的內(nèi)容。例如,圖像生成單元根據(jù)成為規(guī)定區(qū)域的基準(zhǔn)的身體部分的大小來(lái)決定實(shí)施規(guī)定圖像處理時(shí)的參數(shù)。作為這種參數(shù)的例子,具有暈映處理的暈映程度(更具體地說(shuō),在使用高斯濾波器執(zhí)行暈映處理的情況下,其半徑的大小等),邊緣增強(qiáng)程度,亮度校正程度等。作為圖像處理種類的決定例,具有是否執(zhí)行邊緣增強(qiáng)、是否執(zhí)行亮度校正、是否執(zhí)行暈映處理等的判斷。
以暈映處理為例進(jìn)行說(shuō)明,當(dāng)對(duì)小區(qū)域過(guò)度執(zhí)行完暈映處理時(shí),區(qū)域整體模糊,不能獲得期望圖像(例如對(duì)皮膚進(jìn)行了適度平滑校正的圖像)。另一方面,當(dāng)對(duì)大區(qū)域執(zhí)行完輕微的暈映處理時(shí),應(yīng)暈映的部位(例如,臉圖像內(nèi)所包含的不期望分量,例如皺紋、污點(diǎn)、皮膚粗糙、粉刺等)得不到充分暈映,不能獲得期望圖像。對(duì)于邊緣增強(qiáng)程度等的其他圖像處理也是一樣。對(duì)于該問(wèn)題,在本發(fā)明的第六方式中,決定和執(zhí)行與成為規(guī)定區(qū)域的基準(zhǔn)的身體部分的大小對(duì)應(yīng)的恰當(dāng)?shù)膱D像處理的內(nèi)容,可獲得用戶期望的圖像。
并且,圖像生成單元可以被構(gòu)成為根據(jù)由檢測(cè)單元所檢測(cè)的身體部分的大小來(lái)決定所實(shí)施的圖像處理的內(nèi)容。
在本發(fā)明的第七方式中,還具有要素抽出單元。要素抽出單元是構(gòu)成成為處理對(duì)象的圖像中的被攝體的人物的身體部分的要素,即,將規(guī)定區(qū)域內(nèi)所包含的要素抽出至少一個(gè)。“要素”是指構(gòu)成身體部分的部位。作為這種要素的例子,具有臉的要件(具體地說(shuō),具有眼、瞼、唇、鼻、鼻孔、眉、睫毛等)。在此情況下,臉是身體部分,臉的要件是要素?,F(xiàn)有的任何技術(shù)可以應(yīng)用于要素抽出單元。
在本發(fā)明的第七方式中,圖像生成單元限制并實(shí)施對(duì)以由要素抽出單元所抽出的要素為基準(zhǔn)所決定的要素區(qū)域的圖像處理。具體地說(shuō),圖像生成單元可以被構(gòu)成為對(duì)上述規(guī)定區(qū)域不進(jìn)行圖像處理。并且,圖像生成單元可以被構(gòu)成為,在對(duì)上述規(guī)定區(qū)域?qū)嵤﹫D像處理時(shí),實(shí)施與實(shí)施圖像處理的其他區(qū)域相比參數(shù)不同的(圖像處理程度受到抑制的)處理。
在本發(fā)明的第七方式中,圖像生成單元對(duì)以由要素抽出單元所抽出的要素為基準(zhǔn)所決定的要素區(qū)域?qū)嵤┦芟拗频膱D像處理。因此,對(duì)要素區(qū)域的圖像處理的影響受到抑制。在本發(fā)明的其他方式中,根據(jù)色分量和成為規(guī)定區(qū)域的基準(zhǔn)的身體部分等決定圖像處理的內(nèi)容。在此情況下,針對(duì)在規(guī)定區(qū)域內(nèi)具有膚色分量或接近主要占據(jù)成為該規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量的色分量的像素,即使對(duì)與上述要素相當(dāng)?shù)南袼匾矡o(wú)條件地實(shí)施圖像處理。然而,實(shí)際上具有要限制(要抑制)對(duì)這些要素的圖像處理的影響的要求。例如,根據(jù)化妝方法,唇色(口紅色)和眉毛等的要素往往由接近膚色分量的色分量構(gòu)成。在這種情況下,往往不期望對(duì)各要素實(shí)施與其他皮膚部分相同的圖像處理(例如暈映處理)。在這種情況下,本發(fā)明的第七方式是有效的。即,可準(zhǔn)確地抑制對(duì)不能由強(qiáng)度值計(jì)算單元和掩模單元充分地區(qū)別的要素的圖像處理。
在本發(fā)明的第二至第五方式中,圖像生成單元可以被構(gòu)成為還具有邊緣掩模單元。邊緣掩模單元針對(duì)成為處理對(duì)象的圖像的各像素取得邊緣強(qiáng)度,把表示所抽出的邊緣強(qiáng)度越強(qiáng),就越遠(yuǎn)離膚色分量或主要占據(jù)成為規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量的強(qiáng)度值提供給各像素。通過(guò)取得基于邊緣強(qiáng)度的上述強(qiáng)度值,構(gòu)成被攝體的身體部分的要素的邊緣可作為具有表示遠(yuǎn)離上述色分量的強(qiáng)度值的像素來(lái)取得。邊緣掩模單元可以被構(gòu)成為,把針對(duì)某像素所取得的邊緣強(qiáng)度也提供給位于距該像素規(guī)定范圍內(nèi)的周圍像素。
在這樣構(gòu)成的本發(fā)明的第二至第五方式中,色分量計(jì)算單元和圖像處理單元被構(gòu)成為,還根據(jù)由邊緣掩模單元所取得的強(qiáng)度值,取得各像素中的新色分量。在這樣構(gòu)成的本發(fā)明的第二至第五方式中,可獲得與第七方式相同的效果。
并且,在這樣構(gòu)成的本發(fā)明的第二至第五方式中,邊緣掩模單元可以被構(gòu)成為,將成為處理對(duì)象的圖像縮小后把強(qiáng)度值提供給各像素,再放大成原來(lái)大小的圖像。
對(duì)于由邊緣掩模單元所抽出的邊緣,如上述那樣限制并實(shí)施圖像處理。然而,以對(duì)例如皮膚的不需要分量進(jìn)行暈映處理為例,皮膚的不需要分量作為邊緣在邊緣掩模單元被檢測(cè),而對(duì)這種皮膚的不需要分量的暈映處理未有效地發(fā)揮功能。因此,有必要控制成使這些不需要分量的邊緣不由邊緣掩模單元抽出。
另外,圖像在被縮小時(shí)喪失原圖像中的微少邊緣信息。因此,當(dāng)在縮小圖像中取得邊緣強(qiáng)度時(shí),不能取得原圖像中的微少邊緣。并且,成為暈映處理對(duì)象的皮膚的不需要分量一般來(lái)說(shuō)多由微少邊緣構(gòu)成。通過(guò)利用這種特征如上述那樣構(gòu)成,可防止邊緣掩模單元取得皮膚的不需要分量的邊緣。即,通過(guò)如上述那樣構(gòu)成邊緣掩模單元,可實(shí)施期望的暈映處理。為了獲得相同效果,在實(shí)施中值濾波器等的平滑化處理后實(shí)施邊緣抽出,以及把邊緣抽出處理中使用的濾波器的半徑設(shè)定得較大等也是有效的。并且,由于在縮小的圖像中抽出邊緣,也能削減邊緣抽出處理所需要的時(shí)間。
本發(fā)明的第八方式涉及圖像處理裝置,具有像指定單元和圖像處理單元。像指定單元指定包含圖像中的任意像的區(qū)域的位置和范圍。任意像是成為圖像處理單元的圖像處理對(duì)象的像,也可以是任意像。例如,是臉或手等的人物身體的一部分或整體、食物或汽車等的物體、天空或山等的背景。
像指定單元可以使用現(xiàn)有的任何技術(shù)來(lái)構(gòu)成。例如,像指定單元可以被構(gòu)成為執(zhí)行使用與所注目的任意像相似形狀的圖形的圖形匹配。
圖像處理單元生成對(duì)由像指定單元所指定的區(qū)域內(nèi)的區(qū)域,即具有與主要占據(jù)該區(qū)域的色分量相等或接近的色分量的區(qū)域?qū)嵤┝藞D像處理的圖像。作為圖像處理單元所執(zhí)行的圖像處理的例子,具有使用低通濾波器或高通濾波器的處理。此外,還有在本發(fā)明的第一方式中所定義的圖像處理、色反轉(zhuǎn)處理、圖像反轉(zhuǎn)處理等的各種處理。
根據(jù)本發(fā)明的第八方式,即使是所指定的區(qū)域內(nèi)的區(qū)域,也能防止對(duì)與主要部不同的部位實(shí)施圖像處理。例如,在要僅變更車的車身(主要部)的顏色的情況下,可防止窗玻璃和減震器等(與主要部不同的部位)的色變更。
本發(fā)明的第一至第八方式可以通過(guò)由信息處理裝置執(zhí)行程序來(lái)實(shí)現(xiàn)。即,本發(fā)明可指定為用于使信息處理裝置執(zhí)行由上述第一至第八方式中的各單元所執(zhí)行的處理的程序、或者記錄有該程序的記錄介質(zhì)。
根據(jù)本發(fā)明,可僅限于成為被攝體的人物的特定區(qū)域進(jìn)行圖像校正。因此,可防止與被攝體不同的部分(例如背景)因圖像校正而處于不自然的狀態(tài)。并且,可實(shí)施與人種或個(gè)人差異所引起的膚色差異對(duì)應(yīng)的圖像處理。
圖1是示出圖像校正裝置的第一實(shí)施方式的功能方框的圖;圖2是示出圖像校正裝置的第一實(shí)施方式的處理流程的圖;圖3是示出掩模處理的概要的圖;圖4是示出第一實(shí)施方式中的膚色區(qū)域抽出處理的概要的圖;圖5是示出膚色強(qiáng)度抽出處理的概要的圖;圖6是示出膚色分量的直方圖的例子的圖;圖7是示出第一實(shí)施方式中的美膚處理的概要的圖;圖8是示出n×n的算符的例子的圖;圖9是示出圖像校正裝置的第二實(shí)施方式的功能方框的圖;圖10是示出圖像校正裝置的第二實(shí)施方式的處理流程的圖;圖11是示出圖像校正裝置的第三實(shí)施方式的功能方框的圖;圖12是示出圖像校正裝置的第三實(shí)施方式的處理流程的圖;圖13是示出索貝爾濾波器的例子的圖;圖14是示出膚色強(qiáng)度圖像與邊緣掩模圖像的不同的例子的圖。
具體實(shí)施例方式下面,用附圖對(duì)本發(fā)明的實(shí)施方式中的圖像校正裝置進(jìn)行說(shuō)明。在以下說(shuō)明中,作為圖像校正裝置的具體例,對(duì)用于進(jìn)行人物圖像中的皮膚區(qū)域的圖像校正的圖像校正裝置的第一實(shí)施方式的圖像校正裝置1a進(jìn)行說(shuō)明。具體地說(shuō),作為所實(shí)施的圖像處理的例子,對(duì)暈映處理的情況進(jìn)行說(shuō)明。然而,圖像校正裝置1a可以應(yīng)用于人物圖像以外的圖像,例如車的圖像或風(fēng)景的圖像。在此情況下,考慮有變換顏色的圖像校正和使用高通濾波器的圖像校正等各種圖像處理。
在該說(shuō)明中,人物圖像是至少包含有人物的臉的一部分或全部的圖像的圖像。因此,人物圖像可以包含人物整體的圖像,也可以僅包含人物的臉或上半身的圖像。并且,可以包含多個(gè)人物的圖像。而且,背景可以包含有人物以外的風(fēng)景(背景也包含作為被攝體而受注目的物體)和圖案等的任何圖形。
另外,本實(shí)施方式的說(shuō)明是例示,本發(fā)明的結(jié)構(gòu)不限于以下的說(shuō)明。
圖像校正裝置1a在硬件方面具有通過(guò)總線所連接的CPU(中央運(yùn)算處理裝置)、主存儲(chǔ)裝置(RAM)、輔助存儲(chǔ)裝置等。輔助存儲(chǔ)裝置使用非易失性存儲(chǔ)裝置來(lái)構(gòu)成。這里所說(shuō)的非易失性存儲(chǔ)裝置是指所謂的ROM(Read-Only Memory(只讀存儲(chǔ)器),其包含EPROM(ErasableProgrammable Read-Only Memory可擦除可編程只讀存儲(chǔ)器)、EEPROM(Electrically Erasable Programmable Read-Only Memory電可擦除可編程只讀存儲(chǔ)器)、掩模ROM等)、FRAM(Ferroelectric(鐵電)RAM)、硬盤(pán)等。
圖1是示出圖像校正裝置1a的功能方框的圖。圖像校正裝置1a通過(guò)把存儲(chǔ)在輔助存儲(chǔ)裝置內(nèi)的各種程序(OS、應(yīng)用程序等)裝入主存儲(chǔ)裝置內(nèi)由CPU執(zhí)行,作為包含臉檢測(cè)部2、掩模處理部3、膚色區(qū)域抽出部4a、美膚處理部5a以及存儲(chǔ)部St等的裝置執(zhí)行功能。臉檢測(cè)部2、掩模處理部3、膚色區(qū)域抽出部4a、以及美膚處理部5a通過(guò)由CPU執(zhí)行本發(fā)明的圖像校正程序來(lái)實(shí)現(xiàn)。
并且,存儲(chǔ)部St使用所謂的RAM來(lái)構(gòu)成。存儲(chǔ)部St在由臉檢測(cè)部2、掩模處理部3、膚色區(qū)域抽出部4a以及美膚處理部5a執(zhí)行各處理時(shí)得到利用。例如,在存儲(chǔ)部St內(nèi)讀寫(xiě)有成為處理對(duì)象的原圖像6的數(shù)據(jù),作為中間生成數(shù)據(jù)的掩模圖像7、膚色強(qiáng)度圖像8、加掩模后的膚色強(qiáng)度圖像9、膚色區(qū)域圖像10a和暈映圖像11等的數(shù)據(jù),以及作為輸出數(shù)據(jù)的美膚圖像12的數(shù)據(jù)。
圖2是示出由圖1所示的各功能部所執(zhí)行的處理和作為圖像校正裝置1a的整體的處理流程的圖。以下,使用圖13對(duì)各功能部進(jìn)行說(shuō)明。
<臉檢測(cè)部>
臉檢測(cè)部2執(zhí)行臉檢測(cè)處理。以下,對(duì)臉檢測(cè)處理進(jìn)行說(shuō)明。在臉檢測(cè)處理中,輸入原圖像6的數(shù)據(jù),通過(guò)執(zhí)行臉位置檢測(cè)處理S01,輸出臉矩形坐標(biāo)。即,在臉檢測(cè)處理中,檢測(cè)作為被攝體的身體部分的臉。根據(jù)該臉矩形坐標(biāo),指定成為原圖像6中的被攝體的人物的臉的位置。
原圖像6的數(shù)據(jù)是指輸入到圖像校正裝置1a中的人物圖像的數(shù)據(jù)。臉矩形是指作為包含原圖像6內(nèi)所包含的人物的臉部的矩形所識(shí)別的矩形(以下稱為臉矩形參照?qǐng)D3(a)的17)。臉矩形坐標(biāo)是指表示原圖像6中的臉矩形的位置和大小的數(shù)據(jù)。
臉位置檢測(cè)處理S01可以使用現(xiàn)有的任何方法來(lái)實(shí)現(xiàn)(例如,參照專利文獻(xiàn)3)。例如,可以通過(guò)使用與臉整體的輪廓對(duì)應(yīng)的基準(zhǔn)模板的模板匹配獲得臉矩形坐標(biāo)。并且,可以通過(guò)基于臉的構(gòu)成要素(眼、鼻、耳等)的模板匹配來(lái)獲得臉矩形坐標(biāo)。并且,通過(guò)色度鍵處理檢測(cè)頭發(fā)的頂點(diǎn),可以根據(jù)該頂點(diǎn)獲得臉矩形坐標(biāo)。并且,在臉位置檢測(cè)處理S01中,臉矩形和臉矩形坐標(biāo)可以由用戶通過(guò)手動(dòng)指定。同樣,可以根據(jù)由用戶所輸入的信息,即半自動(dòng)地指定臉矩形和臉矩形坐標(biāo)。
<掩模處理部>
掩模處理部3執(zhí)行掩模處理。以下,對(duì)掩模處理進(jìn)行說(shuō)明。在掩模處理中,輸入臉矩形坐標(biāo),通過(guò)執(zhí)行掩模圖像生成處理S02,輸出掩模圖像7的數(shù)據(jù)。
在掩模圖像生成處理S02中,根據(jù)成為被攝體的人物的臉位置,即根據(jù)在本裝置1中所輸入的臉矩形坐標(biāo),推測(cè)成為被攝體的人物的臉和臉下部的區(qū)域,生成用于在所推測(cè)的區(qū)域以外施加掩模的掩模圖像7。換句話說(shuō),在掩模圖像生成處理S02中,以作為身體部分的臉的位置為基準(zhǔn)指定規(guī)定區(qū)域(這里為臉和臉下部的區(qū)域),生成用于在該區(qū)域以外施加掩模的掩模圖像7。這樣,作為規(guī)定區(qū)域指定單元的一例,在本實(shí)施方式中應(yīng)用臉檢測(cè)部2和掩模處理部3。并且,作為指定單元和掩模單元的一例,在本實(shí)施方式中應(yīng)用掩模處理部3。
圖3是示出掩模圖像生成處理S02的概要的圖。在掩模圖像生成處理S02中,首先,使用以下式1的公式算出與所輸入的臉矩形坐標(biāo)對(duì)應(yīng)的二個(gè)橢圓13、14的坐標(biāo)。具體地說(shuō),首先,算出或輸入臉矩形的寬度(w)和高度(h)。然后,通過(guò)使預(yù)先設(shè)定的橢圓縱軸系數(shù)(p0,p1)和橢圓橫軸系數(shù)(q0,q1)與w和h分別相乘,獲得二個(gè)橢圓的長(zhǎng)軸和短軸的長(zhǎng)度(a0,b0,a1,b1)。
橢圓13是表示成為被攝體的人物的臉區(qū)域的圖形,橢圓14是表示成為被攝體的人物的臉下部(頭、胸口、肩等)的區(qū)域的圖形。在本發(fā)明中,橢圓13被設(shè)定成與臉矩形17的4點(diǎn)相接。并且,橢圓14被設(shè)定成在其長(zhǎng)軸為水平的狀態(tài)下,與橢圓13的最下部外接。
a0=h×p0b0=w×q0a1=h×p1b1=w×q1在掩模圖像生成處理S02中,接下來(lái),通過(guò)將所獲得的二個(gè)橢圓13、14各自放大,獲得橢圓15、16。這里,橢圓13和橢圓15與橢圓14和橢圓16各自具有同一中心(長(zhǎng)軸與短軸的交點(diǎn))。然后,使用所獲得的橢圓13~16,獲得掩模圖像7。
例如,首先把橢圓13的內(nèi)側(cè)和橢圓14的內(nèi)側(cè)設(shè)定成透過(guò)區(qū)域(未加掩模的區(qū)域)。然后,在橢圓15與橢圓13之間的區(qū)域、以及橢圓16與橢圓14之間的區(qū)域中,生成從外側(cè)(橢圓15、16側(cè))朝內(nèi)側(cè)(橢圓13、14側(cè))透過(guò)比例增大的透過(guò)率的灰度。該灰度可以是線性,也可以是非線性。然后,把作為橢圓15的外側(cè)且橢圓16的外側(cè)的區(qū)域設(shè)定成不透過(guò)區(qū)域(施加掩模的區(qū)域)。
通過(guò)這種掩模圖像生成處理S02,輸出掩模圖像7的數(shù)據(jù)。掩模圖像7可以使用橢圓以外的任何圖形來(lái)生成。例如,可以使用具有人物的上半身形狀的特殊圖形來(lái)生成。
<膚色區(qū)域抽出部>
膚色區(qū)域抽出部4a執(zhí)行膚色區(qū)域抽出處理。以下,對(duì)膚色區(qū)域抽出處理進(jìn)行說(shuō)明。在膚色區(qū)域抽出處理中,輸入原圖像6的數(shù)據(jù)、臉矩形坐標(biāo)以及掩模圖像7的數(shù)據(jù),通過(guò)執(zhí)行膚色強(qiáng)度抽出處理S03、合成處理S04a以及膚色區(qū)域校正處理S05,輸出膚色區(qū)域圖像10a的數(shù)據(jù)。這樣,作為強(qiáng)度值計(jì)算單元的一例,在本實(shí)施方式中應(yīng)用膚色區(qū)域抽出部4a。
<<膚色強(qiáng)度抽出處理>>
圖4是示出膚色區(qū)域抽出處理的概要的圖。在膚色區(qū)域抽出處理中,首先,輸入原圖像6的數(shù)據(jù)和臉矩形坐標(biāo),執(zhí)行膚色強(qiáng)度抽出處理S03。
圖5是示出膚色強(qiáng)度抽出處理S03的概要的圖。圖6是示出在膚色強(qiáng)度抽出處理S03中使用的膚色分量的直方圖的圖。以下,使用圖5和圖6對(duì)膚色強(qiáng)度抽出處理S03進(jìn)行說(shuō)明。
在膚色強(qiáng)度抽出處理S03中,首先,使用所輸入的臉矩形坐標(biāo)在臉矩形17的內(nèi)側(cè)指定抽樣區(qū)域18。抽樣區(qū)域18由例如臉矩形17的中心坐標(biāo)和使臉矩形17的w和h乘以常數(shù)后的值指定。抽樣區(qū)域18也可以由其他方法指定。所期望的是,抽樣區(qū)域18被設(shè)定成不包含眼和鼻孔等具有與膚色明顯不同的顏色的區(qū)域。
在膚色強(qiáng)度抽出處理S03中,接下來(lái),對(duì)抽樣區(qū)域18內(nèi)的像素值(色分量的值)進(jìn)行抽樣(膚色抽樣)。在該抽樣中,主要對(duì)被攝體的臉中的膚色進(jìn)行抽樣。根據(jù)所抽樣的色分量的值,形成圖6所示的直方圖。在圖6中,以根據(jù)Lab色空間所形成的直方圖為例示出。當(dāng)形成直方圖時(shí),橫軸(L或a、b的值)中的上下10%的分量(圖6斜線部)被切除。這里所說(shuō)的10%的數(shù)值可以由設(shè)計(jì)者做適當(dāng)變更。之后,使用在膚色分量的直方圖中未被切除的部分的Lab的值,算出抽樣區(qū)域18內(nèi)的標(biāo)準(zhǔn)偏差和重心。然后,根據(jù)使用所算出的這六個(gè)值的式2的公式,算出原圖像6的各像素中的膚色程度(以下稱為膚色強(qiáng)度相當(dāng)于強(qiáng)度值)(膚色強(qiáng)度抽出),生成膚色強(qiáng)度圖像8。
L′、a′、b′抽樣區(qū)域的Lab值的重心WL、Wa、Wb抽樣區(qū)域的Lab值的標(biāo)準(zhǔn)偏差×常數(shù)在膚色分量的直方圖的形成中,由于從圖6中的橫軸的兩端切除累積10%的部分,因而可去除噪聲分量,更準(zhǔn)確獲得膚色分量的分布。這里所說(shuō)的噪聲分量是關(guān)于主要具有例如抽樣區(qū)域18內(nèi)的鼻孔和眼等的膚色以外的色分量的像素的信息。通過(guò)這種處理,即使在抽樣區(qū)域18內(nèi)包含有鼻孔和眼等的膚色以外的色分量的情況下,也能刪除關(guān)于它們的信息。
<<合成處理>>
在膚色區(qū)域抽出處理中,接下來(lái),輸入膚色強(qiáng)度圖像8的數(shù)據(jù)和掩模圖像7的數(shù)據(jù),執(zhí)行合成處理S04a。
在合成處理S04a中,將所輸入的膚色強(qiáng)度圖像8與掩模圖像7合成。即,執(zhí)行使用了由膚色強(qiáng)度抽出處理S03所生成的膚色強(qiáng)度圖像8和由掩模處理所生成的掩模圖像7的乘法處理。通過(guò)執(zhí)行合成處理S04a,生成加掩模后的膚色強(qiáng)度圖像9。
<<膚色區(qū)域校正處理>>
在膚色區(qū)域抽出處理中,接下來(lái),輸入加掩模后的膚色強(qiáng)度圖像9的數(shù)據(jù),執(zhí)行膚色區(qū)域校正處理S05。
在膚色區(qū)域校正處理S05中,對(duì)由合成處理S04a所生成的加掩模后的膚色強(qiáng)度圖像9執(zhí)行簡(jiǎn)并處理。通過(guò)執(zhí)行簡(jiǎn)并處理,使眼和口的周邊膚色強(qiáng)度下降。即,成為暈映處理對(duì)象外的黑區(qū)域(膚色強(qiáng)度低或?yàn)?的區(qū)域)擴(kuò)大到外側(cè)。通過(guò)該簡(jiǎn)并處理,可防止對(duì)眼和口的周邊執(zhí)行暈映處理。換句話說(shuō),可防止應(yīng)取得清晰圖像的眼和口的周邊變得模糊。通過(guò)執(zhí)行膚色區(qū)域校正處理S05,生成膚色區(qū)域圖像10a。在膚色區(qū)域圖像10a中,膚色強(qiáng)度高的像素由大的像素值表現(xiàn),膚色強(qiáng)度低的像素由小的像素值表現(xiàn)。
<美膚處理部>
美膚處理部5a執(zhí)行美膚處理。以下,對(duì)由美膚處理部5a所執(zhí)行的美膚處理進(jìn)行說(shuō)明。在該美膚處理中,輸入原圖像6的數(shù)據(jù)和膚色區(qū)域圖像10a的數(shù)據(jù),通過(guò)執(zhí)行暈映濾波處理S06a和美膚合成處理S07,輸出美膚圖像12的數(shù)據(jù)。這樣,作為圖像生成單元的一例,在該實(shí)施方式中,應(yīng)用掩模處理部3、膚色區(qū)域抽出部4a以及美膚處理部5a。并且,作為色分量計(jì)算單元的一例,在該實(shí)施方式中,應(yīng)用美膚處理部5a。該美膚圖像12的數(shù)據(jù)也是由圖像校正裝置1a所輸出的數(shù)據(jù)。
<<暈映濾波處理>>
在美膚處理中,首先,輸入原圖像6的數(shù)據(jù)和膚色區(qū)域圖像10a的數(shù)據(jù),執(zhí)行暈映濾波處理S06a。在暈映濾波處理S06a中,對(duì)原圖像6執(zhí)行暈映處理。這里所說(shuō)的暈映處理可以是現(xiàn)有的任何暈映處理。作為該例,具有例如使用移動(dòng)平均濾波器或加權(quán)平均濾波器(包含高斯濾波器)或ε濾波器的方法。
在暈映濾波處理S06a中,僅對(duì)原圖像6的各像素中的在膚色區(qū)域圖像10a中膚色強(qiáng)度值大于0的像素執(zhí)行暈映處理。因此,對(duì)膚色強(qiáng)度是0的像素,即明顯不是膚色的像素和由合成處理S04a施加了掩模的像素,不執(zhí)行暈映處理。通過(guò)執(zhí)行暈映濾波處理S06a,生成暈映圖像11。
<<美膚合成處理>>
在美膚處理中,接下來(lái),輸入原圖像6的數(shù)據(jù)、膚色區(qū)域圖像10a的數(shù)據(jù)以及暈映圖像11的數(shù)據(jù),執(zhí)行美膚合成處理S07。在美膚合成處理S07中,對(duì)原圖像6和暈映圖像11執(zhí)行使用了膚色區(qū)域圖像10a中的膚色強(qiáng)度的半透明合成。式3是在美膚合成處理S07中所執(zhí)行的半透明合成的公式。
R=Rorg×(1-V)+Rsmooth×VG=Gorg×(1-V)+Gsmooth×VB=Borg×(1-V)+Bsmooth×VRorg、Gorg、Borg原圖像的RGB分量Rsmooth、Gsmooth、Bsmooth暈映圖像的RGB分量V膚色區(qū)域圖像的膚色強(qiáng)度(0~1)在使用式3的半透明合成中,執(zhí)行與膚色強(qiáng)度對(duì)應(yīng)的合成處理。具體地說(shuō),對(duì)于膚色強(qiáng)度高的像素,強(qiáng)烈地反映暈映圖像11的像素值(RGB分量),對(duì)于膚色強(qiáng)度低的像素,強(qiáng)烈地反映原圖像6的像素值(RGB分量)。通過(guò)這種半透明合成,對(duì)于膚色強(qiáng)度高的區(qū)域(即膚色的區(qū)域),暈映程度增強(qiáng),對(duì)于膚色強(qiáng)度低的區(qū)域(即不是膚色的區(qū)域),暈映程度減弱。通過(guò)執(zhí)行美膚合成處理S07,生成美膚圖像12。
在本發(fā)明的圖像校正裝置1a中,通過(guò)臉位置檢測(cè)處理S01,從成為處理對(duì)象的圖像中檢測(cè)被攝體的臉,獲得臉矩形坐標(biāo)。根據(jù)臉矩形坐標(biāo)生成用于對(duì)被攝體的上半身以外施加掩模的掩模圖像7。然后,在美膚處理中,執(zhí)行反映了該掩模圖像7的掩模處理的暈映處理。因此,當(dāng)對(duì)具有被攝體的臉等的膚色分量的區(qū)域執(zhí)行暈映處理時(shí),對(duì)具有同一圖像中的膚色分量的被攝體以外的區(qū)域(例如背景)不執(zhí)行暈映處理。因此,當(dāng)對(duì)被攝體的臉等實(shí)施暈映處理時(shí),可防止連具有膚色分量的背景都變得模糊,可依然鮮明地維持這種背景。即,只限于使被攝體的臉及其周邊的圖像平滑,可消除皺折和污點(diǎn)等。
并且,在本發(fā)明的圖像校正裝置1a中,從抽樣區(qū)域18的內(nèi)部,即由臉位置檢測(cè)處理S01所檢測(cè)到的被攝體的臉區(qū)域的內(nèi)部抽出被攝體的膚色分量。然后,根據(jù)所抽出的膚色分量,決定成為暈映處理對(duì)象的區(qū)域。即,根據(jù)所抽出的膚色分量,決定在膚色強(qiáng)度圖像8生成時(shí)作為膚色而被識(shí)別的膚色分量。因此,如果例如皮膚白的人是被攝體,則根據(jù)所抽出的白膚色的色分量生成膚色強(qiáng)度圖像8,如果皮膚黑的人是被攝體,則根據(jù)所抽出的黑膚色的色分量生成膚色強(qiáng)度圖像8。這樣,在本發(fā)明的圖像校正裝置1a中,并非以固定方式?jīng)Q定膚色,而是從原圖像6的臉位置對(duì)膚色進(jìn)行抽樣。因此,可與由人種或個(gè)人差異所引起的膚色不同相對(duì)應(yīng),可獲得穩(wěn)定的校正效果。
并且,在掩模圖像生成處理S02中,在外側(cè)的橢圓與內(nèi)側(cè)的橢圓之間實(shí)施關(guān)于不透明度的灰度。因此,可防止在作為未施加掩模的區(qū)域的透過(guò)區(qū)域和施加掩模的不透過(guò)區(qū)域的邊界處生成不自然的圖像。
另外,本發(fā)明的圖像校正裝置1a可以被安裝在現(xiàn)有的各種裝置上。例如,可以被安裝在打印機(jī)、顯示器、數(shù)字照相機(jī)、MPEG(Moving PictureExperts Group運(yùn)動(dòng)圖像專家組)播放器等上。在這種情況下,輸入到各裝置中的圖像的數(shù)據(jù)作為原圖像6的數(shù)據(jù)被輸入到存儲(chǔ)部St中。然后,作為圖像校正裝置1a的輸出的美膚圖像12的數(shù)據(jù)根據(jù)各裝置的特性而得到利用。例如,在圖像校正裝置1a安裝在打印機(jī)上的情況下,美膚圖像12由打印機(jī)打印。
并且,本發(fā)明的圖像校正裝置1a通過(guò)由CPU執(zhí)行圖2中的各處理S01~S07,在具有CPU的信息處理裝置上假想地得到實(shí)現(xiàn)。在此情況下,使信息處理裝置執(zhí)行各處理S01~S07的程序成為本申請(qǐng)的發(fā)明。該程序可以被記錄在CD-ROM等的記錄介質(zhì)上,由個(gè)人計(jì)算機(jī)或服務(wù)器(例如設(shè)置在ASP(Application Service Provider應(yīng)用服務(wù)提供器)內(nèi)的服務(wù)器)直接執(zhí)行,也可以被存儲(chǔ)在硬盤(pán)或ROM等的非易失性存儲(chǔ)裝置內(nèi)由這些裝置執(zhí)行。在此情況下,原圖像6的數(shù)據(jù)可以從與信息處理裝置連接的掃描器或數(shù)字照相機(jī)等輸入。并且,原圖像6的數(shù)據(jù)可以通過(guò)經(jīng)由因特網(wǎng)等網(wǎng)絡(luò)從其他裝置上載或下載而被輸入。
臉檢測(cè)部2、掩模處理部3、膚色區(qū)域抽出部4a以及美膚處理部5a各自可以使用作為硬件而安裝的芯片來(lái)構(gòu)成。并且,存儲(chǔ)部St可以使用安裝有圖像校正裝置1a的其他裝置的RAM來(lái)構(gòu)成。即,存儲(chǔ)部St不一定必需配備在圖像校正裝置1a的內(nèi)部,只要被構(gòu)成為可從臉檢測(cè)部2、掩模處理部3、膚色區(qū)域抽出部4a以及美膚處理部5a進(jìn)行存取,就可以被配備在圖像校正裝置1a的外部。在此情況下,存儲(chǔ)部St可以被構(gòu)成為由其他裝置(例如,安裝有圖像校正裝置1a的裝置的CPU)和圖像校正裝置1a的各處理部2~5共用。
并且,在暈映濾波處理S06a中,可以根據(jù)由臉位置檢測(cè)處理S01所檢測(cè)到的臉矩形的大小決定暈映程度。具體地說(shuō),臉矩形越大,就越執(zhí)行強(qiáng)(大)的暈映程度的暈映處理。反之,臉矩形越小,就越執(zhí)行弱(小)的暈映程度的暈映處理。例如,可通過(guò)操作移動(dòng)平均濾波器和加權(quán)平均濾波器的半徑等的參數(shù)來(lái)實(shí)現(xiàn)。并且,在高斯濾波器的情況下,通過(guò)在以下公式中改變標(biāo)準(zhǔn)偏差σ,可使暈映程度變化。
G(x,y)=12πσ2exp(-x2+y22σ)]]>并且,在簡(jiǎn)單平滑化濾波器的情況下,通過(guò)在n×n的算符中改變n的值,可使暈映程度變化。圖8是示出n×n的算符的具體例的圖。圖8(a)示出n=3的情況的算符的例子,圖8(b)示出n=5的情況的算符的例子,圖8(c)示出n=7的情況的算符的例子。N的值越大,暈映程度就越大。
通過(guò)這樣構(gòu)成,可根據(jù)臉的大小實(shí)施適當(dāng)暈映程度的暈映處理。因此,可防止由對(duì)小臉實(shí)施過(guò)度暈映程度的暈映處理所發(fā)生的臉整體變得模糊等的問(wèn)題。
并且,盡管在美膚處理中實(shí)施暈映處理,然而可以被構(gòu)成為實(shí)施暈映處理以外的圖像處理(例邊緣增強(qiáng)、亮度校正、色校正、紋理測(cè)繪)。
并且,不一定需要配備掩模處理部3。然而,在不配備掩模處理部3的情況下,不實(shí)施基于掩模圖像7的處理。因此,有可能使到獲得美膚圖像12所需要的時(shí)間增加。
[系統(tǒng)結(jié)構(gòu)]下面,對(duì)圖像校正裝置的第二實(shí)施方式的圖像校正裝置1b進(jìn)行說(shuō)明。圖9是示出圖像校正裝置1b的功能方框的圖。圖像校正裝置1b與圖像校正裝置1a的不同點(diǎn)是,具有美膚處理部5b來(lái)取代美膚處理部5a。以下,對(duì)圖像校正裝置1b和與圖像校正裝置1a的不同點(diǎn)進(jìn)行說(shuō)明。
圖10是示出由圖9所示的各功能部所執(zhí)行的處理和作為圖像校正裝置1b的整體處理流程的圖。以下,使用圖9和圖10對(duì)圖像校正裝置1b的各功能部進(jìn)行說(shuō)明。
<美膚處理部>
美膚處理部5b與美膚處理部5a的不同點(diǎn)是,不實(shí)施美膚合成處理S07,實(shí)施暈映濾波處理S06b以取代暈映濾波處理S06a。以下,對(duì)由美膚處理部5b所實(shí)施的美膚處理進(jìn)行說(shuō)明。
<<暈映濾波處理>>
在由美膚處理部5b所實(shí)施的美膚處理中,輸入原圖像6的數(shù)據(jù)和膚色區(qū)域圖像10a的數(shù)據(jù),執(zhí)行暈映濾波處理S06b。在暈映濾波處理S06b中,對(duì)原圖像6的各像素執(zhí)行與膚色區(qū)域圖像10a內(nèi)所包含的膚色強(qiáng)度對(duì)應(yīng)的暈映處理。具體地說(shuō),對(duì)膚色強(qiáng)度高的像素的暈映處理把暈映程度設(shè)定得較大,對(duì)膚色強(qiáng)度低的像素的暈映處理把暈映程度設(shè)定得較低。并且,暈映濾波處理06b可以按以下那樣構(gòu)成。
在圖像校正裝置1a中,通過(guò)暈映濾波處理S06a生成暈映圖像11,美膚合成處理S07使用暈映圖像11、原圖像6以及膚色區(qū)域圖像10a生成美膚圖像12。另一方面,在美膚校正裝置1b中,可以生成美膚圖像12,而不生成暈映圖像11。具體地說(shuō),當(dāng)根據(jù)式3的公式算出美膚圖像12的各像素的值時(shí),每次都執(zhí)行對(duì)成為處理對(duì)象的像素的暈映處理。即,被構(gòu)成為,僅針對(duì)所需要的像素每次都算出在式3中使用的暈映圖像的RGB分量的各值。通過(guò)這樣構(gòu)成,沒(méi)有必要對(duì)暈映圖像11進(jìn)行緩沖存儲(chǔ),可節(jié)約存儲(chǔ)區(qū)域。
在本發(fā)明的圖像校正裝置1b中,在美膚處理中,不生成暈映圖像11,而直接生成作為輸出圖像的美膚圖像12。因此,可削減用于生成暈映圖像11的暈映濾波處理S06a和美膚合成處理S07所需要的時(shí)間。
[系統(tǒng)結(jié)構(gòu)]下面,對(duì)圖像校正裝置的第三實(shí)施方式的圖像校正裝置1c進(jìn)行說(shuō)明。圖11是示出圖像校正裝置1c的功能方框的圖。圖像校正裝置1c與圖像校正裝置1b的不同點(diǎn)是,具有膚色區(qū)域抽出部4c來(lái)取代膚色區(qū)域抽出部4a,以及具有邊緣掩模處理部19。以下,對(duì)圖像校正裝置1c和與圖像校正裝置1b的不同點(diǎn)進(jìn)行說(shuō)明。
圖12是示出由圖11所示的各功能部所執(zhí)行的處理和作為圖像校正裝置1c的整體處理流程的圖。以下,使用圖11和圖12對(duì)圖像校正裝置1c的各功能部進(jìn)行說(shuō)明。
<邊緣掩模處理部>
邊緣掩模處理部19執(zhí)行邊緣掩模處理。以下,對(duì)邊緣掩模處理進(jìn)行說(shuō)明。在邊緣掩模處理中,輸入原圖像6,通過(guò)執(zhí)行邊緣掩模圖像生成處理S08,輸出邊緣掩模圖像20的數(shù)據(jù)。
在邊緣掩模圖像生成處理S08中,首先,將所輸入的原圖像6縮小,取得縮小圖像。例如,通過(guò)進(jìn)一步輸入臉矩形的大小,可以根據(jù)臉矩形的大小決定縮小比例。例如,可以把所輸入的臉矩形中的最大的臉矩形的寬度縮小成規(guī)定的像素(數(shù)十像素~百像素程度)程度。
然后,根據(jù)縮小圖像實(shí)施邊緣的抽出,即邊緣強(qiáng)度的取得。該邊緣抽出處理可以使用現(xiàn)有的任何技術(shù)來(lái)實(shí)施。例如,實(shí)施使用索貝爾濾波器的邊緣抽出。圖13是示出索貝爾濾波器的例子的圖。圖13(a)示出下方向的索貝爾濾波器,圖13(b)示出上方向的索貝爾濾波器。實(shí)施使用各個(gè)索貝爾濾波器的邊緣抽出處理,取得各索貝爾濾波器的邊緣圖像。在此情況下,取得二個(gè)邊緣圖像。
然后,通過(guò)使所取得的各個(gè)邊緣圖像灰度化和合成,取得合成邊緣圖像。通過(guò)該合成處理,把由下方向的索貝爾濾波器所抽出的邊緣和由上方向的索貝爾濾波器所抽出的邊緣表示為合成邊緣圖像。
然后,使所取得的合成邊緣圖像反轉(zhuǎn),取得反轉(zhuǎn)邊緣圖像。然后,對(duì)反轉(zhuǎn)邊緣圖像實(shí)施簡(jiǎn)并處理。通過(guò)執(zhí)行簡(jiǎn)并處理,取得使所抽出的邊緣擴(kuò)大到周圍的圖像。然后,把實(shí)施了簡(jiǎn)并處理的反轉(zhuǎn)邊緣圖像放大到原圖像6的大小,取得邊緣掩模圖像20。在以后的處理中,邊緣掩模圖像20中的像素值被用作膚色強(qiáng)度。即,所取得的邊緣部分的像素由于通過(guò)反轉(zhuǎn)處理而使像素值低或?yàn)?,因而被用作膚色強(qiáng)度低的像素。并且,通過(guò)簡(jiǎn)并處理,使所抽出的邊緣的影響及于其周圍。即,作為表示所抽出的邊緣及其周圍的膚色強(qiáng)度低的圖像,生成邊緣掩模圖像20。
<膚色區(qū)域抽出部>
膚色區(qū)域抽出部4c與膚色區(qū)域抽出部4b的不同點(diǎn)是,實(shí)施合成處理S04c以取代合成處理S04a。以下,對(duì)由膚色區(qū)域抽出部4c所實(shí)施的膚色區(qū)域抽出處理,特別是合成處理S04c進(jìn)行說(shuō)明。
<<合成處理>>
在由膚色區(qū)域抽出部4c所實(shí)施的膚色區(qū)域抽出處理中,在實(shí)施了膚色強(qiáng)度抽出處理S03之后,輸入膚色強(qiáng)度圖像8、掩模圖像7以及邊緣掩模圖像20,執(zhí)行合成處理S04c。
在合成處理S04c中,將所輸入的膚色強(qiáng)度圖像8、掩模圖像7以及邊緣掩模圖像20進(jìn)行合成。即,執(zhí)行使用了由膚色強(qiáng)度抽出處理S03所生成的膚色強(qiáng)度圖像8、由掩模處理所生成的掩模圖像7以及由邊緣掩模處理所生成的邊緣掩模圖像20的乘法處理。通過(guò)執(zhí)行合成處理S04c,生成加掩模后的膚色強(qiáng)度圖像9c。
在由膚色區(qū)域抽出部4c所實(shí)施的膚色區(qū)域抽出處理中,在合成處理S04c后,實(shí)施使用了加掩模后的膚色強(qiáng)度圖像9c的膚色區(qū)域校正處理S05,輸出膚色區(qū)域圖像10c。
在圖像校正裝置1c中,在合成處理S04c中使用邊緣掩模圖像20。在邊緣掩模圖像20中,把所抽出的邊緣及其周圍的膚色強(qiáng)度設(shè)定得低或?yàn)?。因此,通過(guò)合成處理S04c,取得把邊緣及其周圍的膚色強(qiáng)度設(shè)定得低或?yàn)?的加掩模后的膚色強(qiáng)度圖像9c。然后,由于使用這種加掩模后的膚色強(qiáng)度圖像9c實(shí)施美膚處理,因而可在原樣維持邊緣及其周圍,即眼睛、眉、嘴角等的清晰度的狀態(tài)下,對(duì)其他的膚色部分實(shí)施暈映處理。特別是,在對(duì)具有接近膚色的口紅、接近膚色的眉(例如淡的眉毛等)等的臉圖像進(jìn)行美膚處理時(shí)是有效的。
圖14是用于示出膚色強(qiáng)度圖像8和邊緣掩模圖像20的差異的圖。圖14(a)是膚色強(qiáng)度圖像8的例子,圖14(b)是邊緣掩模圖像20的例子。在此情況下,由于原圖像6中的左邊人物的眉色接近膚色,因而在膚色強(qiáng)度圖像8中,眉部分的膚色強(qiáng)度成為示出接近膚色的值。并且,由于原圖像6中的右邊人物的唇色接近膚色,因而在膚色強(qiáng)度圖像8中,唇部分的膚色強(qiáng)度成為示出接近膚色的值。在該狀態(tài)下,連左邊人物的眉部分和右邊人物的唇部分都實(shí)施暈映處理,取得眉毛和唇模糊的美膚圖像12。另一方面,在邊緣掩模圖像20中,由于抽出了左邊人物的眉部分和右邊人物的唇部分的邊緣,因而左邊人物的眉部分和右邊人物的唇部分的膚色強(qiáng)度成為示出遠(yuǎn)離膚色的值。因此,通過(guò)使用邊緣掩模圖像20,對(duì)眉部分和唇部分等不實(shí)施暈映處理,可維持這些部分的清晰度。
在邊緣掩模圖像生成處理S08中,放大處理、反轉(zhuǎn)處理以及簡(jiǎn)并處理可以根據(jù)需要變更所實(shí)施的順序。然而,在反轉(zhuǎn)處理前實(shí)施簡(jiǎn)并處理的情況下,像素值(膚色強(qiáng)度)低或?yàn)?的區(qū)域不擴(kuò)大到外側(cè),像素值(膚色強(qiáng)度)高或?yàn)?55(在膚色強(qiáng)度的情況下是“1”)的區(qū)域擴(kuò)大到外側(cè)。
可以執(zhí)行臉要素掩模處理部(相當(dāng)于臉要素抽出單元)的臉要素掩模圖像生成處理來(lái)取代邊緣掩模處理部19的邊緣掩模圖像生成處理S08,可以生成臉要素掩模圖像來(lái)取代邊緣掩模圖像20。在臉要素掩模圖像生成處理中,不抽出邊緣,而抽出被攝體的臉內(nèi)所包含的要素(臉要素)。該臉要素通過(guò)例如進(jìn)行模板匹配來(lái)抽出。而且,被構(gòu)成為,在臉要素掩模圖像中,把所抽出的臉要素和與該臉要素相距規(guī)定范圍的像素的膚色強(qiáng)度設(shè)定得低或?yàn)?。
權(quán)利要求
1.一種圖像處理裝置,其特征在于,具有規(guī)定區(qū)域指定單元,指定以作為圖像中的被攝體的人物的身體部分為基準(zhǔn)所決定的規(guī)定區(qū)域;以及圖像生成單元,生成對(duì)由上述規(guī)定區(qū)域指定單元所指定的規(guī)定區(qū)域?qū)嵤┝藞D像處理的圖像。
2.一種圖像處理裝置,其特征在于,具有規(guī)定區(qū)域指定單元,指定以作為圖像中的被攝體的人物的身體部分為基準(zhǔn)所決定的規(guī)定區(qū)域;以及圖像生成單元,生成對(duì)由上述規(guī)定區(qū)域指定單元所指定的規(guī)定區(qū)域?qū)嵤┝俗鳛閳D像處理的暈映處理的圖像。
3.根據(jù)權(quán)利要求1或2所述的圖像處理裝置,其特征在于,上述規(guī)定區(qū)域指定單元具有檢測(cè)單元,檢測(cè)作為圖像中的被攝體的人物的身體部分;以及指定單元,以由上述檢測(cè)單元所檢測(cè)的身體部分為基準(zhǔn)指定上述規(guī)定區(qū)域。
4.根據(jù)權(quán)利要求1~3中的任何一項(xiàng)所述的圖像處理裝置,其特征在于,上述圖像生成單元生成對(duì)由上述規(guī)定區(qū)域指定單元所指定的規(guī)定區(qū)域內(nèi)的區(qū)域,即具有與主要占據(jù)成為該規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量相等或接近的色分量的區(qū)域?qū)嵤┝藞D像處理的圖像。
5.根據(jù)權(quán)利要求1~3中的任何一項(xiàng)所述的圖像處理裝置,其特征在于,上述圖像生成單元具有強(qiáng)度值計(jì)算單元,針對(duì)成為處理對(duì)象的圖像的各像素,算出表示各像素的色分量接近主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量的程度的強(qiáng)度值;圖像處理單元,對(duì)成為處理對(duì)象的圖像的上述規(guī)定區(qū)域?qū)嵤﹫D像處理;以及色分量計(jì)算單元,各像素中的強(qiáng)度值越是表示遠(yuǎn)離主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量,就越是能算出接近上述原圖像的像素的色分量的色分量來(lái)作為該像素的新色分量,各像素中的強(qiáng)度值越是表示接近主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量,就越是能算出接近由上述圖像處理單元所生成的圖像的像素的色分量的色分量來(lái)作為該像素的新色分量,上述色分量計(jì)算單元根據(jù)由上述強(qiáng)度值計(jì)算單元所算出的強(qiáng)度值,算出各像素的新色分量。
6.根據(jù)權(quán)利要求1~3中的任何一項(xiàng)所述的圖像處理裝置,其特征在于,上述圖像生成單元具有強(qiáng)度值計(jì)算單元,針對(duì)成為處理對(duì)象的圖像的各像素,算出表示各像素的色分量接近主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量的程度的強(qiáng)度值;圖像處理單元,對(duì)成為處理對(duì)象的圖像實(shí)施圖像處理;掩模單元,把由上述規(guī)定區(qū)域指定單元所指定的規(guī)定區(qū)域以外的像素的上述強(qiáng)度值設(shè)定為表示遠(yuǎn)離主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量的值;以及色分量計(jì)算單元,各像素中的強(qiáng)度值越是表示遠(yuǎn)離主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量,就越是能算出接近上述原圖像的像素的色分量的色分量來(lái)作為該像素的新色分量,各像素中的強(qiáng)度值越是表示接近主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量,就越是能算出接近由上述圖像處理單元所生成的圖像的像素的色分量的色分量來(lái)作為該像素的新色分量,上述色分量計(jì)算單元根據(jù)由上述強(qiáng)度值計(jì)算單元和上述掩模單元所算出的強(qiáng)度值,算出各像素的新色分量。
7.根據(jù)權(quán)利要求1~3中的任何一項(xiàng)所述的圖像處理裝置,其特征在于,上述圖像生成單元具有強(qiáng)度值計(jì)算單元,針對(duì)成為處理對(duì)象的圖像的各像素,算出表示各像素的色分量接近主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量的程度的強(qiáng)度值;以及圖像處理單元,針對(duì)成為處理對(duì)象的圖像的上述規(guī)定區(qū)域,各像素中的強(qiáng)度值越是表示遠(yuǎn)離主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量,就越是能減弱圖像處理的影響而實(shí)施對(duì)該像素的圖像處理,各像素中的強(qiáng)度值越是表示接近主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量,就越是能增強(qiáng)圖像處理的影響而實(shí)施對(duì)該像素的圖像處理,上述圖像處理單元根據(jù)由上述強(qiáng)度值計(jì)算單元所獲得的該圖像的各像素的上述強(qiáng)度值實(shí)施圖像處理。
8.根據(jù)權(quán)利要求1~3中的任何一項(xiàng)所述的圖像處理裝置,其特征在于,上述圖像生成單元具有強(qiáng)度值計(jì)算單元,針對(duì)成為處理對(duì)象的圖像的各像素,算出表示各像素的色分量接近主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量的程度的強(qiáng)度值;掩模單元,把由上述規(guī)定區(qū)域指定單元所指定的規(guī)定區(qū)域以外的像素的上述強(qiáng)度值設(shè)定為表示遠(yuǎn)離主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量的值;以及圖像處理單元,針對(duì)成為處理對(duì)象的圖像,各像素中的強(qiáng)度值越是表示遠(yuǎn)離主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量,就越是能減弱圖像處理的影響而實(shí)施對(duì)該像素的圖像處理,各像素中的強(qiáng)度值越是表示接近主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量,就越是能增強(qiáng)圖像處理的影響而實(shí)施對(duì)該像素的圖像處理,上述圖像處理單元根據(jù)由上述強(qiáng)度值計(jì)算單元和上述掩模單元所獲得的該圖像的各像素的上述強(qiáng)度值實(shí)施圖像處理。
9.根據(jù)權(quán)利要求6所述的圖像處理裝置,其特征在于,上述圖像處理單元對(duì)具有規(guī)定范圍的強(qiáng)度值的像素不執(zhí)行圖像處理。
10.根據(jù)權(quán)利要求1~9中的任何一項(xiàng)所述的圖像處理裝置,其特征在于,上述圖像生成單元根據(jù)成為由上述規(guī)定區(qū)域指定單元所指定的規(guī)定區(qū)域的基準(zhǔn)的身體部分的大小決定所實(shí)施的圖像處理的內(nèi)容。
11.根據(jù)權(quán)利要求1~10中的任何一項(xiàng)所述的圖像處理裝置,其特征在于,還具有要素抽出單元,將構(gòu)成成為處理對(duì)象的圖像中的被攝體的人物的身體部分的要素,即上述規(guī)定區(qū)域內(nèi)所包含的要素至少抽出一個(gè),上述圖像生成單元限制實(shí)施對(duì)以由上述要素抽出單元所抽出的要素為基準(zhǔn)所決定的要素區(qū)域的圖像處理。
12.根據(jù)權(quán)利要求5或6所述的圖像處理裝置,其特征在于,上述圖像生成單元還具有邊緣掩模單元,針對(duì)成為處理對(duì)象的圖像的各像素取得邊緣強(qiáng)度,把表示所抽出的邊緣強(qiáng)度越強(qiáng),就越遠(yuǎn)離主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量的上述強(qiáng)度值提供給上述各像素,上述色分量計(jì)算單元還根據(jù)由上述邊緣掩模單元所算出的強(qiáng)度值算出各像素的新色分量。
13.根據(jù)權(quán)利要求7或8所述的圖像處理裝置,其特征在于,上述圖像生成單元還具有邊緣掩模單元,針對(duì)成為處理對(duì)象的圖像的各像素取得邊緣強(qiáng)度,把表示所抽出的邊緣強(qiáng)度越強(qiáng),就越遠(yuǎn)離主要占據(jù)成為上述規(guī)定區(qū)域的基準(zhǔn)的身體部分的色分量的上述強(qiáng)度值提供給上述各像素,上述圖像處理單元還根據(jù)由上述邊緣掩模單元所獲得的該圖像的各像素的上述強(qiáng)度值實(shí)施圖像處理。
14.根據(jù)權(quán)利要求12或13所述的圖像處理裝置,其特征在于,上述邊緣掩模單元將成為處理對(duì)象的圖像縮小后把上述強(qiáng)度值提供給各像素,再放大成原來(lái)大小的圖像。
15.一種程序,其特征在于,用于使信息處理裝置執(zhí)行以下步驟指定以作為圖像中的被攝體的人物的身體部分為基準(zhǔn)所決定的規(guī)定區(qū)域的步驟;以及生成對(duì)所指定的規(guī)定區(qū)域?qū)嵤┝藞D像處理的圖像的步驟。
16.一種程序,其特征在于,用于使信息處理裝置執(zhí)行以下步驟指定以作為圖像中的被攝體的人物的身體部分為基準(zhǔn)所決定的規(guī)定區(qū)域的步驟;以及生成對(duì)所指定的規(guī)定區(qū)域?qū)嵤┝藭炗程幚淼膱D像的步驟。
17.根據(jù)權(quán)利要求15或16所述的程序,其特征在于,用于在生成上述圖像的步驟中使上述信息處理裝置執(zhí)行生成施加了基于從成為上述所指定的規(guī)定區(qū)域的基準(zhǔn)的身體部分所抽出的作為被攝體的人物的膚色的色分量的圖像處理的圖像。
18.一種程序,其特征在于,用于使信息處理裝置執(zhí)行以下步驟指定包含圖像中的任意像的區(qū)域的位置和范圍的步驟;以及生成對(duì)所指定的區(qū)域內(nèi)的區(qū)域,即具有與主要占據(jù)該區(qū)域的色分量相等或接近的色分量的區(qū)域?qū)嵤┝藞D像處理的圖像的步驟。
全文摘要
自動(dòng)指定成為圖像校正處理對(duì)象的區(qū)域,例如包含人物像的圖像中的人物像的區(qū)域,僅對(duì)所指定的區(qū)域?qū)嵤炗程幚淼鹊膱D像校正處理。
文檔編號(hào)G06T5/20GK1777913SQ20048001074
公開(kāi)日2006年5月24日 申請(qǐng)日期2004年3月19日 優(yōu)先權(quán)日2003年3月20日
發(fā)明者田畑尚弘, 岸場(chǎng)秀行 申請(qǐng)人:歐姆龍株式會(huì)社