專利名稱：攝像裝置、照明處理裝置以及照明處理方法
技術(shù)領(lǐng)域：
本發(fā)明涉及攝像裝置、照明(lighting)處理裝置以及照明處理方法。
背景技術(shù)：
當(dāng)分解與照相機相關(guān)的一系列動作時，由設(shè)定攝影條件一攝影一設(shè)定再現(xiàn)條件一 再現(xiàn)的四個左右的動作構(gòu)成。因此，照相機通常被設(shè)定為分為這些動作模式來進(jìn)行操作。
以往，人們提出了如下技術(shù)使用由照相機拍攝人物的臉部而得到的人臉圖像來 進(jìn)行統(tǒng)計性圖像處理，從而去除例如包括在人臉圖像中的陰影的圖案(例如，參照日本特 開2002-24811號公報)。但是，通過變更針對被攝體的照明圖案來消除陰影，因此，會發(fā)生 根據(jù)距離或視場角范圍不能產(chǎn)生效果的情況。 此外，人們還提出了如下技術(shù)調(diào)整圖像上的陰影的圖案，以能夠變更攝影圖像中 的照明的圖案(例如，參照日本特開2007-66227號公報)。但是，在不能確定或通過學(xué)習(xí)判 斷構(gòu)造物(例如人臉)的三維形狀時，存在不能取得構(gòu)造物中的陰影的圖案并調(diào)整陰影的 圖案的問題。例如，在逆光狀態(tài)那樣的陰影遍布整個構(gòu)造物的情況下，即使識別出構(gòu)造物形 狀也不能將陰影識別為圖案。 作為用于排除或減少這種被攝體的無用陰影的攝影工具，公知有反光板 (reflector)。在正式的攝影中使用反光板。通過使用反光板向產(chǎn)生陰影的人臉賦予反射 光來消除不需要的陰影，能夠拍攝更符合期望的圖像。由此，即使照相機從以往的銀鹽照相 機變化到數(shù)碼照相機，也依然使用反光板。 但是，實際上為了使用反光板，需要拿著反光板進(jìn)行朝向被攝體的操作的攝影助 手。如果沒有操作反光板的攝影助手也能夠像使用了反光板那樣簡單地進(jìn)行賦予了輔助光 的攝影，則即使不是專業(yè)的攝影師，也能夠進(jìn)行像使用了反光板那樣的高級攝影。

發(fā)明內(nèi)容
本發(fā)明的一個形式涉及的攝像裝置具有攝像部，其輸出被攝體像作為攝影圖像； 照明處理部，其以從外部對攝影圖像的被攝體像施加虛擬照明的方式，針對所述攝影圖像 進(jìn)行基于預(yù)定圖像處理的模擬照明處理；顯示圖像生成部，其根據(jù)所述照明處理后的攝影 圖像生成顯示用圖像；顯示部，其顯示所述顯示用圖像；以及記錄部，其記錄所述照明處理 后的攝影圖像，所述照明處理部具有參數(shù)確定單元，其確定表示所述照明處理的條件的照 明處理參數(shù)；參數(shù)圖像生成單元，其生成與所述照明處理后的攝影圖像重疊地顯示在所述 顯示部上的參數(shù)圖像，作為表示所述照明處理參數(shù)的信息；以及照明加工單元，其根據(jù)所確 定的所述照明處理參數(shù)來對所述攝影圖像進(jìn)行照明處理。 此外，本發(fā)明的一個形式涉及的照明處理裝置具有參數(shù)確定單元，其確定照明處 理參數(shù)，所述照明處理參數(shù)表示以從外部對攝影圖像的被攝體像施加虛擬照明的方式，針 對所述攝影圖像通過預(yù)定的圖像處理模擬進(jìn)行的照明處理的條件；參數(shù)圖像生成單元，其 生成與所述照明處理后的攝影圖像重疊地進(jìn)行顯示的參數(shù)圖像，作為表示所確定的所述照
5明處理參數(shù)的信息；以及照明加工單元，其根據(jù)所確定的所述照明處理參數(shù)來對所述攝影 圖像進(jìn)行照明處理。 此外，本發(fā)明的一個形式涉及的照明處理方法具有參數(shù)確定步驟，確定照明處理 參數(shù)，所述照明處理參數(shù)表示以從外部對攝影圖像的被攝體像施加虛擬照明的方式，針對 所述攝影圖像通過預(yù)定的圖像處理模擬進(jìn)行的照明處理的條件；參數(shù)圖像生成步驟，生成 與所述照明處理后的攝影圖像重疊地進(jìn)行顯示的參數(shù)圖像，作為表示所確定的所述照明處 理參數(shù)的信息；以及照明加工步驟，根據(jù)所確定的所述照明處理參數(shù)來對所述攝影圖像進(jìn) 行照明處理。 此外，本發(fā)明的一個形式涉及的照明處理裝置具有人臉檢測部，其在攝影圖像中 檢測人臉部分；照明處理部，其以從外部對所述檢測到的人臉部分施加虛擬照明的方式，針 對所述檢測到的人臉部分進(jìn)行基于預(yù)定圖像處理的模擬照明處理；陰影修正處理部，其檢 測在所述檢測到的人臉部分上產(chǎn)生的陰影，并修正檢測到的陰影；以及修補處理部，其按照 所述檢測到的人臉部分的各器官來進(jìn)行特定的圖像處理。 此外，本發(fā)明的一個形式涉及的照明處理方法具有人臉檢測步驟，在攝影圖像中 檢測人臉部分；照明處理步驟，以從外部對所述檢測到的人臉部分施加虛擬照明的方式，針 對所述檢測到的人臉部分進(jìn)行基于預(yù)定圖像處理的模擬照明處理；陰影修正步驟，檢測在 所述檢測到的人臉部分上產(chǎn)生的陰影，并修正檢測到的陰影；以及修補處理步驟，按照所述 檢測到的人臉部分的各器官來進(jìn)行特定的圖像處理。 對于以上所述的內(nèi)容和本發(fā)明的其他目的、特征、優(yōu)點以及技術(shù)上的產(chǎn)業(yè)上的意 義，如果對照附圖閱讀以下的本發(fā)明的詳細(xì)說明，則能夠進(jìn)一步理解。


圖1是簡略示出本發(fā)明的實施方式的數(shù)字照相機的結(jié)構(gòu)的主視圖。 圖2是簡略示出圖1的數(shù)字照相機的結(jié)構(gòu)的后視圖。 圖3是示出數(shù)字照相機的系統(tǒng)結(jié)構(gòu)例的框圖。 圖4是用于說明基于數(shù)字反光板功能的照明處理的概念的示意圖。 圖5是示出攝影光線(catch light)映入前后的人臉圖像例的說明圖。 圖6是示出基于數(shù)字反光板模式的攝影處理控制例的概略流程圖。 圖7是示出步驟S6的人臉檢測處理的子程序。 圖8是示出從人臉檢測向照明處理的轉(zhuǎn)移過程的說明圖。 圖9是示出步驟S31的陰影修正處理的子程序。 圖10是示出針對陰影區(qū)域的陰影修正前后的圖像例的說明圖。 圖11是示出步驟S10的數(shù)字反光板處理的前半部分的子程序。 圖12是示出步驟S10的數(shù)字反光板處理的后半部分的子程序。 圖13是示出與用戶操作對應(yīng)的數(shù)字反光板顯示例的說明圖。 圖14是示出與用戶操作對應(yīng)的數(shù)字反光板顯示例的說明圖。 圖15是示出與用戶操作對應(yīng)的數(shù)字反光板顯示例的說明圖。 圖16是示出與用戶操作對應(yīng)的數(shù)字反光板顯示例的說明圖。 圖17是示出與用戶操作對應(yīng)的數(shù)字反光板顯示例的說明圖。
具體實施例方式
以下，參照附圖對用于實施本發(fā)明的最佳方式進(jìn)行說明。圖1是簡略示出本實施 方式的攝像裝置即數(shù)字照相機的結(jié)構(gòu)的主視圖，圖2是其后視圖。 本實施方式的數(shù)字照相機1在照相機主體的前表面?zhèn)染哂袛z影鏡頭等攝像光學(xué) 系統(tǒng)2，構(gòu)成為能夠在照相機主體內(nèi)置的攝像元件上對被攝體像進(jìn)行成像。此外，數(shù)字照相 機1具有占據(jù)照相機主體的后表面的大半個區(qū)域的顯示部3。該顯示部3除了即時取景圖 像和攝影圖像(包括再現(xiàn)圖像)之外，還用于顯示后述的顯示用圖像和參數(shù)圖像，通過LCD 或ELD等薄型顯示裝置實現(xiàn)。 此外，數(shù)字照相機1在例如照相機主體的上表面上具有釋放按鈕(release button) 4a、WB(白平衡)按鈕4b、參數(shù)設(shè)定按鈕4c，在前表面上具有前撥盤4d，在后表面上 具有后撥盤4e、功能按鈕4f、方向操作按鈕4g、 0K按鈕4h和再現(xiàn)按鈕4i。這些各種操作 按鈕構(gòu)成操作部4。 釋放按鈕4a用于在攝影模式中指示攝影定時，在拍攝時具有l(wèi)st(半按)狀態(tài)和 2nd(全按)狀態(tài)。WB按鈕4b是在想進(jìn)行白平衡調(diào)整時操作的按鈕。參數(shù)設(shè)定按鈕4c是用 于在后述的基于手動操作的照明處理時，進(jìn)行成為操作對象的照明處理參數(shù)的選擇切換的 按鈕。在本實施方式中，構(gòu)成為根據(jù)參數(shù)設(shè)定按鈕4c的操作次數(shù)在預(yù)定次數(shù)(例如，4次) 內(nèi)循環(huán)地選擇成為操作對象的照明處理參數(shù)。與根據(jù)操作次數(shù)選擇的參數(shù)之間的對應(yīng)關(guān)系 將在后面描述。 此外，前撥盤4d、后撥盤4e是用于進(jìn)行與通過WB按鈕4b和參數(shù)設(shè)定按鈕4c的操 作而選擇出的幾種照明處理參數(shù)相關(guān)的參數(shù)值的變更的撥盤。方向操作按鈕4g是用于進(jìn) 行與通過參數(shù)設(shè)定按鈕4c的操作而選擇出的幾種照明處理參數(shù)相關(guān)的參數(shù)值的變更的按 鈕。這些操作按鈕與變更的參數(shù)之間的對應(yīng)關(guān)系將在后面描述。 此外，功能按鈕4f是用于在攝影模式中設(shè)定伴隨數(shù)字反光板處理的攝影模式的 按鈕，設(shè)為通過再次按壓而解除的開關(guān)(toggle)結(jié)構(gòu)。0K按鈕4h是用于進(jìn)行針對例如數(shù) 字反光板處理的處理結(jié)果的確定的按鈕。再現(xiàn)按鈕4i是用于將數(shù)字照相機1的模式從攝 影模式設(shè)定為再現(xiàn)模式的按鈕，設(shè)為通過再次按壓而解除再現(xiàn)模式的開關(guān)結(jié)構(gòu)。
圖3是示出數(shù)字照相機1的系統(tǒng)結(jié)構(gòu)例的框圖。本實施方式的數(shù)字照相機1具有 控制部11?？刂撇?1進(jìn)行針對構(gòu)成數(shù)字照相機1的各部的指示和數(shù)據(jù)轉(zhuǎn)送等，由用于集 中控制數(shù)字照相機1的動作的CPU構(gòu)成。此外，數(shù)字照相機1除了前述的顯示部3、操作部 4以外，還具有程序數(shù)據(jù)存儲部13、攝像部14、 SDRAM 15、顯示圖像生成部16、圖像處理部 18、壓縮解壓縮部19、記錄/再現(xiàn)部20、記錄部21以及數(shù)字反光板功能部22。攝像部14、 SDRAM 15、顯示圖像生成部16、圖像處理部18、壓縮解壓縮部19、記錄/再現(xiàn)部20以及數(shù)字 反光板功能部22通過總線30與控制部11連接。 程序數(shù)據(jù)存儲部13是例如閃存等的可以電改寫的非易失性存儲器。該程序數(shù)據(jù) 存儲部13預(yù)先存儲用于使數(shù)字照相機1動作從而實現(xiàn)該數(shù)字照相機1具有的各種功能的 CPU用的程序、在該程序的執(zhí)行中使用的各種數(shù)據(jù)。 攝像部14用于由數(shù)字照相機1拍攝被攝體像并作為攝影圖像輸出，由照相機部和 攝像處理部構(gòu)成。照相機部由攝影鏡頭、攝像元件、光圈、快門、AF(autofocus :自動聚焦)機構(gòu)、AF驅(qū)動電路、變焦機構(gòu)以及變焦驅(qū)動機構(gòu)等構(gòu)成。此處，攝像元件由例如CCD或CMOS 傳感器等二維固體攝像元件構(gòu)成，對通過包括攝影鏡頭的攝影光學(xué)系統(tǒng)2入射的被攝體像 進(jìn)行光電轉(zhuǎn)換，并作為模擬電信號輸出。攝像處理部除了包括攝像元件驅(qū)動電路以外，還在 針對從攝像元件輸出的模擬電信號實施了AGC(automatic gain control :自動增益控制)、 CDS (correlated doublesampling :相關(guān)雙取樣)等模擬信號處理后，在A/D轉(zhuǎn)換器中轉(zhuǎn)換 為數(shù)字電信號并進(jìn)行輸出。 SDRAM 15是用作臨時存儲存儲器和工作區(qū)域的存儲器，在利用顯示圖像生成部 16生成顯示用圖像時也要使用。此外，顯示圖像生成部16用于生成顯示在顯示部3上的顯 示用圖像。即，顯示圖像生成部16除了在攝影模式中生成即時取景圖像，在再現(xiàn)模式中生 成再現(xiàn)圖像以外，還在數(shù)字反光板模式中根據(jù)后述的通過數(shù)字反光板功能部22進(jìn)行照明 處理后的攝影圖像生成顯示用圖像。該顯示圖像生成部16具有編碼器和D/A轉(zhuǎn)換器等，包 括用于使顯示部3顯示各種信息的驅(qū)動器，在數(shù)字反光板模式時使通過數(shù)字反光板功能部 22生成的參數(shù)圖像與顯示用圖像重疊地顯示在顯示部3上。 圖像處理部18針對從攝像部14輸出的攝影圖像的數(shù)據(jù)實施像素插值處理、顏色 校正處理、Y處理等各種圖像處理，并且進(jìn)行轉(zhuǎn)換為適于記錄用、顯示用等的圖像數(shù)據(jù)的處 理。即，圖像處理部18在記錄時(攝影時)，針對記錄圖像實施記錄用的圖像處理，針對顯 示用的即時取景圖像實施顯示用的簡單的圖像處理。此外，在數(shù)字反光板模式時，將實施了 預(yù)定的圖像處理的攝影圖像數(shù)據(jù)作為原始圖像數(shù)據(jù)，臨時存儲在SDRAM15內(nèi)并提供給數(shù)字 反光板功能部22進(jìn)行的照明處理等數(shù)字反光板處理。 壓縮解壓縮部19在將通常的攝影圖像和通過數(shù)字反光板模式進(jìn)行照明處理后的 攝影圖像的數(shù)據(jù)記錄到記錄部21中時，或顯示記錄在記錄部21中的攝影圖像的數(shù)據(jù)時等， 進(jìn)行基于公知的JPEG方式等的圖像數(shù)據(jù)的壓縮處理和解壓縮處理。 記錄/再現(xiàn)部20用于向記錄部21寫入攝影圖像的數(shù)據(jù)或從記錄部21讀取攝影 圖像的數(shù)據(jù)，使用與記錄部21的種類對應(yīng)的類型。尤其是在本實施方式中，記錄部21在針 對后述的照明處理后的攝影圖像通過0K按鈕4h的操作指示保存時，保存記錄照明處理后 的攝影圖像。此處，記錄部21是例如xD-Picture Card(注冊商標(biāo))或CompactFlash(注 冊商標(biāo))卡等的在照相機主體上裝卸自如的記錄介質(zhì)或HDD。 數(shù)字反光板功能部22在本實施方式中構(gòu)成照明處理裝置。該數(shù)字反光板功能部 22用于以對通過攝像部14拍攝到的攝影圖像中的被攝體像如使用了反光板那樣從外部 施加基于虛擬輔助光的照明的方式，針對由數(shù)字?jǐn)?shù)據(jù)構(gòu)成的攝像圖像進(jìn)行基于預(yù)定數(shù)字圖 像處理的模擬照明處理，由此不會有不協(xié)調(diào)感覺地排除或減少被攝體的無用陰影。在本實 施方式中，不通過以往那樣的將反光板對著被攝體那樣的直接的處理，而通過針對包括在 拍攝到的攝影圖像中的被攝體像的數(shù)字圖像處理，與使用了反光板的攝像時具有相同的效 果，因此稱作"數(shù)字反光板功能"。此外特別是，將如從外部施加了虛擬照明那樣的圖像處理 稱作"模擬照明處理"。 圖4(a)是用于說明本實施方式的基于數(shù)字反光板功能的照明處理的概念的示意 圖。圖4(a)示出了通過照明處理變更了攝影圖像是灰色圖像的畫面上的一部分的亮度的 例子。即，在圖4(a)中，將用圓表示的部分設(shè)為照明區(qū)域，針對該照明區(qū)域通過從成為正面 近前側(cè)的外部施加了虛擬照明那樣的數(shù)字處理，局部地對亮度進(jìn)行了修正處理。此處，虛擬照明如圖4(a)中的照明強度分布所示，處理成隨著高斯分布中心部變亮而周邊部變暗，并 且邊界部不顯眼。 此外，在圖4(b)中如箭頭所示，通過改變虛擬照明方向即照明方向，使高斯分布
偏向一方，由此還能夠變更針對用照明區(qū)域表示的范圍的圖像的照明處理圖案。 本實施方式的數(shù)字反光板功能部22具有人臉檢測部23、照明處理部24、陰影修正
處理部25以及修補(make up)處理部26。人臉檢測部23用于使用圖案匹配等公知的技
術(shù)，從由數(shù)字?jǐn)?shù)據(jù)構(gòu)成的攝影圖像中檢測人臉部分。數(shù)字反光板功能主要是在拍攝人物圖
像作為人像的情況下要求的功能，因此，在數(shù)字反光板模式中在攝影圖像中包括人臉部分
的情況下為了自動進(jìn)行照明處理而設(shè)置了人臉檢測部23。 照明處理部24構(gòu)成數(shù)字反光板功能部22的主要部分，用于針對臨時存儲在SDRAM 15中的攝影圖像進(jìn)行模擬的照明處理。該照明處理部24具有參數(shù)確定部24a、參數(shù)圖像生 成部24b、照明加工部24c和數(shù)據(jù)保持部24d。 參數(shù)確定部24a用于確定表示照明處理的條件的照明處理參數(shù)。即，參數(shù)確定部 24a確定照明區(qū)域、照明方向、照明強度、照明顏色等作為照明處理參數(shù)。"照明區(qū)域"是表 示照明處理的攝影圖像中的被攝體像的范圍的參數(shù)。"照明方向"是表示照明處理中的虛擬 照明方向的參數(shù)。"照明強度"是表示照明處理的強度的參數(shù)。"照明顏色"是用于通過改 變白平衡從而局部地實施彩度變更處理來作為照明處理的參數(shù)。通常，反光板是無色的，但 是考慮了還有使用附上了色彩的反光板的情況。 此處，參數(shù)確定部24a自動地或按照用戶操作來確定照明處理參數(shù)。即，參數(shù)確定 部24a在通過人臉檢測部23檢測到人臉部分的情況下，作為第一階段的自動處理，根據(jù)檢 測到的人臉部分的大小確定"照明區(qū)域"，將"照明方向"確定為相對于檢測到的人臉部分的 實際環(huán)境光方向的相反方向，根據(jù)被攝體像的亮度的最大值，具體而言，根據(jù)檢測到的人臉 部分的最大亮度或人臉的陰影部分的亮度的至少任意一個來確定"照明強度"。這是因為只 要實施用于降低攝影圖像中的人臉附近的較明部分和較暗部分的對比度的照明處理即可， 沒有必要對攝影圖像中的背景部分實施照明處理。此外，參數(shù)確定部24a按照與用戶的喜 好對應(yīng)的用戶操作確定照明處理參數(shù)來作為第二階段的處理。 此外，參數(shù)圖像生成部24b用于生成與照明處理后的攝影圖像重疊地作為"數(shù)字 反光板顯示"顯示在顯示部3上的參數(shù)圖像，作為表示照明處理參數(shù)的信息。S卩，參數(shù)圖像 生成部24b首先生成作為照明處理參數(shù)包括通過參數(shù)確定部24a的第一階段的處理而自 動確定的"照明區(qū)域"、"照明方向"和"照明強度"在內(nèi)的參數(shù)圖像。此外，參數(shù)圖像生成部 24b由于通過用戶操作確定照明處理參數(shù)來作為參數(shù)確定部24a的第二階段的處理，因此， 生成作為照明處理參數(shù)包括"照明區(qū)域"、"照明方向"和"照明強度"的默認(rèn)值在內(nèi)的參數(shù) 圖像、和根據(jù)用戶操作變更了參數(shù)值的參數(shù)圖像。此外，參數(shù)圖像生成部24b生成包括表示 被攝體像的亮度的最大值的部位的顯示的參數(shù)圖像。如后所述，各參數(shù)等在數(shù)字反光板顯 示中標(biāo)記化成預(yù)定形狀來容易明白地進(jìn)行顯示。 照明加工部24c不論是自動還是用戶操作，均用于通過與所確定的照明處理參數(shù) 對應(yīng)的加工條件對攝影圖像實施預(yù)定的數(shù)字圖像處理來實際執(zhí)行模擬的照明處理。預(yù)定的 數(shù)字圖像處理是例如局部Y轉(zhuǎn)換等的局部的亮度修正處理。通過照明加工部24c照明處 理后的攝影圖像的數(shù)據(jù)也臨時存儲在SDRAM 15中。
9
數(shù)據(jù)保持部24d臨時存儲各照明處理參數(shù)的默認(rèn)數(shù)據(jù)和確定值，還預(yù)先存儲了各 參數(shù)的顯示用標(biāo)記形狀的數(shù)據(jù)。 此外，陰影修正處理部25是數(shù)字反光板功能部22具有的附加的功能部，用于在通 過人臉檢測部23從攝影圖像中檢測到人臉部分的情況下，檢測在檢測到的人臉部分上產(chǎn) 生的陰影，并修正檢測到的陰影。該陰影修正處理部25具有陰影區(qū)域檢測部25a、陰影區(qū)域 亮度提升部25b、陰影區(qū)域平滑(smoothing)部25c以及陰影區(qū)域顏色噪聲抑制部25d。
陰影區(qū)域檢測部25a使用人臉檢測部23的人臉部分的檢測結(jié)果，根據(jù)人臉器官周 圍的亮度分布檢測陰影區(qū)域。陰影區(qū)域亮度提升部25b、陰影區(qū)域平滑部25c以及陰影區(qū)域 顏色噪聲抑制部25d用于針對通過陰影區(qū)域檢測部25a檢測到的陰影區(qū)域分別實施亮度提 升處理、平滑處理以及噪聲抑制處理。 此外，修補處理部26是數(shù)字反光板功能部22具有的附加的功能部，用于在通過人 臉檢測部23從攝影圖像中檢測到人臉部分的情況下，按照檢測到的人臉部分的各器官來 進(jìn)行特定的圖像處理。即，本實施方式的基于數(shù)字反光板功能的圖像處理在某種意義上， 也是修補處理的一種，因此，除了上述基本的照明處理以外，還一并使用已有的修補處理技 術(shù)，由此使人像等的被攝體像的完成作品變得更加美麗。該修補處理部26具有攝影光線加 工部26a和皮膚平滑加工部26b來作為其代表例。 攝影光線加工部26a是進(jìn)行以下處理的部分在檢測到人臉部分的情況下，進(jìn)一 步檢測眼睛部分作為人臉器官，通過使攝影光線數(shù)據(jù)作為光點映入其瞳孔中來使瞳孔閃 耀。圖5(a)、圖5(b)是示出攝影光線(catch light)映入前后的人臉圖像例的說明圖。攝 影光線加工部26a還保存有映入的攝影光線數(shù)據(jù)。皮膚平滑加工部26b用于針對皮膚部分 實施使皮膚光滑的均勻處理，以使人臉部分的皮膚變成光滑的感覺。除此以外，修補處理部 26還可以包括使眼睛的白眼珠部分更白的處理、通過使光點映入嘴唇的最大亮度部分來使 嘴唇出現(xiàn)光澤和立體感的處理、使沿著鼻子的左右的明暗邊界變成直線狀并且通過提升亮 部側(cè)的亮度來使鼻梁齊整的處理、以及在嘴中使牙齒的部分更白的處理等已有的各種修補 處理。 在這種結(jié)構(gòu)中，以下參照圖6以后的附圖對通過控制部11、顯示圖像生成部16、數(shù) 字反光板功能部22等執(zhí)行的數(shù)字反光板攝影進(jìn)行說明。圖6是示出數(shù)字反光板模式的攝 影處理控制例的概略流程圖。 此處，針對在攝影模式中，半按釋放按鈕4a從而處于1st狀態(tài)的情況進(jìn)行說明。 在該狀態(tài)下，在按下從而打開用"Fn"表示的功能按鈕4f (步驟Sl :是)，并且全按釋放按鈕 4a從而處于2nd打開狀態(tài)時(步驟S2 :是)，進(jìn)行數(shù)字反光板模式的攝影。結(jié)果，在釋放按 鈕4a處于全按狀態(tài)時，也進(jìn)行沒有記錄在記錄部21中的預(yù)備攝影(以下稱作測試攝影) (步驟S3)。因此，通過攝像部14測試攝影到的攝影圖像的數(shù)據(jù)作為原始圖像的數(shù)據(jù)臨時 存儲在SDRAM 15中。此外，在SDRAM 15內(nèi)，設(shè)置有直接存儲沒有實施數(shù)字反光板處理的原 始的攝影圖像數(shù)據(jù)的原始圖像數(shù)據(jù)存儲區(qū)域、和存儲對原始圖像數(shù)據(jù)實施了數(shù)字反光板處 理后的處理后的攝影圖像數(shù)據(jù)的處理后圖像數(shù)據(jù)存儲區(qū)域。此外，在測試攝影后，在顯示部 3上顯示攝影確認(rèn)圖像(重放圖像)(步驟S4)。此時的攝影確認(rèn)圖像是通過顯示圖像生成 部16生成的顯示用圖像，每當(dāng)實施數(shù)字反光板處理時，將處理后的照明處理后的攝影圖像 作為顯示用圖像進(jìn)行顯示。
10
接著，關(guān)于測試攝影到的攝影圖像，檢查是否已通過人臉檢測部23檢測到人臉部 分(人臉檢測打開)(步驟S5)。在檢測到人臉部分的情況下(步驟S5 :是)，針對檢測到 的人臉部分執(zhí)行自動進(jìn)行第一階段的數(shù)字反光板處理的人臉檢測處理(步驟S6)。在沒有 檢測到人臉部分的情況下(步驟S5 :否)，跳過步驟S6的處理。步驟S6的人臉檢測處理將 在后面描述。 之后，判定用Fn表示的功能按鈕4f是否從關(guān)閉以跳動方式切換為打開(步驟 S7)，進(jìn)一步判定當(dāng)前數(shù)字反光板顯示是否關(guān)閉(步驟S8)。如果功能按鈕4f從關(guān)閉切換為 打開(步驟S7 :是)，且當(dāng)前數(shù)字反光板顯示沒有關(guān)閉(步驟S8 :否)，則關(guān)閉數(shù)字反光板顯 示(步驟S11)，并轉(zhuǎn)移到步驟S12。此外，在按下了0K按鈕4h的情況下(步驟S12:是)，
設(shè)為保存指示，執(zhí)行將進(jìn)行了包括照明處理的數(shù)字反光板處理后的攝影圖像記錄到記錄部 21中的記錄處理(步驟S13) 。 S卩，將通過步驟S6的人臉檢測處理自動進(jìn)行了數(shù)字反光板 處理后的攝影圖像記錄到記錄部21中。在沒有按下0K按鈕4h的情況下(步驟S12:否)， 返回步驟S7的處理。 另一方面，如果功能按鈕4f從關(guān)閉切換為打開(步驟S7 :是)，但當(dāng)前數(shù)字反光板 顯示為關(guān)閉(步驟S8:是)，則打開數(shù)字反光板顯示(步驟S9)，執(zhí)行基于用戶操作的數(shù)字 反光板處理(步驟SIO)。此外，在功能按鈕4f沒有從關(guān)閉切換為打開的情況下(步驟S7: 否)，執(zhí)行步驟SIO的基于用戶操作的數(shù)字反光板處理。步驟S9的數(shù)字反光板顯示、步驟 S10的數(shù)字反光板處理將在后面描述，處理后將顯示用圖像作為攝影確認(rèn)圖像顯示在顯示 部3上，供用戶確認(rèn)。此外，在按下了 OK按鈕4h的情況下(步驟S12 :是)，設(shè)為保存指示， 執(zhí)行將進(jìn)行了包括照明處理的數(shù)字反光板處理后的攝影圖像記錄到記錄部21中的記錄處 理(步驟S13) 。 S卩，將根據(jù)用戶操作通過步驟S12的數(shù)字反光板處理進(jìn)行了數(shù)字反光板處 理后的攝影圖像記錄到記錄部21中。在沒有按下0K按鈕4h的情況下(步驟S12:否)，返 回步驟S7的處理。 接著，參照圖7和圖8對步驟S6的人臉檢測處理進(jìn)行說明。圖7是示出步驟S6 的人臉檢測處理的子程序，圖8是示出從人臉檢測向照明處理的轉(zhuǎn)移過程的說明圖。首先， 在從攝影圖像中檢測到人臉部分來作為被攝體像的情況下，人臉檢測部23進(jìn)一步依次檢 測該人臉位置、人臉器官、陰影位置和太陽等的環(huán)境光的方向(步驟S21 S24)。例如，在 圖8(a)所示的包括人物的人臉部分的攝影圖像中，通過利用其數(shù)字?jǐn)?shù)據(jù)具有的信息，在線 框的形狀內(nèi)識別人臉部分的位置和大小，并且檢測眼睛、鼻子、嘴等人臉器官，通過這些人 臉器官附近的人臉圖像的亮度分布檢測陰影(實際的環(huán)境光的照射方向)。在圖示例的情 況下，示出了從被攝體側(cè)觀察時，在從人臉的右側(cè)稍下方照射環(huán)境光的狀態(tài)下拍攝到的圖 像例。 在這樣通過人臉檢測部23檢測到必要的人臉信息的情況下(步驟S25 :是)，照明 處理部24中的參數(shù)確定部24a根據(jù)檢測到的人臉部分的位置和大小來確定照明處理的被 攝體像的范圍即照明區(qū)域(步驟S26)。雖然照明區(qū)域的形狀沒有特別限制，但是在本實施 方式中，用例如照明圓圈形成的圓形區(qū)域進(jìn)行規(guī)定。此外，參數(shù)確定部24a以與相對于檢測 到的被攝體像(人臉部分)的實際環(huán)境光的照射方向成為相反方向的方式，確定照明處理 中的虛擬照明方向即照明方向(步驟S27)。此外，參數(shù)確定部24a根據(jù)檢測到的人臉部分 中的最大亮度和陰影亮度的比率，確定照明處理的強度即照明強度(步驟S28)。此外，此時的照明處理成為基于人臉檢測的自動處理，因此不進(jìn)行與白平衡處理對應(yīng)的照明顏色的確
定。此外，參數(shù)確定部24a根據(jù)人臉部分中的最大亮度和陰影亮度的比率來確定照明強度，
但是也可以僅通過人臉部分中的最大亮度或陰影亮度來簡單地確定照明強度。 將這樣確定的照明區(qū)域、照明方向和照明強度的確定值的數(shù)據(jù)作為該數(shù)字照相機
1的存儲值保持在數(shù)據(jù)保持部24d中(步驟S29)。 接著，照明加工部24c使用這樣確定的照明區(qū)域、照明方向和照明強度的數(shù)據(jù)，針 對攝影圖像中的人臉部分實施照明處理(步驟S30)。在圖8(a)所示的攝影圖像中的人臉 圖像的情況下，成為以下那樣的模擬處理將照明方向確定成從被攝體側(cè)觀察時，從人臉的 左側(cè)稍上方向右，通過局部Y轉(zhuǎn)換處理對整個人臉部分施加與該照明方向?qū)?yīng)的照明強 度分布的虛擬照明。此外，通過陰影修正處理部25進(jìn)行陰影修正處理(步驟S31)，并且通 過修補處理部26進(jìn)行修補處理(步驟S32)。 此外，進(jìn)行了這些一系列處理后的攝影圖像通過顯示圖像生成部16生成為顯示 用圖像并再次顯示在顯示部3上(步驟S33)，供用戶確認(rèn)。此處，照明處理部24中的參數(shù) 圖像生成部24b將根據(jù)人臉部分通過參數(shù)確定部24a分別確定的照明區(qū)域、照明方向和照 明強度作為照明處理參數(shù)來生成參數(shù)圖像，以供再次顯示。 圖8(b)是示出由參數(shù)圖像生成部24b生成的參數(shù)圖像與基于照明處理后的攝影 圖像的顯示用圖像進(jìn)行重疊顯示的情況的說明圖。在本實施方式中，構(gòu)成為生成例如照明 區(qū)域為圓圈形狀的標(biāo)記M1、照明方向為以標(biāo)記M1的中心為始點的箭頭形狀的標(biāo)記M2的參 數(shù)圖像，照明強度用箭頭形狀的標(biāo)記M2的長度顯示。此外，圖8(b)中示出的照明強度分布 的特性用于表示局部Y轉(zhuǎn)換的參考，在顯示部3上不進(jìn)行顯示。 接著，參照圖9和圖10對步驟S31的陰影修正處理進(jìn)行說明。圖9是示出步驟 S31的陰影修正處理的子程序，圖IO是示出針對陰影區(qū)域的陰影修正前后的圖像例的說明 圖。首先，在陰影區(qū)域修正之前，使用人臉檢測部23，從攝影圖像中檢測人臉位置和人臉區(qū) 域、以及眼睛、鼻子和嘴等的人臉器官(步驟S41、S42)。這是因為在鼻子等的附近產(chǎn)生陰 影。此時的檢測處理與前述的人臉檢測處理的情況相同即可。此外，陰影區(qū)域檢測部25a 根據(jù)這些檢測結(jié)果，檢測陰影區(qū)域(步驟S43)。在該檢測處理中，首先在檢測到的人臉區(qū)域 中提取亮度比人臉區(qū)域整體的平均亮度要低的區(qū)域來作為陰影區(qū)域。不過，例如以連接眼 睛和眼睛的線為基準(zhǔn)，從所提取的陰影區(qū)域排除人臉的上部，以不在陰影區(qū)域中包括頭發(fā)。 此外，頸圍容易成為陰影，但是因為不包括在人臉區(qū)域中，所以將在嘴下面的區(qū)域中與人臉 相同色調(diào)的區(qū)域增加到檢測到的陰影區(qū)域，從而在陰影區(qū)域中還包括從頸部到下巴的周圍 來設(shè)為修正對象。圖10(a)示出了如下情況例如在從被攝體側(cè)觀察時，從人臉的右側(cè)照射 環(huán)境光，在從被攝體側(cè)觀察時，提取出在人臉的右側(cè)和鼻子的右側(cè)用黑色涂抹表示的陰影 區(qū)域。還一并示出了在陰影區(qū)域中增加了頸圍的情況。 接著，陰影區(qū)域亮度提升部25b進(jìn)行僅提升所提取的陰影區(qū)域的亮度的陰影區(qū)域 亮度提升處理(步驟S44)。例如，圖10(b)示出了針對如圖10(a)所示提取出陰影部分(輪 廓)的人臉圖像進(jìn)行了陰影修正處理后的圖像。即，是模糊輪廓并且提升了陰影區(qū)域的亮 度。由此，頸部和人臉的陰影部分的亮度提升，成為與周圍融合的圖像。此時，以相對于所 提取的陰影區(qū)域認(rèn)識人臉以局部地增強噪聲濾波器的方式進(jìn)行處理。此外，陰影區(qū)域平滑 部25c僅針對所提取的陰影區(qū)域進(jìn)行平滑處理(步驟S45)。用于修正與提升陰影區(qū)域的亮
12度相伴的明暗的凹凸。 此外，陰影區(qū)域顏色噪聲抑制部25d進(jìn)行將檢測到的人臉區(qū)域的色相/彩度明顯 偏離的陰影區(qū)域的像素修正為與人臉區(qū)域的色相/彩度接近的顏色的陰影區(qū)域顏色噪聲 抑制處理(步驟S46) 。 S卩，在攝影時使用的反光板的情況下，實際上對人臉部分等照射反光 板的反射光來進(jìn)行拍攝，因此攝影圖像的數(shù)據(jù)中不包括噪聲。但是，如本實施方式的數(shù)字反 光板功能那樣，在伴隨基于數(shù)字?jǐn)?shù)據(jù)的圖像數(shù)據(jù)上的乘法等運算處理的情況下，包括噪聲 分量不可避免，產(chǎn)生與人臉的基本色遠(yuǎn)離的顏色即紅、藍(lán)、綠等顏色噪聲。尤其是，容易變成
陰影的下巴部分等僅是變亮將會浮現(xiàn)斑點圖案。因此，例如通過陰影區(qū)域顏色噪聲抑制部 25d使彩度降低，由此抑制顏色噪聲。 接著，參照圖11 圖17對圖6中示出的步驟S9的數(shù)字反光板顯示和步驟SIO的 數(shù)字反光板處理進(jìn)行說明。數(shù)字反光板處理是在數(shù)字反光板模式中，與是否通過人臉檢測 處理針對人臉部分進(jìn)行了自動的數(shù)字反光板處理無關(guān)地，根據(jù)針對顯示在顯示部3上的包 括照明處理的數(shù)字反光板處理后的攝影圖像(顯示用圖像)的用戶操作進(jìn)行的選擇性處 理。圖11和圖12是示出步驟S10的數(shù)字反光板處理的子程序，圖13 圖17是示出與用 戶操作對應(yīng)的參數(shù)圖像的顯示(數(shù)字反光板顯示)例的說明圖。 此處，在數(shù)字反光板處理之前，針對數(shù)字反光板顯示進(jìn)行說明。圖13是示出數(shù)字 反光板顯示的一個例子的說明圖。數(shù)字反光板顯示是將通過參數(shù)圖像生成部24b生成的參 數(shù)圖像與通過顯示圖像生成部16生成的顯示用圖像(照明處理后的攝影圖像)重疊顯示 在顯示部3上的顯示，供通過用戶操作來確定照明處理參數(shù)。 參數(shù)圖像生成部24b生成作為照明處理參數(shù)包括表示照明處理的被攝體像的范 圍的照明區(qū)域、表示照明處理中的虛擬照明方向的照明方向以及表示照明處理的強度的照 明強度在內(nèi)的參數(shù)圖像。此外，參數(shù)圖像生成部24b生成包括在默認(rèn)狀態(tài)下表示被攝體像 的亮度的最大值的部位的顯示在內(nèi)的參數(shù)圖像。 此時，在本實施方式中，例如如圖13所示那樣，設(shè)定為生成照明區(qū)域為表示大小 的圓圈形狀的標(biāo)記Ml 1以及位于標(biāo)記Ml 1外周的上下左右來表示移動方向的三角形狀的標(biāo) 記M12，照明方向為以標(biāo)記M11的中點為始點的箭頭形狀的標(biāo)記M2的參數(shù)圖像，照明強度用 箭頭形狀的標(biāo)記M2的長度顯示。此外，在默認(rèn)狀態(tài)下表示被攝體像的亮度的最大值的部位 的顯示設(shè)定為，用對例如吸取并利用該部位的亮度信息進(jìn)行圖像化而得到的吸液管形狀的 標(biāo)記M3顯示。 此外，作為這種重疊在顯示用圖像上的參數(shù)圖像的初始設(shè)定，將標(biāo)記Mll設(shè)定在 顯示部3的畫面中心位置上，將其大小設(shè)定為畫面的大約1/4。此外，將標(biāo)記M2設(shè)定在顯示 部3的畫面中心位置上，將箭頭的方向設(shè)定為從畫面中的較暗一方朝向較亮一方。此外，將 標(biāo)記M3設(shè)定為顯示在默認(rèn)狀態(tài)下被攝體像的亮度為最大值的部位。 此外，針對這些照明處理參數(shù)的選擇和該參數(shù)值的變更操作的對應(yīng)關(guān)系進(jìn)行說 明。例如，在參數(shù)設(shè)定按鈕4c的操作次數(shù)設(shè)為A時，作為能夠變更操作的照明處理參數(shù)，在 A = 0時選擇用標(biāo)記M12表示的照明區(qū)域的位置，在A = 1時選擇用標(biāo)記M2的長度、朝向表 示的照明強度和方向，在A = 2時選擇用標(biāo)記Mll的大小表示的照明范圍，在A = 3時選擇 用吸液管形狀的標(biāo)記M3表示的亮度信息提取位置。這些參數(shù)和操作部4的關(guān)系例如是，與 標(biāo)記M2的長度相當(dāng)?shù)恼彰鲝姸饶軌蛲ㄟ^操作前撥盤4d來變更參數(shù)值，標(biāo)記M2的強度方向和標(biāo)記Mil的大小的照明范圍能夠通過操作后撥盤4e來變更參數(shù)值，標(biāo)記M12、 M3的照明 區(qū)域的位置和亮度信息提取的位置能夠通過操作方向操作按鈕4g來變更參數(shù)值。此外，照 明顏色能夠通過操作WB按鈕4b和前撥盤4d或后撥盤4e來變更參數(shù)值。
在這種設(shè)定下，在數(shù)字反光板處理中，監(jiān)視參數(shù)設(shè)定按鈕4c是否從關(guān)閉變化到打 開(步驟S101)。在已變化的情況下(步驟S101 :是)，增加與參數(shù)設(shè)定按鈕4c的操作次數(shù) 相關(guān)的變量A(步驟S102)。此夕卜，在變量A比3大的情況下或比0小的情況下(步驟S103: 是)，將變量A的值返回到O以使變量A在0 3之間循環(huán)變化(步驟S104)。此外，在參 數(shù)設(shè)定按鈕4c沒有變化的情況下(步驟S101 :否)，跳過步驟S102的處理，在變量A在0 以上3以下的情況下(步驟S103 :否)，跳過步驟S104的處理。 接著，判定變量A的值。首先，在A = 0的情況下(步驟S105 :是)，例如在圖13 中用黑色涂抹區(qū)別所示，激活標(biāo)記M12(步驟S106)。 S卩，設(shè)為能夠進(jìn)行照明區(qū)域的位置變 更操作。此外，在A二1的情況下(步驟S107:是)，例如在圖14(a)中用黑色涂抹區(qū)別所 示，激活標(biāo)記M2(步驟S108)。 S卩，設(shè)為能夠進(jìn)行照明強度或方向的變更操作。此外，在A =2的情況下(步驟S109 :是)，例如在圖15(a)中用黑色涂抹區(qū)別所示，激活標(biāo)記M11(步 驟SllO)。即，設(shè)為能夠進(jìn)行照明區(qū)域的大小的變更操作。此外，在A二3的情況下(步驟 Slll :是)，例如在圖16中用黑色涂抹區(qū)別所示，激活標(biāo)記M3(步驟S112)。 S卩，設(shè)為能夠進(jìn) 行亮度信息提取位置的變更操作。此時，在標(biāo)記M3的外周上附加有表示上下左右的移動方 向的三角形狀的標(biāo)記M32。 接著，判定是否操作了方向操作按鈕4g(步驟S113)。在操作了方向操作按鈕4g 的情況下(步驟Sl 13 :是)，如果變量A = 0 (步驟Sl 14 :是)，則標(biāo)記M12處于激活狀態(tài)，按 照方向操作按鈕4g的操作在上下左右的任意一個方向上移動用標(biāo)記Mll所示的照明區(qū)域 的位置(步驟S115)。 如果不是A = 0(步驟S114:否)，而是變量A = 3(步驟S116 :是)，則標(biāo)記M3、 M32處于激活狀態(tài)，按照方向操作按鈕4g的操作在上下左右的任意一個方向上移動用標(biāo)記 M3所示的亮度信息提取位置(步驟S117)。接著，參數(shù)確定部24a從移動后的亮度信息提 取位置的圖像數(shù)據(jù)中提取亮度信息(步驟S118)，并使用所提取的亮度信息計算照明強度 (步驟S119)。 在沒有操作方向操作按鈕4g的情況下(步驟S113 :否)，跳過步驟S114 S119 的處理，判定是否操作了前撥盤4d(步驟S120)。在操作了前撥盤4d的情況下(步驟S120 : 是)，如果變量A = 1 (步驟S121 :是)，則標(biāo)記M2處于激活狀態(tài)，按照前撥盤4d的操作變 更用標(biāo)記M2的長度表示的照明強度(步驟S122)。圖14(b)示出了按照前撥盤4d的操作 變更標(biāo)記M2的長度(照明強度)的情況。 此外，判定是否操作了后撥盤4e(步驟S123)。在操作了后撥盤4e的情況下(步 驟S123 :是)，如果變量A = 1 (步驟S124 :是)，則標(biāo)記M2處于激活狀態(tài)，按照后撥盤4e的 操作旋轉(zhuǎn)移動標(biāo)記M2從而變更照明方向(步驟S125)。圖14(c)示出了按照后撥盤4e的 操作變更標(biāo)記M2的方向(照明方向)的情況。 另一方面，在操作了后撥盤4e的情況下，如果變量A = 2 (步驟S126 :是)，則標(biāo)記 Ml 1處于激活狀態(tài)，按照后撥盤4e的操作使標(biāo)記Ml 1在半徑方向上移動，由此變更照明范圍 (步驟S127)。圖15(b)示出了按照后撥盤4e的操作變更標(biāo)記M11的大小(照明范圍)的情況。 此外，在沒有操作前撥盤4d和后撥盤4e的情況下(步驟S120 :否、步驟S123 : 否)，或雖然進(jìn)行了操作但不是變量A = 1或A = 2的情況下(步驟S121 :否、步驟S124 : 否、步驟S126 :否)，跳過步驟S122、步驟S125和步驟S127的處理。 此外，在按下WB按鈕4b且操作了前撥盤4d或后撥盤4e的情況下(步驟S128 : 是)，按照撥盤操作變更照明顏色(步驟S129)。圖17如用陰影區(qū)別示出標(biāo)記M11部分那 樣，示出了按照撥盤操作變更標(biāo)記Mll的顏色的情況。即，隨著變更的照明顏色的色溫，變 更標(biāo)記M11部分的顯示顏色。 接著，照明加工部24c使用這樣通過用戶操作確定的照明區(qū)域、照明方向、照明強 度以及照明顏色的數(shù)據(jù)，針對攝影圖像中的人臉等的照明區(qū)域內(nèi)的被攝體像實施照明處理 (步驟S130)。此外，在攝影圖像中包括人臉部分的情況下，通過陰影修正處理部25進(jìn)行陰 影修正處理(步驟S131)，并且通過修補處理部26進(jìn)行修補處理(步驟S132)。這些處理 與步驟S30 S32的情況相同。 此外，進(jìn)行了這些照明處理等的一系列處理后的攝影圖像通過顯示圖像生成部16 生成為顯示用圖像并再次顯示在顯示部3上(步驟S133)，在按下0K按鈕4h之前，供用戶 再次確認(rèn)。 此外，雖然沒有特別圖示，但是即使在通過按下再現(xiàn)按鈕4i而設(shè)定為再現(xiàn)模式的 情況下，通過按下功能按鈕4f來設(shè)定為數(shù)字反光板模式，將再現(xiàn)圖像作為顯示用圖像來進(jìn) 行與步驟S9的情況相同的數(shù)字反光板顯示，并進(jìn)行與步驟SIO的情況相同的數(shù)字反光板處 理，由此也能夠進(jìn)行包括將再現(xiàn)圖像(攝影完畢的攝影圖像)設(shè)為對象的照明處理的數(shù)字 反光板處理。 由此，根據(jù)本實施方式，具有以從外部向攝影圖像的被攝體像施加虛擬照明的方 式，針對攝像圖像進(jìn)行基于預(yù)定圖像處理的模擬照明處理的照明處理部24，由此通過以從 外部向被攝體像施加虛擬照明的方式進(jìn)行預(yù)定的圖像處理，能夠不會有不協(xié)調(diào)感覺地減少 被攝體的陰影，能夠得到如使用了反光板那樣的高級的攝影圖像，而不用使用反光板。
此時，照明處理部24具有確定表示照明處理的條件的照明處理參數(shù)的參數(shù)確定 部24a，和作為表示照明處理參數(shù)的信息生成與照明處理后的攝影圖像重疊地顯示在顯示 部3上的參數(shù)圖像的參數(shù)圖像生成部24b，因此，能夠一邊觀察照明處理后的攝影圖像，一 邊通過參照重疊后的參數(shù)圖像來用簡單的操作容易地進(jìn)行基于用戶操作的照明處理參數(shù) 的確定。 此外，參數(shù)確定部24a確定包括照明處理的被攝體像的范圍、照明處理中的虛擬 照明方向、照明處理的強度以及照明處理中的白平衡在內(nèi)的參數(shù)來作為照明處理參數(shù)，因 此能夠進(jìn)行適當(dāng)?shù)恼彰魈幚?。尤其是關(guān)于照明處理的強度，基本上根據(jù)被攝體像的亮度的 最大值來確定，因此能夠進(jìn)行適當(dāng)?shù)膹姸刃拚４藭r，參數(shù)圖像生成部24b使參數(shù)圖像包括 表示被攝體像的亮度的最大值的部位的顯示，因此用戶容易明白。 此外，參數(shù)圖像生成部24b生成作為照明處理參數(shù)包括表示照明處理的被攝體像 的范圍的照明區(qū)域、表示照明處理中的虛擬照明方向的照明方向以及表示照明處理的強度 的照明強度在內(nèi)的參數(shù)圖像，因此，在通過用戶操作確定照明處理參數(shù)時，成為確定對象的 照明處理參數(shù)容易明白，從而提高操作性。
此外，根據(jù)本實施方式，照明處理部24針對存儲在SDRAM15中的攝影圖像實施照
明處理，在指示保存照明處理后的攝影圖像的情況下，將照明處理后的攝影圖像保存記錄
到記錄部21中，因此，能夠如期望地適當(dāng)?shù)乇４嬗涗浾彰魈幚砗蟮臄z影圖像。 此外，根據(jù)本實施方式，還包括在攝影圖像中檢測人臉部分的人臉檢測部23，因此
在人像攝影那樣的情況下，能夠針對檢測到的人臉部分自動實施使用了根據(jù)人臉部分具有
的圖像信息自動確定的照明處理參數(shù)的照明處理，并且還能夠適當(dāng)?shù)貙嵤┦褂昧送ㄟ^用戶
操作確定的照明處理參數(shù)的用戶期望的照明處理。 此外，根據(jù)本實施方式的數(shù)字反光板功能部22，除了照明處理部24以外，還具有
陰影修正處理部25和修補處理部26，因此能夠在人像攝影那樣的情況下，針對攝影圖像中
的被攝體像實施更有效的修正處理。尤其是，陰影修正處理部25具有對檢測到的人臉部分
的陰影區(qū)域進(jìn)行檢測的陰影區(qū)域檢測部25a、提升陰影區(qū)域的亮度的陰影區(qū)域亮度提升部
25b、針對陰影區(qū)域進(jìn)行平滑處理的平滑處理部25c以及修正陰影區(qū)域的顏色的陰影區(qū)域
顏色噪聲抑制部25d，因此，能夠適當(dāng)?shù)匦拚鄬τ谌四槻糠值年幱皡^(qū)域。 此外，在此前的說明中，針對測試攝影到的圖像進(jìn)行數(shù)字反光板處理的情況進(jìn)行
了說明，但是數(shù)字反光板處理的定時不限于此。只要能夠高速進(jìn)行數(shù)字反光板處理，則也可
以在即時取景圖像的顯示中執(zhí)行數(shù)字反光板處理，將數(shù)字反光板處理后的圖像作為即時取
景圖像進(jìn)行顯示。由此，能夠在即時取景圖像中確認(rèn)數(shù)字反光板的效果來進(jìn)行攝影，或者還
能夠簡單地適當(dāng)設(shè)定數(shù)字反光板的各條件。 本發(fā)明不限于上述實施方式，在不脫離本發(fā)明的主旨的范圍內(nèi)，能夠進(jìn)行各種變 形。例如，針對本實施方式中的圖6 圖7、圖9、圖11 圖12所示的各處理功能，在圖3 所示的框圖中，以通過數(shù)字反光板功能部22等的硬件、控制部11的軟件來進(jìn)行處理的方式 進(jìn)行了說明，但是構(gòu)成的具體例不限于此。設(shè)計事項是通過硬件處理和軟件處理的任意一 個或適當(dāng)組合它們而進(jìn)行的。例如，也可以通過軟件處理來實現(xiàn)數(shù)字反光板功能部22的所 有處理。 此外，在實施方式的全部或一部分用軟件處理來執(zhí)行處理的情況下，控制部11讀 取存儲在程序數(shù)據(jù)存儲部13中的照明處理用程序(數(shù)字反光板處理用程序)并執(zhí)行即可， 這種與軟件處理相關(guān)的照明處理用程序也成為本發(fā)明。此外，記錄有這種照明處理用程序 的記錄介質(zhì)也成為本發(fā)明。此外，作為存儲程序的記錄介質(zhì)，不限于閃存，還可以是CD-ROM、 DVD-R0M等光學(xué)記錄介質(zhì)、MD等磁記錄介質(zhì)、磁帶介質(zhì)和IC卡等半導(dǎo)體存儲器。此外，作為 照明處理用程序，當(dāng)然還包括經(jīng)由網(wǎng)絡(luò)從外部的記錄介質(zhì)取得的程序，例如從主頁下載的 程序。在這種情況下，用戶用來下載的WWW服務(wù)器和ftp服務(wù)器等也包括在本發(fā)明的范圍 內(nèi)。 此外，在本實施方式中，以在數(shù)字照相機1中安裝了該數(shù)字反光板功能部22的例
子進(jìn)行了說明，但當(dāng)然不限于此。上述實施方式的數(shù)字反光板功能部22也可以作為照明處
理裝置適用于便攜電話或圖像顯示裝置(圖像瀏覽器)。此外，作為攝像裝置不限于數(shù)字照
相機1，也可以適用于例如個人計算機的照相機部或便攜電話的照相機部等。 進(jìn)一步的效果和變形例能夠由本領(lǐng)域技術(shù)人員容易地推導(dǎo)出。由此，本發(fā)明的更
寬泛的形式不限于以上那樣表達(dá)且記述的特定的詳細(xì)的且有代表性的實施方式。由此，只
要不脫離通過附件的權(quán)利要求和其對等物定義的總括的發(fā)明的概念精神或范圍，則能夠進(jìn)行各種變更。
權(quán)利要求
一種攝像裝置，其特征在于，該攝像裝置具有攝像部，其輸出被攝體像作為攝影圖像；照明處理部，其以從外部對攝影圖像的被攝體像施加虛擬照明的方式，針對所述攝影圖像進(jìn)行基于預(yù)定圖像處理的模擬照明處理；顯示圖像生成部，其根據(jù)所述照明處理后的攝影圖像生成顯示用圖像；顯示部，其顯示所述顯示用圖像；以及記錄部，其記錄所述照明處理后的攝影圖像，所述照明處理部具有參數(shù)確定單元，其確定表示所述照明處理的條件的照明處理參數(shù)；參數(shù)圖像生成單元，其生成與所述照明處理后的攝影圖像重疊地顯示在所述顯示部上的參數(shù)圖像，作為表示所述照明處理參數(shù)的信息；以及照明加工單元，其根據(jù)所確定的所述照明處理參數(shù)來對所述攝影圖像進(jìn)行照明處理。
2. 根據(jù)權(quán)利要求1所述的攝像裝置，其特征在于，所述參數(shù)確定單元確定包括所述照 明處理的被攝體像的范圍、所述照明處理中的虛擬照明方向、所述照明處理的強度以及所 述照明處理中的白平衡在內(nèi)的參數(shù)，作為所述照明處理參數(shù)。
3. 根據(jù)權(quán)利要求1所述的攝像裝置，其特征在于，所述參數(shù)確定單元根據(jù)被攝體像的 亮度的最大值來確定所述照明處理的強度。
4. 根據(jù)權(quán)利要求1所述的攝像裝置，其特征在于，所述參數(shù)圖像生成單元使所述參數(shù) 圖像包括表示被攝體像的亮度的最大值的部位的顯示。
5. 根據(jù)權(quán)利要求1所述的攝像裝置，其特征在于，所述參數(shù)圖像生成單元生成參數(shù)圖 像，所述參數(shù)圖像作為所述照明處理參數(shù)包括表示所述照明處理的被攝體像的范圍的照明 區(qū)域、表示所述照明處理中的虛擬照明方向的照明方向以及表示所述照明處理的強度的照 明強度。
6. 根據(jù)權(quán)利要求1所述的攝像裝置，其特征在于，所述照明處理部針對存儲在臨時存 儲部中的所述攝影圖像實施照明處理，所述記錄部在被指示保存所述照明處理后的攝影圖像的情況下，保存記錄該照明處理 后的攝影圖像。
7. 根據(jù)權(quán)利要求l所述的攝像裝置，其特征在于，該攝像裝置還具有人臉檢測部，所述人臉檢測部在攝影圖像中檢測人臉部分， 在所述參數(shù)確定單元中，根據(jù)檢測到的人臉部分的大小，確定所述照明處理的被攝體像的范圍即照明區(qū)域， 將所述照明處理中的虛擬照明方向即照明方向確定為相對于檢測到的人臉部分的實際環(huán)境光方向的相反方向，根據(jù)檢測到的人臉部分的最大亮度或人臉部分的陰影亮度的至少任意一個，確定所述照明處理的強度即照明強度。
8. 根據(jù)權(quán)利要求7所述的攝像裝置，其特征在于，所述參數(shù)圖像生成單元將由所述參 數(shù)確定單元分別確定的照明區(qū)域、照明方向以及照明強度作為所述照明處理參數(shù)，生成參 數(shù)圖像。
9. 一種照明處理裝置，其特征在于，該照明處理裝置具有參數(shù)確定單元，其確定照明處理參數(shù)，所述照明處理參數(shù)表示以從外部對攝影圖像的 被攝體像施加虛擬照明的方式，針對所述攝影圖像通過預(yù)定的圖像處理模擬進(jìn)行的照明處 理的條件；參數(shù)圖像生成單元，其生成與所述照明處理后的攝影圖像重疊地進(jìn)行顯示的參數(shù)圖 像，作為表示所確定的所述照明處理參數(shù)的信息；以及照明加工單元，其根據(jù)所確定的所述照明處理參數(shù)來對所述攝影圖像進(jìn)行照明處理。
10. 根據(jù)權(quán)利要求9所述的照明處理裝置，其特征在于，該照明處理裝置還具有人臉檢測部，所述人臉檢測部在攝影圖像中檢測人臉部分， 在所述參數(shù)確定單元中，根據(jù)人臉部分的大小，確定所述照明處理的被攝體像的范圍即照明區(qū)域， 將所述照明處理中的虛擬照明方向即照明方向確定為相對于檢測到的人臉部分的實際環(huán)境光方向的相反方向，根據(jù)人臉部分的最大亮度或人臉部分的陰影亮度的至少任意一個，確定所述照明處理的強度即照明強度。
11. 一種照明處理方法，其特征在于，該照明處理方法具有參數(shù)確定步驟，確定照明處理參數(shù)，所述照明處理參數(shù)表示以從外部對攝影圖像的被 攝體像施加虛擬照明的方式，針對所述攝影圖像通過預(yù)定的圖像處理模擬進(jìn)行的照明處理 的條件；參數(shù)圖像生成步驟，生成與所述照明處理后的攝影圖像重疊地進(jìn)行顯示的參數(shù)圖像， 作為表示所確定的所述照明處理參數(shù)的信息；以及照明加工步驟，根據(jù)所確定的所述照明處理參數(shù)來對所述攝影圖像進(jìn)行照明處理。
12. —種照明處理裝置，其特征在于，該照明處理裝置具有 人臉檢測部，其在攝影圖像中檢測人臉部分；照明處理部，其以從外部對所述檢測到的人臉部分施加虛擬照明的方式，針對所述檢 測到的人臉部分進(jìn)行基于預(yù)定圖像處理的模擬照明處理；陰影修正處理部，其檢測在所述檢測到的人臉部分上產(chǎn)生的陰影，并修正檢測到的陰 影；以及修補處理部，其按照所述檢測到的人臉部分的各器官來進(jìn)行特定的圖像處理。
13. 根據(jù)權(quán)利要求12所述的照明處理裝置，其特征在于， 所述陰影修正處理部具有陰影區(qū)域檢測部，其檢測所述檢測到的人臉部分的陰影區(qū)域； 陰影區(qū)域亮度提升部，其提升所述檢測到的陰影區(qū)域的亮度； 平滑處理部，其針對所述檢測到的陰影區(qū)域進(jìn)行平滑處理；以及 陰影區(qū)域顏色噪聲抑制部，其修正所述檢測到的陰影區(qū)域的顏色。
14. 根據(jù)權(quán)利要求12所述的照明處理裝置，其特征在于，所述修補處理部對所述檢測 到的人臉的眼睛部分施加攝影光線圖像，作為所述特定的圖像處理。
15. —種照明處理方法，其特征在于，該照明處理方法具有 人臉檢測步驟，在攝影圖像中檢測人臉部分；照明處理步驟，以從外部對所述檢測到的人臉部分施加虛擬照明的方式，針對所述檢測到的人臉部分進(jìn)行基于預(yù)定圖像處理的模擬照明處理；陰影修正步驟，檢測在所述檢測到的人臉部分上產(chǎn)生的陰影，并修正檢測到的陰影；以及修補處理步驟，按照所述檢測到的人臉部分的各器官來進(jìn)行特定的圖像處理。
全文摘要
本發(fā)明涉及攝像裝置、照明處理裝置以及照明處理方法。攝像裝置或照明裝置具有照明處理部，該照明處理部以從外部對攝影圖像的被攝體像施加虛擬照明的方式，針對攝影圖像進(jìn)行基于預(yù)定圖像處理的模擬照明處理。該照明處理部具有參數(shù)確定部、參數(shù)圖像生成部和照明加工部。參數(shù)確定部確定表示照明處理的條件的照明處理參數(shù)。參數(shù)圖像生成部生成與照明處理后的攝影圖像重疊地顯示在顯示部上的參數(shù)圖像，作為表示照明處理參數(shù)的信息。照明加工部根據(jù)所確定的照明處理參數(shù)來對攝影圖像進(jìn)行照明處理。
文檔編號G06T5/00GK101753814SQ20091025121
公開日2010年6月23日 申請日期2009年12月3日 優(yōu)先權(quán)日2008年12月3日
發(fā)明者國重惠二 申請人:奧林巴斯映像株式會社