專利名稱：圖像選擇裝置、圖像選擇方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種從多個(gè)圖像中選擇任意的圖像的圖像選擇裝置、圖像選擇方法。
背景技術(shù)：
以往，周知一種數(shù)碼相機(jī)，具有連續(xù)攝影從而生成多個(gè)圖像數(shù)據(jù)的功能。近年來隨 著可以連續(xù)拍攝的張數(shù)的增加，由用戶自己進(jìn)行的選擇操作變得非常麻煩。作為消除這種 麻煩的方法，周知選擇全體人員睜開眼睛的集體照的圖像處理系統(tǒng)(例如，參照專利文獻(xiàn) 1)。[專利文獻(xiàn)1]特開2007-88594號(hào)公報(bào)但是，僅由集體照中是否全體人員睜開眼睛的判定進(jìn)行選擇的情況下，有可能出 現(xiàn)所選擇的照片為零。

發(fā)明內(nèi)容
因此，本發(fā)明的課題是提供一種能夠恰當(dāng)并且簡便地進(jìn)行圖像的選擇的圖像選擇 裝置、圖像選擇方法。根據(jù)本發(fā)明的一個(gè)方面提供一種圖像選擇裝置，具有取得單元，其取得將一個(gè)人 以上的人作為被攝體進(jìn)行連續(xù)攝像而生成的多個(gè)攝像圖像；臉檢測單元，其檢測由所述取 得單元所取得的所述多個(gè)攝像圖像中含有的人臉(human faces)；眼睛檢測單元，從由所述 臉檢測單元檢測出的所述人臉檢測眼睛；眨眼檢測單元，檢測由所述眼睛檢測單元檢測出 的所述各個(gè)眼睛的眨眼程度(blink degrees)；評(píng)價(jià)單元，基于由所述眨眼檢測單元檢測出 的所述眨眼程度，評(píng)價(jià)所述人臉的狀態(tài)(status)；以及指定單元，基于由所述評(píng)價(jià)單元作 出的所述評(píng)價(jià)，從由所述取得單元取得的所述多個(gè)攝像圖像中指定(select)記錄在記錄 介質(zhì)中的至少一幅攝像圖像。根據(jù)本發(fā)明另一個(gè)方面提供一種圖像選擇方法，其特征在于，包含取得將一個(gè)人 以上的人作為被攝體進(jìn)行連續(xù)攝像而生成的多個(gè)攝像圖像的步驟；進(jìn)行臉檢測處理的步 驟，所述臉檢測處理檢測所述多個(gè)攝像圖像中含有的人臉；進(jìn)行眼睛檢測處理的步驟，所述 眼睛檢測處理從由所述臉檢測處理檢測出的所述人臉檢測眼睛；進(jìn)行眨眼檢測處理的步 驟，所述眨眼檢測處理檢測由所述眼睛檢測處理檢測出的所述眼睛各自的眨眼程度；基于 由所述眨眼檢測處理檢測出的所述眨眼程度，評(píng)價(jià)所述人臉的狀態(tài)的步驟；以及，基于所述 評(píng)價(jià)，從所述多個(gè)攝像圖像中指定記錄在記錄介質(zhì)中的至少一幅攝像圖像的步驟。


圖1是表示應(yīng)用本發(fā)明的一實(shí)施方式的攝像裝置的概略結(jié)構(gòu)的框圖。圖2是表示由圖1的攝像裝置進(jìn)行的圖像選擇處理中的動(dòng)作的一例的流程圖。圖3是表示圖2的圖像選擇處理的后續(xù)的流程圖。圖4是表示涉及圖2的圖像選擇處理中的眨眼檢測處理的動(dòng)作的一例的流程圖。
5
圖5是示意地表示圖4的眨眼檢測處理中的被攝體的眼睛的圖像部分的圖。圖6是表示變形例的攝像裝置的概略結(jié)構(gòu)的框圖。圖7是表示由圖6的攝像裝置進(jìn)行的圖像選擇處理中的動(dòng)作的一例的流程圖。
具體實(shí)施例方式圖1是表示應(yīng)用本發(fā)明的一實(shí)施方式的攝像裝置100的概略結(jié)構(gòu)的框圖。本實(shí)施方式的攝像裝置100，從由連續(xù)攝影而生成的多個(gè)圖像幀檢測人的臉，計(jì)算 檢測出的人臉的眼睛的眨眼評(píng)價(jià)值，并基于計(jì)算出的眨眼評(píng)價(jià)值對(duì)人臉的狀態(tài)進(jìn)行評(píng)價(jià)， 基于該人臉的狀態(tài)的評(píng)價(jià)從多個(gè)圖像幀中指定存儲(chǔ)于記錄介質(zhì)13中的一幅攝像圖像。具體而言，如圖1所示，攝像裝置100具有鏡頭部1、電子攝像部2、攝像控制部3、 圖像數(shù)據(jù)生成部4、圖像存儲(chǔ)器5、臉檢測部6、眼睛檢測部7、笑臉檢測部8、眨眼檢測部9、 抖動(dòng)檢測部10、圖像指定部11、顯影部12、記錄介質(zhì)13、顯示控制部14、顯示部15、操作輸 入部 16、CPU17。另外，攝像控制部3、臉檢測部6、眼睛檢測部7、笑臉檢測部8、眨眼檢測部9、抖動(dòng) 檢測部10、圖像指定部11、顯影部12、CPU17，例如作為定制LSI 1A進(jìn)行設(shè)計(jì)。鏡頭部1由多個(gè)透鏡構(gòu)成，具有變焦透鏡和聚焦透鏡等。另外，雖然省略了圖示，但是鏡頭部1可以具有在被攝體的攝像時(shí)使變焦透鏡在 光軸方向移動(dòng)的變焦驅(qū)動(dòng)部、以及使聚焦透鏡在光軸方向移動(dòng)的對(duì)焦驅(qū)動(dòng)部等。電子攝像部2例如由CCD (Charge Coupled Device 電荷耦合裝置)或 CMOS (Complementary Metal-Oxide Semiconductor 互補(bǔ)金屬氧化物半導(dǎo)體)等的圖像傳 感器構(gòu)成，將透過了鏡頭部1的各種透鏡的光學(xué)像轉(zhuǎn)換為二維的圖像信號(hào)。攝像控制部3中，雖然圖示省略但是具有定時(shí)發(fā)生器、驅(qū)動(dòng)器等。并且，攝像控制 部3由定時(shí)發(fā)生器、驅(qū)動(dòng)器對(duì)電子攝像部2進(jìn)行掃描驅(qū)動(dòng)，每規(guī)定周期由電子攝像部2將光 學(xué)像轉(zhuǎn)換為二維圖像信號(hào)，從該電子攝像部2的攝像區(qū)域以1畫面為單位逐次讀出圖像幀 并輸出至圖像數(shù)據(jù)生成部4。另外，攝像控制部3，進(jìn)行AF(自動(dòng)對(duì)焦處理)、AE(自動(dòng)曝光處理)、AWB(自動(dòng)白 平衡處理)等對(duì)被攝體進(jìn)行攝像時(shí)的條件的調(diào)整控制。這樣構(gòu)成的攝像鏡頭1、電子攝像部2以及攝像控制部3，作為攝像單元，對(duì)被攝體 以規(guī)定的幀率(例如，3fps或lOfps)連續(xù)攝像從而逐次生成并取得多個(gè)(例如20張)圖 像幀。圖像數(shù)據(jù)生成部4，對(duì)從電子攝像部2傳輸?shù)膱D像幀的模擬值信號(hào)以RGB的各顏色 分量分別進(jìn)行適當(dāng)增益調(diào)整之后，由采樣保持電路(省略圖示)進(jìn)行采樣保持并由A/D轉(zhuǎn) 換器(省略圖示)轉(zhuǎn)換為數(shù)字?jǐn)?shù)據(jù)從而生成RAW圖像數(shù)據(jù)。另外，圖像數(shù)據(jù)生成部4在水 平以及垂直方向都以規(guī)定倍率對(duì)RAW圖像數(shù)據(jù)的亮度信號(hào)進(jìn)行降低處理，從而生成低清晰 度的降低亮度圖像數(shù)據(jù)。RAW圖像數(shù)據(jù)以及降低亮度圖像數(shù)據(jù)，經(jīng)由并未圖示的DMA控制器，DMA傳輸至作 為緩沖存儲(chǔ)器使用的圖像存儲(chǔ)器5。圖像存儲(chǔ)器5，例如由DRAM等構(gòu)成，暫時(shí)存儲(chǔ)由臉檢測部6、眼睛檢測部7、笑臉檢 測部8、眨眼檢測部9、抖動(dòng)檢測部10、圖像指定部11、CPU17等進(jìn)行處理的數(shù)據(jù)等。
臉檢測部6，利用規(guī)定的臉檢測方法從多個(gè)圖像幀的各降低亮度圖像數(shù)據(jù)中檢測 人臉。具體而言，臉檢測部6基于暫時(shí)存儲(chǔ)在圖像存儲(chǔ)器5中的降低亮度圖像數(shù)據(jù)從各圖 像幀檢測臉圖像區(qū)域，將檢測出的臉圖像區(qū)域內(nèi)的圖像信息作為臉輪廓(face frame)信息 而生成。此外，由于臉檢測處理是公知的技術(shù)，因此在此省略其詳細(xì)說明。另外，對(duì)于臉檢測處理中沒有檢測到臉的圖像幀，以前后的圖像幀之中、最近檢測 出臉的臉圖像區(qū)域的坐標(biāo)為基礎(chǔ)在沒有檢測到臉的圖像幀中設(shè)定臉輪廓信息。也就是說，由于連續(xù)攝影中攝像間隔是極短的時(shí)間，因此從任意一幅圖像幀檢測 到臉時(shí)，可以認(rèn)為在其前后的圖像幀中也存在人臉，利用檢測出臉的圖像幀的臉圖像區(qū)域 的坐標(biāo)(例如，矩形框的四角的坐標(biāo))，在沒有檢測出臉的圖像幀中也設(shè)定臉輪廓信息。眼睛檢測部7基于由臉檢測部7生成的各圖像幀的臉輪廓信息檢測人臉的眼睛。 具體而言，眼睛檢測部7基于各圖像幀的臉輪廓信息檢測各圖像幀的所有人的左右兩眼， 并計(jì)算其中心坐標(biāo)。另外，由于眼睛檢測處理是公知的技術(shù)，因此在此省略其詳細(xì)說明。在此，眼睛檢測部7構(gòu)成眼睛檢測單元，該眼睛檢測單元從臉檢測部6檢測出的人 臉中檢測出眼睛。另外，眼睛檢測部7具有可靠性計(jì)算部7a、有效性判定部7b?？煽啃杂?jì)算部7a，作為可靠性計(jì)算單元，計(jì)算由眼睛檢測部7進(jìn)行的眼睛檢測中 的檢測可靠性。具體而言，可靠性計(jì)算部7a例如計(jì)算如下的檢測可靠性，該檢測可靠性在 臉檢測輪廓不合適時(shí)或臉朝向側(cè)面時(shí)等被以降低可靠性的方式調(diào)整。有效性判定部7b作為有效性判定單元，根據(jù)由可靠性計(jì)算部7a計(jì)算出的檢測可 靠性是否比規(guī)定閾值高，來判定檢測出眼睛的臉的有效性。再有，有效性判定部7b在檢測 可靠性為規(guī)定閾值以下時(shí)，通過使該眼睛檢測中的臉為NG判定，從而設(shè)定為眼睛檢測無效 的臉，在之后的眨眼檢測處理(后面敘述)或笑臉檢測處理(后面敘述)中也不利用。另 一方面，有效性判定部7b在檢測可靠性比規(guī)定閾值大時(shí)，通過使該眼睛檢測中的臉為0K判 定從而設(shè)定為眼睛檢測有效的臉，在之后的眨眼檢測處理或笑臉檢測處理中利用。笑臉檢測部8基于由眼睛檢測部7檢測出的眼睛位置信息，對(duì)該檢測出眼睛的臉 的微笑程度進(jìn)行檢測。具體而言，笑臉檢測部8對(duì)由連續(xù)攝影而生成的全部的圖像幀的降 低亮度圖像數(shù)據(jù)，基于由有效性判定部7b判定為有效的人臉的左右雙眼的坐標(biāo)信息，在降 低亮度圖像內(nèi)尋找嘴的位置，根據(jù)嘴角的上揚(yáng)程度計(jì)算微笑值。在此，笑臉檢測部8構(gòu)成笑臉檢測單元，該笑臉檢測單元基于由眼睛檢測部7檢測 出的眼睛的位置信息，對(duì)該檢測出眼睛的臉的微笑值(微笑程度)進(jìn)行檢測。眨眼檢測部9檢測由眼睛檢測部7檢測出的眼睛的眨眼程度。具體而言，眨眼檢測 部9對(duì)由連續(xù)攝影而生成的全部圖像幀的降低亮度圖像數(shù)據(jù)，基于由有效性判定部7b判定 為有效的人臉的眼睛的左右雙眼的坐標(biāo)信息，在降低亮度圖像上設(shè)定眨眼檢測窗口 W(參 照圖5 (a))，對(duì)該窗口內(nèi)的各柱C (參照圖5 (b))計(jì)算評(píng)價(jià)值，將最小的評(píng)價(jià)值的補(bǔ)數(shù)作為眨 眼評(píng)價(jià)值計(jì)算出來。也就是說，眨眼檢測部9將由眼睛檢測部7檢測出的眼睛的睜開程度 作為眨眼評(píng)價(jià)值進(jìn)行計(jì)算。由此，作為眨眼評(píng)價(jià)值，其值越大表示眼睛睜開得越大。另外，對(duì)于眨眼檢測處理的具體的處理內(nèi)容將在后面進(jìn)行敘述(參照圖4)。在此，眨眼檢測部9構(gòu)成眨眼檢測單元，該眨眼檢測單元對(duì)由眼睛檢測部7檢測出 的眼睛的眨眼評(píng)價(jià)值(眨眼程度)進(jìn)行檢測。
7
此外，眨眼檢測部9具有平滑部9a，該平滑部9a在相鄰圖像之間對(duì)檢測出的眨 眼評(píng)價(jià)值進(jìn)行平滑處理。具體而言，平滑部9a在連續(xù)攝影時(shí)的攝像幀率為規(guī)定值(例如， lOfps)以上時(shí)，在相鄰的前后圖像幀的眨眼評(píng)價(jià)值之間對(duì)檢測出的各圖像幀的眨眼評(píng)價(jià)值 進(jìn)行加法平均，從而進(jìn)行平滑。也就是說，在攝像幀率(連續(xù)攝像速度)為規(guī)定值以上時(shí)， 由于在相鄰的圖像幀之間相關(guān)性高，因此在眼睛全部睜開的圖像幀與全部閉眼的圖像幀中 間存在眼睛一部分睜開的圖像幀時(shí)，即使該圖像幀的眨眼評(píng)價(jià)值的值有少許偏差也能夠容 易地取得中間值。在此，平滑部9a構(gòu)成平滑單元，該平滑單元在攝像幀率為規(guī)定值以上時(shí)，在相鄰 圖像間對(duì)檢測出的眨眼評(píng)價(jià)值(眨眼程度)進(jìn)行平滑。另外，眨眼檢測部9具有眨眼修正部％，該眨眼修正部9b根據(jù)由笑臉檢測部8檢 測出的微笑值對(duì)檢測出的眨眼評(píng)價(jià)值進(jìn)行修正。具體而言，眨眼修正部9b判定微笑值是否 比規(guī)定閾值低，該判定的結(jié)果，即判定為微笑值為規(guī)定閾值以上時(shí)，以如下公式增加眨眼評(píng) 價(jià)值。眨眼評(píng)價(jià)值+ = k* (微笑值_閾值)在此，k為規(guī)定常數(shù)。也就是說，由于一般情況下人臉在微笑時(shí)眼睛多會(huì)迷起來，因此微笑值為規(guī)定閾 值以上時(shí)，以半睜開的眼睛評(píng)價(jià)為全睜開的程度的方式，將眨眼評(píng)價(jià)值修正為更加適當(dāng)?shù)闹?。在此，眨眼修正?b構(gòu)成眨眼修正單元，該眨眼修正單元根據(jù)由笑臉檢測部8檢 測出的微笑值，對(duì)檢測出的眨眼評(píng)價(jià)值(眨眼程度)進(jìn)行修正。另外，眨眼檢測部9具有閾值計(jì)算部9c，該閾值計(jì)算部9c基于檢測出的每個(gè)人的 眨眼程度，計(jì)算相應(yīng)人的眼睛是否睜開的判定中的閾值。在此，由于眨眼評(píng)價(jià)值對(duì)眼睛大小、睫毛濃密等的個(gè)人特性的依賴性較大，因此閾 值計(jì)算部9c對(duì)每個(gè)人設(shè)定眨眼判定用的閾值。另外，因?yàn)樵O(shè)定為可以正確區(qū)別睜眼的狀態(tài) 較難，所以閾值計(jì)算部9c對(duì)每個(gè)人將從上位起位于一定比例的眨眼評(píng)價(jià)值作為臨時(shí)閾值 Thl而設(shè)定，若為該臨時(shí)閾值Thl以上則判斷眨眼判定OK。另外，眨眼判定用的閾值，雖然優(yōu)選以將眼睛半睜開的狀態(tài)不判斷為眨眼判定OK 的方式而盡量設(shè)定得大，但是若將其增大從而將閾值設(shè)定得過于嚴(yán)格，則如集體照這種的 攝影人數(shù)較多的情況下，有可能選擇不出判定全體人員都睜開眼睛的圖像。因此，閾值計(jì) 算部9c以根據(jù)攝影人數(shù)改變閾值的方式進(jìn)行設(shè)定。例如，以保留眼睛檢測出的圖像幀之 中、規(guī)定比例(例如比例為N)的圖像幀的方式，將對(duì)于每個(gè)人位于N~(l/人數(shù))的比例 的上位評(píng)價(jià)值作為臨時(shí)閾值Thl進(jìn)行設(shè)定。具體而言，例如對(duì)于作為被攝體有3人進(jìn)入 視場內(nèi)的連續(xù)圖像，要由眨眼檢測進(jìn)行選擇從而最后保留全體的20%的圖像時(shí)，每個(gè)人為 0. 2" (1/3) ^ 0. 58，即，所設(shè)定的臨時(shí)閾值Thl，將從上位起位于大約60%的眨眼評(píng)價(jià)值作 為判斷為眨眼判定0K。再有，閾值對(duì)于對(duì)象人的眨眼評(píng)價(jià)值的最大值過近時(shí)或者過遠(yuǎn)時(shí)，由于考慮到作 為閾值是不合適的，因此閾值計(jì)算部9c將眨眼評(píng)價(jià)值的最大值作為基準(zhǔn)，通過由規(guī)定的指 定值，根據(jù)下面的公式進(jìn)行臨時(shí)閾值Thl的上限值以及下限值的限幅處理，從而計(jì)算判定 用的真閾值Th2。
8
If (Thl > Bmax-0fstl)Th2 = Bmax-Ofstl ；else if (Th 1 < Bmax+Ofst2)Th2 = Bmax+Ofst2 ；else Th2 = Thl ；在此，Bmax是每個(gè)人的眨眼評(píng)價(jià)值的最大值，Ofstl是上限限幅偏移量，0fst2是 下限限幅偏移量，Thl是眨眼判定用的臨時(shí)閾值，Th2是眨眼判定用的真閾值。這樣，閾值計(jì)算部9c構(gòu)成閾值計(jì)算單元，該閾值計(jì)算單元基于檢測出的每個(gè)人的 眨眼評(píng)價(jià)值(眨眼程度)，計(jì)算判定相應(yīng)人的眼睛是否睜開的真閾值Th2。另外，眨眼檢測部9具有眨眼判定部9d，該眨眼判定部9d對(duì)由連續(xù)攝影而生成的 多個(gè)圖像幀的降低亮度圖像數(shù)據(jù)，判定各個(gè)人的眼睛是否睜開。具體而言，眨眼判定部9d 對(duì)由閾值計(jì)算部9c計(jì)算出的眨眼判定用的真閾值Th2與各圖像幀的各個(gè)人的眨眼評(píng)價(jià)值 進(jìn)行比較，判定該眨眼評(píng)價(jià)值是否為真閾值Th2以上，該判定結(jié)果判定為眨眼評(píng)價(jià)值為真 閾值Th2以上時(shí)，判斷為眨眼判定OK(睜眼)；另一方面，判定眨眼評(píng)價(jià)值比真閾值Th2小 時(shí)，判斷為眨眼判定NG(閉眼)。在此，眨眼判定部9d構(gòu)成眨眼判定單元，該眨眼判定單元基于由閾值計(jì)算部9c計(jì) 算出的眨眼判定用的真閾值Th2，對(duì)由連續(xù)攝影而生成的多個(gè)圖像幀判定各個(gè)人的眼睛是 否睜開。抖動(dòng)檢測部10對(duì)由連續(xù)攝影而生成的多個(gè)圖像幀的每一個(gè)，檢測對(duì)相鄰圖像幀 的抖動(dòng)評(píng)價(jià)值(抖動(dòng)量)。具體而言，抖動(dòng)檢測部10在從由連續(xù)攝影而生成的多個(gè)圖像幀 的降低亮度圖像數(shù)據(jù)中通過臉檢測處理沒有檢測出人臉時(shí)、或雖然從某圖像幀檢測出人臉 但眼睛檢測有效的臉數(shù)為0時(shí)，將各圖像幀塊分割為規(guī)定區(qū)域，對(duì)每個(gè)塊在與相鄰圖像幀 的同一位置的塊之間計(jì)算差分，并將全部塊中的最大的設(shè)定為該圖像幀的抖動(dòng)評(píng)價(jià)值。在此，抖動(dòng)檢測部10構(gòu)成抖動(dòng)檢測單元，該抖動(dòng)檢測單元10在由臉檢測部6沒有 檢測出人臉時(shí)，對(duì)由連續(xù)攝影而生成的多個(gè)圖像幀的每一個(gè)，檢測對(duì)于相鄰圖像幀的抖動(dòng) 評(píng)價(jià)值(抖動(dòng)量)。圖像指定部11基于由眨眼檢測部9計(jì)算出的眨眼評(píng)價(jià)值對(duì)人臉的狀態(tài)進(jìn)行評(píng)價(jià)， 基于該評(píng)價(jià)值從由連續(xù)攝影而生成多個(gè)RAW圖像數(shù)據(jù)中指定記錄于記錄介質(zhì)13的一幅攝 像圖像。具體而言，圖像指定部11具有圖像判定部11a，該圖像判定部11a在連續(xù)攝影的多 個(gè)圖像幀的降低亮度圖像數(shù)據(jù)之中判定閉眼的臉數(shù)。圖像判定部11a作為第1圖像判定部，基于眨眼判定部9d中的判定結(jié)果，在由連 續(xù)攝影而生成的多個(gè)圖像幀的降低亮度圖像數(shù)據(jù)之中判定閉眼的臉數(shù)最少的圖像幀是否 存在多個(gè)(第1判定處理)。另外，圖像判定部11a作為第2圖像判定單元，在第1判定處 理中判定閉眼的臉數(shù)最少的圖像幀存在多個(gè)的情況下，判定該閉眼的臉數(shù)是否為0 (第2判 定處理)。再有，圖像指定部11根據(jù)圖像判定部11a的判定結(jié)果指定記錄于記錄介質(zhì)13的 一幅攝影圖像。也就是說，圖像指定部11在第1判定處理中判定閉眼的臉數(shù)最少的圖像幀 不是多個(gè)的情況下，將該圖像幀中的RAW圖像數(shù)據(jù)指定為記錄在記錄介質(zhì)13中的一幅攝像 圖像。另外，圖像指定部11在第2判定處理中判定閉眼的臉數(shù)是0時(shí)，在多個(gè)閉眼的臉 數(shù)最少的圖像幀中，基于由眨眼檢測部9檢測出的每個(gè)人的眨眼評(píng)價(jià)值指定該眨眼評(píng)價(jià)值最高的一幅圖像幀，并將該圖像幀中的RAW圖像數(shù)據(jù)指定為記錄在記錄介質(zhì)13中的一幅攝 像圖像。另一方面，圖像指定部11在第2判定處理中判定為閉眼的臉數(shù)不為0時(shí)，在多個(gè)閉 眼的臉數(shù)最少的圖像幀之中，基于由笑臉檢測部8檢測出的微笑值指定該微笑值最高的一 幅圖像幀，并將該圖像幀中的RAW圖像數(shù)據(jù)指定為記錄在記錄介質(zhì)13中的一幅攝像圖像。另外，圖像指定部11，在臉檢測部6從全部的圖像幀沒有檢測出人臉時(shí)、或雖然從 某圖像幀檢測出人臉但是眼睛檢測有效的臉數(shù)為0時(shí)，將由抖動(dòng)檢測部10檢測出的抖動(dòng)評(píng) 價(jià)值最小的圖像幀中的RAW圖像數(shù)據(jù)指定為記錄在記錄介質(zhì)13的一幅攝像圖像。這樣，圖像指定部11構(gòu)成評(píng)價(jià)單元，該評(píng)價(jià)單元基于由眨眼檢測部9計(jì)算出的眨 眼評(píng)價(jià)值(眨眼程度)評(píng)價(jià)人臉的狀態(tài)。另外，圖像指定部11構(gòu)成指定單元，該指定單元 基于人臉狀態(tài)的評(píng)價(jià)從由連續(xù)攝影而生成的多個(gè)RAW數(shù)據(jù)之中指定記錄在記錄介質(zhì)13的 至少一幅攝像圖像。顯影部12，在對(duì)由圖像指定部11指定的RAW圖像數(shù)據(jù)，由色彩處理電路(圖示省 略)進(jìn)行了包括像素插值處理以及Y修正處理等的色彩處理之后，生成數(shù)字值的亮度信號(hào) Y以及色差信號(hào)Cb、Cr (YUV數(shù)據(jù))。記錄介質(zhì)13例如由非易失性存儲(chǔ)器(閃存)等構(gòu)成，存儲(chǔ)由顯影部12的JPEG壓 縮部(圖示省略)編碼得到的攝像圖像的記錄用的圖像數(shù)據(jù)。顯示控制部14進(jìn)行控制，將暫時(shí)存儲(chǔ)于圖像存儲(chǔ)器5的顯示用的圖像數(shù)據(jù)讀出并 顯示在顯示部15。具體而言，顯示控制部15具有VRAM、VRAM控制器、數(shù)字視頻編碼器等。并且，數(shù)字 視頻編碼器將在CPU17的控制下由圖像存儲(chǔ)器5讀出并存儲(chǔ)在VRAM(圖示省略)的亮度信 號(hào)Y以及色差信號(hào)Cb、Cr，經(jīng)由VRAM控制器從VRAM定期地讀出，以這些數(shù)據(jù)為基礎(chǔ)產(chǎn)生視 頻信號(hào)并輸出至顯示部15。顯示部15例如是液晶顯示裝置，基于來自顯示控制部14的視頻信號(hào)將由電子攝 像部2所拍攝的圖像等顯示為顯示畫面。具體而言，顯示部15基于在攝像模式中由攝像鏡 頭1、電子攝像部2以及攝像控制部3對(duì)被攝體實(shí)施攝像而生成的多個(gè)圖像幀，顯示實(shí)時(shí)取 景圖像，或顯示作為真實(shí)攝像圖像而拍攝的記錄取景(recording-view)。操作輸入部16用于進(jìn)行該攝像裝置100的規(guī)定操作。具體而言，操作輸入部16 具有涉及被攝體攝影指示的快門按鈕16a、涉及攝影模式的選擇指示的模式按鈕16b、涉及 調(diào)焦量的調(diào)整指示的調(diào)焦按鈕(圖示省略)等，根據(jù)這些按鈕的操作將規(guī)定的操作信號(hào)輸 出至CPU17。CPU17控制攝像裝置100的各部。具體而言，CPU17按照攝像裝置100用的各種處 理程序(圖示省略)進(jìn)行各種的控制動(dòng)作。接下來，參照圖2 圖5對(duì)由攝像裝置100進(jìn)行的圖像選擇方法中的圖像選擇處 理進(jìn)行說明。圖2以及圖3是表示圖像選擇處理中的動(dòng)作的一例的流程圖。另外，圖4是表示 涉及圖像選擇處理中的眨眼檢測處理的動(dòng)作的一例的流程圖。再有，圖5(a)是示意地表示 眨眼檢測窗口 W與被攝體的左右雙眼的圖像部分，圖5(b)是放大了眨眼檢測窗口 W而示意 地表示的圖。圖像選擇處理，是基于由用戶對(duì)操作輸入部16的模式按鈕16b實(shí)施的規(guī)定操作，
10從顯示于菜單畫面中的多個(gè)攝像模式之中選擇并指示圖像自動(dòng)選擇模式時(shí)實(shí)行的處理。如圖2所示，首先，CPU17，在基于用戶對(duì)操作輸入部16的快門按鈕16a實(shí)施的規(guī) 定操作而輸入連續(xù)攝像指示后，使攝像控制部3調(diào)整聚焦透鏡的聚焦位置和曝光條件(快 門速度、光圈、放大率等)和白色平衡等的攝像條件，由電子攝像部2對(duì)被攝體的光學(xué)像以 規(guī)定的攝像幀率(例如lOfps)進(jìn)行連續(xù)拍攝規(guī)定張數(shù)(例如20張)的連續(xù)攝影(步驟
51)。然后，CPU17使圖像數(shù)據(jù)生成部4生成從電子攝像部2傳送的被攝體的各圖像幀的RAW 圖像數(shù)據(jù)以及降低亮度圖像數(shù)據(jù)，并將這些的圖像數(shù)據(jù)暫時(shí)存儲(chǔ)在圖像存儲(chǔ)器5中(步驟
52)。然后，CPU17，使臉檢測部6從各圖像幀的降低亮度圖像數(shù)據(jù)利用規(guī)定的臉檢測方 法檢測人臉，并將檢測出的臉圖像區(qū)域內(nèi)的圖像信息作為臉輪廓信息生成(步驟S3)。接下來，CPU17判定在臉檢測處理中檢測出的臉的數(shù)目是否為0，即判定是否從 全部的圖像幀沒有檢測出臉(步驟S4)。在此，若判定為檢測出臉的數(shù)目不是0(步驟S4: 否)，則CPU17基于從各圖像幀檢測出的臉輪廓信息進(jìn)行對(duì)各人臉分配個(gè)人ID的處理(步 驟S5)。在此，個(gè)人ID的分配以如下方式進(jìn)行，S卩在各相鄰的圖像幀的臉輪廓信息，若各 臉輪廓的中心距離對(duì)于任意的臉輪廓的大小(例如，寬度或長度)為規(guī)定比例(例如50% 左右)以內(nèi)，則判定其臉輪廓為同一人。在此，CPU17對(duì)在臉檢測處理中沒有檢測出臉的圖 像幀，通過取得在前后的圖像幀之中、最近檢測出的臉圖像區(qū)域，并以該臉圖像區(qū)域的坐標(biāo) 為基礎(chǔ)在沒有檢測出臉的圖像幀中設(shè)定臉輪廓信息，從而對(duì)全部的圖像幀設(shè)定個(gè)人ID。接下來，CPU17使眼睛檢測部7基于由臉檢測部6生成的各圖像幀的臉輪廓信息， 檢測人的左右雙眼從而計(jì)算其中心坐標(biāo)，并且使眼睛檢測部7的可靠性計(jì)算部7a計(jì)算該眼 睛檢測中檢測可靠性(步驟S6)。然后，CPU17使眼睛檢測部7的有效性判定部7b進(jìn)行如下的動(dòng)作，即根據(jù)由可靠 性計(jì)算部7a計(jì)算出的檢測可靠性是否比規(guī)定閾值高，來判定檢測出該可靠性下的眼睛的 臉的有效性(步驟S7)。具體而言，有效性判定部7b，在檢測可靠性為規(guī)定閾值以下時(shí)，使 該眼睛檢測中的臉為NG判定，設(shè)定為眼睛檢測無效的臉；另一方面，檢測可靠性比規(guī)定閾 值大時(shí)，使該眼睛檢測中的臉為0K判定，設(shè)定為眼睛檢測有效的臉。接下來，CPU17基于有效性判定部7b的判定結(jié)果，判定眼睛檢測為有效的臉數(shù)(眼 睛檢測有效臉數(shù))是否為0 (步驟S8)。在此，若判定為眼睛檢測有效的臉數(shù)為0(步驟S8 是)，則CPU17使抖動(dòng)檢測部 10進(jìn)行抖動(dòng)檢測處理，將多個(gè)圖像幀的各自塊分割為規(guī)定的區(qū)域，對(duì)各個(gè)塊計(jì)算出與相鄰 的圖像幀的同一位置的塊的差分值，并將全部塊中其差分值最大的作為該圖像幀的評(píng)價(jià)值 (步驟S9)。另外，在步驟S4中若判定臉檢測數(shù)為0 (步驟S4 是)，則CPU17使處理轉(zhuǎn)移至 步驟S9，使抖動(dòng)檢測部10進(jìn)行抖動(dòng)檢測處理。之后，CPU17使圖像指定部11指定由抖動(dòng)檢測部10檢測出的抖動(dòng)評(píng)價(jià)值最小的圖 像幀中的RAW圖像數(shù)據(jù)(步驟S10)，然后，使顯影部12進(jìn)行由圖像指定部11所指定的RAW 圖像數(shù)據(jù)的顯影處理，并以JPEG格式對(duì)該圖像數(shù)據(jù)進(jìn)行編碼并存儲(chǔ)在記錄介質(zhì)13中(步 驟 S11)。另一方面，若在步驟S8中判定眼睛檢測有效的臉數(shù)不為0 (步驟S8 否)，則CPU17 使眨眼檢測部9實(shí)施眨眼檢測處理(步驟S12)。
11
在此，參照圖4、圖5(a)以及圖5(b)對(duì)眨眼檢測處理進(jìn)行詳細(xì)說明。如圖4所示，眨眼檢測處理9基于由有效性判定部7b判定為有效的人臉的左右雙 眼的坐標(biāo)信息計(jì)算每個(gè)人的左右雙眼的平均距離De (步驟S31)。接下來，眨眼檢測部9基于全部圖像幀的降低亮度圖像數(shù)據(jù)，在各降低亮度圖像 數(shù)據(jù)上設(shè)定眨眼檢測窗口 W(參照圖5 (a))(步驟S32)。在此，眨眼檢測窗口 W的大小Wlen， 根據(jù)下式以對(duì)雙眼平均距離De成為規(guī)定比例的方式乘以系數(shù)Wratio從而決定。Wlen = De^ffratio此外，眨眼檢測窗口 W的中心位置，設(shè)定為由眼睛檢測得到的雙眼的坐標(biāo)值。接下來，眨眼檢測部9對(duì)各柱C(參照圖5(b))計(jì)算評(píng)價(jià)值(步驟S33)，該柱C是 將設(shè)定的眨眼檢測窗口 W在左右方向(X軸方向)以規(guī)定間隔進(jìn)行分割而得到的。具體而 言，眨眼檢測部9對(duì)于各柱C，以亮度從低到高的順序?qū)ι舷路较?Y方向)的像素值進(jìn)行分 類，將對(duì)從上位起一定比例的像素值進(jìn)行平均得到的值作為各柱C的評(píng)價(jià)值而計(jì)算出來。 由此，即使眨眼導(dǎo)致黑眼球區(qū)域減少、或由光的反射在靠近黑眼球的中央的位置出現(xiàn)白色 區(qū)域、由臉的抖動(dòng)導(dǎo)致黑眼球區(qū)域模糊，由于在黑眼球的上下方向長的部分評(píng)價(jià)值提高，因 此能夠取得最長部分的黑眼球的值。然后，眨眼檢測部9從全部的柱C的評(píng)價(jià)值中指定最小的評(píng)價(jià)值之后(步驟S34)， 以眼睛睜開時(shí)評(píng)價(jià)值高的方式將該最小評(píng)價(jià)值的補(bǔ)數(shù)作為眨眼評(píng)價(jià)值計(jì)算出來(步驟 S35)。接下來，眨眼評(píng)價(jià)值9判定連續(xù)攝影時(shí)的攝像幀率是否為規(guī)定值(例如lOfps)以 上(步驟S36)。在此，若判定攝像幀率為規(guī)定值以上(步驟S36:是)，則眨眼檢測部9的平 滑部9a在相鄰的前后圖像幀的眨眼評(píng)價(jià)值之間對(duì)各圖像幀的眨眼評(píng)價(jià)值進(jìn)行加法平均從 而進(jìn)行平滑處理(步驟S37)。由此，在眼睛全部睜開的圖像幀與全部閉眼的圖像幀的中間， 存在眼睛部分睜開的圖像幀時(shí)，即使該圖像幀的眨眼評(píng)價(jià)值存在少許偏差也能夠容易地取 得中間值。另一方面，在攝像幀率比規(guī)定值小時(shí)(步驟S36 否)，則由于在相鄰的圖像幀之間 空著時(shí)間從而相關(guān)性較低，因此并不進(jìn)行平滑處理，將步驟S36中計(jì)算出的眨眼評(píng)價(jià)值作 為最終的評(píng)價(jià)值。由此，眨眼檢測處理結(jié)束。如圖3所示，CPU17使笑臉檢測部8基于人臉的左右雙眼的坐標(biāo)信息，在降低亮度 圖像內(nèi)尋找嘴的位置，并根據(jù)嘴角上揚(yáng)的程度計(jì)算微笑值(步驟S13)。接下來，CPU17使眨眼檢測部9的眨眼修正部9b進(jìn)行如下的動(dòng)作，即判定由笑臉 檢測部8檢測出的微笑值是否為規(guī)定閾值以上，在其判定結(jié)果判定為微笑值為規(guī)定閾值以 上時(shí)，按照下面的公式增加眨眼評(píng)價(jià)值，從而修正該眨眼評(píng)價(jià)值(步驟S14)。眨眼評(píng)價(jià)值+ = k* (微笑值_閾值)在此，k為規(guī)定常數(shù)。接下來，CPU17使眨眼檢測部9的閾值計(jì)算部9c對(duì)于每個(gè)人將從上位起位于一定 比例的眨眼評(píng)價(jià)值設(shè)定為臨時(shí)閾值Thl (步驟S15)。具體而言，閾值計(jì)算部9c，以根據(jù)攝影 人數(shù)改變閾值的方式進(jìn)行設(shè)定，例如，以在檢測出眼睛的圖像幀之中，保留規(guī)定比例(例如 比例為N)的圖像幀的方式，將對(duì)每個(gè)人位于N~(l/人數(shù))的比例的上位評(píng)價(jià)值設(shè)定為臨時(shí)
12閾值Thl。接下來，閾值計(jì)算部9c將眨眼評(píng)價(jià)值的最大值作為基準(zhǔn)，通過由規(guī)定的指定值根 據(jù)下面的公式進(jìn)行臨時(shí)閾值Thl的上限值以及下限值的限幅處理，從而計(jì)算出判定用的真 閾值Th2。(步驟S16)If (Thl > Bmax-0fstl)Th2 = Bmax-Ofstl ；else if (Thl < Bmax+Ofst2)Th2 = Bmax+0fst2 ；else Th2 = Thl ；在此，Bmax是每個(gè)人的眨眼評(píng)價(jià)值的最大值，Ofstl是上限限幅偏移量，0fst2是 下限限幅偏移量，Thl是眨眼判定用的臨時(shí)閾值，Th2是眨眼判定用的真閾值。接下來，CPU17使眨眼檢測部9的眨眼判定部9d進(jìn)行如下動(dòng)作，即對(duì)由閾值計(jì)算 部9c計(jì)算出的眨眼判定用的真閾值Th2與各圖像幀的每個(gè)人的眨眼評(píng)價(jià)值進(jìn)行比較，判定 該眨眼評(píng)價(jià)值是否為真閾值Th2以上(步驟S17)。通過該判定，判定眨眼評(píng)價(jià)值為真閾值 Th2以上時(shí)，判斷為眨眼判定0K(睜眼)，另一方面，在判定眨眼評(píng)價(jià)值比真閾值Th2小時(shí)， 判斷為眨眼判定NG(閉眼)。然后，CPU17使圖像指定部11在由連續(xù)攝影而生成的多個(gè)圖像幀的降低亮度圖像 數(shù)據(jù)中指定閉眼的臉數(shù)最少的圖像幀(步驟S18)。接下來，CPU17使圖像指定部11的圖像判定部11a判定閉眼的臉數(shù)最少的圖像幀 是否存在多個(gè)(步驟S19)。在此，判定閉眼的臉數(shù)最少的圖像幀不是多個(gè)(步驟S19 否)， 則CPU17使圖像指定部11將該圖像幀中的RAW圖像數(shù)據(jù)指定為記錄在記錄介質(zhì)13中的一 幅攝像圖像(步驟S20)。之后，CPU17使處理轉(zhuǎn)移至步驟S11 (參照圖2)，使顯影部12進(jìn)行顯影處理，該顯 影處理是由圖像指定部11指定的閉眼的臉數(shù)最少的圖像幀中的RAW圖像數(shù)據(jù)的顯影處理， 并以JPEG格式對(duì)該圖像數(shù)據(jù)進(jìn)行編碼保存在記錄介質(zhì)13中(步驟S11)。另一方面，若在步驟S19中判定閉眼的臉數(shù)最少的圖像幀存在多個(gè)(步驟S19 是)，則CPU17使圖像判定部11a判定該閉眼的臉數(shù)是否為0 (步驟S21)。在此，若判定閉眼的臉數(shù)為0 (步驟S21 是)，則CPU17使圖像指定部11進(jìn)行如下 的動(dòng)作，即在多個(gè)閉眼的臉數(shù)最少的圖像幀之中，基于由眨眼檢測部9檢測出的每個(gè)人的 眨眼評(píng)價(jià)值，指定該眨眼評(píng)價(jià)值最高的圖像幀，并將該圖像幀中的RAW圖像數(shù)據(jù)指定為記 錄在記錄介質(zhì)13中的攝像圖像(步驟S22)。之后，CPU17使處理轉(zhuǎn)移至步驟S11 (參照圖2)，使顯影部12進(jìn)行顯影處理，該顯 影處理是由圖像指定部11指定的眨眼評(píng)價(jià)值最高的RAW圖像數(shù)據(jù)的顯影處理，并以JPEG 格式對(duì)該圖像數(shù)據(jù)進(jìn)行編碼后保存在記錄介質(zhì)13中(步驟S11)。另外，若在步驟S21中判定閉眼的臉數(shù)不為0(步驟S21 否)，則CPU17使圖像指 定部11在多個(gè)閉眼的臉數(shù)最少的圖像幀中，基于由笑臉檢測部8檢測出的微笑值，指定該 微笑值最高的一幅圖像幀，并將該圖像幀中的RAW圖像數(shù)據(jù)指定為記錄在記錄介質(zhì)13中的 一幅攝像圖像(步驟S23)。之后，CPU17使處理轉(zhuǎn)移至步驟S11 (參照圖2)，使顯影部12進(jìn)行顯影處理，該顯 影處理是由圖像指定部11指定的微笑值最高的RAW圖像數(shù)據(jù)的顯影處理，并以JPEG格式 對(duì)該圖像數(shù)據(jù)進(jìn)行編碼后保存在記錄介質(zhì)13中(步驟S11)。
如上所述，根據(jù)本實(shí)施方式的攝像裝置100，臉檢測部6從由連續(xù)攝影而生成的多 個(gè)圖像幀檢測人臉，眼睛檢測部7從檢測出的人臉檢測眼睛，眨眼檢測部9計(jì)算所檢測出的 眼睛的眨眼評(píng)價(jià)值，圖像指定部11基于眨眼評(píng)價(jià)值評(píng)價(jià)人臉的狀態(tài)，并基于該人臉的狀態(tài) 的評(píng)價(jià)從多個(gè)圖像幀中指定記錄在記錄介質(zhì)13的一幅攝像圖像。具體而言，基于由臉檢測部6生成的臉輪廓信息由眼睛檢測部7對(duì)每個(gè)人檢測人 臉的眼睛，圖像指定部11對(duì)每個(gè)人判斷人臉的狀態(tài)，所述人臉是眼睛的檢測可靠性比規(guī)定 閾值高并且判定檢測出眼睛的臉為有效的人臉。再有，由眨眼檢測部9對(duì)每個(gè)人檢測眼睛 的眨眼評(píng)價(jià)值，圖像指定部11，根據(jù)修正之后的眨眼評(píng)價(jià)值對(duì)每個(gè)人判斷人臉的狀態(tài)，該修 正根據(jù)基于眼睛的位置信息檢測出的該臉的微笑值實(shí)施。由此，綜合地對(duì)每個(gè)人判斷眨眼程度或微笑程度等的人臉的狀態(tài)，從而能夠恰當(dāng) 地選擇記錄在記錄介質(zhì)13中的圖像，即使增加可以連續(xù)拍攝的張數(shù)也能夠簡單地進(jìn)行一 幅圖像的選擇。另外，由于在眨眼檢測處理中，基于每個(gè)人的眨眼評(píng)價(jià)值計(jì)算出判定該人的眼睛 是否睜開時(shí)的真閾值Th2，并基于該眨眼判定用的真閾值Th2對(duì)多個(gè)圖像幀判定每個(gè)人的 眼睛是否睜開，因此根據(jù)考慮到因人而異的眼睛大小、寬窄、眼睛睜開的難易等而檢測出的 眨眼評(píng)價(jià)值設(shè)定眨眼判定用的真閾值Th2，能夠基于該真閾值Th2對(duì)多個(gè)圖像幀恰當(dāng)?shù)嘏?定每個(gè)人的眼睛是否睜開。再有，在多個(gè)圖像幀中判定閉眼的臉數(shù)最少的圖像幀是否為多個(gè)，并且在判定為 閉眼的臉數(shù)最少的圖像幀不是多個(gè)即只是一張的情況下，由于圖像指定部11將該圖像幀 中的RAW圖像數(shù)據(jù)指定為記錄在記錄介質(zhì)13中的一幅攝像圖像，因此能夠可靠地選擇所有 人都沒有閉眼的圖像。另外，在判定為閉眼的臉數(shù)最少的圖像幀存在多個(gè)的情況下，判定該閉眼的臉數(shù) 是否為0，并且判定閉眼的臉數(shù)是0的情況下，圖像指定部11在多個(gè)閉眼的臉數(shù)最少的圖像 幀之中，基于由眨眼檢測部9檢測出的每個(gè)人眨眼評(píng)價(jià)值指定該眨眼評(píng)價(jià)值最高的一幅圖 像幀，并將該圖像幀中的RAW圖像數(shù)據(jù)指定為記錄在記錄介質(zhì)13中的一幅攝像圖像，因此 能夠可靠地選擇眨眼評(píng)價(jià)值最高的圖像。另一方面，判定閉眼的臉數(shù)不為0時(shí)，由于圖像指 定部11在多個(gè)閉眼的臉數(shù)最少的圖像幀中，基于由笑臉檢測部8檢測出的微笑值指定該微 笑值最高的一幅圖像幀，并將該圖像幀中的RAW圖像數(shù)據(jù)作為記錄在記錄介質(zhì)13中的一幅 攝像圖像而進(jìn)行指定，因此即使存在閉眼的人時(shí)也能夠可靠地選擇微笑值最高的圖像。再有，在沒有從全部的圖像幀由臉檢測部6檢測出人臉時(shí)、或者雖然從任意的圖 像幀檢測出人臉但是眼睛檢測有效的臉數(shù)為0時(shí)，由于圖像指定部11將由抖動(dòng)檢測部10 檢測出的抖動(dòng)評(píng)價(jià)值最小的圖像幀中的RAW圖像數(shù)據(jù)指定為記錄在記錄介質(zhì)13中的一幅 攝像圖像，因此能夠可靠地選擇抖動(dòng)量最小的圖像。由此，不僅對(duì)眨眼程度或微笑程度等的人臉的狀態(tài)進(jìn)行判斷，而且也對(duì)被攝體晃 動(dòng)或手抖動(dòng)而引起的圖像抖動(dòng)等進(jìn)行綜合判斷，從而能夠恰當(dāng)并且簡單地進(jìn)行記錄在記錄 介質(zhì)13中的圖像的選擇。下面，對(duì)攝像裝置100的變形例進(jìn)行說明。(變形例)該變形例的攝像裝置100對(duì)眼睛檢測有效的各圖像幀檢測出對(duì)于相鄰圖像的抖
14動(dòng)量，根據(jù)各圖像幀的抖動(dòng)量比規(guī)定值小的攝像圖像的數(shù)目是否為多個(gè)，進(jìn)行眨眼檢測處 理，或者將抖動(dòng)量最小的圖像幀指定為記錄在記錄介質(zhì)13的一幅攝像圖像。圖6是表示變形的攝像裝置100的概略結(jié)構(gòu)的框圖。如圖6所示，該變形例的攝像裝置100的抖動(dòng)檢測部10具有抖動(dòng)修正部10a，該抖 動(dòng)修正部10a根據(jù)對(duì)于臉的位置的抖動(dòng)的位置來修正檢測出的各圖像幀的抖動(dòng)量。具體而言，抖動(dòng)檢測部10在從任意的圖像幀檢測出了人臉但是眼睛檢測有效的 臉數(shù)為0時(shí)，對(duì)各圖像幀在與相鄰的圖像幀的同一位置的塊之間計(jì)算差分值，將其差分值 在全部塊中最大的作為該圖像幀的抖動(dòng)評(píng)價(jià)值(抖動(dòng)量)，而此時(shí)抖動(dòng)修正部10a以如下的 方式進(jìn)行修正，即該差分值最大的塊的位置隨著遠(yuǎn)離臉?biāo)诘膲K的位置其抖動(dòng)評(píng)價(jià)值降 低。在此，抖動(dòng)修正部10a構(gòu)成抖動(dòng)修正單元，該抖動(dòng)修正單元根據(jù)相對(duì)于臉的位置 的抖動(dòng)位置，來修正由抖動(dòng)檢測部10檢測出的各圖像幀的抖動(dòng)評(píng)價(jià)值(抖動(dòng)量)。另外，圖像指定部11的圖像判定部11a，作為第3圖像判定單元，在從任意的圖像 檢測出人臉但是眼睛檢測有效的臉數(shù)為0的情況下，判定各圖像幀的抖動(dòng)評(píng)價(jià)值比規(guī)定的 抖動(dòng)檢測閾值小的圖像幀是否存在多個(gè)。然后，圖像指定部11，判定抖動(dòng)評(píng)價(jià)值比規(guī)定的抖動(dòng)檢測閾值小的圖像幀不是多 個(gè)時(shí)，將由抖動(dòng)檢測部10檢測出的抖動(dòng)評(píng)價(jià)值最小的圖像幀中的RAW圖像數(shù)據(jù)，指定為記 錄在記錄介質(zhì)13中的一幅攝像圖像。下面，參照圖7對(duì)由變形例的攝像裝置100進(jìn)行的圖像選擇處理進(jìn)行說明。圖7是表示圖像選擇處理中的動(dòng)作的一例的流程圖。另外，圖7的眨眼檢測處理 (步驟S12)以后的處理與表示圖3所示的圖像選擇處理的后續(xù)的流程圖中所示的處理相 同，省略其詳細(xì)的說明。如圖7所示，CPU17與上述實(shí)施方式同樣，若基于用戶對(duì)操作輸入部16的快門按鈕 16a的規(guī)定操作輸入連續(xù)攝像指示，則使攝像控制部3調(diào)整規(guī)定的攝像條件，由電子攝像部 2進(jìn)行以規(guī)定的攝像幀率對(duì)被攝體的光學(xué)像連續(xù)拍攝規(guī)定張數(shù)的連續(xù)攝影(步驟S1)。然 后，CPU17與上述實(shí)施方式同樣，使圖像數(shù)據(jù)生成部4生成從電子攝像部2傳送的被攝體的 各圖像幀的RAW圖像數(shù)據(jù)以及降低亮度圖像數(shù)據(jù)，并將這些的圖像數(shù)據(jù)暫時(shí)存儲(chǔ)在圖像存 儲(chǔ)器5中(步驟S2)。然后，CPU17與上述實(shí)施方式同樣，使臉檢測部6從各圖像幀的降低亮度圖像數(shù)據(jù) 檢測人臉，并將檢測出的臉圖像區(qū)域內(nèi)的圖像信息作為臉輪廓信息生成(步驟S3)。接下來，CPU17與上述實(shí)施方式同樣，判定在臉檢測處理中檢測出的臉的數(shù)目是否 為0 (步驟S4)。在此，若判定檢測出臉的數(shù)目不是0 (步驟S4 否)，則CPU17與上述實(shí)施 方式同樣，基于從各圖像幀檢測出的臉輪廓信息對(duì)各人臉分配個(gè)人ID之后(步驟S5)，使眼 睛檢測部7基于由臉檢測部6生成的各圖像幀的臉輪廓信息，檢測人的左右雙眼從而計(jì)算 其中心坐標(biāo)(步驟S6)。然后，CPU17與上述實(shí)施方式同樣，使眼睛檢測部7的有效性判定部7b判定檢測 出眼睛的臉的有效性之后(步驟S7)，基于有效性判定部7b的判定結(jié)果，判定眼睛檢測有效 的臉數(shù)(眼睛檢測有效臉數(shù))是否為0 (步驟S8)。若在步驟S8中判定眼睛檢測有效的臉數(shù)不是0 (步驟S8 否)，則CPU17使抖動(dòng)
15檢測部10進(jìn)行抖動(dòng)檢測處理，即將涉及眼睛檢測有效的臉的各圖像幀塊分割為規(guī)定的區(qū) 域，對(duì)每個(gè)塊在與相鄰的圖像幀的同一位置的塊之間計(jì)算差分值，將其差分值在全部塊中 最大的作為該圖像幀的評(píng)價(jià)值(步驟S41)。此時(shí)，抖動(dòng)檢測部10的抖動(dòng)修正部10a以如下 方式進(jìn)行修正，即隨著差分值最大的塊的位置遠(yuǎn)離臉?biāo)诘膲K的位置，抖動(dòng)評(píng)價(jià)值變低。接下來，CPU17使圖像指定部11基于規(guī)定抖動(dòng)檢測閾值判別各圖像幀的抖動(dòng)評(píng)價(jià) 值比抖動(dòng)檢測閾值小的圖像幀之后(步驟S42)，判定比該規(guī)定的抖動(dòng)檢測閾值小的圖像幀 是否存在多個(gè)(步驟S43)。在此，若判定比規(guī)定抖動(dòng)檢測閾值小的圖像幀不是多個(gè)(步驟S43 :N0)，則CPU17 與上述實(shí)施方式同樣，使處理轉(zhuǎn)移至步驟S10，使圖像指定部11指定由抖動(dòng)檢測部10檢測 出的抖動(dòng)評(píng)價(jià)值最小的圖像幀中的RAW圖像數(shù)據(jù)(步驟S10)。之后，CPU17與上述實(shí)施方 式同樣，使顯影部12進(jìn)行由圖像指定部11指定的RAW圖像數(shù)據(jù)的顯影處理，并以JPEG格 式對(duì)該圖像數(shù)據(jù)進(jìn)行編碼后保存在記錄介質(zhì)13中(步驟S11)。另一方面，若判定抖動(dòng)評(píng)價(jià)值比規(guī)定的抖動(dòng)檢測閾值小的圖像幀存在多個(gè)(步驟 S43 是)，則CPU17與上述實(shí)施方式同樣，使眨眼檢測部9實(shí)行眨眼檢測處理(步驟S12)。另外，眨眼檢測處理以后的處理與上述實(shí)施方式是同樣的，省略其詳細(xì)說明。因而，根據(jù)該變形例的攝像裝置100，判定各圖像幀的抖動(dòng)評(píng)價(jià)值比規(guī)定的抖動(dòng)檢 測閾值小的圖像幀的數(shù)目是否為多個(gè)，并且判定了抖動(dòng)評(píng)價(jià)值比規(guī)定的抖動(dòng)檢測閾值小的 圖像幀存在多個(gè)時(shí)，由于進(jìn)行眨眼檢測處理，因此能夠?qū)Ρ粩z體抖動(dòng)或手抖動(dòng)的較小的圖 像幀，對(duì)每個(gè)人綜合地判斷眨眼程度或微笑程度等的人臉的狀態(tài)，能夠恰當(dāng)?shù)剡M(jìn)行記錄在 記錄介質(zhì)13中的圖像的選擇。另外，判定抖動(dòng)評(píng)價(jià)值比規(guī)定的抖動(dòng)檢測閾值小的圖像幀的數(shù)目不是多個(gè)時(shí)，由 于將由抖動(dòng)檢測部10檢測出的抖動(dòng)評(píng)價(jià)值最小的圖像幀中的RAW圖像數(shù)據(jù)作為記錄在記 錄介質(zhì)13中的一幅攝像圖像而進(jìn)行指定，因此能夠可靠地選擇抖動(dòng)量最小的圖像。再有，由于在抖動(dòng)檢測處理中，以隨著差分值最大的塊的位置遠(yuǎn)離臉?biāo)诘膲K的 位置抖動(dòng)評(píng)價(jià)值降低的方式進(jìn)行修正，因此能夠考慮了產(chǎn)生抖動(dòng)的位置相對(duì)于臉的位置的 距離，來進(jìn)行之后的抖動(dòng)評(píng)價(jià)值比規(guī)定的抖動(dòng)檢測閾值小的圖像幀的數(shù)目是否為多個(gè)的判 定。也就是說，即便是少許產(chǎn)生了抖動(dòng)的圖像幀，在產(chǎn)生該抖動(dòng)的位置離臉部較遠(yuǎn)時(shí)， 能夠在某種程度上無視而進(jìn)行眨眼檢測處理，能夠從更多的圖像幀中恰當(dāng)?shù)剡M(jìn)行記錄在記 錄介質(zhì)13中的圖像的選擇。另外，在上述實(shí)施方式中，雖然在圖像選擇處理中指定任意一幅的圖像數(shù)據(jù)，但是 并不限于此，例如根據(jù)眨眼程度、微笑程度、抖動(dòng)程度等對(duì)連續(xù)攝影中的圖像幀進(jìn)行評(píng)價(jià)之 后，以評(píng)價(jià)的從高到低重新排序，從而可以由用戶來確定進(jìn)而指定所希望的圖像幀。再有，可以以評(píng)價(jià)的從高到低對(duì)全部的圖像幀中的圖像數(shù)據(jù)進(jìn)行重新排序，并存 儲(chǔ)在記錄介質(zhì)13中。再有，可以在圖像再現(xiàn)時(shí)進(jìn)行上述的圖像選擇處理。也就是說，可以根據(jù)眨眼程 度、微笑程度、抖動(dòng)程度等對(duì)記錄在記錄介質(zhì)13中的連續(xù)攝影中的圖像幀進(jìn)行評(píng)價(jià)，之后 重新記錄在記錄介質(zhì)13中。此外，也可以以評(píng)價(jià)的從高到低對(duì)圖像幀進(jìn)行重新排列，并空 出規(guī)定間隔進(jìn)行再現(xiàn)顯示。
16
另外，也可以從實(shí)時(shí)取景圖像進(jìn)行臉檢測處理，從而根據(jù)該臉的狀態(tài)來調(diào)整連拍 的張數(shù)。具體而言，在被攝體的連續(xù)攝影時(shí)，以如下方式進(jìn)行設(shè)定，即可以在快門按鈕16a 半按壓的狀態(tài)下進(jìn)行臉檢測處理，并根據(jù)檢測出臉的人數(shù)增加連拍張數(shù)。也就是說，由于作 為被攝體而進(jìn)行攝影的人數(shù)越多，則全部眼睛睜開的概率越低，因此通過增加連拍張數(shù)能 夠可靠地進(jìn)行全部人員睜開眼睛的圖像的指定。再有，在被攝體的連續(xù)攝影時(shí)，可以在快門按鈕16a的半按壓狀態(tài)下進(jìn)行臉檢測 處理，追蹤檢測出臉的臉運(yùn)動(dòng)從而根據(jù)臉的動(dòng)作的大小增加連拍張數(shù)。也就是說，由于臉的 運(yùn)動(dòng)越大，從而臉的被攝體抖動(dòng)或臉朝向正面的概率越低，因此通過增加連拍張數(shù)，能夠可 靠地進(jìn)行被攝體抖動(dòng)的防止或臉朝向正面的圖像的指定。再有，圖像存儲(chǔ)器5作為取得單元可以具有環(huán)形緩沖器(圖示省略)，該環(huán)形緩沖 器能夠暫時(shí)存儲(chǔ)規(guī)定張數(shù)的圖像幀，暫時(shí)存儲(chǔ)由電子攝像部2生成的多個(gè)圖像幀、在眨眼 檢測處理中判定全部人員的眼睛都睜開時(shí)，自動(dòng)地按下快門。由此，能夠可靠地進(jìn)行全部人 員睜開眼睛的圖像的取得。另外，在上述實(shí)施方式中的笑臉檢測處理中，與人臉的微笑程度一起，對(duì)評(píng)價(jià)項(xiàng)目 補(bǔ)充臉占據(jù)圖像整體的大小或臉的位置(例如，處于圖像整體的中央或處于端部)等，根據(jù) 該項(xiàng)目對(duì)微笑值進(jìn)行修正。再有，記錄介質(zhì)13作為人物注冊單元可以具有人物注冊數(shù)據(jù)庫(圖示省略)，利 用該數(shù)據(jù)庫進(jìn)行臉檢測處理或人員ID的分配。再有，在臉檢測處理中檢測出人物注冊數(shù) 據(jù)庫中注冊的人物時(shí)，可以優(yōu)先于其他人而考慮該人物的臉部的狀態(tài)從而進(jìn)行圖像選擇處 理。也就是說，臉檢測部6檢測出的臉是在人物注冊數(shù)據(jù)庫中注冊過的人物時(shí)，圖像指定部 11可以對(duì)涉及該臉的評(píng)價(jià)值進(jìn)行修正。例如，分別使該人物的眨眼檢測處理或微笑檢測處 理的判定用的閾值更加嚴(yán)格并且通過放寬其他人的閾值，能夠指定至少該人物的眼睛睜開 而且微笑的圖像。另外，在人員ID的分配時(shí)，從任意一幅的圖像幀檢測出臉的情況下，可以將檢測 出的臉輪廓信息作為模板(template)從其他的圖像幀進(jìn)行臉檢測處理。由此，能夠可靠地 從全部的圖像幀檢測出人臉，能夠提高之后的眼睛檢測處理、笑臉檢測處理、眨眼檢測處理 的精度。再有，在進(jìn)行臉檢測處理以及眼睛檢測處理時(shí)，從任意一幅的圖像幀檢測人臉的 左右雙眼，將該眼睛的周邊部的區(qū)域作為模板在相鄰圖像之間進(jìn)行模板匹配并成功時(shí)，可 以跳過臉檢測處理與眼睛檢測處理的動(dòng)作。另外，在圖像選擇處理中，沒有發(fā)現(xiàn)全部人員的眼睛睜開的圖像時(shí)，可以指定評(píng)價(jià) 最高的圖像，并且對(duì)于該圖像的閉眼的人員，從其他眼睛睜開的圖像幀剪切眼睛周邊部，將 該眼睛周邊部合成在評(píng)價(jià)最高的圖像。另外，攝像裝置100的結(jié)構(gòu)在上述實(shí)施方式中示例的僅是一例，并不限于此。也就 是說，雖然作為圖像選擇裝置示例了攝像裝置100，但是并不限于此。例如，可以是連續(xù)攝影 在與該攝像裝置100不同的攝像裝置中進(jìn)行，僅記錄從該攝像裝置傳送的圖像數(shù)據(jù)、僅實(shí) 行圖像選擇處理的圖像選擇裝置。此外，在上述實(shí)施方式中，構(gòu)成為在CPU17的控制下通過驅(qū)動(dòng)電子攝像部、攝像控 制部3、臉檢測部6、眼睛檢測部7、眨眼檢測部9、圖像指定部11來實(shí)現(xiàn)作為取得單元、臉檢
17測單元、眼睛檢測單元、眨眼檢測單元、評(píng)價(jià)單元、指定單元的功能，但是也并不限于此，也 可以構(gòu)成為由CPU17通過實(shí)行規(guī)定的程序等來實(shí)現(xiàn)。 也就是說，在存儲(chǔ)程序的程序存儲(chǔ)器(圖示省略)中，預(yù)先存儲(chǔ)包括取得處理子程 序(routine)、臉檢測處理子程序、評(píng)價(jià)處理子程序、指定處理子程序的程序。并且，可以由 取得處理子程序使CPU17取得通過對(duì)被攝體進(jìn)行連續(xù)攝像而生成的多個(gè)攝像圖像。另外， 可以由臉檢測處理子程序使CPU17從由連續(xù)攝影而生成的多個(gè)攝像圖像檢測人臉。再有， 可以由眼睛檢測處理子程序使CPU17從臉檢測處理中檢測出的人臉檢測眼睛。再有，可以 由眨眼檢測處理子程序使CPU17檢測在眼睛檢測處理中檢測出的眼睛的眨眼程度。再有， 可以由評(píng)價(jià)處理子程序使CPU17基于眨眼檢測處理中檢測出的眨眼程度評(píng)價(jià)人臉的狀態(tài)。 再有，可以由指定處理子程序使CPU17基于人臉狀態(tài)的評(píng)價(jià)，從完成取得的多個(gè)攝像圖像 中指定記錄在記錄介質(zhì)13中的至少一幅的攝像圖像。
權(quán)利要求
一種圖像選擇裝置，其特征在于，具有取得單元，其取得將一個(gè)人以上的人作為被攝體進(jìn)行連續(xù)攝像而生成的多個(gè)攝像圖像；臉檢測單元，其檢測由所述取得單元所取得的所述多個(gè)攝像圖像中含有的人臉；眼睛檢測單元，從由所述臉檢測單元檢測出的所述人臉檢測眼睛；眨眼檢測單元，檢測由所述眼睛檢測單元檢測出的各個(gè)所述眼睛的眨眼程度；評(píng)價(jià)單元，基于由所述眨眼檢測單元檢測出的所述眨眼程度，評(píng)價(jià)所述人臉的狀態(tài)；以及指定單元，基于由所述評(píng)價(jià)單元作出的所述評(píng)價(jià)，從由所述取得單元取得的所述多個(gè)攝像圖像中指定記錄在記錄介質(zhì)中的至少一幅攝像圖像。
2.根據(jù)權(quán)利要求1所述的圖像選擇裝置，其特征在于，還具有閾值計(jì)算單元，其基于由所述眨眼檢測單元檢測出的每個(gè)人的所述眨眼程度， 計(jì)算用于判定每個(gè)人的所述眼睛是否睜開的閾值；以及眨眼判定單元，其基于由所述閾值計(jì)算單元計(jì)算出的閾值，對(duì)由所述取得單元所取得 的所述多個(gè)攝像圖像判定每個(gè)人的所述眼睛是否睜開。
3.根據(jù)權(quán)利要求2所述的圖像選擇裝置，其特征在于，還具有第1圖像判定單元，其基于所述眨眼判定單元作出的判定結(jié)果，判定由所述取 得單元所取得的多個(gè)攝像圖像中閉眼的臉數(shù)最少的攝像圖像是否存在多個(gè)，所述指定單元，在由所述第1圖像判定單元判定為閉眼的臉數(shù)最少的攝像圖像不是多 個(gè)時(shí)，將該攝像圖像指定為記錄在所述記錄單元的一幅攝像圖像。
4.根據(jù)權(quán)利要求3所述的圖像選擇裝置，其特征在于，還具有第2圖像判定單元，其在由所述第1圖像判定單元判定為閉眼的臉數(shù)最少的攝 像圖像存在多個(gè)時(shí)，判定該閉眼的臉數(shù)是否為0，所述指定單元，在由所述第2圖像判定單元判定為閉眼的臉數(shù)為0時(shí)，基于由所述眨眼 檢檢測單元檢測出的每個(gè)人的眨眼程度，指定記錄在所述記錄介質(zhì)中的攝像圖像。
5.根據(jù)權(quán)利要求1所述的圖像選擇裝置，其特征在于，還具有笑臉檢測單元，其基于由所述眼睛檢測單元檢測出的眼睛的位置信息，對(duì)檢測 出該眼睛的臉的微笑程度進(jìn)行檢測；以及眨眼修正單元，其根據(jù)由該笑臉檢測單元檢測出的微笑程度，修正由所述眨眼檢測單 元檢測出的眨眼程度，所述指定單元，根據(jù)由所述眨眼修正單元進(jìn)行了修正的眨眼程度判斷人臉的狀態(tài)。
6.根據(jù)權(quán)利要求3所述的圖像選擇裝置，其特征在于，還具有笑臉檢測單元，其基于由所述眼睛檢測單元檢測出的眼睛的位置信息，對(duì)檢測 出該眼睛的臉的微笑程度進(jìn)行檢測；以及第2圖像判定單元，在由所述第1圖像判定單元判定為閉眼的臉數(shù)最少的攝像圖像存 在多個(gè)時(shí)，判定該閉眼的臉數(shù)是否為0，所述指定單元，在由所述第2圖像判定單元判定為閉眼的臉數(shù)不為0時(shí)，基于由所述笑 臉檢測單元檢測出的微笑程度，指定記錄在所述記錄介質(zhì)中攝像圖像。
7.根據(jù)權(quán)利要求1所述的圖像選擇裝置，其特征在于，還具有可靠性計(jì)算單元，其計(jì)算由所述眼睛檢測單元進(jìn)行的眼睛檢測的可靠性；以及有效性判定單元，根據(jù)由該可靠性計(jì)算單元計(jì)算出的可靠性是否為規(guī)定閾值以下，判 定檢測出涉及該可靠性的眼睛的臉的有效性，所述指定單元，判斷由所述有效性判定單元判定為有效的人臉的狀態(tài)。
8.根據(jù)權(quán)利要求1所述的圖像選擇裝置，其特征在于，還具有平滑單元，所述平滑單元在攝像幀率為規(guī)定值以上時(shí)，對(duì)由所述眨眼檢測單元 檢測出的眨眼程度在相鄰圖像間進(jìn)行平滑處理，所述指定單元，根據(jù)由所述平滑單元進(jìn)行了平滑處理的眨眼程度判斷人臉的狀態(tài)。
9.根據(jù)權(quán)利要求7所述的圖像選擇裝置，其特征在于，還具有抖動(dòng)檢測單元，其對(duì)由所述取得單元所取得的多個(gè)攝像圖像之中、由所述有效 性判定單元判定為臉部有效的各攝像圖像，檢測相對(duì)于相鄰圖像的抖動(dòng)量；以及第3圖像判定單元，其判定由該抖動(dòng)檢測單元檢測出的各攝像圖像的抖動(dòng)量比規(guī)定值 小的攝像圖像的數(shù)目是否為多個(gè)，所述眨眼檢測單元，在由所述第3圖像判定單元判定為抖動(dòng)量比規(guī)定值小的攝像圖像 存在多個(gè)時(shí)，檢測由所述眼睛檢測單元檢測出的眼睛的眨眼程度。
10.根據(jù)權(quán)利要求9所述的圖像選擇裝置，其特征在于，還具有抖動(dòng)修正單元，其根據(jù)相對(duì)于臉的位置的抖動(dòng)的位置，對(duì)由所述抖動(dòng)檢測單元 檢測出的各攝像圖像的抖動(dòng)量進(jìn)行修正，所述指定單元，其基于由所述抖動(dòng)修正單元進(jìn)行了修正的各攝像圖像的抖動(dòng)量，指定 抖動(dòng)量比規(guī)定值小的攝像圖像。
11.根據(jù)權(quán)利要求9所述的圖像選擇裝置，其特征在于，所述指定單元，在由所述第3圖像判定單元判定為抖動(dòng)量比規(guī)定值小的攝像圖像的數(shù) 目不是多個(gè)時(shí)，將抖動(dòng)量最小的攝像圖像指定為記錄在所述記錄介質(zhì)中的攝像圖像。
12.根據(jù)權(quán)利要求1所述的圖像選擇裝置，其特征在于，基于由所述評(píng)價(jià)單元作出的評(píng)價(jià)，對(duì)由所述取得單元所取得的多個(gè)攝像圖像進(jìn)行重新 排序。
13.根據(jù)權(quán)利要求1所述的圖像選擇裝置，其特征在于，所述取得單元包括環(huán)形緩沖器，所述環(huán)形緩沖器能夠暫時(shí)存儲(chǔ)規(guī)定數(shù)目的圖像幀。
14.根據(jù)權(quán)利要求1所述的圖像選擇裝置，其特征在于，還具有人物注冊單元，所述人物注冊單元讓用戶進(jìn)行人物的注冊， 在所述臉檢測單元檢測出的臉是所述人物注冊單元中注冊過的人物時(shí)，所述評(píng)價(jià)單元 修正涉及該臉的評(píng)價(jià)值。
15.根據(jù)權(quán)利要求1所述的圖像選擇裝置，其特征在于， 還具有攝像單元，所述攝像單元進(jìn)行所述攝像圖像的攝像，根據(jù)所述臉檢測單元檢測出的臉，設(shè)定所述攝像單元連續(xù)進(jìn)行攝像的圖像的數(shù)目。
16.根據(jù)權(quán)利要求1所述的圖像選擇裝置，其特征在于，還具有抖動(dòng)檢測單元，所述抖動(dòng)檢測單元在由所述臉檢測單元沒有檢測出人臉時(shí)，對(duì) 由所述取得單元所取得的多個(gè)攝像圖像，分別檢測相對(duì)于相鄰圖像的抖動(dòng)量，所述指定單元，將由所述抖動(dòng)檢測單元檢測出的抖動(dòng)量最小的攝像圖像指定為在所述 記錄單元記錄的攝像圖像。
17. 一種圖像選擇方法，其特征在于，包含取得將一個(gè)人以上的人作為被攝體進(jìn)行連續(xù)攝像而生成的多個(gè)攝像圖像的步驟； 進(jìn)行臉檢測處理的步驟，所述臉檢測處理檢測所述多個(gè)攝像圖像中含有的人臉； 進(jìn)行眼睛檢測處理的步驟，所述眼睛檢測處理從由所述臉檢測處理檢測出的所述人臉 檢測眼睛；進(jìn)行眨眼檢測處理的步驟，所述眨眼檢測處理檢測由所述眼睛檢測處理檢測出的所述 眼睛各自的眨眼程度；基于由所述眨眼檢測處理檢測出的所述眨眼程度，評(píng)價(jià)所述人臉的狀態(tài)的步驟；以及， 基于所述評(píng)價(jià)，從所述多個(gè)攝像圖像中指定記錄在記錄介質(zhì)中的至少一幅攝像圖像的步驟。
全文摘要
本發(fā)明提供一種圖像選擇裝置，其包括如下單元，分別是取得單元，其取得通過將一個(gè)人以上的人作為被攝體進(jìn)行連續(xù)攝像而生成的多個(gè)攝像圖像；臉檢測單元，其檢測由所述取得單元所取得的所述多個(gè)攝像圖像中含有的人臉(human faces)；眼睛檢測單元，從由所述臉檢測單元檢測出的所述人臉檢測眼睛；眨眼檢測單元，檢測由所述眼睛檢測單元檢測出的所述各個(gè)眼睛的眨眼程度(blink degrees)；評(píng)價(jià)單元，基于由所述眨眼檢測單元檢測出的所述眨眼程度評(píng)價(jià)所述人臉的狀態(tài)(status)；指定單元，基于由所述評(píng)價(jià)單元的所述評(píng)價(jià)，從由所述取得單元取得的所述多個(gè)攝像圖像中指定(select)記錄在記錄介質(zhì)中的至少一幅攝像圖像。
文檔編號(hào)H04N5/76GK101854484SQ201010157700
公開日2010年10月6日 申請日期2010年3月31日 優(yōu)先權(quán)日2009年3月31日
發(fā)明者松永和久 申請人:卡西歐計(jì)算機(jī)株式會(huì)社