專利名稱:圖像處理設(shè)備和方法以及個(gè)人識(shí)別設(shè)備的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及信息處理設(shè)備和信息處理方法,其能夠評(píng)估所獲取信息的 可靠性,并且按照所述可靠性而處理信息。本發(fā)明也涉及個(gè)人識(shí)別設(shè)備, 其適合于使用例如臉部圖像來(lái)識(shí)別個(gè)人,并且本發(fā)明也涉及在個(gè)人識(shí)別設(shè) 備中產(chǎn)生/更新字典數(shù)據(jù)的方法。
背景技術(shù):
在按照現(xiàn)有技術(shù)的個(gè)人識(shí)別方法中,對(duì)于多個(gè)要識(shí)別的人預(yù)先存儲(chǔ)諸
如人臉、聲音、指印等的識(shí)別元素(identification element)的特征數(shù)據(jù)。 當(dāng)給出要識(shí)別的人的識(shí)別元素的特征數(shù)據(jù)時(shí),將給定的特征數(shù)據(jù)與被存儲(chǔ) 為每個(gè)人的字典數(shù)據(jù)的識(shí)別元素的特征數(shù)據(jù)相比較,由此識(shí)別給定的識(shí)別 元素是誰(shuí)的識(shí)別元素。
在這種個(gè)人識(shí)別方法中,在將臉部圖像用作識(shí)別元素的情況下,獲取 要識(shí)別的每個(gè)人的特征圖像,并且使用從臉部圖像提取的特征數(shù)據(jù)來(lái)產(chǎn)生 字典數(shù)據(jù)(dictionary data)。在字典數(shù)據(jù)的產(chǎn)生中, 一般,為了使取得用 作識(shí)別元素的臉部圖像的條件的變化的效果或者臉部方位的變化的效果最 小化,獲取每個(gè)人的多個(gè)臉部圖像,并且將臉部圖像的平均特征數(shù)據(jù)存儲(chǔ) 其每個(gè)人的字典數(shù)據(jù)(參見(jiàn)例如日本未審查專利申請(qǐng)公開(kāi)第2003-271958 號(hào))。
一般,每次識(shí)別人的臉部圖像時(shí),使用人的所識(shí)別的臉部圖像的特征 數(shù)據(jù)來(lái)更新人的臉部圖像的字典數(shù)據(jù)。
一般,在字典數(shù)據(jù)的產(chǎn)生/更新中,等同地處理多個(gè)臉部圖像,而不加權(quán)。
發(fā)明內(nèi)容
為了正確地識(shí)別臉部圖像,期望臉部圖像滿足基本要求,諸如具有大 于例如64x64像素的圖像大小的要求、臉部圖像的方位應(yīng)當(dāng)在正前方
(exact front direction)上的要求、兩眼應(yīng)當(dāng)位于水平線上的要求等。 但是,在實(shí)際中,所獲取的臉部圖像不必然總是滿足基本要求。 在識(shí)別臉部圖像的過(guò)程中,如果不滿足基本要求,則通過(guò)下述方式來(lái)
進(jìn)行校正通過(guò)對(duì)于臉部圖像數(shù)據(jù)執(zhí)行插值和/或旋轉(zhuǎn)等,以便盡可能大程
度地滿足基本要求,由此使得有可能識(shí)別臉部圖像。
如果成功地識(shí)別了給定的臉部圖像,則使用這個(gè)臉部圖像的特征數(shù)據(jù) 來(lái)產(chǎn)生或者更新字典數(shù)據(jù),而不用加權(quán)臉部圖像。換句話說(shuō),使用同等加 權(quán)的臉部圖像的特征數(shù)據(jù)來(lái)產(chǎn)生或者更新字典數(shù)據(jù),而不論臉部圖像是否 滿足基本要求。
但是,對(duì)于臉部圖像的所有特征數(shù)據(jù)同等加權(quán)會(huì)引起所產(chǎn)生/更新的字 典數(shù)據(jù)的精度或者可靠性的降低。
上述問(wèn)題不僅可能發(fā)生在臉部圖像的字典數(shù)據(jù)的產(chǎn)生/更新中,而且可 能發(fā)生在許多過(guò)程中,其中,雖然給定的圖像滿足基本要求的程度可能不 同,但仍同等地加權(quán)所有的給定圖像。
上述問(wèn)題不僅可能對(duì)于人的識(shí)別元素是臉部圖像的情況發(fā)生,而且可 能對(duì)于諸如指印、虹膜圖案等其他識(shí)別元素發(fā)生。而且,上述的問(wèn)題不僅 可能對(duì)于諸如臉部圖像信息或者指印圖像信息的圖像信息發(fā)生,而且對(duì)于 被用作識(shí)別元素的諸如聲紋的音頻信息也可能發(fā)生。
鑒于上述情況,期望提供一種用于考慮到相對(duì)于預(yù)定一個(gè)或多個(gè)基本 要求的偏差而處理給定的信息的技術(shù)。
具體上,期望提供一種技術(shù),用于在考慮到給定信息滿足基本要求的 程度的情況下,來(lái)產(chǎn)生/更新在基于諸如臉部圖像的識(shí)別元素的個(gè)人識(shí)別中 使用的字典數(shù)據(jù),由此實(shí)現(xiàn)字典數(shù)據(jù)的產(chǎn)生/更新中的高精度和高可靠性。
按照本發(fā)明的一個(gè)實(shí)施例,提供了一種信息處理設(shè)備,其包括獲取 裝置,用于獲取預(yù)定類型的信息;可靠性信息產(chǎn)生裝置,用于根據(jù)相對(duì)于
預(yù)定標(biāo)準(zhǔn)條件的偏差而產(chǎn)生可靠性信息,用于指示預(yù)定類型的信息的可靠
性;以及,存儲(chǔ)裝置,用于與預(yù)定類型的信息相關(guān)聯(lián)地存儲(chǔ)由可靠性信息
產(chǎn)生裝置產(chǎn)生的用于指示預(yù)定類型的信息的可靠性的可靠性信息。
在這個(gè)信息處理設(shè)備中,按照相對(duì)于預(yù)定標(biāo)準(zhǔn)條件的偏差而確定所獲 取的預(yù)定類型的信息的可靠性,并且存儲(chǔ)用于指示所確定的可靠性的可靠 性信息。因此,可以根據(jù)可靠性信息來(lái)選擇具有高可靠性的信息,并且可 以在處理中使用所選擇的具有高可靠性的信息。
按照本發(fā)明的一個(gè)實(shí)施例,提供了一種個(gè)人識(shí)別設(shè)備,其包括字典 數(shù)據(jù)存儲(chǔ)單元,其適合于以與用于識(shí)別個(gè)人的個(gè)人識(shí)別信息相關(guān)聯(lián)地存儲(chǔ) 個(gè)人識(shí)別字典數(shù)據(jù)的方式,存儲(chǔ)從提取自個(gè)人的識(shí)別元素的特征向量產(chǎn)生 的與個(gè)人相關(guān)聯(lián)的個(gè)人識(shí)別字典數(shù)據(jù);識(shí)別裝置,用于通過(guò)比較從所獲取 的個(gè)人的識(shí)別元素提取的特征數(shù)據(jù)與在字典數(shù)據(jù)存儲(chǔ)單元中存儲(chǔ)的識(shí)別字
典數(shù)據(jù),識(shí)別具有與所獲取的個(gè)人的識(shí)別元素相同的識(shí)別元素的個(gè)人;可
靠性信息產(chǎn)生裝置,用于根據(jù)相對(duì)于就識(shí)別元素而言的預(yù)定標(biāo)準(zhǔn)條件的偏
差而產(chǎn)生用于指示所獲取的識(shí)別元素的可靠性的可靠性信息;字典數(shù)據(jù)產(chǎn)
生信息存儲(chǔ)單元,其適合于與個(gè)人識(shí)別信息相關(guān)聯(lián)地,對(duì)于要識(shí)別的每個(gè) 人,存儲(chǔ)由可靠性信息產(chǎn)生裝置產(chǎn)生的多組用于指示所獲取的識(shí)別元素的 可靠性的可靠性信息和所獲取的識(shí)別元素的數(shù)據(jù)或者從識(shí)別元素提取的特
征數(shù)據(jù);以及,字典數(shù)據(jù)產(chǎn)生/更新裝置,用于使用與對(duì)應(yīng)于在字典數(shù)據(jù)產(chǎn) 生信息存儲(chǔ)單元中存儲(chǔ)的個(gè)人識(shí)別信息的每個(gè)人相關(guān)聯(lián)的多個(gè)識(shí)別元素?cái)?shù) 據(jù)或者從識(shí)別元素提取的特征數(shù)據(jù)及其可靠性信息來(lái)產(chǎn)生或者更新與要識(shí) 別的每個(gè)人相關(guān)聯(lián)的識(shí)別字典數(shù)據(jù),其中,以按照可靠性信息確定的加權(quán) 因子來(lái)加權(quán)特征數(shù)據(jù)。
在這個(gè)個(gè)人識(shí)別設(shè)備中,使用以加權(quán)因子加權(quán)的識(shí)別元素的特征數(shù)據(jù) 來(lái)產(chǎn)生/更新字典數(shù)據(jù),其中,加權(quán)因子是按照相對(duì)于就個(gè)人的識(shí)別元素而 言預(yù)定的標(biāo)準(zhǔn)條件的偏差而被確定的,因此有可能獲得字典數(shù)據(jù)的高精度 和高識(shí)別精度。
在如上的信息處理設(shè)備中,按照相對(duì)于預(yù)定標(biāo)準(zhǔn)條件的偏差來(lái)確定所 獲取的預(yù)定類型的信息的可靠性,并且存儲(chǔ)用于指示所確定的可靠性的可 靠性信息。因此,可以根據(jù)可靠性來(lái)選擇具有高可靠性的信息,并且可以 在處理中使用所選擇的具有高可靠性的信息。
在如上的個(gè)人識(shí)別設(shè)備中,獲得了字典數(shù)據(jù)的高精度和高識(shí)別精度。
圖1是圖解按照本發(fā)明的一個(gè)實(shí)施例的個(gè)人識(shí)別設(shè)備的硬件配置的一 個(gè)示例的方框圖2是圖解按照本發(fā)明的一個(gè)實(shí)施例的臉部識(shí)別字典數(shù)據(jù)庫(kù)的內(nèi)容的 一個(gè)示例的圖3圖解了按照本發(fā)明的一個(gè)實(shí)施例由個(gè)人識(shí)別設(shè)備執(zhí)行的臉部識(shí)別 過(guò)程的一個(gè)示例;
圖4是用于說(shuō)明按照本發(fā)明的一個(gè)實(shí)施例由個(gè)人識(shí)別設(shè)備執(zhí)行的臉部 識(shí)別過(guò)程的一個(gè)示例的圖5是用于說(shuō)明按照本發(fā)明的一個(gè)實(shí)施例由個(gè)人識(shí)別設(shè)備執(zhí)行的臉部 識(shí)別過(guò)程的一個(gè)示例的圖6是用于說(shuō)明按照本發(fā)明的一個(gè)實(shí)施例由個(gè)人識(shí)別設(shè)備執(zhí)行的臉部 識(shí)別過(guò)程的一個(gè)示例的圖7是用于說(shuō)明按照本發(fā)明的一個(gè)實(shí)施例由個(gè)人識(shí)別設(shè)備執(zhí)行的臉部 識(shí)別過(guò)程的一個(gè)示例的圖8圖解了按照本發(fā)明的一個(gè)實(shí)施例用于在個(gè)人識(shí)別設(shè)備中計(jì)算臉部 圖像的得分的方式;
圖9是用于說(shuō)明按照本發(fā)明的一個(gè)實(shí)施例在個(gè)人識(shí)別設(shè)備中計(jì)算臉部 圖像的得分的過(guò)程的圖10A-10C是用于說(shuō)明按照本發(fā)明的一個(gè)實(shí)施例在個(gè)人識(shí)別設(shè)備中計(jì) 算臉部圖像的得分的過(guò)程的圖11是用于說(shuō)明按照本發(fā)明的一個(gè)實(shí)施例在個(gè)人識(shí)別設(shè)備中計(jì)算臉 部圖像的得分的過(guò)程的圖12A-12C是用于說(shuō)明按照本發(fā)明的一個(gè)實(shí)施例在個(gè)人識(shí)別設(shè)備中計(jì) 算臉部圖像的得分的過(guò)程的圖13是用于說(shuō)明按照本發(fā)明的一個(gè)實(shí)施例在個(gè)人識(shí)別設(shè)備中計(jì)算臉 部圖像的得分的過(guò)程的圖14是圖解按照本發(fā)明的一個(gè)實(shí)施例由個(gè)人識(shí)別設(shè)備執(zhí)行的臉部識(shí) 別過(guò)程的一部分的流程圖15是圖解按照本發(fā)明的所述實(shí)施例由個(gè)人識(shí)別設(shè)備執(zhí)行的臉部識(shí) 別過(guò)程的另一部分的流程圖16是圖解按照本發(fā)明的一個(gè)實(shí)施例由個(gè)人識(shí)別設(shè)備執(zhí)行的更新臉 部識(shí)別字典數(shù)據(jù)的過(guò)程的流程圖17是圖解按照本發(fā)明的一個(gè)實(shí)施例由個(gè)人識(shí)別設(shè)備執(zhí)行的得分計(jì) 算過(guò)程的一部分的流程圖;以及
圖18是圖解按照本發(fā)明的所述實(shí)施例由個(gè)人識(shí)別設(shè)備執(zhí)行的得分計(jì) 算過(guò)程的另一部分的流程圖。
具體實(shí)施例方式
下面結(jié)合附圖參考特定實(shí)施例進(jìn)一步詳細(xì)地說(shuō)明本發(fā)明。在下述的實(shí) 施例中,例如,本發(fā)明被應(yīng)用到適合于使用臉部圖像作為識(shí)別元素來(lái)識(shí)別 個(gè)人的識(shí)別設(shè)備。
圖1是圖解按照本發(fā)明的一個(gè)實(shí)施例適合于使用臉部圖像來(lái)識(shí)別個(gè)人 的個(gè)人識(shí)別設(shè)備的配置的一個(gè)示例的方框圖。在圖1中所示的示例中,在 個(gè)人計(jì)算機(jī)等上實(shí)現(xiàn)適合于使用臉部圖像來(lái)識(shí)別個(gè)人的個(gè)人識(shí)別設(shè)備。在 圖1中所示的配置中,可以以軟件功能塊的形式來(lái)實(shí)現(xiàn)一些塊。
在按照本實(shí)施例的個(gè)人識(shí)別設(shè)備中,如圖1中所示,CPU (中央處理 單元)經(jīng)由系統(tǒng)總線2而連接到ROM (只讀存儲(chǔ)器)3 (其中存儲(chǔ)了程序 和相關(guān)聯(lián)的數(shù)據(jù))、RAM (隨機(jī)存取存儲(chǔ)器)4 (用作工作區(qū)域)、操作 單元接口 5、顯示接口 6和圖像數(shù)據(jù)輸入接口 7。
包括鍵盤、鼠標(biāo)等的操作輸入單元8連接到操作單元接口 5。諸如 LCD (液晶顯示器)的顯示器9連接到顯示接口 6。
在經(jīng)由圖像數(shù)據(jù)輸入接口 7輸入來(lái)自具有USB (通用串行總線)接口 的、諸如照像機(jī)之類的圖像輸出設(shè)備的圖像數(shù)據(jù)的情況下,圖像數(shù)據(jù)輸入 接口 7被配置為包括USB終端和USB接口 。
在經(jīng)由圖像數(shù)據(jù)輸入接口 7輸入從卡型存儲(chǔ)器輸出的圖像數(shù)據(jù)的情況
下,以能夠從其上安裝的卡型存儲(chǔ)器讀取圖像數(shù)據(jù)的存儲(chǔ)器讀取器的形式 來(lái)配置圖像數(shù)據(jù)輸入接口7。
另一方面,為了從光盤接收?qǐng)D像數(shù)據(jù),圖像數(shù)據(jù)輸入接口 7被配置為 包括光盤驅(qū)動(dòng)器,其能夠從光盤讀取圖像數(shù)據(jù)。
圖像數(shù)據(jù)輸入接口 7不僅讀取圖像數(shù)據(jù),而且讀取與圖像數(shù)據(jù)相關(guān)聯(lián) 的數(shù)據(jù),諸如Exif (交換圖像文件格式)數(shù)據(jù),其指示取得圖像的時(shí)間、 取得圖像的條件等。
在本實(shí)施例中,系統(tǒng)總線2也連接到臉部識(shí)別字典數(shù)據(jù)庫(kù)10、臉部識(shí) 別圖像處理單元11、臉部識(shí)別單元12、顯示信息產(chǎn)生器13、得分計(jì)算單 元14和字典數(shù)據(jù)產(chǎn)生/更新單元15。
使用諸如硬盤驅(qū)動(dòng)器之類的存儲(chǔ)器件的存儲(chǔ)區(qū)域的一部分或者全部來(lái) 配置臉部識(shí)別字典數(shù)據(jù)庫(kù)10。在本實(shí)施例中,在臉部識(shí)別字典數(shù)據(jù)庫(kù)10 中,與識(shí)別每個(gè)個(gè)人的個(gè)人識(shí)別信息(例如個(gè)人識(shí)別ID)相關(guān)聯(lián)地存儲(chǔ)要 通過(guò)其臉部圖像識(shí)別的多個(gè)被注冊(cè)的個(gè)人Pi (i二l, 2,...)中的每一個(gè)的 個(gè)人字典數(shù)據(jù)Di (i=l, 2,...,其中i表示個(gè)人編號(hào))。在下面的說(shuō)明 中,"使用臉部圖像的個(gè)人識(shí)別"也被簡(jiǎn)稱為"臉部識(shí)別"。
在本實(shí)施例中,如圖2中所示,每個(gè)個(gè)人的個(gè)人字典數(shù)據(jù)D,包括臉部 識(shí)別字典數(shù)據(jù)FRDi和一條或n條(n二l, 2, ..., N)字典數(shù)據(jù)產(chǎn)生信息 DPIi,n,并且被與個(gè)人識(shí)別信息相關(guān)聯(lián)地存儲(chǔ)。在本實(shí)施例中,將個(gè)人姓名 用作個(gè)人識(shí)別信息。注意個(gè)人識(shí)別信息不限于個(gè)人姓名,而是可以將諸如 個(gè)人識(shí)別號(hào)、個(gè)人識(shí)別碼等或者這樣的信息的組合之類的其他信息用作個(gè) 人識(shí)別信息。
在本實(shí)施例中,個(gè)人字典數(shù)據(jù)D,對(duì)于每個(gè)個(gè)人可以存儲(chǔ)最多N (例如 40)條字典數(shù)據(jù)產(chǎn)生信息。根據(jù)其中存儲(chǔ)了字典數(shù)據(jù)的存儲(chǔ)設(shè)備的存儲(chǔ)容 量來(lái)確定每個(gè)個(gè)人的字典數(shù)據(jù)產(chǎn)生信息的條數(shù)的上限。因此,在本實(shí)施例 中,對(duì)于每個(gè)個(gè)人字典數(shù)據(jù)Di計(jì)算總的得分,并且如果因?yàn)榇鎯?chǔ)容量的 極限而不能存儲(chǔ)所有的個(gè)人字典數(shù)據(jù),則僅僅保留具有高的總得分的個(gè)人 字典數(shù)據(jù)。
字典數(shù)據(jù)產(chǎn)生信息DPIi,n對(duì)于要通過(guò)臉部圖像識(shí)別的每個(gè)個(gè)人Pi包括
在不同時(shí)間捕獲的n (最多N)條臉部圖像信息。在本實(shí)施例中,如圖2
中所示,字典數(shù)據(jù)產(chǎn)生信息DPIi,n包括時(shí)間信息Ti>n、所捕獲的臉部圖像的
特征數(shù)據(jù)Vu、用于指示所捕獲的臉部圖像的可靠性的總得分S0,,n (后面 將詳細(xì)說(shuō)明其計(jì)算方法)和根據(jù)得分SOu而確定的加權(quán)因子Wi,n。
在與圖像數(shù)據(jù)相關(guān)聯(lián)的Exif信息包括用于指示取得圖像的時(shí)間的數(shù)據(jù) 的情況下,在Exif信息中包括的時(shí)間信息直接地被用作時(shí)間信息Tj,n。如 果Exif信息不包括用于指示取得圖像的時(shí)間的數(shù)據(jù),則CPU 1在顯示器9 上顯示消息以向用戶提示輸入取得圖像的時(shí)間,并且使用由用戶響應(yīng)于所 述消息而輸入的時(shí)間來(lái)作為時(shí)間信息Ti>n?;蛘?,可以將捕獲圖像數(shù)據(jù)的 時(shí)間用作時(shí)間信息Ti,n。
臉部識(shí)別字典數(shù)據(jù)FRDi是使用被存儲(chǔ)為第i個(gè)個(gè)人Pj的字典數(shù)據(jù)產(chǎn)生 信息DPIi,n的一部分的臉部圖像的特征數(shù)據(jù)(特征向量)而產(chǎn)生/更新的特 征數(shù)據(jù)(特征向量),并且是基于其來(lái)識(shí)別所捕獲的臉部圖像的與個(gè)人P, 相關(guān)聯(lián)的字典數(shù)據(jù)。
在本實(shí)施例中,通過(guò)下述方式來(lái)產(chǎn)生與每個(gè)個(gè)人Pi相關(guān)聯(lián)的臉部識(shí)別 字典數(shù)據(jù)FRDi:通過(guò)使用來(lái)自臉部識(shí)別字典數(shù)據(jù)庫(kù)10的與每個(gè)個(gè)人Pi相 關(guān)聯(lián)的字典數(shù)據(jù)產(chǎn)生信息DPIi)n的加權(quán)特征數(shù)據(jù)(特征向量)來(lái)進(jìn)行計(jì) 算。下面說(shuō)明所述計(jì)算的細(xì)節(jié),其中包括特征數(shù)據(jù)的加權(quán)因子的確定。
如圖3中所示,臉部識(shí)別圖像處理單元11從經(jīng)由圖像數(shù)據(jù)輸入接口 7 捕獲的原始圖像數(shù)據(jù)中檢測(cè)臉部,并且進(jìn)一步檢測(cè)其眼睛,并且旋轉(zhuǎn)該臉 部圖像以便所檢測(cè)的雙眼位于水平線上。這個(gè)旋轉(zhuǎn)被執(zhí)行來(lái)將給定的臉部 圖像轉(zhuǎn)換為接近面部識(shí)別中使用的精確地從前部取得的雙眼位于水平線上 的參考臉部圖像的狀態(tài)。
而且,臉部識(shí)別圖像處理單元11繪制在提取臉部圖像的特性部分 (如眉毛、眼睛、鼻子、嘴等)的特征數(shù)據(jù)中使用的特征點(diǎn)(執(zhí)行特征點(diǎn) 的采樣),并且將特征向量Vin檢測(cè)為所捕獲的臉部圖像Fin的特征數(shù) 據(jù)。以多個(gè)特征值的函數(shù)的形式來(lái)給出該特征向量Vin。
由臉部識(shí)別圖像處理單元11執(zhí)行的檢測(cè)臉部及其眼睛的過(guò)程和計(jì)算 特征向量Vin的過(guò)程可以按照例如在日本未審查專利申請(qǐng)公開(kāi)第2006-
72770號(hào)中公開(kāi)的技術(shù)、在日本未審查專利申請(qǐng)公開(kāi)第2005-44330號(hào)中公 開(kāi)的技術(shù)、題目為"Learning of real-time arbitrary-position face detector based on pixel difference features"的文章(Proceedings of the Symposium on Sensing via Image Information, 2004年6月,第547-552頁(yè))中公開(kāi)的技 術(shù),但是在此不描述技術(shù)細(xì)節(jié)。
臉部識(shí)別圖像處理單元11向臉部識(shí)別單元12提供作為所捕獲的臉部 圖像Fin的特征數(shù)據(jù)而獲取的特征向量Vin。而且,臉部識(shí)別圖像處理單 元11向得分計(jì)算單元14提供作為檢測(cè)臉部的過(guò)程的結(jié)果而獲得的臉部圖 像數(shù)據(jù)和用于指示眼睛檢測(cè)結(jié)果的數(shù)據(jù)。在本示例中,向用于指示被提供 到得分計(jì)算單元14的所檢測(cè)臉部的臉部圖像數(shù)據(jù)附加用于指示所檢測(cè)的 臉部圖像的圖像數(shù)據(jù)大小的數(shù)據(jù)。通過(guò)在所檢測(cè)的臉部圖像的垂直方向上 的像素的數(shù)量和在水平方向上的像素的數(shù)量來(lái)表達(dá)臉部圖像的圖像數(shù)據(jù)大 小。
如果臉部識(shí)別圖像處理單元11未能檢測(cè)到臉部或者眼睛,或者如果 臉部識(shí)別圖像處理單元11未能在檢測(cè)到臉部和眼睛后計(jì)算特征向量,則 臉部識(shí)別圖像處理單元11向臉部識(shí)別單元12和顯示信息產(chǎn)生器13發(fā)送用 于指示上述事實(shí)的消息。
如果臉部識(shí)別單元12從臉部識(shí)別圖像處理單元ll接收到作為從所捕 獲的圖像獲取的臉部圖像Fin的特征數(shù)據(jù)的特征向量Vin,則臉部識(shí)別單 元12將所接收的特征向量Vin與在臉部識(shí)別字典數(shù)據(jù)庫(kù)10中存儲(chǔ)的多個(gè) 個(gè)人的臉部識(shí)別字典數(shù)據(jù)(特征向量)FRDi相比較,以檢測(cè)與特征向量 Vin相同的臉部識(shí)別字典數(shù)據(jù)FR^。
如果檢測(cè)到與特征向量Vin相同的臉部識(shí)別字典數(shù)據(jù)FRDi,則臉部識(shí) 別單元12向顯示信息產(chǎn)生器13發(fā)送用于指示已經(jīng)檢測(cè)到與特征向量Vin 相同的臉部識(shí)別字典數(shù)據(jù)FRDi的消息和對(duì)應(yīng)于所檢測(cè)的臉部識(shí)別字典數(shù) 據(jù)FRDi的個(gè)人識(shí)別信息(在本具體示例中為個(gè)人的姓名)。
另一方面,如果未檢測(cè)到與特征向量Vin相同的臉部識(shí)別字典數(shù)據(jù) FRDi,則臉部識(shí)別單元12向顯示信息產(chǎn)生器13發(fā)送用于指示這個(gè)事實(shí)的 消息。
在臉部識(shí)別單元12從臉部識(shí)別圖像處理單元11接收到用于指示臉部 識(shí)別圖像處理單元11未能檢測(cè)到臉部或者眼睛的消息的情況下,或者如 果雖然已經(jīng)檢測(cè)到臉部和眼睛但是臉部識(shí)別圖像處理單元11未能計(jì)算特 征向量,則臉部識(shí)別單元12不執(zhí)行如上所述的臉部識(shí)別過(guò)程。
在顯示信息產(chǎn)生器13從臉部識(shí)別單元12接收到用于指示己經(jīng)識(shí)別了
臉部的消息和作為由于臉部識(shí)別的結(jié)果而獲得的個(gè)人識(shí)別信息的個(gè)人姓名
的情況下,顯示信息產(chǎn)生器13產(chǎn)生臉部識(shí)別結(jié)果確認(rèn)屏幕的顯示信息, 例如在圖4中所示的屏幕,其使得用戶有可能確認(rèn)臉部識(shí)別結(jié)果,并且顯 示信息產(chǎn)生器13經(jīng)由顯示接口 6向顯示器9提供所產(chǎn)生的顯示信息。顯示 器9按照所接收的顯示信息來(lái)在顯示屏幕上顯示臉部識(shí)別結(jié)果確認(rèn)屏幕。
在該臉部識(shí)別結(jié)果確認(rèn)屏幕上,如圖4中所示,顯示了所捕獲的臉部 圖像Fin的圖像21和用于詢問(wèn)用戶臉部識(shí)別結(jié)果是否正確的消息22。該 消息的一個(gè)示例是"這是xxxxx先生嗎?",其中,"xxxxx"是作為臉 部識(shí)別的結(jié)果而獲得的姓名。另外,還顯示按鈕圖標(biāo)23和24,用于響應(yīng) 于查詢消息22。
在本示例中,臉部識(shí)別單元12己經(jīng)確定所捕獲的臉部圖像的特征數(shù) 據(jù)與和"Taro Tanaka"先生相關(guān)聯(lián)的個(gè)人字典數(shù)據(jù)D,的臉部圖像的特征數(shù) 據(jù)(臉部識(shí)別字典數(shù)據(jù)FRD》相同,因此,在如圖4中所示的查詢消息 22中將"TaroTanaka"顯示為"xxxxx"。
當(dāng)回答肯定時(shí)使用響應(yīng)按鈕圖標(biāo)23,而當(dāng)回答否定時(shí)使用響應(yīng)按鈕圖 標(biāo)24。
在圖4中所示的屏幕上,如果用戶通過(guò)使用操作輸入單元8來(lái)點(diǎn)擊響 應(yīng)按鈕圖標(biāo)23以肯定地響應(yīng),則顯示信息產(chǎn)生器13向字典數(shù)據(jù)產(chǎn)生/更新 單元15提供用于指示作為臉部識(shí)別的結(jié)果而獲得的姓名的信息,并且指 令字典數(shù)據(jù)產(chǎn)生/更新單元15使用所捕獲的臉部圖像執(zhí)行字典數(shù)據(jù)產(chǎn)生/更 新處理。字典數(shù)據(jù)產(chǎn)生/更新單元15對(duì)應(yīng)于作為個(gè)人識(shí)別信息而接收的姓 名而產(chǎn)生/更新在臉部識(shí)別字典數(shù)據(jù)庫(kù)10中存儲(chǔ)的個(gè)人字典數(shù)據(jù)D,,如在 下面更詳細(xì)所述。
在圖4中所示的屏幕上,如果用戶通過(guò)使用操作輸入單元8點(diǎn)擊響應(yīng)
按鈕圖標(biāo)24以否定地響應(yīng),則顯示信息產(chǎn)生器13產(chǎn)生錯(cuò)誤臉部識(shí)別通知
屏幕的顯示信息,例如在圖5中所示的顯示信息,以向用戶通知臉部識(shí)別 結(jié)果不正確,并且顯示信息產(chǎn)生器13經(jīng)由顯示接口 6向顯示器9提供所產(chǎn) 生的顯示信息。顯示器9按照所接收的顯示信息來(lái)在顯示屏幕上顯示該錯(cuò) 誤臉部識(shí)別通知屏幕。
在該錯(cuò)誤臉部識(shí)別通知屏幕上,如圖5中所示,顯示所捕獲的臉部圖 像的圖像21,并且另外,顯示消息25以向用戶提示輸入所捕獲的臉部圖 像Fin的正確的姓名。作為響應(yīng),用戶在消息字段25中的姓名字段26中 輸入其臉部圖像被顯示為圖像21的個(gè)人的姓名。
如果用戶輸入姓名,則顯示信息產(chǎn)生器13向字典數(shù)據(jù)產(chǎn)生/更新單元 15提供關(guān)于輸入姓名的信息,并且指令字典數(shù)據(jù)產(chǎn)生/更新單元15使用所 捕獲的臉部圖像Fin開(kāi)始字典數(shù)據(jù)產(chǎn)生/更新過(guò)程。字典數(shù)據(jù)產(chǎn)生/更新單元 15査看總的得分(下述)以確定是否需要對(duì)應(yīng)于作為個(gè)人識(shí)別信息而接收 的姓名來(lái)更新/產(chǎn)生在臉部識(shí)別字典數(shù)據(jù)庫(kù)10中存儲(chǔ)的個(gè)人字典數(shù)據(jù)D" 如在下面更詳細(xì)所述。如果確定需要執(zhí)行該更新/產(chǎn)生過(guò)程,則字典數(shù)據(jù)產(chǎn) 生/更新單元15更新/產(chǎn)生個(gè)人字典數(shù)據(jù)Di。
在用戶發(fā)出命令以結(jié)束臉部識(shí)別過(guò)程而不在姓名字段26中輸入姓名 的情況下,顯示信息產(chǎn)生器13不提供關(guān)于姓名的信息,而是向字典數(shù)據(jù) 產(chǎn)生/更新單元15提供一個(gè)消息以通知不需要字典數(shù)據(jù)的更新/產(chǎn)生。在這 種情況下,字典數(shù)據(jù)產(chǎn)生/更新單元15不更新/產(chǎn)生字典數(shù)據(jù)。
在顯示信息產(chǎn)生器13從臉部識(shí)別單元12接收到用于指示在臉部識(shí)別 過(guò)程中未在字典數(shù)據(jù)庫(kù)10中找到對(duì)應(yīng)于所捕獲的臉部圖像的個(gè)人字典數(shù) 據(jù)的消息的情況下,顯示信息產(chǎn)生器13產(chǎn)生例如在圖6中所示的屏幕的 顯示信息,以向用戶通知在臉部識(shí)別過(guò)程中未找到對(duì)應(yīng)的個(gè)人字典數(shù)據(jù), 并且顯示信息產(chǎn)生器13經(jīng)由顯示接口 6向顯示器9提供所產(chǎn)生的顯示信 息。顯示器9在顯示屏幕上顯示所接收的顯示信息。
在圖6中所示的屏幕上,顯示所捕獲的臉部圖像Fin的圖像21,并且 另外,顯示消息27以提示用戶輸入所捕獲的臉部圖像Fin的名稱。作為響 應(yīng),用戶在消息字段27中的姓名字段28中輸入其臉部圖像被顯示為圖像
21的人的姓名。
如果用戶輸入姓名,則顯示信息產(chǎn)生器13向字典數(shù)據(jù)產(chǎn)生/更新單元 15提供關(guān)于輸入姓名的信息,并且指令字典數(shù)據(jù)產(chǎn)生/更新單元15使用所 捕獲的臉部圖像來(lái)執(zhí)行字典數(shù)據(jù)產(chǎn)生/更新過(guò)程。字典數(shù)據(jù)產(chǎn)生/更新單元
15査看總的得分(下述)以確定是否需要更新/產(chǎn)生對(duì)應(yīng)于被接收作為個(gè) 人識(shí)別信息的姓名的個(gè)人字典數(shù)據(jù)Di,如下更詳細(xì)所述。如果確定需要執(zhí) 行更新/產(chǎn)生過(guò)程,則字典數(shù)據(jù)產(chǎn)生/更新單元15更新/產(chǎn)生個(gè)人字典數(shù)據(jù) Di。
如果用戶發(fā)出命令來(lái)結(jié)束臉部識(shí)別過(guò)程而不在姓名字段28中輸入姓 名,則顯示信息產(chǎn)生器13不提供關(guān)于姓名的信息,而是向字典數(shù)據(jù)產(chǎn)生/ 更新單元15提供消息,以通知不需要字典數(shù)據(jù)的更新/產(chǎn)生。在這種情況 下,字典數(shù)據(jù)產(chǎn)生/更新單元15不更新/產(chǎn)生字典數(shù)據(jù)。
在顯示信息產(chǎn)生器13從臉部識(shí)別圖像處理單元11接收到用于指示在 臉部或者眼睛的檢測(cè)中或者在特征向量的計(jì)算中發(fā)生了失敗的消息的情況 下,顯示信息產(chǎn)生器13產(chǎn)生例如在圖7中所示的屏幕的識(shí)別失敗通知屏 幕的顯示信息,并且經(jīng)由顯示接口 6向顯示器9提供所產(chǎn)生的顯示信息。 顯示器9在顯示器9的屏幕上顯示所接收的顯示信息。
在該識(shí)別失敗通知屏幕上,如圖7中所示,顯示消息29以指示在字 典的更新中未使用所捕獲的臉部圖像。顯示信息產(chǎn)生器13然后向字典數(shù) 據(jù)產(chǎn)生/更新單元15提供消息以通知不執(zhí)行字典的更新。
在得分計(jì)算單元14從臉部識(shí)別圖像處理單元11接收到與所檢測(cè)的臉 部和眼睛相關(guān)聯(lián)的數(shù)據(jù)的情況下,得分計(jì)算單元14計(jì)算用于指示從經(jīng)由 圖像數(shù)據(jù)輸入接口 7而捕獲的圖像提取的臉部圖像的可靠性的得分。在得 分計(jì)算單元14從臉部識(shí)別圖像處理單元11接收到用于指示在臉部或者眼 睛的檢測(cè)中或者在特征向量的計(jì)算中發(fā)生了失敗的消息的情況下,得分計(jì) 算單元14不執(zhí)行所捕獲的臉部圖像的得分的計(jì)算。
在本實(shí)施例中,得分計(jì)算單元14通過(guò)檢測(cè)經(jīng)歷臉部識(shí)別的臉部圖像 相對(duì)于標(biāo)準(zhǔn)條件的偏差而計(jì)算用于指示經(jīng)歷臉部識(shí)別的所捕獲的臉部圖像 的可靠性的得分。
例如,對(duì)于經(jīng)歷臉部識(shí)別的臉部圖像而言的標(biāo)準(zhǔn)條件是(A)臉部圖 像的數(shù)據(jù)的像素的數(shù)量應(yīng)當(dāng)在水平和垂直方向上等于或者大于預(yù)定值(在 本實(shí)施例中,像素的數(shù)量應(yīng)當(dāng)在水平和垂直方向上都等于或者大于64個(gè)
像素),(B)應(yīng)當(dāng)精確地從前面觀看臉部,(C)兩眼應(yīng)當(dāng)位于水平線上。
在本實(shí)施例中,相對(duì)于標(biāo)準(zhǔn)條件,為所捕獲的臉部圖像的特征數(shù)據(jù)計(jì)
算四個(gè)得分Sa、 Sb、 Sc和Sd,然后從該四個(gè)得分Sa、 Sb、 Sc和Sd計(jì)算 所捕獲的臉部圖像的特征數(shù)據(jù)的總的得分SO。該得分Sa、 Sb、 Sc和Sd 中的每一個(gè)取值從O到1。當(dāng)可靠性在最低水平時(shí),得分被設(shè)置為"0"。 該可靠性越高,則該得分被設(shè)置到更高的值。當(dāng)可靠性在最高水平時(shí),得 分被設(shè)置為"1"。下面更詳細(xì)地說(shuō)明得分Sa、 Sb、 Sc和Sd。
就臉部圖像的數(shù)據(jù)大小而言的得分Sa
在四個(gè)得分中,得分Sa指示就從所捕獲的圖像檢測(cè)的臉部圖像的數(shù) 據(jù)大小而言的可靠性。
在對(duì)于經(jīng)歷臉部識(shí)別的臉部圖像而言的標(biāo)準(zhǔn)條件(A)中,如果將在 臉部識(shí)別中所需要的臉部圖像的最小數(shù)據(jù)大小表示為MIN—SIZE并且將對(duì) 于臉部識(shí)別足夠大的臉部圖像的數(shù)據(jù)大小被表示為MAX—SIZE,則從相對(duì) 于MIN—SIZE和MAX—SIZE的所捕獲的臉部圖像的數(shù)據(jù)大小Xa來(lái)計(jì)算得 分Sa,如圖8中所示。
如圖8中所示,當(dāng)Xa〈MIN—SIZE時(shí),Sa=0。
當(dāng)MIN—SIZE SXa《MAX—SIZE時(shí),Sa=k'Xa,其中,k是正比例常 數(shù)(即kX))。
當(dāng)MAX—SIZE 〈Xa時(shí),Sa二l。
在本實(shí)施例中,將MIN一SIZE設(shè)置為等于64x64像素,并且將 MAX—SIZE設(shè)置為大于64x64像素并且足夠大來(lái)執(zhí)行臉部識(shí)別的值。
注意所捕獲的臉部圖像的數(shù)據(jù)大小是指從經(jīng)由圖像數(shù)據(jù)輸入接口 7捕 獲的原始圖像檢測(cè)的臉部圖像的數(shù)據(jù)大小,并且它與經(jīng)歷圖像處理(例如 由臉部識(shí)別圖像處理單元11執(zhí)行的數(shù)據(jù)插值)的臉部圖像的數(shù)據(jù)大小不
同。
在由臉部識(shí)別圖像處理單元11執(zhí)行的臉部識(shí)別過(guò)程中,臉部圖像數(shù) 據(jù)需要具有等于或者大于預(yù)定下限(在本示例中為64x64像素)的數(shù)據(jù)大 小。如果所檢測(cè)的臉部圖像的數(shù)據(jù)大小小于下限,則執(zhí)行數(shù)據(jù)插值以獲得 具有等于或者大于下限的數(shù)據(jù)大小的臉部圖像,并且試圖從結(jié)果產(chǎn)生的臉 部圖像檢測(cè)特征向量。當(dāng)旋轉(zhuǎn)所檢測(cè)的臉部圖像以便兩眼到達(dá)在水平線上 的位置時(shí),如果必要?jiǎng)t可以執(zhí)行插值。如果從經(jīng)由該插值而獲得的臉部圖 像提取特征向量,則有可能從結(jié)果產(chǎn)生的特征向量正確地執(zhí)行臉部識(shí)別。
注意,根據(jù)還沒(méi)有經(jīng)歷由臉部識(shí)別圖像處理單元11執(zhí)行的像素插值
的臉部圖像的數(shù)據(jù)大小來(lái)計(jì)算如上所述的得分Sa。
在本實(shí)施例中,當(dāng)臉部圖像的數(shù)據(jù)大小Xa小于MIN_SIZE時(shí),確定 很難獲得具有用于臉部識(shí)別的足夠高的可靠性的特征向量,并且Sa被設(shè) 置為0。另一方面,如果臉部圖像的數(shù)據(jù)大小Xa大于MAX—SIZE,則確 定有可能獲得具有用于臉部識(shí)別的足夠高的可靠性的特征向量,并且Sa 被設(shè)置為1。當(dāng)臉部圖像的數(shù)據(jù)大小Xa大于MIN—SIZE并且小于 MAX—SIZE時(shí),確定在臉部識(shí)別中使用的特征向量的可靠性與數(shù)據(jù)大小 Xa成比例,因此,得分Sa被設(shè)置為與數(shù)據(jù)大小Xa成比例的值。
在圖8中所示的示例中,當(dāng)臉部圖像的數(shù)據(jù)大小Xa大于MIN—SIZE 并且小于MAX—SIZE時(shí),用于指示在臉部識(shí)別中使用的特征向量的可靠性 的得分Sa隨著數(shù)據(jù)大小Xa而線性地改變?;蛘撸梢噪S著數(shù)據(jù)大小Xa 而非線性地改變得分Sa。例如,可以隨著Xa的平方來(lái)改變得分Sa。
就相對(duì)于前方(front direction)的臉部圖像的方位而言的得分Sb 如上所述,在標(biāo)準(zhǔn)條件中,期望精確地從前部觀看在臉部識(shí)別中使用 的臉部圖像。 一般,如果臉部圖像的方向相對(duì)于正前方的偏差在可容許范 圍之外,則不可能計(jì)算臉部圖像的特征向量。因此,在本實(shí)施例中,根據(jù) 臉部圖像的方向相對(duì)于正前方的偏差而計(jì)算得分Sb。
因此,得分Sb指示就臉部圖像的特征向量的計(jì)算而言的可靠性。 如圖9中所示,臉部的方位(角度)可以在下述三個(gè)方向上改變。在
滾動(dòng)方向(roll direction)上的改變是圍繞旋轉(zhuǎn)軸31的旋轉(zhuǎn),該旋轉(zhuǎn)軸31 從臉部前部向臉部后部延伸。在俯仰方向(pitch direction)上的改變是圍 繞旋轉(zhuǎn)軸32的旋轉(zhuǎn),該旋轉(zhuǎn)軸32在與旋轉(zhuǎn)軸31垂直的水平方向上延伸。 在擺動(dòng)方向(yaw direction)上的改變是圍繞旋轉(zhuǎn)軸33的旋轉(zhuǎn),該旋轉(zhuǎn)軸 33在與旋轉(zhuǎn)軸31垂直的垂直方向上延伸。
臉部識(shí)別圖像處理單元11通過(guò)旋轉(zhuǎn)圖像使得兩眼到達(dá)在水平線上的 位置來(lái)校正在滾動(dòng)方向上的方位的改變,并且對(duì)于結(jié)果產(chǎn)生的臉部圖像執(zhí) 行臉部識(shí)別。因此,在本實(shí)施例中,在得分Sb的計(jì)算中不考慮在滾動(dòng)方 向上的改變。
因此,在本實(shí)施例中,僅僅考慮到在俯仰方向和擺動(dòng)方向上的方位的 改變而計(jì)算得分Sb。在本實(shí)施例中,如果臉部圖像的方位相對(duì)于正前方的 偏差大到以至于不能對(duì)于臉部圖像計(jì)算特征向量,則得分Sb被設(shè)置為0。 在臉部圖像的方位相對(duì)于正前方的偏差在俯仰和擺動(dòng)方向上都在允許計(jì)算 臉部圖像的特征向量的小范圍中的情況下,將得分Sb設(shè)置為1。
在本實(shí)施例中,如果將臉部圖像的方位相對(duì)于前方的、在俯仰方向上 的偏差的角度表示為Apitoh,并且將在擺動(dòng)方向上的偏差的角度表示為 Ayaw,則例如通過(guò)下面的表達(dá)式來(lái)給出允許計(jì)算臉部圖像的特征向量的可 允許范圍
<formula>formula see original document page 20</formula>
因此,在本實(shí)施例中,當(dāng)-15° &\pitch ^+15°并且-15° ^Ayaw S+15。時(shí), 將得分Sb設(shè)置為1。但是,如果不滿足上述的條件,則將得分Sb設(shè)置為 0。
就滾動(dòng)方向上的旋轉(zhuǎn)的微小程度而言的得分Sc
得分Sc指示就滾動(dòng)方向上的旋轉(zhuǎn)的微小程度而言,臉部識(shí)別中的臉 部圖像的可靠性。因此,得分計(jì)算單元14根據(jù)還沒(méi)有經(jīng)歷在滾動(dòng)方向上 的旋轉(zhuǎn)的校正的臉部圖像而計(jì)算得分Sc。
在本實(shí)施例中,如圖10中所示,將在滾動(dòng)方向上的偏差定義為在部
分檢測(cè)過(guò)程中檢測(cè)的兩眼之間的、在未經(jīng)歷旋轉(zhuǎn)的臉部圖像中的垂直距離 Xc (相對(duì)于兩眼理想上所位于的水平線的偏差,或者在垂直方向上測(cè)量的 左眼的位置(高度)和在垂直方向上測(cè)量的右眼的位置(高度)之間的距 離)。
具體上,在所檢測(cè)的兩眼位于如圖IOA中所示的水平線上的情況下,
兩眼之間的垂直距離Xc等于0 (Xc=0)。另一方面,在所檢測(cè)的臉部圖 像具有在圖IOB或者IOC中所示的在滾動(dòng)方向上的方位偏差的情況下,所 檢測(cè)的雙眼之間的垂直距離Xc具有對(duì)應(yīng)于在滾動(dòng)方向上的旋轉(zhuǎn)量的值。
當(dāng)兩眼在水平線上時(shí),即當(dāng)兩眼之間的垂直距離Xc等于0時(shí),得分 Sc具有最大值,即Sc二l。隨著提高兩眼之間的垂直距離Xc,得分Sc向 最小值0降低。在本實(shí)施例中,得分Sc具有通過(guò)在圖11中所示的兩眼之 間的垂直距離Xc的高斯分布函數(shù)而給出的值。
具體上,按照下述的公式(1)來(lái)計(jì)算得分Sc。
(1)
其中,b是為使Xc二0時(shí)Sc^而確定的值,5是標(biāo)準(zhǔn)偏差,并且m是平均 值。從大量的臉部圖像的采樣來(lái)統(tǒng)計(jì)地確定這些參數(shù)的值。
就擺動(dòng)方向上的旋轉(zhuǎn)的微小程度而言的得分Sd
在得分Sb的上述計(jì)算中,如果臉部圖像在擺動(dòng)方向上相對(duì)于前方的 旋轉(zhuǎn)在可允許的范圍內(nèi),并且如果在俯仰方向上的旋轉(zhuǎn)也在可允許的范圍 內(nèi),則得分Sb被設(shè)置為l,而與在可允許范圍內(nèi)的旋轉(zhuǎn)量無(wú)關(guān)。
當(dāng)在擺動(dòng)方向上的方位的偏差在可允許的范圍內(nèi)時(shí),為了更精確地評(píng) 估在擺動(dòng)方向上的旋轉(zhuǎn)對(duì)于所捕獲的臉部圖像的識(shí)別的可靠性的影響,將 得分Sd定義如下。
艮口,在本實(shí)施例中,如圖12A-12C中所示,臉部圖像的方位的擺動(dòng)方 向相對(duì)于前方的偏差被定義為從臉部圖像的中線41 (與擺動(dòng)的旋轉(zhuǎn)軸33 (圖9)平行地延伸、并且通過(guò)在對(duì)應(yīng)于眼睛位置的高度的臉部圖像的左 右邊40之間的水平線的中點(diǎn)的線)到所檢測(cè)的兩眼之間的中點(diǎn)42的距離 Xd。
注意,無(wú)論是否已經(jīng)進(jìn)行了在滾動(dòng)方向上的旋轉(zhuǎn)的校正,兩眼之間的 中點(diǎn)42都在同一位置。在本實(shí)施例中,得分計(jì)算單元14根據(jù)未經(jīng)歷在滾
動(dòng)方向上的旋轉(zhuǎn)的校正的臉部圖像計(jì)算距離Xd。
如果所檢測(cè)的兩眼之間的中點(diǎn)42像在圖12A中所示的示例中那樣在 臉部圖像的中線41上,則Xd=0。在這種情況下,臉部圖像的方位在前 方上,并且期望可以從臉部圖像提取高可靠性的特征向量,因此將得分Sd 設(shè)置為1 (Sd=l)。
如圖12B和12C中所示,得分Sd隨著所檢測(cè)的兩眼之間的中點(diǎn)42和 臉部圖像的中線41之間的距離Xd的增加而向0降低。在本實(shí)施例中,得 分Sd具有由距離Xd的高斯分布函數(shù)給出的值,該距離Xd是臉部圖像的 中線41和所檢測(cè)的兩眼之間的中點(diǎn)42之間的距離,如圖13中所示。 具體上,按照下面給出的公式(2)而計(jì)算得分Sd。
2" (2)
其中,c是為使Xd二0時(shí)Sd^而確定的值,5是標(biāo)準(zhǔn)偏差,并且M是平均 值。從大量的臉部圖像的采樣來(lái)統(tǒng)計(jì)地確定這些參數(shù)的值。
1
總的得分
在本實(shí)施例中,得分計(jì)算單元14按照方程(3)從四個(gè)得分Sa、 Sb、 Sc和Sd計(jì)算總的得分SO。在此,因?yàn)榈梅钟?jì)算單元14計(jì)算新捕獲的臉 部圖像的數(shù)據(jù)的總得分,因此將由得分計(jì)算單元14計(jì)算的總得分表示為
SOnew二SaxSbxScxSd (3)
注意,方程(3)是確定總得分SOnew的方式的一個(gè)示例,并且可以 不同地確定總得分SOnew。例如,可以如下計(jì)算該總得分。 SOnew=Sa+Sb+Sc+Sd (4) 或者,可以如下計(jì)算總得分。
SOnew=ka-Saxkb-Sbxkc'Scxkd.Sd ( 5 )
或者
SOnew=ka.Sa+kb.Sb+kc.Sc+kd.Sd (6)
其中,ka、 kb、 kc和kd分別是分配給得分Sa、 Sb、 Sc禾B Sd的加權(quán)因子。
臉部圖像的特征向量的加權(quán)因子W
可以在臉部圖像識(shí)別字典數(shù)據(jù)FRDi的更新中直接使用總得分SO,或 者可以確定臉部圖像的特征向量的被加權(quán)的加權(quán)因子W,并且使用該加權(quán) 因子W來(lái)更新臉部圖像識(shí)別字典數(shù)據(jù)FRDi。
在本實(shí)施例中,得分計(jì)算單元14根據(jù)總得分SOnew計(jì)算新捕獲的臉 部圖像的特征向量的加權(quán)因子Wnew。
具體上,按照下述的公式(7),將加權(quán)因子Wnew確定為與總得分 SOnew成線性比例。
Wnew=k.SOnew (7) 其中,k是比例常數(shù)。
注意,在k被設(shè)置為l的情況下,將總得分SOnew直接地用作加權(quán)因 子Wnew。
計(jì)算加權(quán)因子Wnew的方式不限于基于公式(7)的方式,而是可以 不同地確定加權(quán)因子Wnew。例如,將加權(quán)因子Wnew確定為使得加權(quán)因 子Wnew隨著總得分SOnew非線性地改變。例如,可以通過(guò)下述公式 (8)來(lái)給出加權(quán)因子Wnew。
Wnew二k.(SOnew)2 (8)
或者,可以如下確定加權(quán)因子Wnew。當(dāng)總得分SOnew等于或者小于 預(yù)定的第一閾值時(shí),將加權(quán)因子Wnew設(shè)置為0,當(dāng)總得分SOnew大于預(yù) 定的第一閾值時(shí),按照公式(7)或者(8)來(lái)確定加權(quán)因子Wnew。
或者,可以如下確定加權(quán)因子Wnew。當(dāng)總得分SOnew等于或者小于 預(yù)定的第一閾值時(shí),加權(quán)因子Wnew被設(shè)置為0。但是,當(dāng)總得分SOnew 大于預(yù)定的第二閾值(大于第一閾值)時(shí),加權(quán)因子Wnew被設(shè)置為1。 當(dāng)總得分SOnew大于預(yù)定的第一閾值并且小于第二閾值時(shí),按照公式 (7)或者(8)來(lái)確定加權(quán)因子Wnew。
如上所述,得分計(jì)算單元14計(jì)算每個(gè)所捕獲的臉部圖像的總得分
2SOnew,并且進(jìn)一步根據(jù)總得分SOnew計(jì)算加權(quán)因子Wnew。所計(jì)算的總 得分SOnew和加權(quán)因子Wnew被提供到字典數(shù)據(jù)產(chǎn)生/更新單元15。
臉部識(shí)別字典數(shù)據(jù)FRD,的更新
在本實(shí)施例中,當(dāng)作為由臉部識(shí)別單元13執(zhí)行的識(shí)別過(guò)程的結(jié)果而 確定個(gè)人識(shí)別信息時(shí),字典數(shù)據(jù)產(chǎn)生/更新單元15更新對(duì)應(yīng)于個(gè)人識(shí)別信 息的個(gè)人字典數(shù)據(jù)Di的字典數(shù)據(jù)產(chǎn)生信息DPI,,n,并且使用這個(gè)更新的字 典數(shù)據(jù)產(chǎn)生信息DPIi,n,更新對(duì)應(yīng)于個(gè)人識(shí)別信息的個(gè)人字典數(shù)據(jù)Di的臉 部識(shí)別字典數(shù)據(jù)FRDi。
具體上,字典數(shù)據(jù)產(chǎn)生/更新單元15將新捕獲的臉部圖像的總得分 SOnew與字典數(shù)據(jù)產(chǎn)生信息DPI,,n (其已經(jīng)在臉部識(shí)別字典數(shù)據(jù)庫(kù)10中被 存儲(chǔ)為對(duì)應(yīng)于新捕獲的臉部圖像的個(gè)人P,的個(gè)人字典數(shù)據(jù)Dt)的每個(gè)總得 分SO^相比較,以確定臉部識(shí)別字典數(shù)據(jù)庫(kù)10是否包括其總得分SO&小 于該新捕獲的臉部圖像的總得分SOnew的字典數(shù)據(jù)產(chǎn)生信息DP^,即新 捕獲的臉部圖像的總得分SOnew是否大于在臉部識(shí)別字典數(shù)據(jù)庫(kù)10中存 儲(chǔ)的字典數(shù)據(jù)產(chǎn)生信息DPI^中的一些的總得分。
如果字典數(shù)據(jù)產(chǎn)生/更新單元15確定新捕獲的臉部圖像的總得分 SOnew大于在臉部識(shí)別字典數(shù)據(jù)庫(kù)10中存儲(chǔ)的一些字典數(shù)據(jù)產(chǎn)生信息 DPIj,n的總得分,則字典數(shù)據(jù)產(chǎn)生/更新單元15更新個(gè)人字典數(shù)據(jù)Di的臉 部識(shí)別字典數(shù)據(jù)FRDi。
在臉部識(shí)別字典數(shù)據(jù)FRDi的更新中,字典數(shù)據(jù)產(chǎn)生/更新單元15首先 從臉部識(shí)別字典數(shù)據(jù)庫(kù)10的個(gè)人字典數(shù)據(jù)Di刪除具有最小總得分SO,,n的 字典數(shù)據(jù)產(chǎn)生信息DPIi,n,并且字典數(shù)據(jù)產(chǎn)生/更新單元15在臉部識(shí)別字典 數(shù)據(jù)庫(kù)10中將新的臉部圖像的特征向量、時(shí)間數(shù)據(jù)、加權(quán)因子Wnew和 總得分SOnew存儲(chǔ)為個(gè)人字典數(shù)據(jù)。
而且,字典數(shù)據(jù)產(chǎn)生/更新單元15按照下面所示的公式(9)來(lái)更新臉 部識(shí)別字典數(shù)據(jù)FRDi。<formula>formula see original document page 24</formula> (9)
即,字典數(shù)據(jù)產(chǎn)生/更新單元15計(jì)算在N條字典數(shù)據(jù)產(chǎn)生信息DPIU到 DPIi,n中描述的特征向量Vi,n與對(duì)應(yīng)的加權(quán)因子W^的乘積的和,并且將結(jié) 果產(chǎn)生的和除以N個(gè)加權(quán)因子的和。結(jié)果被存儲(chǔ)為更新的臉部識(shí)別字典數(shù)
據(jù)FRD,。
因?yàn)槭褂迷揘個(gè)加權(quán)的字典數(shù)據(jù)產(chǎn)生信息DP^到DPI^來(lái)計(jì)算臉部 識(shí)別字典數(shù)據(jù)FRDi (對(duì)應(yīng)于特征向量),因此,臉部識(shí)別字典數(shù)據(jù)FRDi 在精度上好于按照下面所示的公式(10)根據(jù)在N個(gè)字典數(shù)據(jù)產(chǎn)生信息 DP^到DPIi,n中包括的特征向量的簡(jiǎn)單平均而獲得的結(jié)果。
F肌、^—— (10) iv
此外,作為更新的結(jié)果,在臉部識(shí)別字典數(shù)據(jù)庫(kù)10中存儲(chǔ)具有最高 總得分的N個(gè)字典數(shù)據(jù)產(chǎn)生信息DPIu到DPI^,因此,將臉部識(shí)別字典數(shù) 據(jù)FRD,更新為更精確的版本。
在確定新捕獲的臉部圖像的總得分SOnew小于在臉部識(shí)別字典數(shù)據(jù)庫(kù) 10中存儲(chǔ)的任何字典數(shù)據(jù)產(chǎn)生信息DPI^的總得分SOnew的情況下,不執(zhí) 行個(gè)人字典數(shù)據(jù)Dj的臉部識(shí)別字典數(shù)據(jù)FRDi的更新。因?yàn)閷⒆值鋽?shù)據(jù)產(chǎn) 生信息DPIi,J勺特征值替換為當(dāng)前的特征值會(huì)導(dǎo)致臉部識(shí)別字典數(shù)據(jù)FRDj 的精度的降低。
在臉部識(shí)別字典數(shù)據(jù)庫(kù)10中的個(gè)人字典數(shù)據(jù)Di中描述的字典數(shù)據(jù)產(chǎn) 生信息DPI,,。的數(shù)量小于N的情況下,字典數(shù)據(jù)產(chǎn)生/更新單元15產(chǎn)生新 的臉部識(shí)別字典數(shù)據(jù)FRDi以便在臉部識(shí)別字典數(shù)據(jù)庫(kù)10中將與新捕獲的 臉部圖像相關(guān)聯(lián)的特征向量、時(shí)間信息、總得分SOnew和加權(quán)因子Wnew 存儲(chǔ)為新的字典數(shù)據(jù)產(chǎn)生信息DPIi,n,而不將新捕獲的臉部圖像的總得分 SOnew與已經(jīng)存在于臉部識(shí)別字典數(shù)據(jù)庫(kù)10中的字典數(shù)據(jù)產(chǎn)生信息DPI,,n 的總得分相比較。在這種情況下,在臉部識(shí)別字典數(shù)據(jù)FRDi的產(chǎn)生中, 字典數(shù)據(jù)產(chǎn)生/更新單元15使用在臉部識(shí)別字典數(shù)據(jù)庫(kù)10中存儲(chǔ)的個(gè)人字 典數(shù)據(jù)Di中包括的字典數(shù)據(jù)產(chǎn)生信息DPIi,n的數(shù)量,而不是公式(9)中 的N。
如果在臉部識(shí)別字典數(shù)據(jù)庫(kù)10中存儲(chǔ)的個(gè)人字典數(shù)據(jù)Di中包括的字
典數(shù)據(jù)產(chǎn)生信息DPIi,n的數(shù)量達(dá)到N,則在其后執(zhí)行的臉部識(shí)別字典數(shù)據(jù)
FRD,的更新中,字典數(shù)據(jù)產(chǎn)生/更新單元15將新捕獲的臉部圖像的總得分 SOnew與每個(gè)字典數(shù)據(jù)產(chǎn)生信息DPIi,J勺總得分SC^相比較,并且使用以 從最高總得分向較低總得分的順序選擇的N條字典數(shù)據(jù)產(chǎn)生信息來(lái)更新臉 部識(shí)別字典數(shù)據(jù)FRD,。
在圖1中所示的功能方框配置中,臉部識(shí)別圖像處理單元11、臉部識(shí) 別單元12、顯示信息產(chǎn)生器13、得分計(jì)算單元14和字典數(shù)據(jù)產(chǎn)生/更新單 元15可以被實(shí)現(xiàn)為硬件,或者可以以軟件功能塊的形式被實(shí)現(xiàn),該軟件 功能塊由CPU 1通過(guò)使用RAM 4來(lái)作為工作區(qū)域而執(zhí)行在ROM 3中存儲(chǔ) 的軟件程序來(lái)實(shí)現(xiàn)。
在如上所述的實(shí)施例中,每個(gè)字典數(shù)據(jù)產(chǎn)生信息DPIi,n至少包括特征 向量、時(shí)間信息、總得分和加權(quán)因子。該字典數(shù)據(jù)產(chǎn)生信息DPl可以不 包括加權(quán)因子,并且加權(quán)因子可以從總得分計(jì)算出。
取代存儲(chǔ)該特征向量,可以存儲(chǔ)所捕獲的臉部圖像數(shù)據(jù),并且可以從 所存儲(chǔ)的臉部圖像數(shù)據(jù)提取該特征向量。在這種情況下,可以從所存儲(chǔ)的 臉部圖像數(shù)據(jù)來(lái)計(jì)算總得分和加權(quán)因子。因此,在這種情況下,該字典數(shù)
據(jù)產(chǎn)生信息DPIi,n至少包括臉部圖像數(shù)據(jù)。
臉部圖像識(shí)別設(shè)備的操作 臉部識(shí)別過(guò)程
下面說(shuō)明由以上述方式配置的臉部圖像識(shí)別設(shè)備執(zhí)行的臉部識(shí)別過(guò) 程、計(jì)算所捕獲的臉部圖像的特征數(shù)據(jù)的過(guò)程和產(chǎn)生/更新臉部識(shí)別字典數(shù) 據(jù)的過(guò)程。
圖14是圖解臉部識(shí)別過(guò)程的一部分的流程圖,圖15是圖解在圖14中 所示的部分之后的部分的流程圖。注意,由圖像數(shù)據(jù)輸入接口 7、臉部識(shí) 別圖像處理單元11、臉部識(shí)別單元12和顯示信息產(chǎn)生器13在CPU 1的控 制下執(zhí)行圖14和圖15中所示的過(guò)程。
如上所述,可以以軟件功能塊的形式來(lái)實(shí)現(xiàn)這些功能塊,該軟件功能 塊由CPU 1通過(guò)使用RAM 4作為工作區(qū)域執(zhí)行在ROM 3中存儲(chǔ)的軟件程
序而執(zhí)行。
首先,CPU 1經(jīng)由圖像數(shù)據(jù)輸入接口 7獲取包括臉部圖像的圖像數(shù)據(jù) 和包括Exif信息的相關(guān)聯(lián)信息,并且將它們傳送到臉部識(shí)別圖像處理單元 11 (步驟SIOI)。
響應(yīng)于由CPU 1發(fā)出的過(guò)程開(kāi)始命令,臉部識(shí)別圖像處理單元11從 所接收的圖像數(shù)據(jù)檢測(cè)臉部和眼睛,并且相對(duì)于所檢測(cè)的眼睛的位置來(lái)旋 轉(zhuǎn)臉部圖像。臉部識(shí)別圖像處理單元11然后繪制特征點(diǎn),并且從所繪制 的特征點(diǎn)產(chǎn)生特征向量(步驟S102)。在上面的過(guò)程中,從與圖像數(shù)據(jù)相 關(guān)聯(lián)的Exif信息提取用于指示取得圖像的時(shí)間的信息,并且存儲(chǔ)所提取的 時(shí)間信息。
如果臉部識(shí)別圖像處理單元11已經(jīng)成功地產(chǎn)生特征向量,則臉部識(shí) 別圖像處理單元11輸出所產(chǎn)生的特征向量和用于指示已經(jīng)成功地產(chǎn)生特 征向量的信息。但是,如果臉部識(shí)別圖像處理單元11因?yàn)槟槻繄D像數(shù)據(jù) 的數(shù)據(jù)大小太小或者某些原因而未能產(chǎn)生特征向量,則臉部識(shí)別圖像處理 單元11輸出用于指示臉部識(shí)別圖像處理單元11未能產(chǎn)生特征向量的信
CPU 1査看從臉部識(shí)別圖像處理單元11提供的信息,以確定是否已經(jīng) 成功地產(chǎn)生所捕獲的臉部圖像的特征向量(步驟S103)。在CPU 1從臉 部識(shí)別圖像處理單元11接收到用于指示臉部圖像的特征向量的產(chǎn)生己經(jīng) 失敗的信息的情況下,CPU 1將這個(gè)信息傳送到顯示信息產(chǎn)生器13。
如果顯示信息產(chǎn)生器13接收到用于指示臉部圖像的特征向量的產(chǎn)生 的失敗的信息,則顯示信息產(chǎn)生器13產(chǎn)生在圖7中所示的識(shí)別失敗通知 屏幕的顯示信息,并且輸出所產(chǎn)生的顯示信息。CPU 1經(jīng)由顯示接口 6向 顯示器9發(fā)送該識(shí)別失敗通知屏幕的顯示信息,以顯示識(shí)別失敗通知屏 幕,其包括消息29,用于指示使用所捕獲的臉部圖像的識(shí)別已經(jīng)失敗,因 此在圖7所示的字典中不使用臉部圖像(步驟S104)。
在CPU 1在步驟S103中確定從臉部識(shí)別圖像處理單元11接收的信息 指示已經(jīng)成功地產(chǎn)生臉部圖像的特征向量、并且已經(jīng)接收到所產(chǎn)生的特征 向量的情況下,CPU 1向臉部識(shí)別單元12傳送所產(chǎn)生的特征向量和用于指
示已經(jīng)成功地產(chǎn)生特征向量的信息。
臉部識(shí)別單元12按照所捕獲的臉部圖像的所接收的特征向量來(lái)搜索 臉部識(shí)別字典數(shù)據(jù)庫(kù)10,以檢測(cè)具有相同的特征向量的臉部識(shí)別字典數(shù)據(jù)
FRDi。如果發(fā)現(xiàn)了具有相同的特征向量的臉部表示字典數(shù)據(jù)FRD,,則臉 部識(shí)別單元12輸出與所檢測(cè)的臉部識(shí)別字典數(shù)據(jù)FRD,對(duì)應(yīng)的個(gè)人識(shí)別信 息(在本實(shí)施例中為人的姓名)與用于指示已經(jīng)發(fā)現(xiàn)了具有相同特征向量 的臉部識(shí)別字典數(shù)據(jù)FRDi的信息。但是,如果沒(méi)有發(fā)現(xiàn)具有相同的特征 向量的臉部識(shí)別字典數(shù)據(jù)FRDj,則臉部識(shí)別單元12輸出用于指示未發(fā)現(xiàn) 具有相同的特征向量的臉部識(shí)別字典數(shù)據(jù)FRDi的信息(步驟S105)。
CPU 1查看從臉部識(shí)別單元12輸出的信息以確定是否己經(jīng)發(fā)現(xiàn)了具有 相同的特征向量的臉部識(shí)別字典數(shù)據(jù)FRA (步驟S106)。如果確定已經(jīng) 發(fā)現(xiàn)了具有相同的特征向量的臉部識(shí)別字典數(shù)據(jù)FRD,,則CPU 1向顯示 信息產(chǎn)生器13傳送用于指示作為與從臉部識(shí)別單元12接收的所檢測(cè)的 臉部識(shí)別字典數(shù)據(jù)FRDi對(duì)應(yīng)的個(gè)人識(shí)別信息的個(gè)人的姓名的信息;以及 用于指示已經(jīng)成功地識(shí)別了臉部的信息。
如果顯示信息產(chǎn)生器13接收到用于指示已經(jīng)成功地識(shí)別了臉部的信 息和用于指示個(gè)人的姓名的信息,則顯示信息產(chǎn)生器13產(chǎn)生臉部識(shí)別結(jié) 果確認(rèn)屏幕(例如在圖4中所示的屏幕)的顯示信息,這使得用戶有可能 確認(rèn)臉部識(shí)別結(jié)果。CPU 1經(jīng)由顯示接口 6向顯示器9發(fā)送臉部識(shí)別結(jié)果 確認(rèn)屏幕的顯示信息,以顯示臉部識(shí)別結(jié)果確認(rèn)屏幕,其包括詢問(wèn)用戶臉 部識(shí)別結(jié)果是否正確的消息(步驟S107)。
CPU 1等待用戶經(jīng)由在圖4中所示的屏幕輸入用于指示臉部識(shí)別結(jié)果 是否正確的信息。如果用戶輸入信息,則CPU 1分析該輸入信息以確定該 輸入信息是否指示臉部識(shí)別結(jié)果正確(步驟S108)。如果由CPU 1進(jìn)行 的確定是輸入信息指示臉部識(shí)別結(jié)果正確,則CPU l執(zhí)行更新臉部識(shí)別字 典數(shù)據(jù)庫(kù)IO的例程(步驟S109)。下面說(shuō)明更新臉部識(shí)別字典數(shù)據(jù)庫(kù)10 的例程的細(xì)節(jié)。
另一方面,在步驟S108中進(jìn)行的確定是輸入信息指示臉部識(shí)別結(jié)果 不正確的情況下,CPU 1向顯示信息產(chǎn)生器13發(fā)送用于指示這個(gè)事實(shí)的信
息。按照所接收的信息,顯示信息產(chǎn)生器13產(chǎn)生錯(cuò)誤臉部識(shí)別通知屏幕 (例如在圖5中所示的屏幕)的顯示信息。CPU 1經(jīng)由顯示接口 6向顯示
器9發(fā)送該顯示信息,以顯示該顯示信息,該顯示信息包括消息25,用于 提示用戶輸入在屏幕上顯示的所捕獲的臉部圖像的正確姓名(在圖15中 的步驟Slll)。
CPU 1等待用戶在消息25中的姓名字段26中輸入個(gè)人的姓名(步驟 S112)。如果輸入了該姓名,則CPU 1確定臉部識(shí)別字典數(shù)據(jù)庫(kù)10是否 包括對(duì)應(yīng)于輸入的姓名的個(gè)人字典數(shù)據(jù)Di (步驟S113)。如果確定臉部 識(shí)別字典數(shù)據(jù)庫(kù)10包括對(duì)應(yīng)于輸入的姓名的個(gè)人字典數(shù)據(jù)D,,則過(guò)程跳 到步驟S109,以執(zhí)行更新臉部識(shí)別字典數(shù)據(jù)庫(kù)10的例程。
另一方面,如果在步驟S113中確定在臉部識(shí)別字典數(shù)據(jù)庫(kù)10中未發(fā) 現(xiàn)對(duì)應(yīng)于輸入姓名的個(gè)人字典數(shù)據(jù)Di,則CPU 1產(chǎn)生對(duì)應(yīng)于由輸入姓名給 出的個(gè)人識(shí)別信息的新的個(gè)人字典數(shù)據(jù)D"并且向臉部識(shí)別字典數(shù)據(jù)庫(kù) 10中與該個(gè)人識(shí)別信息相關(guān)聯(lián)地存儲(chǔ)個(gè)人字典數(shù)據(jù)Di,由此注冊(cè)該新的個(gè) 人字典數(shù)據(jù)Di (步驟S114)。該新注冊(cè)的個(gè)人字典數(shù)據(jù)Di包括如圖2中 所示的所捕獲的臉部圖像的特征向量、用于指示捕獲臉部圖像的時(shí)間的時(shí) 間信息、總得分和加權(quán)因子。因?yàn)閷?duì)于第一次捕獲的臉部圖像僅存在一個(gè) 特征向量,因此該特征向量也被注冊(cè)為臉部識(shí)別字典數(shù)據(jù)。
可以將在臉部識(shí)別字典數(shù)據(jù)庫(kù)10中注冊(cè)新的個(gè)人字典數(shù)據(jù)Di的過(guò)程 執(zhí)行為下面詳細(xì)所述的更新臉部識(shí)別字典數(shù)據(jù)庫(kù)10的過(guò)程的一部分。
在步驟S106中確定未發(fā)現(xiàn)具有與所捕獲的臉部圖像的特征向量相同 的特征向量的臉部識(shí)別字典數(shù)據(jù)FRDi的情況下,CPU 1向顯示信息產(chǎn)生 器13發(fā)送用于指示此事實(shí)的信息。如果顯示信息產(chǎn)生器13接收到用于指 示未發(fā)現(xiàn)具有與所捕獲的臉部圖像的特征向量相同的特征向量的臉部識(shí)別 字典數(shù)據(jù)FRDi的信息,則顯示信息產(chǎn)生器13產(chǎn)生例如在圖6中所示的屏 幕之類的屏幕的顯示信息,以通知用戶未發(fā)現(xiàn)對(duì)應(yīng)于臉部圖像的臉部識(shí)別 字典數(shù)據(jù)FRDi。 CPU 1經(jīng)由顯示接口 6向顯示器9發(fā)送該顯示信息,以顯 示該顯示信息,該顯示信息包括消息27,用于向用戶提示輸入在圖6中 所示的屏幕上顯示的所捕獲的臉部圖像的姓名(圖15中的步驟S115)。
CPU 1等待用戶在消息27中的姓名字段28中輸入姓名(步驟 S116)。如果輸入了姓名,則CPU l產(chǎn)生對(duì)應(yīng)于由該輸入姓名給出的個(gè)人 識(shí)別信息的新的個(gè)人字典數(shù)據(jù)Di,并且向臉部識(shí)別字典數(shù)據(jù)庫(kù)10中與個(gè) 人識(shí)別信息相關(guān)聯(lián)地存儲(chǔ)個(gè)人字典數(shù)據(jù)D,,由此注冊(cè)該新的個(gè)人字典數(shù)據(jù) Di (步驟S114)。
臉部識(shí)別字典數(shù)據(jù)庫(kù)的更新
下面說(shuō)明更新臉部識(shí)別字典數(shù)據(jù)庫(kù)的圖14中的步驟S109中的過(guò)程的 細(xì)節(jié)。圖16是圖解更新臉部識(shí)別字典數(shù)據(jù)庫(kù)的過(guò)程的一個(gè)示例的流程 圖。注意通過(guò)得分計(jì)算單元14和字典數(shù)據(jù)產(chǎn)生/更新單元15在CPU 1的控 制下來(lái)執(zhí)行在圖16中所示的步驟的序列。這些功能塊,即得分計(jì)算單元 14和字典數(shù)據(jù)產(chǎn)生/更新單元15可以被實(shí)現(xiàn)為軟件功能塊的形式,該軟件 功能塊被CPU 1通過(guò)使用RAM 4作為工作區(qū)域執(zhí)行在ROM 3中存儲(chǔ)的軟 件程序而執(zhí)行。
首先,CPU 1向得分計(jì)算單元14發(fā)送命令以開(kāi)始總得分SOnew的計(jì) 算。作為響應(yīng),得分計(jì)算單元14以如上所述的方式計(jì)算總得分SOnew和 加權(quán)因子Wnew,并且輸出計(jì)算結(jié)果(步驟S201)。下面說(shuō)明計(jì)算總得分 SOnew和加權(quán)因子Wnew的過(guò)程的細(xì)節(jié)。CPU 1向字典數(shù)據(jù)產(chǎn)生/更新單元 15傳送所計(jì)算的總得分SOnew和加權(quán)因子Wnew。
在像本實(shí)施例中那樣以硬件單元的形式實(shí)現(xiàn)得分計(jì)算單元14的情況 下,當(dāng)臉部識(shí)別圖像處理單元11已經(jīng)成功地產(chǎn)生特征向量時(shí),可以向得 分計(jì)算單元14提供用于指示所檢測(cè)的臉部圖像的數(shù)據(jù)和用于指示所檢測(cè) 的眼睛的數(shù)據(jù),并且得分計(jì)算單元14與臉部識(shí)別過(guò)程并行地計(jì)算總得分 SOnew和加權(quán)因子Wnew。在這種情況下,在更新字典數(shù)據(jù)庫(kù)10的時(shí)間 之前,得分計(jì)算單元14已經(jīng)計(jì)算了總得分SOnew和加權(quán)因子Wnew,并 且結(jié)果已經(jīng)被存儲(chǔ)在工作區(qū)域4中。因此,在步驟S201中,CPU1從工作 區(qū)域RAM 4讀取總得分SOnew和加權(quán)因子Wnew,并且將它們傳送到字 典數(shù)據(jù)產(chǎn)生/更新單元15。
字典數(shù)據(jù)產(chǎn)生/更新單元15確定用于所捕獲的臉部圖像的特征向量
的、在步驟S201中計(jì)算(獲得)的總得分SOnew是否等于0 (SOnew= 0)(步驟S202)。如果SOnew二0,則字典數(shù)據(jù)產(chǎn)生/更新單元15向 CPU 1通知SOnew二0。如果CPU 1接收這個(gè)通知,則CPU 1確定所捕獲 的臉部圖像的特征向量可靠性較低,因此,這個(gè)特征需要不應(yīng)當(dāng)用于字典 數(shù)據(jù)的更新。在這種情況下,結(jié)束本例程。
在步驟S202中確定SOnew不等于0的情況下,字典數(shù)據(jù)產(chǎn)生/更新單 元15確定是否與被正確地識(shí)別的人或者其姓名被用戶經(jīng)由在圖5或者6中 所示的屏幕輸入的人相關(guān)聯(lián)的已經(jīng)存在的字典數(shù)據(jù)產(chǎn)生信息DPI,"的數(shù)量 已經(jīng)達(dá)到上限(在本實(shí)施例中為N條)(步驟S203)。
在確定已經(jīng)存在的字典數(shù)據(jù)產(chǎn)生信息DPIi,n的條數(shù)小于N的情況下, 字典數(shù)據(jù)產(chǎn)生/更新單元15向臉部識(shí)別字典數(shù)據(jù)庫(kù)IO添加新的字典數(shù)據(jù)產(chǎn) 生信息DPIU,其包括所捕獲的臉部圖像的特征向量、時(shí)間信息、總得分 SOnew和與人(在識(shí)別過(guò)程中正確識(shí)別的人或者其姓名被用戶經(jīng)由在圖5 或者6中所示的屏幕輸入的人(以下"所識(shí)別的人"表示這樣的人))相 關(guān)聯(lián)的加權(quán)因子Wnew。
字典數(shù)據(jù)產(chǎn)生/更新單元15按照如上所述的公式(9)來(lái)計(jì)算與所識(shí)別 的人相關(guān)聯(lián)的臉部識(shí)別字典數(shù)據(jù)FRDi,由此更新臉部識(shí)別字典數(shù)據(jù)FRA (步驟S208)。注意在這種情況下,因?yàn)樽值鋽?shù)據(jù)產(chǎn)生信息DPIi,n的條數(shù) 小于N,因此將公式(9)中的N替換為字典數(shù)據(jù)產(chǎn)生信息DPIi,n的條數(shù)。
在步驟S203中確定已經(jīng)存在的字典數(shù)據(jù)產(chǎn)生信息DPIi,n的條數(shù)等于N 的情況下,字典數(shù)據(jù)產(chǎn)生/更新單元15依序讀取與所識(shí)別的人相關(guān)聯(lián)的相 應(yīng)的N條字典數(shù)據(jù)產(chǎn)生信息DPIi,n的總得分SO,n,并且依序比較總得分 SOi,n與對(duì)于所捕獲的臉部圖像計(jì)算的總得分SOnew (步驟S205)。
字典數(shù)據(jù)產(chǎn)生/更新單元15確定在N條字典數(shù)據(jù)產(chǎn)生信息DPIj,n的總 得分SO^中是否存在小于所捕獲的臉部圖像的計(jì)算出的總得分SOnew的 總得分(步驟S206)。如果未發(fā)現(xiàn)這樣的總得分SOi,n,則確定不需要更 新字典數(shù)據(jù),因此結(jié)束本處理例程。
另一方面,在步驟S206中確定在N條字典數(shù)據(jù)產(chǎn)生信息DPIi,n的總得 分SO^中存在小于所捕獲的臉部圖像的計(jì)算出的總得分SOnew的總得分
的情況下,字典數(shù)據(jù)產(chǎn)生/更新單元15從N條字典數(shù)據(jù)產(chǎn)生信息DPI,,。檢 測(cè)具有最小總得分SOi,n的字典數(shù)據(jù)產(chǎn)生信息DPIi,n,并且將檢測(cè)到的具有
最小總得分SOi,n的字典數(shù)據(jù)產(chǎn)生信息DPIi,n替換為包括具有總得分SOnew
的臉部圖像的特征向量、時(shí)間信息、總得分和加權(quán)因子的新的字典數(shù)據(jù)產(chǎn)
生信息(步驟S207)。
作為在步驟S207中執(zhí)行的替換的結(jié)果,在N條字典數(shù)據(jù)產(chǎn)生信息 DPIi,n的內(nèi)容中已經(jīng)發(fā)生改了變。因此,按照如上所述的公式(9)使用N 條字典數(shù)據(jù)產(chǎn)生信息DPIi,n的特征值和加權(quán)因子來(lái)重新計(jì)算臉部識(shí)別字典 數(shù)據(jù)FRDi,由此更新臉部識(shí)別字典數(shù)據(jù)FRDi (步驟S208)。
因此,完成更新字典數(shù)據(jù)庫(kù)的例程。
得分的計(jì)算
接著,下面說(shuō)明由得分計(jì)算單元14執(zhí)行的計(jì)算總得分和加權(quán)因子的 過(guò)程。圖17是圖解由得分計(jì)算單元14執(zhí)行的計(jì)算總得分和加權(quán)因子的過(guò) 程的一部分的流程圖,圖18是圖解在圖17中的部分之后的部分的流程 圖。
首先,得分計(jì)算單元14檢測(cè)從臉部識(shí)別圖像處理單元ll接收的臉部 圖像數(shù)據(jù)的數(shù)據(jù)大小Xa (步驟S301),并且得分計(jì)算單元14確定臉部圖 像數(shù)據(jù)的所檢測(cè)的數(shù)據(jù)大小Xa是否小于對(duì)于該臉部圖像可允許的數(shù)據(jù)大 小的預(yù)定下限MIN—SIZE (步驟S302)。
如果得分計(jì)算單元14確定臉部圖像數(shù)據(jù)的數(shù)據(jù)大小Xa小于下限 MIN一SIZE,則得分計(jì)算單元14確定與臉部圖像數(shù)據(jù)的數(shù)據(jù)大小Xa相關(guān) 聯(lián)的得分Sa,使得如圖8中所示Sa二0 (步驟S303)。
在確定臉部圖像數(shù)據(jù)的數(shù)據(jù)大小Xa不小于下限MIN一SIZE的情況 下,得分計(jì)算單元14確定臉部圖像數(shù)據(jù)的數(shù)據(jù)大小Xa是否大于預(yù)定的足 夠高的值MAX—SIZE (步驟S304)。
在得分計(jì)算單元14在步驟S304中確定臉部圖像數(shù)據(jù)的數(shù)據(jù)大小Xa 大于MAX—SIZE的情況下,得分計(jì)算單元14確定得分Sa,使得如圖8中 所示Sa二l (步驟S305)。
另一方面,當(dāng)在步驟S304中確定臉部圖像數(shù)據(jù)的數(shù)據(jù)大小Xa小于預(yù) 定的足夠高的值MAX—SIZE的情況下,得分計(jì)算單元14設(shè)置得分Sa為如 圖8中所示的依賴于臉部圖像數(shù)據(jù)的數(shù)據(jù)大小Xa的值(步驟S306)。
接著,得分計(jì)算單元14檢測(cè)所捕獲的臉部圖像的臉部的方位(角 度)(步驟S307)。得分計(jì)算單元14然后檢測(cè)角度Ayaw和角度Apitch, 其中Ay^表示在臉部圖像的方向相對(duì)于正前方在擺動(dòng)方向上的偏差,Apiteh 表示臉部圖像的方位相對(duì)于正前方在俯仰方向上的偏差(步驟S307),并 且得分計(jì)算單元14確定所檢測(cè)的角度Ay^和Ap^是否都在預(yù)定的可允許 范圍內(nèi),即是否滿足下面的條件(步驟S308)。
-15° ^Ayaw ^+15°,以及
-15。 ^Apitch ^+15°
當(dāng)在步驟S308中確定角度Ayaw和A一h都在預(yù)定的可允許范圍內(nèi)的情 況下,得分計(jì)算單元14確定與臉部的方位相關(guān)聯(lián)的得分Sb,使得Sb =1 (步驟S309)。
當(dāng)在步驟S308中確定角度Ay^和Ap,teh之-一或者兩者在預(yù)定的可允許 范圍之外的情況下,得分計(jì)算單元14確定得分Sb,使得Sb = 0 (步驟 S310)。
在步驟S309或者步驟S310后,過(guò)程進(jìn)行到在圖18中所示的步驟 S311。在步驟S311中,得分計(jì)算單元14檢測(cè)在該部分檢測(cè)過(guò)程中檢測(cè)的 兩眼的位置相對(duì)于水平位置的偏差,即得分計(jì)算單元14檢測(cè)如上參考圖 10所述的兩眼之間的垂直距離Xc。
得分計(jì)算單元14確定所檢測(cè)的距離Xc是否等于0,即兩眼是否在水 平線上(步驟S312)。在確定兩眼在水平線上的情況下,得分計(jì)算單元 14確定得分Sc,使得Sc二l (步驟S313)。但是,在步驟S312中確定兩 眼不在水平線上的情況下,得分計(jì)算單元14根據(jù)高斯分布函數(shù)按照公式 (1)計(jì)算得分Sc (步驟S314)。
在步驟S313或者步驟S314后,過(guò)程進(jìn)行到步驟S315。在步驟S315 中,得分計(jì)算單元14檢測(cè)臉部圖像的中線41和兩眼之間的中點(diǎn)42之間的 距離Xd (步驟S315)。
得分計(jì)算單元14確定所檢測(cè)的距離Xd是否等于0 (Xd = 0)并且因
此臉部圖像的方位是否在正前方(步驟S316)。如果確定臉部圖像的方位 在正前方,則得分計(jì)算單元M確定得分Sd,使得Sd=l (步驟S317)。 在步驟S316中確定臉部圖像的方位相對(duì)于正前方有偏差的情況下,得分 計(jì)算單元14根據(jù)高斯分布函數(shù)按照公式(2)計(jì)算得分Sd (步驟 S318)。
在步驟S313或者S314后,過(guò)程進(jìn)行到步驟S315。在步驟S315中, 得分計(jì)算單元14使用Sa、 Sb、 Sc和Sd來(lái)計(jì)算總得分SOnew,并且從所 計(jì)算的總得分SOnew計(jì)算加權(quán)因子Wnew (步驟S319)。因此,由得分 計(jì)算單元14執(zhí)行的得分計(jì)算過(guò)程完成。
在如上所述的實(shí)施例中,在執(zhí)行個(gè)人識(shí)別后,根據(jù)新捕獲的臉部圖像 來(lái)更新臉部識(shí)別字典數(shù)據(jù)?;蛘撸梢詴簳r(shí)存儲(chǔ)所捕獲的臉部圖像數(shù)據(jù)或 者一組特征向量、時(shí)間信息、總得分和加權(quán)因子,并且可以在執(zhí)行個(gè)人識(shí) 別后稍后更新臉部識(shí)別字典數(shù)據(jù)。
不是將總得分和加權(quán)因子兩者都存儲(chǔ)在暫時(shí)存儲(chǔ)器或者個(gè)人字典存儲(chǔ) 單元中,而是可以存儲(chǔ)總得分或者加權(quán)因子之一。在存儲(chǔ)加權(quán)因子的情況 下,可以不按照總得分而是按照加權(quán)因子來(lái)確定是否應(yīng)當(dāng)更新字典數(shù)據(jù)。
如上所述,在如上所述的實(shí)施例中,在每個(gè)人P,的個(gè)人字典數(shù)據(jù)Di的
N條字典數(shù)據(jù)產(chǎn)生信息DPIi,n中的每一個(gè)中描述了用于指示臉部圖像的特 征向量的可靠性的總得分SOj,n。因此,當(dāng)新捕獲臉部圖像時(shí),有可能通過(guò) 比較用于指示新捕獲的臉部圖像的特征向量的可靠性的總得分SOnew和臉 部圖像的特征向量的N個(gè)總得分SOi,n (n=l到N)中的每一個(gè)來(lái)確定是 否應(yīng)當(dāng)使用新捕獲的臉部圖像來(lái)更新臉部識(shí)別字典數(shù)據(jù)。
如果確定新捕獲的臉部圖像的總得分SOnew大于每個(gè)人P,的個(gè)人字 典數(shù)據(jù)D,的N個(gè)字典數(shù)據(jù)產(chǎn)生信息DPIi,n中的一些的總得分,則將具有最
低總得分SOi,n的字典數(shù)據(jù)產(chǎn)生信息DPIi,n替換為包括新捕獲的臉部圖像的
特征向量和其他參數(shù)的字典數(shù)據(jù)產(chǎn)生信息,由此保持每個(gè)人的個(gè)人字典數(shù)
據(jù)D,,以便具有總得分較高的N條字典數(shù)據(jù)產(chǎn)生信息,因此具有高可靠 性。
使用更新的一組具有高可靠性的N條字典數(shù)據(jù)產(chǎn)生信息DPI^來(lái)重新
計(jì)算臉部識(shí)別字典數(shù)據(jù)FRDi,因此將臉部識(shí)別字典數(shù)據(jù)FRD,保持在高度 可靠的狀態(tài)中。
在如上所述的實(shí)施例中,不通過(guò)相應(yīng)的N條字典數(shù)據(jù)產(chǎn)生信息DPIj,n 的特征向量的簡(jiǎn)單平均,而是通過(guò)由根據(jù)相應(yīng)總得分確定的因子所加權(quán)的 特征向量之和除以加權(quán)因子之和來(lái)給出臉部識(shí)別字典數(shù)據(jù)FRDi,因此,具 有更高可靠性的特征值對(duì)于臉部識(shí)別字典數(shù)據(jù)FRDi具有更大的貢獻(xiàn)。因 此,保持臉部識(shí)別字典數(shù)據(jù)FRDi具有高可靠性。
其他實(shí)施例
在如上所述的實(shí)施例中,本發(fā)明被應(yīng)用到臉部識(shí)別設(shè)備。但是,本發(fā) 明也可以被應(yīng)用到多種設(shè)備。
例如,在使用語(yǔ)音、指紋、虹膜圖案和/或血管圖案之類作為識(shí)別元素 的個(gè)人識(shí)別過(guò)程中,可以根據(jù)一個(gè)或多個(gè)參數(shù)相對(duì)于每個(gè)識(shí)別元素的參考 值的偏差來(lái)計(jì)算一個(gè)或多個(gè)得分。如果存在兩個(gè)或者更多的得分,則可以 從該兩個(gè)或者更多的得分計(jì)算總得分。
像在如上所述的實(shí)施例中那樣,可以根據(jù)總得分的得分來(lái)選擇多條字 典數(shù)據(jù)產(chǎn)生信息,并且可以使用所選擇的字典數(shù)據(jù)產(chǎn)生信息來(lái)更新識(shí)別字 典數(shù)據(jù)。
本發(fā)明不僅可以應(yīng)用到個(gè)人識(shí)別過(guò)程,還可應(yīng)用到其他的許多過(guò)程。 例如,在適合于自動(dòng)攝取用于識(shí)別卡等的照片的機(jī)器中,攝取預(yù)定數(shù)量的 照片,并且根據(jù)相對(duì)于就臉部方位、眼睛的位置等而言的預(yù)定標(biāo)準(zhǔn)條件的 偏差來(lái)對(duì)于每個(gè)照片計(jì)算總的得分。具有高的總得分并且因此具有高質(zhì)量 的一個(gè)或多個(gè)照片最后被提供給用戶。
在攝取多個(gè)人的一組照片的情況下,攝取兩個(gè)或者更多的照片,并且 根據(jù)標(biāo)準(zhǔn)條件的要求(例如,在照片中沒(méi)有人的眼睛有不自然的顏色)的 滿意程度來(lái)對(duì)于該兩個(gè)或者多個(gè)照片中的每一個(gè)計(jì)算得分。通過(guò)從該兩個(gè) 或者多個(gè)照片選擇具有最高得分的照片,有可能提供具有最高質(zhì)量的照 片。
在多個(gè)照片被存儲(chǔ)在個(gè)人計(jì)算機(jī)的存儲(chǔ)器中的像冊(cè)中的情況下,根據(jù) 相對(duì)于一個(gè)或多個(gè)標(biāo)準(zhǔn)條件(諸如照片包括人臉、照片包括大的高頻分量 (即照片具有較高銳度)等)的一個(gè)或多個(gè)偏差來(lái)對(duì)每個(gè)照片計(jì)算得分或 者總得分,并且所計(jì)算的得分或者總得分被與照片相關(guān)聯(lián)地存儲(chǔ)。
可以以從最高得分或者總得分向最低得分或者總得分的順序,即以從 具有最接近標(biāo)準(zhǔn)條件的條件的照片開(kāi)始的順序來(lái)布置照片。
除了如上所述的示例之外,本發(fā)明還具有多種應(yīng)用。
本領(lǐng)域內(nèi)的技術(shù)人員應(yīng)當(dāng)明白,可以根據(jù)設(shè)計(jì)要求和其他因素來(lái)進(jìn)行 各種修改、組合、子組合和更改,它們?cè)谒降臋?quán)利要求或者其等同內(nèi)容 的范圍內(nèi)。
本發(fā)明包含與2006年11月8日向日本專利局提交的日本專利申請(qǐng)JP 2006-302305相關(guān)的主題,其整體內(nèi)容通過(guò)引用而被包含在此。
權(quán)利要求
1.一種信息處理設(shè)備,包括獲取裝置,用于獲取預(yù)定類型的信息;可靠性信息產(chǎn)生裝置,用于根據(jù)相對(duì)于預(yù)定標(biāo)準(zhǔn)條件的偏差而產(chǎn)生可靠性信息,用于指示所述預(yù)定類型的信息的可靠性;以及,存儲(chǔ)裝置,用于與所述預(yù)定類型的信息相關(guān)聯(lián)地存儲(chǔ)由所述可靠性信息產(chǎn)生裝置產(chǎn)生的用于指示所述預(yù)定類型的信息的可靠性的可靠性信息。
2. 按照權(quán)利要求1的信息處理設(shè)備,其中,所獲取的預(yù)定類型的信 息是個(gè)人的臉部圖像,所述標(biāo)準(zhǔn)條件是就所述臉部圖像而言的條件。
3. 按照權(quán)利要求2的信息處理設(shè)備,其中,所述標(biāo)準(zhǔn)條件是為了識(shí) 別所述臉部圖像而定義的條件。
4. 按照權(quán)利要求1的信息處理設(shè)備,其中,所述存儲(chǔ)裝置適合于存儲(chǔ)預(yù)定條數(shù)的所述預(yù)定類型信息;并且其中 在所述預(yù)定條數(shù)的所述預(yù)定類型信息已經(jīng)被存儲(chǔ)在所述存儲(chǔ)裝置中的 狀態(tài)中獲取新的所述預(yù)定類型的信息的情況下,將對(duì)于所述新獲取的所述 預(yù)定類型的信息產(chǎn)生的可靠性信息與用于指示在所述存儲(chǔ)裝置中存儲(chǔ)的每 條所述預(yù)定類型的信息的可靠性的可靠性信息相比較,并且從所述存儲(chǔ)裝 置刪除具有比新獲取的預(yù)定類型的信息的可靠性更低的可靠性的預(yù)定類型 的信息,并且取而代之存儲(chǔ)所述新獲取的預(yù)定類型的信息。
5. —種個(gè)人識(shí)別設(shè)備,包括字典數(shù)據(jù)存儲(chǔ)單元,其適合于以與用于識(shí)別個(gè)人的個(gè)人識(shí)別信息相關(guān) 聯(lián)地存儲(chǔ)個(gè)人識(shí)別字典數(shù)據(jù)的方式,存儲(chǔ)從提取自個(gè)人的識(shí)別元素的特征 向量產(chǎn)生的與個(gè)人相關(guān)聯(lián)的個(gè)人識(shí)別字典數(shù)據(jù);識(shí)別裝置,用于通過(guò)比較從所獲取的個(gè)人的識(shí)別元素提取的特征數(shù)據(jù) 與在所述字典數(shù)據(jù)存儲(chǔ)單元中存儲(chǔ)的識(shí)別字典數(shù)據(jù),識(shí)別具有與所獲取的 個(gè)人的識(shí)別元素相同的識(shí)別元素的個(gè)人;可靠性信息產(chǎn)生裝置,用于根據(jù)相對(duì)于就所述識(shí)別元素而言的預(yù)定標(biāo) 準(zhǔn)條件的偏差而產(chǎn)生用于指示所獲取的識(shí)別元素的可靠性的可靠性信息;字典數(shù)據(jù)產(chǎn)生信息存儲(chǔ)單元,其適合于與所述個(gè)人識(shí)別信息相關(guān)聯(lián) 地,對(duì)于要識(shí)別的每個(gè)人,存儲(chǔ)由所述可靠性信息產(chǎn)生裝置產(chǎn)生的多組用 于指示所獲取的識(shí)別元素的可靠性的可靠性信息和所獲取的識(shí)別元素的數(shù) 據(jù)或者從所述識(shí)別元素提取的特征數(shù)據(jù);以及,字典數(shù)據(jù)產(chǎn)生/更新裝置,用于使用與對(duì)應(yīng)于在所述字典數(shù)據(jù)產(chǎn)生信息 存儲(chǔ)單元中存儲(chǔ)的個(gè)人識(shí)別信息的每個(gè)人相關(guān)聯(lián)的多個(gè)識(shí)別元素?cái)?shù)據(jù)或者 從所述識(shí)別元素提取的特征數(shù)據(jù)及其可靠性信息來(lái)產(chǎn)生或者更新與要識(shí)別 的每個(gè)人相關(guān)聯(lián)的識(shí)別字典數(shù)據(jù),其中,以按照所述可靠性信息確定的加 權(quán)因子來(lái)加權(quán)所述特征數(shù)據(jù)。
6. 按照權(quán)利要求5的個(gè)人識(shí)別設(shè)備,其中,要識(shí)別的人的識(shí)別元素 是人臉圖像,所述標(biāo)準(zhǔn)條件是為識(shí)別所述臉部圖像而定義的條件。
7. 按照權(quán)利要求6的個(gè)人識(shí)別設(shè)備,其中,就臉部圖像的圖像數(shù)據(jù) 大小、臉部圖像的方位和臉部圖像的傾斜中的至少一個(gè)而言定義所述標(biāo)準(zhǔn) 條件。
8. —種用于信息處理設(shè)備的信息處理方法,所述信息處理設(shè)備包括 可靠性信息產(chǎn)生裝置和存儲(chǔ)裝置,所述方法包括步驟通過(guò)所述可靠性信息產(chǎn)生裝置,根據(jù)相對(duì)于就所獲取的預(yù)定類型的信 息而言的預(yù)定標(biāo)準(zhǔn)條件的偏差來(lái)產(chǎn)生用于指示所獲取的預(yù)定類型的信息的 可靠性的可靠性信息;并且通過(guò)所述存儲(chǔ)裝置,與所述預(yù)定類型的信息相關(guān)聯(lián)地存儲(chǔ)用于指示在 所述可靠性信息產(chǎn)生步驟中產(chǎn)生的預(yù)定類型的信息的可靠性的可靠性信
9. 一種用于在個(gè)人識(shí)別設(shè)備中產(chǎn)生或者更新字典數(shù)據(jù)的方法,所述個(gè)人識(shí)別設(shè)備包括字典數(shù)據(jù)存儲(chǔ)單元,其適合于以與用于識(shí)別個(gè)人的個(gè)人識(shí)別信息相關(guān) 聯(lián)地存儲(chǔ)個(gè)人識(shí)別字典數(shù)據(jù)的方式,存儲(chǔ)從提取自個(gè)人的識(shí)別元素的特征向量產(chǎn)生的與個(gè)人相關(guān)聯(lián)的個(gè)人識(shí)別字典數(shù)據(jù);識(shí)別裝置,用于通過(guò)比較從所獲取的個(gè)人的識(shí)別元素提取的特征數(shù)據(jù) 與在所述字典數(shù)據(jù)存儲(chǔ)單元中存儲(chǔ)的識(shí)別字典數(shù)據(jù),識(shí)別具有與所獲取的個(gè)人的識(shí)別元素相同的識(shí)別元素的個(gè)人;字典數(shù)據(jù)產(chǎn)生/更新裝置,用于產(chǎn)生或者更新所述識(shí)別字典數(shù)據(jù);可靠性信息產(chǎn)生裝置,以及字典數(shù)據(jù)產(chǎn)生信息存儲(chǔ)單元,所述方法包括步驟通過(guò)所述可靠性信息產(chǎn)生裝置,根據(jù)相對(duì)于就所述識(shí)別元素而言的預(yù) 定標(biāo)準(zhǔn)條件的偏差而產(chǎn)生用于指示所獲取的識(shí)別元素的可靠性的可靠性信 息;通過(guò)所述字典數(shù)據(jù)產(chǎn)生信息存儲(chǔ)單元,與所述個(gè)人識(shí)別信息相關(guān)聯(lián) 地,對(duì)于要識(shí)別的每個(gè)人,在字典數(shù)據(jù)產(chǎn)生信息存儲(chǔ)單元中存儲(chǔ)在所述可 靠性信息產(chǎn)生步驟中產(chǎn)生的多組用于指示所獲取的識(shí)別元素的可靠性的可 靠性信息和所獲取的識(shí)別元素的數(shù)據(jù)或者從所述識(shí)別元素提取的特征數(shù) 據(jù);通過(guò)所述字典數(shù)據(jù)產(chǎn)生/更新裝置,使用與對(duì)應(yīng)于在所述字典數(shù)據(jù)產(chǎn)生 信息存儲(chǔ)單元中存儲(chǔ)的個(gè)人識(shí)別信息的每個(gè)人相關(guān)聯(lián)的多個(gè)識(shí)別元素?cái)?shù)據(jù) 或者從所述識(shí)別元素提取的特征數(shù)據(jù)及其可靠性信息來(lái)產(chǎn)生或者更新與要 識(shí)別的每個(gè)人相關(guān)聯(lián)的識(shí)別字典數(shù)據(jù),其中,以按照所述可靠性信息確定 的加權(quán)因子來(lái)加權(quán)所述特征數(shù)據(jù)。
10. —種字典數(shù)據(jù)產(chǎn)生/更新程序,能夠由在個(gè)人識(shí)別設(shè)備中布置的計(jì) 算機(jī)執(zhí)行,所述個(gè)人識(shí)別設(shè)備包括字典數(shù)據(jù)存儲(chǔ)單元,其適合于以與用于識(shí)別個(gè)人的個(gè)人識(shí)別信息相關(guān) 聯(lián)地存儲(chǔ)個(gè)人識(shí)別字典數(shù)據(jù)的方式,存儲(chǔ)從提取自個(gè)人的識(shí)別元素的特征向量產(chǎn)生的與個(gè)人相關(guān)聯(lián)的個(gè)人識(shí)別字典數(shù)據(jù);以及存儲(chǔ)裝置,用于通過(guò)比較從所獲取的個(gè)人的識(shí)別元素提取的特征數(shù)據(jù) 與在所述字典數(shù)據(jù)存儲(chǔ)單元中存儲(chǔ)的識(shí)別字典數(shù)據(jù)來(lái)識(shí)別個(gè)人,所述程序的執(zhí)行使得所述計(jì)算機(jī)作為檢測(cè)裝置,用于檢測(cè)所獲取的識(shí)別元素相對(duì)于就所述識(shí)別元素而言的 預(yù)定標(biāo)準(zhǔn)條件的偏差;可靠性信息產(chǎn)生裝置,用于按照由所述檢測(cè)裝置檢測(cè)的偏差來(lái)產(chǎn)生可 靠性信息;字典數(shù)據(jù)產(chǎn)生信息存儲(chǔ)單元,用于與識(shí)別要識(shí)別的每個(gè)人的個(gè)人識(shí)別 信息相關(guān)聯(lián)地,存儲(chǔ)由所述可靠性信息產(chǎn)生裝置產(chǎn)生的多組用于指示所獲 取的識(shí)別元素的可靠性的可靠性信息和所獲取的識(shí)別元素的數(shù)據(jù)或者從所 述識(shí)別元素提取的特征數(shù)據(jù);字典數(shù)據(jù)產(chǎn)生/更新裝置,用于使用與每個(gè)個(gè)人識(shí)別信息相關(guān)聯(lián)地存儲(chǔ) 的多個(gè)識(shí)別元素或者從各識(shí)別元素提取的特征數(shù)據(jù)以及可靠性信息來(lái)產(chǎn)生 或者更新與每個(gè)個(gè)人識(shí)別信息相對(duì)應(yīng)的識(shí)別字典數(shù)據(jù),其中,以按照所述 可靠性信息確定的加權(quán)因子來(lái)加權(quán)所述特征數(shù)據(jù)。
11. 一種信息處理設(shè)備,包括 獲取單元,其適合于獲取預(yù)定類型的信息;可靠性信息產(chǎn)生單元,其適合于根據(jù)相對(duì)于預(yù)定標(biāo)準(zhǔn)條件的偏差而產(chǎn)生用于指示所述預(yù)定類型的信息的可靠性的可靠性信息;以及存儲(chǔ)單元,其適合于與所述預(yù)定類型的信息相關(guān)聯(lián)地存儲(chǔ)用于指示由 所述可靠性信息產(chǎn)生單元產(chǎn)生的所述預(yù)定類型的信息的可靠性的可靠性信 息。
12. —種個(gè)人識(shí)別設(shè)備,包括字典數(shù)據(jù)存儲(chǔ)單元,其適合于以與用于識(shí)別個(gè)人的個(gè)人識(shí)別信息相關(guān) 聯(lián)地存儲(chǔ)個(gè)人識(shí)別字典數(shù)據(jù)的方式,存儲(chǔ)從提取自個(gè)人的識(shí)別元素的特征向量產(chǎn)生的與個(gè)人相關(guān)聯(lián)的個(gè)人識(shí)別字典數(shù)據(jù);識(shí)別單元,其適合于通過(guò)比較從所獲取的個(gè)人的識(shí)別元素提取的特征 數(shù)據(jù)與在所述字典數(shù)據(jù)存儲(chǔ)單元中存儲(chǔ)的識(shí)別字典數(shù)據(jù),識(shí)別具有與所獲取的個(gè)人的識(shí)別元素相同的識(shí)別元素的個(gè)人;可靠性信息產(chǎn)生單元,其適合于根據(jù)相對(duì)于就所述識(shí)別元素而言的預(yù) 定標(biāo)準(zhǔn)條件的偏差而產(chǎn)生用于指示所獲取的識(shí)別元素的可靠性的可靠性信息5字典數(shù)據(jù)產(chǎn)生信息存儲(chǔ)單元,其適合于與所述個(gè)人識(shí)別信息相關(guān)聯(lián) 地,對(duì)于要識(shí)別的每個(gè)人,存儲(chǔ)由所述可靠性信息產(chǎn)生單元產(chǎn)生的多組用 于指示所獲取的識(shí)別元素的可靠性的可靠性信息和所獲取的識(shí)別元素的數(shù) 據(jù)或者從所述識(shí)別元素提取的特征數(shù)據(jù);以及,字典數(shù)據(jù)產(chǎn)生/更新裝置,用于使用與對(duì)應(yīng)于在所述字典數(shù)據(jù)產(chǎn)生信息 存儲(chǔ)單元中存儲(chǔ)的個(gè)人識(shí)別信息的每個(gè)人相關(guān)聯(lián)的多個(gè)識(shí)別元素?cái)?shù)據(jù)或者 從所述識(shí)別元素提取的特征數(shù)據(jù)及其可靠性信息來(lái)產(chǎn)生或者更新與要識(shí)別 的每個(gè)人相關(guān)聯(lián)的識(shí)別字典數(shù)據(jù),其中,以按照所述可靠性信息確定的加 權(quán)因子來(lái)加權(quán)所述特征數(shù)據(jù)。
全文摘要
本發(fā)明提供了圖像處理設(shè)備、圖像處理方法、個(gè)人識(shí)別設(shè)備以及在個(gè)人識(shí)別設(shè)備中產(chǎn)生/更新字典數(shù)據(jù)的方法和程序。在一種信息處理設(shè)備中,獲取單元獲取預(yù)定類型的信息,可靠性信息產(chǎn)生單元根據(jù)相對(duì)于預(yù)定標(biāo)準(zhǔn)條件的偏差而產(chǎn)生用于指示該預(yù)定類型的信息的可靠性的可靠性信息。存儲(chǔ)單元與該預(yù)定類型的信息相關(guān)聯(lián)地存儲(chǔ)可靠性信息,該可靠性信息用于指示由該可靠性信息產(chǎn)生單元產(chǎn)生的該預(yù)定類型的信息的可靠性。
文檔編號(hào)G06K9/00GK101178768SQ200710165189
公開(kāi)日2008年5月14日 申請(qǐng)日期2007年11月8日 優(yōu)先權(quán)日2006年11月8日
發(fā)明者兒島環(huán), 江浦由佳, 沈宇航 申請(qǐng)人:索尼株式會(huì)社