圖像處理裝置及方法
【專利摘要】提供一種圖像處理裝置及方法，能夠降低基于圖像數(shù)據(jù)識(shí)別人物出錯(cuò)的產(chǎn)生。與表示拍攝日的信息相關(guān)聯(lián)地儲(chǔ)存拍攝了人物的圖像數(shù)據(jù)，執(zhí)行針對(duì)該圖像數(shù)據(jù)識(shí)別所拍攝的人物的人物識(shí)別處理，提取拍攝了關(guān)注人物的圖像數(shù)據(jù)。獲得提取到的每個(gè)圖像數(shù)據(jù)中的關(guān)注人物的實(shí)際年齡信息并且獲得根據(jù)圖像數(shù)據(jù)估計(jì)所拍攝的該關(guān)注人物的年齡而得到的關(guān)注人物的估計(jì)年齡信息。基于針對(duì)提取到的每個(gè)圖像數(shù)據(jù)計(jì)算出的實(shí)際年齡信息和分別對(duì)應(yīng)的根據(jù)圖像數(shù)據(jù)估計(jì)出的估計(jì)年齡信息的統(tǒng)計(jì)計(jì)算結(jié)果來(lái)生成年齡校正信息。
【專利說(shuō)明】圖像處理裝置及方法【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種對(duì)拍攝了人物的圖像數(shù)據(jù)進(jìn)行處理的圖像處理裝置以及程序。
【背景技術(shù)】
[0002]近年來(lái)，作為由數(shù)碼相機(jī)拍攝到的圖像數(shù)據(jù)所涉及的處理之一，廣泛知曉對(duì)該圖像數(shù)據(jù)中拍攝到的人物進(jìn)行識(shí)別的處理。
[0003]例如，對(duì)由數(shù)碼相機(jī)拍攝到的圖像數(shù)據(jù)執(zhí)行人臉識(shí)別的處理。在此，如果從圖像數(shù)據(jù)識(shí)別出人物則將該人物的姓名與該圖像數(shù)據(jù)相關(guān)聯(lián)地進(jìn)行儲(chǔ)存。由此，能夠根據(jù)人物的姓名檢索圖像數(shù)據(jù)。 [0004]專利文獻(xiàn)I公開(kāi)了如下技術(shù):保持多個(gè)時(shí)間點(diǎn)的基準(zhǔn)人臉圖像，選擇性地識(shí)別使用適于拍攝時(shí)間點(diǎn)的年齡的基準(zhǔn)人臉圖像，從而提高識(shí)別精確度。
[0005]專利文獻(xiàn)1:日本特開(kāi)2010-218059號(hào)公報(bào)

【發(fā)明內(nèi)容】

_6] 發(fā)明要解決的問(wèn)題
[0007]然而，在上述以往的技術(shù)中，例如認(rèn)為在臉很像的兄弟姐妹所在的家庭中拍攝的照片中兄弟姐妹之間識(shí)別出錯(cuò)多發(fā)。具體地說(shuō)，設(shè)為有2003年哥哥三歲時(shí)拍攝的圖像數(shù)據(jù)，有在其下一年即2004年弟弟出生而2007年這個(gè)弟弟三歲時(shí)拍攝的圖像數(shù)據(jù)。此時(shí)，想到如下情況:如果這對(duì)兄弟的臉在同樣是三歲時(shí)彼此相似，則由于在計(jì)算機(jī)上所執(zhí)行的人臉識(shí)別處理出錯(cuò)而將弟弟的臉識(shí)別為哥哥，或者雖然是2003年拍攝哥哥得到的圖像數(shù)據(jù)(弟弟還沒(méi)有出生)但是將拍到的哥哥識(shí)別為弟弟。
[0008]本發(fā)明是鑒于上述實(shí)際情況而完成的，其目的之一在于提供一種能夠降低基于圖像數(shù)據(jù)識(shí)別人物出錯(cuò)的產(chǎn)生的圖像處理裝置以及程序。
_9] 用于解決問(wèn)題的方案
[0010]用于解決上述以往例的問(wèn)題的本發(fā)明是一種圖像處理裝置，包括:儲(chǔ)存單元，其將拍攝了人物的圖像數(shù)據(jù)與表示拍攝日的信息相關(guān)聯(lián)地進(jìn)行儲(chǔ)存；人物數(shù)據(jù)庫(kù)保持單元，其存儲(chǔ)上述圖像數(shù)據(jù)中拍攝到的人物的出生年月日；提取單元，其針對(duì)上述圖像數(shù)據(jù)執(zhí)行識(shí)別所拍攝的人物的人物識(shí)別處理，提取拍攝了另行確定的關(guān)注人物的圖像數(shù)據(jù)；獲取單元，其從上述儲(chǔ)存單元獲取提取到的每個(gè)圖像數(shù)據(jù)的拍攝日，并且從上述人物數(shù)據(jù)庫(kù)保持單元獲取上述關(guān)注人物的出生年月日；計(jì)算單元，其針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算分別獲取到的拍攝日與關(guān)注人物的出生年月日之差，來(lái)獲得上述提取到的每個(gè)圖像數(shù)據(jù)的關(guān)注人物的實(shí)際年齡信息；估計(jì)單元，其針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)獲得關(guān)注人物的估計(jì)年齡信息，該關(guān)注人物的估計(jì)年齡信息是根據(jù)圖像數(shù)據(jù)估計(jì)所拍攝的關(guān)注人物的年齡而得到的；以及校正信息生成單元，其基于針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算出的實(shí)際年齡信息和分別對(duì)應(yīng)的根據(jù)圖像數(shù)據(jù)估計(jì)出的估計(jì)年齡信息的統(tǒng)計(jì)計(jì)算結(jié)果，來(lái)生成表示實(shí)際年齡與外表的年齡差的年齡校正信息，其中，所生成的上述年齡校正信息利用于判斷由上述提取單元的人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié)果是否正確。
[0011]另外，本發(fā)明的一個(gè)方式所涉及的圖像處理裝置，包括:儲(chǔ)存單元，其將拍攝了人物的圖像數(shù)據(jù)與表示拍攝日的信息相關(guān)聯(lián)地進(jìn)行儲(chǔ)存；人物數(shù)據(jù)庫(kù)保持單元，其存儲(chǔ)上述圖像數(shù)據(jù)中拍攝到的人物的出生年月日；提取單元，其針對(duì)上述圖像數(shù)據(jù)執(zhí)行識(shí)別所拍攝的人物的人物識(shí)別處理，提取拍攝了另行確定的關(guān)注人物的圖像數(shù)據(jù)；獲取單元，其從上述儲(chǔ)存單元獲取提取到的每個(gè)圖像數(shù)據(jù)的拍攝日，并且從上述人物數(shù)據(jù)庫(kù)保持單元獲取上述關(guān)注人物的出生年月日；計(jì)算單元，其針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算分別獲取到的拍攝日與關(guān)注人物的出生年月日之差，來(lái)獲得上述提取到的每個(gè)圖像數(shù)據(jù)的關(guān)注人物的實(shí)際年齡信息；估計(jì)單元，其針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)獲得關(guān)注人物的估計(jì)年齡信息，該關(guān)注人物的估計(jì)年齡信息是根據(jù)圖像數(shù)據(jù)估計(jì)所拍攝的關(guān)注人物的年齡而得到的；以及決定單元，其根據(jù)提取到的圖像數(shù)據(jù)的數(shù)量是否滿足預(yù)定的條件來(lái)決定是執(zhí)行第一識(shí)別正確與否判斷處理還是執(zhí)行第二識(shí)別正確與否判斷處理，(I)在該第一識(shí)別正確與否判斷處理中，基于針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算出的實(shí)際年齡信息和分別對(duì)應(yīng)的根據(jù)圖像數(shù)據(jù)估計(jì)出的估計(jì)年齡信息的統(tǒng)計(jì)計(jì)算結(jié)果，來(lái)生成表示實(shí)際年齡與外表的年齡差的年齡校正信息，將所生成的該年齡校正信息用于判斷由上述提取單元的人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié)果是否正確，(2)在該第二識(shí)別正確與否判斷處理中，使用上述計(jì)算出的實(shí)際年齡信息判斷由上述提取單元的人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié)果是否正確。
[0012]另外，在此，在生成上述年齡校正信息的處理中，也可以設(shè)為基于根據(jù)提取到的各圖像數(shù)據(jù)估計(jì)出的關(guān)注人物的估計(jì)年齡信息中的除了判斷為離群值的估計(jì)年齡信息以外的估計(jì)年齡信息、與針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算出的實(shí)際年齡信息的統(tǒng)計(jì)計(jì)算結(jié)果，來(lái)生成表示實(shí)際年齡與外表的年齡差的年齡校正信息。
[0013]并且，本發(fā)明的一個(gè)方式所涉及的圖像處理方法，包括如下步驟:儲(chǔ)存步驟，將拍攝了人物的圖像數(shù)據(jù)與表示拍攝日的信息相關(guān)聯(lián)地儲(chǔ)存在儲(chǔ)存單元中；人物數(shù)據(jù)庫(kù)保持步驟，在人物數(shù)據(jù)庫(kù)保持單元中存儲(chǔ)上述圖像數(shù)據(jù)中拍攝到的人物的出生年月日；提取步驟，針對(duì)上述圖像數(shù)據(jù)執(zhí)行識(shí)別所拍攝的人物的人物識(shí)別處理，提取拍攝了另行確定的關(guān)注人物的圖像數(shù)據(jù)；獲取步驟，從上述儲(chǔ)存單元獲取提取到的每個(gè)圖像數(shù)據(jù)的拍攝日，并且從上述人物數(shù)據(jù)庫(kù)保持單元獲取上述關(guān)注人物的出生年月日；計(jì)算步驟，針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算分別獲取到的拍攝日與關(guān)注人物的出生年月日之差，來(lái)獲得上述提取到的每個(gè)圖像數(shù)據(jù)的關(guān)注人物的實(shí)際年齡信息；估計(jì)步驟，針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)獲得關(guān)注人物的估計(jì)年齡信息，該關(guān)注人物的估計(jì)年齡信息是根據(jù)圖像數(shù)據(jù)估計(jì)所拍攝的關(guān)注人物的年齡而得到的；以及校正信息生成步驟，基于針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算出的實(shí)際年齡信息和分別對(duì)應(yīng)的根據(jù)圖像數(shù)據(jù)估計(jì)出的估計(jì)年齡信息的統(tǒng)計(jì)計(jì)算結(jié)果，來(lái)生成表示實(shí)際年齡與外表的年齡差的年齡校正信息，其中，所生成的上述年齡校正信息用于判斷由上述提取步驟的人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié)果是否正確。
[0014]并且，本發(fā)明的一個(gè)方式所涉及的程序，使計(jì)算機(jī)作為如下單元而發(fā)揮功能:儲(chǔ)存單元，其將拍攝了人物的圖像數(shù)據(jù)與表示拍攝日的信息相關(guān)聯(lián)地進(jìn)行儲(chǔ)存；人物數(shù)據(jù)庫(kù)保持單元，其存儲(chǔ)上述圖像數(shù)據(jù)中拍攝到的人物的出生年月日；提取單元，其針對(duì)上述圖像數(shù)據(jù)執(zhí)行識(shí)別所拍攝的人物的人物識(shí)別處理，提取拍攝了另行確定的關(guān)注人物的圖像數(shù)據(jù)；獲取單元，其從上述儲(chǔ)存單元獲取提取到的每個(gè)圖像數(shù)據(jù)的拍攝日，并且從上述人物數(shù)據(jù)庫(kù)保持單元獲取上述關(guān)注人物的出生年月日；計(jì)算單元，其針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算分別獲取到的拍攝日與關(guān)注人物的出生年月日之差，來(lái)獲得上述提取到的每個(gè)圖像數(shù)據(jù)的關(guān)注人物的實(shí)際年齡信息；估計(jì)單元，其針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)獲得關(guān)注人物的估計(jì)年齡信息，該關(guān)注人物的估計(jì)年齡信息是根據(jù)圖像數(shù)據(jù)估計(jì)所拍攝的關(guān)注人物的年齡而得到的；以及校正信息生成單元，其基于針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算出的實(shí)際年齡信息和分別對(duì)應(yīng)的根據(jù)圖像數(shù)據(jù)估計(jì)出的估計(jì)年齡信息的統(tǒng)計(jì)計(jì)算結(jié)果，來(lái)生成表示實(shí)際年齡與外表的年齡差的年齡校正信息，其中，所生成的上述年齡校正信息利用于判斷由上述提取單元的人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié)果是否正確。
[0015]發(fā)明的效果
[0016]根據(jù)本發(fā)明，能夠降低基于圖像數(shù)據(jù)識(shí)別人物出錯(cuò)的產(chǎn)生。
【專利附圖】

【附圖說(shuō)明】
[0017]圖1是表示本發(fā)明的實(shí)施方式所涉及的圖像處理裝置的結(jié)構(gòu)例的框圖。
[0018]圖2是表示本發(fā)明的實(shí)施方式所涉及的圖像處理裝置所保持的數(shù)據(jù)的內(nèi)容例的說(shuō)明圖。
[0019]圖3是表示本發(fā)明的實(shí)施方式所涉及的圖像處理裝置的一個(gè)例子的功能框圖。
[0020]圖4是表示本發(fā)明的實(shí)施方式所涉及的圖像處理裝置的動(dòng)作例的流程圖。
[0021]圖5是表示本發(fā)明的實(shí)施方式所涉及的圖像處理裝置中的動(dòng)作(第一識(shí)別正確與否判斷處理)的例子的另一個(gè)流程圖。
[0022]附圖標(biāo)記說(shuō)明
[0023]1:信息處理裝置；11:控制部；12:存儲(chǔ)部；13:操作部；14:顯示部；15:通信部；16:輸入輸出接口 ；21:儲(chǔ)存處理部；22:顯示處理部；23:管理處理部；31:人物識(shí)別處理部；32:提取部；33:獲取部；34:實(shí)際年齡計(jì)算部；35:年齡估計(jì)部；36:處理選擇部；37:年齡校正信息生成部；38:第一識(shí)別正確與否判斷處理部；39:第二識(shí)別正確與否判斷處理部。
【具體實(shí)施方式】
[0024]參照【專利附圖】

【附圖說(shuō)明】本發(fā)明的實(shí)施方式。如圖1中所例示，本發(fā)明的實(shí)施方式所涉及的圖像處理裝置I構(gòu)成為包括控制部11、存儲(chǔ)部12、操作部13、顯示部14、通信部15以及輸入輸出接口 16。在此，控制部11是CPU等程序控制設(shè)備，按照保存在存儲(chǔ)部12中的程序進(jìn)行動(dòng)作。
[0025]具體地說(shuō)，在本實(shí)施方式中，控制部11經(jīng)由輸入輸出接口 16接收作為處理對(duì)象的圖像數(shù)據(jù)并儲(chǔ)存保存在存儲(chǔ)部12中。在本實(shí)施方式中，作為處理對(duì)象的圖像數(shù)據(jù)是表示由數(shù)碼相機(jī)等拍攝到的圖像的圖像數(shù)據(jù)，包含所謂的Exif (Exchangeable Image FileFormat:可交換圖像文件格式)信息，該Exif信息包含拍攝日的信息、確定進(jìn)行拍攝的照相機(jī)的照相機(jī)確定信息等。
[0026]本實(shí)施方式的控制部11針對(duì)儲(chǔ)存在該存儲(chǔ)部12中的圖像數(shù)據(jù)執(zhí)行對(duì)所拍攝的人物進(jìn)行識(shí)別的人物識(shí)別處理，提取拍攝了另行確定的關(guān)注人物的圖像數(shù)據(jù)?？刂撇?1針對(duì)提取到的每個(gè)圖像數(shù)據(jù)獲取其拍攝日的信息，并且獲取關(guān)注人物的出生年月日(設(shè)為保持為后面說(shuō)明的人物數(shù)據(jù)庫(kù))。
[0027]控制部11針對(duì)提取到的每個(gè)圖像數(shù)據(jù)計(jì)算分別獲取到的拍攝日與關(guān)注人物的出生年月日之差，來(lái)獲得提取到的每個(gè)圖像數(shù)據(jù)的關(guān)注人物的實(shí)際年齡信息。另外，控制部11通過(guò)對(duì)于提取到的各圖像數(shù)據(jù)進(jìn)行識(shí)別處理，來(lái)估計(jì)各圖像數(shù)據(jù)中拍攝到的關(guān)注人物的年齡，從而獲得估計(jì)年齡信息。
[0028]控制部11還進(jìn)行針對(duì)提取到的每個(gè)圖像數(shù)據(jù)計(jì)算出的實(shí)際年齡信息和分別對(duì)應(yīng)的根據(jù)圖像數(shù)據(jù)估計(jì)出的估計(jì)年齡信息的統(tǒng)計(jì)計(jì)算，根據(jù)該統(tǒng)計(jì)計(jì)算的結(jié)果來(lái)生成表示實(shí)際年齡與外表的年齡差的年齡校正信息。而且，執(zhí)行使用該年齡校正信息判斷針對(duì)圖像數(shù)據(jù)所執(zhí)行的人物識(shí)別處理的識(shí)別結(jié)果是否正確的處理。該控制部11的詳細(xì)的動(dòng)作的內(nèi)容在后面敘述。
[0029]存儲(chǔ)部12保存有由控制部11執(zhí)行的程序。該程序也可以以保存在DVD-ROM (Digital Versatile Disc Read Only Memory:數(shù)字多功能光盤只讀存儲(chǔ)器)等計(jì)算機(jī)可讀記錄介質(zhì)中的方式提供，從而保存在該存儲(chǔ)部12中。另外，該程序也可以經(jīng)由網(wǎng)絡(luò)等發(fā)布，從而保存在該存儲(chǔ)部12中。
[0030]在本實(shí)施方式中，如圖2的(a)所例示，圖像數(shù)據(jù)與標(biāo)簽信息相關(guān)聯(lián)地儲(chǔ)存保存在該存儲(chǔ)部12中。此外，圖像數(shù)據(jù)中也可以包含Exif數(shù)據(jù)。另外，該存儲(chǔ)部12中如圖2的(b)所例示那樣保存與人物的臉相關(guān)的人臉數(shù)據(jù)庫(kù)以進(jìn)行人物識(shí)別處理，該人臉數(shù)據(jù)庫(kù)包含使預(yù)定的特征量信息(P)與識(shí)別信息(ID)相關(guān)聯(lián)而得到的條目。在此，識(shí)別信息(ID)是人物的姓名等對(duì)人物進(jìn)行識(shí)別的信息。并且，該存儲(chǔ)部12中保持如圖2的(c)所示那樣的包含使識(shí)別信息(ID)與以該識(shí)別信息進(jìn)行識(shí)別的人物的出生年月日的信息(B)相關(guān)聯(lián)而得到的條目的人物數(shù)據(jù)庫(kù)。
[0031]操作部13例如可以是鼠標(biāo)、鍵盤等，也可以是紅外線輸入接口。在本實(shí)施方式的某個(gè)例子中，該操作部13是紅外線輸入接口，接收由接受了使用者的指示操作的遠(yuǎn)程控制器所發(fā)出的表示使用者的指示操作的內(nèi)容的信息。而且，該操作部13將接收到的表示該指示操作的內(nèi)容的信息輸出到控制部11。
[0032]顯示部14是按照從控制部11輸入的指示向內(nèi)置顯示器、家庭用電視機(jī)裝置等外部顯示器輸出圖像的接口。通信部15例如是網(wǎng)絡(luò)接口，以有線或者無(wú)線的方式連接在網(wǎng)絡(luò)上，將經(jīng)由網(wǎng)絡(luò)接收的信息輸出到控制部11。另外，該通信部15從控制部11接收要經(jīng)由網(wǎng)絡(luò)進(jìn)行發(fā)送的信息的輸入，經(jīng)由網(wǎng)絡(luò)發(fā)送該信息。
[0033]輸入輸出接口 16例如是SD卡槽、USB (Universal Serial Bus:通用串行總線)接口等。該輸入輸出接口 16例如按照從控制部11輸入的指示從連接至該輸入輸出接口 16的SD卡、USB存儲(chǔ)器、USB硬盤驅(qū)動(dòng)器等讀出圖像數(shù)據(jù)并輸出到控制部11。
[0034]接著，敘述本實(shí)施方式的控制部11的處理的內(nèi)容。本實(shí)施方式的控制部11執(zhí)行圖像數(shù)據(jù)的儲(chǔ)存處理、圖像數(shù)據(jù)的顯示處理以及圖像數(shù)據(jù)的管理處理。另外，作為該管理處理的前提，執(zhí)行人物識(shí)別處理以及判斷人物識(shí)別處理的識(shí)別結(jié)果是否正確的處理。
[0035]具體地說(shuō)，本實(shí)施方式的控制部11功能上如圖3所例示那樣包括儲(chǔ)存處理部21、顯示處理部22以及管理處理部23，該管理處理部23構(gòu)成為還包括人物識(shí)別處理部31、提取部32、獲取部33、實(shí)際年齡計(jì)算部34、年齡估計(jì)部35、處理選擇部36、年齡校正信息生成部37、第一識(shí)別正確與否判斷處理部38以及第二識(shí)別正確與否判斷處理部39。[0036]儲(chǔ)存處理部21從操作部13接受圖像數(shù)據(jù)的取入指示，對(duì)輸入輸出接口 16指示讀出圖像數(shù)據(jù)。而且，該儲(chǔ)存處理部21將從輸入輸出接口 16讀出的圖像數(shù)據(jù)儲(chǔ)存保存在存儲(chǔ)部12中。
[0037]顯示處理部22按照從操作部13輸入的指示讀出保存在存儲(chǔ)部12中的圖像數(shù)據(jù)并輸出到顯示部14，向內(nèi)置顯示器、家庭用電視機(jī)裝置等外部顯示器輸出該圖像數(shù)據(jù)所表示的圖像。另外，該顯示處理部22也可以進(jìn)行選擇性地顯示輸出保存在存儲(chǔ)部12的圖像數(shù)據(jù)中的將使用者所指示的信息包含在Exif信息中的圖像數(shù)據(jù)的處理。
[0038]管理處理部23的人物識(shí)別處理部31選擇儲(chǔ)存在存儲(chǔ)部12的圖像數(shù)據(jù)中的還沒(méi)有成為人物識(shí)別處理的對(duì)象的圖像數(shù)據(jù)。而且，人物識(shí)別處理部31針對(duì)所選擇的圖像數(shù)據(jù)執(zhí)行人物識(shí)別處理。關(guān)于該人物識(shí)別處理，根據(jù)所選擇的圖像數(shù)據(jù)確定具有作為人物的臉的特征的區(qū)域。
[0039]而且，針對(duì)所確定的區(qū)域中的各區(qū)域執(zhí)行確定人物的處理。即，將各區(qū)域依次選擇為關(guān)注區(qū)域，提取包含在關(guān)注區(qū)域中的與人物的臉有關(guān)的預(yù)定的特征量(眼與眼之間的間隔等、表示臉的特征的信息)。人物識(shí)別處理部31參照保存在存儲(chǔ)部12中的人臉數(shù)據(jù)庫(kù)，將保存在該人臉數(shù)據(jù)庫(kù)中的各條目的特征量信息與所提取到的特征量信息進(jìn)行比較。
[0040]人物識(shí)別處理部31在該比較的結(jié)果、即從人臉數(shù)據(jù)庫(kù)中發(fā)現(xiàn)包含與所提取到的特征量信息一致或者類似的特征量信息的條目時(shí)，還根據(jù)位于關(guān)注區(qū)域內(nèi)的人臉的部位、輪廓、皺紋的信息等來(lái)估計(jì)該拍攝的人物的年齡。該估計(jì)是與拍攝日、出生年月日的信息無(wú)關(guān)地根據(jù)圖像數(shù)據(jù)來(lái)進(jìn)行的，例如能夠使用Y.H.Kwon and N.da Vitoria Lobo (1999).‘AgeClassification from Facial Images’， Computer Vision and Image UnderstandingJournal74(l), pp.1-21等所公開(kāi)的方法。
[0041]人物識(shí)別處理部31在從人臉數(shù)據(jù)庫(kù)中發(fā)現(xiàn)包含與這樣提取到的特征量信息一致或者類似的特征量信息的條目時(shí)，將包含在該條目中的識(shí)別信息、確定關(guān)注區(qū)域的區(qū)域信息以及表示上述估計(jì)出的人物的年齡的信息(估計(jì)年齡信息)作為標(biāo)簽信息之一，與所選擇的圖像數(shù)據(jù)相關(guān)聯(lián)地保持在存儲(chǔ)部12中。在此，確定關(guān)注區(qū)域的區(qū)域確定信息例如在關(guān)注區(qū)域?yàn)榫匦螀^(qū)域的情況下設(shè)為其對(duì)角線上的兩個(gè)頂點(diǎn)的坐標(biāo)信息即可。
[0042]另外，該人物識(shí)別處理部31在沒(méi)有從人臉數(shù)據(jù)庫(kù)中發(fā)現(xiàn)包含與所提取到的特征量信息一致或者類似的特征量信息的條目的情況下，也可以要求使用者進(jìn)行人物的姓名等相當(dāng)于識(shí)別信息的信息的輸入。當(dāng)使用者輸入要與沒(méi)有從人臉數(shù)據(jù)庫(kù)中發(fā)現(xiàn)該包含一致或者類似的特征量信息的條目的特征量信息相關(guān)聯(lián)的識(shí)別信息時(shí)，人物識(shí)別處理部31將使該特征量信息與識(shí)別信息相關(guān)聯(lián)而得到的條目追加保存在人臉數(shù)據(jù)庫(kù)中。另外，此時(shí)，將使用者所輸入的識(shí)別信息和確定關(guān)注區(qū)域的區(qū)域信息作為標(biāo)簽信息之一，與成為該特征量信息的提取源的圖像數(shù)據(jù)相關(guān)聯(lián)地保持在存儲(chǔ)部12中。
[0043]提取部32接受由使用者的指定或者預(yù)定的條件等確定的關(guān)注人物的識(shí)別信息的輸入。提取部32從存儲(chǔ)部12提取包含該關(guān)注人物的識(shí)別信息作為標(biāo)簽信息的圖像數(shù)據(jù)。提取部32當(dāng)在此一個(gè)圖像數(shù)據(jù)都沒(méi)有獲取到時(shí)(在不存在與關(guān)注人物的識(shí)別信息相關(guān)聯(lián)的圖像數(shù)據(jù)的情況等)，也可以報(bào)告錯(cuò)誤并中斷處理。
[0044]獲取部33獲取由提取部32提取的圖像數(shù)據(jù)(存在多個(gè)的情況下各圖像數(shù)據(jù))的拍攝日信息Tt [i] (i為每個(gè)圖像數(shù)據(jù)的索引，i=l，2，...)。另外，從保持在存儲(chǔ)部12的人物數(shù)據(jù)庫(kù)中獲取與關(guān)注人物的識(shí)別信息相關(guān)聯(lián)的出生年月日信息Tb。
[0045]實(shí)際年齡計(jì)算部34使用獲取部33所獲取的拍攝日信息Tt[i] (i=l，2，...)中的各拍攝日信息和出生年月日信息Tb，針對(duì)提取部32所提取的每個(gè)圖像數(shù)據(jù)計(jì)算拍攝各圖像數(shù)據(jù)的時(shí)間點(diǎn)的關(guān)注人物的實(shí)際年齡信息。具體地說(shuō)，針對(duì)拍攝日為Tt[i]的第i個(gè)圖像數(shù)據(jù)，計(jì)算獲得關(guān)注人物的實(shí)際年齡信息At [i] =Tt [i]-Tb。
[0046]年齡估計(jì)部35針對(duì)提取部32所提取的每個(gè)圖像數(shù)據(jù)，獲取根據(jù)圖像數(shù)據(jù)估計(jì)各圖像數(shù)據(jù)中拍攝的關(guān)注人物的年齡所得到的結(jié)果。具體地說(shuō)，該年齡估計(jì)部35從存儲(chǔ)部12獲取與第i個(gè)圖像數(shù)據(jù)(i=l，2，...)相關(guān)聯(lián)的標(biāo)簽信息中的與關(guān)注人物的識(shí)別信息相關(guān)聯(lián)的年齡的估計(jì)結(jié)果的信息Ae [i]。
[0047]處理選擇部36參照提取部32所提取的圖像數(shù)據(jù)的數(shù)量N，調(diào)查該數(shù)量N是否超過(guò)預(yù)定的閾值nth。根據(jù)N是否超過(guò)閾值nth來(lái)選擇第一識(shí)別正確與否判斷處理部38或者第二識(shí)別正確與否判斷處理部39中的某一個(gè)。而且，處理選擇部36對(duì)所選擇的第一識(shí)別正確與否判斷處理部38或者第二識(shí)別正確與否判斷處理部39指示進(jìn)行由人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié)果的正確與否判斷。作為一個(gè)例子，該處理選擇部36在N超過(guò)閾值nth的情況下選擇第一識(shí)別正確與否判斷處理部38，對(duì)所選擇的該第一識(shí)別正確與否判斷處理部38指示進(jìn)行由人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié)果的正確與否判斷。另外，在N不超過(guò)閾值nth的情況下，選擇第二識(shí)別正確與否判斷處理部39，對(duì)所選擇的該第二識(shí)別正確與否判斷處理部39指示進(jìn)行由人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié)果的正確與否判斷。
[0048]年齡校正信息生成部37按照從第一識(shí)別正確與否判斷處理部38輸入的指示來(lái)生成年齡校正信息。具體地說(shuō)，該年齡校正信息生成部37從存儲(chǔ)部12讀出針對(duì)第i個(gè)圖像數(shù)據(jù)(i=l，2，...)計(jì)算出的關(guān)注人物的實(shí)際年齡信息At [i]和年齡的估計(jì)結(jié)果的信息Ae [i]。然后，年齡校正信息生成部37基于這些實(shí)際年齡信息At [i]和來(lái)自圖像數(shù)據(jù)的年齡的估計(jì)結(jié)果的信息Ae [i]的統(tǒng)計(jì)計(jì)算結(jié)果，生成表示實(shí)際年齡與外表的年齡差的年齡校正信息。
[0049]作為一個(gè)例子，年齡校正信息生成部37根據(jù)每個(gè)圖像數(shù)據(jù)的實(shí)際年齡信息At [i]和來(lái)自圖像數(shù)據(jù)的年齡的估計(jì)結(jié)果的信息Ae [i]的組，計(jì)算它們的相關(guān)系數(shù)作為年齡校正信息。在此，作為年齡校正信息的相關(guān)系數(shù)例如是假定為對(duì)于實(shí)際年齡信息At以一次式Ae= α XAt+β表示估計(jì)的結(jié)果Ae時(shí)的α、β ,具體地說(shuō),只要通過(guò)最小二乘法來(lái)求出它們即可。年齡校正信息生成部37將這樣求出的年齡校正信息輸出到第一識(shí)別正確與否判斷處理部38。
[0050]第一識(shí)別正確與否判斷處理部38在從處理選擇部36接受指示以進(jìn)行由人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié)果的正確與否判斷時(shí)，對(duì)年齡校正信息生成部37指示要生成年齡校正信息。然后，第一識(shí)別正確與否判斷處理部38從年齡校正信息生成部37接受年齡校正信息的輸入。
[0051]在此，為了說(shuō)明，作為一個(gè)例子，設(shè)為當(dāng)假定為在實(shí)際年齡信息At與估計(jì)的結(jié)果Ae之間存在以一次式Ae=Ci XAt+β表示的關(guān)系時(shí)的相關(guān)系數(shù)α、β為年齡校正信息。
[0052]第一識(shí)別正確與否判斷處理部38在被提供了實(shí)際年齡信息At[i]時(shí)將使用這些相關(guān)系數(shù)計(jì)算出的a XAt[i] + 0設(shè)為假定估計(jì)值A(chǔ)ee[i]。即,Aee[i] = α XAt[i] + β。然后，第一識(shí)別正確與否判斷處理部38求出該假定估計(jì)值A(chǔ)ee[i]和與實(shí)際年齡信息At[i]相對(duì)應(yīng)的年齡的估計(jì)結(jié)果的信息Ae[i]之差的絕對(duì)值IAe[i]-Aee[i] =|Ae[i]-a XAt[i]+ β I。此外，1*1意味著對(duì)*的絕對(duì)值進(jìn)行計(jì)算。
[0053]第一識(shí)別正確與否判斷處理部38當(dāng)在此求出的絕對(duì)值|Ae[i]-a ΧΑ?[?] + β |超過(guò)預(yù)定的閾值的情況下，判定為與第i個(gè)圖像數(shù)據(jù)有關(guān)的關(guān)注人物的識(shí)別結(jié)果錯(cuò)誤。并且，第一識(shí)別正確與否判斷處理部38在At [i]為負(fù)的情況下，也判定為與第i個(gè)圖像數(shù)據(jù)有關(guān)的關(guān)注人物的識(shí)別結(jié)果錯(cuò)誤。第一識(shí)別正確與否判斷處理部38在At[i]不為負(fù)且絕對(duì)值|Ae[i]-a XAt[i] + i3 |不超過(guò)預(yù)定的閾值的情況下，判斷為與第i個(gè)圖像數(shù)據(jù)有關(guān)的關(guān)注人物的識(shí)別結(jié)果沒(méi)有錯(cuò)誤。
[0054]第一識(shí)別正確與否判斷處理部38還在判定為在此與第i個(gè)圖像數(shù)據(jù)有關(guān)的關(guān)注人物的識(shí)別結(jié)果錯(cuò)誤時(shí)，發(fā)現(xiàn)與該第i個(gè)圖像數(shù)據(jù)相關(guān)聯(lián)地記錄在存儲(chǔ)部12的標(biāo)簽信息中的包含關(guān)注人物的識(shí)別信息的標(biāo)簽信息作為處理對(duì)象標(biāo)簽信息。第一識(shí)別正確與否判斷處理部38從該處理對(duì)象標(biāo)簽信息中取出區(qū)域確定信息并進(jìn)行存儲(chǔ)，刪除該處理對(duì)象標(biāo)簽信
肩、O
[0055]而且，第一識(shí)別正確與否判斷處理部38對(duì)人物識(shí)別處理部31輸出區(qū)域確定信息，將以該區(qū)域確定信息確定的區(qū)域設(shè)為關(guān)注區(qū)域，來(lái)進(jìn)行包含在關(guān)注區(qū)域中的人物的識(shí)別。在此，第一識(shí)別正確與否判斷處理部38對(duì)人物識(shí)別處理部31 —并輸出關(guān)注人物的識(shí)別信息，指示不是關(guān)注人物。
[0056]人物識(shí)別處理部31提取與關(guān)注區(qū)域內(nèi)的人物的臉相關(guān)的預(yù)定的特征量(眼與眼之間的間隔等、表示臉的特征的信息)。人物識(shí)別處理部31參照保存在存儲(chǔ)部12的人臉數(shù)據(jù)庫(kù)中的不包含從第一識(shí)別正確與否判斷處理部38輸入的識(shí)別信息的條目，將所參照的各條目的特征量信息與所提取到的特征量信息進(jìn)行比較。
[0057]人物識(shí)別處理部31在該比較的結(jié)果、即從人臉數(shù)據(jù)庫(kù)中發(fā)現(xiàn)包含與所提取到的特征量信息一致或者類似的特征量信息的條目時(shí)，將包含在該條目中的識(shí)別信息作為標(biāo)簽信息之一，與所選擇的圖像數(shù)據(jù)相關(guān)聯(lián)地保持在存儲(chǔ)部12中。此時(shí)，人物識(shí)別處理部31根據(jù)位于關(guān)注區(qū)域內(nèi)的人臉的部位、輪廓、皺紋的信息等來(lái)估計(jì)所拍攝的該人物的年齡。
[0058]而且，人物識(shí)別處理部31在從人臉數(shù)據(jù)庫(kù)中發(fā)現(xiàn)包含與所提取到的特征量信息一致或者類似的特征量信息的條目時(shí)，將包含在該條目中的識(shí)別信息、確定關(guān)注區(qū)域的區(qū)域信息以及表示上述估計(jì)的人物的年齡的信息(估計(jì)年齡信息)作為標(biāo)簽信息之一，與所選擇的圖像數(shù)據(jù)相關(guān)聯(lián)地保持在存儲(chǔ)部12中。
[0059]另外，此時(shí)，人物識(shí)別處理部31在沒(méi)有從人臉數(shù)據(jù)庫(kù)中發(fā)現(xiàn)包含與所提取到的特征量信息一致或者類似的特征量信息的條目的情況下，也可以要求使用者進(jìn)行人物的姓名等相當(dāng)于識(shí)別信息的信息的輸入。當(dāng)使用者輸入要與沒(méi)有從人臉數(shù)據(jù)庫(kù)中發(fā)現(xiàn)該包含一致或者類似的特征量信息的條目的特征量信息相關(guān)聯(lián)的識(shí)別信息時(shí)，人物識(shí)別處理部31將使該特征量信息與識(shí)別信息相關(guān)聯(lián)而得到的條目追加保存在人臉數(shù)據(jù)庫(kù)中。另外，此時(shí)，將使用者所輸入的識(shí)別信息與確定關(guān)注區(qū)域的區(qū)域信息作為標(biāo)簽信息之一，與成為該特征量信息的提取源的圖像數(shù)據(jù)相關(guān)聯(lián)地保持在存儲(chǔ)部12中。
[0060]第二識(shí)別正確與否判斷處理部39當(dāng)從處理選擇部36接受指示以進(jìn)行由人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié) 果的正確與否判斷時(shí)，調(diào)查是否有如為負(fù)那樣的At[i](i=l，2，...)。而且，例如At[j]為負(fù)的情況下，判定為與第j個(gè)圖像數(shù)據(jù)有關(guān)的關(guān)注人物的識(shí)別結(jié)果錯(cuò)誤。
[0061]第二識(shí)別正確與否判斷處理部39還當(dāng)在此判定為與該第j個(gè)圖像數(shù)據(jù)有關(guān)的關(guān)注人物的識(shí)別結(jié)果錯(cuò)誤時(shí)，發(fā)現(xiàn)與該第j個(gè)圖像數(shù)據(jù)相關(guān)聯(lián)地記錄在存儲(chǔ)部12的標(biāo)簽信息中的包含關(guān)注人物的識(shí)別信息的標(biāo)簽信息作為處理對(duì)象標(biāo)簽信息。第二識(shí)別正確與否判斷處理部39從該處理對(duì)象標(biāo)簽信息中取出區(qū)域確定信息并進(jìn)行存儲(chǔ)，刪除該處理對(duì)象標(biāo)簽信息。
[0062]而且，第二識(shí)別正確與否判斷處理部39對(duì)人物識(shí)別處理部31輸出區(qū)域確定信息，將以該區(qū)域確定信息確定的區(qū)域設(shè)為關(guān)注區(qū)域，來(lái)進(jìn)行包含在關(guān)注區(qū)域中的人物的識(shí)別。在此，第二識(shí)別正確與否判斷處理部39對(duì)人物識(shí)別處理部31 —并輸出關(guān)注人物的識(shí)別信息，指示不是關(guān)注人物。
[0063]人物識(shí)別處理部31與從第一識(shí)別正確與否判斷處理部38接受了相同指示的情況同樣地進(jìn)行動(dòng)作。即，人物識(shí)別處理部31提取與關(guān)注區(qū)域內(nèi)的人物的臉相關(guān)的預(yù)定的特征量(眼與眼之間的間隔等、表示臉的特征的信息)。人物識(shí)別處理部31參照保存在存儲(chǔ)部12的人臉數(shù)據(jù)庫(kù)中的從第二識(shí)別正確與否判斷處理部39輸入的不包含關(guān)注人物的識(shí)別信息的條目，將所參照的各條目的特征量信息與所提取到的特征量信息進(jìn)行比較。
[0064]人物識(shí)別處理部31在該比較的結(jié)果、即從人臉數(shù)據(jù)庫(kù)中發(fā)現(xiàn)包含與所提取到的特征量信息一致或者類似的特征量信息的條目時(shí)，將包含在該條目中的識(shí)別信息作為標(biāo)簽信息之一，與所選擇的圖像數(shù)據(jù)相關(guān)聯(lián)地保持在存儲(chǔ)部12中。此時(shí)，人物識(shí)別處理部31根據(jù)位于關(guān)注區(qū)域內(nèi)的人臉的部位、輪廓、皺紋的信息等來(lái)估計(jì)所拍攝的該人物的年齡。
[0065]而且，人物識(shí)別處理部31在從人臉數(shù)據(jù)庫(kù)中發(fā)現(xiàn)包含與所提取到的特征量信息一致或者類似的特征量信息的條目時(shí)，將包含在該條目中的識(shí)別信息、確定關(guān)注區(qū)域的區(qū)域信息以及表示上述估計(jì)的人物的年齡的信息(估計(jì)年齡信息)作為標(biāo)簽信息之一，與所選擇的圖像數(shù)據(jù)相關(guān)聯(lián)地保持在存儲(chǔ)部12中。
[0066]另外，此時(shí)，人物識(shí)別處理部31在沒(méi)有從人臉數(shù)據(jù)庫(kù)中發(fā)現(xiàn)包含與所提取到的特征量信息一致或者類似的特征量信息的條目的情況下，也可以要求使用者進(jìn)行人物的姓名等相當(dāng)于識(shí)別信息的信息的輸入。當(dāng)使用者輸入要與沒(méi)有從人臉數(shù)據(jù)庫(kù)中發(fā)現(xiàn)該包含一致或者類似的特征量信息的條目的特征量信息相關(guān)聯(lián)的識(shí)別信息時(shí)，人物識(shí)別處理部31將使該特征量信息與識(shí)別信息相關(guān)聯(lián)而得到的條目追加保存在人臉數(shù)據(jù)庫(kù)中。另外，此時(shí)，將使用者所輸入的識(shí)別信息和確定關(guān)注區(qū)域的區(qū)域信息作為標(biāo)簽信息之一，與成為該特征量信息的提取源的圖像數(shù)據(jù)相關(guān)聯(lián)地保持在存儲(chǔ)部12中。
[0067]本發(fā)明的實(shí)施方式基本具備以上的結(jié)構(gòu)，如下那樣進(jìn)行動(dòng)作。在以下的例子中，設(shè)為儲(chǔ)存了在有臉相似的兄弟的家庭中所拍攝的照片的圖像數(shù)據(jù)。另外，在此設(shè)為哥哥2000年出生，弟弟2004年出生。
[0068]在此，當(dāng)使用者將記錄了從2000年至2012年為止拍攝的照片的圖像數(shù)據(jù)的記錄介質(zhì)連接于輸入輸出接口 16并進(jìn)行讀入指示時(shí)，本實(shí)施方式的圖像處理裝置I將輸入輸出接口 16所讀出的圖像數(shù)據(jù)儲(chǔ)存保存在存儲(chǔ)部12中。該圖像數(shù)據(jù)中包含拍攝日信息等、Exif信息。
[0069]圖像處理裝置I選擇儲(chǔ)存在存儲(chǔ)部12的圖像數(shù)據(jù)中的還沒(méi)有成為人物識(shí)別處理的對(duì)象的圖像數(shù)據(jù)，針對(duì)所選擇的圖像數(shù)據(jù)執(zhí)行人物識(shí)別處理。在此例如設(shè)為針對(duì)兄弟中的每個(gè)人將2007年左右的臉的特征量與各自的識(shí)別信息相關(guān)聯(lián)地記錄在人臉數(shù)據(jù)庫(kù)中。即，設(shè)為對(duì)于哥哥將七歲時(shí)的臉的特征量記錄在人臉數(shù)據(jù)庫(kù)中，而對(duì)于弟弟將三歲時(shí)的臉的特征量記錄在人臉數(shù)據(jù)庫(kù)中。
[0070]在這種情況下，圖像處理裝置I有可能對(duì)于例如2003年哥哥三歲時(shí)的圖像數(shù)據(jù)，根據(jù)其臉的特征量而誤認(rèn)為弟弟。即，圖像處理裝置I有可能對(duì)于拍攝日為2003年且拍攝了哥哥的圖像數(shù)據(jù)，將確定弟弟的識(shí)別信息作為標(biāo)簽信息而與其相關(guān)聯(lián)。另外，也有可能對(duì)于例如2005年哥哥五歲時(shí)的圖像數(shù)據(jù)，根據(jù)其臉的特征量而誤認(rèn)為弟弟。S卩，圖像處理裝置I也有可能對(duì)于拍攝日為2005年且拍攝了哥哥的圖像數(shù)據(jù)，將確定弟弟的識(shí)別信息作為標(biāo)簽信息而與其相關(guān)聯(lián)。此外，此時(shí)，對(duì)該哥哥的臉的圖像進(jìn)行估計(jì)年齡的處理，圖像處理裝置I將哥哥三歲時(shí)的臉估計(jì)為五歲的人物的臉，將哥哥五歲時(shí)的臉估計(jì)為六歲的人物的臉。于是，將分別包含確定弟弟的識(shí)別信息和表示是“五歲”、“六歲”作為估計(jì)年齡信息的信息的標(biāo)簽信息與這些圖像數(shù)據(jù)相關(guān)聯(lián)。
[0071]另外，圖像處理裝置I例如將從新儲(chǔ)存的圖像數(shù)據(jù)中識(shí)別出的人物定為關(guān)注人物。在這種情況下，將弟弟定為關(guān)注人物。而且，圖像處理裝置I如圖4所例示那樣提取包含關(guān)注人物的識(shí)別信息作為標(biāo)簽信息的圖像數(shù)據(jù)(SI)。設(shè)為在此發(fā)現(xiàn)與N張照片中的各照片相對(duì)應(yīng)的圖像數(shù)據(jù)Di (i=l，2，...，N)。
[0072]圖像處理裝置I針對(duì)圖像數(shù)據(jù)Di分別獲取拍攝日信息Tt[i] (S2)。另外，獲取與關(guān)注人物的識(shí)別信息相關(guān)聯(lián)地記錄的出生年月日信息Tb(S3)。然后，圖像處理裝置I針對(duì)圖像數(shù)據(jù)Di分別計(jì)算拍攝各圖像數(shù)據(jù)的時(shí)間點(diǎn)的關(guān)注人物的實(shí)際年齡信息At[i]=Tt[i]-Tb(S4)。關(guān)于先前例示的2003年哥哥三歲時(shí)的圖像數(shù)據(jù)(設(shè)為i=l)、即被誤認(rèn)為弟弟的圖像數(shù)據(jù)，實(shí)際年齡信息At[l]=2003-2004=-l(在此設(shè)為拍攝日信息、出生年月日信息只使用年。但是本實(shí)施方式不限于此，例如也可以使用從過(guò)去的規(guī)定的日期時(shí)間起經(jīng)過(guò)的天數(shù)表示拍攝日和出生年月日，來(lái)進(jìn)行該計(jì)算)。另外，關(guān)于2005年哥哥五歲時(shí)的圖像數(shù)據(jù)(設(shè)為i=2)、即被誤認(rèn)為弟弟的圖像數(shù)據(jù)，實(shí)際年齡信息At[2]=2005-2004=1。
[0073]另外，圖像處理裝置I獲取與圖像數(shù)據(jù)Di分別相關(guān)聯(lián)的標(biāo)簽信息中的與關(guān)注人物的識(shí)別信息相關(guān)聯(lián)的年齡的估計(jì)結(jié)果的信息Ae[i](S5)。在上述例子中，Ae[l]=5，Ae[2]=6。
[0074]在此，圖像處理裝置I判斷圖像數(shù)據(jù)Di的數(shù)量N是否超過(guò)預(yù)定的閾值nth (S6)。在此，如果圖像數(shù)據(jù)Di的數(shù)量N超過(guò)預(yù)定的閾值nth，則圖像處理裝置I執(zhí)行第一識(shí)別正確與否判斷處理(S7)。另外，如果在處理S6中圖像數(shù)據(jù)Di的數(shù)量N沒(méi)有超過(guò)預(yù)定的閾值nth，則圖像處理裝置I執(zhí)行第二識(shí)別正確與否判斷處理(S8)。
[0075]具體地說(shuō)，在處理S7的第一識(shí)別正確與否判斷處理中，首先如圖5所例示那樣生成年齡校正信息。具體地說(shuō)，圖像處理裝置I針對(duì)在處理SI中提取到的圖像數(shù)據(jù)Di (i=l,2，...)分別獲取在處理S4中計(jì)算出的關(guān)注人物的實(shí)際年齡信息At [i]和在處理S5中獲取到的年齡的估計(jì)結(jié)果的信息Ae [i] (S12)。
[0076]圖像處理裝置I根據(jù)每個(gè)圖像數(shù)據(jù)Di的實(shí)際年齡信息At [i]和來(lái)自圖像數(shù)據(jù)的年齡的估計(jì)結(jié)果的信息Ae[i]的組，計(jì)算它們的相關(guān)系數(shù)作為年齡校正信息(S13)。該年齡校正信息的例子如已經(jīng)例示那樣，是假定使用實(shí)際年齡信息以α XAt+β表示年齡的估計(jì)結(jié)果的信息Ae時(shí)的α、β，具體地說(shuō)，通過(guò)最小二乘法來(lái)求出它們。即，由此估計(jì)實(shí)際年齡信息與年齡的估計(jì)結(jié)果之間的關(guān)系。作為一個(gè)例子，在對(duì)于前面的弟弟認(rèn)為始終比實(shí)際年齡大一歲左右的情況下，α大概是“1”，β為+1。
[0077]圖像處理裝置I將變量k復(fù)位為“I” (S14)，使用圖像數(shù)據(jù)Dk的實(shí)際年齡信息At[k]和在處理S13中計(jì)算出的年齡校正信息來(lái)獲得假定的估計(jì)值(S15)。具體地說(shuō)，使用前面的α、β來(lái)設(shè)為假定估計(jì)值A(chǔ)ee[k] = a XAtM + β。圖像處理裝置I求出該假定估計(jì)值A(chǔ)ee[k]和與實(shí)際年齡信息At [k]相對(duì)應(yīng)的年齡的估計(jì)結(jié)果的信息Ae [k]之差的絕對(duì)值
Ae[k]-Aee[k] | = |Ae[k]-a XAt[k] + P | (殘差的計(jì)算:S16)。
[0078]另外，圖像處理裝置I調(diào)查實(shí)際年齡信息At [k]是否為負(fù)(S17)。在此，如果實(shí)際年齡信息At[k]為負(fù)(如果為“是”)，則圖像處理裝置I對(duì)于圖像數(shù)據(jù)Dk的關(guān)注人物“弟弟”判定為其識(shí)別結(jié)果錯(cuò)誤，重新執(zhí)行人物識(shí)別處理(S18)。在該處理S18中，判斷為圖像數(shù)據(jù)Dk中被識(shí)別為“弟弟”的人物不是“弟弟”，因此通過(guò)該人物的重新識(shí)別來(lái)作為“弟弟”以外的人物而進(jìn)行識(shí)別。對(duì)于該人物(“弟弟”以外的人物)也可以另行執(zhí)行圖4的處理。
[0079]另一方面，如果在處理S17中實(shí)際年齡信息At [k]不是負(fù)，則判斷在處理S16中求出的差的絕對(duì)值|Ae[i]_a ΧΑ?[?] + β |是否超過(guò)預(yù)定的閾值Θ (S19)。
[0080]在前面的兄弟的例子中，對(duì)于2003年哥哥三歲時(shí)的圖像數(shù)據(jù)以及2005年哥哥五歲時(shí) 的圖像數(shù)據(jù)(i=l，2)，Aee[l] = a XAt[I]+ β =IX (-1)+1=0, Aee[2] = a XAt[2] + β =1X 1+1=2(a、β都設(shè)為1，關(guān)于實(shí)際年齡，由于被誤認(rèn)為弟弟而為負(fù)值等，與實(shí)際的哥哥的年齡不同)。
[0081]另外，由于At[l]為負(fù)，因此圖像處理裝置I對(duì)于圖像數(shù)據(jù)Dl判定為“弟弟”這樣的識(shí)別結(jié)果錯(cuò)誤，重新執(zhí)行人物識(shí)別處理。
[0082]另一方面，At[2]不為負(fù)，Ae[2]在上述例子中估計(jì)為“6”，因此它們的差的絕對(duì)值A(chǔ)e [2]-Aee [2]為“4”。在此，例如將閾值Θ事先定為“3”時(shí)，在處理S19中判斷為上述
差的絕對(duì)值均超過(guò)閾值Θ。
[0083]如果在處理S19中差的絕對(duì)值超過(guò)閾值Θ (如果為“是”)，則圖像處理裝置I對(duì)于圖像數(shù)據(jù)Dk的關(guān)注人物“弟弟”判定為其識(shí)別結(jié)果錯(cuò)誤，轉(zhuǎn)移到處理S18來(lái)重新執(zhí)行人物識(shí)別處理。
[0084]另外，如果在處理S19中差的絕對(duì)值沒(méi)有超過(guò)閾值Θ，則圖像處理裝置I使k遞增“ I ” (S20)，如果k為N以下則從處理S15起反復(fù)進(jìn)行處理(循環(huán))。另外，在此，如果k大于N，則結(jié)束處理。
[0085]在該例子中，例如對(duì)于2007年拍攝了弟弟的圖像數(shù)據(jù)(設(shè)為D3)，At[3]=3。另外，當(dāng)設(shè)為來(lái)自圖像數(shù)據(jù)的年齡的估計(jì)結(jié)果是“5”(Ae[3]=5)時(shí)，使用了之前的α、β的假定估計(jì)值 Aee[k] = a XAt[k] + 0 為 Aee[3] = a XAt[3] + β =1 X3+1=4。因而，上述差的絕對(duì)值I Ae [3]-Aee [3]為“1”，在閾值Θ設(shè)為“3”的情況下，在處理S19中不會(huì)判定為識(shí)別結(jié)果錯(cuò)誤(此外，At[3]也不為負(fù)，因此在處理S17中也不會(huì)判定為識(shí)別結(jié)果錯(cuò)誤)。此外，該閾值Θ也可以根據(jù)從關(guān)注人物的出生年月日至設(shè)為處理對(duì)象的圖像數(shù)據(jù)的拍攝日為止的經(jīng)過(guò)日期時(shí)間而變化。例如，也可以設(shè)為從出生年月日起經(jīng)過(guò)的天數(shù)越大則使Θ越大。另外，也可以設(shè)為當(dāng)經(jīng)過(guò)天數(shù)超過(guò)規(guī)定值時(shí)Θ為固定。
[0086]另一方面，在圖4的處理S8中執(zhí)行第二識(shí)別正確與否判斷處理的圖像處理裝置I調(diào)查是否存在在處理S4中計(jì)算出的實(shí)際年齡信息At[i]中的如為負(fù)那樣的At[i] (i=l,2，...)。而且，例如在At[j]為負(fù)的情況下，判定為與第j個(gè)圖像數(shù)據(jù)有關(guān)的關(guān)注人物的識(shí)別結(jié)果錯(cuò)誤。在上述的情況下，對(duì)于2003年哥哥三歲時(shí)的圖像數(shù)據(jù)Dl，At[l]為負(fù)，因此判定為識(shí)別結(jié)果錯(cuò)誤。在該處理中也可以設(shè)為圖像處理裝置I針對(duì)判定為識(shí)別結(jié)果錯(cuò)誤的圖像數(shù)據(jù)重新執(zhí)行人物識(shí)別處理(與上述處理S18相同)。
[0087]具體地說(shuō)，在對(duì)第i個(gè)圖像數(shù)據(jù)Di重新執(zhí)行人物識(shí)別處理的情況下，圖像處理裝置I如下那樣進(jìn)行動(dòng)作。即，圖像處理裝置I刪除與該第i個(gè)圖像數(shù)據(jù)Di相關(guān)聯(lián)地記錄在存儲(chǔ)部12的標(biāo)簽信息中的包含誤認(rèn)為關(guān)注人物的識(shí)別信息的標(biāo)簽信息。另外，圖像處理裝置I針對(duì)從第i個(gè)圖像數(shù)據(jù)Di中拍攝了誤認(rèn)為關(guān)注人物的臉的區(qū)域(成為重新識(shí)別的對(duì)象的區(qū)域)進(jìn)行識(shí)別該區(qū)域內(nèi)的人物的處理。此時(shí)，使用確定關(guān)注人物的識(shí)別信息將與該區(qū)域內(nèi)的人物的臉相關(guān)的預(yù)定的特征量與保存在存儲(chǔ)部12的人臉數(shù)據(jù)庫(kù)中的不包含關(guān)注人物的識(shí)別信息的條目?jī)?nèi)的特征量信息進(jìn)行比較。
[0088]圖像處理裝置I在該比較的結(jié)果、即從人臉數(shù)據(jù)庫(kù)中發(fā)現(xiàn)特征量信息與所提取到的特征量信息一致或者類似且未與關(guān)注人物的識(shí)別信息相關(guān)聯(lián)的條目時(shí)，將包含在該條目中的識(shí)別信息作為標(biāo)簽信息之一，與所選擇的圖像數(shù)據(jù)相關(guān)聯(lián)地保持在存儲(chǔ)部12中。此時(shí)，人物識(shí)別處理部31根據(jù)位于關(guān)注區(qū)域內(nèi)的人臉的部位、輪廓、皺紋的信息等估計(jì)所拍攝的該人物的年齡。
[0089]如果是前面的兄弟的例子，則兄弟間的臉的特征量類似。因而除了作為關(guān)注人物的弟弟以外，與哥哥的識(shí)別信息相關(guān)聯(lián)的特征量被判斷為與成為重新識(shí)別的對(duì)象的區(qū)域內(nèi)的人臉的特征量類似。即，由于該人物識(shí)別處理的重新執(zhí)行而將哥哥的識(shí)別信息與2003年哥哥三歲時(shí)的圖像數(shù)據(jù)以及2005年哥哥五歲時(shí)的圖像數(shù)據(jù)(i=l，2)相關(guān)聯(lián)的可能性高。
[0090]圖像處理裝置I設(shè)定包含確定圖像數(shù)據(jù)中這樣拍攝到的人物的識(shí)別信息的標(biāo)簽信息。而且，按照從操作部13輸入的指示選擇并讀出例如拍攝有弟弟的照片的圖像數(shù)據(jù)(與包含確定弟弟的識(shí)別信 息的標(biāo)簽信息相關(guān)聯(lián)的圖像數(shù)據(jù))，向外部的顯示器、家庭用電視機(jī)裝置輸出該圖像數(shù)據(jù)所表示的圖像。
[0091]另外，年齡校正信息生成部37中的處理不限于目前為止說(shuō)明的處理。例如年齡校正信息生成部37也可以基于根據(jù)所提取到的各圖像數(shù)據(jù)估計(jì)出的關(guān)注人物的估計(jì)年齡信息中的除了被判斷為離群值的估計(jì)年齡信息以外的估計(jì)年齡信息、與針對(duì)提取到的每個(gè)圖像數(shù)據(jù)計(jì)算出的實(shí)際年齡信息的統(tǒng)計(jì)計(jì)算結(jié)果，生成表示實(shí)際年齡與外表的年齡差的年齡校正信息。
[0092]具體地說(shuō)，該年齡校正信息生成部37從存儲(chǔ)部12讀出針對(duì)第i個(gè)圖像數(shù)據(jù)(i=l，2，...)計(jì)算出的關(guān)注人物的實(shí)際年齡信息At [i]和年齡的估計(jì)結(jié)果的信息Ae [i]。而且，根據(jù)這些圖像數(shù)據(jù)中的每個(gè)圖像數(shù)據(jù)的實(shí)際年齡信息At[i]與來(lái)自圖像數(shù)據(jù)的年齡的估計(jì)結(jié)果的信息Ae [i]的組，計(jì)算臨時(shí)的相關(guān)系數(shù)。在此臨時(shí)的相關(guān)系數(shù)例如是假定為對(duì)于實(shí)際年齡信息At以一次式Ae=a pXAt+β P表示估計(jì)的結(jié)果Ae時(shí)的α ρ、βρ,具體地說(shuō)，只要設(shè)為通過(guò)最小二乘法來(lái)求出它們即可。
[0093]年齡校正信息生成部37在被提供了實(shí)際年齡信息At [i]時(shí)，將使用這些臨時(shí)的相關(guān)系數(shù)計(jì)算的a pXAt[i] + P ρ設(shè)為臨時(shí)的估計(jì)值A(chǔ)p[i]。即，設(shè)為Ap[i] = a ρΧΑ?[?] + β pD而且，年齡校正信息生成部求出該臨時(shí)的估計(jì)值A(chǔ)p [i]和與實(shí)際年齡信息At [i]相對(duì)應(yīng)的年齡的估計(jì)結(jié)果的信息Ae[i]之差(殘差)R[i]=Ae[i]-Ap[i]。另外，計(jì)算出該殘差R[i]的標(biāo)準(zhǔn)偏差σ。
[0094]年齡校正信息生成部37將年齡的估計(jì)結(jié)果的信息Ae [i]中的對(duì)該年齡的估計(jì)結(jié)果的信息Ae[i]除以殘差的標(biāo)準(zhǔn)偏差σ所得到的值超過(guò)預(yù)定的閾值的估計(jì)結(jié)果的信息判斷為離群值。在此，閾值例如也可以設(shè)為“2”?“3”。年齡校正信息生成部37基于除了判斷為離群值的年齡的估計(jì)結(jié)果的信息Ae[i]以外的年齡的估計(jì)結(jié)果的信息Ae[i]和關(guān)注人物的實(shí)際年齡信息At [i]的統(tǒng)計(jì)計(jì)算結(jié)果，生成表示實(shí)際年齡與外表的年齡差的年齡校正信息。
[0095]作為一個(gè)例子，年齡校正信息生成部37除去判斷為離群值的年齡的估計(jì)結(jié)果的信息Ae [j]和與它相對(duì)應(yīng)的(與圖像數(shù)據(jù)Dj相對(duì)應(yīng)的)實(shí)際年齡信息At [j]，通過(guò)最小二乘法求出假定對(duì)于實(shí)際年齡信息At以一次式Ae=a XAt+β表示估計(jì)的結(jié)果Ae時(shí)的a、β。
[0096]例如，當(dāng)提取了第i=l，2，...5個(gè)為止的圖像數(shù)據(jù)時(shí)，如果判斷為與i=l，3的圖像數(shù)據(jù)相對(duì)應(yīng)的年齡的估計(jì)結(jié)果的信息Ae[l]、Ae[3]是離群值，則年齡校正信息生成部37除去它們和與它們相對(duì)應(yīng)的實(shí)際年齡信息At [I]、At [3]，根據(jù)剩余的實(shí)際年齡信息At [2]、At [4]、At [5]和與它們相對(duì)應(yīng)的年齡的估計(jì)結(jié)果的信息Ae [2]、Ae [4]、Ae [5]的回歸分析，求出假定以一次式Ae= a XAt+β表示估計(jì)的結(jié)果Ae時(shí)的a、β。
[0097]另外，在此，設(shè)為年齡校正信息生成部37在生成年齡校正信息時(shí)使用回歸分析，但并不限于此。例如年齡校正信息生成部37也可以考慮年齡估計(jì)結(jié)果Ae[i]相對(duì)于實(shí)際年齡信息At[i]的分布圖，通過(guò)該分布圖中的主成分解析等來(lái)生成年齡校正信息。
[0098]并且，在目前為止的說(shuō)明中，說(shuō)明了能夠從Exif數(shù)據(jù)等、與圖像數(shù)據(jù)相關(guān)聯(lián)的信息中獲取拍攝日信息的情況，但是即使在如照片的掃描數(shù)據(jù)那樣無(wú)法直接獲取拍攝日信息的情況下，只要能夠通過(guò)某種處理來(lái)獲取拍攝日信息，就能夠執(zhí)行本實(shí)施方式的信息處理裝置I所進(jìn)行的處理。
[0099]例如，在拍入了日期信息的情況下(在照片中日期信息作為圖像被拍入的情況下)，也可以通過(guò)OCR(光學(xué)文字識(shí)別)讀取該日期信息來(lái)加以利用。另外，在APS(AdVancedPhoto System:高級(jí)成像系統(tǒng))標(biāo)準(zhǔn)的照片中，在照片背面記述有日期信息，因此也可以由OCR讀出該日期信息來(lái)加以利用。另外，如果能夠從使用者接受照片的拍攝日信息的輸入，則也可以利用該拍攝日信息。
[0100]根據(jù)本實(shí)施方式的圖像處理裝置，能夠降低基于圖像數(shù)據(jù)識(shí)別人物出錯(cuò)的產(chǎn)生。
【權(quán)利要求】
1.一種圖像處理裝置，包括: 儲(chǔ)存單元，其將拍攝了人物的圖像數(shù)據(jù)與表示拍攝日的信息相關(guān)聯(lián)地進(jìn)行儲(chǔ)存； 人物數(shù)據(jù)庫(kù)保持單元，其存儲(chǔ)上述圖像數(shù)據(jù)中拍攝到的人物的出生年月日； 提取單元，其針對(duì)上述圖像數(shù)據(jù)執(zhí)行識(shí)別所拍攝的人物的人物識(shí)別處理，提取拍攝了另行確定的關(guān)注人物的圖像數(shù)據(jù)； 獲取單元，其從上述儲(chǔ)存單元獲取提取到的每個(gè)圖像數(shù)據(jù)的拍攝日，并且從上述人物數(shù)據(jù)庫(kù)保持單元獲取上述關(guān)注人物的出生年月日； 計(jì)算單元，其針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算分別獲取到的拍攝日與關(guān)注人物的出生年月日之差，來(lái)獲得上述提取到的每個(gè)圖像數(shù)據(jù)的關(guān)注人物的實(shí)際年齡信息； 估計(jì)單元，其針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)獲得關(guān)注人物的估計(jì)年齡信息，該關(guān)注人物的估計(jì)年齡信息是根據(jù)圖像數(shù)據(jù)估計(jì)所拍攝的關(guān)注人物的年齡而得到的；以及 校正信息生成單元，其基于針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算出的實(shí)際年齡信息和分別對(duì)應(yīng)的根據(jù)圖像數(shù)據(jù)估計(jì)出的估計(jì)年齡信息的統(tǒng)計(jì)計(jì)算結(jié)果，來(lái)生成表示實(shí)際年齡與外表的年齡差的年齡校正信息， 其中，所生成的上述年齡校正信息用于判斷由上述提取單元的人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié)果是否正確。
2.一種圖像處理裝置，包括: 儲(chǔ)存單元，其將拍攝了人物的圖像數(shù)據(jù)與表示拍攝日的信息相關(guān)聯(lián)地進(jìn)行儲(chǔ)存； 人物數(shù)據(jù)庫(kù)保持單元，其存儲(chǔ)上述圖像數(shù)據(jù)中拍攝到的人物的出生年月日； 提取單元，其針對(duì)上述圖像數(shù)據(jù)執(zhí)行識(shí)別所拍攝的人物的人物識(shí)別處理，提取拍攝了另行確定的關(guān)注人物的圖像數(shù)據(jù)； 獲取單元，其從上述儲(chǔ)存單元獲取提取到的每個(gè)圖像數(shù)據(jù)的拍攝日，并且從上述人物數(shù)據(jù)庫(kù)保持單元獲取上述關(guān)注人物的出生年月日； 計(jì)算單元，其針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算分別獲取到的拍攝日與關(guān)注人物的出生年月日之差，來(lái)獲得上述提取到的每個(gè)圖像數(shù)據(jù)的關(guān)注人物的實(shí)際年齡信息； 估計(jì)單元，其針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)獲得關(guān)注人物的估計(jì)年齡信息，該關(guān)注人物的估計(jì)年齡信息是根據(jù)圖像數(shù)據(jù)估計(jì)所拍攝的關(guān)注人物的年齡而得到的；以及 決定單元，其根據(jù)提取到的圖像數(shù)據(jù)的數(shù)量是否滿足預(yù)定的條件來(lái)決定是執(zhí)行第一識(shí)別正確與否判斷處理還是執(zhí)行第二識(shí)別正確與否判斷處理， (1)在該第一識(shí)別正確與否判斷處理中，基于針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算出的實(shí)際年齡信息和分別對(duì)應(yīng)的根據(jù)圖像數(shù)據(jù)估計(jì)出的估計(jì)年齡信息的統(tǒng)計(jì)計(jì)算結(jié)果，來(lái)生成表示實(shí)際年齡與外表的年齡差的年齡校正信息，所生成的該年齡校正信息用于判斷由上述提取單元的人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié)果是否正確， (2)在該第二識(shí)別正確與否判斷處理中，使用上述計(jì)算出的實(shí)際年齡信息判斷由上述提取單元的人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié)果是否正確。
3.根據(jù)權(quán)利要求1或2所述的圖像處理裝置，其特征在于， 在生成上述年齡校正信息的處理中， 基于根據(jù)提取到的各圖像數(shù)據(jù)估計(jì)出的關(guān)注人物的估計(jì)年齡信息中的除了判斷為離群值的估計(jì)年齡信息以外的估計(jì)年齡信息、與針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算出的實(shí)際年齡信息的統(tǒng)計(jì)計(jì)算結(jié)果，來(lái)生成表示實(shí)際年齡與外表的年齡差的年齡校正信息。
4.一種圖像處理方法，包括如下步驟: 儲(chǔ)存步驟，將拍攝了人物的圖像數(shù)據(jù)與表示拍攝日的信息相關(guān)聯(lián)地儲(chǔ)存在儲(chǔ)存單元中； 人物數(shù)據(jù)庫(kù)保持步驟，在人物數(shù)據(jù)庫(kù)保持單元中存儲(chǔ)上述圖像數(shù)據(jù)中拍攝到的人物的出生年月日； 提取步驟，針對(duì)上述圖像數(shù)據(jù)執(zhí)行識(shí)別所拍攝的人物的人物識(shí)別處理，提取拍攝了另行確定的關(guān)注人物的圖像數(shù)據(jù)； 獲取步驟，從上述儲(chǔ)存單元獲取提取到的每個(gè)圖像數(shù)據(jù)的拍攝日，并且從上述人物數(shù)據(jù)庫(kù)保持單元獲取上述關(guān)注人物的出生年月日； 計(jì)算步驟，針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算分別獲取到的拍攝日與關(guān)注人物的出生年月日之差，來(lái)獲得上述提取到的每個(gè)圖像數(shù)據(jù)的關(guān)注人物的實(shí)際年齡信息； 估計(jì)步驟，針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)獲得關(guān)注人物的估計(jì)年齡信息，該關(guān)注人物的估計(jì)年齡信息是根據(jù)圖像數(shù)據(jù)估計(jì)所拍攝的關(guān)注人物的年齡而得到的；以及` 校正信息生成步驟，基于針對(duì)上述提取到的每個(gè)圖像數(shù)據(jù)計(jì)算出的實(shí)際年齡信息和分別對(duì)應(yīng)的根據(jù)圖像數(shù)據(jù)估計(jì)出的估計(jì)年齡信息的統(tǒng)計(jì)計(jì)算結(jié)果，來(lái)生成表示實(shí)際年齡與外表的年齡差的年齡校正信息， 其中，所生成的上述年齡校正信息用于判斷由上述提取步驟的人物識(shí)別處理得到的關(guān)注人物的識(shí)別結(jié)果是否正確。
【文檔編號(hào)】G06K9/00GK103679133SQ201310382116
【公開(kāi)日】2014年3月26日 申請(qǐng)日期:2013年8月28日 優(yōu)先權(quán)日:2012年8月29日
【發(fā)明者】加藤勇人, 高橋賢治 申請(qǐng)人:巴法絡(luò)股份有限公司