(比如每300幀一次)地進(jìn)行面部圖像檢測(cè)的處理,并響應(yīng)所述檢測(cè)更新候選者提示圖像201時(shí),在最初作為候選者提示圖像201的面部列表上,面部圖像不被頻繁改變。在這種情況下,當(dāng)然可取的是響應(yīng)按照追蹤的ID設(shè)定,控制列表上的順序。不過(guò),即使不經(jīng)常進(jìn)行追蹤,也不會(huì)失去候選者提示圖像201的易看性。從而,也可考慮其中不進(jìn)行追蹤處理的處理例子。
[0360]在圖14或圖15的處理例子(成像設(shè)備的第四實(shí)施例)中,說(shuō)明了對(duì)于面部圖像,利用正面面部、屬性等的條件的處理。不過(guò),除了面部圖像之外,可多樣地考慮預(yù)定條件。例如,可多樣地考慮選擇將在候選者提示圖像中采用的圖像的預(yù)定條件,比如特定顏色、特定動(dòng)物種類,特定顏色的植物等。
[0361 ] 此外,在各個(gè)實(shí)施例中,對(duì)于選擇并強(qiáng)調(diào)顯示的被攝對(duì)象,可以進(jìn)行各種控制。
[0362]例如,可以考慮對(duì)于成像設(shè)備10中的所選被攝對(duì)象進(jìn)行聚焦,并響應(yīng)所選被攝對(duì)象的亮度,進(jìn)行曝光調(diào)整。
[0363]此外,在伴隨著攝影(例如,運(yùn)動(dòng)圖像攝影),通過(guò)麥克風(fēng)進(jìn)行聲音拾取的情況下,也可考慮響應(yīng)于被選被攝對(duì)象在視角空間中的方向,進(jìn)行指向性調(diào)整。
[0364]此外,也可考慮進(jìn)行與所選被攝對(duì)象對(duì)應(yīng)的自動(dòng)變焦控制。例如,進(jìn)行自動(dòng)變焦透鏡驅(qū)動(dòng),以致在拍攝的圖像上,以預(yù)定或者更大的大小,反映所選被攝對(duì)象。根據(jù)與隨著追蹤處理,到所選被攝對(duì)象的距離的變化對(duì)應(yīng)的變焦,可以進(jìn)行視角的調(diào)整。
[0365]此外,也可考慮采用觸發(fā)來(lái)啟動(dòng)運(yùn)動(dòng)圖像拍攝。例如,按照被攝對(duì)象的選擇,開(kāi)始運(yùn)動(dòng)圖像攝影記錄。
[0366]此外,對(duì)于拍攝的圖像信號(hào)的各種信號(hào)處理也是可能的。
[0367]例如,只對(duì)在拍攝的各幀中選擇的被攝對(duì)象的區(qū)域,應(yīng)用圖像處理,比如畫(huà)質(zhì)調(diào)整、降噪或膚色調(diào)整。
[0368]另一方面,也可考慮在所選被攝對(duì)象的區(qū)域之外,應(yīng)用圖像效果,例如,馬賽克處理、噴涂、抹除處理等。
[0369]此外,也可考慮對(duì)拍攝的圖像或記錄的圖像應(yīng)用諸如添加火焰或裁剪之類的編輯。
[0370]例如,可以進(jìn)行諸如包括所選被攝對(duì)象的幀的部分區(qū)域的剪切或擴(kuò)大之類的處理。
[0371]此外,可以進(jìn)行拍攝圖像數(shù)據(jù)中的圖像周邊部分的剪切等,以致所選被攝對(duì)象被置于圖像的中央,和進(jìn)行構(gòu)圖。
[0372]上述只是用于舉例說(shuō)明。另外,可以多樣地考慮其中應(yīng)用程序或者成像設(shè)備10的自動(dòng)調(diào)整功能利用被攝對(duì)象的選擇結(jié)果的處理。
[0373]此外,本技術(shù)也適用于監(jiān)控?cái)z像頭應(yīng)用(記錄開(kāi)始判定)。例如,在監(jiān)視的圖像上,或其再現(xiàn)圖像上,進(jìn)行面部列表顯示,或者與選擇對(duì)應(yīng)的強(qiáng)調(diào)顯示,以致在觀察者發(fā)現(xiàn)可疑者時(shí),本技術(shù)有效。
[0374]本領(lǐng)域的技術(shù)人員應(yīng)明白,根據(jù)設(shè)計(jì)要求和其它因素,可以產(chǎn)生各種修改、組合、子組合和變更,只要它們?cè)谒降臋?quán)利要求或其等同物的范圍之內(nèi)。
[0375]另外,也可如下構(gòu)成本技術(shù)。
[0376](I) 一種信息處理設(shè)備,包括:控制裝置,所述控制裝置:生成顯示數(shù)據(jù),所述顯示數(shù)據(jù)包括用于顯示在顯示區(qū)的第一區(qū)域中的主圖像,和在主圖像被顯示在第一區(qū)域中的同時(shí),用于顯示在顯示區(qū)的第二區(qū)域中的候選圖像的列表,其中候選圖像提取自主圖像,并且代表主圖像中的相應(yīng)被攝對(duì)象;和接收來(lái)自用戶的輸入,以從所述列表中選擇一個(gè)候選圖像,其中根據(jù)所述一個(gè)候選圖像的選擇,生成顯示數(shù)據(jù)。
[0377](2)按照⑴所述的設(shè)備,其中主圖像是運(yùn)動(dòng)圖像。
[0378](3)按照(I)或(2)所述的設(shè)備,其中列表中的第一候選圖像包括根據(jù)對(duì)應(yīng)于第一候選圖像的被攝對(duì)象的面部部分是否在主圖像中的分析,從主圖像中提取的面部圖像。
[0379](4)按照(1)-(3)任意之一所述的設(shè)備,其中利用作為強(qiáng)調(diào)的指示符,或者標(biāo)記,指示第一區(qū)域中的與從列表中選擇的第一候選圖像對(duì)應(yīng)的部分。
[0380](5)按照(1)-(4)任意之一所述的設(shè)備,其中根據(jù)用戶從列表中的候選圖像的選擇,顯示在第二區(qū)域中的列表消失。
[0381](6)按照(1)-(5)任意之一所述的設(shè)備,其中根據(jù)用戶從列表中的候選圖像的選擇,終止第二顯示區(qū)中的列表的顯示。
[0382](7)按照(1)-(6)任意之一所述的設(shè)備,其中在作為多個(gè)候選圖像的列表被顯示在第二區(qū)域中的時(shí)候,根據(jù)用戶的第一候選圖像的選擇,按照多個(gè)候選圖像的順序,列表中的第一候選圖像的位置被變更成優(yōu)先位置。
[0383](8)按照(1)-(7)任意之一所述的設(shè)備,其中當(dāng)控制裝置對(duì)主圖像中的與從列表中選擇的第一候選圖像對(duì)應(yīng)的被攝對(duì)象的追蹤被中斷時(shí),第一候選圖像的選擇狀態(tài)被解除。
[0384](9)按照(1)-(8)任意之一所述的設(shè)備,其中當(dāng)控制裝置對(duì)主圖像中的與從列表中選擇的第一候選圖像對(duì)應(yīng)的被攝對(duì)象的追蹤被中斷時(shí),控制裝置設(shè)定優(yōu)先檢測(cè)大小和優(yōu)先檢測(cè)區(qū)域。
[0385](10)按照(1)-(9)任意之一所述的設(shè)備,其中控制裝置判定在追蹤被中斷之后,新出現(xiàn)的被攝對(duì)象在幀中的位置是否在優(yōu)先檢測(cè)區(qū)域中或附近。
[0386](11)按照(I)-(1)任意之一所述的設(shè)備,其中控制裝置判定在追蹤被中斷之后,幀中的新出現(xiàn)的被攝對(duì)象的大小是否與優(yōu)先檢測(cè)大小一致,或者接近優(yōu)先檢測(cè)大小。
[0387](12)按照(I)-(Il)任意之一所述的設(shè)備,其中顯示在第二區(qū)域中的列表之中的多個(gè)候選圖像中的候選圖像可利用預(yù)定操作變更。
[0388](13)按照(1)-(12)任意之一所述的設(shè)備,其中所述預(yù)定操作是對(duì)于列表的翻頁(yè)操作或滾動(dòng)操作。
[0389](14)按照(1)-(13)任意之一所述的設(shè)備,其中依據(jù)利用參數(shù)設(shè)定的預(yù)定條件,區(qū)分多個(gè)候選圖像的顯示的優(yōu)先順序。
[0390](15)按照(1)-(14)任意之一所述的設(shè)備,其中參數(shù)包括大小、在主圖像中的位置、或者屬性之一。
[0391](16)按照(1)-(15)任意之一所述的設(shè)備,其中以預(yù)定的大小,擴(kuò)大或縮小從主圖像中提取的作為列表中的候選圖像的面部圖像的大小。
[0392](17)按照(1)-(16)任意之一所述的設(shè)備,其中所述預(yù)定大小是以致用戶可辨認(rèn)和顯示的面部圖像對(duì)應(yīng)的個(gè)人的大小。
[0393](18)按照(1)-(17)任意之一所述的設(shè)備,其中主圖像是從成像設(shè)備輸出的拍攝的運(yùn)動(dòng)圖像的監(jiān)視圖像。
[0394](19) 一種信息處理方法,包括:利用控制裝置,生成顯示數(shù)據(jù),所述顯示數(shù)據(jù)包括用于顯示在顯示區(qū)的第一區(qū)域中的主圖像,和在主圖像被顯示在第一區(qū)域中的同時(shí),用于顯示在顯示區(qū)的第二區(qū)域中的候選圖像的列表,其中候選圖像提取自主圖像,并且代表主圖像中的相應(yīng)被攝對(duì)象;和接收來(lái)自用戶的輸入,以從所述列表中選擇一個(gè)候選圖像,其中根據(jù)所述一個(gè)候選圖像的選擇,生成顯示數(shù)據(jù)。
[0395](20) 一種記錄有可由計(jì)算機(jī)執(zhí)行的程序的非臨時(shí)性記錄介質(zhì),所述程序包括:生成顯示數(shù)據(jù),所述顯示數(shù)據(jù)包括用于顯示在顯示區(qū)的第一區(qū)域中的主圖像,和在主圖像被顯示在第一區(qū)域中的同時(shí),用于顯示在顯示區(qū)的第二區(qū)域中的候選圖像的列表,其中候選圖像提取自主圖像,并且代表主圖像中的相應(yīng)被攝對(duì)象;和接收來(lái)自用戶的輸入,以從所述列表中選擇一個(gè)候選圖像,其中根據(jù)所述一個(gè)候選圖像的選擇,生成顯示數(shù)據(jù)。
[0396](21) 一種圖像處理設(shè)備,包括:選擇候選者檢測(cè)單元,所述選擇候選者檢測(cè)單元在主圖像中,檢測(cè)作為被攝對(duì)象圖像的選擇候選圖像,所述主圖像是運(yùn)動(dòng)圖像或靜止圖像;顯示數(shù)據(jù)生成單元,所述顯示數(shù)據(jù)生成單元至少利用主圖像,生成顯示數(shù)據(jù);和控制單元,所述控制單元允許顯示數(shù)據(jù)生成單元通過(guò)結(jié)合在選擇候選者檢測(cè)單元中檢測(cè)的選擇候選圖像和主圖像,生成包括候選者提示圖像的顯示數(shù)據(jù),和響應(yīng)對(duì)于候選者提示圖像的選擇操作,生成包括其中在主圖像中,強(qiáng)調(diào)與選擇的候選者提示圖像對(duì)應(yīng)的被攝對(duì)象圖像的顯示的顯示數(shù)據(jù)。
[0397](22)按照(21)所述的圖像處理設(shè)備,其中顯示數(shù)據(jù)生成單元生成包括其中排列選擇候選圖像的候選者提示圖像的顯示數(shù)據(jù),控制單元向包含在作為主圖像的動(dòng)態(tài)圖像中的多幀中,被確定為同一被攝對(duì)象的選擇候選圖像分配相同的標(biāo)識(shí)符,并根據(jù)所述標(biāo)識(shí)符,控制候選者提示圖像中的選擇候選圖像的顯示順序。
[0398](23)按照(21)或(22)所述的圖像處理設(shè)備,其中即使在對(duì)于候選者提示圖像的選擇操作之后,控制單元也允許顯示數(shù)據(jù)生成單元生成包括候選者提示圖像的顯示數(shù)據(jù)。
[0399](24)按照(21)-(23)任意之一所述的圖像處理設(shè)備,其中響應(yīng)對(duì)于候選者提示圖像的選擇操作,控制單元允許顯示數(shù)據(jù)生成單元進(jìn)行在候選者提示圖像上,強(qiáng)調(diào)選擇的選擇候選圖像的顯示。
[0400](25)按照(21)-(24)任意之一所述的圖像處理設(shè)備,其中響應(yīng)對(duì)于候選者提示圖像的選擇操作,控制單元指令顯示數(shù)據(jù)生成單元終止候選者提示圖像的顯示。
[0401](26)按照(21)-(25)任意之一所述的圖像處理設(shè)備,其中在作為動(dòng)態(tài)圖像的主圖像的幀前進(jìn)的過(guò)程中,根據(jù)每幀中,對(duì)于與在選擇操作中選擇的選擇候選圖像對(duì)應(yīng)的被攝對(duì)象圖像的追蹤結(jié)果,控制單元指令顯示數(shù)據(jù)生成單元,以致其中強(qiáng)調(diào)被攝對(duì)象圖像的顯示的位置被設(shè)定。
[0402](27)按照(21)-(26)任意之一所述的圖像處理設(shè)備,其中顯示數(shù)據(jù)生成單元生成包括其中排列選擇候選圖像的候選者提示圖像的顯示數(shù)據(jù),在作為動(dòng)態(tài)圖像的主圖像的幀前進(jìn)的過(guò)程中,當(dāng)與在選擇操作中選擇的選擇候選圖像對(duì)應(yīng)的被攝對(duì)象圖像的追蹤行不通時(shí),控制單元設(shè)定優(yōu)先檢測(cè)條件,并進(jìn)行控制,以致當(dāng)選擇候選者檢測(cè)單元檢測(cè)到的選擇候選圖像滿足優(yōu)先檢測(cè)條件時(shí),在候選者提示圖像上優(yōu)先顯示該選擇候選圖像。
[0403](28)按照(21)-(27)任意之一所述的圖像處理設(shè)備,其中優(yōu)先檢測(cè)條件是以剛剛在與在選擇操作中選擇的選擇候選圖像對(duì)應(yīng)的被攝對(duì)象圖像的追蹤行不通之前的主圖像中的位置或大小為基礎(chǔ)的條件。
[0404](29)按照(21)-(28)任意之一所述的圖像處理設(shè)備,其中控制單元允許顯示數(shù)據(jù)生成單元利用在選擇候選者檢測(cè)單元中檢測(cè)的選擇候選圖像之中的,滿足預(yù)定條件的選擇候選圖像,生成包括候選者提示圖像的顯示數(shù)據(jù)。
[0405](30) 一種圖像處理方法,包括:在主圖像中,檢測(cè)作為被攝對(duì)象圖像的選擇候選圖像,所述主圖像是運(yùn)動(dòng)圖像或靜止圖像;通過(guò)結(jié)合檢測(cè)的選擇候選圖像和主圖像,生成包括候選提示圖像的顯示數(shù)據(jù),并輸出所述顯示數(shù)據(jù);和響應(yīng)對(duì)于顯示的候選者提示圖像的選擇操作,生成并輸出包括其中在主圖像中,強(qiáng)調(diào)與選擇的候選者提示圖像對(duì)應(yīng)的被攝對(duì)象圖像的顯示的顯示數(shù)據(jù)。
[0406](31) 一種程序,所述程序使算術(shù)運(yùn)算處理設(shè)備執(zhí)行:
[0407]在主圖像中,檢測(cè)作為被攝對(duì)象圖像的選擇候選圖像的處理,所述主圖像是運(yùn)動(dòng)圖像或靜止圖像;通過(guò)結(jié)合檢測(cè)的選擇候選圖像和主圖像,生成包括候選提示圖像的顯示數(shù)據(jù),并輸出所述顯示數(shù)據(jù)的處理;和響應(yīng)對(duì)于顯示的候選者提示圖像的選擇操作,生成并輸出包括其中在主圖像中,強(qiáng)調(diào)與選擇的候選者提示圖像對(duì)應(yīng)的被攝對(duì)象圖像的顯示的顯示數(shù)據(jù)的處理。
[0408][附圖標(biāo)記列表]
[0409]I圖像處理設(shè)備
[0410]2,26,62選擇候選者檢測(cè)單元
[0411]3,28,64顯示數(shù)據(jù)生成單元
[0412]4,30,51 控制單元
[0413]10成像設(shè)備
[0414]11光學(xué)系統(tǒng)
[0415]12成像器
[0416]13光學(xué)系統(tǒng)驅(qū)動(dòng)單元
[0417]14傳感器單元
[0418]15記錄單元
[0419]16通信單元
[0420]20數(shù)字信號(hào)處理單元
[0421]21預(yù)處理單元
[0422]22同步單元
[0423]23YC生成單元
[0424]24分辨率轉(zhuǎn)換單元
[0425]25編解碼器單元
[0426]27候選者信息存儲(chǔ)單元
[0427]30a追蹤處理單元
[0428]34顯示單元
[0429]35,53操作單元
[0430]50再現(xiàn)設(shè)備
[0431]70計(jì)算機(jī)設(shè)備
[0432]71CPU
【主權(quán)項(xiàng)】
1.一種信息處理設(shè)備,包括: 控制裝置,所述控制裝置: 生成顯示數(shù)據(jù),所述顯示數(shù)據(jù)包括用于顯示在顯示區(qū)的第一區(qū)域中的主圖像,和在主圖像被顯示在第一區(qū)域中的同時(shí)用于顯示在顯示區(qū)的第二區(qū)域中的候選圖像的列表,其中候選圖像提取自主圖像,并且代表主圖像中的各個(gè)被攝對(duì)象;和 接收來(lái)自用戶的輸入,以從所述列表中選擇一個(gè)候選圖像,其中基于對(duì)所述一個(gè)候選圖像的選擇生成顯示數(shù)據(jù)。2.按照權(quán)利要求1所述的設(shè)備,其中主圖像是運(yùn)動(dòng)圖像。3.按照權(quán)利要求1所述的設(shè)備,其中所述列表中的第一候選圖像包括基于對(duì)應(yīng)于第一候選圖像的被攝對(duì)象的面部部分是否在主圖像中的分析而從主圖像中提取的面部圖像。4.按照權(quán)利要求1所述的設(shè)備,其中利用作為強(qiáng)調(diào)的指示符或者標(biāo)記,指示第一區(qū)域中的與從所述列表中選擇的第一候選圖像對(duì)應(yīng)的部分。5.按照權(quán)利要求1所述的設(shè)備,其中基于用戶從所述列表中對(duì)候選圖像的選擇,顯示在第二區(qū)域中的列表消失。6.按照權(quán)利要求1所述的設(shè)備,其中基于用戶從所述列表中對(duì)候選圖像的選擇,終止第二區(qū)域中的列表的顯示。7.按照權(quán)利要求1所述的設(shè)備,其中在作為多個(gè)候選圖像的列表被顯示在第二區(qū)域中時(shí),基于用戶對(duì)第一候選圖像的選擇,按照所述多個(gè)候選圖像的順序,所述列表中的第一候選圖像的位置被變更成優(yōu)先位置。8.按照權(quán)利要求1所述的設(shè)備,其中,當(dāng)控制裝置對(duì)主圖像中的與從所述列表中選擇的第一候選圖像對(duì)應(yīng)的被攝對(duì)象的追蹤被中斷時(shí),第一候選圖像的選擇狀態(tài)被解除。9.按照權(quán)利要求1所述的設(shè)備,其中,當(dāng)控制裝置對(duì)主圖像中的與從所述列表中選擇的第一候選圖像對(duì)應(yīng)的被攝對(duì)象的追蹤被中斷時(shí),控制裝置設(shè)定優(yōu)先檢測(cè)大小和優(yōu)先檢測(cè)區(qū)域。10.按照權(quán)利要求9所述的設(shè)備,其中控制裝置判定在所述追蹤被中斷之后新出現(xiàn)的被攝對(duì)象在幀中的位置是否在優(yōu)先檢測(cè)區(qū)域中或附近。11.按照權(quán)利要求9所述的設(shè)備,其中控制裝置判定在所述追蹤被中斷之后幀中的新出現(xiàn)的被攝對(duì)象的大小是否與優(yōu)先檢測(cè)大小一致或者接近優(yōu)先檢測(cè)大小。12.按照權(quán)利要求1所述的設(shè)備,其中顯示在第二區(qū)域中的所述列表之中的多個(gè)候選圖像中的候選圖像能夠通過(guò)預(yù)定操作被改變。13.按照權(quán)利要求12所述的設(shè)備,其中所述預(yù)定操作是對(duì)于所述列表的翻頁(yè)操作或滾動(dòng)操作。14.按照權(quán)利要求1所述的設(shè)備,其中依據(jù)利用參數(shù)設(shè)定的預(yù)定條件,區(qū)分所述多個(gè)候選圖像的顯示的優(yōu)先順序。15.按照權(quán)利要求14所述的設(shè)備,其中所述參數(shù)包括大小、在主圖像中的位置、或者屬性中的一個(gè)。16.按照權(quán)利要求1所述的設(shè)備,其中以預(yù)定的大小,擴(kuò)大或縮小從主圖像中提取的作為所述列表中的候選圖像的面部圖像的大小。17.按照權(quán)利要求16所述的設(shè)備,其中所述預(yù)定大小是以致用戶能夠辨認(rèn)與顯示的面部圖像對(duì)應(yīng)的個(gè)人的大小。18.按照權(quán)利要求1所述的設(shè)備,其中主圖像是從成像設(shè)備輸出的拍攝的運(yùn)動(dòng)圖像的監(jiān)視圖像。19.一種信息處理方法,包括: 利用控制裝置生成顯示數(shù)據(jù),所述顯示數(shù)據(jù)包括用于顯示在顯示區(qū)的第一區(qū)域中的主圖像,和在主圖像被顯示在第一區(qū)域中的同時(shí),用于顯示在顯示區(qū)的第二區(qū)域中的候選圖像的列表,其中候選圖像提取自主圖像,并且代表主圖像中的各個(gè)被攝對(duì)象;和 接收來(lái)自用戶的輸入,以從所述列表中選擇一個(gè)候選圖像,其中基于對(duì)所述一個(gè)候選圖像的選擇,生成所述顯示數(shù)據(jù)。20.一種記錄有能夠由計(jì)算機(jī)執(zhí)行的程序的非臨時(shí)性記錄介質(zhì),所述程序包括: 生成顯示數(shù)據(jù),所述顯示數(shù)據(jù)包括用于顯示在顯示區(qū)的第一區(qū)域中的主圖像,和在主圖像被顯示在第一區(qū)域中的同時(shí),用于顯示在顯示區(qū)的第二區(qū)域中的候選圖像的列表,其中候選圖像提取自主圖像,并且代表主圖像中的各個(gè)被攝對(duì)象;和 接收來(lái)自用戶的輸入,以從所述列表中選擇一個(gè)候選圖像,其中基于對(duì)所述一個(gè)候選圖像的選擇,生成所述顯示數(shù)據(jù)。
【專利摘要】信息處理設(shè)備可包括控制裝置??刂蒲b置生成顯示數(shù)據(jù),所述顯示數(shù)據(jù)包括用于顯示在顯示區(qū)的第一區(qū)域中的主圖像,和在主圖像被顯示在第一區(qū)域中的同時(shí),用于顯示在顯示區(qū)的第二區(qū)域中的候選圖像的列表,其中候選圖像提取自主圖像,并且代表主圖像中的相應(yīng)被攝對(duì)象。另外,控制裝置接收來(lái)自用戶的輸入,以從所述列表中選擇一個(gè)候選圖像,其中根據(jù)所述一個(gè)候選圖像的選擇,生成顯示數(shù)據(jù)。
【IPC分類】H04N5/232
【公開(kāi)號(hào)】CN105075237
【申請(qǐng)?zhí)枴緾N201480009779
【發(fā)明人】木下雅也
【申請(qǐng)人】索尼公司
【公開(kāi)日】2015年11月18日
【申請(qǐng)日】2014年1月16日
【公告號(hào)】EP2962455A1, WO2014132548A1