專利名稱：成像設備、其控制方法、以及程序的制作方法
技術領域：
本發(fā)明涉及成像設備，更具體地，其涉及能夠檢測例如人的面部等的對 象的成像設備和其控制方法、以及使計算機執(zhí)行所述方法的程序。
背景技術：
至今，成像設備已經(jīng)得到普遍使用，其拍攝例如人的主體的圖像，并且 記錄成像的圖像，例如數(shù)碼相機、數(shù)碼才聶像機等等。并且，在最近幾年中， 已經(jīng)存在這樣的成像設備，其檢測人的面部，并且基于所檢測的面部而設置 各種類型的成像參數(shù)。此外，已經(jīng)提出了這樣的成像設備，其識別所檢測的 面部是否為特定的人的面部，并且向拍攝者通知所識別的特定的人。通過采 用這樣的成像設備來拍攝圖像，允許甚至不慣于操作成像設備的人相對好地 記錄包括所期望的人的成像的圖像。
現(xiàn)在，例如，在通過使用數(shù)碼相機來拍攝旅游目的地的觀光景點處的、 伴有著名的建筑物作為背景的人的圖像的情況下，著名的建筑物與其人之間
的構圖(composition)成為重要的因素。因此，在考慮成像范圍內的建筑物 和人的位置和大小的同時執(zhí)行拍攝變得重要，但是，可以想到，對于不慣于 操作成像設備的人來說，在考慮這樣的位置和大小的同時執(zhí)行拍攝是困難的。 因此，例如，已經(jīng)提出了這樣的成像設備，其獲得表示將要成像的主體 的框架(frame)內的位置和大小的目標構圖數(shù)據(jù)，將從成像的圖像所檢測的 主體的位置和大小、與用其目標構圖數(shù)據(jù)表示的主體的位置和大小比較，以 計算這些差異，并且操縱變焦比和要拍攝圖像的朝向，以便減小這些差異(例 如，見日本未審查專利申請出版物No. 2007-259035 (圖l))。

發(fā)明內容
根據(jù)上述相關技術，在獲取靜止圖像的情況下，即使不慣于操作成像設 備的人也可以以適當?shù)臉媹D記錄成像的圖像。
現(xiàn)在，例如，考慮通過采用數(shù)碼攝像機拍攝旅游目的地的觀光景點處的特定人的圖像的情況。并且，關于此情況，變得重要的是在考慮成像范圍 內的、觀光景點的背景與特定人之間的位置和大小的同時拍攝圖像。然而， 在用根據(jù)上述相關技術的構圖(例如，特定人的整個身體)來記錄成像的圖 像的情況下，連續(xù)地記錄具有相似的構圖的運動圖像。因此，在視聽這樣記 錄的成像的運動圖像的情況下，連續(xù)地再現(xiàn)具有相似的構圖的運動圖像，并
且因此，存在這樣的可能性根據(jù)再現(xiàn)時間的經(jīng)過，觀看者對于正在再現(xiàn)的 運動圖像的興趣可能會減'J 、。
已經(jīng)認識到，存在對于容易地記錄在視聽時吸引觀看者的興趣的成像的 運動圖像的需要。
根據(jù)本發(fā)明的實施例，成像設備包括布局輔助圖像存儲單元，其被配 置以存儲多個布局輔助圖像，其表示要在成像范圍內布置對象的位置和大??； 成像單元，其被配置以執(zhí)行主體的成像以產(chǎn)生成像的圖像；對象檢測單元， 其被配置以從成像的圖像檢測對象，并且檢測成像的圖像內的對象的位置和 大?。灰约帮@示控制單元，其被配置以通過覆蓋在成像的圖像上的方式，來 顯示作為存儲在布局輔助圖像存儲單元中的多個布局輔助圖像之一的布局輔 助圖像，并且在作為由顯示的布局輔助圖像確定的對象的位置與所述成像的 圖像內的所檢測的對象的位置之間的差值的位置差值、以及作為由顯示的布 局輔助圖像確定的對象的大小與成像的圖像內所檢測的對象的大小之間的差 值的大小差值均在預定范圍內的情況下，以覆蓋在成像的圖像上的方式來顯 示除了存儲在布局輔助圖像存儲單元中的多個布局輔助圖像中的所顯示的布 局輔助圖像之外的布局輔助圖像。因此，提供了這樣的操作，其中，以覆蓋 在成像的圖像上的方式來顯示作為多個布局輔助圖像之一的布局輔助圖像， 并且在位置差值和大小差值兩者均變?yōu)樵陬A定范圍內的情況下，以覆蓋在成 像的圖像上的方式，來顯示除了多個布局輔助圖像中的所顯示的布局輔助圖 像之外的布局輔助圖像。
每次位置差值和大小差值均在預定范圍內時，顯示控制單元可以才艮據(jù)預 定次序而依次顯示存儲在布局輔助圖像存儲單元中的多個布局輔助圖像。因 此，提供了這樣的操作，其中，在位置差值和大小差值兩者均變?yōu)樵陬A定范 圍內的情況下，根據(jù)預定次序而依次顯示多個布局輔助圖像。
成像設備可以還包括特定對象識別單元，其被配置以識別所檢測的對 象是否為特定對象；其中，在涉及所顯示的布局輔助圖像和所識別的特定對象的、位置差值和大小差值均在預定范圍內的情況下，顯示控制單元以覆蓋 在成像的圖像上的方式來顯示除了所顯示的布局輔助圖像之外的布局輔助圖 像。因此，提供了這樣的操作，其中，在涉及所識別的特定對象的、位置差 值和大小差值兩者均變?yōu)樵陬A定范圍內的情況下，以覆蓋在成像的圖像上的 方式來顯示另 一布局輔助圖像。
成像設備可以還包括特定對象標記(marker)產(chǎn)生單元，其^皮配置以 基于成像的圖像內的所識別的特定對象的位置和大小而產(chǎn)生將被添加至所識 別的特定對象的特定對象標記；其中，顯示控制單元以覆蓋在成像的圖像上 的方式來顯示作為存儲在布局輔助圖像存儲單元中的多個布局輔助圖像之一 的布局輔助圖像、以及所產(chǎn)生的特定對象標記。因此，提供了這樣的操作， 其中，產(chǎn)生將被添加至特定對象的特定對象標記，以覆蓋在成像的圖像上的 方式來顯示作為多個布局輔助圖像之一的布局輔助圖像、以及所產(chǎn)生的特定 對象標記。
成像設備可以還包括特定對象識別信息存儲單元，其被配置以對于每 個對象存儲用于識別對象的多個特定對象識別信息；以及操作接受單元，其 被配置以接受用于指定其中存儲了特定對象識別信息的多個對象中的至少一 個對象的指定梯:作；其中，特定對象識別單元通過采用涉及存儲在特定對象 識別信息存儲單元中的多個特定對象識別信息中所指定的對象的特定對象識 別信息，識別所檢測的對象是否為特定對象。因此，提供了這樣的操作，其 中，采用涉及多個特定對象識別信息中所指定的對象的特定對象識別信息來 識別所檢測的對象是否為特定對象。
成像設備可以還包括差值計算單元，其被配置以計算位置差值和大小 差值；以及操作輔助圖像產(chǎn)生單元，其被配置以產(chǎn)生操作輔助圖像，用于基 于位置差值和大小差值而修改成像的圖像內所檢測的對象的位置和大小中的 至少一個；其中，顯示控制單元以覆蓋在成像的圖像上的方式來顯示存儲在 布局輔助圖像存儲單元中的多個布局輔助圖像中的布局輔助圖像、以及所產(chǎn) 生的操作輔助圖像。因此，提供了這樣的操作，其中，產(chǎn)生操作輔助圖像， 以覆蓋在成像的圖像上的方式來顯示作為多個布局輔助圖像之一 的布局輔助 圖像、以及所產(chǎn)生的操作輔助圖像。
差值計算單元可以計算水平位置差值、以及垂直位置差值，作為位置差
值，其中，水平位置差值是由所顯示的布局輔助圖像確定的對象的水平方向的位置與成像的圖像內所檢測的對象的水平方向的位置之間的差值，以及垂 直位置差值是由所顯示的布局輔助圖像確定的對象的垂直方向的位置與成像
的圖像內所檢測的對象的垂直方向的位置之間的差值；以及，操作輔助圖像 產(chǎn)生單元可以在水平位置差值超過水平閾值的情況下，產(chǎn)生作為用于修改成 像的圖像內所檢測的對象的水平方向的位置的操作輔助圖像的水平方向移動 指示圖像，并且在垂直位置差值超過垂直位置閾值的情況下，產(chǎn)生作為用于 修改成像的圖像內所檢測的對象的垂直方向的位置的操作輔助圖像的垂直方 向移動指示圖像，并且，在大小差值超過大小閾值的情況下，產(chǎn)生作為用于
修改成像的圖像內所檢測的對象的大小的操作輔助圖像的變焦指示圖像。因 此，提供了這樣的操作，其中，在水平位置差值超過水平位置閾值的情況下， 產(chǎn)生水平方向移動指示圖像，以及在垂直位置差值超過垂直位置閾值的情況 下，產(chǎn)生垂直方向移動執(zhí)行圖像，以及在大小差值超過大小閾值的情況下， 產(chǎn)生變焦指示圖像。
顯示控制單元可以在水平位置差值超過水平位置閾值的情況下，或者在 垂直位置差值超過垂直位置閾值的情況下，不顯示變焦指示圖像；以及在水 平位置差值不超過水平位置閾值、且垂直位置差值不超過垂直位置閣值、以 及大小差值超過大小閾值的情況下，顯示變焦指示圖像。因此，提供了這樣 的操作，其中，在水平位置差值超過水平位置闊值的情況下，或者在垂直位 置差值超過垂直位置閾值的情況下，不顯示變焦指示圖像；以及在水平位置 差值不超過水平位置閾值、且垂直位置差值不超過水平位置閾值的情況下， 以及在大小差值超過大小閾值的情況下，顯示變焦指示圖像。
成像設備可以還包括變焦鏡頭，其被配置以調節(jié)焦距；以及變焦鏡頭 控制單元，其被配置以執(zhí)行用于驅動變焦鏡頭的控制，以便基于大小差值而 修改成像的圖像內所檢測的對象的大小。因此，提供了這樣的操作，其中， 執(zhí)行用于驅動變焦鏡頭的控制，以修改成像的圖像內所檢測的對象的大小。
顯示控制單元可以在由變焦鏡頭控制單元驅動變焦鏡頭的情況下，以覆 蓋在成像的圖像上的方式來顯示關于其要旨的操作輔助圖像。因此，提供了 這樣的操作，其中，在驅動變焦鏡頭的情況下，以覆蓋在成像的圖像上的方 式來顯示關于其要旨的操作輔助圖像。
變焦鏡頭控制單元可以在通過驅動變焦鏡頭來放大在成像的圖像中包括 的主體的情況下，僅當將所檢測的對象被包括在放大之后的成像的圖像中時，才執(zhí)行用于驅動變焦鏡頭的控制。因此，提供了這樣的操作，其中，在通過 驅動變焦鏡頭來放大在成像的圖像中包括的主體的情況下，僅當將所檢測的 對象被包括在放大之后的成像的圖像中時，才執(zhí)行用于驅動變焦鏡頭的控制。 根據(jù)上述配置，可以具有的優(yōu)勢在于，可容易地記錄將在視聽的時間吸 引觀看者興趣的成像的運動圖像。


圖1是圖示根據(jù)本發(fā)明的實施例的成像設備的功能配置示例的框圖； 圖2A和2B是示意性地圖示根據(jù)實施例的、通過用戶采用存儲在特定面
部識別辭典(dictionary)存儲單元中的特定面部識別辭典所指定的特定面部
的情況的圖示；
圖3是示意性地圖示根據(jù)實施例的、存儲在輔助圖像管理表存儲單元中 的內容的圖示；
圖4A至4C是圖示根據(jù)實施例的、包括存儲在輔助圖像管理表存儲單元 中的布局輔助圖像的模板圖像的示例的圖示；
圖5是示意性地圖示根據(jù)實施例的、保持在輔助圖像顯示信息保持單元 中的內容的圖示；
圖6 A和6B是圖示根據(jù)實施例的、在設置顯示單元的輔助圖像顯示模式 時的顯示示例的圖示；
圖7A和7B是示意性地圖示用于顯示操作輔助圖像的差值計算方法、以 及圖示根據(jù)實施例的顯示單元的操作輔助圖像的顯示示例的圖示；
圖8A和8B是圖示根據(jù)實施例的、涉及通過用戶對顯示單元的操作的而 進行的操作輔助圖像的轉變(transition)的顯示示例的圖示；
圖9A和9B是圖示根據(jù)實施例的、在取消顯示單元的輔助圖像顯示模式 時的顯示示例的圖示；
圖IOA和IOB是圖示根據(jù)實施例的、在切換顯示單元的布局輔助圖像時 的顯示示例的圖示；
圖IIA和IIB是圖示根據(jù)實施例的、涉及顯示單元的操作輔助圖像顯示 的轉變的顯示示例的圖示；
圖12A和12B是圖示沖艮據(jù)實施例的、涉及通過用戶對顯示單元的才喿作而 進行的操作輔助圖像的刪除的顯示示例的圖示；圖13A和13B是圖示根據(jù)實施例的、涉及顯示單元的操作輔助圖像顯示 的轉變的顯示示例的圖示；
圖14A和14B是圖示根據(jù)實施例的、在切換顯示單元的布局輔助圖像時 的顯示示例的圖示；
圖15是圖示根據(jù)實施例的、利用成像設備的輔助圖像顯示處理的處理過 程的流程圖16是圖示根據(jù)實施例的、利用成像設備的輔助圖像顯示處理的處理過 程中的操作輔助圖像處理過程的流程圖17是圖示根據(jù)實施例的、利用成像設備的輔助圖像顯示處理的處理過 程中的布局輔助圖像更新處理過程的流程圖18A和18B是圖示根據(jù)實施例的、涉及顯示單元的操作輔助圖像顯示 的轉變的顯示示例的圖示；
圖19A和19B是圖示根據(jù)實施例的、涉及通過用戶對顯示單元的操作而 進行的操作輔助圖像的刪除的顯示示例的圖示；
圖20是圖示根據(jù)實施例的、利用成像設備的輔助圖像顯示處理的處理過 程中的操作輔助圖像顯示處理過程的流程圖21是圖示根據(jù)本發(fā)明的實施例的、成傳j殳備的功能配置示例的框圖22A和22B是圖示根據(jù)實施例的、顯示在顯示單元上的成像的圖像的 圖示；
圖23A和23B是圖示根據(jù)實施例的、涉及顯示單元的操作輔助圖像顯示 的轉變的顯示示例的圖示；
圖24A和24B是圖示根據(jù)實施例的、涉及通過用戶對顯示單元的操作而 進行的操作輔助圖像的刪除的顯示示例的圖示；
圖25是圖示根據(jù)實施例的、利用成像設備的輔助圖像顯示處理的處理過 程中的操作輔助圖像顯示處理過程的流程圖26是圖示根據(jù)實施例的、利用成像設備的輔助圖像顯示處理的處理過 程中的變焦鏡頭移動處理過程的流程圖；以及
圖27A和27B是圖示根據(jù)實施例的顯示單元的顯示示例的圖示。
具體實施例方式
接下來，將參考附圖，詳細描述本發(fā)明的實施例。圖1是圖示根據(jù)本發(fā)明的實施例的成像設備100的功能配置示例的框圖。
該成像設備包括光學系統(tǒng)110、變焦鏡頭控制單元112、變焦鏡頭驅動單元 113、成像單元120、面部檢測單元130、特定面部識別單元140、特定面部 識別辭典存儲單元141、差值計算單元150、操作輔助圖像產(chǎn)生單元160、特 定面部標記產(chǎn)生單元165、輔助圖像顯示信息保持單元170、顯示控制單元 180、操作接受單元190、輔助圖像管理表存儲單元200、以及顯示單元300。 例如，可以由包括面部檢測功能和變焦功能的4聶錄才幾(camcorder: camera and recorder (相機和記錄器))實現(xiàn)成像設備100。
光學系統(tǒng)110被配置有用于匯聚來自主體的光的多個鏡頭(變焦鏡頭 111、聚焦鏡頭(未示出)等)，并且，將從主體輸入的光通過這些鏡頭和光 圈(iris)(未示出)提供至成像單元120。變焦鏡頭111是用于調節(jié)焦距的鏡 頭，其根據(jù)變焦鏡頭驅動單元113的驅動而向光軸方向移動。也就是說，由 變焦鏡頭111實現(xiàn)了變焦功能。
變焦鏡頭控制單元112基于由操作接受單元190接受的變焦操作的內容， 產(chǎn)生用于驅動變焦鏡頭驅動單元113的驅動控制信號，以輸出此驅動控制信 號至變焦鏡頭驅動單元113。
變焦鏡頭驅動單元113用于根據(jù)從變焦鏡頭控制單元112輸出的驅動控 制信號來將變焦鏡頭111向光軸方向移動。
成像單元120轉換來自主體的入射光，以根據(jù)預定的成像參數(shù)而產(chǎn)生成 像的圖像，并且，輸出所產(chǎn)生的成像的圖像至面部檢測單元130和顯示控制 單元180。也就是說，利用成像單元120，在成像器件(未示出)的成像面上 形成通過光學系統(tǒng)IIO輸入的主體的光學圖像，通過信號處理單元(未示出)， 使對應于由此形成的光學圖像的成像的信號經(jīng)受預定信號處理，從而產(chǎn)生成 像的圖像。
面部檢測單元130檢測包括在從成像單元120輸出的成像的圖像中的人 的面部，并且，輸出涉及所檢測的面部的面部檢測信息至特定面部識別單元 140。對于面部檢測方法，例如，可以采用通過記錄面部亮度分布信息的)與 真實的面部之間的匹配的面部檢測方法(例如，見日本未審查專利申請出版 物No. 2004-133637)、基于包含在成像的圖像中的膚色部分、人類面部的特 征量等的面部檢測方法。并且，面部檢測信息包括面部圖像，其是包括檢 測到的面部的其外圍圖像(例如，圖2B中所示的面部圖像401至403 );以及成像^/圖像上的檢測到的面部的位置和大小。例如，可以將成像的圖像上 的檢測的面部的位置設置為成像的圖像上的面部圖像的中心位置，并且，例 如，可以將成像的圖像上的檢測的面部的大小設置為成像的圖像上的面部圖 像的水平方向和垂直方向上的長度。利用水平方向和垂直方向上的長度來確 定斗全測的面部的面積。
特定面部識別單元140釆用存儲在特定面部識別辭典存儲單元141中的 特定面部識別辭典，以識別由面部4全測單元130 ^r測的面部是否為由用戶指 定的特定人的面部(特定面部)。并且，在識別出由面部檢測單元13(M全測的 面部是特定面部的情況下，特定面部識別單元140將成像的圖像上的此特定 面部的位置和大小輸出至差值計算單元150和特定面部標記產(chǎn)生單元165。 這里，特定面部識別單元140采用對應于保持在輔助圖像顯示信息保持單元 170的辭典編號171 (圖5中所示)處的辭典編號的、特定面部識別辭典，以 執(zhí)行識別處理。
對于每個特定面部，特定面部識別辭典存儲單元141存儲由特定面部識 別單元140用于特定面部識別處理的多個特定面部識別辭典，并且向特定面 部識別單元140提供所存儲的特定識別辭典。這里，對于特定面部識別方法， 例如，可以釆用基于從特定的人的面部圖像提取的特征量的識別方法。具體 地，將從特定的人面部圖像提取的特征量預先存儲在特定面部識別辭典存儲 單元141中，作為特定面部識別辭典。隨后，從由面部檢測單元130檢測的 面部圖像提取特征量，并且，將此提取的特征量與包括在特定面部識別辭典 中的特征量相比較，從而計算這些特征量的相似度。隨后，在所計算的相似 度超過閾值的情況下，確定其面部圖像為特定面部。并且，對于特定面部識 別方法，例如，除了采用面部圖像的特征量的識別方法之外，還可以采用通 過識別器來執(zhí)行識別處理的識別方法等，該識別器利用作為確定對象的面部 圖像上的兩點的亮度值之間的差值。
輔助圖像管理表存儲單元200存儲用于在顯示單元300上顯示布局輔助 圖像和操作輔助圖像的每段信息，并且向差值計算單元150、操作輔助圖像 產(chǎn)生單元160和顯示控制單元180提供所存儲的每4史信息。這里，布局輔助 圖像是表示要在成像范圍內布置由用戶指定的特定面部的位置和大小的人類 模型圖像，以及例如，顯示了圖4A至4C中所示的布局輔助圖像222、 225 和228。并且，操作輔助圖像是用于修改由用戶指定的特定面部的位置和大小中的至少一個的圖像，以及例如，顯示了圖7B中所示的、左移指示圖像 441、上移指示圖像442、以及變焦指示圖像443。注意，關于輔助圖像管理 表存儲單元200，將參考圖3和4進行詳細描述。
差值計算單元150比較由特定面部識別單元140識別的特定面部的面部 圖像、與利用存儲在輔助面部管理表存儲單元200中存儲的布局輔助圖像確 定的面部區(qū)域，以便計算涉及位置和大小的差值，并且，輸出所計算的相應 差值至操作輔助圖像產(chǎn)生單元160。具體地，差值計算單元150比較從特定 面部識別單元140輸出的成像的圖像上的特定面部的面部圖像的位置和大 小、與利用存儲在輔助圖像管理表存儲單元200中的布局輔助圖像確定的面 部區(qū)域的位置和大小，從而計算成像的圖像上的、垂直方向上的位置的差值、 水平方向上的位置的差值、以及大小的差值中的每一個。注意，將參考圖7A, 詳細描述這些差值的計算方法。
操作輔助圖像產(chǎn)生單元160采用存儲在輔助圖像管理表存儲單元200中 的相應的閾值，以便基于從差值計算單元150輸出的相應的差值而產(chǎn)生操作 輔助圖像，并且輸出所產(chǎn)生的操作輔助圖像至顯示控制單元180。并且，在 從差值計算單元150輸出的差值等于或低于存儲在輔助圖像管理表存儲單元 200中的閾值的情況下，操作輔助圖像產(chǎn)生單元160不產(chǎn)生對應于操作輔助 圖像的差值的操作輔助圖像，并且向顯示控制單元180輸出其差值等于或 低于閾值。注意，將參考圖7B,詳細描述操作輔助圖像的產(chǎn)生。
特定面部標記產(chǎn)生單元165基于從特定面部識別單元140輸出的成像的 圖像上的特定面部的面部圖像的位置和大小，產(chǎn)生指示成像的圖像內的特定 面部的位置的特定面部標記，并且輸出所產(chǎn)生的特定面部標記至顯示控制單 元180。
輔助圖像顯示信息保持單元170依次保持用于在顯示單元300上顯示布 局輔助圖像或操作輔助圖像的每段信息，并且向特定面部識別單元140、差 值計算單元150和顯示控制單元180提供所保持的每段信息。并且，由顯示 控制單元180依次重寫在輔助圖像顯示信息保持單元170保持的每段信息。 注意，關于輔助圖像顯示信息保持單元170,將參考圖5而進行詳細描述。
顯示控制單元180在顯示單元300上依次顯示從成像單元120輸出的成 像的圖像。并且，顯示控制單元180根據(jù)保持在輔助圖像顯示信息保持單元 170處的每段信息，以覆蓋在成像的圖像上的方式，依次顯示存儲在輔助圖像管理表存儲單元200中的布局輔助圖像。此外，顯示控制單元180以覆蓋 在成像的圖像上的方式，顯示從操作輔助圖像產(chǎn)生單元160輸出的操作輔助 圖像、以及從特定面部標記產(chǎn)生單元165輸出的特定面部標記。顯示控制單 元180根據(jù)來自操作接受單元190的操作內容、或顯示單元300的顯示狀態(tài)， 重寫輔助圖像顯示信息保持單元170的內容。
操作接受單元190是這樣的操作接受單元，其接受由用戶操作的操作內 容，并向變焦鏡頭控制單元112和顯示控制單元180輸出對應于所接受的操 作內容的信號。對于操作接受單元190,在成像設備100中提供操作部件， 如用于執(zhí)行變焦操作的W (廣(wide ))按鈕和T (遠(tele ))按鈕、用于指 定特定面部的特定面部指定按鈕、用于執(zhí)行設置或取消允許記錄運動圖像的 運動圖像記錄模式的運動圖像記錄模式設置/取消按鈕、用于執(zhí)行設置或取消 用于在運動圖像記錄模式顯示輔助圖像的輔助圖像顯示模式的輔助圖像顯示 模式設置/取消按鈕，等等。這里，在按下W按鈕的狀態(tài)下，基于變焦鏡頭 控制單元112的控制，變焦鏡頭111向廣端側(廣角側)移動；以及，在按 下T按鈕的狀態(tài)下，基于變焦鏡頭控制單元112的控制，變焦鏡頭111向遠 端側(遠攝側)移動。
顯示單元300基于顯示控制單元180的控制，顯示例如成像的圖像等的 每個圖像。例如，可以通過LCD (液晶顯示器)或EVF (電子取景器)來實 現(xiàn)顯示單元300。注意，可以將操作接受單元190的一部分或整體配置為 與顯示單元300集成，作為觸摸板。
圖2A和2B是示意性地圖示采用存儲在根據(jù)本發(fā)明的實施例的特定面部 識別辭典存儲單元141中的特定面部識別辭典來識別由用戶指定的特定面部 的情況的圖示。圖2A圖示了存儲在特定面部識別辭典存儲單元141中的特 定面部識別辭典，以及圖2B圖示了由成像單元120產(chǎn)生的成像的圖像400。 存儲在特定面部識別辭典存儲單元141中的相應的特定面部識別辭典是確定 數(shù)據(jù)，其用于針對于由面部^r測單元130才企測的面部圖像而由特定面部識別 單元140執(zhí)行特定面部識別處理，以及圖2A示意性地圖示了對應于作為特 定面部識別辭典的每個特定面部識別辭典的面部。并且，圖2A圖示了作為 示例的、將對應于三個人的面部的特定面部識別辭典存儲在特定面部識別辭 典存儲單元141中的情況。
如圖2A中所示的，以與特定面部識別辭典相關聯(lián)的方式，將用于識別特定面部識別辭典的辭典編號存儲在特定面部識別辭典存儲單元141中。例
如，附加"001"、 "002"和"003"作為辭典編號，并且存儲它們。這里，在 由特定面部識別單元140執(zhí)行特定面部識別處理的情況下，通過采用涉及由 用戶從存儲在特定面部識別辭典存儲單元141中的多個特定面部識別辭典中 指定的至少一個特定面部的特定面部識別辭典，來執(zhí)行特定面部識別處理。 具體地，在由操作接受單元190接受用于從存儲在特定面部識別辭典存儲單 元141中的多個特定面部識別辭典指定涉及至少一個特定面部的特定面部識 別辭典的指定操作的情況下，在輔助圖像顯示信息保持單元170的辭典編號 171中記錄對應于所指定的特定面部識別辭典的辭典編號(圖5中所示)。隨 后，在由特定面部識別單元140執(zhí)行特定面部識別處理的情況下，通過采用 與記錄在輔助圖像顯示信息保持單元170的辭典編號171中的辭典編號相對 應的特定面部識別辭典，執(zhí)行特定面部識別處理。這里，將針對于作為示例 的、在輔助圖像顯示信息保持單元170的辭典編號171中記錄"001"的情況 進行描述。
圖2B中所示的成像的圖像400包括三個人411至413。因此，由面部檢 測單元130檢測人411至413的面部，并且，將面部圖像401至403、以及 它們的位置和大小輸出至特定面部識別單元140。隨后，特定面部識別單元 140采用對應于由用戶指定的特定面部的辭典編號"001"的特定面部識別辭 典，以便關于面部圖像301至303而執(zhí)行特定面部識別處理，并且，通過此 特定面部識別處理來識別由用戶指定的特定面部。例如，如圖2B中所示的， 識別通常與表示對應于辭典編號"001"的特定面部識別辭典的特定面部相同 的面部圖像401，作為特定面部。注意，可以進行這樣的布置，其中，預先 指定多個特定面部，并識別所述多個特定面部中的至少一個。
圖3是示意性地圖示根據(jù)本發(fā)明的實施例的、存儲在輔助圖像管理表存 儲單元200中的內容的圖示。輔助圖像管理表存儲單元200對于每個布局輔 助圖像，存儲管理編號210、布局輔助圖像信息220、垂直移動指示圖像顯示 閾值230、水平移動指示圖像顯示閾值240、變焦指示圖像顯示閾值250、以 及等待時間計數(shù)器閾值260。注意，依據(jù)本發(fā)明的實施例，將關于采用三種 類型的布局輔助圖^f象的示例進行描述。
管理編號210是將添加至多個類型的布局輔助圖像的每一個的識別編 號，并且例如，所述管理編號210存儲分別與三種類型的布局輔助圖^象相對應的管理編號1至3。
布局輔助圖像信息220是用于顯示布局輔助圖像的信息，并且包括模板 圖像、面部位置、以及面部大小。模板圖像是以覆蓋在成像的圖像上的方式 在顯示單元300上顯示的布局輔助圖像的模板圖像，以及例如，以與管理編 號210的"1"至"3"相關的方式，存儲"模板圖像A"至"模板圖像C"。 注意，將參考圖4A至4C，詳細描述這些模板圖像。這里，在把成像的圖像 視為平面坐標的情況下，將等同于布局輔助圖像的面部區(qū)域的矩形的中心位 置的坐標存儲在面部位置中。此外，將等同于其面部區(qū)域的矩形的高度和寬 度存儲在面部大小中。具體地，在面部位置和面部大小中存儲由布局輔助圖 像確定的面部區(qū)域的位置和大小。
垂直移動指示圖像顯示閾值230是在作出是否顯示上移指示圖像或下移 指示圖像的確定的情況下采用的閾值，其用作用于在成像的圖像內、在垂直 方向上移動具有特定面部的人的指示符。
水平移動指示圖像顯示閾值240是在作出是否顯示左移指示圖像或右移 指示圖像的確定的情況下采用的閾值，其作為用于在成像的圖像內、在水平 方向上移動具有特定面部的人的指示符。
變焦指示圖像顯示閾值250是在作出是否顯示變焦指示圖像的確定的情 況下采用的閾值，其用作用于執(zhí)行放大或縮小成像的圖像內的具有特定面部 的人的變焦操作的指示符。注意，關于垂直移動指示圖像顯示閾值230、水 平移動指示圖像顯示閾值240、以及變焦指示圖像顯示閾值250中的每個閾 值，可以4艮據(jù)管理編號210的'T，至"3"而改變其值，或者，關于管理編 號210的"1"至"3"中的每一個，可以釆用相同的值。
等待時間計數(shù)器閾值260是在特定面部與在顯示單元300上顯示的布局 輔助圖像相符之后、改變至下個布局輔助圖像時采用的閾值。也就是說，此 閾值是指示從特定面部符合布局輔助圖像直到將所顯示的布局輔助圖像切 換至下個布局輔助圖像位置為止的等待時間的值。
圖4A至4C是圖示根據(jù)本發(fā)明的所述實施例的、包括存儲在輔助圖像管 理表存儲單元200中的布局輔助圖像的模板圖像的示例的圖示。本發(fā)明的實 施例圖示了作為示例的、用于在成像范圍的中心部分按順序逐步顯示包括在 成像的圖像中的人的特定面部的布局輔助圖像的情況。圖4A圖示了對應于 管理編號210的"1"的沖莫板圖像A221,圖4B圖示了對應于管理編號210的"2"的模板圖像B224，以及圖4C圖示了對應于管理編號210的"3"的 模板圖像C227。
模板圖像A221包括布局輔助圖像222，并且，以覆蓋在成像的圖像上的 方式，在顯示單元300上顯示此布局輔助圖像222。并且，在模板圖像A221 中所示的矩形223是等同于布局輔助圖像222的面部部分的區(qū)域，并且，在 布局輔助圖像信息220的面部位置和面部大小中存儲由此區(qū)域確定的位置和 大小。具體地，布局輔助圖^f象信息220的面部位置(XI, Yl)存儲作為矩形 223的中心位置的面部位置01,并且，布局輔助圖傳_信息220的面部大小(Hl, Wl )存儲矩形223的水平方向上的長度(寬度)Wl和垂直方向上的長度(高 度)H1。并且，模板圖像B 224內的布局輔助圖像225與矩形226之間的關 系、以及模板圖像C 227內的布局輔助圖像228與矩形229之間的關系與模 板圖像A221內的布局輔助圖像222與矩形223之間的關系相同，以及因此， 這里將省略它們的描述。這里，例如，布局輔助圖像222是要在執(zhí)行記錄以 拍攝特定人的整個身體的情況下顯示的圖像，布局輔助圖像225是要在執(zhí)行 記錄以便以半身特寫的方式拍攝特定人的情況下顯示的圖像，以及布局輔助 圖像228是要在執(zhí)行記錄以便以特寫方式拍攝特定人的面部的情況下顯示的 圖像。
圖5是示意性地圖示根據(jù)本發(fā)明的實施例的、保持在輔助圖像顯示信息 保持單元170中的內容的圖示。輔助圖像顯示信息保持單元170保持辭典編 號171、管理編號172、匹配標志173、以及等待時間計數(shù)器174。
辭典編號171是對應于從存儲在特定面部識別辭典存儲單元141中的多 個特定面部識別辭典之中的由用戶指定的特定面部識別辭典的辭典編號，以 及圖5圖示了指定對應于存儲在特定面部識別辭典存儲單元141中的辭典編 號"001"的特定面部識別辭典的情況。根據(jù)來自操作接受單元190的指定操 作，由顯示控制單元180重寫辭典編號171的內容。
管理編號172是當前從在輔助圖像管理表存儲單元200中存儲的多個管 理編號中選擇的管理編號，以及圖5圖示了當前選擇了存儲在輔助圖像管理 表存儲單元200中的管理編號'T，的情況。
匹配標志173是指示特定面部是否與對應于存儲在管理編號172中的管 理編號的布局輔助圖像(在顯示單元300上顯示的布局輔助圖像)相符的標 志。這里，特定面部與布局輔助圖像相符的情況意味著這樣的情況由差值計算單元150計算的相應差值等于或低于各自與對應于存儲在管理編號172 中的管理編號的、存儲在輔助圖像管理表存儲單元200中的垂直移動指示圖 像顯示閾值230、水平移動指示圖像顯示閾值240、以及變焦指示圖像顯示閾 值250相對應的閾值。例如，在特定面部與對應于存儲在管理編號172中的 管理編號的布局輔助圖像相符的情況下，由顯示控制單元180存儲'T，，以 及在特定面部不符合其布局輔助圖像的情況下，由顯示控制單元180存儲 "0"。注意，圖5圖示了特定面部不符合布局輔助圖像的狀態(tài)。
等待時間計數(shù)器174是指示從特定面部與對應于存儲在管理編號172中 的管理編號的布局輔助圖像相符起所經(jīng)過的時間的計數(shù)器。具體地，由顯示 控制單元180將從已經(jīng)在匹配標志173中存儲了 "1"以來所經(jīng)過的時間存儲 在等待時間計數(shù)器174中，以及，在此經(jīng)過的時間達到對應于存儲在管理編 號172中的管理編號的等待時間計數(shù)器閾值260的值的情況下，由顯示控制 單元180用下個編號重寫存儲在管理編號172中的管理編號，并且，在匹配 標志173中存儲"0"。
圖6A和6B、以及圖7B至14B是圖示才艮據(jù)本發(fā)明的實施例的顯示單元 300的顯示示例的圖示。并且，圖7A是示意性地圖示用于計算用于顯示才乘作 輔助圖像的差值的計算方法的圖示。注意，這些顯示示例是在設置運動圖像 記錄模式的情況下、在監(jiān)視狀態(tài)下或在記錄運動圖像期間的顯示示例。
圖6A圖示了在設置輔助圖像顯示^^莫式的情況下、在顯示單元300上顯 示圖2B中所示的成像的圖像400的狀態(tài)。此示例圖示了這樣的情況在由用 戶指定辭典編號"001"的特定面部識別辭典的情況下，識別人411的面部作 為特定面部，并且將特定面部標記420添加至此面部。這里，在已經(jīng)由#:作 接受單元190接受了用于設置輔助圖像顯示模式的操作輸入的情況下，如圖 6B所示，以覆蓋在成像的圖像上的方式，顯示包括在對應于存儲在輔助圖像 顯示信息保持單元170的管理編號172中的管理編號的模板圖像中的布局輔 助圖像。例如，如圖5中所示，在將'T，存儲在管理編號172中的情況下， 通過顯示控制器180，在顯示單元300上顯示包括在圖4A至4C所示的才莫才反 圖像A221中的布局輔助圖像222。
圖7A示意性地圖示了用于計算在圖6B中所示的顯示示例的情況下的布 局輔助圖像222、與特定面部的面部圖像401之間的差值的計算方法。并且， 圖7A僅圖示了圖6B中所示的顯示示例的人411和位置輔助圖像222,并且圖示了具有與圖6B中所示的成像的圖像相同的大小的范圍，作為成像范圍 430。依據(jù)本發(fā)明的實施例，作為示例，將關于采用下列參數(shù)的情況進行描述 成像的圖像上的布局輔助圖像信息220的面部位置；關于特定面部的面部圖 像的中心位置的、水平方向和垂直方向上的差值；以及用成像的圖像上的布 局輔助圖像信息220的面部大小所確定的面積、與特定面部的面部圖像的面 積之間的差值，作為布局輔助圖像與特定面部的面部圖像之間的差值。具體 地，假定取圖像范圍430的左上角為原點(0, 0)，在以水平方向為x軸、以 及垂直方向為y軸的x-y平面坐標上，特定面部的面部圖像401的中心位置 是坐標(XII, Yll),特定面部的面部圖像401的垂直方向上的長度是高度 Hll,以及其水平方向上的長度是寬度Wll。由面部檢測單元130檢測這些 值。在此情況下，布局輔助圖像222的面部位置01 (Xl， Yl)、與特定面部 的面部圖像401的中心位置坐標(Xll， Yll)之間的、垂直方向上的差值是 Jll,以及水平方向上的差值是Sll。并且，通過(Wl xHl) - ( Wll xHll ) 獲得用布局輔助圖〗象222的面部大小所確定的面積、與特定面部的面部圖 像401的面積之間的差值。因此，差值計算單元150基于特定面部的面部圖 像的位置和大小、以及用布局輔助圖像所確定的面部區(qū)域的位置和大小，來 計算相應的差值。隨后，操作輔助圖像產(chǎn)生單元160基于這些差值而產(chǎn)生操 作輔助圖像，并且，顯示控制單元180控制顯示單元300，以便以覆蓋在成 像的圖像上的方式顯示所產(chǎn)生的操作輔助圖像。
具體地，在垂直方向上的差值Jll的絕對值大于存儲在對應于管理編號 210的"1"的垂直移動指示圖像顯示閾值230中的值"J1"的情況下，產(chǎn)生 指示要移動的方向的操作輔助圖像。這里，在把布局輔助圖像222的面部位 置01 (XI, Yl)視為基準的情況下，在垂直方向上的差值Jll的絕對值大 于值"J1"的情況下，如果垂直方向上的差值Jll是正值，則產(chǎn)生上移指示 圖像，其指示對成像設備100進行向上側的傾斜(tilt),以及如果垂直方向上 的差值Jll是負值，則產(chǎn)生下移指示圖像，其指示對成像設備100進行向下 側的傾斜。例如，依據(jù)圖7A中所示的示例，垂直方向上的差值Jll是正值， 產(chǎn)生上移指示圖像442 (圖7B中所示)，其指示對成像設備100進行向上側 的傾斜。這里，根據(jù)垂直方向上的差值Jll,確定上移指示圖^象442的垂直方 向上的長度AJll。隨著差值J11變大，上移指示圖像442在垂直方向上的長 度AJ11變長。隨后，如圖7B中所示，以覆蓋在成像的圖像上的方式，在顯示單元300上顯示上移指示圖像442。這里，傾斜意味著在不改變拍攝者 的拍攝位置的狀態(tài)下，成像設備100在垂直方向上搖擺。
類似地，在水平方向上的差值Sll的絕對值大于存儲在對應于管理編號 210的"1"的水平移動指示圖像顯示閾值240中的值"SI"的情況下，產(chǎn)生 指示要移動的方向的操作輔助圖像。這里，在把布局輔助圖像222的面部位 置01 (Xl， Yl)視為基準的情況下，在水平方向上的差值Sll的絕對值大
于值"sr的情況下，如果水平方向上的差值sii是正值，則產(chǎn)生左移指示
圖像，其指示對成像設備100進行向左側的搖動(pan),以及如果水平方向 上的差值S11是負值，則產(chǎn)生右移指示圖像，其指示對成像設備IOO進行向 右側的搖動。例如，依據(jù)圖7A中所示的示例，水平方向上的差值Sll是正 值，產(chǎn)生左移指示圖像442 (圖7B中所示)，其指示對成像設備100進行向 左側的搖動。這里，根據(jù)水平方向上的差值Sll，確定左移指示圖像441的 水平方向上的長度ASll。隨后，如圖7B中所示的，以覆蓋在成像的圖像上 的方式，在顯示單元300上顯示左移指示圖像441。這里，搖動意味著在 不改變拍攝者的拍攝位置的狀態(tài)下，成像設備IOO在水平方向上搖擺。
類似地，在用布局輔助圖像222的面部大小所確定的面積、與特定面部 的面部401的面積之間的差值的絕對值大于存儲在對應于管理編號210的'T，
的變焦指示圖像顯示閾值250中的值"zr的情況下，產(chǎn)生指示執(zhí)行變焦操
作的操作量的操作輔助圖像。這里，在把由布局輔助圖像222的面部大小(Hl,
wi)確定的面積視為基準的情況下，在面積的差值的絕對值大于值"zr的
情況下，如果其面積的差值是正值，則產(chǎn)生指示執(zhí)行變焦放大(zoomup)操 作(放大操作)的變焦指示圖像，以及，如果其面積的差值是負值，則產(chǎn)生 指示執(zhí)行變焦縮小(zoom down)操作(縮小操作)的變焦指示圖像。例如， 依據(jù)圖7A中所示的示例，其面積的差值是正值，產(chǎn)生變焦指示圖像443 (圖 7B中所示)，其指示執(zhí)行變焦放大操作(放大操作)。這里，根據(jù)其面積的差 值，確定變焦指示圖像443的垂直方向上的長度HWll。具體地，隨著其面 積的差值變大，變焦指示圖像443的垂直方向上的長度HW變長。隨后，如 圖7B中所示，以覆蓋在成像的圖像上的方式，在顯示單元300上顯示變焦指 示圖像443。注意，圖7B圖示了示例，其中，將左移指示圖像441布置在布 局輔助圖像222的左側，將上移指示圖像442布置在布局輔助圖像222的上 側，并且，將變焦指示圖像443布置在布局輔助圖像222的右側，但是，可以采用另一布局。例如，可以將操作輔助圖像布置在未>^測到面部的區(qū)域中。 并且，此示例圖示了根據(jù)差值而改變操作輔助圖像的長度的情況，但是，例
如，可以通過根據(jù)差值而改變操作輔助圖像的粗細度度(heaviness)或透明 度(transmittance)等，向用戶通知操作量。
圖8A圖示了在根據(jù)圖7B中所述的左移指示圖像441、由用戶對成像設 備100進行向左側的搖動之后的顯示示例。如圖8A中所示，在水平方向上 的差值Sll的絕對值達到存儲在對應于管理編號210的"1"的水平移動指示 圖像顯示閾值240中的值"S1"的范圍內的情況下，刪除左移指示圖像441。 這里，例如，在由用戶對成像設備100進行向左側的搖動時中斷搖動操作的 情況下，在水平方向上的差值Sll的絕對值大于值"S1"的情況下，根據(jù)水 平方向上的差值Sll，減小并顯示左移指示圖像441的長度。注意，依據(jù)圖 8A中所示的示例，關于垂直方向上的差值和面積(大小)的差值，不存在變 化，這樣，與圖7B相似，繼續(xù)顯示上移指示圖像442和變焦指示圖像443。
圖8B圖示了在根據(jù)圖8A中所述的上移指示圖像442、由用戶對成像設 備IOO進行向上側的傾斜之后的顯示示例。如圖8B中所示，在垂直方向上的 差值Jll的絕對值達到存儲在對應于管理編號210的'T'的垂直移動指示圖 像顯示閾值230中的值"J1'，的范圍內的情況下，刪除上移指示圖像442。這 里，例如，在由用戶對成像設備100進行向上側的傾斜時停止傾斜操作的情 況下，在垂直方向上的差值Jll的絕對值大于值"J1"的情況下，才艮據(jù)垂直 方向上的差值Jll，減小并顯示上移指示圖像442的長度。注意，依據(jù)圖8B 中所示的示例，關于面積的差值，不存在變化，這樣，與圖8A相似，繼續(xù) 顯示變焦指示圖像443。
圖9A圖示了在根據(jù)圖8B中所示的變焦指示圖像443、由用戶從操作接 受單元190執(zhí)行變焦放大才喿作之后的顯示示例。如圖9A中所示，在面積的 差值的絕對值達到存儲在對應于管理編號210的"1"的變焦指示圖像顯示閾 值250中的值"zr的范圍內的情況下，刪除變焦指示圖像443。這里，例 如，在由用戶從操作接受單元190執(zhí)行變焦放大操作時停止變焦放大操作的 情況下，以及在面積的絕對值大于值"Z1"的情況下，根據(jù)面積的差值，減 小并顯示變焦指示圖像443的長度。因此，依據(jù)圖9A中所示的示例，垂直 方向和水平方向上的、以及大小的相應差值達到對應于管理編號210的"1" 的相應閾值的范圍內，這樣，刪除左移指示圖像441、上移指示圖像442、以及變焦指示圖像443的全部。
圖9B圖示了在圖9A中所示的顯示狀態(tài)下的、由操作接受單元190接受 用于取消輔助圖像顯示模式的操作輸入之后的顯示示例。因此，在已經(jīng)接受 了用于取消輔助圖像顯示模式的操作輸入的情況下，刪除布局輔助圖像222。 注意，在顯示例如左移指示圖像441、上移指示圖像442、變焦指示圖像443 等的操作輔助圖像的情況下，也刪除這些操作輔助圖像。因此，在以用戶偏
好的方式布置特定面部的情況下，可以通過執(zhí)行用于取消輔助圖像顯示模式 的操作輸入，僅顯示成像的圖像。
圖IOB圖示了在圖IOA所示的顯示狀態(tài)下、在沒有用于取消輔助圖像顯 示模式的操作輸入且經(jīng)過了特定時間段(圖3中所示的等待時間計數(shù)器闊值 260的"T1")之后的顯示示例。注意，圖10A中所示的顯示示例與圖9A中 所示的顯示示例相同。在如圖10A中所示、自從符合布局輔助圖像222的面 部區(qū)域的特定面部起、已經(jīng)經(jīng)過了存儲在對應于管理編號210的"1"的等待 時間計數(shù)器閾值260中的時間"TT，的情況下，刪除布局輔助圖像222,并 且，以覆蓋在成像的圖像上的方式，在顯示單元300上顯示包括在模板圖像 B224中的布局輔助圖像225,其中，所述模板圖像B 224被存儲在對應于管 理編號210的"2"的布局輔助圖像信息220的模板圖像中。具體地，在自從 符合布局輔助圖像的面部區(qū)域的特定面部起、已經(jīng)經(jīng)過了確定的時間段的情 況下，才艮據(jù)管理編號210的順序，切換并顯示布局輔助圖^f象。隨后，計算切 換之后的布局輔助圖像、與特定面部之間的相應的差值，并且，基于相應的 差值而顯示操作輔助圖像。注意，在自從符合布局輔助圖像的面部區(qū)域的特 定面部起、已經(jīng)經(jīng)過了確定的時間段的情況下，在正在記錄運動圖像的條件 下，可以切換布局輔助圖像。
圖11A圖示了基于切換之后的布局輔助圖像、與特定面部之間的相應的 差值而產(chǎn)生的操作輔助圖像的顯示示例。圖11A中所示的顯示示例圖示了顯 示變焦指令圖示451作為操作輔助圖像的情況。這里，依據(jù)以與圖7A中所 示的計算方法相同的方式計算的差值，確定變焦指示圖像451的長度HW21。 并且，依據(jù)圖11A中所示的顯示示例，垂直方向和水平方向上的差值均不超 過閾值，這樣，不顯示用于在垂直方向和水平方向上移動的操作輔助圖像。 這里，例如，在具有特定面部的人411在成像的圖像上向左移動的情況下， 以及在水平方向上的差值的絕對值變得大于存儲在對應于管理編號210的"2"的水平移動指示圖像顯示閾值240中的值"S2"的情況下，如圖11B 中所示，顯示左移指示圖像452。注意，根據(jù)水平方向上的差值而確定左移 指示圖像452的長度AS21。并且，關于通過用戶在垂直/水平方向上移動成 像設備100的情況等，計算相應的差值，并且，基于這些相應的差值而顯示 操作輔助圖像。
圖12A圖示了成像設備100根據(jù)圖11B中所示的左移指示圖像452而經(jīng) 受向左側的搖動之后的顯示示例。如圖12A中所示，在水平方向上的差值的 絕對值達到存儲在對應于管理編號210的"2"的水平移動指示圖像顯示閾值 240中的值"S2"的范圍內的情況下，刪除左移指示圖像452。注意，依據(jù)圖 12A中所示的示例，關于面積的差值，不存在變化，這樣，類似于圖IIB， 繼續(xù)顯示變焦指示圖像451。
圖12B圖示了根據(jù)圖12A中所示的變焦指示圖像451、由用戶從操作接 受單元190執(zhí)行變焦;改大操作之后的顯示示例。如圖12B中所示，在面積的 差值的絕對值達到存儲在對應于管理編號210的"2"的變焦指示圖像顯示閾 值250中的值"Z2"的范圍內的情況下，刪除變焦指示圖像451。因此，依 據(jù)圖12B中所示的示例，垂直和水平方向上的、以及大小的相應的差值達到 對應于管理編號210的"2"的相應的閾值的范圍內，這樣，刪除左移指示圖 像、上移指示圖像、以及變焦指示圖像的全部。
圖13A圖示了在圖12B所示的顯示狀態(tài)下、在沒有用于取消輔助圖像顯 示模式的操作輸入且經(jīng)過了特定時間段(圖3中所示的等待時間計數(shù)器閾值 260的"T2")之后的顯示示例。如圖13A中所示，在自從符合布局輔助圖像 222的面部區(qū)域的特定面部起、已經(jīng)經(jīng)過了存儲在對應于管理編號210的"2" 的等待時間計數(shù)器閾值260中的時間"T2"的情況下，刪除布局輔助圖^f象225， 并且，以覆蓋在成像的圖像上的方式，在顯示單元300上顯示包括在模板圖 像C227中的布局輔助圖像228，其中，所述模板圖像C227被存儲在對應于 管理編號210的"3"的布局輔助圖像信息220的模板圖像中。隨后，計算切 換之后的布局輔助圖像、與特定面部之間的相應的差值，并且，基于相應的 差值而顯示操作輔助圖像。
圖13B圖示了基于切換之后的布局輔助圖^f象、與特定面部之間的相應的 差值而產(chǎn)生的操作輔助圖像的顯示示例。圖13B中所示的顯示示例圖示了顯 示變焦指示圖像461而作為操作輔助圖像的情況。這里，利用以與圖7A中所示的計算方法相同的方式計算的差值，確定變焦指示圖像461的長度 HW31。并且，依據(jù)圖13B中所示的顯示示例，垂直方向和水平方向上的差 值均不超過閾值，這樣，不顯示用于在垂直方向和水平方向上移動的操作輔 助圖像。
圖14A圖示了根據(jù)圖13B中所示的變焦指示圖像461、由用戶從操作接 受單元l卯執(zhí)行變焦放大操:作之后的顯示示例。如圖14A中所示，在面積的 差值的絕對值達到存儲在變焦指示圖像顯示閾值250中的對應于管理編號 210的"3"的值"Z3"的范圍內的情況下，刪除變焦指示圖像461。因此， 依據(jù)圖14A中所示的示例，垂直和水平方向上的、以及大小的相應的差值達 到對應于管理編號210的"1"的相應的閾值的范圍內，這樣，刪除左移指示 圖像、上移指示圖像、以及變焦指示圖像的全部。
圖14B圖示了在圖14A所示的顯示狀態(tài)下、在沒有用于取消輔助圖像顯 示模式的操作輸入且經(jīng)過確定的時間段(圖3中所示的等待時間計數(shù)器閾值 260的"T3")之后的顯示示例。如圖14B中所示，在自從符合布局輔助圖像 228的面部區(qū)域的特定面部起、已經(jīng)經(jīng)過了存儲在對應于管理編號210的"3" 的等待時間計數(shù)器閾值260中的時間"T3"的情況下，刪除布局輔助圖^f象228， 并且，以覆蓋在成像的圖像上的方式，在顯示單元300上顯示包括在模板圖 像A221中的布局輔助圖像222,其中，所述模板圖像A221被存儲在對應于 管理編號210的'T，的布局輔助圖像信息220的模板圖像中。因此，在對應 于當前顯示的布局輔助圖像的管理編號210是最低端編號"3"的情況下，執(zhí) 行切換，以便返回至管理編號210的最高端編號"1"。這里，在對應于當前 顯示的布局輔助圖像的管理編號210是最低端編號"3"的情況下，可以自動 取消輔助圖像顯示模式，而不切換至管理編號210的最高端編號"1"。
接下來，將參考附圖，關于根據(jù)本發(fā)明的實施例的成像設備100的操作 而進行描述。圖15是圖示根據(jù)本發(fā)明的實施例的、利用成像設備100的輔助 圖像顯示處理的處理過程的流程圖。依據(jù)此示例，將關于在輔助圖像顯示信 息保持單元170的辭典編號中存儲涉及由用戶指定的特定面部的特定面部識 別辭典的辭典編號的情況進行描述。并且，在此示例中，將關于由用戶設置 運動圖像記錄模式和輔助圖像顯示模式的情況進行描述。
首先，顯示控制單元180將輔助圖像顯示信息保持單元170的管理編號 172初始化為"1"(步驟S901),并且，將輔助圖像顯示信息保持單元170的匹配標志173和等待時間計數(shù)器174初始化為"0"(步驟S902)。隨后，成 像單元120產(chǎn)生成像的圖像(步驟S903 )，并且，顯示控制單元180以覆蓋 在成像的圖像上的方式，在顯示單元300上顯示存儲在輔助圖像管理表存儲 單元200中的模板圖像的布局輔助圖像，其對應于存儲在輔助圖像顯示信息 保持單元170的管理編號172中的管理編號(步驟S904)。
并且，面部檢測單元130執(zhí)行用于從由成像單元120產(chǎn)生的成像的圖像 檢測面部的面部檢測處理(步驟S905 )。隨后，在已經(jīng)從成像的圖像檢測到 面部的情況下(步驟S906)，特定面部識別單元140采用涉及所指定的特定 面部的特定面部識別辭典，以i"更關于所;險測的面部而執(zhí)^f于面部識別處理(步 驟S907)。隨后，在已經(jīng)識別所4全測的面部而作為特定面部的情況下(步驟 S908)，執(zhí)行操作輔助圖像顯示處理(步驟S920)。將參考圖16，詳細描述此 操作輔助圖像顯示處理。隨后，執(zhí)行布局輔助圖像更新處理(步驟S940)。 將參考圖17詳細描述此布局輔助圖像更新處理。
另一方面，在未從成像的圖像檢測到面部的情況下(步驟S906),或者， 在未將所檢測的面部檢測作為特定面部的情況下(步驟S908)，顯示控制單 元180刪除以覆蓋在成像的圖像上的方式顯示的相應的操作輔助圖像(步驟 S909 )。
隨后，顯示控制單元180確定是否已經(jīng)取消了運動圖像記錄模式(步驟 S910),并且，在未取消運動圖像記錄模式的情況下，確定是否已經(jīng)取消了輔 助圖像顯示模式(步驟S911 )。在已經(jīng)取消了運動圖像記錄模式的情況下(步 驟S910),或者，在已經(jīng)取消了輔助圖像顯示模式的情況下(步驟S911)，結 束輔助圖像顯示處理的操作。另一方面，在未取消運動圖像記錄模式的情況 下(步驟S910)、且在未取消輔助圖像顯示模式的情況下(步驟S911)，流程 返回至步驟S903。
圖16是圖示根據(jù)實施例的利用成像設備100的輔助圖像顯示處理的處理 過程的、操作輔助圖像處理過程(圖15中所示的步驟S920中的處理過程) 的流程圖。
首先，差值計算單元150比較對應于存儲在輔助圖像顯示信息保持單元 170的管理編號172中的管理編號的、存儲在輔助圖像管理表存儲單元200 中的面部位置和面部大小、與識別為特定面部的面部圖像的位置和大小，從 而計算水平方向和垂直方向上的差值、以及大小的差值(步驟S921)。隨后，操作輔助圖像產(chǎn)生單元160確定所計算的垂直方向上的差值是否等于或低于 對應于存儲在輔助圖像顯示信息保持單元170的管理編號172中的管理編號 的、存儲在輔助圖像管理表存儲單元200中的垂直移動指示圖像顯示閾值230 的值(步驟S922)。在所計算的垂直方向上的差值不等于或低于垂直移動指 示圖像顯示閾值230的值的情況下(步驟S922 ),操作輔助圖像產(chǎn)生單元160 基于所計算的垂直方向上的差值，產(chǎn)生上移指示圖像或下移指示圖像(步驟 S923 )。隨后，顯示控制單元180以覆蓋在成像的圖像上的方式，在顯示單元 300上顯示所產(chǎn)生的上移指示圖像或下移指示圖像(步驟S924)。另一方面， 在所計算的垂直方向上的差值等于或低于垂直移動指示圖像顯示閾值230的 值的情況下(步驟S922),顯示控制單元180刪除當前顯示的上移指示圖像 或下移指示圖像(步驟S925 )。注意，在未顯示上移指示圖像和下移指示圖 像的情況下，不執(zhí)行此刪除處理。
隨后，操作輔助圖像產(chǎn)生單元160確定所計算的水平方向上的差值是否 等于或低于對應于存儲在輔助圖像顯示信息保持單元170的管理編號172中 的管理編號的、存儲在輔助圖像管理表存儲單元200中的水平移動指示圖像 顯示閾值240的值(步驟S926)。在所計算的水平方向上的差值未等于或低 于水平移動指示圖像顯示閾值240的值的情況下(步驟S926)，操作輔助圖 像產(chǎn)生單元160基于所計算的水平方向上的差值，產(chǎn)生左移指示圖像或右移 指示圖像(步驟S927)。隨后，顯示控制單元180以覆蓋在成像的圖像上的 方式，在顯示單元300上顯示所產(chǎn)生的左移指示圖像或右移指示圖像(步驟 S928)。另一方面，在所計算的水平方向上的差值等于或低于水平移動指示圖 像顯示閾值240的值的情況下(步驟S926 ),顯示控制單元180刪除當前顯 示的左移指示圖像或右移指示圖像(步驟S929)。注意，在未顯示左移指示 圖像和右移指示圖像的情況下，不執(zhí)行此刪除處理。
隨后，操作輔助圖像產(chǎn)生單元160確定所計算的大小的差值是否等于或 低于對應于存儲在輔助圖像顯示信息保持單元170的管理編號172中的管理 編號的、存儲在輔助圖像管理表存儲單元200中的變焦指示圖像顯示閾值250 的值(步驟S930)。在所計算的大小的差值不等于或低于變焦指示圖像顯示 閾值250的值的情況下(步驟S930),操作輔助圖像產(chǎn)生單元160基于所計 算的大小的差值，產(chǎn)生變焦指示圖像(步驟S931)。隨后，顯示控制單元180 以覆蓋在成像的圖像上的方式，在顯示單元300上顯示所產(chǎn)生的變焦指示圖像(步驟S932)。另一方面，在所計算的大小的差值等于或低于變焦指示圖 像顯示閾值250的值的情況下(步驟S930),顯示控制單元180刪除當前顯 示的變焦指示圖像(步驟S933 )。注意，在未顯示變焦指示圖像的情況下， 不執(zhí)行此刪除處理。
圖17是圖示根據(jù)實施例的利用成像設備100的輔助圖像顯示處理的處理 過程的、布局輔助圖像更新處理過程(圖15中所示的步驟S940中的處理過 程)的流程圖。
首先，顯示控制單元180獲得輔助圖像顯示信息保持單元170的匹配標 志173的值(步驟S941 )，并且確定匹配標志173的值是否為"l"(步驟S942)。 在匹配標志173的值是'T，的情況下(步驟S942)，顯示控制單元180確定 運動圖像的記錄是否正在操作中(步驟S943 ),并且，在運動圖像的記錄正 在操作中的情況下，遞增輔助圖像顯示信息保持單元170的等待時間計數(shù)器 174的值(步驟S944 )，并且，確定遞增后的等待時間計數(shù)器174的值是否等 于或高于對應于存儲在輔助圖像顯示信息保持單元170的管理編號172中的 管理編號的、存儲在輔助圖像管理表存儲單元200中的等待時間計數(shù)器閾值 260的值(步驟S945 )。在等待時間計數(shù)器174的值等于或高于等待時間計數(shù) 器閾值260的值的情況下(步驟S945)，顯示控制單元180將T加到輔助 圖像顯示信息保持單元170的管理編號的值(步驟S946)，并且將輔助圖像 顯示信息保持單元170的匹配標志173和等待時間計數(shù)器174初始化為"0" (步驟S947)。這里，在輔助圖像顯示信息保持單元170的管理編號172的 值達到最大值(例如，在圖3中所示的情況下的"3")的情況下，顯示控制 單元180將'T，存儲在管理編號172的值中(步驟S946 )。
另一方面，在運動圖像的記錄不在操作中的情況下(步驟S943 ),或者， 在等待時間計數(shù)器174的值不等于或高于等待時間計數(shù)器閣值260的值的情 況下(步驟S945),流程進行至圖15中所示的步驟S910。
并且，在匹配標志173的值為"1"的情況下(步驟S942)，顯示控制單 元180基于來自操作輔助圖像產(chǎn)生單元160的輸出，確定由差值計算單元150 計算的差值中的每一個是否等于或低于對應于存儲在輔助圖像顯示信息保持 單元170的管理編號172中的管理編號的、存儲在輔助圖像管理表存儲單元 200中的垂直移動指示圖像顯示閾值230、水平移動指示圖像顯示閾值240、 以及變焦指示圖像顯示閾值250中的對應閾值(步驟S948)。在由差值計算單元150計算的差值中的每一個等于或低于對應閾值的情況下(步驟S948 )， 顯示控制單元180將輔助圖像顯示信息保持單元170的匹配標志173的值設 置為"1"(步驟S949)。另一方面，在由差值計算單元150計算的差值中的 每一個并不等于或低于對應閾值的情況下(步驟S948),流程進行至圖15中 所示的步驟S910。
依據(jù)上面提到的描述，已經(jīng)示出了示例，其中，在垂直方向和水平方向 上的差值、以及大小的差值均超過對應閾值的情況下，同時顯示用于在垂直 和水平方向上移動的操作輔助圖像、以及用于允許用戶執(zhí)行變焦操作的操作 輔助圖像。例如，可以通過諸如電視機等的查看器來視聽由成像設備100記 錄的成像的圖像。例如，近年來，在通過采用已經(jīng)得到廣泛使用的大尺寸電 視機來視聽由成像設備100記錄的成像的運動圖像的情況下，在寬屏幕上顯 示成像的圖像自身。因此，用戶在拍攝期間在成像設備100的顯示單元300 處觀看的成像的圖像與顯示在電視機上的其成像的圖像，在成像的圖像自身 的大小方面不同。因此，即使在用戶在拍攝期間在成像設備100的顯示單元 300處觀看的成像的圖像上、對象的移動量(包括變焦量)較小的情況下， 也存在在電視機上顯示的其成像的圖像上、該對象的移動量較大的情況。因 此，在對象的移動量較大的情況下，存在這樣的可能性用眼睛跟蹤寬屏幕 上的移動對象會妨礙觀看者以令人滿意的方式觀看。因此，在由成像設備IOO 記錄成像的運動圖像以方便觀看者以令人滿意的方式觀看成像的運動圖像的 情況下，以相對較慢的方式執(zhí)行水平方向上的搖動、垂直方向上的傾斜、變 焦操作等是重要的。
因此，下面將關于示例進行描述，在所述示例中，在垂直和水平方向上 的差值、以及大小的差值均超過對應閾值的情況下，僅顯示用于在垂直和水 平方向上移動的操作輔助圖像，以及僅在垂直和水平方向上的差值等于或低 于對應閾值、且大小的差值超過對應閾值的情況下，才顯示用于允許用戶執(zhí) 行變焦操作的操作輔助圖像。因此，允許用戶分別執(zhí)行水平方向上的搖動、 垂直方向上的傾斜、以及變焦才喿作，以及從而，允許用戶以相對較慢的方式 執(zhí)行操作。
圖18A至19B是圖示根據(jù)本發(fā)明的所述實施例的顯示單元300的顯示示 例的圖示。注意，圖18A中所示的顯示示例與圖6B中所示的顯示示例相同， 并且，圖19B中所示的顯示示例與圖9A中所示的顯示示例相同。如圖18A中所示，例如，以覆蓋在成像的圖像上的方式顯示包括在模板 圖像A 221中的布局輔助圖像222，其對應于保持在輔助圖像顯示信息保持單 元170的管理編號172處的管理編號"1"。隨后，如圖18B中所示，基于以 與圖7A中所示的計算方法相同的方式計算的差值，以覆蓋在成像的圖像上 的方式，在顯示單元300上顯示左移指示圖像441和上移指示圖像442。這 里，即使在以布局輔助圖像222的面部大小確定的面積、與作為特定面部的 面部圖像401的面積之間的差值的絕對值大于存儲在變焦指示圖像顯示閾值 250中的對應于管理編號210的T的值"Z1"的情況下，在在顯示單元300 上顯示左移指示圖像441和上移指示圖像442中的至少一個的情況下，也不 產(chǎn)生變焦指示圖像。
圖19A圖示了在根據(jù)圖18B中所示的左移指示圖像441和上移指示圖像 442、由用戶執(zhí)行成像設備100的、向左側的搖動和向上側的傾斜(包括成像 設備100在左上方向上的移動操作)之后的顯示示例。如圖19A中所示，在 水平方向上的差值Sll的絕對值達到對應于管理編號210的"1"的值"S1" 的范圍內、以及垂直方向上的差值Jll的絕對值也達到對應于管理編號210 的"1"的值"J1"的范圍內的情況下，刪除左移指示圖像441和上移指示圖 像442。隨后，如圖19A中所示，基于以與圖7A中所示的計算方法相同的方 式計算的差值，以覆蓋在成像的圖像上的方式，在顯示單元300上顯示變焦 指示圖像443。注意，在水平方向上的絕對值Sll或垂直方向上的絕對值Jll 在對應于管理編號210的"1"的閾值的范圍之外的情況下，不顯示變焦指示 圖像443。
圖19B圖示了根據(jù)圖19A中所示的變焦指示圖像443、由用戶從操作接 受單元190執(zhí)行變焦放大操作之后的顯示示例。因此，分別顯示用于允許用 戶移動成像設備100本體的操作輔助圖像(左移指示圖像441、上移指示圖 像442)、以及用于允許用戶在成像設備IOO內移動變焦鏡頭的操作輔助圖像 (變焦指示圖像443)，從而，可以防止同時執(zhí)行這些操作，并且，可以記錄 可以在觀看時容易地觀看的成像的運動圖像。
接下來，將參考附圖，描述根據(jù)本發(fā)明的實施例的成像設備100的圖18A 至19B中所示的操作。
圖20是圖示根據(jù)本發(fā)明的實施例的、利用成像設備100的輔助圖像顯示 處理的處理過程的、操作輔助圖像顯示處理過程(圖15中所示的步驟S920中的處理過程)的流程圖。此處理過程是對圖16中所示的處理過程的修改，
這樣，圖20中所示的步驟S921至S933是與圖16中所示的步驟S921至步驟 S933相同的處理過程，以及從而，這里將省略其描述。
在執(zhí)行涉及上移指示圖像、下移指示圖像、左移指示圖像或右移指示圖 像的顯示或刪除處理之后(步驟S921至S929),操:作輔助圖像產(chǎn)生單元160 確定所計算的垂直和水平方向上的差值是否等于或低于對應于存儲在輔助 圖像顯示信息保持單元170的管理編號172中的管理編號的、存儲在輔助圖 像管理表存儲單元200中的垂直移動指示圖像顯示閾值230和水平移動指示 圖像顯示閾值240 (步驟S951 )。
在所計算的垂直方向上的差值等于或低于垂直移動指示圖像顯示閾值
230、以及所計算的水平方向上的差值也等于或低于水平移動指示圖像顯示閾 值240的情況下(步驟S951)，流程進行至步驟S930。另一方面，在所計算 的垂直方向上的差值超過垂直移動指示圖像顯示闊值230的情況下，或者， 在所計算的水平方向上的差值超過水平移動指示圖像顯示閾值240的情況下 (步驟S951 )，顯示控制單元180刪除當前顯示的變焦指示圖像(步驟S933 )。 注意，在未顯示變焦指示圖像的情況下，不執(zhí)行此刪除處理。
到目前為止，已經(jīng)關于在顯示單元300上顯示用于指示變焦4喿作的變焦 指示圖像以提示用戶執(zhí)行變焦操作的情況進行了描述。下面將參考附圖，關 于成像設備自動執(zhí)行變焦操:作的情況詳細進行描述。
圖21是圖示根據(jù)本發(fā)明的實施例的成像設備500的功能配置示例的框 圖。這里，通過變換圖1中所示的成像裝置100的一部分來獲得成像裝置500， 這樣，除了差值計算單元501、顯示控制單元502、以及變焦鏡頭控制單元 503之外的配置與圖1中所示的成像設備IOO相同。因此，將省略除了這些 之外的詳細描述。并且，下面將以與圖1中所示的成像設備100的不同點作 為中心描述這些配置。
差值計算單元501比4交由特定面部識別單元140識別的特定面部的面部 圖像、與以存儲在輔助圖像管理表存儲單元200中的布局輔助圖像確定的面 部區(qū)域，以便計算涉及其位置和大小的差值，并且，將所計算的相應的差值 輸出至操作輔助圖像產(chǎn)生單元160和變焦鏡頭控制單元503。
顯示控制單元502將從成像單元120輸出的、成像的圖像內的特定圖像 的面部圖像的位置和大小輸出至變焦鏡頭控制單元503,并且，在從變焦鏡頭控制單元503接收到要旨是執(zhí)行變焦鏡頭的自動控制的通知時，所述顯示控制單元502以覆蓋在成像的圖像上的方式，在顯示單元300上顯示在變焦自動操作下的圖像，其是要旨是正在執(zhí)行變焦鏡頭的自動控制的操作輔助圖像。
變焦鏡頭控制單元503基于從差值計算單元501輸出的大小的差值，計算變焦放大率，基于變焦放大率，計算變焦鏡頭的移動方向和移動距離，產(chǎn)生驅動控制信號，用于在變焦鏡頭的移動方向上將變焦鏡頭移動等同于移動距離的量，以及將此驅動控制信號輸出至變焦鏡頭驅動單元113。這里，變焦鏡頭控制單元503確定所計算的變焦鏡頭的移動方向是否為廣角側，以及在變焦鏡頭的移動方向是廣角側的情況下，產(chǎn)生驅動信號，用于在變焦鏡頭的移動方向上將變焦鏡頭移動等同于移動距離的量。另一方面，在變焦鏡頭的移動方向是遠攝側的情況下，變焦鏡頭控制單元503在基于所計算的變焦放大率的變焦鏡頭的移動之后，計算成像范圍，比較變焦鏡頭的移動之后的成像范圍、與從顯示控制單元502輸出的、成像的圖像內的特定面部的面部圖像的位置和大小，從而確定特定面部的整個面部圖像是否被包括在變焦鏡頭的移動之后的成像范圍中。隨后，在特定面部的整個面部圖像包括在變焦鏡頭的移動之后的成像范圍中的情況下，變焦鏡頭控制單元503產(chǎn)生驅動信號，用于在所計算的變焦鏡頭的移動方向上，將變焦鏡頭移動相當于移動距離的值；并且，所述變焦鏡頭控制單元503將關于正在執(zhí)行變焦鏡頭的自動控制的要旨的通知輸出至顯示控制單元502。注意，在特定面部的整個面部圖像未被包括在變焦鏡頭的移動之后的成像范圍中的情況下，變焦鏡頭控制單元503不產(chǎn)生驅動控制信號。
圖22A和22B是圖示根據(jù)本發(fā)明的實施例的、在顯示單元300上顯示的成像的圖像的圖示。注意，圖22A中所示的成像的圖像601與圖6B中所示的成像的圖像相同。例如，在僅執(zhí)行變焦放大操作以使得圖22A中所示的人411的面部的大小符合布局輔助圖像222的面部區(qū)域的大小的情況下，如圖22B中所示，人411的面部的一部分未被包括在成像的圖像中。在此情況下，存在未能檢測到人411的面部的情況，這樣，存在或許未能顯示適當?shù)牟僮鬏o助圖像的可能性?，F(xiàn)在，在圖22A所示的成像的圖像601中示出了等效于圖22B中所示的成像的圖像602的成像范圍的范圍，作為變焦放大之后的成像范圍。也就是說，依據(jù)圖22A中所示的成像的圖像601,在人411的面部不被包括在變焦放大之后的成像范圍610中的情況下，如果僅執(zhí)行變焦放大
操作，則存在未能顯示適當?shù)牟僮鬏o助圖像的可能性。因此，依據(jù)此示例，比方說，在特定面部的面部不被包括在變焦放大之后的成像范圍中的情況下，不執(zhí)行變焦鏡頭的自動控制。
現(xiàn)在，以由圖7A中所示的布局輔助圖^f象222的面部大小確定的面積(WlxHl)作為基準，計算特定面部的面部圖像401的面積(WllxHll)的百分比，以及基于此百分比，計算變焦;改大率，從而，可以基于此變焦放大率，獲得變焦放大之后的成像范圍610?？梢砸宰笊辖翘幍奈恢肒1的坐標(X21，Y21)、以及右下角處的位置K2的坐標(X22, Y22)確定基于變焦放大率獲得的在變焦放大之后的成像范圍610。也就是說，作出以特定面部的面部圖像401的中心位置坐標(XII, Yll)、以及垂直方向上的長度Hll和水平方向上的長度W11所確定的特定面部的面部圖像401是否被包括在以左上角處的位置K1的坐標(X21, Y21 )、以及右下角處的位置K2的坐標(X22, Y22 )確定的在變焦放大之后的矩形成像范圍610中的確定，以及，在特定面部的整個面部圖像401被包括在變焦放大之后的成像范圍610中的情況下，執(zhí)行變焦鏡頭的自動控制。另一方面，在特定面部的整個面部圖像401未被包括在變焦放大之后的成像范圍610中的情況下，不執(zhí)行變焦鏡頭的自動控制。
圖23A至24B是圖示才艮據(jù)本發(fā)明的實施例的顯示單元300的顯示示例的圖示。注意，圖23A中所示的顯示示例與圖6B中所示的顯示示例相同。々支定在圖23A中的矩形虛線中示出了變焦放大之后的成像范圍610，但是，在顯示單元300上未顯示此線。
如圖23A中所示，例如，以覆蓋在成像的圖像上的方式，顯示包括在模板A221中的布局輔助圖像222，其對應于保持在輔助圖像顯示信息保持單元170的管理編號172處的管理編號"1"。隨后，基于以與圖7A中所示的計算方法相同的方式計算的差值，如圖23B中所示，以覆蓋在成像的圖像上的方式，顯示左移指示圖像441和上移指示圖像442。這里，即使在以布局輔助圖像222的面部大小確定的面積、與特定面部的面部圖像401的面積之間的差值的絕對值大于存儲在對應于管理編號210的"1"的變焦指示圖像顯示閾值250中的值"zr的情況下，以及在特定面部的整個面部圖像401未被包括在變焦放大之后的成像范圍610中的情況下，不執(zhí)行變焦鏡頭的自動控制。
圖24A圖示了根據(jù)圖23B中所示的左移指示圖像441和上移指示圖像442、由用戶對成4象設備100進行向左側的搖動和向上側的傾斜(向上側的傾斜量很小)之后的顯示示例。如圖24A中所示，在水平方向上的差值Sll的絕對值達到對應于管理編號210的'T，的值"SI"的范圍內的情況下，刪除左移指示圖像441。并且，雖然已經(jīng)由用戶對成像設備100進行向上側的傾斜，但是，在垂直方向上的差值Jll的絕對值大于值"J1"的情況下，根據(jù)垂直方向上的差值，顯示上移指示圖像621，其中，減小了上移指示圖像442的長度。這里，在圖24A中，特定面部的整個面部圖像401被包括在變焦放大之后的成像范圍610中，這樣，執(zhí)行變焦鏡頭的自動控制。也就是說，基于以與圖7A中所示的計算方法相同的方式計算的差值，計算變焦放大率；并且，變焦鏡頭控制單元503基于變焦放大率，通過變焦4竟頭驅動單元113移動變焦鏡頭111。因此，在執(zhí)行變焦鏡頭的自動控制的情況下，如圖24A中所示，以覆蓋在成像的圖像上的方式，在顯示單元300上顯示變焦自動操作中的圖像622。
圖24B圖示了根據(jù)圖24A中所示的上移指示圖像621、成像設備100經(jīng)受至上側的傾斜、并且由用戶執(zhí)行變焦鏡頭的自動控制之后的顯示示例。因此，執(zhí)行變焦鏡頭的自動控制，從而允許用戶僅執(zhí)行向左側的搖動或向上側的傾斜。并且，在特定面部的整個面部圖像未被包括在變焦放大之后的成像范圍中的情況下，不執(zhí)行變焦鏡頭的自動控制，從而，可以防止特定面部擴展至該范圍之外。
接下來，將參考附圖，關于根據(jù)本發(fā)明的所述實施例的成像設備500的操作進行描述。
圖25是圖示根據(jù)本發(fā)明的實施例的利用成像設備500的輔助圖像顯示處理的處理過程的、操作輔助圖像顯示處理過程(圖15中所示的步驟S920中的處理過程)的流程圖。此處理過程是圖16中所示的處理過程的修改，這樣，圖25中所示的步驟S921至S930、以及S933是與圖16中所示的步驟S921至S930和S933相同的處理過程，并且從而，這里將省略其描述。
在執(zhí)行涉及上移指示圖像、下移指示圖像、左移指示圖像、或者右移指示圖像的顯示或刪除處理之后(步驟S921至S929 )，操作輔助圖像產(chǎn)生單元160確定所計算的大小的差值是否等于或低于對應于存儲在輔助圖像顯示信息保持單元170的管理編號172中的管理編號的、存儲在輔助圖像管理表存儲單元200中的變焦指示圖像顯示闊值250 (步驟S930)。隨后，在所計算的大小的差值不等于或低于變焦指令顯示闊值250的情況下(步驟S930),執(zhí)行變焦鏡頭移動處理(步驟S960)。將參考圖26,詳細描述此變焦鏡頭移動處理。
圖26是圖示根據(jù)本發(fā)明的所述實施例的成像i殳備500的輔助圖像顯示處理的處理過程的、變焦鏡頭移動處理過程(圖25中所示的步驟S960中的處理過程)的流程圖。
首先，變焦鏡頭控制單元503基于所計算的大小的差值，計算變焦放大率；并且，基于變焦放大率，計算變焦鏡頭的移動方向和移動距離(步驟S961 )。隨后，變焦鏡頭控制單元503確定變焦鏡頭的移動方向是否為廣角側(步驟S962),以及，在變焦鏡頭的移動方向是廣角側的情況下，流程進行至步驟S966。另一方面，在變焦鏡頭的移動方向是遠攝側的情況下(步驟S962),變焦鏡頭控制單元503基于所計算的變焦放大率，計算變焦鏡頭的移動之后的成像范圍(步驟S963 )。隨后，變焦鏡頭控制單元503比較所計算的變焦鏡頭的移動之后的成像范圍、與從顯示控制單元502輸出的成像的圖像內的特定面部的面部圖像的位置和大小(步驟S964),并且，確定特定面部的整個面部圖像是否被包括在所計算的變焦鏡頭移動之后的成像范圍中(步驟S965 )。
在特定面部的整個面部圖像被包括在所計算的變焦鏡頭移動之后的成像范圍中的情況下(步驟S965),變焦鏡頭控制單元503在所計算的變焦鏡頭的移動方向上移動變焦鏡頭(步驟S966),并且，顯示控制單元502以覆蓋在成像的圖像上的方式，在顯示單元300上顯示變焦自動操作中的圖像(步驟S967)。關于變焦鏡頭的移動，期望相對較慢地移動變焦鏡頭，以便記錄可以在觀看時被容易地觀看的成像的運動圖像。另一方面，在特定面部的整個面部圖像未被包括在所計算的變焦鏡頭的移動之后的成像范圍中的情況下(步驟S965),流程進行至步驟S940。
到目前為止，已經(jīng)關于示例進行了描述，在所述示例中，顯示人類模型布局輔助圖像,j旦是，可以顯示除了人類模型之外的布局輔助圖像。例如，可以進行這樣的布置，其中，顯示矩形的圖像作為布局輔助圖像，并且，使得特定面部標記的矩形符合此矩形的布局輔助圖像。在此情況下，例如，可以進行這樣的布置，其中，可以以顏色或粗細度等來識別矩形的布局輔助圖像和特定面部標記的矩形。圖27A和27B是圖示根據(jù)本發(fā)明的實施例的顯示單元300的顯示示例的圖示。注意，除了布局輔助圖像之外，圖27A和27B中所示的顯示示例與圖6B中所示的顯示示例相同。例如，如圖27A中所示，可以通過粗細度、實線、虛線等來識別布局輔助圖像701和特定面部標記420,或者，如圖27B中所示，可以通過顏色或透明度等的變化來識別布局輔助圖像701和特定面部標記420。
如上所述，才艮據(jù)本發(fā)明的實施例，可以以最優(yōu)的^L頻容易地記錄所期望被拍攝的人。并且，自動識別所期望被拍攝的人的面部，用輔助圖像指導如何拍攝其人的面部，從而，可以通過跟隨此輔助圖像來記錄運動圖像，其可以在觀看時被容易地觀看，并且增加觀看者的興趣。例如，在將由用戶指定的人411的面部移動至布局輔助圖像的面部區(qū)域的位置的情況下，在觀看與布局輔助圖像一起顯示在顯示單元300上的、左移指示圖像、上移指示圖像、變焦指示圖像等的同時，可以執(zhí)行成像設備的搖動、傾斜或變焦操作。
并且，依次顯示多個布局輔助圖像，從而，可以記錄這樣的運動圖像，其可以在觀看時被容易地觀看，并且在廣泛變化的同時增加觀看者的興趣。例如，就幼兒園的才藝表演而言，以適當?shù)奈恢煤痛笮⑺约旱暮⒆拥拿娌坎贾迷诔上竦膱D像內，在適當時記錄孩子的面部的周圍情形等作為主體，以便防止觀看者的興趣減弱；從而，可以記錄這樣的運動圖像，其可以在觀看時被容易地觀看，并且，增加觀看者的興趣。并且，自動控制變焦鏡頭，從而，可以容易地記錄運動圖像。
并且，例如，在從遠距離拍攝特定的人的情況下，以及，甚至在從大量的人中尋找特定人的主體的情況下，成像設備其自身尋找所述特定人，從而，可以進一 步容易地執(zhí)行運動圖像的記錄。
并且，可以防止記錄由于記錄運動圖像期間的各種動作(變焦操作、搖動的多次使用，等等)導致的，在觀看時難以觀看的運動圖像。也就是說，可以向用戶提供熟練使用成像設備的學習機會。并且，可以提供甚至初學者也可拍攝可以被容易觀看的運動圖像的機會。因此，可以提供例如攝錄機等的成像設備，作為易于使用的、吸引人的產(chǎn)品。
注意，依據(jù)本發(fā)明的所述實施例，已經(jīng)描述了人類模型布局輔助圖像的相對筒單的三種類型而作為示例，以便方便描述，但是，可以采用各種類型的布局輔助圖像。并且，依據(jù)本發(fā)明的所述實施例，已經(jīng)描述了示例，在其中，以管理編號的順序顯示布局輔助圖像，但是，可以進行這樣的布置，其中，由用戶預先指定其顯示順序，并且，以此指定的順序顯示布局輔助圖4象。
也就是說，預先創(chuàng)建類似于情景的事物，從而，可以根據(jù)此情景而切換布局
輔助圖像。
注意，本發(fā)明的所述實施例圖示了用于進行本發(fā)明的示例，但是，本發(fā)明不限于這些實施例，并且，可以進行各種修改，而不會背離本發(fā)明的本質。與"發(fā)明內容"部分相關地，布局輔助圖像存儲單元對應于例如輔助圖
像管理表存儲單元200,成像單元對應于例如成像單元120，對象檢測單元對應于例如面部檢測單元130，顯示控制單元對應于例如顯示控制單元180或502,特定對象識別單元對應于例如特定面部識別單元140,特定對象標記產(chǎn)生單元對應于例如特定面部標記產(chǎn)生單元165,特定對象識別信息存4諸單元對應于例如特定面部識別辭典存儲單元141，操作接受單元對應于例如操作接受單元190，差值計算單元對應于例如差值計算單元150或501，操作輔助圖^f象產(chǎn)生單元對應于例如操作輔助圖^f象產(chǎn)生單元160，變焦#:頭對應于例如變焦鏡頭lll,變焦鏡頭控制單元對應于例如變焦鏡頭控制單元503，成像過程對應于例如步驟S903，對象^r測過程對應于例如步驟S905，以及顯示控制過程對應于例如步驟S904 。
注意，可以將依據(jù)本發(fā)明的所述實施例描述的處理過程視為為包括這些系列過程的方法，或者，視為為使得計算機通過記錄介質來執(zhí)行這些系列過程的程序，其中，所述記錄介質用于存儲其程序。
本申請包含2008年3月24日在日本專利局提交的日本優(yōu)先權專利申請JP2008-075096中7>開的主題，將其全部內容合并在此，作為參考。
本領域的技術人員應當理解，在當各種修改、組合、子組合、以及變更在所附權利要求或其等同的范圍內時的情況下，基于設計需求或其它因素，所述各種修改、組合、子組合、以及變更可以發(fā)生。
權利要求
1. 一種成像設備，包括布局輔助圖像存儲部件，其被配置以存儲多個布局輔助圖像，所述布局輔助圖像表示要在成像范圍內布置對象的位置和大??；成像部件，其被配置以執(zhí)行主體的成像，以產(chǎn)生成像的圖像；對象檢測部件，其被配置以從所述成像的圖像檢測所述對象，并且檢測所述成像的圖像內的對象的位置和大小；以及顯示控制部件，其被配置以通過覆蓋在所述成像的圖像上的方式來顯示作為存儲在所述布局輔助圖像存儲部件中的多個布局輔助圖像之一的布局輔助圖像，并且，在位置差值和大小差值均在預定范圍內的情況下，以覆蓋在所述成像的圖像上的方式來顯示除了存儲在所述布局輔助圖像存儲部件中的多個布局輔助圖像中的所顯示的布局輔助圖像之外的布局輔助圖像，其中，所述位置差值是由所顯示的布局輔助圖像確定的對象的位置與所述成像的圖像內的所檢測的對象的位置之間的差值，所述大小差值是由所顯示的布局輔助圖像確定的對象的大小與所述成像的圖像內的所檢測的對象的大小之間的差值。
2. 根據(jù)權利要求1所述的成像設備，其中，在每次所述位置差值和所述 大小差值兩者均在預定范圍內時，所述顯示控制部件才艮據(jù)預定次序而依次顯 示存儲在所述布局輔助圖像存儲部件中的多個布局輔助圖像。
3. 根據(jù)權利要求1所述的成像設備，還包括特定對象識別部件，其被配置以識別所;險測的對象是否為特定對象； 其中，在涉及所顯示的布局輔助圖像和所識別的特定對象的所述位置差 值和所述大小差值兩者均在預定范圍內的情況下，所述顯示控制部件以覆蓋 在所述成像的圖像上的方式，顯示除了所顯示的布局輔助圖像之外的布局輔 助圖像。
4. 根據(jù)權利要求3所述的成像設備，還包括特定對象標記產(chǎn)生部件，其被配置以基于所述成像的圖像內的所識別的 特定對象的位置和大小，產(chǎn)生將被添加至所識別的特定對象的特定對象標記；其中，所述顯示控制部件以覆蓋在所述成像的圖像上的方式，顯示作為 存儲在所述布局輔助圖像存儲部件中的多個布局輔勵國像之一 的布局輔助圖像、以及所產(chǎn)生的特定對象標記。
5. 根據(jù)權利要求3所述的成像設備，還包括特定對象識別信息存儲部件，其被配置以對于每個對象而存儲用于識別 對象的多個特定對象識別信息；以及操作接受部件，其被配置以接受用于指定其中存儲了所述特定對象識別 信息的多個對象中的至少一個對象的指定梯:作；其中，所述特定對象識別部件通過采用特定對象識別信息，來識別所枱， 測的對象是否為所述特定對象，其中，所述特定對象識別信息涉及存儲在所 述特定對象識別信息存儲部件中的多個特定對象識別信息中的所指定的對 象。
6. 根據(jù)權利要求1所述的成像設備，還包括 差值計算部件，其被配置以計算所述位置差值和大小差值；以及 操作輔助圖像產(chǎn)生部件，其被配置以產(chǎn)生操作輔助圖像，其用于基于所述位置差值和大小差值而修改所述成像的圖像內的所檢測的對象的位置和大 小中的至少一個；其中，所述顯示控制部件以覆蓋在所述成像的圖像上的方式，顯示存儲 在所述布局輔助圖像存儲部件中的多個布局輔助圖像中的布局輔助圖像、以 及所產(chǎn)生的操作輔助圖像。
7. 根據(jù)權利要求6所述的成像設備，其中，所述差值計算部件計算水平 位置差值和垂直位置差值，作為所述位置差值，其中，所述水平位置差值是 由所顯示的布局輔助圖像確定的對象的水平方向上的位置、與所述成像的圖 像內的所檢測的對象的水平方向上的位置之間的差值，所述垂直位置差值是 由所顯示的布局輔助圖像確定的對象的垂直方向上的位置、與所述成像的圖 像內的所檢測的對象的垂直方向上的位置之間的差值；并且，其中，在所述水平位置差值超過水平閾值的情況下，所述梯:作輔 助圖像產(chǎn)生部件產(chǎn)生水平方向移動指示圖像，該水平方向移動指示圖像是用 于修改所述成像的圖像內的所檢測的對象的水平方向上的位置的所述操作輔 助圖像，并且，在所述垂直位置差值超過垂直位置閾值的情況下，所述4喿作 輔助圖像產(chǎn)生部件產(chǎn)生垂直方向移動指示圖像，該垂直方向移動指示圖像是 用于修改所述成像的圖像內的所檢測的對象的垂直方向上的位置的所述操作 輔助圖像，并且，在所述大小差值超過大小閾值的情況下，所述操作輔助圖像產(chǎn)生部件產(chǎn)生變焦指示圖像，該變焦指示圖像是用于修改所述成像的圖像 內的所檢測的對象的大小的操作輔助圖像。
8. 根據(jù)權利要求7所述的成像設備，其中，在所述水平位置差值超過所 述水平位置閾值的情況下，或者，在所述垂直位置差值超過所述垂直位置闊 值的情況下，所述顯示控制部件不顯示所述變焦指示圖^象，并且，在所述水 平位置差值不超過所述水平位置閾值、且所述垂直位置差值不超過所述垂直 位置閾值、以及所述大小差值超過所述大小閾值的情況下，所述顯示控制部 件顯示所述變焦指示圖像。
9. 根據(jù)權利要求1所述的成像設備，還包括 變焦鏡頭，其被配置以調節(jié)焦距；以及變焦鏡頭控制部件，其被配置以執(zhí)行用于驅動所述變焦鏡頭的控制，以 便基于所述大小差值而修改所述成像的圖像內的所檢測的對象的大小。
10. 根據(jù)權利要求9所述的成像設備，其中，在由所述變焦鏡頭控制部 件驅動所述變焦鏡頭的情況下，所述顯示控制部件以覆蓋在所述成像的圖像上的方式來顯示關于其要旨的操作輔助圖像。
11. 根據(jù)權利要求9所述的成像設備，其中，在通過驅動所述變焦鏡頭 來放大在所述成像的圖像中包括的主體的情況下，僅當在將所檢測的對象被 包括在放大之后的成像的圖像中時，所述變焦鏡頭控制部件才執(zhí)行用于驅動 所述變焦鏡頭的控制。
12. —種用于成像設備的控制方法，所述成像設備包括布局輔助圖像存 儲部件，其被配置以存儲多個布局輔助圖像，所述布局輔助圖像表示要在成像范圍內布置對象的位置和大小，所述方法包括步驟 對主體成像，以便產(chǎn)生成像的圖像；從所述成像的圖像檢測所述對象，并且，檢測所述成像的圖像內的對象 的位置和大??；以及以覆蓋在所述成像的圖像上的方式，顯示作為存儲在所述布局輔助圖像 存儲部件中的多個布局輔助圖像之一的布局輔助圖像，并且，在位置差值和大小差值均在預定范圍內的情況下，以覆蓋在所述成像的圖像上的方式來顯 示除了存儲在所述布局輔助圖像存儲部件中的多個布局輔助圖像中的所顯示 的布局輔助圖像之外的布局輔助圖像，其中，所述位置差值是由所顯示的布 局輔助圖像確定的對象的位置與所述成像的圖像內的所檢測的對象的位置之間的差值，所述大小差值是由所顯示的布局輔助圖像確定的對象的大小與所 述成像的圖像內的所檢測的對象的大小之間的差值。
13. —種利用成像設備而使計算機執(zhí)行以下步驟的程序，所述成像設備 包括布局輔助圖像存儲部件，其被配置以存儲多個布局輔助圖像，所述布局 輔助圖像表示要在成像范圍內布置對象的位置和大小，所述步驟包括對主體成像，以便產(chǎn)生成像的圖像；從所述成像的圖^^全測所述對象，并且，檢測所述成像的圖像內的對象 的位置和大??；以及以覆蓋在所述成像的圖像上的方式，顯示作為存儲在所述布局輔助圖像 存儲部件中的多個布局輔助圖像之一的布局輔助圖像，并且，在位置差值和 大小差值均在預定范圍內的情況下，以覆蓋在所述成像的圖像上的方式來顯 示除了存儲在所述布局輔助圖像存儲部件中的多個布局輔助圖像中的所顯示 的布局輔助圖像之外的布局輔助圖像，其中，所述位置差值是由所顯示的布 局輔助圖像確定的對象的位置與所述成像的圖像內的所檢測的對象的位置之 間的差值，所述大小差值是由所顯示的布局輔助圖像確定的對象的大小與所 述成像的圖像內的所斥全測的對象的大小之間的差值。
14. 一種成像設備，包括布局輔助圖像存儲單元，其被配置以存儲多個布局輔助圖像，所述布局 輔助圖像表示要在成像范圍內布置對象的位置和大??；成像單元，其被配置以執(zhí)行主體的成像以產(chǎn)生成像的圖像；對象檢測單元，其被配置以從所述成像的圖像檢測所述對象，并且檢測 所述成像的圖像內的對象的位置和大小；以及顯示控制單元，其被配置以通過覆蓋在所述成像的圖像上的方式來顯示 作為存儲在所述布局輔助圖像存儲單元中的多個布局輔助圖像之一 的布局輔 助圖像，并且，在位置差值和大小差值均在預定范圍內的情況下，以覆蓋在 所述成像的圖像上的方式來顯示除了存儲在所述布局輔助圖像存儲單元中的 多個布局輔助圖像中的所顯示的布局輔助圖像之外的布局輔助圖像，其中， 所述位置差值是由所顯示的布局輔助圖像確定的對象的位置與所述成像的圖 像內的所檢測的對象的位置之間的差值，所述大小差值是由所顯示的布局輔 助圖像確定的對象的大小與所述成像的圖像內的所檢測的對象的大小之間的 差值。
15. —種用于成像設備的控制方法，所述成像設備包括布局輔助圖像存 儲單元，其被配置以存儲多個布局輔助圖像，所述布局輔助圖像表示要在成 像范圍內布置對象的位置和大小，所述方法包括步驟對主體成像，以便產(chǎn)生成像的圖像；從所述成像的圖^^r測所述對象，并且，檢測所述成像的圖像內的對象 的位置和大?。灰约耙愿采w在所述成像的圖像上的方式，顯示作為存儲在所述布局輔助圖像 存儲單元中的多個布局輔助圖像之一的布局輔助圖像，并且，在位置差值和 大小差值均在預定范圍內的情況下，以覆蓋在所述成像的圖像上的方式來顯 示除了存儲在所述布局輔助圖像存單元置中的多個布局輔助圖像中的所顯示 的布局輔助圖像之外的布局輔助圖像，其中，所述位置差值是由所顯示的布 局輔助圖像確定的對象的位置與所述成像的圖像內的所檢測的對象的位置之 間的差值，所述大小差值是由所顯示的布局輔助圖像確定的對象的大小與所 述成像的圖像內的所檢測的對象的大小之間的差值。
16. —種利用成像設備而使計算機執(zhí)行以下步驟的程序，所述成像設備 包括布局輔助圖像存儲單元，其被配置以存儲多個布局輔助圖像，所述布局 輔助圖像表示要在成像范圍內布置對象的位置和大小，所述步驟包括對主體成像，以便產(chǎn)生成像的圖像；從所述成像的圖像檢測所述對象，并且，檢測所述成像的圖像內的對象 的位置和大??；以及以覆蓋在所述成像的圖像上的方式，顯示作為存儲在所述布局輔助圖像 存儲單元中的多個布局輔助圖像之一的布局輔助圖像，并且，在位置差值和 大小差值均在預定范圍內的情況下，以覆蓋在所述成像的圖像上的方式來顯 示除了存儲在所述布局輔助圖像存儲單元中的多個布局輔助圖^f象中的所顯示 的布局輔助圖像之外的布局輔助圖像，其中，所述位置差值是由所顯示的布 局輔助圖像確定的對象的位置與所述成像的圖像內的所檢測的對象的位置之 間的差值，所述大小差值是由所顯示的布局輔助圖像確定的對象的大小與所 述成像的圖像內的所檢測的對象的大小之間的差值。
全文摘要
一種成像設備包括布局輔助圖像存儲單元，用以存儲多個布局輔助圖像，其表示在成像范圍內布置對象的位置和大??；成像單元，用以執(zhí)行主體的成像以產(chǎn)生成像的圖像；對象檢測單元，用以從所述成像的圖像檢測所述對象，以及其中的對象的位置和大??；以及顯示控制單元，用以覆蓋在所述成像的圖像上的、顯示多個所存儲的布局輔助圖像之一。如果由所顯示的布局輔助圖像確定的對象的位置與所述成像的圖像內的所檢測的對象的位置之間的位置差值、以及由所顯示的布局輔助圖像確定的對象的大小與所述成像的圖像內的所檢測的對象的大小之間的大小差值均在預定范圍內，則覆蓋在所述成像的圖像上，顯示除了所顯示的布局輔助圖像之外的布局輔助圖像。
文檔編號G06K9/00GK101547304SQ20091012824
公開日2009年9月30日 申請日期2009年3月24日 優(yōu)先權日2008年3月24日
發(fā)明者水上賢一 申請人:索尼株式會社