專利名稱：成像控制設(shè)備與成像控制方法
技術(shù)領(lǐng)域：
本發(fā)明涉及成像控制設(shè)備及用于成像裝置和成像系統(tǒng)的成像控制方法，其中該成像系統(tǒng)通過自動改變成像視場來執(zhí)行靜止圖像成像或者全景成像。
背景技術(shù)：
在用戶(攝影師)沿約水平旋轉(zhuǎn)方向移動照相機的同時，通過執(zhí)行成像操作獲得寬角度場景的靜止圖像的技術(shù)被稱為所謂的全景成像方法。例如，在JP-A-11-88754、 JP-A-11-88811、JP-A-2005-333396中，公開了與全景成像方法有關(guān)的技術(shù)。在全景成像模式下使用數(shù)字照相機執(zhí)行成像的情況下，用戶沿水平旋轉(zhuǎn)方向移動照相機。此時，數(shù)字照相機通過獲得多個靜止圖像及通過組合主題場景執(zhí)行合成處理，生成了全景圖像數(shù)據(jù)如水平長的靜止圖像。通過這樣的全景成像處理，可以獲得很難在普通成像操作中獲得的寬角度場景。另外，不通過用戶的釋放操作而執(zhí)行自動成像操作的系統(tǒng)是眾所周知的。例如，在 JP-A-2009-100300中，公開了用于自動記錄通過成像系統(tǒng)的自動合成調(diào)整和合成組合所獲得的所捕獲圖像的技術(shù)，其中該成像系統(tǒng)包括數(shù)字照相機和通過電驅(qū)動改變該數(shù)字照相機的搖攝/傾斜方向的搖攝云臺(pan head)。在JP-A-2009-100300公開的技術(shù)中，例如，通過使用人臉檢測接技術(shù)執(zhí)行主題如人物的搜索。更具體而言，當(dāng)在使用搖攝云臺沿?fù)u攝方向旋轉(zhuǎn)數(shù)字照相機的同時，執(zhí)行圖像幀內(nèi)被傳送的主題(人臉)的檢測。由于主題搜索的結(jié)果，在圖像幀內(nèi)檢測主題的情況中，根據(jù)此時間點出圖像幀內(nèi)主題的檢測狀況(例如，主題的數(shù)目、位置、尺寸等)，執(zhí)行最佳合成的確定(最佳合成確定)。換言之，獲得了最佳的搖攝、傾斜與變焦角度。另外，當(dāng)通過最佳合成確定獲得了被確定為最佳的搖攝、傾斜與變焦角度時，將搖攝、傾斜與變焦角度調(diào)整到被設(shè)定為目標(biāo)角度的所獲得的角度(合成組合)。在完成合成組合之后，自動記錄所捕獲圖像。根據(jù)通過自動合成組合的自動成像操作(所捕獲圖像的自動記錄)，能夠在不需要用戶成像操作的情況下，根據(jù)最佳合成自動記錄所捕獲圖像。

發(fā)明內(nèi)容
這里，在上述自動成像操作中，在能夠執(zhí)行除了普通靜止圖像成像操作之外的全景成像操作的情況下，可以增大成像設(shè)備的使用范圍，這是可取的。因此期望提供能夠恰當(dāng)執(zhí)行自動全景成像操作的技術(shù)。例如，期望可以恰當(dāng)?shù)乜刂迫俺上癫僮鞯姆秶c合成。根據(jù)本發(fā)明的實施例，提供了用于成像裝置或者成像系統(tǒng)的成像控制設(shè)備，其中成像系統(tǒng)包括使主題成像的成像單元和成像單元的成像視場的可變機構(gòu)。成像控制設(shè)備包括可變成像視場控制單元，其控制著成像視場的可變機構(gòu)的驅(qū)動；及自動全景成像控制單元，其在通過使用可變成像視場控制單元改變成像視場的同時，允許成像單元通過諸如全景成像之類的成像獲得多個用于生成全景圖像數(shù)據(jù)的圖像數(shù)據(jù)，并且基于成像單元所獲得的所捕獲圖像信號確定全景成像時的控制操作。在上述成像控制設(shè)備中，自動全景成像控制單元可以基于預(yù)定目標(biāo)主題的存在確定而確定全景成像的開始位置與結(jié)束位置，其中預(yù)定目標(biāo)主題的存在確定是基于成像單元所獲得的所捕獲圖像識別的。例如，當(dāng)自動全景成像控制單元允許可變成像視場控制單元使用可變機構(gòu)移動成像視場時，基于成像單元所獲得的所捕獲圖像信號，將確定預(yù)定范圍內(nèi)或者預(yù)定時間內(nèi)不存在目標(biāo)主題時的成像視場位置設(shè)定為全景成像的開始位置，并且自動全景成像控制單元基于成像單元在執(zhí)行全景成像過程中所獲得的所捕獲圖像信號，將確定預(yù)定范圍內(nèi)或者預(yù)定時間內(nèi)不存在目標(biāo)主題時的成像視場位置設(shè)定為全景成像的結(jié)束位置。另外，在上述成像控制設(shè)備中，自動全景成像控制單元可以基于表示預(yù)定目標(biāo)主題的存在和基于成像單元過去所獲得的所捕獲圖像信號而生成的歷史信息確定全景成像的開始位置與結(jié)束位置。例如，自動全景成像控制單元基于歷史信息確定所獲得的目標(biāo)主題的存在分布， 并且基于該存在分布確定全景成像的開始位置與結(jié)束位置。另外，自動全景成像控制單元可以基于水平方向位置處與垂直方向位置處的目標(biāo)主題的存在分布與基于歷史信息所獲得的目標(biāo)主題的全景圖像尺寸執(zhí)行合成調(diào)整。在此情況下，自動全景成像控制單元在上述合成調(diào)節(jié)時，計算變焦放大率，并且允許可變成像視場控制單元改變可變機構(gòu)之一的變焦機構(gòu)的變焦放大率。根據(jù)本發(fā)明的另一實施例，提供了用于成像裝置或者成像系統(tǒng)的成像控制設(shè)備， 其中成像系統(tǒng)包括使主題成像的成像單元和成像單元的成像視場的可變機構(gòu)。成像控制設(shè)備包括可變成像視場控制單元，其控制著成像視場的可變機構(gòu)的驅(qū)動；及自動全景成像控制單元，其在通過使用可變成像視場控制單元改變成像視場的同時，允許成像單元通過諸如全景成像之類的成像獲得多個用于生成全景圖像數(shù)據(jù)的圖像數(shù)據(jù)，并且根據(jù)用于執(zhí)行全景成像的觸發(fā)器在全景成像的同時確定控制操作。另外，在上述成像控制設(shè)備中，在根據(jù)基于用戶操作的觸發(fā)器執(zhí)行全景成像的情況下，自動全景成像控制單元可以確定全景成像的開始位置與結(jié)束位置，使得用戶操作的水平位置成為全景成像的中心。另外，在上述成像控制設(shè)備中，在根據(jù)用于360°全景成像的觸發(fā)器執(zhí)行全景成像的情況下，當(dāng)自動全景成像控制單元將水平方向上的當(dāng)前位置作為開始位置，通過使用可變成像視場控制單元沿水平方向360°的范圍改變成像視場的同時，可以執(zhí)行全景成像。另外，在上述成像控制設(shè)備中，全景成像控制單元可以在多個預(yù)定目標(biāo)主題之間， 根據(jù)基于現(xiàn)有預(yù)定目標(biāo)主題的數(shù)目或者分隔間距而發(fā)生的觸發(fā)器執(zhí)行全景成像操作，其中預(yù)定主題目標(biāo)的數(shù)目或者分割間距是基于成像單元所獲得的所捕獲圖像信號識別的。可替換地，上述成像控制設(shè)備還包括自動靜止圖像成像控制單元，其允許成像裝置在通過使用可變成像視場控制單元改變成像視場的同時，通過執(zhí)行主題的檢測而自動執(zhí)行靜止圖像成像，其中全景成像控制單元根據(jù)自動靜止圖像成像控制單元的控制，根據(jù)基于靜止圖像成像的次數(shù)、自動靜止成像的周期或者預(yù)定范圍內(nèi)的自動靜止成像的完成而發(fā)生的觸發(fā)器，執(zhí)行全景成像控制。在此情況下，自動全景成像控制單元可以基于預(yù)定目標(biāo)主題的存在分布來確定全景成像的開始位置與結(jié)束位置，其中預(yù)定目標(biāo)主題的存在分布是基于成像單元所獲得的所捕獲圖像識別的?？商鎿Q地，自動全景成像控制單元可以基于表示預(yù)定目標(biāo)主題存在和基于成像單元過去捕獲的所捕獲圖像信號而生成的歷史信息來確定全景成像的開始位置與結(jié)束位置。另外，在上述成像控制設(shè)備中，全景成像控制單元可以根據(jù)基于主題狀況而發(fā)生的觸發(fā)器來執(zhí)行全景成像控制，其中主題狀況是基于圖像單元所獲得的所捕獲圖像信號及 /或環(huán)境聲音估計的。另外，在上述圖像控制設(shè)備中，全景成像控制單元可以根據(jù)基于主題的預(yù)定類型而發(fā)生的觸發(fā)器來執(zhí)行全景成像控制，其中主題的預(yù)定類型是基于成像單元所獲得的所捕獲圖像信號識別的。在此情況下，自動全景成像控制單元在全景成像的開始之前的合成調(diào)節(jié)時，可以允許可變成像視場控制單元僅僅執(zhí)行圖像視場的垂直方向位置的調(diào)節(jié)控制。根據(jù)本發(fā)明的另一實施例，提供了控制成像的方法，其包括步驟如下允許成像單元在通過控制可變機構(gòu)的驅(qū)動改變成像視場的同時，通過諸如全景成像之類的成像獲得多個用于生成全景圖像數(shù)據(jù)的圖像數(shù)據(jù)，并且基于成像單元在執(zhí)行全景成像之前或者執(zhí)行全景成像過程中所獲得的所捕獲圖像，確定全景成像時的控制操作。根據(jù)本發(fā)明的另一實施例，提供了控制成像的方法，其包括如下步驟根據(jù)用于執(zhí)行全景成像的觸發(fā)器，確定全景成像時的控制操作；并且允許成像單元在通過控制可變機構(gòu)的驅(qū)動改變成像視場的同時，通過諸如全景成像之類的成像獲得多個用于生成全景圖像數(shù)據(jù)的圖像數(shù)據(jù)。根據(jù)本發(fā)明的實施例，通過基于成像單元在執(zhí)行全景成像之前或者執(zhí)行全景成像過程中所獲得的所捕獲圖像，確定全景成像時的控制操作，可以例如根據(jù)特定目標(biāo)主題 (例如，人臉)的存在位置、分布及數(shù)目等，實現(xiàn)能夠獲得具有恰當(dāng)合成的全景圖像的全景成像。另外，通過根據(jù)用于執(zhí)行全景成像的觸發(fā)器，確定全景成像時的控制操作，可以根據(jù)觸發(fā)器的內(nèi)容、環(huán)境狀態(tài)等實現(xiàn)能夠獲得具有恰當(dāng)合成的全景圖像的全景成像。根據(jù)本發(fā)明的實施例，根據(jù)從所捕獲圖像信號獲得的狀態(tài)或者用于執(zhí)行全景操作的觸發(fā)器的類型，適當(dāng)?shù)乜刂谱詣尤俺上竦姆秶c合成。因此，根據(jù)各種狀況實現(xiàn)了合適的自動全景成像。


圖IA與圖IB是根據(jù)本發(fā)明實施例的數(shù)字照相機的前視圖與后視圖。圖2A與圖2B是能夠?qū)⒏鶕?jù)本發(fā)明實施例的數(shù)字照相機安裝在其上的搖攝云臺的立體圖與后視圖。圖3是將根據(jù)本發(fā)明實施例的數(shù)字照相機安裝在搖攝云臺上的狀態(tài)的前視圖。圖4是在將根據(jù)本發(fā)明實施例的數(shù)字照相機安裝在搖攝云臺上的狀態(tài)下沿?fù)u攝方向移動的概要視圖。
圖5A與圖5B是在將根據(jù)本發(fā)明實施例的數(shù)字照相機安裝在搖攝云臺上的狀態(tài)下沿傾斜方向移動的概要視圖。圖6A與圖6B是根據(jù)本發(fā)明實施例的搖攝云臺的觸摸操作位置的概要視圖。圖7是根據(jù)本發(fā)明實施例的數(shù)字照相機的內(nèi)部構(gòu)造示例的概要視圖。圖8是根據(jù)本發(fā)明實施例的搖攝云臺的內(nèi)部構(gòu)造示例的概要視圖。圖9是根據(jù)本發(fā)明實施例的控制功能構(gòu)造示例的方框圖。圖10A、圖IOB與圖IOC是根據(jù)本發(fā)明實施例的全景成像的概要視圖。圖11是能夠被應(yīng)用到本發(fā)明實施例的自動成像方法的第一示例的流程圖。圖12是能夠被應(yīng)用到本發(fā)明實施例的自動成像方法的第二示例的流程圖。圖13是根據(jù)本發(fā)明實施例的全景成像的方法示例I的流程圖。圖14是解釋根據(jù)本發(fā)明實施例的全景成像的方法示例I的概要視圖。圖15A與圖15B是解釋根據(jù)本發(fā)明實施例的全景成像的方法示例I的概要視圖。圖16是根據(jù)本發(fā)明實施例的全景成像的方法示例II的流程圖。圖17A、圖17B與圖17C是解釋根據(jù)本發(fā)明實施例的全景成像的方法示例II的概要視圖。圖18是根據(jù)本發(fā)明實施例的全景成像的方法示例III的流程圖。圖19A與圖19B是解釋根據(jù)本發(fā)明實施例的成像歷史信息與人臉檢測圖譜信息的概要視圖。圖20A與圖20B是解釋根據(jù)本發(fā)明實施例的全景成像的方法示例III的概要視圖。圖21A與圖21B是解釋根據(jù)本發(fā)明實施例的全景成像的方法示例III的概要視圖。圖22是根據(jù)本發(fā)明實施例的全景成像的方法示例IV的流程圖。圖23是根據(jù)本發(fā)明實施例的全景成像的方法示例IV的變焦控制的流程圖。圖24A與圖24B是解釋根據(jù)本發(fā)明實施例的全景成像的方法示例IV的概要視圖。圖25A、圖25B與圖25C是解釋根據(jù)本發(fā)明實施例的全景成像的方法示例IV的變焦確定的概要視圖。圖沈根據(jù)本發(fā)明實施例的全景成像的方法示例V的流程圖。圖27A與圖27B是根據(jù)本發(fā)明實施例的觸發(fā)器發(fā)生的處理流程圖。圖28A與圖28B是根據(jù)本發(fā)明實施例的觸發(fā)器發(fā)生的處理流程圖。圖^A與圖29B是根據(jù)本發(fā)明實施例的觸發(fā)器發(fā)生的處理流程圖。圖30A與圖30B是根據(jù)本發(fā)明實施例的觸發(fā)器發(fā)生的處理流程圖。圖31是根據(jù)本發(fā)明實施例解釋根據(jù)觸發(fā)器的控制處理的示例的概要視圖。圖32是解釋根據(jù)本發(fā)明實施例的其它功能構(gòu)造的概要視圖。
具體實施例方式下面，將按照以下順序描述本發(fā)明的實施例。在實施例中，將由數(shù)字照相機和能夠?qū)⒃摂?shù)字照相機安裝在其上的搖攝云臺構(gòu)造的成像系統(tǒng)作為示例進行描述。盡管數(shù)字照相機能夠單獨獲取圖像，但是與搖攝云臺結(jié)合的數(shù)字照相機作為成像系統(tǒng)可以執(zhí)行自動成像操作。<1.成像系統(tǒng)構(gòu)造>[1-1 整體構(gòu)造][1-2 數(shù)字照相機][1-3 搖攝云臺]<2.功能構(gòu)造示例〉<3.全景成像概述><4.自動成像方法〉[4-1 第一自動成像方法示例][4-2 第二自動成像方法示例]<5.全景成像方法>[5-1 方法示例 I][5-2 方法示例 II][5-3 方法示例 III][5-4 方法示例 IV][5-5:方法示例 V]<6.全景成像的觸發(fā)器〉[6-1 各種觸發(fā)器的示例][6-2 根據(jù)觸發(fā)器的處理設(shè)定]<7.其它功能構(gòu)造示例><8.程序〉在本文的描述中，使用了術(shù)語“圖像幀”、“圖像角，，、“成像視場”與“合成”，以下是它們的定義?！皥D像幀”表示與一幅圖像相對應(yīng)的，例如其中圖像適合被觀察的區(qū)域范圍。一般地，圖像幀的外部幀形狀是垂直長或者水平長的矩形?！皥D像角”也被稱為變焦角等，并且表示適合在圖像幀內(nèi)根據(jù)成像裝置的光學(xué)系統(tǒng)的變焦透鏡的位置而確定的范圍如角度。一般地，盡管根據(jù)成像光學(xué)系統(tǒng)的焦距與像面 (圖像傳感器或者膠片)的尺寸確定了圖像角，但是在本文中，將與焦距對應(yīng)的能夠變化的因素稱為圖像角?！俺上褚晥觥北硎靖鶕?jù)成像光學(xué)系統(tǒng)的視場。換言之，成像視場是適合于成像裝置周圍場景中的圖像幀范圍如成像目標(biāo)。根據(jù)除了上述圖像角度以外的沿?fù)u攝(水平)方向的擺動角度與沿傾斜(垂直)方向的角度(上升角度或者下降角度)確定了成像視場。本文的“合成”也被稱為組幀，并且例如表示例如根據(jù)包括主題尺寸設(shè)定的成像視場而確定的圖像幀內(nèi)的構(gòu)造狀態(tài)。<1.成像系統(tǒng)構(gòu)造>[1-1 整體構(gòu)造]根據(jù)本發(fā)明實施例的成像系統(tǒng)由數(shù)字照相機1與可拆卸地連接到數(shù)字照相機1的搖攝云臺10構(gòu)造。搖攝云臺10通過電驅(qū)動改變數(shù)字照相機1在搖攝與傾斜方向的取向。另外，搖攝云臺10執(zhí)行自動合成配合和通過自動合成配合所獲得的所捕獲圖像的自動記錄。例如，通過執(zhí)行人臉檢測技術(shù)，執(zhí)行主題如人物的搜索。更具體而言，在通過使用搖攝云臺10例如沿?fù)u攝方向旋轉(zhuǎn)數(shù)字照相機1的同時，檢測了在圖像幀內(nèi)輸出圖像的主題 (人臉)。當(dāng)由于主題搜索的結(jié)果在圖像幀內(nèi)檢測主題時，根據(jù)此時間點處圖像幀內(nèi)的主題狀況(例如，主題的數(shù)目、位置、尺寸等)，確定被認(rèn)為是最佳的合成(最佳合成確定)。換言之，獲得了被認(rèn)為是最佳的搖攝、傾斜與變焦角度。當(dāng)如上所述通過最佳合成確定獲得了被認(rèn)為是最佳的搖攝、傾斜與變焦角度時， 可以用被設(shè)定為目標(biāo)角度的這些角度調(diào)整搖攝、傾斜與變焦角度(合成配合)。在完成合成配合之后，執(zhí)行所捕獲圖像的自動記錄。根據(jù)通過上述自動合成配合的自動成像操作(所捕獲圖像的自動記錄)，根本不需要用戶的成像操作，可以根據(jù)被認(rèn)為是最佳的合成而自動記錄所捕獲圖像。圖IA與圖IB示出了數(shù)字照相機1的外觀圖示例。圖IA與圖IB是數(shù)字照相機1 的前視圖與后視圖。如圖IA所示，數(shù)字照相機1包括位于主體單元2的前面?zhèn)壬系耐哥R單元21a。透鏡單元21a是用于捕獲圖像的光學(xué)系統(tǒng)，并且是暴露在主體單元2外側(cè)的部分。另外，在主體單元2的上面部分上，布置了釋放按鈕31a。在成像模式下，將透鏡單元21a所捕獲的圖像(所捕獲圖像)生成為圖像信號。在成像模式下，可以通過下述的圖像傳感器以預(yù)定的幀速率獲得用于各幀的所捕獲圖像。當(dāng)操作釋放按鈕31a(釋放操作或者快門操作)時，在記錄媒體上記錄此時所捕獲的圖像(幀圖像)如靜止圖像的圖像數(shù)據(jù)。換言之，執(zhí)行通常被稱作攝影的靜止圖像的成像。另外，如圖IB所示，數(shù)字照相機1包括位于其后面?zhèn)壬系娘@示屏單元33a。在顯示屏單元33a上，在成像模式下，顯示被稱為穿過圖像(throughimage)或者此時通過透鏡單元21a成像的圖像。穿過圖像是基于圖像傳感器所獲得的幀圖像的運動圖像，并且是直接表示此時主題的圖像。另一方面，在再現(xiàn)模式下，再現(xiàn)并顯示記錄在記錄媒體上的圖像數(shù)據(jù)。另外，根據(jù)數(shù)字照相機1的用戶執(zhí)行的操作，顯示操作圖像如⑶I (Graphical User hterface，圖形用戶界面)。另外，通過在顯示屏單元33a內(nèi)建立觸摸面板，用戶可以通過使用他或者她的手指觸摸顯示屏單元33a來執(zhí)行必要的操作。此外，在數(shù)字照相機1中，可以布置操作件如除釋放按鈕31a與刻度盤以外的各種鍵。例如，操作件是用于變焦操作、模式選擇、菜單操作、菜單上的光標(biāo)操作、再現(xiàn)操作的操作鍵、刻度盤等。圖2A示出了搖攝云臺10外觀的立體圖。圖2B示出了搖攝云臺10的后視圖。圖3、圖4、圖5A及圖5B示出了數(shù)字照相機1以合適的狀態(tài)被布置在搖攝云臺10 中的狀態(tài)。圖3是前視圖，圖4是平面圖，且圖5A與圖5B是側(cè)視圖(特別地，圖5B示出了傾斜機構(gòu)在側(cè)視圖中的可移動范圍)。
如圖2A、圖2B、圖3、圖4、圖5A與圖5B所示，搖攝云臺10主要具有其中主體部分 11安裝在接地臺部分15上，且照相機臺座部分12被安裝到主體部分11的結(jié)構(gòu)。當(dāng)將數(shù)字照相機1安裝到搖攝云臺10時，將數(shù)字照相機1的下面?zhèn)炔贾玫秸障鄼C臺座部分12的上面?zhèn)取Ｈ鐖D2A與圖2B所示，在照相機臺座部分12的上面部分上，布置了突起部分13和連接器14。盡管圖中未示出，但是在數(shù)字照相機1的主體單元2的下面部分上，形成了與突起部分13嚙合的孔部分。在將數(shù)字照相機1適當(dāng)?shù)夭贾迷谡障鄼C臺座部分12中的狀態(tài)下，形成了孔部分與突起部分13彼此嚙合的狀態(tài)。在此狀態(tài)下，為了便于搖攝云臺10的正常搖攝或傾斜操作，認(rèn)為數(shù)字照相機1沒有與搖攝云臺10斷開或者未偏離搖攝云臺10。另外，在數(shù)字照相機1的下面部分的預(yù)定位置中，布置了連接器。在如上所述將數(shù)字照相機1恰當(dāng)安裝到照相機臺座部分12的狀態(tài)下，數(shù)字照相機1的連接器與搖攝云臺10 的連接器14連接在一起，并且形成了兩部分至少能夠互相通信的狀態(tài)。例如，可以在特定的范圍內(nèi)，以實際的感覺改變(移動)照相機臺座部分12中的連接器14與突起13的位置。另外，例如，通過一起使用適配器或者被調(diào)節(jié)到數(shù)字照相機1 的下面部分的形狀的類似物，可以在數(shù)字照相機1與搖攝云臺10能夠互相通信的狀態(tài)下， 將不同模式的數(shù)字照相機安裝到照相機臺座部分12。接著，將根據(jù)搖攝云臺10描述數(shù)字照相機1在搖攝與傾斜方向的基本運動。下面，首先是在搖攝方向的基本運動。在例如桌子、地面及其類似物上布置了搖攝云臺10的狀態(tài)下，使接地臺部分15的下面接地。在此狀態(tài)下，如圖4所示，將主體部分11側(cè)構(gòu)造為沿順時針方向或者逆時針方向繞作為旋轉(zhuǎn)中心的旋轉(zhuǎn)軸Ila可旋轉(zhuǎn)的。因此，可以改變被安裝到搖攝云臺10的數(shù)字照相機1在水平方向(左側(cè)或者右側(cè)方向)的成像視場(所謂的搖攝)。另外，搖攝云臺10的搖攝機構(gòu)在此情況下具有其中搖攝機構(gòu)能夠沿順時針方向或者逆時針方向360°無限制旋轉(zhuǎn)的結(jié)構(gòu)。在搖攝云臺10的搖攝機構(gòu)中，確定了搖攝方向的參考位置。這里，如圖4所示，假定搖攝參考位置為0° (360° )，并且是主體單元11在搖攝方向的旋轉(zhuǎn)位置，那么搖攝位置(搖攝角度)表示為0°至360°。另外，下面是搖攝云臺10在傾斜方向的基本運動。如圖5A與圖5B所示，可以通過繞作為旋轉(zhuǎn)中心的旋轉(zhuǎn)軸12a，以仰角與俯角兩個方向的角度搖擺照相機臺座部分12，獲得傾斜方向上的基本運動。圖5A示出了照相機臺座部分12在傾斜參考位置YO (0° )的狀態(tài)。在此狀態(tài)下， 與透鏡單元21a (光學(xué)系統(tǒng)單元)的成像光軸一致的成像方向Fl和被接地到接地臺部分15 的接地面部分GR彼此平行。另外，如圖5B所示，在仰角方向上，可以繞用作旋轉(zhuǎn)中心的旋轉(zhuǎn)軸1 從傾斜參考位置Y0(0° )起，在預(yù)定的最大旋轉(zhuǎn)角度+f°的范圍內(nèi)移動照相機臺座部分12。另外，同樣在俯角方向上，可以繞用作旋轉(zhuǎn)中心的旋轉(zhuǎn)軸1 從傾斜參考位置Y0(0° )起，在預(yù)定的最大旋轉(zhuǎn)角度_g°的范圍內(nèi)移動照相機臺座部分12。如上通過繞用作基點的傾斜參考位置YO (0° )，在最大旋轉(zhuǎn)角度+Γ到最大旋轉(zhuǎn)角度_g°的范圍內(nèi)移動照相機臺座部分12，可以改變被安裝到搖攝云臺10(照相機臺座部分12)的數(shù)字照相機1在傾斜方向(垂直方向)的成像視場。換言之，可以執(zhí)行傾斜操作。如圖2B所示，在搖攝云臺10上，在主體部分11的后面部分上形成了可拆卸地連接到電力電纜的電源端子部分t-Vin與可拆卸地連接到視頻電纜的視頻端子部分 t—Video。搖攝云臺10被構(gòu)造為通過電源端子部分t-Vin向被安裝到上述照相機臺座部分 12的數(shù)字照相機1供應(yīng)輸入功率而使數(shù)字照相機1充電。換言之，搖攝云臺10充當(dāng)使數(shù)字照相機1充電的臺架(塢)。在此示例中，例如，當(dāng)從數(shù)字照相機1側(cè)發(fā)送基于所捕獲圖像的視頻信號時，搖攝云臺10被構(gòu)造為通過視頻端子部分t-Video將視頻信號輸出到外面。另外，如圖2B與圖4所示，將菜單按鈕60a布置在搖攝云臺10的主體部分11的后面部分上。根據(jù)菜單按鈕的操作，通過搖攝云臺10與數(shù)字照相機1之間的通信，將菜單顯示在例如位于數(shù)字照相機1側(cè)的顯示屏單元33a上。通過此菜單顯示，可以執(zhí)行用戶所必需的操作。但是，在示例(下述的處理示例I)如本示例中，作為用于執(zhí)行下述全景成像的觸發(fā)器之一，使用了用戶觸摸操作。更具體而言，用戶執(zhí)行了觸摸搖攝云臺10的操作。因此，例如，如圖6A所示，在主體單元11的上面部分上形成了觸摸區(qū)60b。當(dāng)用戶觸摸觸摸區(qū)60b時，安裝在搖攝云臺10 中的觸摸傳感器檢測觸摸操作。在圖6A與圖6B中，將位于虛線表示的前面?zhèn)壬系囊徊糠謪^(qū)域設(shè)置為觸摸區(qū)60b。 但是，例如，可以將主體部分11的整個上面部分設(shè)置為觸摸區(qū)60b。在圖6B中，示出了在搖攝云臺10的主體部分11的上面部分的前側(cè)、右側(cè)及左側(cè)形成了觸摸區(qū)60b、60c與60d的示例。例如，將3個觸摸傳感器安裝在搖攝云臺10內(nèi)部， 各個觸摸傳感器檢測用于觸摸區(qū)60b、60c與60d的觸摸操作。在此情況下，在數(shù)字照相機1與搖攝云臺10構(gòu)造的成像系統(tǒng)的一側(cè)，可以基于檢測觸摸操作的觸摸傳感器，確定用戶從前側(cè)、右側(cè)及左側(cè)中的哪側(cè)執(zhí)行了觸摸操作。這里，示出了形成3個觸摸區(qū)60b至60d的示例。但是，很明顯，可以包括更多的觸摸傳感器，以在多個觸摸區(qū)中精確確定執(zhí)行觸摸操作的一側(cè)。盡管圖中未示出，但是可以在搖攝云臺10上布置包括麥克風(fēng)與聲音輸入電路系統(tǒng)的聲音輸入單元(下述的聲音輸入單元62)。另外，可以在搖攝云臺10上布置包括成像透鏡、圖像傳感器、成像信號處理系統(tǒng)等的成像單元(下述的成像單元63)。下面繼續(xù)描述這些。[1-2:數(shù)字照相機]圖7示出了數(shù)字照相機1內(nèi)部結(jié)構(gòu)示例的方框圖。光學(xué)系統(tǒng)單元21例如由一組預(yù)定數(shù)目的成像透鏡、隔板等構(gòu)造，其中成像透鏡包括變焦透鏡、聚焦透鏡等。光學(xué)系統(tǒng)單元21通過使用作為成像光的入射光在圖像傳感器22 的受光表面上形成圖像。另外，光學(xué)系統(tǒng)單元21還包括用于驅(qū)動變焦透鏡、聚焦透鏡、隔板等的驅(qū)動機構(gòu)單元。通過例如控制單元27執(zhí)行的所謂照相機控制，如變焦(視角)控制、自動聚焦調(diào)節(jié)控制、自動曝光控制等控制驅(qū)動機構(gòu)的操作。圖像傳感器22執(zhí)行所謂的光電處理，其中將通過光學(xué)系統(tǒng)單元21所獲得的成像光轉(zhuǎn)換為電信號。因此，圖像傳感器22在光電轉(zhuǎn)換設(shè)備的受光表面上接收光學(xué)系統(tǒng)單元21 輸出的成像光，并且在預(yù)定的定時內(nèi)連續(xù)輸出根據(jù)被接受光的強度積累的信號電荷。因此， 輸出了與成像光相對應(yīng)的電信號(成像信號)。并未特別限制用作成像傳感器22的光電轉(zhuǎn)換設(shè)備(成像設(shè)備)。但是，在目前形勢下，例如，可以將CMOS (Complementary Metal Oxide kmiconductor，互補金屬氧化物半導(dǎo)體)傳感器，CCD (Charge Coupled Device，電荷耦合設(shè)備)等用作成像傳感器22。在使用CMOS的實例中，與成像傳感器22相對應(yīng)的設(shè)備(部件)具有額外包括與下述A/D轉(zhuǎn)換器23相對應(yīng)的模擬-數(shù)字轉(zhuǎn)換器的結(jié)構(gòu)。將成像傳感器22輸出的成像信號輸入到A/D轉(zhuǎn)換器23以將其轉(zhuǎn)換為數(shù)字信號， 并且輸入到信號處理單元對。信號處理單元M例如由DSP (Digital Signal ftOcessor，數(shù)字信號處理器)構(gòu)造。信號處理單元M根據(jù)用于A/D轉(zhuǎn)換器23輸出的數(shù)字成像信號的程序執(zhí)行預(yù)定的信號處理。信號處理單元M以一幅靜止圖像的單元(幀圖像)接收從A/D轉(zhuǎn)換器23輸出的數(shù)字成像信號。通過以一幅已被接收的靜止圖像的單元執(zhí)行用于成像信號的預(yù)定信號處理，信號處理單元M生成所捕獲圖像數(shù)據(jù)(所捕獲的靜止圖像數(shù)據(jù))，其中所捕獲圖像數(shù)據(jù)是與一幅靜止圖像對應(yīng)的圖像信號數(shù)據(jù)。另外，信號處理單元M可以通過使用以上獲得的所捕獲圖像數(shù)據(jù)，執(zhí)行用于下述主題檢測處理或者合成處理的圖像分析處理。另外，在全景成像模式的情況下，信號處理單元M亦執(zhí)行其中構(gòu)成了通過全景成像操作而獲得的多個幀圖像以生成全景成像數(shù)據(jù)的處理。當(dāng)在作為記錄媒體的存儲卡40中記錄信號處理單元M所生成的所捕獲圖像數(shù)據(jù)時，將例如與一幅靜止圖像對應(yīng)的所捕獲圖像數(shù)據(jù)從信號處理單元M輸出到編碼器/解碼器單元25。編碼器/解碼器單元25通過使用用于所捕獲圖像數(shù)據(jù)的預(yù)定靜止圖像的圖像壓縮編碼方法，執(zhí)行壓縮編碼處理，以一幅靜止圖像的單元將從圖像處理單元M輸出的所捕獲圖像數(shù)據(jù)轉(zhuǎn)換為以預(yù)定格式壓縮的圖像數(shù)據(jù)格式，并且例如在控制單元27的控制下將云臺等添加到其中。接著，編碼器/解碼器單元25將以上生成的圖像數(shù)據(jù)發(fā)送到媒體控制器26 ο媒體控制器沈在控制單元27的控制下寫入被傳輸?shù)膱D像數(shù)據(jù)以將其記錄在存儲卡40中。在此情況下，存儲卡40是記錄媒體，其中該記錄媒體例如具有符合預(yù)定規(guī)格的卡片格式的外部形狀，并且其中包括非易失性半導(dǎo)體存儲設(shè)備如閃存的構(gòu)造。其上具有被記錄圖像數(shù)據(jù)的記錄媒體可以是不同于存儲卡的形式、類型等。例如， 可以使用各種記錄媒體如光盤、硬盤、半導(dǎo)體存儲芯片諸如可拆卸地安裝的閃存芯片與全息存儲器。另外，數(shù)字照相機1可以通過允許顯示單元33顯示通過使用信號處理單元M獲得的所捕獲圖像數(shù)據(jù)的圖像，顯示所謂的穿過圖像(當(dāng)前正被成像的圖像)。
例如，信號處理單元M接收從A/D轉(zhuǎn)換器23輸出的成像信號，并且生成與一幅靜止圖像相對應(yīng)的所捕獲圖像數(shù)據(jù)，且繼續(xù)執(zhí)行此操作，以連續(xù)生成與運動圖片的幀圖像相對應(yīng)的所捕獲圖像數(shù)據(jù)。然后信號處理單元M在控制單元27的控制下將以上連續(xù)生成的所捕獲圖像數(shù)據(jù)傳輸?shù)斤@示驅(qū)動器32。顯示驅(qū)動器32基于以上信號處理單元M輸入的所捕獲圖像數(shù)據(jù)，生成用于驅(qū)動顯示單元33的驅(qū)動信號，并且將該驅(qū)動信號輸出到顯示單元33。因此，在顯示單元33上， 以一幅靜止圖像的單元依次顯示基于所捕獲圖像數(shù)據(jù)的圖像。當(dāng)用戶看見圖像時，將此時正在被捕獲的圖像顯示在顯示單元33上作為運動圖像。換言之，顯示了穿過圖像。另外，數(shù)字照相機1可以再現(xiàn)記錄在存儲卡40中的圖像數(shù)據(jù)，并且可以在顯示單元33上顯示該圖像。因此，控制單元27指定圖像數(shù)據(jù)，并且指引媒體控制器沈讀取來自存儲卡40的數(shù)據(jù)。響應(yīng)于此指引，媒體控制器沈通過訪問其中記錄被指定圖像數(shù)據(jù)的存儲卡40的地址來讀取數(shù)據(jù)，并且將讀出的數(shù)據(jù)傳輸?shù)骄幋a器/解碼器25。編碼器/解碼器25，例如在控制單元27的控制下，摘錄實際數(shù)據(jù)如從媒體控制器 26傳輸?shù)谋粔嚎s靜止圖像數(shù)據(jù)，并且根據(jù)用于被壓縮靜止圖像數(shù)據(jù)的壓縮編碼執(zhí)行解碼處理，獲得與一幅靜止圖像相對應(yīng)的所捕獲圖像數(shù)據(jù)。接著，編碼器/解碼器25將所捕獲圖像數(shù)據(jù)傳輸?shù)斤@示驅(qū)動器32。因此，在顯示單元33上再現(xiàn)并顯示與記錄在存儲卡40中的所捕獲圖像相對應(yīng)的圖像。另外，在顯示單元33中，可以與穿過圖像、圖像數(shù)據(jù)的再現(xiàn)圖像等一起顯示用戶界面圖像(操作圖像)。在此情況下，生成了例如與此時操作狀態(tài)一致的顯示圖像，如控制單元27所需的用戶界面圖像，且將該顯示圖像數(shù)據(jù)輸出到顯示驅(qū)動器32。因此，在顯示單元33上顯示了用戶界面圖像。另外，可以在顯示單元33的顯示屏上將用戶界面圖像與監(jiān)控圖像如特定菜單屏幕或者所捕獲圖像數(shù)據(jù)的再現(xiàn)圖像分開顯示。此外，用戶界面圖像可以被顯示為與監(jiān)控圖像或者所捕獲圖像數(shù)據(jù)的再現(xiàn)圖像的一部分重疊并合成?？刂茊卧?7由CPU (Central Processing Unit，中央處理單元)構(gòu)造，且與R0M28、 RAM29等一起構(gòu)成了微型計算機。在ROiCS中，例如除了由CPU如控制單元27執(zhí)行的程序之外，還存儲了與數(shù)字照相機1有關(guān)的各種類型的設(shè)定信息。RAiC9是用于CPU的主存儲設(shè)備。在本實例中，閃存30被設(shè)置為非易失性存儲區(qū)域，其用于存儲例如根據(jù)用戶操作、操作歷史等需要改變(重寫)的各種類型的設(shè)定信息。另外，在將非易失性存儲器如閃存用作為R0IC8的情況下，可以使用R0IC8的存儲區(qū)域的一部分，而不是閃存30。在本實施例中，控制單元27執(zhí)行用于自動成像的各種處理。首先，控制單元27通過改變視場，檢測(或者允許信號處理單元M檢測)來自信號處理單元M所獲得的各幀圖像的主題，并且執(zhí)行位于數(shù)字照相機1周圍區(qū)域上的主題的搜索處理(主題檢測處理)。另外，在合成處理時，控制單元27執(zhí)行最佳檢測處理，其中基于預(yù)定算法和與通過最佳合成確定處理所獲得的最佳合成(被設(shè)置為目標(biāo)合成)相符的合成，隨著主題的檢測，檢測了對被檢測主題的方面來說是最佳的合成。在執(zhí)行此成像預(yù)處理之后，控制單元27 執(zhí)行自動記錄所捕獲圖像的控制處理。另外，控制單元27也執(zhí)行用于全景成像的處理，換言之，指引以使多個幀圖像成像如全景成像，并且執(zhí)行合成處理，且在全景成像模式下執(zhí)行參數(shù)設(shè)定等。此外，控制單元 27控制搖攝云臺10執(zhí)行用于全景成像的約水平方向的旋轉(zhuǎn)運動。下面將描述這些控制處理。操作單元31有選擇地表示包括數(shù)字照相機1中的各種操作與操作信息信號輸出部分，其中該操作信息信號生成與操作件執(zhí)行的操作相對應(yīng)的操作信息信號，并且將生成的操作信息信號輸出到控制單元27。作為操作件，如圖IA與圖IB所示，存在釋放按鈕31a。另外，可以設(shè)置其它各種操作件(電源按鈕、模式按鈕、變焦操作按鈕、操作刻度盤等)。在將顯示單元33形成為觸摸面板的情況下，其觸摸傳感器是操作單元31的一個具體示例。另外，接收從遠(yuǎn)程控制器傳輸?shù)闹噶钚盘柕慕邮諉卧遣僮鲉卧?1的一個示例?？刂茊卧?7根據(jù)操作單元31輸入的操作信息信號執(zhí)行預(yù)定處理。因此，根據(jù)用戶操作執(zhí)行數(shù)字照相機1的操作。兼容搖攝云臺的通信單元34是根據(jù)搖攝云臺10側(cè)與數(shù)字照相機1側(cè)之間預(yù)定的通信協(xié)議執(zhí)行通信的一部分。例如，在將數(shù)字照相機1安裝在搖攝云臺10上的狀態(tài)下，兼容搖攝云臺的通信單元34具有用于實施將通信信號發(fā)送到搖攝云臺10側(cè)的通信單元或者接收來自搖攝云臺10 側(cè)的通信單元的通信信號的物理層構(gòu)造，和用于根據(jù)物理層的預(yù)定上層通信處理實現(xiàn)通信處理的構(gòu)造。物理層構(gòu)造包括被連接到連接器14的連接器部分，與圖2A與圖2B —致。另外，為了在搖攝云臺10側(cè)上使能充電，在各連接器中不僅布置了用于交換通信信號的端子，還布置了用于傳送充電用功率的端子。盡管圖中未示出，但是在數(shù)字照相機1 中布置了用于可拆卸地安裝蓄電池的蓄電池安裝部分，并且基于從搖攝云臺10側(cè)傳送的功率使被安裝到安裝部分的蓄電池充電。在數(shù)字照相機1中，可以布置聲音輸入單元35。聲音輸入單元35被用作檢測例如特定術(shù)語或者特定聲音(例如，鼓掌的聲音等)的語言輸入、周圍聲音的音量或者在下述自動全景成像開始時的觸發(fā)器輸入等。在本實施例中，存在這樣的情況，即輸入的聲音被用作確定使周圍人興奮的情形。此外，甚至在確定特定術(shù)語或者特定聲音的語言輸入如確定釋放定時的情況下， 設(shè)置了聲音輸入單元35。聲音輸入單元35包括麥克風(fēng)、聲音信號處理回路和確定特定聲音的聲音分析單元等，其中聲音信號處理單元包括麥克風(fēng)與麥克風(fēng)放大器。聲音的分析可以由控制單元27 執(zhí)行。另外，如數(shù)字照相機1的構(gòu)造，可以在記錄媒體如存儲卡40中考慮不包括用于記錄數(shù)據(jù)的功能的構(gòu)造示例。例如，此構(gòu)造示例與成像數(shù)據(jù)不是從內(nèi)部被記錄在記錄媒體中而是被輸出到外部設(shè)備以被顯示或者被記錄的情況相對應(yīng)。在此情況下，可以考慮其中包括發(fā)送成像數(shù)據(jù)的發(fā)送單元而不是媒體控制器沈的構(gòu)造示例。此成像裝置是從外部輸出成像數(shù)據(jù)如普通靜止圖像或者全景圖像的裝置。[1-3:搖攝云臺]圖8示出了搖攝云臺10的內(nèi)部構(gòu)造示例。如圖2B所示，在搖攝云臺10中布置了電源端子部分t-Vin與視頻端子部分 t—Video。通過電源回路61供應(yīng)通過電源端子部分t-Vin輸入的功率如搖攝云臺10內(nèi)部各單元所需的操作功率。在電源回路61中，生成了數(shù)字照相機1充電用的功率，并且通過通信單元52 (連接器)將用于充電的功率供給數(shù)字照相機1側(cè)。另外，通過通信單元52與控制單元51將從數(shù)字照相機1側(cè)傳輸?shù)囊曨l信號供給視頻端子部分t-Video。這里，搖攝云臺10各單元的操作功率被表示為通過電源輸入端子t-Vin供應(yīng)。但是，實際上，在搖攝云臺10中設(shè)置了蓄電池的安裝部分，并且可以從被安裝到安裝部分的蓄電池供應(yīng)各單元的操作功率。另外，在搖攝云臺10中布置了檢測電纜與電源端子部分t-vin或者視頻端子部分 t-Video連接/斷開的連接檢測單元59。與用于檢測電纜連接/斷開的機構(gòu)的具體構(gòu)造一樣，存在這樣的構(gòu)造例如根據(jù)電纜的連接或者拔出等打開或者關(guān)閉開關(guān)。與連接檢測單元 59 一樣，可以使用輸出識別電纜連接/拔出的檢測信號的構(gòu)造，且不特別限于其具體構(gòu)造。將連接檢測單元59的檢測信號(用于電源端子部分t-Vin的檢測信號和用于視頻端子部分t-Video的檢測信號)供給控制單元51。另外，搖攝云臺10包括如上所述的搖攝/傾斜機構(gòu)，并且作為與其對應(yīng)的部分，圖 8示出了搖攝機構(gòu)單元53、搖攝馬達M、傾斜機構(gòu)單元56和傾斜馬達57。搖攝機構(gòu)單元53被構(gòu)造為包括用于向安裝在搖攝云臺10上的數(shù)字照相機1施加沿圖4所示搖攝(水平或者向左/向右)方向的運動的機構(gòu)。通過沿向前或者向后的方向旋轉(zhuǎn)搖攝馬達M，可以獲得該機構(gòu)的運動。相似地，傾斜機構(gòu)單元56被構(gòu)造為包括用于向安裝在搖攝云臺10上的數(shù)字照相機1施加沿圖5A與圖5B所示傾斜(垂直或者向上/向下)方向的運動的機構(gòu)。通過沿向前或者向后的方向旋轉(zhuǎn)傾斜馬達57，可以獲得該機構(gòu)的運動?？刂茊卧?1由例如通過組合CPU、R0M與RAM等形成的微計算機構(gòu)造，并且控制搖攝機構(gòu)單元53與傾斜機構(gòu)單元56的運動。例如，當(dāng)控制搖攝機構(gòu)單元53時，控制單元51將指示運動方向和運動速度的信號輸出到搖攝驅(qū)動單元55。搖攝驅(qū)動單元55生成與該輸入信號相對應(yīng)的馬達驅(qū)動信號，并將生成的馬達驅(qū)動信號輸出到搖攝馬達M。例如，在該搖攝馬達是步進馬達的情況下，馬達驅(qū)動信號是根據(jù)PWM控制的脈沖信號。根據(jù)該馬達驅(qū)動信號，搖攝馬達M例如以所需的旋轉(zhuǎn)速度沿所需的旋轉(zhuǎn)方向旋轉(zhuǎn)。因此，也可以驅(qū)動搖攝機構(gòu)單元53以對應(yīng)的速度沿對應(yīng)的運動方向運動。相似地，當(dāng)控制傾斜機構(gòu)單元56時，控制單元51將指示傾斜機構(gòu)單元56所必需的運動方向和運動速度的信號輸出到傾斜驅(qū)動單元58。傾斜驅(qū)動單元58生成與該輸入信號相對應(yīng)的馬達驅(qū)動信號，并將生成的馬達驅(qū)動信號輸出到傾斜馬達57。根據(jù)該馬達驅(qū)動信號，傾斜馬達57以所需速度沿所需方向旋轉(zhuǎn)。因此，也可以驅(qū)動傾斜機構(gòu)單元56以對應(yīng)的速度沿對應(yīng)的運動方向運動。搖攝機構(gòu)單元53包括旋轉(zhuǎn)編碼器(旋轉(zhuǎn)檢測器)53a。旋轉(zhuǎn)解碼器53a將表示與搖攝機構(gòu)飯遠(yuǎn)53的旋轉(zhuǎn)運動相對應(yīng)的旋轉(zhuǎn)角度大小的信號輸出到控制單元51。類似地，傾斜機構(gòu)單元56包括旋轉(zhuǎn)解碼器56a。旋轉(zhuǎn)解碼器56a將表示與傾斜機構(gòu)單元56的旋轉(zhuǎn)運動相對應(yīng)的旋轉(zhuǎn)角度大小的信號輸出到控制單元51。因此，控制單元51可以獲得處于實時操作過程中的搖攝機構(gòu)單元53與傾斜機構(gòu) 56的旋轉(zhuǎn)角度大小的信息。通信單元52是通過預(yù)定的通信協(xié)議與位于數(shù)字照相機1內(nèi)部的兼容搖攝云臺的通信單元34通信的部分，其中數(shù)字照相機1被安裝在搖攝云臺10上。通信單元52，與搖攝云臺對應(yīng)通信單元34類似，具有用于通過有線通信或者無線通信將通信信號發(fā)送到對側(cè)通信單元或者接收來自對側(cè)通信單元的通信信號的物理層構(gòu)造，和用于實現(xiàn)與物理層的預(yù)定上層相對應(yīng)的通信處理的構(gòu)造。作為物理層構(gòu)造，包括照相機臺座部分12的連接器14，與圖2A—致。操作單元60有選擇地表示圖2B與圖4中所示的操作件如菜單按鈕60a和操作信息信號輸出部分，其中操作信息信號輸出部分生成與操作件執(zhí)行的操作相對應(yīng)的操作信息信號并將該操作信息信號輸出到控制單元51。控制單元51根據(jù)操作單元60輸入的操作信息信號執(zhí)行預(yù)定處理。另外，在向搖攝云臺10提供遠(yuǎn)程控制器的情況下，從遠(yuǎn)程控制器發(fā)送的指令信號的接收單元是操作單元60的一個示例。如參考圖6A與圖6B所示，在搖攝云臺10中可以配置觸摸傳感器，在此情況下，觸摸傳感器是操作單元60的一種類型。將用于觸摸操作的觸摸傳感器的檢測信號供給控制單元51。在搖攝云臺10中，可以布置聲音輸入單元62。聲音輸入單元62用作檢測這樣的情形，例如高漲的氛圍或者特定術(shù)語或特定聲音(例如，鼓掌等)的輸入作為自動全景成像開始時的觸發(fā)器輸入。聲音輸入單元62包括麥克風(fēng)、聲音信號處理回路和確定特定聲音的聲音分析單元等，其中聲音信號處理單元包括麥克風(fēng)放大器。聲音的分析可以由控制單元51執(zhí)行。此外，為了響應(yīng)于特定術(shù)語或者特定聲音的聲音輸入確定的情況，如在數(shù)字照相機1中確定釋放定時，可以在搖攝云臺10上布置聲音輸入單元62。另外，可以在搖攝云臺10中布置成像單元63。成像單元63被布置為檢測特定主題的存在、周圍區(qū)域中的運動或者如自動全景成像開始時的觸發(fā)器輸入等?？商鎿Q地，可以使用位于搖攝云臺10側(cè)的成像單元63，例如以通過用于控制全景成像操作的圖像分析確定周圍的情形諸如周圍區(qū)域中的興奮狀態(tài)。此外，為了確定特定主題的狀態(tài)如確定數(shù)字照相機1中的釋放定時，可以在搖攝云臺10側(cè)布置成像單元63。成像單元63包括光學(xué)系統(tǒng)單元、圖像傳感器、A/D轉(zhuǎn)換器、信號處理單元、圖像分析單元等。圖像分析單元可以由控制單元51執(zhí)行。
<2.功能構(gòu)造示例>接著，在圖9所示的方框圖中，示出了由硬件或者軟件(程序)實施的，根據(jù)本實施例的數(shù)字照相機1與搖攝云臺10的功能構(gòu)造的示例。本功能構(gòu)造示例是用于實現(xiàn)成像控制設(shè)備的構(gòu)造，其中該成像控制設(shè)備執(zhí)行本示例中成像系統(tǒng)的成像操作控制。本功能構(gòu)造示例主要是由硬件和軟件形成的控制處理功能，其中硬件如數(shù)字照相機1的控制單元27、搖攝云臺10的控制單元51等，軟件由彼此相關(guān)聯(lián)的硬件驅(qū)動。在圖9中，用于各功能的方框表示下述自動全景成像處理與自動靜止圖像成像處理特別所需的控制功能。如圖9所示，數(shù)字照相機1 (控制單元27)側(cè)包括成像與記錄控制單元81、自動靜止圖像成像控制單元82、可變成像視場控制單元83、自動全景成像控制單元84、通信處理單元85、自動成像模式控制單元86、成像歷史信息管理單元87和輸入識別單元88。成像歷史信息管理單元87實施了在執(zhí)行下述全景成像處理示例III、IV的情況下特別安裝的功能。另外，搖攝云臺10(控制單元51)側(cè)，例如包括通信處理單元71、搖攝/傾斜控制單元72與輸入識別單元73。首先，在數(shù)字照相機1側(cè)上，成像與記錄控制單元81獲得了成像操作所獲得的圖像如圖像信號的數(shù)據(jù)(被捕獲的圖像數(shù)據(jù))，并且在記錄媒體中執(zhí)行用于存儲所捕獲圖像數(shù)據(jù)的控制處理。另外，成像與記錄控制單元81控制被記錄的靜止圖像數(shù)據(jù)、顯示操作、捕獲圖像時的穿過圖像顯示操作等的再現(xiàn)。換言之，成像與記錄控制單元81控制圖7所示的光學(xué)系統(tǒng)單元21、圖像傳感器 22、A/D轉(zhuǎn)換器23、信號處理單元對、編碼器/解碼器25、媒體控制器沈、顯示驅(qū)動器32等。 換言之，成像與記錄控制單元81是控制數(shù)字照相機1的基本操作的功能部分，其中數(shù)字照相機1的基本操作包括指引光學(xué)系統(tǒng)單元21的透鏡驅(qū)動控制、圖像傳感器22的成像操作、 圖像信號處理、記錄與再現(xiàn)處理等，以及執(zhí)行靜止圖像成像等。自動靜止圖像成像控制單元82是執(zhí)行各種處理的功能部分，其中各種處理是未通過用戶的釋放操作而執(zhí)行自動靜止圖像成像處理所必需的。作為各種處理之一，存在主題檢測處理。此處理是在使用搖攝云臺10執(zhí)行搖攝或者傾斜操作的同時，通過檢查信號處理單元M所獲得的各幀圖像，允許適合于成像視場的主題(例如，人臉)的處理。因此，自動靜止圖像成像控制單元82執(zhí)行這樣的處理，如確定搖攝云臺10所需的搖攝或者傾斜操作、通過幀圖像的圖像分析檢測人物以及面部檢測。另外，作為上述處理之一，存在合成處理。合成處理是確定主題圖像在成像視場中的布置是否為最佳狀態(tài)(合成確定)并調(diào)節(jié)該合成(合成組合)的處理。為了調(diào)節(jié)該合成， 自動靜止圖像成像控制單元82執(zhí)行搖攝云臺10所需的搖攝或者傾斜操作的確定、光學(xué)系統(tǒng)單元21的變焦透鏡的驅(qū)動確定等。另外，主題檢測處理的處理功能或者用于合成處理的圖像分析處理可以不由控制單元27執(zhí)行，而由DSP (Digital Signal ftx)cessor，數(shù)字信號處理器)如信號處理單元M 執(zhí)行。因此，可以將諸如自動靜止圖像成像控制單元82之類的功能部分作為程序或者指令來實施，其中程序或者指令被供給一個或兩個控制單元27和DSP如信號處理單元24。
可變成像視場控制單元83是控制實際改變成像視場操作的功能部分。成像視場的改變由搖攝云臺10的搖攝或傾斜操作或者光學(xué)系統(tǒng)單元21的變焦操作完成。因此，可變成像視場控制單元83是執(zhí)行搖攝/傾斜控制與變焦控制的功能部分。當(dāng)攝影師通過使用數(shù)字照相機1手動執(zhí)行成像操作時，可變成像視場控制單元83 根據(jù)攝影師的變焦操作，例如控制變焦透鏡的驅(qū)動。另外，當(dāng)在將數(shù)字照相機1安裝在搖攝云臺10上的狀態(tài)下執(zhí)行自動靜止圖像成像或者全景成像時，可變成像視場控制單元83根據(jù)自動靜止圖像成像控制單元82的確定方向或者自動全景成像控制單元84傳輸?shù)姆较?，?zhí)行變焦驅(qū)動控制、搖攝驅(qū)動控制和傾斜驅(qū)動控制。在搖攝驅(qū)動控制與傾斜驅(qū)動控制中，可變成像視場控制單元83通過通信處理單元85將搖攝/傾斜控制信號發(fā)送到搖攝云臺10側(cè)。例如，當(dāng)可變成像視場控制單元83執(zhí)行合成組合等時，根據(jù)自動靜止成像控制單元82所確定的搖攝與傾斜的移動量，將用于指引移動量的搖攝/傾斜控制信號輸出到搖攝云臺10。另外，可變成像視場控制單元83根據(jù)自動靜止圖像成像控制單元82所確定的變焦放大倍率，控制光學(xué)系統(tǒng)單元21的變焦操作的驅(qū)動。此外，當(dāng)在將數(shù)字照相機1安裝在搖攝云臺10上的狀態(tài)下執(zhí)行全景成像時，可變成像視場控制單元83通過用于在全景成像過程中執(zhí)行水平方向運動的通信處理單元85， 將主要用于指引搖攝操作的搖攝/傾斜控制信號發(fā)送到搖攝云臺10。自動全景成像控制單元84是未通過用戶操作而執(zhí)行自動全景成像所需的各種處理的功能部分。作為各種處理之一，自動全景成像控制單元84在以預(yù)定的角度執(zhí)行搖攝的同時， 控制執(zhí)行用于生成全景圖像的所捕獲圖像的獲取。換言之，自動全景成像控制單元84執(zhí)行全景成像控制。因此，自動全景成像控制單元84指引可變成像視場控制單元83，以允許搖攝云臺10執(zhí)行所需的搖攝并指引成像與記錄控制單元81控制與多個用作生成全景圖像的幀相對應(yīng)的所捕獲圖像數(shù)據(jù)的獲取。另外，作為上述處理的另一處理，存在主題檢測處理。該處理是在使用搖攝云臺10 執(zhí)行搖攝/傾斜操作的同時，通過檢查信號處理單元M所獲得的各幀圖像來檢查周圍主題 (例如，人臉)存在等的處理。因此，自動全景成像控制單元84通過幀圖像數(shù)據(jù)的圖像分析，執(zhí)行諸如人物檢測或者人臉檢測之類的處理。另外，作為上述處理的另一處理，存在用于全景成像的合成處理。此情況下的合成處理是設(shè)定用于執(zhí)行全景成像處理的角度范圍、傾斜設(shè)定、變焦設(shè)定等。為了執(zhí)行合成調(diào)節(jié)，自動全景成像控制單元84確定搖攝云臺10所需的搖攝/傾斜操作及光學(xué)系統(tǒng)單元21 的變焦透鏡的驅(qū)動，并指引可變成像視場控制單元83執(zhí)行所需驅(qū)動。在此情況下，用于主題檢測處理的處理功能或者合成處理時執(zhí)行的成像分析，可以不由控制單元27執(zhí)行，而由DSP如信號處理單元M執(zhí)行。因此，還可以將功能部分如自動全景成像控制單元84作為程序或者指令來實施，其中程序或者指令將被供給一個或者兩個控制單元27和DSP如信號處理單元24。
通信處理單元85是通過預(yù)定的通信協(xié)議與包括在搖攝云臺10側(cè)上的通信單元71 通信的部分。通過通信處理單元64的通信將由可變成像視場控制單元83生成的搖攝/傾斜控制信號發(fā)送到搖攝云臺10的通信處理單元71。當(dāng)執(zhí)行自動靜止圖像成像如未通過用戶的釋放操作而執(zhí)行自動成像模式時，自動成像模式控制單元86執(zhí)行操作次序。更具體而言，自動成像模式控制單元86指引功能部分執(zhí)行下述的圖11與圖12中所示的處理。另外，自動成像模式控制單元86也將執(zhí)行觸發(fā)器的識別處理如圖11與圖12所示處理中的確定處理。例如，自動成像模式控制單元86執(zhí)行了用于使自動成像模式開始的觸發(fā)器、用于釋放定時的觸發(fā)器、用于執(zhí)行全景成像的觸發(fā)器等的識別。例如，當(dāng)執(zhí)行靜止圖像成像與記錄如自動成像等時，成像歷史信息管理單元87執(zhí)行成像時各種信息的存儲處理與記錄處理或者與被存儲的成像歷史信息相關(guān)的處理。例如可以通過使用RAiC9或閃存30的存儲區(qū)域執(zhí)行成像歷史信息的存儲。另外，成像歷史信息管理單元87基于成像歷史信息生成了下述的面部檢測圖譜 fn息等。輸入識別單元88執(zhí)行來自操作單元31的用戶操作輸入或者來自聲音輸入單元35 的聲音輸入的識別處理。接著，在圖9所示的功能構(gòu)造的搖攝云臺10 —側(cè)上，通信處理單元71是用作與通信處理單元85通信的部分，其中通信單元85位于數(shù)字照相機1側(cè)上。當(dāng)通信處理單元71接收搖攝/傾斜控制信號時，便將該搖攝/傾斜控制信號輸出到搖攝/傾斜控制單元72。搖攝/傾斜控制單元72具有執(zhí)行與搖攝/傾斜控制有關(guān)的處理的功能，例如由圖 8中所示的位于搖攝云臺10側(cè)上的控制單元51執(zhí)行的控制處理。搖攝/傾斜控制單元72根據(jù)輸入搖攝/傾斜控制信號，控制圖8中所示的搖攝驅(qū)動單元55和傾斜驅(qū)動單元58。因此，搖攝/傾斜控制單元72，例如執(zhí)行用于全景成像處理或者主題檢測處理的搖攝/傾斜，或者執(zhí)行用于獲取水平視場與垂直視場的搖攝/傾斜等， 其中水平視場與垂直視場對于合成處理是最佳的。輸入識別單元73執(zhí)行從操作單元60發(fā)送的用戶操作輸入或者從聲音輸入單元62 發(fā)送的聲音輸入的識別處理。與全景成像處理特別相關(guān)的輸入識別單元73，例如執(zhí)行參考圖6A與6B所述的觸摸傳感器輸入的識別。在此情況下，通過通信處理單元71將觸摸傳感器輸入的信息傳輸?shù)轿挥跀?shù)字照相機1側(cè)上的控制單元27。在圖9中，各控制功能部分表示為方框。但是，控制功能部分并不需要是獨立的程序模塊或者并不需要由硬件構(gòu)造。實際上，在控制功能部分的合成處理過程中，可以采用實施下述實施例的處理操作的處理。<3.全景成像概述>本實施例的數(shù)字照相機1能夠在被安裝在搖攝云臺10上的狀態(tài)下執(zhí)行自動全景成像，這里將參考圖IOA至圖IOC描述全景成像的概述。例如，圖IOA是將數(shù)字照相機1的位置作為其旋轉(zhuǎn)中心的周圍360°的場景。全景成像是用于在較寬范圍內(nèi)獲取周圍場景如一幅圖片的操作。
數(shù)字照相機1的處理如下。例如，在被安裝到搖攝云臺10上的數(shù)字照相機1執(zhí)行全景成像處理的情況下，通過搖攝云臺旋轉(zhuǎn)數(shù)字照相機1。換言之，執(zhí)行搖攝。因此，水平移動了數(shù)字照相機1的主題方向(成像視場)。在本處理中，數(shù)字照相機1，例如，如圖IOB中幀F(xiàn)1、F2、F3、…、而所標(biāo)識的，接收以各個預(yù)定的幀距(frame interval)成像的幀圖像數(shù)據(jù)。接著，通過使用各幀圖像數(shù)據(jù)Fl至而的所需區(qū)域執(zhí)行合成處理。這里，盡管未描述具體的合成處理，但是因此執(zhí)行了用于組合所捕獲圖像如多個幀圖像數(shù)據(jù)的的處理。接著，例如，數(shù)字照相機1生成了圖IOC所示的全景圖像數(shù)據(jù)，并將該全景圖像數(shù)據(jù)作為一張全景成像數(shù)據(jù)記錄在存儲卡40上。例如，當(dāng)搖攝云臺10在360°范圍內(nèi)旋轉(zhuǎn)數(shù)字照相機1時，獲得了以數(shù)字照相機1 的位置作為其旋轉(zhuǎn)中心的整個周圍區(qū)域的場景如一幅全景圖像。與通過用戶手中的數(shù)字照相機1移動主題方向的情況下的全景成像處理相比較， 由于旋轉(zhuǎn)了被安裝在搖攝云臺10上的數(shù)字照相機，所以可以獲得圖像品質(zhì)較高的全景圖像。其原因是由于各幀圖像數(shù)據(jù)的垂直均勻與恒定的搖攝速度，可以恰當(dāng)?shù)貓?zhí)行圖像合成。<4.自動成像處理〉[4-1 自動成像處理的第一示例]將描述本示例成像系統(tǒng)中的自動成像處理的第一示例。作為自動成像模式，能夠執(zhí)行包括自動靜止圖像成像與自動全景成像這兩種操作。這里，“自動靜止圖像成像”是不同于全景圖像的術(shù)語，并且是使尺寸規(guī)則的靜止圖像成像的操作。自動成像處理的第一示例是這樣的示例，即用戶通過菜單操作等提前選擇并設(shè)定要被執(zhí)行的靜止圖像成像與全景成像之一如自動成像操作，并且之后執(zhí)行使自動成像操作開始的操作。圖11示出了由圖9中所示機構(gòu)構(gòu)造執(zhí)行的數(shù)字照相機1的控制單元27的處理。當(dāng)用戶通過預(yù)定的操作指引執(zhí)行自動成像操作時，控制單元27(自動成像模式控制單元86)將處理從步驟FlOl推進到步驟F102，并檢查用戶所選擇的設(shè)定。在用戶通過菜單操作選擇了普通靜止圖像的自動成像操作的情況下，處理進行到步驟F103。換言之，當(dāng)用戶選擇了全景成像的自動成像操作時，處理進行到步驟F110。首先，將描述用戶選擇了自動靜止圖像成像操作的情況。在步驟F103中，控制單元27(自動靜止圖像成像控制單元8 設(shè)定用于自動靜止圖像成像操作的參數(shù)、算法等。例如，控制單元27設(shè)定最大傾斜角度、搖攝速度、主題檢測合成處理的算法(條件設(shè)定)、釋放定時的條件等。在執(zhí)行了用于自動靜止圖像成像操作的各種控制設(shè)定之后，控制單元27(自動靜止圖像成像控制單元8 實際上執(zhí)行了自動靜止圖像成像操作的控制處理。在自動靜止圖像成像操作中，本示例的成像系統(tǒng)執(zhí)行了自動合成組合，其中通過執(zhí)行作為成像操作準(zhǔn)備的主題檢測(搜索)操作、最佳合成確定操作與合成組合操作，將根據(jù)被檢測的主題狀況(通過主題檢測操作)而被確定為最佳的合成設(shè)定為目標(biāo)合成。接著， 成像系統(tǒng)在預(yù)定條件下自動地執(zhí)行釋放處理。因此，未通過攝影師的操作便能夠執(zhí)行合適的靜止圖像成像操作。 當(dāng)在自動靜止圖像成像模式下開始成像操作時，在步驟F104中開始捕獲要被捕獲的圖像數(shù)據(jù)。 換言之，控制單元27 (成像與記錄控制單元81)通過使用圖像傳感器22與信號處理單元M開始捕獲用于各幀的所捕獲圖像。之后，直到在步驟F105中確定結(jié)束自動靜止圖像成像操作時，執(zhí)行步驟F106至 F109的處理。在步驟F106中，執(zhí)行主題檢測處理。在步驟F107中，執(zhí)行合成處理。通過自動靜止圖像成像控制單元82的功能(更具體而言，控制單元27及/或信號處理單元24)執(zhí)行主題檢測處理與合成處理(最佳合成確定處理和合成組合處理)。在步驟F104中開始捕獲要被捕獲的圖像數(shù)據(jù)之后，信號處理單元M繼續(xù)獲取與一幅靜止圖像如通過圖像傳感器22捕獲的所捕獲圖像相對應(yīng)的幀圖像數(shù)據(jù)。自動靜止圖像成像控制單元82執(zhí)行檢測圖像部分的處理如主題檢測處理，其中該圖像部分與來自各幀圖像數(shù)據(jù)的人臉相對應(yīng)。可以執(zhí)行用于各幀的主題檢測處理，或者以與幀預(yù)定數(shù)目(提前被設(shè)定)相對應(yīng)的間距執(zhí)行主題檢測處理。在本示例中的主題檢測處理中，例如，通過使用所謂的人臉檢測技術(shù)，設(shè)定與人臉面部圖像部分的區(qū)域(用于從圖像中檢測的各主題)一致的人臉范圍。此外，基于人臉范圍大小的信息、各個人臉范圍的尺寸與位置等，獲取圖像幀內(nèi)主題數(shù)目的信息、各主題的尺寸、及各主題在圖像幀內(nèi)的位置等。另外，數(shù)幾個人臉檢測技術(shù)是眾所周知的。但是，并不特別限于本示例中采用的檢測技術(shù)。因此，可以在考慮檢測精度、設(shè)計難度等的情況下采用合適的技術(shù)。作為步驟F106中的主題檢測處理，首先，搜索存在于數(shù)字照相機1周圍的主題。與主題的搜索一樣，在通過使用數(shù)字照相機1的控制單元27(自動靜止圖像成像控制單元82與可變成像視場控制單元8 執(zhí)行搖攝云臺10的搖攝/傾斜控制或者光學(xué)系統(tǒng)單元21的變焦控制來改變成像視場的同時，通過例如信號處理單元24(或者控制單元 27)的圖像分析執(zhí)行主題檢測處理。直到檢測了來自幀圖像如所捕獲圖像數(shù)據(jù)的主題時，執(zhí)行該主題搜索。接著，通過獲取位于幀圖像內(nèi)的主題狀態(tài)，即此時間點處的成像視場完成主題搜索。在完成主題檢測處理之后，在步驟F107中，控制單元27(自動靜止圖像成像控制單元8 執(zhí)行合成處理。作為合成處理，首先，確定此時間點處的合成是否是最佳狀態(tài)。在此情況下，在基于主題檢測處理結(jié)果確定了圖像結(jié)構(gòu)(在此情況下，確定圖像幀內(nèi)的主題數(shù)目、各主題的尺寸、各主題的位置等)之后，通過使用預(yù)定算法，基于圖像結(jié)構(gòu)確定所確定的圖像結(jié)構(gòu)信息來確定最佳合成。可以基于搖攝、傾斜與變焦的各成像視場確定此情況下的合成。因此，根據(jù)確定合成是否是最佳合成的確定處理，由于確定的結(jié)果，可以根據(jù)主題檢測處理的結(jié)果(圖像幀內(nèi)的主題狀況)獲得用于獲取最佳視場的搖攝、傾斜與變焦的控制量信息。接著，當(dāng)合成并未處于最佳狀態(tài)時，為了獲得最佳合成狀態(tài)，作為合成組合，執(zhí)行搖攝/傾斜控制與變焦控制。更具體而言，控制單元27 (自動靜止圖像成像控制單元82與可變成像視場控制單元音8 將通過合成確定處理如合成組合控制獲取的搖攝與傾斜控制量的變化信息指示到位于搖攝云臺10側(cè)的控制單元51。根據(jù)該指示，搖攝云臺10的控制單元51根據(jù)被指示的控制量獲取搖攝機構(gòu)單元 53與傾斜機構(gòu)單元56的運動量，并將控制信號供給搖攝取驅(qū)動單元55與傾斜驅(qū)動單元 58，以執(zhí)行用于所獲得運動量的搖攝驅(qū)動與傾斜驅(qū)動。另外，控制單元27(自動靜止圖像成像控制單元82與可變成像視場控制單元83) 將通過光學(xué)合成確定處理而獲得的變焦成像角度信息指示到光學(xué)系統(tǒng)單元21，進而執(zhí)行光學(xué)系統(tǒng)單元21的變焦操作，以獲取被指示的圖像角度。另外，在合成組合過程中執(zhí)行合成處理、搖攝/傾斜與變焦控制時，當(dāng)確定此合成并未處于最佳合成狀態(tài)時，再次從步驟F106的主題檢測處理起執(zhí)行處理。其原因是由于搖攝/傾斜操作、變焦操作或者人物移動而使主題偏離了成像視場。當(dāng)獲得了最佳合成時，在步驟F108中，控制單元27(自動成像模式控制單元86) 執(zhí)行釋放定時確定。另外，盡管在步驟F108中存在這樣的情況，即在釋放定時確定處理過程中釋放定時并未“0K”的情況下，再次從步驟F106的主題檢測處理起執(zhí)行處理。其原因是由于主題人物的移動等而使主題偏離成像視場或者合成塌縮(collapse)。當(dāng)通過釋放定時確定處理滿足了釋放條件時，執(zhí)行所捕獲圖像的自動記錄如步驟 F109的釋放處理。更具體而言，控制單元27 (成像與記錄控制單元81)通過控制編碼器/ 解碼器25與媒體控制器沈?qū)⒋藭r間點處獲得的所捕獲圖像數(shù)據(jù)記錄在存儲卡40中。步驟F108中的釋放定時確定處理是確定預(yù)定的靜止圖像成像條件是否滿足獲取合適的靜止圖像的處理，并且可以考慮各種示例。例如，可以基于時間考慮釋放定時確定。例如，可以將預(yù)定時間從合成處理“0K” 的時間點處(例如，兩或三秒)的流逝用作為靜止圖像成像條件。在此情況下，在步驟F108 中，控制單元27(自動成像模式控制單元86)計算預(yù)定的時間，且在步驟F109中，控制單元 27 (成像與記錄控制單元81)根據(jù)預(yù)定時間的流逝執(zhí)行釋放處理。另外，在確定來自所捕獲圖像的特定主題狀態(tài)的情況下，可以確定靜止圖像成像條件到滿意為止。在步驟F108中，控制單元27(自動成像模式控制單元86)監(jiān)控通過所捕獲圖像的分析而被檢測的特定主題狀態(tài)。作為特定主題狀態(tài)，可以考慮通過合成處理而觀察到的具有特定面部表情如笑臉的主題的狀態(tài)，主題作出特定姿勢如朝成像系統(tǒng)搖手、舉手、鼓掌、打個手勢或者對著成像系統(tǒng)眨眼的狀態(tài)?？商鎿Q地，可以考慮作為主題的用戶注視成像系統(tǒng)等的狀態(tài)。在步驟F108中，控制單元27通過所捕獲圖像的圖像分析處理確定用戶的特定狀態(tài)。接著，在步驟F109中，當(dāng)確定了特定主題狀態(tài)時，確定釋放定時，并且執(zhí)行釋放處理。另外，在數(shù)字照相機1包括聲音輸入單元35的情況下，當(dāng)存在特定聲音輸出時，可以確定靜止成像條件到滿意為止。例如，用戶說出的特定術(shù)語、鼓掌的聲音、口哨的聲音等是作為靜止圖像成像條件的特定聲音。在步驟F108中，控制單元27(自動成像模式控制單元86)檢測此類特定聲音的輸入。當(dāng)基于來自聲音輸入單元35的聲音信號的分析結(jié)果來檢查此類聲音時，控制單元27確定釋放定時，并且在步驟F109中執(zhí)行釋放處理。通過重復(fù)上述步驟F106至F109的處理，自動獲取多個靜止圖像。接著，當(dāng)在步驟F105中根據(jù)預(yù)定的結(jié)束觸發(fā)器如用戶操作確定結(jié)束自動靜止圖像成像時，控制單元27的處理進行到步驟F114，執(zhí)行自動成像操作完成處理，并且在自動成像模式下完成一系列操作。在選擇并設(shè)定了自動全景成像的情況下，控制單元27的處理從步驟FllO進行到 F102。在步驟Fl 10中，控制單元27 (自動全景成像控制單元84)設(shè)定用于自動全景成像操作的參數(shù)、算法等。例如，控制單元27設(shè)定最大傾斜角度、搖攝速度、主題檢測合成處理的算法、釋放定時的條件等。在執(zhí)行了用于自動全景成像操作的各種控制設(shè)定之后，控制單元27實際上執(zhí)行了自動全景成像操作的控制處理。在自動全景成像操作過程中，本示例的成像系統(tǒng)在以預(yù)定的角度自動執(zhí)行搖攝的同時，自動獲取多個幀圖像數(shù)據(jù)，并且通過合成這些幀圖像數(shù)據(jù)執(zhí)行用于生成全景圖像數(shù)據(jù)的操作。當(dāng)在自動全景成像模式下開始成像操作時，首先，在步驟Fill中開始捕獲要被捕獲的圖像數(shù)據(jù)。換言之，控制單元27 (成像與記錄控制單元81)通過使用圖像傳感器22與信號處理單元M開始捕獲用于各幀的所捕獲圖像。之后，直到在步驟F113中確定結(jié)束自動全景成像操作的時候，執(zhí)行步驟F112的全景成像處理。下面將步驟F112的全景成像處理的具體示例作為全景成像的示例I至V予以描述。在自動成像模式下一旦執(zhí)行了全景成像操作之后，在設(shè)定完成全景成像操作的情況下，在步驟F113中確定全景成像操作的結(jié)束，并且控制單元27在步驟F114中執(zhí)行全景成像模式操作的完成處理。換言之，在自動成像模式時重復(fù)設(shè)定了全景成像操作的情況下，處理從步驟F113 返回到步驟F112，并且重復(fù)全景成像操作。接著當(dāng)存在用戶的結(jié)束操作或者完成全景成像操作的設(shè)定數(shù)目時，在步驟F113中確定全景成像操作的結(jié)束，并且控制單元27在步驟F114 中執(zhí)行自動成像模式操作的處理。如上所述，執(zhí)行了例如自動成像模式時的自動靜止成像操作與自動全景成像操作。[4-2 自動成像處理的第二示例]將參考圖12描述自動成像處理的第二示例。當(dāng)在自動成像模式下開始操作時，自動成像處理的第二示例基本上執(zhí)行自動靜止圖像成像操作。接著，在本示例中，在自動靜止圖像成像操作過程中，通過觸發(fā)器執(zhí)行自動全景成像操作。圖12示出了由圖9中所示的機構(gòu)構(gòu)造而執(zhí)行的數(shù)字照相機1的控制單元27的處理。當(dāng)用戶通過預(yù)定的操作指引執(zhí)行自動成像操作時，控制單元27(自動成像模式控制單元86)將處理從步驟F201推進到F202的，并且設(shè)定用于自動靜止圖像成像操作的參
數(shù)、算法等。在執(zhí)行了用于自動靜止圖像成像操作的各種控制設(shè)定之后，控制單元27執(zhí)行自動靜止圖像成像操作的實際控制處理。首先，在步驟F203中開始捕獲要被捕獲的圖像。換言之，控制單元27 (成像與記錄控制單元81)通過使用圖像傳感器22與信號處理單元M開始捕獲用于各幀的所捕獲圖像。之后，直到在步驟F204中確定結(jié)束自動成像模式操作之時，執(zhí)行步驟F205至F209 的處理。在步驟F205中，控制單元27(自動成像模式控制單元86)檢查是否發(fā)生了用于執(zhí)行全景成像處理的觸發(fā)器。步驟F206至F209，與圖11中所示的步驟F106至F205類似，與用于自動靜止圖像成像操作的處理相對應(yīng)。由于將要復(fù)制上述描述，所以在這里忽略具體的描述。通過重復(fù)步驟F206至F209的處理，自動執(zhí)行多個靜止圖像的成像。接著，當(dāng)在步驟F204中根據(jù)預(yù)定的結(jié)束觸發(fā)器如用戶操作確定結(jié)束自動成像模式操作時，控制單元27的處理進行到步驟F213，執(zhí)行自動成像操作的完成處理與自動成像模式結(jié)束的一系列操作。在執(zhí)行自動靜止圖像成像操作的處理中，控制單元27(自動成像模式控制單元 86)識別了預(yù)定的情形如用于全景成像處理的觸發(fā)器。將參考圖27A至圖30描述用于執(zhí)行自動全景成像處理的觸發(fā)器的示例。當(dāng)控制單元27 (自動成像模式控制單元86與自動全景成像控制單元84)在自動靜止圖像成像操作處理過程中，確定用于執(zhí)行此時間點處全景成像處理的發(fā)生時，處理進行到步驟F210。接著，控制單元27(自動全景成像控制單元84)在步驟F210中設(shè)定用于自動靜止圖像成像操作的參數(shù)、算法等。例如，控制單元27設(shè)定最大傾斜角度、搖攝速度、主題檢測合成處理的算法、釋放定時的條件等。在執(zhí)行了用于自動全景成像操作的各種控制設(shè)定之后，控制單元27實際上在步驟F211中執(zhí)行了自動全景成像操作的控制處理。步驟F211的全景成像操作的具體示例也與下述全景成像處理的示例I至V相對應(yīng)。當(dāng)完成了全景成像處理時，在步驟F212中設(shè)定用于自動靜止圖像成像操作的參數(shù)、算法等(與步驟F202中的設(shè)定相同)。接著，處理返回到步驟F204，并且控制單元27 繼續(xù)自動靜止圖像成像處理。如上所述，執(zhí)行了自動成像模式下的自動靜止圖像成像操作與自動全景成像操作。在自動成像處理的第一與第二示例中，已經(jīng)描述了在由數(shù)字照相機1與搖攝云臺10構(gòu)造的成像系統(tǒng)中執(zhí)行的處理。但是，能夠通過可變成像視場機構(gòu)與搖攝/傾斜機構(gòu)安裝為一體的數(shù)字照相機執(zhí)行上述操作。<5.全景成像處理>[5-1 處理示例 I]下面，在本實施例中，將描述全景成像處理的處理示例I至V。處理示例I至V的每一者是圖11所示的步驟F112中或者圖12所示的步驟F211中的控制單元27的處理。另外，處理示例I至V是基于控制單元27的自動全景成像控制單元84的功能而主要執(zhí)行的處理?；谧詣尤俺上窨刂茊卧?4的方向，通過使用可變視場控制單元83將搖攝/傾斜控制信號供給搖攝云臺10并控制變焦機構(gòu)的驅(qū)動，根據(jù)搖攝、傾斜與變焦的驅(qū)動及合成的確定，實現(xiàn)了搖攝、傾斜與變焦驅(qū)動。另外，基于自動全景成像控制單元84的方向，通過使用成像與記錄控制單元81控制成像系統(tǒng)，執(zhí)行成像操作。首先，將參考圖13、圖14、圖15A與圖15B描述處理示例I。本處理示例是與參考圖6A與圖6B所描述的用于搖攝云臺10的用戶觸摸操作相對應(yīng)的處理示例。更具體而言，處理示例I可以被認(rèn)為是在圖12所示的自動成像處理的第二示例中，當(dāng)控制單元27識別用于搖攝云臺10的用戶觸摸操作時，便在步驟F205中確定了用于執(zhí)行全景的觸發(fā)器的發(fā)生，并且處理從步驟F210進行到步驟F211的情況下的處理。控制單元27能夠通過與搖攝云臺10通信(輸入識別單元73 —通信處理單元71 —通信處理單元85)，識別用于搖攝云臺10的用戶觸摸操作。另外，處理示例I可以被認(rèn)為是在根據(jù)用戶觸摸操作執(zhí)行步驟F112的全景成像的情況下，甚至是在圖11所示的自動成像處理的第一示例情況下的處理。這里，圖13是示出如步驟F112或者F211中的全景成像的處理示例I。首先，控制單元27執(zhí)行了圖13中所示的步驟F121，即用于實現(xiàn)全景合成的搖攝控制，其中在該全景合成過程中，觸摸位置位于中心。換言之，在用于執(zhí)行全景成像的角度范圍內(nèi)，將用戶的觸摸位置控制在水平方向的中心。換言之，當(dāng)將用戶的觸摸位置用作與操作有關(guān)的水平位置，且該位置變?yōu)槿皥D像的中心時，設(shè)定合成。在圖6A所示的示例中，已經(jīng)描述了觸摸區(qū)60b被配置在搖攝云臺10前面?zhèn)壬系氖纠⒒诖耸纠齾⒖紙D14描述特定示例。圖14示出了搖攝云臺10與數(shù)字照相機1。這里，當(dāng)用戶觸摸觸摸區(qū)60b時，此時間點處的數(shù)字照相機1的視場方向被假定為沿水平方向的0°位置。另外，假定在180°的角度范圍內(nèi)執(zhí)行全景成像。觸摸區(qū)60b位于搖攝云臺10的前面?zhèn)壬?，并且位?°方向的位置處。因此，首先，控制單元27沿虛線箭頭Pm所標(biāo)識的逆時針方向執(zhí)行搖攝控制的 90°旋轉(zhuǎn)。根據(jù)該搖攝，270°處的位置成為數(shù)字照相機1的視場方向?？刂茊卧?7，首先在步驟F121中執(zhí)行此搖攝控制。接著，270°處的位置成為全景成像的開始位置。接著，在步驟F122中，控制單元27確定合成。在步驟F121中，通過被執(zhí)行的控制來確定搖攝方向的合成。另外，調(diào)節(jié)傾斜角度。 可以設(shè)定變焦放大倍率?？商鎿Q地，在全景成像操作中，可以不執(zhí)行傾斜設(shè)定與變焦設(shè)定。換言之，可以這樣構(gòu)造，即在步驟F121中通過被執(zhí)行的搖攝確定合成，并且繼續(xù)處理。當(dāng)確定了合成時，開始實際的全景成像操作。首先，控制單元27在步驟F123中確定釋放定時，并且在步驟FlM中，在預(yù)定的條件下控制釋放的執(zhí)行。換言之，在全景開始位置確定的合成狀態(tài)中，獲取與一幅幀相對應(yīng)的第一幀圖像數(shù)據(jù)。如圖11中所示的步驟F208所述，可以基于笑臉、特定行為、特定聲音或者主題的其它類似物執(zhí)行此情況下的釋放定時的確定。但是，在全景成像的情況中，由于在全景成像的開始處置處沒有存在人物或者主題的類似物的情況，所以可以在確定位置之后，即刻恰當(dāng)?shù)卮_定釋放定時。換言之，此情況是確定合成的確定完成以滿足用于釋放定時條件的示例。另外，圖14所示全景成像情況下的釋放并不意為靜止圖像數(shù)據(jù)的記錄，而是意為獲取要合成的圖像數(shù)據(jù)。因此，在步驟F125中，控制單元27指引搖攝云臺10側(cè)開始搖攝。在圖14所示的示例中，沿實線箭頭PN2所標(biāo)識的順時針方向從270°位置處執(zhí)行搖攝。在開始搖攝之后，控制單元84在步驟FU6中確定釋放定時，并且在步驟F127中執(zhí)行釋放控制。直到在步驟FU8中到達結(jié)束位置之時，重復(fù)上述步驟。換言之，在執(zhí)行搖攝的同時確定釋放定時，并且繼續(xù)獲得幀圖像數(shù)據(jù)?？梢哉J(rèn)為將在步驟FU6中控制例如，用于各預(yù)定時間間隔、用于各預(yù)定搖攝角度等的釋放定時確定。在如圖14所示的180°搖攝時設(shè)定并執(zhí)行全景成像的情況下，在控制單元27執(zhí)行到圖14所示的90°位置的搖攝的時間點處，確定全景的結(jié)束位置的到達。換言之，確定完成了 180°搖攝。此時，控制單元27在步驟FU9中指引搖攝云臺10側(cè)結(jié)束搖攝。另外，在步驟F130中，控制單元27控制執(zhí)行用于多個所獲得的幀圖像數(shù)據(jù)的合成處理，直到將合成的全景圖像數(shù)據(jù)記錄在存儲卡40中。如上所述，完成了圖12所示的步驟F211中或者圖11所示的步驟F112中的全景成像處理。根據(jù)該全景成像操作控制，在中心處獲得了被傳送的人物需求全景成像的全景圖像。換言之，當(dāng)在數(shù)字照相機1適合于用戶的情況下，用戶觸摸搖攝云臺10的觸摸區(qū) 60b時，首先，沿逆時針方向執(zhí)行用于搖擺的搖攝，并且接著執(zhí)行預(yù)定角度范圍內(nèi)的全景成像。執(zhí)行觸摸操作的用戶位于執(zhí)行全景成像的角度范圍的中心。因此，獲得了具有合成的全景成像，其中該合成深受需要全景成像的人們的歡迎。在上述處理示例I中，在根據(jù)基于用戶操作的觸發(fā)器執(zhí)行全景成像處理的情況下，確定全景成像處理的開始位置與結(jié)束位置，使得用于執(zhí)行用戶操作的水平位置位于全景圖像的中心。因此，實現(xiàn)了具有恰當(dāng)合成的自動全景成像處理。在圖14所示的示例中，描述了在180°范圍內(nèi)被執(zhí)行的全景成像操作。但是，在在 360°范圍內(nèi)設(shè)定要執(zhí)行的全景成像操作的情況下，將步驟F121的搖攝執(zhí)行到180°位置。
27接著，在步驟F125以及之后的步驟中，在圖14所示的180°位置處執(zhí)行一圈搖攝，將其設(shè)定為全景成像操作的開始位置。換言之，可以在用于執(zhí)行全景成像操作的角度范圍的一半范圍內(nèi)，在步驟F121中執(zhí)行朝向全景成像操作開始位置的搖攝是可行的。在圖6B中，示出了在搖攝云臺10中形成3個觸摸區(qū)60b、60c與60d的示例?？梢栽诖饲闆r下執(zhí)行處理示例，如下所述。將全景成像操作的角度范圍描述為180°。首先，圖14示出了當(dāng)用戶觸摸觸摸區(qū)60b時的處理。圖15A示出了用戶觸摸觸摸區(qū)60d的情況。與圖14類似，當(dāng)將觸摸操作開始時間點處的數(shù)字照相機1的視場方向假定為0°時，觸摸區(qū)60b與圖15A與圖15B中所示的90°
位置相對應(yīng)。當(dāng)將全景成像操作的角度范圍假定為180°時，0°位置與用于在全景圖像中心定位90°方向的開始位置相對應(yīng)。因此，在此情況下，不需要步驟F121的實際搖攝控制。其原因可以認(rèn)為是在觸摸操作的開始時間點處完成了步驟F121的操作。接著，在步驟F125及之后的步驟中，如實線箭頭PN3所標(biāo)識的，在執(zhí)行180°搖攝控制直到180°位置的同時，可以執(zhí)行全景成像操作。結(jié)果，獲得了具有合成的全景圖像，其中在該合成過程中，執(zhí)行位于90°方向處的觸摸操作的用戶位于中心。接著，將參考圖15B描述用戶觸摸觸摸區(qū)60c的情況。觸摸區(qū)60c與圖15A和圖 15B中所示的270°位置相對應(yīng)。當(dāng)全景圖像操作的角度范圍是180°時，為了將觸摸區(qū)60c的位置070°位置) 定位在全景圖像的中心，全景成像操作的開始位置必需是180°位置。因此，在此情況下，在步驟F121中，執(zhí)行虛線箭頭PN4所標(biāo)識的搖攝控制。另外，與沿順時針方向的搖攝控制一樣，全景成像操作的開始位置可以是180°位置。接著，在步驟F125及之后的步驟中，如實線箭頭PN5所標(biāo)識的，可以在從180°位置到0°位置的180°范圍內(nèi)執(zhí)行搖攝控制的同時，執(zhí)行全景成像操作。因此，獲得了具有合成的全景圖像，其中在該合成過程中，執(zhí)行位于270°方向處的觸摸操作的用戶位于中心。換言之，如圖13所示的步驟F121的處理，可以根據(jù)執(zhí)行觸摸操作的用戶的位置與全景成像操作的角度范圍，確定搖攝控制量。相同的示例可以應(yīng)用到在搖攝云臺上配置更多的觸摸區(qū)以及可以粗略估計用戶位置的情況。盡管已經(jīng)描述了將觸摸傳感器安裝在搖攝云臺10上的示例，但是存在在數(shù)字照相機1的外殼中形成觸摸傳感器的情況。同樣在此情況下，當(dāng)能夠估計操作用戶所在的方向時，可以考慮執(zhí)行如上所述的步驟F121的搖攝控制。另一方面，在很難估計用戶所在方向的情況下，可以構(gòu)造為估計此時間點處的用戶從數(shù)字照相機1的視場方向執(zhí)行觸摸操作，并且執(zhí)行圖14中所示的操作。另外，在將觸摸傳感器配置在數(shù)字照相機1側(cè)的情況下，控制單元27 (輸入識別單元88)識別觸摸操作。
另外，以上已經(jīng)描述了基于觸摸操作來估計用戶位置的處理示例。但是，可以將處理示例I應(yīng)用到除上述示例以外的能夠估計用戶位置的情況。例如，在當(dāng)識別了聲音輸入單元35(6 所獲得的特定聲音時，能夠估計生成該聲音的用戶位置的情況下，可以執(zhí)行步驟F121的搖攝控制，使得此方向位于全景圖像的中心。另外，在估計興奮情形，例如當(dāng)提高音量，且音量的提高被用作全景成像操作的觸發(fā)器時的情況下，為了將聲音的方向定位在全景圖像的中心，可以考慮執(zhí)行步驟F121的搖攝控制。另在，存在將用戶的特定姿勢、行為、手勢等認(rèn)為是用于全景成像操作的觸發(fā)器的情況。此情況是在通過所捕獲圖像信號的分析檢測特定姿勢等的情況下，在圖12所示的步驟F205中確定觸發(fā)器的發(fā)生情況。在該情況下，由于展示了特定姿勢等的用戶位于數(shù)字照相機1的視場方向，所以通過圖13所示的處理，在步驟F121中執(zhí)行圖14所示的搖攝控制，并且接著開始全景成像操作。然后，獲得具有合成的全景圖像，其中在合成過程中，用戶位于中心。[5-2:處理示例 II]隨后將參考圖16與圖17A至圖17C，描述如圖11所示的步驟F112中或者圖12所示的步驟F211中的全景成像處理示例II。處理示例II是基于預(yù)定目標(biāo)主題(人臉)的存在確定，確定全景成像操作的開始位置與結(jié)束位置的處理，其中預(yù)定目標(biāo)主題的存在確定是基于通過成像獲得的所捕獲圖像信號識別的。圖16示出了作為處理示例II的控制單元27的處理。將相同的標(biāo)號指定到與圖 13所示的上述處理相同的示例，并且忽略其具體描述。當(dāng)處理進行到圖11所示的步驟F112或者圖12所示的步驟F211，控制單元27執(zhí)行圖16所示的處理。在步驟F140中，在控制單元27執(zhí)行逆時針搖攝控制的同時，首先開始執(zhí)行人臉檢測的處理。在此情況下，控制單元27通過分析搖攝處理過程中通過成像獲地的所捕獲圖像數(shù)據(jù)，檢查人臉圖像是否存在。另外，在步驟F140的人臉檢測的開始時間點處，控制單元27開始計時。當(dāng)在預(yù)定的周期內(nèi)并未檢測到新的人臉時，處理從步驟F141進行到步驟F142，并且確定此時的水平方向位置是全景成像操作的開始位置。圖17A至圖17B示出了操作示例。圖16所示處理的開始時間點處的數(shù)字照相機 1的視場方向通過箭頭Hl標(biāo)識。假定箭頭Hl的方向為0°。首先，當(dāng)控制單元27在步驟F140中指引逆時針搖攝時，如圖17A所示虛線箭頭 PN6所標(biāo)識的，搖攝云臺10開始逆時針搖攝。此時，控制單元27通過繼續(xù)執(zhí)行人臉檢測，檢查是否從成像視場的左側(cè)檢測到新的人臉。盡管控制單元27從搖攝的開始點開始計時，但是在當(dāng)檢測新的人臉的時間點處重新設(shè)定計時，并且重新開始計數(shù)。與圖中所示的人臉FC —樣，當(dāng)用戶處于周圍區(qū)域中時，在開始虛線箭頭PN6所標(biāo)識的搖攝之后，在相對較短的時間內(nèi)從第一人的臉部FC檢測到第三人的臉部FC。但是，在檢測了第三人的臉部FC之后，幾乎檢測不到第四人的臉部FC。這里，在檢測了第三人的臉部FC之后，在視場方向位于箭頭N2所標(biāo)識方向的時間點處，在未檢測到新面孔的周期內(nèi)， 時間TMl已經(jīng)流逝。在步驟F141中，確定時間TMl的流逝為預(yù)定周期的流逝。然后，在步驟F142中，將此時的位置，即圖17所示水平方向的位置X。設(shè)定為全景成像操作的開始位置。當(dāng)如上所述確定了全景成像操作的開始位置時，與圖13的上述情況類似，控制單元27在步驟F122中確定合成，并且在步驟F123中執(zhí)行適當(dāng)?shù)亩〞r，且在步驟FlM中執(zhí)行第一釋放控制處理。然后，在步驟F125A中，開始用于全景成像操作的順時針搖攝。例如，從圖17B所示的位置X°處開始箭頭PN7所標(biāo)識的搖攝。這里，甚至在如上開始了用于成像操作的搖攝之后，控制單元27執(zhí)行人臉檢測與計時。換言之，控制單元27通過繼續(xù)執(zhí)行人臉檢測，在箭頭PN7所標(biāo)識的搖攝過程中，檢查來自視場右側(cè)的新的人臉。另外，在開始箭頭PN7所標(biāo)識的順時針搖攝之后，控制單元27從第一人臉檢測時間點的時間點處開始計時。在檢測到新的人臉的時間點處重新設(shè)定計時， 并且重新開始計數(shù)。在箭頭PN7所標(biāo)識的順時針搖攝處理過程中，控制單元27在步驟FU6中確定釋放定時，且在步驟F127中執(zhí)行釋放控制，即獲取用于生成全景圖像的幀圖像數(shù)據(jù)。例如，執(zhí)行預(yù)定時間內(nèi)、預(yù)定搖攝角度內(nèi)等的釋放控制。另外，在步驟F143中，檢查是否在預(yù)定周期內(nèi)檢測到了新的人臉。在圖17B所示的示例中，在開始箭頭PN7所標(biāo)識的搖攝之后，在相對較短的時間內(nèi)從第一人的臉部FC檢測到第三人的臉部FC。但是，在檢測到了第四人的臉部FC之后，幾乎檢測不到第五人的臉部FC。這里，在檢測到了第三人的臉部FC之后，在視場方向位于箭頭 H3所標(biāo)識方向的時間點處，假定在未檢測到新面孔的周期內(nèi)，時間TMl已經(jīng)流逝。在步驟F143中，確定時間TMl的流逝為預(yù)定周期的流逝。在預(yù)定周期流逝的情況下，處理進行到步驟F 129，并且完成用于全景成像操作的搖攝云臺10側(cè)的搖攝處理。換言之，將圖17所示水平方向的位置Y。設(shè)定為全景成像操作的結(jié)束位置。另外，控制單元27在步驟F130中控制著到此時為止所獲取的多個幀圖像的合成處理，并且控制著在存儲卡40中記錄被合成的全景圖像數(shù)據(jù)的操作。以上，完成了如圖11所示的步驟F112中或者圖12所示步驟F211中的全景成像處理。換言之，在圖16所示的處理示例II中，首先，在開始全景成像操作之前，在可變成像視場控制單元83允許搖攝云臺10執(zhí)行搖攝的同時，控制單元27(自動全景成像控制單元84)分析所捕獲的圖像信號。接著，如在全景成像操作的開始位置，當(dāng)確定目標(biāo)主題(人臉圖像)在預(yù)定的時間內(nèi)不存在的時候，控制單元27設(shè)定視場位置。此外，控制單元27 (自動全景成像控制單元84)，在執(zhí)行全景成像操作過程中，基于全景成像操作結(jié)束位置處的所捕獲圖像，當(dāng)確定目標(biāo)主題(人臉圖像)在預(yù)定的時間內(nèi)不存在的時候，設(shè)定成像視場位置。以上，通過基于來自所捕獲圖像的人臉檢測來確定全景成像操作的開始位置與結(jié)束位置，實現(xiàn)了具有恰當(dāng)合成的自動全景成像操作。例如，根據(jù)圖17A與圖17B中所示的操作，獲得了具有如圖17C所示合成的全景圖像。此圖像是將多個用戶與用作其中心的圖像中心對準(zhǔn)的圖像，并且其兩端無人。換言之， 由于未在全景圖像的兩端設(shè)置人的部分，因此獲得了具有均衡合成的全景圖像。另外，在步驟F141與F143中，基于時間TMl的計時而描述被檢測的預(yù)定周期的流逝。但是，可以不是通過計時，而是通過監(jiān)控?fù)u攝的控制量來檢測預(yù)定角度范圍的搖攝運動。換言之，監(jiān)控在未檢測到任何面孔的情況下，是否執(zhí)行了預(yù)定角度的搖攝，在步驟F142與F143中，盡管使用了時間TMl，但是可以監(jiān)控不同的時間。另外，在監(jiān)控時間的情況下，很適合根據(jù)朝向全景成像操作開始位置的搖攝速度 (虛線箭頭PN6)與全景成像操作過程中的搖攝速度(箭頭PN7)，設(shè)定預(yù)定周期的時間值。但是，為了形成通過打開兩端以均衡的方式布置人物圖像的合成，在搖攝速度恒定的情況下，在步驟F141與F143中監(jiān)控相等的時間值是可行的。盡管將目標(biāo)主題描述為人臉，但是可以考慮將除人臉之外的特定主題設(shè)定為目標(biāo)主題。另外，盡管假定并描述了在執(zhí)行搖攝的同時，執(zhí)行全了景成像操作的情況，但是可以考慮在執(zhí)行傾斜的同時，沿水平方向執(zhí)行全景成像操作的情況。在此種情況下，可以執(zhí)行這樣的處理，即在執(zhí)行傾斜的同時，通過執(zhí)行目標(biāo)主題的存在確定，確定全景成像操作的開始位置與結(jié)束位置。[5-3 處理示例 III]將參考圖18、圖19A、圖19B、圖20A、圖20B、圖21A與圖21B，描述如圖11所示的步驟F112中或者圖12所示的步驟F211中的全景成像處理示例III。處理示例III是基于表示預(yù)定主題目標(biāo)的存在的成像歷史信息，確定全景成像操作的開始位置與結(jié)束位置的處理，其中預(yù)定目標(biāo)主題的存在是基于過去獲得的所捕獲圖像信號生成的。特別地，在本示例中，控制單元27通過參考基于成像歷史信息獲得的人臉檢測圖譜信息確定目標(biāo)主題(例如，人臉)的存在分布。接著，根據(jù)該存在分布，確定全景成像操作的開始位置與結(jié)束位置。首先，將參考圖23描述成像歷史信息與人臉檢測圖譜信息。例如，在圖11所示的步驟F109與圖12所示的步驟F209中，當(dāng)執(zhí)行釋放即靜止圖像的成像與記錄操作時，控制單元27 (成像歷史信息管理單元87)執(zhí)行將成像與記錄操作時的各種信息存儲在例如RAiC9或閃存30中的處理。被存儲的信息成為成像歷史信息的內(nèi)容。將參考圖19A描述成像歷史信息內(nèi)容的示例。通過成像歷史信息單元1至η的設(shè)定形成成像歷史信息。一個成像歷史信息單元存儲與曾經(jīng)被執(zhí)行的自動成像與記錄相對應(yīng)的歷史信息。一個歷史信息單元，如圖中所示，包括文件名稱、成像日期與時間信息、變焦放大倍率信息、搖攝/傾斜位置信息、主題數(shù)目信息、個人識別信息、圖像幀內(nèi)的位置信息、尺寸信息、人臉檢測信息、面部表情信息等。文件名稱表示所捕獲圖像數(shù)據(jù)的文件名稱，其中將通過自動靜止圖像成像與記錄被記錄在存儲卡40中的所捕獲圖像數(shù)據(jù)作為文件。除了文件名稱，可以使用文件路徑。在任何情況下，基于文件名稱或者文件路徑的信息，可以將成像歷史信息單元與存儲在存儲卡40中的所捕獲圖像數(shù)據(jù)相關(guān)聯(lián)。成像日期與時間信息表示執(zhí)行相應(yīng)的自動靜止圖像與成像時的日期與時間。變焦放大倍率信息表示成像與記錄(釋放)時的變焦放大倍率。搖攝/傾斜位置信息表示當(dāng)執(zhí)行相應(yīng)的成像與記錄的時候設(shè)定的搖攝/傾斜位置。主題數(shù)目信息表示存在于相應(yīng)的所捕獲數(shù)據(jù)內(nèi)部的主題數(shù)目(被檢測的單個主題)，即通過相應(yīng)的自動成像與記錄操作而存儲在存儲卡40中的所捕獲圖像的圖像(圖像幀)。個人識別信息是存在于相應(yīng)的所捕獲圖像數(shù)據(jù)的圖像內(nèi)的各主題的人人識別結(jié)果信息(個人識別信息)。圖像幀內(nèi)的位置信息是表示圖像幀內(nèi)存在于相應(yīng)的所捕獲圖像數(shù)據(jù)內(nèi)部的各主題位置的信息。例如，圖像幀內(nèi)的位置信息可以表示為與圖像內(nèi)各主題所獲取的中心對應(yīng)的點的坐標(biāo)位置。尺寸信息是表示圖像幀內(nèi)存在于相應(yīng)的所捕獲圖像數(shù)據(jù)的圖像內(nèi)的各主題的尺寸。人臉檢測信息是表示存在于相應(yīng)的所捕獲圖像數(shù)據(jù)的圖像內(nèi)，用于個主題的被檢測人臉方向的信息。面部表情是表示存在于相應(yīng)所捕獲圖像數(shù)據(jù)的圖像內(nèi)，用于各主題的被檢測表情 (例如，笑臉、非笑臉的鑒定)的信息。例如，對于自動靜止圖像成像處理中的各個釋放處理時間點來說，存儲具有這些內(nèi)容的成像歷史信息。接著，通過維持成像歷史信息單元如成像歷史信息，可以執(zhí)行各種處理。在本實施例中，在全景成像操作中，以下使用了成像歷史信息。首先，控制單元27(成像歷史信息管理單元87)基于成像歷史信息生成了如圖19B 所示的人臉檢測圖譜信息。這是通過劃分例如用于各預(yù)定角度的搖攝云臺10周圍的360° 范圍，表示各角度位置處的用戶(人臉)是否存在(估計存在)的信息。例如，通過參考搖攝/傾斜位置信息或者各成像歷史信息單元的圖像內(nèi)的位置信息，在確定人物存在各角度位置處，在用于各角度位置的圖上設(shè)定存在標(biāo)志“ 1 ”。但是，基于周圍人物的運動不能始終如一地確定用戶操作。因此，人臉檢測圖譜信息并不需要是當(dāng)前時間點的精確圖。換言之，人臉圖信息是之后，除非在用戶運動的時候估計的用戶存在的角度位置信息。因此，為了提高估計精度，可以考慮連續(xù)更新人臉檢測圖譜信息，使得其僅僅反映從當(dāng)前時間起，預(yù)定時間范圍內(nèi)的成像歷史信息單元的成像日期與時間信息。可替換地，可以在360°范圍內(nèi)執(zhí)行自動靜止圖像成像時的人臉?biāo)阉鬟^程中，在最新周期的釋放時間點處，僅僅采用成像歷史信息生成人物檢測圖譜信息。通過參考該人臉檢測圖譜信息，可以在全景成像操作的時候，估計周圍區(qū)域中用戶的存在分布。因此，控制單元27執(zhí)行了圖18所示的處理作為全景成像處理。在全景成像處理開始時，首先，控制單元27通過參考圖18所示步驟F150中的人臉檢測圖譜信息，確定全景成像操作的開始位置與結(jié)束位置，
然后，在步驟F151中，控制單元27在全景成像操作的開始位置處執(zhí)行搖攝控制?，F(xiàn)在將參考圖20A、圖20B、圖21A與圖21B描述步驟F150與F151的操作示例。圖20A、圖20B、圖21A與圖21B中所示的角度位置與人臉檢測圖譜信息的角度位置相對應(yīng)。控制單元27將搖攝位置0°視為參考位置(見圖4)，生成人臉圖譜信息，并且估計周圍人物的存在。假定在數(shù)字照相機1與搖攝云臺10的周圍區(qū)域中存在許多用戶。然后，基于上述人臉檢測圖譜信息，例如，如圖20A所示，在各個周圍的角度位置處估計人臉FC的存在。在此情況下，控制單元27將其中人臉FC與FC之間距離最長的部分的中心設(shè)定為全景圖像的拐角。換言之，控制單元27設(shè)定了組合中心，使得其中人臉FC與FC之間距離最長的部分的中心點成為全景圖像的拐角。在360°的范圍內(nèi)執(zhí)行全景成像操作的情況下，全景成像操作的開始位置與結(jié)束位置成為相同的角度位置。在圖20A所示的情況下，基于人臉檢測圖譜信息，將圖中225° 處的位置確定為人臉FC與FC之間距離最長的部分的中心。為了在全景圖像的拐角中配置 225°處的位置，組合中心可以是45°處的位置。在此情況下，控制單元27將225°處的位置確定為全景成像操作的開始位置與結(jié)束位置。另外，圖21A示出了在270°范圍內(nèi)執(zhí)行全景成像操作的示例。在基于人臉檢測圖譜信息估計圖21A所示情形的情況下，將圖中所示135°處的位置確定為人臉FC與FC之間距離最長的部分的中心。在此情況下，控制單元27確定全景成像操作的開始位置與結(jié)束位置，使得135° 處的位置成為不包括在全景成像的270°范圍內(nèi)的角度范圍(剩余的90°范圍)的中心， 換言之，控制單元27將圖中所示315°處的位置配置為組合中心。在本示例中，可以這樣構(gòu)造將180°處的位置設(shè)定為全景成像操作的開始位置， 將90°處的位置設(shè)定為全景成像操作的結(jié)束位置。在步驟F150中，如上確定開始位置與結(jié)束位置，在步驟F151中，執(zhí)行返回到開始位置的搖攝，并且在步驟F122及之后的處理中，執(zhí)行全景成像操作。由于步驟F122至F130 與圖13中所示的步驟相同，所以忽略了其描述。另外，顯而易見，步驟FU8中確定的全景結(jié)束位置成了步驟F150中基于人臉檢測圖譜信息所確定的全景結(jié)束位置。根據(jù)本處理，在自動全景成像操作中獲得了具有良好平衡的全景圖像。例如，當(dāng)通過確定參考圖20A所述的開始位置與結(jié)束位置，在360°范圍內(nèi)執(zhí)行全景成像操作時，很大程度上能夠獲得圖20B中所示的全景圖像。換言之，形成了其中聚集人物的方向成為圖像的中心，并且人物稀少的方向為其兩端的合成。同樣在通過確定參考圖21A所述的開始位置與結(jié)束位置，在270°范圍內(nèi)執(zhí)行全景成像操作的情況下，很可能獲得具有良好平衡的全景圖像。以上，在周圍區(qū)域中基于人物的存在估計實現(xiàn)了良好的全景成像操作。另外，盡管將目標(biāo)主題描述為人臉，但是可以考慮將除人臉以外的特定主題作為目標(biāo)主題?？梢赃@樣構(gòu)造，即生成特定目標(biāo)主題的圖譜信息，且通過參考生成的圖譜信息確定全景成像操作的開始位置與結(jié)束位置。
另外，已經(jīng)假定并描述了在執(zhí)行搖攝的同時，執(zhí)行了全景成像操作的情況。但是， 也可以采用在垂直方向執(zhí)行傾斜的同時，執(zhí)行全景成像操作的情況。在此情況下，可以執(zhí)行在傾斜范圍內(nèi)生成圖譜信息，并且通過參考生成的圖譜信息確定全景成像的開始位置與結(jié)束位置的處理。[5-4 處理示例 IV]將參考圖22、圖23、圖24A、圖MB、圖25A、圖25B與圖25C，描述能夠被應(yīng)用到如圖11所示的步驟F112或者圖12所示的步驟F211的全景成像處理示例IV。處理示例IV，與上述處理示例III類似，也是基于表示預(yù)定主題目標(biāo)或者人臉檢測圖譜信息存在的成像歷史信息，確定全景成像操作的開始位置與結(jié)束位置的處理，其中預(yù)定主題目標(biāo)或者人臉檢測圖譜信息的存在是基于過去所獲得的所捕獲圖像信號生成的。但是，在處理示例IV中，基于水平方向位置處與垂直方向位置處的目標(biāo)主題的存在分布和全景圖像的尺寸執(zhí)行合成調(diào)節(jié)。更具體而言，作為合成調(diào)節(jié)，計算變焦放大倍率，并執(zhí)行使變焦機構(gòu)的變焦放大倍率發(fā)生變化的控制。將參考圖22描述控制單元27的處理。首先，在步驟F160中，通過參考人臉檢測圖譜信息，確定全景成像操作的開始位置與結(jié)束位置。其可以被認(rèn)為與上述處理示例III (圖18所示的步驟F150)的操作相同。 換言之，通過參考位于人臉檢測圖譜信息最遠(yuǎn)處的用戶的中心點確定組合中心，確定開始位置與結(jié)束位置。另外，在本示例中，假定通過用戶的設(shè)定來確定圖像尺寸，同樣根據(jù)該圖像尺寸確定全景成像操作的角度范圍。在步驟F161中，控制單元27根據(jù)圖像尺寸與主題狀態(tài)執(zhí)行變焦確定。將參考圖 24A、圖MB、圖25A、圖25B與圖25C描述本處理。假定當(dāng)在與普通全景成像的變焦?fàn)顟B(tài)相同的變焦?fàn)顟B(tài)下，不執(zhí)行任何變焦控制的情況下執(zhí)行全景成像操作時，獲得圖24A所示的全景圖像。在該全景圖像中，以相對較小的尺寸傳送人臉。另一方面，假定當(dāng)在改變變焦放大倍率的情況下執(zhí)行全景成像操作時，獲得了圖 24B所示的全景圖像。當(dāng)將圖24A與圖MB中所示的全景圖像進行比較時，可以想到就合成而言，圖24B 是優(yōu)選的。其原因是在圖24B中，改進了合成，并且以較高的精度傳送了各用戶的臉部以提
高圖像質(zhì)量。通過在執(zhí)行全景成像操作的同時執(zhí)行變焦控制，可以獲得合適的全景圖像。但是， 執(zhí)行變焦控制并不通常都是合適的。例如，存在可能通過增大變焦放大倍率排除了處于拐角的人物的情況。 因此，在本示例中，在步驟F161中，控制單元27確定是否執(zhí)行變焦控制，并且確定在根據(jù)圖像尺寸與物體分布執(zhí)行變焦控制的情況下的變焦放大倍率。當(dāng)在步驟F161中確定變焦設(shè)定時，控制單元27執(zhí)行圖23中所示的處理。首先，在步驟F191中，控制單元27計算了最大間距Xmax與Ymax。如圖25A至圖25C所示，最大間距Xmax與Ymax是水平方向和垂直方向上彼此相距最遠(yuǎn)的人臉之間的間距。
可以通過參考人臉檢測圖譜信息獲得水平方向的最大間距Xmax。換言之，可以基于位于拐角最內(nèi)側(cè)的兩個人臉之間的角度差異，如包括在全景成像操作的角度范圍內(nèi)的用戶分布，獲得最大間距Xmax。另外，為了獲得垂直方向的最大間距Ymax，例如，也可以生成現(xiàn)有人臉位置的圖信息。例如，當(dāng)使用傾斜信息與各個成像歷史信息單元的圖像幀內(nèi)的位置信息時，可以計算各個被檢測的人臉圖像沿垂直方向的絕對位置?；诒挥嬎愕奈恢蒙纱怪狈较虻膱D譜。然后，基于該圖譜確定在要執(zhí)行的全景成像操作的傾斜角度范圍內(nèi)彼此相距最遠(yuǎn)的人臉的位置，并且獲取其間的間距。例如，當(dāng)如上獲得了最大間距Xmax與Ymax時，控制單元27執(zhí)行步驟F192與F193 的計算。首先，在步驟F192中，將通過將圖25A至圖25B所示的水平尺寸Xwide增加預(yù)定系數(shù)(這里，例如為0. 8)倍所獲得的數(shù)值與最大間距Xmax —起比較。另外，在步驟F193中，將通過將垂直尺寸Ywide增加預(yù)定系數(shù)(例如為0. 8)倍所獲得的數(shù)值與最大間距Yamx —起比較。在步驟F192與F193中，當(dāng)不滿足條件“Xwide X 0. 8 < )(max”與條件“Ywide X 0. 8
<Ymax"的任何一者時，不執(zhí)行變焦控制。換言之，在此情況下，維持用于全景成像操作的普通變焦設(shè)定。另一方面，當(dāng)同時滿足上述兩個條件時，控制單元27將處理推進到步驟F194與 F195，并且執(zhí)行變焦控制。在步驟F194中，控制單元27計算了變焦放大倍率。例如，將變焦放大倍率設(shè)定到通過“Xwide/(Xmax+K) ”所獲得的放大倍率。這里，“K”是與變焦之后的頁邊距相對應(yīng)的數(shù)值。然后，在步驟F195中，控制變焦機構(gòu)具有變焦放大倍率。將參考圖25A至圖25C描述上述處理。例如，在執(zhí)行全景成像的角度范圍內(nèi)，將基于人臉檢測圖譜信息估計的周圍區(qū)域中的人物分布假定為如圖25A所示的人物分布。換言之，估計獲得了具有與如圖25A所示合成相同的合成的全景圖像。在此情況下，圖像的端部沒有任何用戶，用戶的臉部相對聚集在中心，且并不期望整個合成。在此情況下，由于最大間距Xmax遠(yuǎn)遠(yuǎn)小于水平尺寸Xwide，所以滿足條件 "XwideX0. 8 < Xmax”。另外，由于最大間距Ymax遠(yuǎn)遠(yuǎn)小于垂直尺寸Ywide，所以滿足條件“YwideX0. 8
<Ymax”。在此情況下，在步驟F194中計算變焦放大倍率，并執(zhí)行變焦控制。將變焦放大倍率設(shè)定到放大倍率，這是由于通過將頁邊距K增加到圖中所示的最大間距Xmax而獲得的數(shù)值為水平尺寸Xwide。因此，以變大的比例畫出人物的臉部，并且因此能夠獲得具有合成的全景圖像，其中在合成過程中，圖像上的布置是值得期望的。換言之，能夠獲得如參考圖24B所述的合成。
另一方面，圖25B示出了這樣的示例，即當(dāng)在普通變焦放大倍率的狀態(tài)下執(zhí)行成像操作時，在水平方向相對較寬的范圍內(nèi)形成其中分布用戶面孔的合成。在此情況下，當(dāng)增加變焦放大倍率時，就會排除位于中心處的人物面孔。在此情況下，不滿足“XwideXO. 8 < Xmax"的條件，所以并不執(zhí)行變焦控制。另外，圖25C示出了這樣的示例，即當(dāng)在普通變焦放大倍率的狀態(tài)下執(zhí)行成像操作時，在垂直方向相對較寬的范圍內(nèi)形成其中分布用戶面孔的合成。在此情況下，當(dāng)增加變焦放大倍率時，可能會排除位于上側(cè)或者下側(cè)的人物面孔。在此情況下，不滿足“YwideXO. 8 < Ymax"的條件，所以并不執(zhí)行變焦控制。這里，基于最大間距Xmax或Yamx是否是圖像尺寸Xwide或Ywide的0. 8倍，確定變焦控制的執(zhí)行。但是，可以應(yīng)用除0. 8之外的任何其它因數(shù)。在圖22所示的步驟F161中，控制單元27如上執(zhí)行變焦設(shè)定。然后，在步驟F161 中，執(zhí)行變焦控制或者不改變變焦放大倍率，并且在步驟F162中執(zhí)行朝向全景成像操作開始位置的搖攝控制。換言之，執(zhí)行朝向步驟F160中所確定的全景開始位置的搖攝。當(dāng)執(zhí)行朝向全景成像操作開始位置的搖攝時，如在步驟F123及之后的處理中，執(zhí)行全景成像操作。步驟F123至F130與圖13中所示步驟相同，因此，忽略了它的描述。另外，步驟FU8中所確定的全景結(jié)束位置是步驟F160中基于人臉檢測圖譜確定的全景結(jié)束位置。根據(jù)處理示例IV，與處理示例III類似，在自動全景成像操作中可以獲得具有良好均衡合成的全景圖像。此外，當(dāng)在確定為合適的時候，依據(jù)分布狀態(tài)改變變焦放大倍率。 因此，能夠獲得具有更高期望值與較高圖像品質(zhì)的全景圖像。另外，在步驟F161中執(zhí)行變焦控制的情況下，可以考慮獲得傾斜控制也是最佳的合成，例如，在成像視場的上端等附近分布著大多數(shù)用戶面部的情況下，可以考慮將通過變焦而將人臉聚集在全景圖像上端附近的情況作為極端情況。在此情況下，通過執(zhí)行傾斜控制，能夠?qū)崿F(xiàn)具有更合適合成的全景圖像。另外，同樣在本處理示例中，目標(biāo)主題可以是除人臉之外的特定主題。[5-5 處理示例 V]將參考圖沈描述能夠被應(yīng)用到如圖11所示的步驟F112或者圖12所示的步驟 F211的全景成像處理示例V。處理示例V是在執(zhí)行360°全景成像的情況下，將水平方向的當(dāng)前位置用作開始位置，立即執(zhí)行360°范圍內(nèi)的全景成像操作的示例。換言之，在搖攝方向上不執(zhí)行合成調(diào)節(jié)的情況下，執(zhí)行360°范圍內(nèi)的全景成像操作。在處理進行到圖11所示步驟F112或者圖12所示步驟F211，并且執(zhí)行全景成像的情況下，如圖沈所示的步驟F124，控制單元27執(zhí)行此時間點處該狀態(tài)的釋放控制。換言之，首先，在不執(zhí)行合成調(diào)節(jié)的情況下獲得第一幀圖像數(shù)據(jù)。然后，在步驟F125中開始搖攝，在步驟FU6中確定釋放定時，并且在步驟F127中執(zhí)行釋放控制。在步驟F128A中，控制單元27監(jiān)控360°搖攝的完成。可以基于控制單元27的搖攝控制量檢查搖攝角度，或者可以將搖攝云臺10的控制單元51構(gòu)造為通知360°搖攝的完成。
當(dāng)檢測到360°搖攝的完成時，控制單元27在步驟FU9中執(zhí)行搖攝完成控制，在步驟F130中執(zhí)行全景合成處理與全景圖像數(shù)據(jù)的記錄處理。處理示例V很適合作為以迅速的方式執(zhí)行全景成像操作情況下的控制方法。首先，由于在360°范圍內(nèi)執(zhí)行全景成像操作，所以能夠在水平方向不執(zhí)行合成調(diào)節(jié)的情況下，使整個周圍區(qū)域成像。與上述處理示例I至IV類似，當(dāng)在全景成像操作開始之前，執(zhí)行搖攝、傾斜與變焦的必要控制時，處理所需的時間相應(yīng)增加。因此，可能會錯過全景成像的定時。因此，當(dāng)期望立即執(zhí)行全景成像時，在或多或少地犧牲合成降級的情況下，以優(yōu)先的速度適當(dāng)?shù)剡x擇如圖26所示的處理。在圖沈中，描述了任何未被執(zhí)行的合成調(diào)節(jié)。但是，例如，可以考慮在步驟FlM之前僅僅立即執(zhí)行傾斜調(diào)節(jié)的處理示例。當(dāng)僅僅執(zhí)行傾斜操作時，可以在考慮在快速開始全景成像操作的同時，實現(xiàn)期望值更高的合成。<6.全景成像的觸發(fā)器〉[6-1 各種觸發(fā)器的示例]接著將描述用于執(zhí)行全景成像的觸發(fā)器。圖27A、圖27B、圖28A、圖^B、圖^A、圖 ^B、圖30A與圖30B示出了確定各種觸發(fā)器發(fā)生的處理示例。這些處理示例可以被看作， 例如是圖12所示步驟F205中的處理。圖27是將用戶的觸摸操作認(rèn)為是用于執(zhí)行全景成像的觸發(fā)器的示例。當(dāng)例如在自動靜止圖像成像的過程中，在步驟F300中識別觸摸操作時，控制單元 27在步驟F304中確定用于執(zhí)行全景成像的觸發(fā)器的發(fā)生。通過搖攝云臺10的控制單元 51識別用于搖攝云臺10的用戶觸摸操作，并且將觸摸操作通知給控制單元27。這是被應(yīng)用到上述處理示例I的情況的確定觸發(fā)器的處理，。另外，類似地，可以考慮控制單元27根據(jù)除了觸摸操作以外的用戶操作識別用于全景成像的觸發(fā)器的情況。圖27B是在根據(jù)自動靜止圖像成像時預(yù)定范圍的搜索完成或者靜止圖像成像的完成而執(zhí)行全景成像的情況下，確定觸發(fā)器的發(fā)生。在步驟F350中，控制單元27確定預(yù)定角度的搜索或者靜止圖像成像是否完成。當(dāng)確定其完成時，在步驟F351中，控制單元27確定用于執(zhí)行全景成像的觸發(fā)器的發(fā)生。如參考圖12所述，如步驟F206至F209，在執(zhí)行人臉?biāo)阉鞯耐瑫r執(zhí)行自動靜止圖像成像操作。例如，設(shè)定用于搖攝云臺10周圍區(qū)域的每90°區(qū)域，并且通過執(zhí)行搖攝與傾斜，使用用預(yù)定的搜索樣式，搜索用于各個區(qū)域的人臉。通過執(zhí)行貫穿該區(qū)域的搜索與靜止圖像成像，執(zhí)行用于360°周圍區(qū)域的自動靜止圖像成像處理。例如，在此時間點處，執(zhí)行全景成像。在此情況下，控制單元27確定360°范圍內(nèi)的搜索如預(yù)定角度的搜索是否完成，并在其完成的情況下，控制單元27可以識別用于全景成像的觸發(fā)器的發(fā)生。圖28A是基于現(xiàn)有預(yù)定目標(biāo)主題的數(shù)目而發(fā)生的觸發(fā)器示例，其中現(xiàn)有預(yù)定目標(biāo)主題的數(shù)目是基于所捕獲圖像識別的。這里，目標(biāo)主題被假定為人臉。在步驟F310中，控制單元27在自動靜止圖像成像開始之后檢查被檢測人臉的數(shù)目。換言之，檢查位于周圍區(qū)域中的人物數(shù)目。例如，通過積聚上述從自動靜止圖像成像開始起的成像歷史信息，可以確定位于周圍區(qū)域中的人物數(shù)目。當(dāng)使用了包含在參考圖19A與圖19B所述的成像歷史信息單元中的人物識別信息時，可以精確地確定其中能夠分別確定個人的角度處的人物數(shù)目。然后，當(dāng)在步驟F131中確定了與預(yù)定數(shù)目或者多于現(xiàn)有數(shù)目的數(shù)目相對應(yīng)的人臉時，控制單元27在步驟F312中確定用于執(zhí)行全景成像的觸發(fā)器的發(fā)生。根據(jù)此觸發(fā)器，在執(zhí)行靜止圖像的情況下，當(dāng)周圍區(qū)域中有許多人時，自動執(zhí)行全景成像。圖28B是基于多個特定目標(biāo)主題之間的間距而發(fā)生觸發(fā)器的示例。在步驟F320中，控制單元27確定在自動靜止圖像成像中間過程中被檢測的人臉之間的間距。例如，基于上述成像歷史信息之上的人臉檢測圖譜信息，能夠計算多個人物之間的間距。然后，當(dāng)在步驟F321中確定了大于等于預(yù)定數(shù)值的間距時，控制單元27在步驟 F322中確定用于執(zhí)行全景成像的觸發(fā)器。根據(jù)此觸發(fā)器，當(dāng)執(zhí)行自動靜止圖像成像時，在彼此分開一定角度的位置處有多個人物的情況下，自動執(zhí)行全景成像。圖29A是通過成像和記錄與自動靜止圖像成像過程中的預(yù)定數(shù)目相對應(yīng)的靜止圖像，執(zhí)行全景成像的情況。在步驟F330中，控制單元27在自動靜止圖像成像之前，檢查所捕獲圖像的數(shù)目 Cpct。所捕獲圖像的數(shù)目Cpct是變量，并且當(dāng)每次執(zhí)行如圖12所示步驟F209的處理時便會增加。然后，在步驟F331中，控制單元27將所捕獲圖像的數(shù)目Cpct與預(yù)定數(shù)值Cmax進行比較。當(dāng)Cpct ^ Cmax時，在步驟F332中確定用于執(zhí)行全景成像的觸發(fā)器的發(fā)生。在步驟F333中，為了確定下一個觸發(fā)器，將所捕獲圖像的數(shù)目Cpct的數(shù)值重新設(shè)定到“0”.基于觸發(fā)器的此確定，例如，在預(yù)定數(shù)值Cmax = 50的情況下，可以實現(xiàn)在自動靜止圖像成像過程中，當(dāng)每次執(zhí)行與50張所捕獲圖像相對應(yīng)的靜止圖像成像的時候，執(zhí)行全景成像的處理。圖29B是在自動靜止圖像成像過程中經(jīng)常性地執(zhí)行全景成像的情況。在步驟F340中，控制單元27檢查自動靜止圖像成像的持續(xù)時間TMcnt。持續(xù)時間 TMcnt是執(zhí)行如圖12所示步驟F206至F209中的處理的周期時間。首先，在步驟F203的時間點處開始計數(shù)。然后，在步驟F341中，控制單元27將持續(xù)時間TMcnt與預(yù)定時間TMmax進行比較。當(dāng)TMcnt彡TMmax時，控制單元27在步驟F342中確定用于執(zhí)行全景成像的觸發(fā)器的發(fā)生。在步驟F343中，為了確定下一個觸發(fā)器，將持續(xù)時間TMcnt的數(shù)值重新設(shè)定到 “0”.基于觸發(fā)器的此確定，例如，在預(yù)定數(shù)值TMmax = 5分鐘的情況下，可以實現(xiàn)在自
38動靜止圖像成像的過程中，每5分鐘執(zhí)行全景成像的處理。圖30A是基于在自動靜止圖像成像中的主題搜索期間被分析的所捕獲圖像信號或者基于周圍聲音估計的主題狀態(tài)而發(fā)生的觸發(fā)器示例。例如，確定是否存在現(xiàn)有狀態(tài)。在步驟F360中，控制單元27執(zhí)行狀態(tài)確定。例如，例如基于被檢測音量如聲音輸入的迅速增加、整個穿過圖像分析的運動量的增加等估計周圍的狀態(tài)。例如，在聚會上存在興奮狀況等的情況，或者在大家都鼓掌的情況下等，輸入音量會暫時增加，或者所捕獲圖像中主題的運動會增加。因此，基于這些情況，可以估計興奮狀況。當(dāng)在步驟F361中確定存在興奮狀況時，控制單元27在步驟F362中確定用于執(zhí)行全景成像操作的觸發(fā)器的發(fā)生。基于此觸發(fā)器確定，可以實現(xiàn)當(dāng)在自動靜止圖像成像過程中存在興奮狀況時，執(zhí)行全景成像的處理。圖30B是基于特定目標(biāo)類型而發(fā)生的觸發(fā)器示例，其中特定目標(biāo)類型是基于自動靜止成像中的主題搜索過程中的所捕獲圖像信息識別的。在步驟F370中，控制單元27執(zhí)行主題確定。例如，控制單元27確定主題是否為自然景觀。例如，甚至當(dāng)在360°周圍區(qū)域中執(zhí)行人臉?biāo)阉鲿r，檢測無人或者僅僅有一人或兩人的狀況成了用于估計主題不是聚會等而是景觀的因素。另外，其中涉及主題顏色，存在將藍色或者綠色的顏色區(qū)域估計為天空、海洋、山脈等的狀況，其中主題的亮度較高并且具有用于估計主題位于戶外的數(shù)值等的狀態(tài)成了用于景觀成像的估計因素。通過這些條件的確定，當(dāng)在步驟F371中確定了景觀成像時，控制單元27在步驟 F372中確定用于執(zhí)行全景成像的觸發(fā)器的發(fā)生。基于這些觸發(fā)器確定，在景觀成像的情況下自動執(zhí)行全景成像。[6-2 根據(jù)觸發(fā)器的處理設(shè)定]直到現(xiàn)在為止，已經(jīng)描述了各種觸發(fā)器。在利用上述觸發(fā)器中的多個觸發(fā)器的情況下，很適合根據(jù)觸發(fā)器來改變用于圖12所示步驟F211中的全景成像處理的方法。例如，當(dāng)在圖12所述步驟F205中確定觸發(fā)器的發(fā)生時，控制單元27根據(jù)步驟 F210中的觸發(fā)器類型選擇步驟F211的處理方法。圖31示出了響應(yīng)于各種觸發(fā)器的全景成像處理的合適示例。當(dāng)通過圖27A所示的觸摸操作的識別來識別觸發(fā)器時，與步驟F211的全景成像處理一樣，適合執(zhí)行參考圖13所述的處理示例I。其原因是能夠?qū)崿F(xiàn)觸摸操作件位于中心的全景成像合成。當(dāng)如圖27B所示，當(dāng)根據(jù)預(yù)定范圍的自動靜止圖像成像的完成來識別觸發(fā)器時， 與步驟F211的全景成像處理一樣，適合執(zhí)行參考圖16所述的處理示例II。其原因是能夠根據(jù)此時間點處周圍人物的位置，獲得具有恰當(dāng)合成的全景圖像。另外，在此情況下，如圖18中所示的處理示例III或者圖22中所示的處理示例 IV，可以認(rèn)為使用成像歷史信息(人臉檢測圖譜信息)的處理示例是合適的。當(dāng)如圖28A所示，當(dāng)根據(jù)自動靜止圖像成像開始之后的被檢測人臉數(shù)目大于等于預(yù)定數(shù)目來識別觸發(fā)器時，如步驟F211的全景成像處理，適合執(zhí)行參考圖16所述的處理示例II。其原因如下。例如，在檢測與預(yù)定數(shù)目或者大于預(yù)定數(shù)目的數(shù)目相對應(yīng)的人臉的情況下，執(zhí)行全景成像。因此，考慮了非周期的全景成像，很適合根據(jù)執(zhí)行全景成像的時間點處的周圍人物的位置獲得具有恰當(dāng)合成的全景圖像。另外，在聚集成像歷史信息的情況下，如圖18中所示的處理示例III或者圖22中所示的處理示例IV，在同樣的情況下，可以認(rèn)為使用成像歷史信息(人臉檢測圖譜信息)的處理示例是合適的。當(dāng)如圖28B所示，根當(dāng)據(jù)多個人臉之間的間距大于等于預(yù)定數(shù)目來識別觸發(fā)器時，如步驟F211的全景成像處理，適合執(zhí)行參考圖22所述的處理示例IV。其原因是根據(jù)間距執(zhí)行了恰當(dāng)?shù)淖兘箍刂?，從而獲得了具有良好合成的全景圖像。另外，在此情況下，可以認(rèn)為圖18所示的處理示例III或者圖16所示處理示例II 是合適的。當(dāng)如圖29A所示，當(dāng)被識別的用于每個預(yù)定數(shù)目圖像的靜止圖像成像的觸發(fā)器， 或者如圖29B所示，來識別用于成像的每個預(yù)定持續(xù)時間的周期觸發(fā)器時，如步驟F211的全景成像處理，適合執(zhí)行參考圖22所述的處理示例IV。其原因如下。由于自動靜止圖像成像的連續(xù)性，所以用于更新成像歷史信息或者人臉檢測圖譜信息會發(fā)生許多變化，并且因此能夠執(zhí)行存在性精確度較高的估計。從這點來看，圖18中所示的處理示例III也是合適的。另外，可以認(rèn)為圖16中所示的處理示例II是合適的。當(dāng)如圖30A所示，當(dāng)根據(jù)興奮狀況的確定來識別觸發(fā)器時，如步驟F211的全景成像處理，適合執(zhí)行參考圖沈所述的處理示例V。其原因是在不缺失興奮狀況的情況下，能夠以快速的方式執(zhí)行全景圖像。當(dāng)如圖30B所示，當(dāng)根據(jù)景觀的確定來識別觸發(fā)器時，如步驟F211的全景成像處理，適合執(zhí)行參考圖沈所述的處理示例V。其原因是能夠恰當(dāng)?shù)赜^察到此時間點處的景觀。 但是，根據(jù)目標(biāo)主題的設(shè)定，處理示例II、III、IV在景觀成像的情況中的應(yīng)用可以是非常合適的。圖31中所示的各種觸發(fā)器與處理示例的對應(yīng)僅僅是示例。但是，通過根據(jù)這些觸發(fā)器來改變?nèi)俺上裉幚矸椒?，可以根?jù)各種狀況執(zhí)行恰當(dāng)?shù)娜俺上瘛＠?，假定在由本示例的?shù)字照相機1與搖攝云臺10構(gòu)造的成像系統(tǒng)中進行圖12 中所示步驟F205的處理時，利用圖31中所示的這8種觸發(fā)器。在此情況下，控制單元27 在步驟F210中根據(jù)觸發(fā)器類型選擇處理示例I至V之一，在步驟F211中執(zhí)行被選擇的處理示例的控制。因此，能夠獲得具有適合于狀況的合成的全景圖像。<7.其它功能構(gòu)造示例>以上，盡管描述了本實施例的操作，但是到現(xiàn)在為止，已經(jīng)描述了這些操作如基于圖9所示功能構(gòu)造的控制處理。例如，在由數(shù)字照相機1與搖攝云臺10構(gòu)造的成像系統(tǒng)中，可以考慮除圖9所示示例以外的功能構(gòu)造示例。圖32示出了示例。圖32是數(shù)字照相機1側(cè)只包括成像與記錄控制單元81、通信處理單元85及輸入識別單元88的示例。在搖攝云臺10側(cè)(控制單元51)上，設(shè)置了通信處理單元71、輸入識別單元73、自動靜止圖像成像控制單元74、可變成像視場控制單元75、自動全景成像控制單元76、自動成像模式控制單元77與成像歷史信息管理單元78。通過各個功能單元執(zhí)行的控制處理基本上與參考圖9所述的控制處理相同。但是，差別如下。自動全景成像控制單元76與自動靜止圖像成像控制單元74提供了所捕獲圖像數(shù)據(jù)，如來自數(shù)字照相機1的信號處理單元M的各個幀圖像。然后，執(zhí)行必要的圖像分析。但是，如參考圖8所示，在將成像單元63布置在搖攝云臺10側(cè)的情況下，可以基于成像單元63的所捕獲圖像數(shù)據(jù)執(zhí)行圖像分析或者合成處理。另外，全景成像控制單元76通過通信處理單元71指引位于數(shù)字照相機1側(cè)上的控制單元27 (成像與記錄控制單元81)在全景成像操作時的搖攝處理或者全景合成處理過程中獲取幀圖像數(shù)據(jù)。 可變成像視場控制單元75響應(yīng)于自動靜止圖像成像控制單元74或自動全景成像控制單元76的方向，通過控制搖攝驅(qū)動單元55與傾斜驅(qū)動單元58，執(zhí)行用于主題檢測或者合成組合的搖攝/傾斜操作。另外，為了便于變焦控制，可變成像視場控制單元75通過通信控制單元71將變焦控制信號輸出到位于數(shù)字照相機1側(cè)上的控制單元27 (成像與記錄控制單元81)。成像與記錄控制單元81基于該變焦控制信號，控制用于合成組合的變焦處理。另外，為了實現(xiàn)例如，如圖11與圖12所示的處理操作，自動成像模式控制單元77 將方向輸送到各個功能部分。為了執(zhí)行圖11所示步驟F109或者圖12所示步驟F209的處理，自動成像模式控制單元77通過通信處理單元71將合適的控制信號輸出到位于數(shù)字照相機1側(cè)上的控制單元27 (成像與記錄控制單元81)。成像與記錄控制單元81根據(jù)該釋放控制信號控制靜止圖像記錄操作。另外，自動成像模式控制單元77執(zhí)行用戶操作的檢測，外部聲音的檢測、圖像檢測等，依次作為觸發(fā)器的識別。在搖攝云臺10中安裝了聲音輸入單元62的情況下，輸入識別單元73識別聲音輸入，并且自動成像模式控制單元77執(zhí)行觸發(fā)器的確認(rèn)。換言之，圖32示出了其中搖攝云臺10側(cè)通過獨立控制自動成像模式以將所需方向設(shè)置到數(shù)字照相機1的控制單元27，實現(xiàn)了自動靜止圖像成像與自動全景成像的示例。在此情況下，上述處理示例I至V與觸發(fā)器識別處理可以被認(rèn)為是搖攝云臺10中控制單元51的處理。以上，已經(jīng)描述了圖9與圖32中所示的功能構(gòu)造示例。當(dāng)采用圖9中所示的功能構(gòu)造時，在數(shù)字照相機1中安裝根據(jù)本發(fā)明實施例的成像控制設(shè)備。另一方面，當(dāng)采用圖32 中所示的功能構(gòu)造時，在搖攝云臺10中安裝了根據(jù)本發(fā)明的實施例的成像控制設(shè)備。根據(jù)本發(fā)明的成像控制設(shè)備至少包括自動全景成像控制單元(84或76)與可變成像視場控制單元(83或75)。因此，甚至當(dāng)將功能部分分割且安裝到單個設(shè)備時，至少包括自動全景成像控制單元(84或76)與可變成像視場控制單元(83或7 的設(shè)備是本發(fā)明實施例的示例性示例?？商鎿Q地，在將自動全景成像控制單元(84或76)與可變成像視場控制單元(83 或75)構(gòu)造為單個設(shè)備的功能部分時，通過由這些設(shè)備構(gòu)造的系統(tǒng)實施了本發(fā)明的實施例。在上述實施例中，已經(jīng)描述了執(zhí)行全景成像如自動成像的示例。但是，可以將上述實施例I至V應(yīng)用為在自動成像處理的過程中不通過用戶操作而指引全景成像的處理。
<8.程序〉根據(jù)本發(fā)明的實施例，可以設(shè)置用于成像控制設(shè)備的程序。根據(jù)本發(fā)明實施例的程序是允許諸如CPU之類的操作處理設(shè)備(控制單元27等) 執(zhí)行圖11與圖12所示的上述處理、處理示例I至V的處理及觸發(fā)器識別處理的程序。根據(jù)本發(fā)明實施例的程序允許在通過可變搖攝/傾斜結(jié)構(gòu)的驅(qū)動而改變成像視場的同時，獲得多個用作在全景成像時生成全景圖像數(shù)據(jù)的圖像數(shù)據(jù)。然后，在全景成像操作之前或者在全景成像操作過程中，該程序允許操作處理單元基于所捕獲的圖像信號，在執(zhí)行全景成像的時候，執(zhí)行確定控制操作的處理。另外，根據(jù)本發(fā)明實施例的程序根據(jù)用于執(zhí)行全景成像的觸發(fā)器，確定執(zhí)行全景成像時的控制操作。然后，該程序允許操作處理單元在通過可變搖攝/傾斜結(jié)構(gòu)的驅(qū)動而改變成像視場的同時，基于被確定的控制操作，獲得多個用作在全景成像時生成全景圖像數(shù)據(jù)的圖像數(shù)據(jù)。根據(jù)本發(fā)明實施例的成像可以被提前記錄在作為記錄媒體的HDD、ROM中，其中該記錄媒體被建立在如個人計算機、數(shù)字照相機1或者搖攝云臺10的設(shè)備中，ROM位于具有 CPU的微計算機內(nèi)部?？商鎿Q地，可以將程序暫時或者永遠(yuǎn)存儲(記錄)在可移動記錄媒體如軟盤、 CD-ROM (Compact Disc Read Only Memory, Ki^^fil^ ) > MO (Magnet Optical, ￠1 ) DVD (Digital Versatile Disc，數(shù)字化通用光盤)、藍光光盤(Blue-ray Disc)、磁盤、半導(dǎo)體存儲器或者存儲卡中。另外，可以將可移動記錄媒體設(shè)置為所謂的軟件包。另外，根據(jù)本發(fā)明實施例的程序可以從可移動記錄媒體被安裝到個人計算機等， 或者通過網(wǎng)絡(luò)如LAN (Local Area Network，局域網(wǎng))或互聯(lián)網(wǎng)從下載網(wǎng)址下載。根據(jù)本發(fā)明實施例的程序?qū)τ诔上裨O(shè)備和執(zhí)行上述實施例的處理的成像系統(tǒng)，以及對于廣泛的應(yīng)用來說是適合的。本發(fā)明包括與日本專利局公開號為JP 2010-050086、申請日為2010年3月8日的日本優(yōu)先專利申請相關(guān)的主題，在此通過應(yīng)用將其全部內(nèi)容結(jié)合于此。本領(lǐng)域技術(shù)人員應(yīng)理解，在權(quán)利要求書及其替代物的范圍內(nèi)，可以基于設(shè)計要求及其它因素作出各種修改、組合、附加組合及替代。
權(quán)利要求
1.一種用于成像裝置或者成像系統(tǒng)的成像控制設(shè)備，所述成像系統(tǒng)包括使主題成像的成像單元和所述成像單元的成像視場的可變機構(gòu)，所述成像控制設(shè)備包括可變成像視場控制單元，其控制著所述成像視場的所述可變機構(gòu)的驅(qū)動；以及自動全景成像控制單元，其在通過使用所述可變成像視場控制單元改變所述成像視場的同時，允許所述成像單元通過諸如全景成像之類的成像獲得多個用作生成全景圖像數(shù)據(jù)的圖像數(shù)據(jù)，并且基于所述成像單元所獲得的所捕獲圖像信號確定所述全景成像時的控制操作。
2.根據(jù)權(quán)利要求1所述的成像控制設(shè)備，其中所述自動全景成像控制單元基于預(yù)定主題的存在確定，確定所述全景成像的開始位置與結(jié)束位置，其中所述預(yù)定主題的存在確定是基于所述成像單元所獲得的所捕獲圖像信號識別的。
3.根據(jù)權(quán)利要求2所述的成像控制設(shè)備，其中當(dāng)所述自動全景成像控制單元允許所述可變成像視場控制單元通過使用所述可變機構(gòu)移動所述成像視場時，基于所述成像單元所獲得的所捕獲圖像信號，將確定預(yù)定角度內(nèi)或者預(yù)定時間內(nèi)不存在所述主題目標(biāo)時的所述成像視場的位置設(shè)定為所述全景成像的開始位置，且其中所述自動全景成像控制單元基于所述成像單元在執(zhí)行所述全景成像過程中所獲得的所捕獲成像信號，將確定所述預(yù)定角度或者所述預(yù)定時間內(nèi)不存在所述主題目標(biāo)時的所述成像視場的位置設(shè)定為所述全景成像的結(jié)束位置。
4.根據(jù)權(quán)利要求1所述的成像控制設(shè)備，其中所述自動全景成像控制單元基于表示預(yù)定目標(biāo)主題的存在，并且基于所述成像單元過去所獲得的所捕獲圖像數(shù)據(jù)生成的歷史信息，確定所述全景成像的開始位置與結(jié)束位置。
5.根據(jù)權(quán)利要求4所述的成像控制設(shè)備，其中所述自動全景成像控制單元基于所述歷史信息確定所述目標(biāo)主題的存在分布，并且基于所述存在分布確定所述全景成像的所述開始位置與所述結(jié)束位置。
6.根據(jù)權(quán)利要求4所述的成像控制設(shè)備，其中所述自動全景成像控制單元基于水平方向位置處與垂直方向位置處的所述目標(biāo)主題的存在分布，并且基于所述歷史信息所獲得的所述主題目標(biāo)的全景圖像尺寸執(zhí)行合成調(diào)節(jié)。
7.根據(jù)權(quán)利要求6所述的成像控制設(shè)備，其中所述自動全景成像控制單元在所述合成調(diào)節(jié)時，計算變焦放大倍率，且允許所述可變成像視場控制單元改變所述可變機構(gòu)之一的變焦機構(gòu)的所述變焦放大倍率。
8.根據(jù)權(quán)利要求1所述的成像控制設(shè)備，其中所述自動全景成像控制單元在所述全景成像開始之前的合成調(diào)節(jié)時，允許所述成像視場控制單元僅僅執(zhí)行垂直方向成像視場位置的調(diào)節(jié)控制。
9.一種用于成像裝置或者成像系統(tǒng)的成像控制設(shè)備，所述成像系統(tǒng)包括使主題成像的成像單元和所述成像單元的成像視場的可變機構(gòu)，所述成像控制設(shè)備包括可變成像視場控制單元，其控制著所述成像視場的所述可變機構(gòu)的驅(qū)動；自動全景成像控制單元，其在通過使用所述可變成像視場控制單元改變所述成像視場的同時，允許所述成像單元通過諸如全景成像之類的成像獲得多個用作生成全景圖像數(shù)據(jù)的圖像數(shù)據(jù)，并且根據(jù)用于執(zhí)行所述全景成像的觸發(fā)器來確定所述全景成像時的控制操作。
10.根據(jù)權(quán)利要求9所述的成像控制設(shè)備，其中所述自動全景成像控制單元控制著所述全景成像的開始位置與結(jié)束位置，使得在根據(jù)基于所述用戶操作的觸發(fā)器而執(zhí)行所述全景成像的情況下，用戶操作的水平位置成為全景圖像的中心。
11.根據(jù)權(quán)利要求9所述的成像控制設(shè)備，其中所述自動全景成像控制單元在根據(jù)用于360°全景成像的所述觸發(fā)器而執(zhí)行所述全景成像的情況下，將水平方向的當(dāng)前位置用作開始位置，在通過使用所述可變成像視場控制單元在水平方向的360°范圍內(nèi)改變所述成像視場的同時，執(zhí)行所述全景成像。
12.根據(jù)權(quán)利要求9所述的成像控制設(shè)備，其中所述自動全景成像控制單元根據(jù)基于現(xiàn)有預(yù)定目標(biāo)主題的數(shù)目或者多個所述預(yù)定目標(biāo)主題之間的間距而發(fā)生的觸發(fā)器，執(zhí)行全景成像控制，其中所述預(yù)定目標(biāo)主題的數(shù)目或者所述多個所述預(yù)定目標(biāo)主題之間的間距是基于所述成像單元所獲得的所捕獲圖像識別的。
13.根據(jù)權(quán)利要求9所述的成像控制設(shè)備，還包括自動靜止圖像成像控制單元，其允許所述成像裝置在通過使用所述可變成像視場控制單元改變所述成像視場的同時，通過執(zhí)行主題檢測自動來執(zhí)行靜止圖像成像，其中所述全景成像控制單元根據(jù)所述自動靜止圖像成像控制單元的控制，根據(jù)基于所述靜止圖像成像的次數(shù)、所述自動靜止圖像成像的周期、或者預(yù)定范圍內(nèi)所述自動靜止圖像成像的完成而發(fā)生的觸發(fā)器，執(zhí)行所述全景成像控制。
14.根據(jù)權(quán)利要求12所述的成像控制設(shè)備，其中所述自動全景成像控制單元基于預(yù)定目標(biāo)主題的存在確定，確定所述全景成像的開始位置與結(jié)束位置，其中所述預(yù)定目標(biāo)主題的存在確定是基于所述成像單元所獲得的所捕獲圖像識別的。
15.根據(jù)權(quán)利要求12所述的成像控制設(shè)備，其中所述自動全景成像控制單元基于表示預(yù)定目標(biāo)主題存在，并且基于所述成像單元過去所獲得的所捕獲圖像數(shù)據(jù)生成的歷史信息，確定所述全景成像的開始位置與結(jié)束位置。
16.根據(jù)權(quán)利要求9所述的成像控制設(shè)備，其中所述自動全景成像控制單元根據(jù)基于主題狀況而發(fā)生的觸發(fā)器來執(zhí)行全景成像控制，其中所述主題狀況是基于所述成像單元所獲得的所捕獲圖像及/或周圍聲音估計的。
17.根據(jù)權(quán)利要求9所述的成像控制設(shè)備，其中所述自動全景成像控制單元根據(jù)基于所述主題的預(yù)定類型而發(fā)生的觸發(fā)器執(zhí)行全景成像控制，其中所述主題的預(yù)定類型是基于所述成像單元所獲得的所捕獲圖像識別的。
18.根據(jù)權(quán)利要求16所述的成像控制設(shè)備，其中所述自動全景成像控制單元在所述全景成像開始之前的合成調(diào)節(jié)時，允許所述可變成像視場控制單元僅執(zhí)行垂直方向成像視場位置的調(diào)節(jié)控制。
19.一種用于成像裝置或者成像系統(tǒng)的控制成像的方法，所述成像系統(tǒng)包括使主題成像的成像單元和所述成像單元的成像視場的可變機構(gòu)，所述方法包括以下步驟允許所述成像單元基于所述成像單元在執(zhí)行全景成像之前或者執(zhí)行全景成像過程中所獲得的所捕獲圖像信號，在通過控制所述可變機構(gòu)的驅(qū)動與確定所述全景成像是的控制操作來改變所述成像視場的同時，通過諸如所述全景成像之類的成像獲得多個用作生成全景圖像數(shù)據(jù)的圖像數(shù)據(jù)。
20.一種用于成像裝置或者成像系統(tǒng)的控制成像的方法，所述成像系統(tǒng)包括使主題成像的成像單元和所述成像單元的成像視場的可變機構(gòu)，所述方法包括以下步驟根據(jù)用于執(zhí)行所述全景成像的觸發(fā)器確定全景成像時的控制操作；允許所述成像單元在通過控制所述可變機構(gòu)的驅(qū)動來改變所述成像視場的同時，通過所述被確定的控制操作，通過諸如所述全景成像之類的成像獲得多個用作生成全景圖像數(shù)據(jù)的圖像數(shù)據(jù)。
全文摘要
本發(fā)明涉及成像控制設(shè)備與成像控制方法。一種用于成像裝置或者成像系統(tǒng)的成像控制設(shè)備，該成像系統(tǒng)包括使主題成像的成像單元和該成像單元的成像視場的可變機構(gòu)，該成像控制設(shè)備包括可變成像視場控制單元，其控制著該成像視場的可變機構(gòu)的驅(qū)動；以及自動全景成像控制單元，其在通過使用該可變成像視場控制單元改變所述成像視場的同時，允許該成像單元通過諸如全景成像之類的成像獲得多個用作生成全景圖像數(shù)據(jù)的圖像數(shù)據(jù)，并且基于該成像單元所獲得的所捕獲圖像信號確定該全景成像時的控制操作。
文檔編號H04N5/232GK102196173SQ20111005105
公開日2011年9月21日 申請日期2011年3月1日 優(yōu)先權(quán)日2010年3月8日
發(fā)明者善積真吾 申請人:索尼公司