本發(fā)明涉及一種攝像控制裝置、攝像控制方法、相機系統(tǒng)及程序，尤其涉及一種使用能夠向平搖方向及俯仰方向轉(zhuǎn)動攝像部的相機的攝像控制。

背景技術(shù)：

以往，已知有在進行云臺攝像機的平搖及俯仰控制的裝置中，顯示表示通過云臺攝像機的平搖及俯仰的極限規(guī)定的拍攝極限視角的第1矩形框及在第1矩形框內(nèi)表示當(dāng)前的攝影范圍的第2矩形框的技術(shù)(參考專利文獻1、2)。

并且，已知有從通過云臺攝像機拍攝的多張拍攝圖像生成廣角圖像，并生成將廣角圖像貼在假想的球面的三維的球面圖像數(shù)據(jù)的圖像處理技術(shù)(參考專利文獻3)。通過進行將一部分三維球面圖像投影在顯示圖像平面的圖像處理，能夠生成以球的中心作為視點的所希望的角度的平面圖像。

以往技術(shù)文獻

專利文獻

專利文獻1：日本特開平8-214206號公報

專利文獻2：日本特開平9-102902號公報

專利文獻3：日本特開2010-049346號公報

技術(shù)實現(xiàn)要素：

發(fā)明要解決的技術(shù)課題

如圖16所示，將通過云臺攝像機910的攝像部912拍攝的即時預(yù)覽圖像顯示于用戶的便攜式終端920的系統(tǒng)中，結(jié)合被攝體的移動以平搖方向及俯仰方向轉(zhuǎn)動云臺攝像機910的攝像部912時，若比較云臺攝像機910的攝像部912的視點移動與手持便攜式終端920的用戶的視點移動，則可知雖然在跟蹤被攝體這一點上共同，但實際上為完全不同的動向的視點移動。由于這種視點移動的不同，可以說普通用戶很難在直觀上理解云臺攝像機910的攝像部912的視點移動。

并且，如圖17所示，試考察如下情況，即，將專利文獻1、2記載的技術(shù)采用于即時預(yù)覽中，將表示通過云臺攝像機910的平搖及俯仰的極限規(guī)定的拍攝極限視角的第1矩形框942與在第1矩形框942的框內(nèi)表示當(dāng)前的攝影范圍的第2矩形框944顯示于用戶的便攜式終端920中，且在第2矩形框944內(nèi)顯示通過云臺攝像機910的攝像部912拍攝的即時預(yù)覽圖像。如此一來，可知包圍被攝體圖像的第2矩形框944的動向與云臺攝像機910的攝像部912的平搖及俯仰的動向(轉(zhuǎn)動)及從云臺攝像機910的攝像部912的視點觀察的實際的被攝體的動向為完全不同的動向。例如，云臺攝像機910的攝像部912的平搖及俯仰的轉(zhuǎn)動與圖16所示的實際的被攝體的動向完全同步時，云臺攝像機910的攝像部912的動向為以平搖的轉(zhuǎn)動軸及俯仰的轉(zhuǎn)動軸為中心的轉(zhuǎn)動，并且從云臺攝像機910的攝像部912觀察的實際的被攝體的動向為相對不存在，均與第2矩形框944的動向(圖17中示出了為線形動向的情況)完全不同。由于這種動向的不同，可以說即使如專利文獻1、2記載那樣將在便攜式終端920中顯示第1矩形框942及第2矩形框944的結(jié)構(gòu)采用于即時預(yù)覽中，普通用戶也很難在直觀上掌握云臺攝像機910的攝像部912的動向及以云臺攝像機910的攝像部912的視點觀察的實際的被攝體的動向。

并且，認為包圍被攝體圖像的第2矩形框944的移動速度與用戶的操作量(例如拖動的操作量)或者平搖及俯仰的角速度相對應(yīng)，并不一定與用戶直接觀察被攝體時映現(xiàn)在用戶眼中的實際的被攝體的移動速度一致。由于這種不同，認為即使如專利文獻1、2記載那樣將在便攜式終端920中顯示第1矩形框942及第2矩形框944的結(jié)構(gòu)采用于即時預(yù)覽中，有時普通用戶反而會感到困惑。

并且，如圖17所示，作為第1矩形框942，僅以線狀顯示云臺攝像機910的攝像部912的拍攝極限視角(為可拍攝區(qū)域的邊緣)，因此用戶無法掌握位于拍攝極限視角的外側(cè)的無法拍攝區(qū)域的寬度(與無法拍攝的角度范圍的寬度相對應(yīng))。

如以上所述，第1，普通用戶很難在直觀上理解云臺攝像機910的攝像部912的視點移動。第2，即使將專利文獻1、2記載的技術(shù)采用于即時預(yù)覽中，用戶也很難掌握云臺攝像機910的攝像部912的動向及以云臺攝像機910的攝像部912的視點觀察的實際的被攝體的動向。第3，即使將專利文獻1、2記載的技術(shù)采用于即時預(yù)覽中，用戶也無法掌握無法拍攝區(qū)域的寬度。從這些理由考慮，可以說用戶實際上很難掌握拍攝極限視角。

并且，如專利文獻3記載，根據(jù)廣角圖像生成三維的球面圖像數(shù)據(jù)的圖像處理技術(shù)及根據(jù)三維的球面圖像數(shù)據(jù)生成二維的平面圖像的圖像處理技術(shù)為公知，但專利文獻3欠缺通過遠程的用戶終端即時預(yù)覽移動速度較大的被攝體時，以易判斷拍攝極限的方式顯示的觀點。因此，可以說很難在專利文獻1、2記載的結(jié)構(gòu)上組合專利文獻3記載的圖像處理技術(shù)。假設(shè)即使進行了組合，最多也是暫先制作三維的球面圖像數(shù)據(jù)之后，生成從攝像部912的視點觀察的所希望的角度的平面圖像(相當(dāng)于即時預(yù)覽圖像)。因此，即使參考專利文獻3，也不一定能解決用戶很難掌握拍攝極限視角的課題。

本發(fā)明是鑒于上述情況而完成的，其目的在于提供一種將通過能夠向平搖方向及俯仰方向轉(zhuǎn)動攝像部的相機拍攝的圖像顯示于遠程裝置時，使用戶易掌握拍攝極限。

用于解決技術(shù)課題的手段

本發(fā)明的一方式涉及一種攝像控制裝置，其控制具備如下的相機：攝像部，包含成像透鏡及成像元件；云臺機構(gòu)，能夠向平搖方向及俯仰方向轉(zhuǎn)動攝像部；及驅(qū)動部，驅(qū)動云臺機構(gòu)，所述攝像控制裝置具備：轉(zhuǎn)動命令輸入部，接受相機的云臺機構(gòu)的平搖方向及俯仰方向中的至少一個方向的轉(zhuǎn)動命令的輸入；轉(zhuǎn)動命令輸出部，對相機輸出轉(zhuǎn)動命令；圖像輸入部，從相機輸入在根據(jù)轉(zhuǎn)動命令驅(qū)動相機的云臺機構(gòu)的狀態(tài)下拍攝的即時預(yù)覽圖像；及顯示控制部，使顯示部進行如下顯示，即，在二維顯示的球面的極限顯示圖像中，重疊從相機輸入的即時預(yù)覽圖像，且根據(jù)轉(zhuǎn)動命令的輸入使極限顯示圖像沿著二維顯示的球面轉(zhuǎn)動，所述極限顯示圖像表示分別與相機的攝像部的轉(zhuǎn)動極限內(nèi)及轉(zhuǎn)動極限外對應(yīng)的可拍攝區(qū)域及無法拍攝區(qū)域。

根據(jù)本方式，用戶通過觀察重疊有即時預(yù)覽圖像的二維顯示的球面的極限顯示圖像且根據(jù)轉(zhuǎn)動命令的輸入沿著球面轉(zhuǎn)動的極限顯示圖像，能夠以從相機的視點觀察的感覺觀察根據(jù)轉(zhuǎn)動命令的輸入而變化的即時預(yù)覽，且能夠觀察無法拍攝區(qū)域的寬度，因此易在直觀上掌握拍攝極限。

本發(fā)明的一方式中，當(dāng)轉(zhuǎn)動命令為向超過相機的攝像部的轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令時，通過轉(zhuǎn)動命令輸出部將相機的攝像部的角度設(shè)定在轉(zhuǎn)動極限內(nèi)，且通過顯示控制部在極限顯示圖像中超過可拍攝區(qū)域與無法拍攝區(qū)域的邊界而移動即時預(yù)覽圖像。

根據(jù)本方式，即使是向超過相機的攝像部的轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令，即時預(yù)覽圖像也在極限顯示圖像中超過可拍攝區(qū)域與無法拍攝區(qū)域的邊界而移動，因此用戶能夠觀察按照轉(zhuǎn)動命令移動的即時預(yù)覽圖像來確認攝像控制裝置在反應(yīng)，且轉(zhuǎn)動命令輸入與即時預(yù)覽圖像的移動始終匹配，因此易操作，能夠避免給用戶帶來違和感。另外，用戶通過同時觀察極限顯示圖像中的無法拍攝區(qū)域的顯示與即時預(yù)覽圖像，能夠容易認識到自己所輸入的轉(zhuǎn)動命令為向超過轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令。

本發(fā)明的一方式中，當(dāng)轉(zhuǎn)動命令為向超過相機的攝像部的轉(zhuǎn)動極限的角度或向達到轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令時，通過轉(zhuǎn)動命令輸出部將相機的攝像部的角度設(shè)定在轉(zhuǎn)動極限內(nèi)，且通過顯示控制部進行在極限顯示圖像的可拍攝區(qū)域與無法拍攝區(qū)域的邊界搖動即時預(yù)覽圖像的顯示。

根據(jù)本方式，當(dāng)轉(zhuǎn)動命令為向超過相機的攝像部的轉(zhuǎn)動極限的角度或向達到轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令時，進行在極限顯示圖像的可拍攝區(qū)域與無法拍攝區(qū)域的邊界搖動即時預(yù)覽圖像的顯示，因此用戶能夠認識到裝置對轉(zhuǎn)動命令有反應(yīng)，且能夠容易認識到自己所輸入的轉(zhuǎn)動命令為向超過轉(zhuǎn)動極限的角度或向達到轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令。

本發(fā)明的一方式中，顯示控制部在極限顯示圖像內(nèi)顯示如下區(qū)域，即，若將相機的攝像部朝向順時針的轉(zhuǎn)動極限及逆時針的轉(zhuǎn)動極限中離當(dāng)前的角度較近的轉(zhuǎn)動極限轉(zhuǎn)動，則無法拍攝，但若朝向離當(dāng)前的角度較遠的轉(zhuǎn)動極限轉(zhuǎn)動，則能夠拍攝的區(qū)域。

根據(jù)本方式，在極限顯示圖像內(nèi)顯示如下區(qū)域，即，若將相機的攝像部朝向順時針的轉(zhuǎn)動極限及逆時針的轉(zhuǎn)動極限中離當(dāng)前的角度較近的轉(zhuǎn)動極限轉(zhuǎn)動，則無法拍攝，但若朝向離當(dāng)前的角度較遠的轉(zhuǎn)動極限轉(zhuǎn)動，則能夠拍攝的區(qū)域，因此用戶能夠掌握若反轉(zhuǎn)為相反方向的轉(zhuǎn)動命令則能夠拍攝。

本發(fā)明的一方式中，顯示控制部在極限顯示圖像中與轉(zhuǎn)動極限內(nèi)對應(yīng)的可拍攝區(qū)域顯示通過相機的攝像部預(yù)先以平搖方向及俯仰方向的可轉(zhuǎn)動的角度拍攝的靜態(tài)圖像。

根據(jù)本方式，用戶通過觀察顯示于可拍攝區(qū)域的靜態(tài)圖像與無法拍攝區(qū)域的顯示，能夠準確地掌握實際空間中的即時預(yù)覽圖像的位置，并且能夠準確地掌握無法拍攝區(qū)域。

本發(fā)明的一方式中，顯示控制部將通過相機的攝像部在平搖方向及俯仰方向的可轉(zhuǎn)動的整周拍攝的靜態(tài)圖像顯示于可拍攝區(qū)域。

根據(jù)本方式，通過觀察在相機的攝像部的可轉(zhuǎn)動的整周拍攝的靜止圖像與無法拍攝區(qū)域的顯示，能夠更準確地掌握實際空間中的即時預(yù)覽圖像的位置，并且能夠更準確地掌握無法拍攝區(qū)域。

本發(fā)明的一方式中，具備：變焦命令輸入部，接受相機中的即時預(yù)覽圖像的光學(xué)或電子變焦命令的輸入；及變焦命令輸出部，對相機輸出變焦命令，圖像輸入部從相機輸入根據(jù)變焦命令通過相機變焦的即時預(yù)覽圖像，顯示控制部以與變焦命令對應(yīng)的尺寸將即時預(yù)覽圖像顯示于顯示部。

根據(jù)本方式，極限顯示圖像內(nèi)的可拍攝區(qū)域及即時預(yù)覽圖像以與變焦命令對應(yīng)的尺寸重疊于極限顯示圖像，因此用戶能夠準確地掌握根據(jù)變焦命令而變化的即時預(yù)覽。

本發(fā)明的一方式中，顯示控制部除了重疊于極限顯示圖像的即時預(yù)覽圖像以外，另將即時預(yù)覽圖像顯示于顯示部。

根據(jù)本方式，用戶能夠根據(jù)極限顯示圖像(為二維顯示的球面的圖像)中的即時預(yù)覽圖像，輕松地掌握當(dāng)前的即時預(yù)覽與無法拍攝區(qū)域之間的關(guān)系，且能夠根據(jù)極限顯示圖像外的即時預(yù)覽圖像(為二維顯示的非球面的圖像)準確地掌握當(dāng)前的即時預(yù)覽。

本發(fā)明的一方式涉及一種具備攝像控制裝置及相機的相機系統(tǒng)。

本發(fā)明的一方式涉及一種攝像控制方法，通過該方法控制具備如下的相機：攝像部，包含成像透鏡及成像元件；云臺機構(gòu)，能夠向平搖方向及俯仰方向轉(zhuǎn)動攝像部；及驅(qū)動部，驅(qū)動云臺機構(gòu)，所述攝像控制方法包含：接受相機的云臺機構(gòu)的平搖方向及俯仰方向中的至少一個方向的轉(zhuǎn)動命令的輸入的步驟；對相機輸出轉(zhuǎn)動命令的步驟；從相機輸入在根據(jù)轉(zhuǎn)動命令驅(qū)動相機的云臺機構(gòu)的狀態(tài)下拍攝的即時預(yù)覽圖像的步驟；及在二維顯示的球面的極限顯示圖像中，重疊從相機輸入的即時預(yù)覽圖像，且根據(jù)轉(zhuǎn)動命令的輸入使極限顯示圖像沿著二維顯示的球面轉(zhuǎn)動的步驟，所述極限顯示圖像表示分別與相機的攝像部的轉(zhuǎn)動極限內(nèi)及轉(zhuǎn)動極限外對應(yīng)的可拍攝區(qū)域及無法拍攝區(qū)域。

本發(fā)明的一方式涉及一種程序，通過該程序控制具備如下的相機：攝像部，包含成像透鏡及成像元件；云臺機構(gòu)，能夠向平搖方向及俯仰方向轉(zhuǎn)動攝像部；及驅(qū)動部，驅(qū)動云臺機構(gòu)，所述程序使計算機執(zhí)行如下步驟：接受相機的云臺機構(gòu)的平搖方向及俯仰方向中的至少一個方向的轉(zhuǎn)動命令的輸入的步驟；對相機輸出轉(zhuǎn)動命令的步驟；從相機輸入在根據(jù)轉(zhuǎn)動命令驅(qū)動相機的云臺機構(gòu)的狀態(tài)下拍攝的即時預(yù)覽圖像的步驟；及在二維顯示的球面的極限顯示圖像中，重疊從相機輸入的即時預(yù)覽圖像，且根據(jù)轉(zhuǎn)動命令的輸入使極限顯示圖像沿著二維顯示的球面轉(zhuǎn)動的步驟，所述極限顯示圖像表示分別與相機的攝像部的轉(zhuǎn)動極限內(nèi)及轉(zhuǎn)動極限外對應(yīng)的可拍攝區(qū)域及無法拍攝區(qū)域。記錄有該程序且能夠計算機讀取的非暫時性記錄介質(zhì)也包含于本發(fā)明的一方式。

發(fā)明效果

根據(jù)本發(fā)明，將通過能夠向平搖方向及俯仰方向轉(zhuǎn)動攝像部的相機拍攝的圖像顯示于遠程裝置時，能夠使用戶易掌握拍攝極限視角。

附圖說明

圖1是表示云臺攝像機及智能手機的一例的外觀的立體圖。

圖2是表示云臺攝像機的一例的內(nèi)部結(jié)構(gòu)的框圖。

圖3是表示作為攝像控制裝置的一例的智能手機的硬件結(jié)構(gòu)例的框圖。

圖4是表示本發(fā)明的主要部分的內(nèi)部結(jié)構(gòu)例的框圖。

圖5(A)是表示平搖方向的轉(zhuǎn)動極限的一例的云臺攝像機的俯視圖，圖5(B)是表示俯仰方向的轉(zhuǎn)動極限的一例的云臺攝像機的側(cè)視圖。

圖6是用于說明轉(zhuǎn)動極限與極限顯示圖像的無法拍攝區(qū)域之間的關(guān)系的第1說明圖。

圖7是用于說明轉(zhuǎn)動極限與極限顯示圖像的無法拍攝區(qū)域之間的關(guān)系的第2說明圖。

圖8是用于說明轉(zhuǎn)動極限與極限顯示圖像的無法拍攝區(qū)域之間的關(guān)系的第3說明圖。

圖9是表示顯示控制處理的一例的流程的流程圖。

圖10是表示極限顯示圖像及即時預(yù)覽圖像的顯示例的說明圖。

圖11(A)～圖11(C)是用于說明極限顯示圖像根據(jù)轉(zhuǎn)動命令的輸入而沿著二維顯示的球面轉(zhuǎn)動的狀況的說明圖。

圖12是針對向超過轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令的顯示控制的說明圖。

圖13是顯示向相反方向轉(zhuǎn)動時的可拍攝區(qū)域的顯示控制的說明圖。

圖14是在可拍攝區(qū)域顯示預(yù)先拍攝的靜態(tài)圖像的顯示控制的說明圖。

圖15(A)～圖15(D)是用于說明變焦命令與極限顯示圖像之間的關(guān)系的說明圖。

圖16是用于說明本發(fā)明的課題的第1說明圖。

圖17是用于說明本發(fā)明的課題的第2說明圖。

具體實施方式

以下，參考附圖對本發(fā)明的實施方式進行說明。

[云臺攝像機及智能手機的外觀例]

如圖1(表示云臺攝像機10及智能手機100的一例的外觀的立體圖)所示，云臺攝像機10具有裝置主體12、支座14、固定于支座14并且轉(zhuǎn)動自如地保持攝像部20的保持部16、覆蓋攝像部20的球形罩18、及攝像部20。

支座14以裝置主體12的垂直方向Z的軸為中心旋轉(zhuǎn)自如地配設(shè)，通過平搖驅(qū)動部34(圖2)以垂直方向Z的軸為中心進行旋轉(zhuǎn)。

保持部16具有與水平方向X的軸設(shè)于同軸上的齒輪16A，通過從俯仰驅(qū)動部36(圖2)經(jīng)由齒輪16A傳遞驅(qū)動力，使攝像部20沿上下方向轉(zhuǎn)動(俯仰動作)。

球形罩18為防塵及防滴用的罩，優(yōu)選為以水平方向X的軸與垂直方向Z的軸的交點作為曲率中心的恒定壁厚的球殼形狀，以便與攝像部20的光軸方向L無關(guān)地避免攝像部20的光學(xué)性能發(fā)生變化。

并且，優(yōu)選在裝置主體12的背面設(shè)置未圖示的三腳架安裝部(三腳架螺孔等)。

云臺攝像機10上設(shè)置有電源開關(guān)19A及命令開始攝影的攝像開始按鈕19B，但云臺攝像機10具有相機無線通信部50(圖2)，主要通過與外部的終端機(本例中為智能手機)100的無線通信，從智能手機100加以各種操作用命令輸入。

[云臺攝像機的內(nèi)部結(jié)構(gòu)例]

圖2是表示作為攝像控制裝置的一例的云臺攝像機10的內(nèi)部結(jié)構(gòu)例的框圖。

該云臺攝像機10能夠進行通常的靜態(tài)圖像及動態(tài)圖像的攝影，大致具備攝像部20、云臺裝置30、相機控制部40及相機無線通信部50。

攝像部20具有成像透鏡22及成像元件24等。成像透鏡22由定焦透鏡或變焦透鏡構(gòu)成，將被攝體圖像成像于成像元件24的成像面上。另外，成像透鏡22中包含的聚焦透鏡、變倍透鏡(為變焦透鏡時)及光圈23分別通過透鏡驅(qū)動部26驅(qū)動。

本例的成像元件24為按每個像素以規(guī)定的圖案排列(拜耳排列、G條紋R/G完整方格、X-Trans(注冊商標)排列、蜂窩排列等)有紅(R)、綠(G)、青(B)的三原色的原色濾色器的彩色成像元件，由CMOS(Complementary Metal Oxide Semiconductor)型圖像傳感器構(gòu)成。另外，并不限于CMOS型圖像傳感器，也可以是CCD(Charge Coupled Device)型圖像傳感器。

成像元件24通過具有垂直驅(qū)動器及水平驅(qū)動器等的成像元件驅(qū)動器28及定時信號發(fā)生器(TG)29驅(qū)動，從成像元件24讀取與被攝體光的入射光量相應(yīng)的像素信號(與按每個像素積蓄的信號電荷對應(yīng)的數(shù)字信號)。

如圖1所示，云臺裝置30具備使攝像部20相對于裝置主體12向水平方向(平搖方向)旋轉(zhuǎn)的平搖機構(gòu)及使攝像部20向垂直方向(俯仰方向)轉(zhuǎn)動的俯仰機構(gòu)(以下，稱為“云臺機構(gòu)”)32、平搖驅(qū)動部34及俯仰驅(qū)動部36等。云臺機構(gòu)32具有檢測平搖方向的旋轉(zhuǎn)角(平搖角)的基準位置的初始位置傳感器、檢測俯仰方向的傾角(俯仰角)的基準位置的初始位置傳感器。

平搖驅(qū)動部34及俯仰驅(qū)動部36分別具有步進電機及電機驅(qū)動器，向云臺機構(gòu)32輸出驅(qū)動力，驅(qū)動云臺機構(gòu)32。以下，將平搖驅(qū)動部34及俯仰驅(qū)動部36稱為云臺驅(qū)動部33。

相機控制部40主要具備信號處理部41、攝像控制部42、透鏡控制部43、云臺控制部44、攝影技法控制部46及角度檢測部48。

信號處理部41對從攝像部20輸入的數(shù)字圖像信號進行偏移處理、包括白平衡校正及靈敏度校正的增益控制處理、伽馬校正處理、去馬賽克處理(Demosaicing處理)、RGB/YC轉(zhuǎn)換處理等信號處理。其中，去馬賽克處理是從與單板式彩色成像元件的濾色器排列對應(yīng)的馬賽克圖像按每個像素計算所有顏色信息的處理，還稱為同步化處理。例如，當(dāng)為包含RGB三顏色的濾色器的成像元件時，是從包含RGB的馬賽克圖像按每個像素計算所有RGB的顏色信息的處理。并且，RGB/YC轉(zhuǎn)換處理是從已進行去馬賽克處理的RGB圖像數(shù)據(jù)生成亮度數(shù)據(jù)Y與色差數(shù)據(jù)Cb、Cr的處理。

攝像控制部42為指令經(jīng)由成像元件驅(qū)動器28、TG29排出積蓄在成像元件24的每個像素的電容器的電荷或讀取與積蓄在電容器的電荷對應(yīng)的信號等的部分，進行延時攝影等中的攝像控制。

透鏡控制部43為經(jīng)由透鏡驅(qū)動部26控制成像透鏡22中包含的聚焦透鏡、變倍透鏡及光圈23的部分，進行使聚焦透鏡向?qū)刮恢靡苿拥淖詣泳劢?AF)控制等。如下進行AF控制，即，積算與AF區(qū)對應(yīng)的數(shù)字信號的高頻分量的絕對值，檢測該積算的值(AF評價值)變得最大的對焦位置，并使聚焦透鏡向檢測出的對焦位置移動。

云臺控制部44為控制云臺裝置30的部分。

攝影技法控制部46輸出控制透鏡控制部43及云臺控制部44的指令信號。

角度檢測部48為分別檢測云臺機構(gòu)32的平搖角度及俯仰角度的部分。

相機無線通信部50為在與圖1所示的智能手機100等外部終端機之間進行無線通信的部分，通過無線通信從智能手機100接收各種操作用的命令輸入。并且，相機無線通信部50將所拍攝的圖像等發(fā)送至智能手機100。相機無線通信部50能夠?qū)⑼ㄟ^攝像部20動態(tài)圖像攝影并通過信號處理部41處理的圖像(即時預(yù)覽圖像)發(fā)送至智能手機100。由此，能夠?qū)討B(tài)圖像等記錄用圖像記錄于智能手機100的內(nèi)部或外置記錄介質(zhì)，或?qū)⒓磿r預(yù)覽圖像顯示于智能手機100的顯示部。

相機操作部60包含設(shè)置于裝置主體12的電源開關(guān)19A(圖1)、攝像開始按鈕19B(圖1)等，能夠進行與來自智能手機100的操作用命令輸入相同的操作用命令輸入。

相機顯示部61作為顯示即時預(yù)覽圖像、回放圖像等的圖像顯示部發(fā)揮功能，并且與相機操作部60協(xié)同作用，作為顯示菜單畫面、用于設(shè)定、輸入各種參數(shù)的用戶界面部(UI部)而發(fā)揮功能。

存儲器62包含臨時存儲依次拍攝的圖像的存儲區(qū)域、成為進行各種運算處理等的工作用區(qū)域的SDRAM(Synchronous Dynamic Random Access Memory)和存儲攝像用程序及控制所需的各種數(shù)據(jù)等的ROM(Read Only Memory)等。

[智能手機的硬件結(jié)構(gòu)例]

圖3是表示圖1所示的智能手機100的硬件結(jié)構(gòu)的框圖。

如圖3所示，作為智能手機100的主要構(gòu)成要件，具備無線通信部110、顯示輸入部120、通話部130、操作部140、相機部141、存儲部150、外部輸入輸出部160、GPS(Global Positioning System)接收部170、動作傳感器部180、電源部190及主控制部101。并且，作為智能手機100的主要功能，具備進行經(jīng)由基站裝置BS與移動通信網(wǎng)NW的移動無線通信的無線通信功能。

無線通信部110根據(jù)主控制部101的命令，對容納于移動通信網(wǎng)NW的基站裝置BS進行無線通信。使用該無線通信，進行音頻數(shù)據(jù)、圖像數(shù)據(jù)等各種文件數(shù)據(jù)、電子郵件數(shù)據(jù)等的收發(fā)或Web數(shù)據(jù)和流數(shù)據(jù)等的接收。本例中，智能手機100的無線通信部110向云臺攝像機10發(fā)送各種操作用命令輸入或從云臺攝像機10接收即時預(yù)覽圖像、記錄用圖像等。

顯示輸入部120是通過主控制部101的控制，顯示圖像(靜態(tài)圖像及動態(tài)圖像)或字符信息等來視覺性地向用戶傳遞信息，并且檢測用戶對所顯示的信息的操作的所謂的觸控面板，具備顯示面板121與操作面板122。觀賞3D圖像時，優(yōu)選顯示面板121為3D顯示面板。

顯示面板121將LCD(Liquid Crystal Display)、OELD(Organic Electro-Luminescence Display)等用作顯示設(shè)備。

操作面板122是以能夠視覺辨認顯示于顯示面板121的顯示畫面上的圖像的方式載置，并檢測通過用戶的手指或觸控筆來操作的一個或多個坐標的設(shè)備。若通過用戶的手指或觸控筆操作該設(shè)備，則將通過操作而產(chǎn)生的檢測信號輸出至主控制部101。接著，主控制部101根據(jù)所接收的檢測信號檢測顯示面板121上的操作位置(坐標)。

如圖1所示，智能手機100的顯示面板121與操作面板122成為一體而構(gòu)成顯示輸入部120，并配置成操作面板122完全覆蓋顯示面板121。采用該配置時，操作面板122可以對顯示面板121外的區(qū)域也具備檢測用戶操作的功能。換言之，操作面板122可具備針對與顯示面板121重疊的重疊部分的檢測區(qū)域(以下，稱為顯示區(qū)域)及針對除此以外的不與顯示面板121重疊的外緣部分的檢測區(qū)域(以下，稱為非顯示區(qū)域)。

另外，可使顯示區(qū)域的大小與顯示面板121的大小完全一致，但無需一定要使兩者一致。并且，操作面板122可具備外緣部分及除此以外的內(nèi)側(cè)部分這兩個感應(yīng)區(qū)域。而且，外緣部分的寬度根據(jù)框體102的大小等適當(dāng)設(shè)計。此外，作為在操作面板122中采用的位置檢測方式，可舉出矩陣開關(guān)方式、電阻膜方式、表面彈性波方式、紅外線方式、電磁感應(yīng)方式、靜電電容方式等，能夠采用任一方式。

通話部130具備揚聲器131和麥克風(fēng)132，將通過麥克風(fēng)132輸入的用戶的聲音轉(zhuǎn)換為能夠在主控制部101中處理的音頻數(shù)據(jù)來輸出至主控制部101，或?qū)νㄟ^無線通信部110或外部輸入輸出部160接收的音頻數(shù)據(jù)進行解碼而從揚聲器131輸出。并且，如圖1所示，例如能夠?qū)P聲器131及麥克風(fēng)132搭載于與設(shè)置有顯示輸入部120的面相同的面。

操作部140為使用鍵開關(guān)等的硬件鍵，接受來自用戶的命令。例如，操作部140搭載于智能手機100的框體102的顯示部的下部、下側(cè)面，是用手指等按壓時開啟，手指離開時通過彈簧等的復(fù)原力而成為關(guān)閉狀態(tài)的按鈕式開關(guān)。

存儲部150存儲主控制部101的控制程序和控制數(shù)據(jù)、將通信對象的名稱和電話號碼等建立對應(yīng)關(guān)聯(lián)的地址數(shù)據(jù)、所收發(fā)的電子郵件的數(shù)據(jù)、通過Web瀏覽下載的Web數(shù)據(jù)、已下載的內(nèi)容數(shù)據(jù)，或臨時存儲流數(shù)據(jù)等。并且，存儲部150由內(nèi)置于智能手機的內(nèi)部存儲部151及具有裝卸自如的外部存儲器用的插槽的外部存儲部152構(gòu)成。另外，構(gòu)成存儲部150的各個內(nèi)部存儲部151與外部存儲部152通過使用閃存類型(flash memory type)、硬盤類型(hard disk type)、微型多媒體卡類型(multimediacard micro type)、卡類型的存儲器(例如，Micro SD(注冊商標)存儲器等)、RAM(Random Access Memory)、ROM(Read Only Memory)等存儲介質(zhì)來實現(xiàn)。

外部輸入輸出部160發(fā)揮與連結(jié)于智能手機100的所有外部設(shè)備的接口的作用，用于通過通信等(例如，通用串行總線(USB)、IEEE1394等)或網(wǎng)絡(luò)(例如，互聯(lián)網(wǎng)、無線LAN、藍牙(Bluetooth)(注冊商標)、RFID(Radio Frequency Identification)、紅外線通信(Infrared Data Association：IrDA)(注冊商標)、UWB(Ultra Wideband)(注冊商標)、紫蜂(ZigBee)(注冊商標)等)直接或間接地與其他外部設(shè)備連接。

作為與智能手機100連結(jié)的外部設(shè)備，例如有：有/無線頭戴式耳機話筒、有/無線外部充電器、有/無線數(shù)據(jù)端口、經(jīng)由卡插槽連接的存儲卡(Memory card)或SIM(Subscriber Identity Module)/UIM(User Identity Module)卡、經(jīng)由語音/視頻I/O(Input/Output)端子連接的外部語音/視頻設(shè)備、無線連接的外部語音/視頻設(shè)備、有/無線連接的智能手機、有/無線連接的個人計算機、有/無線連接的PDA、有/無線連接的耳機等。外部輸入輸出部能夠?qū)倪@種外部設(shè)備接收到傳送的數(shù)據(jù)傳遞至智能手機100的內(nèi)部的各構(gòu)成要件、或?qū)⒅悄苁謾C100的內(nèi)部的數(shù)據(jù)傳送至外部設(shè)備。

GPS接收部170根據(jù)主控制部101的命令接收從GPS衛(wèi)星ST1～STn發(fā)送的GPS信號，執(zhí)行基于所接收的多個GPS信號的測位運算處理，檢測包含該智能手機100的緯度、經(jīng)度、高度的位置。GPS接收部170在能夠從無線通信部110或外部輸入輸出部160(例如，無線LAN)獲取位置信息時，還能夠利用該位置信息檢測位置。

動作傳感器部180例如具備三軸加速度傳感器等，根據(jù)主控制部101的命令，檢測智能手機100的物理動向。通過檢測智能手機100的物理動向，可檢測智能手機100的移動方向或加速度。該檢測結(jié)果被輸出至主控制部101。

電源部190根據(jù)主控制部101的命令，向智能手機100的各部供給蓄積在電池(未圖示)的電力。

主控制部101具備微處理器，根據(jù)存儲部150所存儲的控制程序或控制數(shù)據(jù)進行動作，統(tǒng)一控制智能手機100的各部。并且，主控制部101為了通過無線通信部110進行語音通信或數(shù)據(jù)通信，具備控制通信系統(tǒng)的各部的移動通信控制功能及應(yīng)用處理功能。

應(yīng)用處理功能通過主控制部101根據(jù)存儲部150所存儲的應(yīng)用軟件進行動作來實現(xiàn)。作為應(yīng)用處理功能，例如有控制外部輸入輸出部160來與對象設(shè)備進行數(shù)據(jù)通信的紅外線通信功能、進行電子郵件的收發(fā)的電子郵件功能、瀏覽Web頁的Web瀏覽功能等。

并且，主控制部101具備根據(jù)接收數(shù)據(jù)或所下載的流數(shù)據(jù)等圖像數(shù)據(jù)(靜態(tài)圖像或動態(tài)圖像的數(shù)據(jù))在顯示輸入部120顯示影像等的圖像處理功能。圖像處理功能是指主控制部101對上述圖像數(shù)據(jù)進行解碼，對該解碼結(jié)果實施圖像處理并將圖像顯示于顯示輸入部120的功能。

而且，主控制部101執(zhí)行對顯示面板121的顯示控制及檢測通過操作部140、操作面板122進行的用戶操作的操作檢測控制。

通過執(zhí)行顯示控制，主控制部101顯示用于啟動應(yīng)用軟件的圖標或滾動條等軟件鍵，或者顯示用于創(chuàng)建電子郵件的窗口。另外，滾動條是指用于使無法全部容納于顯示面板121的顯示區(qū)域的較大圖像等，接受使圖像的顯示部分移動的命令的軟件鍵。

并且，通過執(zhí)行操作檢測控制，主控制部101檢測通過操作部140進行的用戶操作，或者通過操作面板122接受對上述圖標的操作或?qū)ι鲜龃翱诘妮斎霗谳斎胱址只蛘呓邮芡ㄟ^滾動條進行的顯示圖像的滾動請求。

而且，通過執(zhí)行操作檢測控制，主控制部101判定對操作面板122操作的位置是與顯示面板121重疊的重疊部分(顯示區(qū)域)，還是除此以外的不與顯示面板121重疊的外緣部分(非顯示區(qū)域)，并具備控制操作面板122的感應(yīng)區(qū)域或軟件鍵的顯示位置的觸控面板控制功能。

并且，主控制部101還能夠檢測對操作面板122的手勢操作，并根據(jù)檢測出的手勢操作執(zhí)行預(yù)先設(shè)定的功能。手勢操作表示并非以往的簡單的觸摸操作，而是通過手指等描繪軌跡、或者同時指定多個位置、又或者組合這些來從多個位置對至少一個描繪軌跡的操作。

相機部141為使用CMOS(Complementary Metal Oxide Semiconductor)或CCD(Charge Coupled Device)等成像元件進行電子攝影的數(shù)碼相機。并且，相機部141通過主控制部101的控制，能夠?qū)⑼ㄟ^攝影獲得的圖像數(shù)據(jù)轉(zhuǎn)換為例如JPEG(Joint Photographic coding Experts Group)等壓縮的圖像數(shù)據(jù)并記錄于存儲部150，或者通過外部輸入輸出部160或無線通信部110輸出。圖1所示的智能手機100中，相機部141搭載于與顯示輸入部120相同的面，但相機部141的搭載位置并不限定于此，可搭載于顯示輸入部120的背面，或者也可以搭載有多個相機部141。另外，搭載有多個相機部141時，還能夠切換供攝影的相機部141來單獨進行攝影或者同時使用多個相機部141進行攝影。

并且，相機部141能夠利用于智能手機100的各種功能中。例如，能夠在顯示面板121顯示通過相機部141獲取的圖像，或者能夠作為操作面板122的操作輸入之一，利用相機部141的圖像。并且，當(dāng)GPS接收部170檢測位置時，也能夠參考來自相機部141的圖像來檢測位置。而且，還能夠參考來自相機部141的圖像，并不使用三軸加速度傳感器或者與三軸加速度傳感器同時使用來判斷智能手機100的相機部141的光軸方向，或判斷當(dāng)前的使用環(huán)境。當(dāng)然，也能夠在應(yīng)用軟件內(nèi)利用來自相機部141的圖像。

本例中，經(jīng)由網(wǎng)絡(luò)等下載用于操作云臺攝像機10的應(yīng)用軟件并存儲于存儲部150，通過智能手機100的應(yīng)用處理功能，通過使主控制部101根據(jù)所下載的應(yīng)用軟件進行動作，能夠使通用的智能手機100作為用于操作云臺攝像機10的用戶界面部(UI部)發(fā)揮功能。

圖4是表示本發(fā)明的主要部分的內(nèi)部結(jié)構(gòu)例的框圖。圖4中，智能手機100為本發(fā)明的攝像控制裝置的一例。

智能手機100的無線通信部110用作從云臺攝像機10接收(輸入)即時預(yù)覽圖像的圖像輸入部202、從云臺攝像機10接收(輸入)云臺攝像機10的攝像部20的平搖角度及俯仰角度的云臺角度輸入部204、對云臺攝像機10通過無線通信發(fā)送(輸出)轉(zhuǎn)動命令的轉(zhuǎn)動命令輸出部206、對云臺攝像機10通過無線通信發(fā)送(輸出)變焦命令的變焦命令輸出部208。

通過轉(zhuǎn)動命令輸出部206對云臺攝像機10輸出轉(zhuǎn)動命令時，圖像輸入部202從云臺攝像機10輸入在根據(jù)轉(zhuǎn)動命令驅(qū)動云臺攝像機10的云臺機構(gòu)32的狀態(tài)下拍攝的即時預(yù)覽圖像。并且，通過轉(zhuǎn)動命令輸出部206對云臺攝像機10輸出轉(zhuǎn)動命令時，云臺角度輸入部204從云臺攝像機10輸入根據(jù)轉(zhuǎn)動命令驅(qū)動云臺攝像機10的云臺機構(gòu)32的狀態(tài)的攝像部20的平搖角度及俯仰角度。

通過變焦命令輸出部208對云臺攝像機10輸出變焦命令時，圖像輸入部202從云臺攝像機10輸入以與變焦命令相應(yīng)的視場角拍攝的即時預(yù)覽圖像(即，被變焦的即時預(yù)覽圖像)。

如利用圖1進行了說明，智能手機100的顯示輸入部120為重疊配置顯示面板121(為顯示部的一方式)與操作面板122的結(jié)構(gòu)，用作轉(zhuǎn)動命令輸入部212，接受云臺攝像機10的云臺機構(gòu)32的平搖方向及俯仰方向中的至少一個方向的轉(zhuǎn)動命令的輸入。

智能手機100的存儲部150用作極限顯示圖像信息存儲部222，存儲轉(zhuǎn)動極限內(nèi)的平搖角度及俯仰角度的各組合中的極限顯示圖像的信息。存儲于極限顯示圖像信息存儲部222的極限顯示圖像的信息并不限定于極限顯示圖像本身。例如，作為極限顯示圖像的信息，可考慮預(yù)先將表示極限顯示圖像中的可拍攝區(qū)域的輪廓(邊緣)的信息存儲于極限顯示圖像信息存儲部222。極限顯示圖像的信息可包含表示球面的緯線及經(jīng)線的描繪方法的信息。

智能手機100的主控制部101具備：轉(zhuǎn)動極限判定部232，判定輸入至轉(zhuǎn)動命令輸入部212的轉(zhuǎn)動命令是否為向超過云臺攝像機10的攝像部20的轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令；信息選擇部234，從存儲于極限顯示圖像信息存儲部222的多個極限顯示圖像的信息選擇與云臺攝像機10的攝像部20的平搖角度及俯仰角度對應(yīng)的極限顯示圖像的信息；顯示控制部236，在極限顯示圖像中重疊從云臺攝像機10輸入的即時預(yù)覽圖像；及執(zhí)行控制部238，根據(jù)存儲于存儲部150的程序，控制智能手機100的各部的執(zhí)行。

極限顯示圖像300(圖6～圖8)為表示分別與云臺攝像機10的攝像部20的轉(zhuǎn)動極限內(nèi)及轉(zhuǎn)動極限外對應(yīng)的可拍攝區(qū)域及無法拍攝區(qū)域的二維顯示的球面的圖像。極限顯示圖像300通過顯示控制部236的控制，根據(jù)轉(zhuǎn)動命令的輸入而沿著二維顯示的球面轉(zhuǎn)動。

并且，當(dāng)通過轉(zhuǎn)動極限判定部232判定為是向超過轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令時，極限顯示圖像300通過顯示控制部236的控制，切換為表示是超過轉(zhuǎn)動極限的轉(zhuǎn)動命令的顯示。并且，通過轉(zhuǎn)動極限判定部232判定是否為向達到轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令，當(dāng)為向達到轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令時，可通過顯示控制部236的控制，切換為表示是達到轉(zhuǎn)動極限的轉(zhuǎn)動命令的顯示。

云臺攝像機10的攝像部20的轉(zhuǎn)動極限根據(jù)云臺攝像機10的機種而不同。尤其，云臺攝像機10的轉(zhuǎn)動極限根據(jù)云臺機構(gòu)32的結(jié)構(gòu)而不同。并且，為了保護個人隱私等，有時實際上將可轉(zhuǎn)動的角度的范圍設(shè)定為比物理上可轉(zhuǎn)動的角度的范圍窄。

圖5(A)及圖5(B)表示云臺攝像機10的攝像部20的轉(zhuǎn)動極限的一例。為了便于本實施方式的說明，平搖方向的可轉(zhuǎn)動的角度的范圍限制在-150度～150度，俯仰方向的可轉(zhuǎn)動的角度的范圍限制在0度～60度。圖5(A)及圖5(B)中，CW表示順時針的轉(zhuǎn)動，CCW表示逆時針的轉(zhuǎn)動。另外，本發(fā)明中，可轉(zhuǎn)動的角度范圍并不限定于圖5中記載的角度范圍。圖5中，為了便于理解本發(fā)明，介紹了可轉(zhuǎn)動的角度范圍較窄的情況，但例如，可以如圖5(A)及圖5(B)中以虛線箭頭表示，平搖的可轉(zhuǎn)動的角度范圍為-170度～170度，俯仰的可轉(zhuǎn)動的角度范圍為-30度～120度。

圖6表示攝像部20的平搖角度為0度且俯仰角度為30度時的極限顯示圖像300的一例。圖7表示攝像部20的平搖角度為150度且俯仰角度為30度時的極限顯示圖像300的一例。圖8表示攝像部20的平搖角度為-150度且俯仰角度為30度時的極限顯示圖像300的一例。圖中的()內(nèi)，從左至右以平搖角度θ及俯仰角度的順序示出角度。

平搖方向及俯仰方向上的可拍攝區(qū)域310比轉(zhuǎn)動極限內(nèi)的角度范圍寬云臺攝像機10的視場角的量。假設(shè)云臺攝像機10的視場角在水平方向(平搖方向)及垂直方向(俯仰方向)的兩個方向上分別為60度(±30度)時，可拍攝區(qū)域310比上述的轉(zhuǎn)動極限內(nèi)的角度范圍(平搖角度θ為-150度～150度、俯仰角度為0度～60)寬視場角(60度)的量。即，本例的可拍攝區(qū)域310設(shè)為，平搖角度θ中為-180度～180度，俯仰角度中為-30度～90度。其中，云臺攝像機10的視場角根據(jù)云臺攝像機10的機種(尤其是攝像部20的規(guī)格)及變焦倍率而不同。

圖6、圖7及圖8中例示的極限顯示圖像300為如下圖像。

(1)是二維顯示的球面的圖像。與將三維的球面圖像投影在平面的圖像等效。

(2)球面上的緯線及經(jīng)線分別相當(dāng)于與表示云臺攝像機10的攝像部20的平搖方向的等角度的線(等平搖角度線)及表示俯仰方向的等角度的線(等俯仰角度線)。

(3)表示分別與云臺攝像機10的攝像部20的轉(zhuǎn)動極限內(nèi)及轉(zhuǎn)動極限外對應(yīng)的可拍攝區(qū)域310及無法拍攝區(qū)域320。

(4)無法拍攝區(qū)域320以比可拍攝區(qū)域310更低的明度顯示。例如，以黑色顯示。以下，將以比可拍攝區(qū)域310更低的明度顯示的現(xiàn)象稱為“消隱顯示”。

(5)將云臺攝像機10的攝像部20的當(dāng)前的平搖角度及俯仰角度(或者與轉(zhuǎn)動命令對應(yīng)的平搖角度及俯仰角度)作為球的中心點。因此，能夠在極限顯示圖像300的中央部重疊通過云臺攝像機10的攝像部20拍攝的即時預(yù)覽圖像。

(6)即時預(yù)覽圖像以貼附在球的內(nèi)面的方式重疊。

(7)球面并不限定于二維顯示圓形球的情況，也可以是二維顯示橢圓球的情況，還可以是二維顯示變形圓形球或橢圓球的一部分(例如，將球的中央部設(shè)為圓柱狀)以使即時預(yù)覽圖像不變形而貼附的情況。

另外，圖6、圖7及圖8中，為了在視覺上便于掌握二維顯示有極限顯示圖像的球面的圖像，描繪了表示平搖方向的等角度的線(經(jīng)線)及表示俯仰方向的等角度的線(緯線)。優(yōu)選在極限顯示圖像中描繪經(jīng)線及緯線，但本發(fā)明包括不描繪經(jīng)線及緯線的情況。并且，圖6、圖7及圖8中，為了便于掌握平搖角度及俯仰角度，描繪了表示基準角度的黑色點與基準角度的數(shù)值(平搖角度θ及俯仰角度)，但實際的極限顯示圖像中可不描繪黑色點及角度。

圖9是表示顯示控制處理的一例的流程的流程圖。圖9中，智能手機100的處理通過智能手機100的執(zhí)行控制部238，根據(jù)存儲于智能手機100的存儲部150的程序執(zhí)行。云臺攝像機10的處理通過云臺攝像機10的相機控制部40，根據(jù)存儲于云臺攝像機10的存儲器62的程序執(zhí)行。

另外，云臺攝像機10設(shè)為，已打開電源開關(guān)19A及按下攝像開始按鈕19B，云臺機構(gòu)32、云臺驅(qū)動部33等結(jié)束初始化而處于已開始被攝體的拍攝的狀態(tài)。

云臺攝像機10中，通過相機無線通信部50對智能手機100發(fā)送(輸出)通過攝像部20拍攝的即時預(yù)覽圖像與攝像部20的平搖角度及俯仰角度(步驟S102)。智能手機100的無線通信部110作為圖像輸入部202及云臺角度輸入部204發(fā)揮功能，接收(輸入)即時預(yù)覽圖像與平搖角度及俯仰角度(步驟S104)。

本例的云臺攝像機10以規(guī)定的時間間隔進行即時預(yù)覽圖像的拍攝，且以規(guī)定時間間隔對智能手機100發(fā)送即時預(yù)覽圖像。在此，“規(guī)定的時間間隔”并不限定于完全相同的時間間隔，還包括產(chǎn)生規(guī)定的容許范圍內(nèi)的波動的情況。并且，本發(fā)明并不限定于即時預(yù)覽圖像的拍攝時間間隔及發(fā)送時間間隔恒定的情況。云臺攝像機10可根據(jù)云臺攝像機10的各部的負荷狀態(tài)或通信環(huán)境等，以非恒定的時間間隔進行即時預(yù)覽圖像的拍攝及發(fā)送輸出。例如，檢測到拍攝圖像的變化量為閾值以下時、檢測到云臺攝像機10中的處理的負荷為容許范圍外時、或者檢測到通信環(huán)境為容許范圍外時，可暫時停止拍攝及發(fā)送中的至少一個。另外，即時預(yù)覽圖像中附加有拍攝時刻信息(所謂的時間戳)，因此智能手機100能夠根據(jù)附加于即時預(yù)覽圖像的拍攝時刻信息檢測拍攝時刻。

通過智能手機100的信息選擇部234，從存儲于作為極限顯示圖像信息存儲部222發(fā)揮功能的存儲部150的極限顯示圖像的信息中，選擇與從云臺攝像機10輸入的平搖角度及俯仰角度對應(yīng)的極限顯示圖像的信息(步驟S106)。

如圖10所示，通過智能手機100的顯示控制部236，在二維顯示于顯示輸入部120的球面的極限顯示圖像300的中央部，重疊顯示從云臺攝像機10輸入的即時預(yù)覽圖像330(步驟S108)。圖10所示的例子中，在極限顯示圖像300外的即時預(yù)覽窗121A內(nèi)也顯示即時預(yù)覽圖像330。

通過智能手機100的作為轉(zhuǎn)動命令輸入部212發(fā)揮功能的顯示輸入部120，接受平搖方向及俯仰方向中的至少一個方向的轉(zhuǎn)動命令的輸入(步驟S110)。轉(zhuǎn)動命令的輸入通過顯示輸入部120中的極限顯示圖像300外的操作接受。圖10所示的例子中，在顯示輸入部120的即時預(yù)覽窗121A內(nèi)用手指等觸摸的狀態(tài)下迅速滑動時(即，進行“輕擊”時)，接受作為轉(zhuǎn)動命令的輸入。例如，向左方向滑動手指等時，判定為是在圖5(A)中向逆時針CCW(左方向)進行平搖的轉(zhuǎn)動命令。例如，向右方向滑動手指等時，判定為是在圖5(A)中向順時針CW(右方向)進行平搖的轉(zhuǎn)動命令。例如，向上方向滑動手指等時，判定為是在圖5(B)中向順時針CW(上方向)進行俯仰的轉(zhuǎn)動命令。例如，向下方向滑動手指等時，判定為是在圖5(B)中向逆時針CCW(下方向)進行俯仰的轉(zhuǎn)動命令。

并且，圖10中，能夠通過包含表示上方向的圖標(上鍵122U)、表示下方向的圖標(下鍵122D)、表示左方向的圖標(左鍵122L)及表示右方向的圖標(右鍵122R)的十字鍵122C輸入轉(zhuǎn)動命令。按壓左鍵122L時，判定為是在圖5(A)中向逆時針CCW(左方向)進行平搖的轉(zhuǎn)動命令。按壓右鍵122R時，判定為是在圖5(A)中向順時針CW(右方向)進行平搖的轉(zhuǎn)動命令。按壓上鍵122U時，判定為是向圖5(B)的順時針CW(上方向)進行俯仰的轉(zhuǎn)動命令。按壓下鍵122D時，判定為是在圖5(B)中向逆時針CCW(下方向)進行俯仰的轉(zhuǎn)動命令。

通過智能手機100的轉(zhuǎn)動極限判定部232，判定所輸入的轉(zhuǎn)動命令是否為向超過云臺攝像機10的云臺機構(gòu)32的轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令(步驟S112)。當(dāng)為向超過轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令時(步驟S112中為是時)，通過智能手機100的執(zhí)行控制部238，將轉(zhuǎn)動命令的角度變更為轉(zhuǎn)動極限內(nèi)的角度(步驟S114)。

智能手機100的無線通信部110作為轉(zhuǎn)動命令輸出部206發(fā)揮功能，對云臺攝像機10發(fā)送(輸出)轉(zhuǎn)動命令(步驟S116)。云臺攝像機10的相機無線通信部50接收(輸入)轉(zhuǎn)動命令(步驟S118)。

云臺攝像機10的云臺驅(qū)動部33根據(jù)轉(zhuǎn)動命令驅(qū)動云臺攝像機10的云臺機構(gòu)32，由此轉(zhuǎn)動云臺攝像機10的攝像部20(步驟S120)。

回到步驟S102，通過相機無線通信部50對智能手機100發(fā)送(輸出)在根據(jù)轉(zhuǎn)動命令驅(qū)動云臺攝像機10的云臺機構(gòu)32的狀態(tài)下拍攝的即時預(yù)覽圖像與云臺攝像機10的攝像部20的平搖角度及俯仰角度(步驟S102)。智能手機100的無線通信部110接收(輸入)即時預(yù)覽圖像與平搖角度及俯仰角度(步驟S104)。

平搖角度及俯仰角度中發(fā)生變化時，極限顯示圖像的信息被重新選擇(步驟S106)，顯示與當(dāng)前的平搖角度及俯仰角度對應(yīng)的極限顯示圖像，在該極限顯示圖像中重疊新的即時預(yù)覽圖像來顯示(步驟S108)。

圖11(A)、圖11(B)及圖11(C)中，在左側(cè)示出即時預(yù)覽窗121A的即時預(yù)覽圖像330的顯示，在右側(cè)示出極限顯示圖像300的顯示。例如，若在圖11(A)的左側(cè)的即時預(yù)覽窗121A內(nèi)進行命令平搖的逆時針CCW的滑動操作，則如在圖11(A)的右側(cè)以箭頭示出，極限顯示圖像300沿著二維顯示的球面向左方向轉(zhuǎn)動，如圖11(B)的右側(cè)所示那樣顯示極限顯示圖像300。并且，若在圖11(B)的左側(cè)的即時預(yù)覽窗121A內(nèi)進行命令平搖的逆時針CCW及俯仰的逆時針CCW的滑動操作，則如在圖11(B)的右側(cè)以箭頭示出，極限顯示圖像300沿著二維顯示的球面向左下方向轉(zhuǎn)動，如圖11(C)的右側(cè)所示那樣顯示極限顯示圖像300。如此，表示可拍攝區(qū)域310及無法拍攝區(qū)域320的極限顯示圖像300根據(jù)轉(zhuǎn)動命令的輸入而沿著二維顯示的球面轉(zhuǎn)動。這種極限顯示圖像的動向近似于與轉(zhuǎn)動命令相應(yīng)的云臺攝像機10的攝像部20的視點移動，因此用戶能夠以從云臺攝像機10的攝像部20的視點觀察的感覺準確地掌握拍攝極限。

＜顯示控制的變化＞

(針對向超過轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令的顯示控制)

當(dāng)通過用戶輸入向超過轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令時，如果僅簡單地將云臺攝像機10的攝像部20的角度設(shè)定為轉(zhuǎn)動極限，有時用戶不確定是否為攝像控制裝置(智能手機100)對用戶的命令輸入未作任何反應(yīng)的狀態(tài)而感到困惑。并且，如果僅通過文字或音頻信息輸出表示超過轉(zhuǎn)動極限的內(nèi)容，即使用戶能夠認識到裝置有反應(yīng)，但圖像并不一定針對用戶的命令輸入而發(fā)生變化，因此用戶會由于圖像與自己的命令輸入不對應(yīng)而感到違和感。

以下，對如下顯示控制的變化進行說明，所述顯示控制的變化中，對向超過轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令或向達到轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令，通過對極限顯示圖像及即時預(yù)覽圖像賦予變化，能夠避免給用戶帶來違和感。

第1變化中，例如云臺攝像機10的攝像部20達到轉(zhuǎn)動極限，通過顯示控制部236進行圖12(A)所示的顯示的情況下，進行向超過云臺攝像機10的攝像部20的轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令時，通過轉(zhuǎn)動命令輸出部206將云臺攝像機10的攝像部20的角度設(shè)定在轉(zhuǎn)動極限內(nèi)，且如圖12(B)所示，通過顯示控制部236在極限顯示圖像300中超過可拍攝區(qū)域310與無法拍攝區(qū)域320的邊界323而移動即時預(yù)覽圖像330。如圖12(B)所示，在即時預(yù)覽窗121A內(nèi)也顯示無法拍攝區(qū)域322。

并且，如圖12(B)所示，在即時預(yù)覽圖像330超過可拍攝區(qū)域310與無法拍攝區(qū)域320的邊界323而移動的狀態(tài)下，輸入有向轉(zhuǎn)動極限內(nèi)的角度返回的轉(zhuǎn)動命令時，將云臺攝像機10的攝像部20的實際角度維持在轉(zhuǎn)動極限內(nèi)的同時，如圖12(A)所示，通過顯示控制部236在極限顯示圖像300中向可拍攝區(qū)域310內(nèi)移動即時預(yù)覽圖像330。

如此，第1變化中，當(dāng)轉(zhuǎn)動命令為向超過云臺攝像機10的攝像部20的轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令時，將云臺攝像機10的攝像部20的實際角度設(shè)定在轉(zhuǎn)動極限內(nèi)，且即時預(yù)覽圖像330根據(jù)轉(zhuǎn)動命令，超過可拍攝區(qū)域與無法拍攝區(qū)域的邊界而移動，因此用戶不僅能夠通過觀察極限顯示圖像而一眼掌握超過了轉(zhuǎn)動極限的情況，用戶還能夠通過觀察根據(jù)轉(zhuǎn)動命令而移動的即時預(yù)覽圖像來認識到智能手機100在反應(yīng)的情況，且轉(zhuǎn)動命令輸入與即時預(yù)覽圖像330的移動始終匹配，因此可以說易操作。

第2變化中，當(dāng)轉(zhuǎn)動命令為向超過云臺攝像機10的攝像部20的轉(zhuǎn)動極限的角度或向達到轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令時，通過轉(zhuǎn)動命令輸出部206將云臺攝像機10的攝像部20的角度設(shè)定在轉(zhuǎn)動極限內(nèi)，且通過顯示控制部236進行在極限顯示圖像300的可拍攝區(qū)域310與無法拍攝區(qū)域320的邊界搖動即時預(yù)覽圖像330的顯示(以下，稱為“搖動顯示”)。

如此，第2變化中，當(dāng)轉(zhuǎn)動命令為向超過云臺攝像機10的攝像部20的轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令或向達到轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令時，將云臺攝像機10的攝像部20的實際角度設(shè)定在轉(zhuǎn)動極限內(nèi)，且即時預(yù)覽圖像330在極限顯示圖像300的可拍攝區(qū)域310與無法拍攝區(qū)域320的邊界搖動顯示，因此用戶能夠認識到智能手機100在對轉(zhuǎn)動命令反應(yīng)的情況，且用戶易認識到是向超過轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令或向達到轉(zhuǎn)動極限的角度的轉(zhuǎn)動命令。

另外，搖動顯示中，將即時預(yù)覽圖像搖動多次或1次之后，將即時預(yù)覽圖像330設(shè)定于與云臺攝像機10的攝像部20的實際平搖角度及俯仰角度對應(yīng)的位置。即，搖動之后，將即時預(yù)覽圖像330配置于可拍攝區(qū)域310內(nèi)。搖動次數(shù)及幅度并無特別限定。也可逐漸減小搖動幅度。

(顯示向相反方向轉(zhuǎn)動時的可拍攝區(qū)域的顯示控制)

存在如下情況，即，若將云臺攝像機10的攝像部20朝向順時針的轉(zhuǎn)動極限及逆時針的轉(zhuǎn)動極限中離當(dāng)前的角度較近的轉(zhuǎn)動極限轉(zhuǎn)動，則無法拍攝，但若朝向離當(dāng)前的角度較遠的轉(zhuǎn)動極限轉(zhuǎn)動，則能夠拍攝。

例如，如圖5(A)所示，當(dāng)平搖的順時針CW的轉(zhuǎn)動極限為150度且視場角為±30度時，如圖7所示，順時針的平搖的轉(zhuǎn)動極限(150度)中，超過180度的角度的范圍為無法拍攝區(qū)域320。然而，例如，如圖5(A)所示，當(dāng)平搖的逆時針CCW的轉(zhuǎn)動極限為-150度時，如圖8所示，逆時針的平搖的轉(zhuǎn)動極限(-150度)中，-180度以上的角度的范圍(若為順時針CW，則是超過180度的角度的范圍)為可拍攝區(qū)域310。即，具有圖5(A)所示的轉(zhuǎn)動極限的云臺攝像機10中，順時針CW的平搖中的無法拍攝區(qū)域320內(nèi)存在逆時針CCW的平搖中的可拍攝區(qū)域310，且逆時針CCW的平搖中的無法拍攝區(qū)域320內(nèi)存在順時針CW的平搖中的可拍攝區(qū)域310。

圖13表示如下的變化，即，在極限顯示圖像300內(nèi)顯示若向順時針的轉(zhuǎn)動極限及逆時針的轉(zhuǎn)動極限中離當(dāng)前的角度較近的轉(zhuǎn)動極限轉(zhuǎn)動，則無法拍攝，但若朝向離當(dāng)前的角度較遠的轉(zhuǎn)動極限轉(zhuǎn)動，則能夠拍攝的區(qū)域340(以下，稱為“反轉(zhuǎn)時可拍攝區(qū)域”)。圖13中，反轉(zhuǎn)時可拍攝區(qū)域340內(nèi)同時顯示表示若向相反方向進行轉(zhuǎn)動命令則能夠拍攝的圖標(反轉(zhuǎn)標志342)。上述顯示控制通過智能手機100的顯示控制部236進行。

(在可拍攝區(qū)域顯示預(yù)先拍攝的靜態(tài)圖像的顯示控制)

圖14(A)及圖14(B)是用于說明在可拍攝區(qū)域310顯示預(yù)先拍攝的靜態(tài)圖像的變化的說明圖。

如圖14(A)所示，顯示控制部236在極限顯示圖像300中與轉(zhuǎn)動極限內(nèi)對應(yīng)的可拍攝區(qū)域310顯示通過云臺攝像機10的攝像部20預(yù)先以平搖方向及俯仰方向的可轉(zhuǎn)動的角度拍攝的靜態(tài)圖像。

靜態(tài)圖像的拍攝通過智能手機100的執(zhí)行控制部238的控制，經(jīng)由智能手機100的無線通信部110驅(qū)動云臺攝像機10的云臺驅(qū)動部33來進行。例如，具有圖5(A)及圖5(B)所示的轉(zhuǎn)動極限的云臺攝像機10中，在平搖方向上進行-150度～150度的轉(zhuǎn)動且在俯仰方向上進行0度至60度的轉(zhuǎn)動的同時進行拍攝，由此拍攝多張靜態(tài)圖像(圖14(B)的350)。接著，如圖14(B)所示，通過智能手機100的顯示控制部236，通過將多張靜態(tài)圖像350貼附在假想的三維球面360的內(nèi)面，生成在平搖方向及俯仰方向的可物理性地轉(zhuǎn)動的整周拍攝的靜態(tài)圖像(以下，稱為“整周拍攝的靜態(tài)圖像”)。如圖14(A)所示，將極限顯示圖像300顯示于智能手機時，通過從三維球面360向平面投影所需的部分，由此提取二維顯示的球面的極限顯示圖像300的可拍攝區(qū)域310的靜態(tài)圖像。

另外，圖14(B)中，以生成整周拍攝的靜態(tài)圖像的情況為例進行了說明，但本發(fā)明包括不進行整周拍攝的情況。例如，攝像部20的轉(zhuǎn)動范圍被強制性地限制為比實際的可物理性地轉(zhuǎn)動的范圍窄的情況或被攝體的拍攝的角度范圍有限時，可不在攝像部20的可轉(zhuǎn)動的整周進行靜態(tài)圖像的拍攝。

(變焦命令與極限顯示圖像的關(guān)系)

以上說明中，為了便于理解本發(fā)明，對未進行變焦命令輸入時的顯示控制進行了說明。云臺攝像機10的攝像部20具有光學(xué)變焦功能時及云臺攝像機10的相機控制部40或智能手機100的主控制部101具有電子變焦功能時，智能手機100的顯示控制部236以與變焦命令對應(yīng)的尺寸在極限顯示圖像300中顯示即時預(yù)覽圖像330。并且，智能手機100的顯示控制部236以與變焦命令對應(yīng)的形狀在極限顯示圖像300中顯示可拍攝區(qū)域310及無法拍攝區(qū)域320。例如，通過圖10的長焦鍵122T及廣角鍵122W，從用戶接受變焦命令。

圖15(A)表示將通過長焦端(望遠端)拍攝的即時預(yù)覽圖像330顯示于極限顯示圖像300中時的一例。圖15(B)表示將通過標準視場角拍攝的即時預(yù)覽圖像330顯示于極限顯示圖像300中時的一例。圖15(C)表示將通過廣角端(Wide angle端)拍攝的即時預(yù)覽圖像330顯示于極限顯示圖像300中時的一例。圖15(D)表示用戶輸入超過廣角極限的變焦命令時，在即時預(yù)覽圖像330的周圍顯示預(yù)先拍攝的靜態(tài)圖像370的狀態(tài)。該靜態(tài)圖像370為從預(yù)先拍攝的靜態(tài)圖像提取相當(dāng)于即時預(yù)覽圖像330的周圍的部分的圖像。

[系統(tǒng)結(jié)構(gòu)的變化]

對將作為本發(fā)明的主要部分的“顯示控制部”配置于智能手機100的方式進行了詳細說明，但也可將上述主要部分配置于云臺攝像機10及智能手機100以外的其他裝置(例如，通常稱作“服務(wù)器”的計算機裝置)。此時，由服務(wù)器單獨或者包括服務(wù)器而構(gòu)成本發(fā)明的攝像控制裝置。本發(fā)明包括這種結(jié)構(gòu)。

并且，可將上述的主要部分配置于云臺攝像機10。此時，通過配置于云臺攝像機10的主要部分或者包括配置于云臺攝像機10的主要部分而構(gòu)成本發(fā)明的攝像控制裝置。本發(fā)明包括這種結(jié)構(gòu)。

另外，本發(fā)明中的“轉(zhuǎn)動命令輸入部”并不限定于直接接受用戶的轉(zhuǎn)動命令的輸入的情況，包括經(jīng)由無線通信及有線通信的至少一個而間接地接受用戶的轉(zhuǎn)動命令的輸入的情況。這種情況下，能夠由服務(wù)器單獨構(gòu)成本發(fā)明的攝像控制裝置。

并且，還能夠?qū)⑸鲜鲋饕糠址稚⒂诙鄠€裝置來配置。此時，通過多個裝置構(gòu)成本發(fā)明的攝像控制裝置。

并且，本發(fā)明中，攝像控制裝置不限于智能手機，能夠由平板電腦終端、個人計算機等其他用戶終端構(gòu)成。

本發(fā)明并不限定于本說明書及附圖中記載的例子，可在不脫離本發(fā)明宗旨的范圍內(nèi)通過與本說明書及附圖中記載的例子不同的方式實施。

符號說明

10-云臺攝像機，20-攝像部，22-成像透鏡，24-成像元件，32-云臺機構(gòu)，33-云臺驅(qū)動部，100-智能手機(攝像控制裝置)，202-圖像輸入部，204-云臺角度輸入部，206-轉(zhuǎn)動命令輸出部，208-變焦命令輸入部、212-轉(zhuǎn)動命令輸入部、222-極限顯示圖像信息存儲部、232-轉(zhuǎn)動極限判定部、234-信息選擇部、236-顯示控制部、238-執(zhí)行控制。