本技術(shù)涉及一種信息處理裝置和方法，更特別地，涉及一種使投影圖像特性能夠局部變化的信息處理裝置和方法。

背景技術(shù)：

一直以來，存在使用多個投影儀投射圖像的系統(tǒng)(例如參見非專利文獻1)。在這種系統(tǒng)中，電腦控制該多個投影儀彼此協(xié)作來校正投影儀的個別差異和相對位置并且投射具有均一圖像特性的一個大型圖像。

引用列表

非專利文獻

非專利文獻1:rameshraskar、jeroenvanbaar、paulbeardsley、thomaswillwacher、srinivasrao、cliftonforlines，"ilamps:geometricallyawareandself-configuringprojectors"，acmsiggraph2003conferenceproceedingsconferenceproceedings

技術(shù)實現(xiàn)要素：

技術(shù)問題

然而，對于通過投影儀投射的投影圖像的表達性有越來越多的要求。例如，需要其中圖像特性例如亮度和分辯率不統(tǒng)一的投影圖像，并且存在這種投影圖像不能用過去的系統(tǒng)實現(xiàn)的擔心。

本發(fā)明鑒于如上所述情況被提出，并旨在使投影圖像特性能夠局部變化。問題的解決方案

根據(jù)本技術(shù)的一個方面，提供了一種信息處理裝置，包括控制單元，該控制單元控制第一投影單元將第一圖像投射在圖像投影表面上并控制第二投影單元在注視區(qū)域中投射第二圖像，該注視區(qū)域作為通過該第一投影單元投射在該圖像投影表面上的該第一圖像的預(yù)定部分區(qū)域。

該控制單元能夠使投射在該第一圖像的注視區(qū)域中的部分圖像或者通過改變該部分圖像的參數(shù)而獲得的圖像在該注視區(qū)域中作為該第二圖像被投射。

該控制單元能夠使具有與在該第一圖像的該注視區(qū)域中投射的部分圖像不同的圖案的圖像在該注視區(qū)域中作為該第二圖像被投射。

該信息處理裝置能夠進一步包括設(shè)置該注視區(qū)域的注視區(qū)域設(shè)置單元，并且該控制單元能夠控制該第二投影單元的投影的方向和視角，以使該第二圖像在由該注視區(qū)域設(shè)置單元設(shè)置的該注視區(qū)域中被投射。

該注視區(qū)域設(shè)置單元能夠基于預(yù)定圖像特性設(shè)置該注視區(qū)域。

該注視區(qū)域設(shè)置單元能夠設(shè)置相對于該第一圖像的特性參數(shù)在期望范圍內(nèi)的區(qū)域作為該注視區(qū)域。

該注視區(qū)域設(shè)置單元能夠設(shè)置包括其與該第一圖像在深度方向上的距離在期望范圍內(nèi)的物體的區(qū)域作為該注視區(qū)域。

該注視區(qū)域設(shè)置單元能夠設(shè)置相對于該第一圖像檢測到特征的區(qū)域作為該注視區(qū)域。

該注視區(qū)域設(shè)置單元能夠設(shè)置包括相對于該第一圖像的物體的區(qū)域作為該注視區(qū)域。

該注視區(qū)域設(shè)置單元能夠設(shè)置相對于該第一圖像指定的區(qū)域作為該注視區(qū)域。

該控制單元能夠基于通過捕獲投射在該圖像投影表面上的該第一圖像和該第二圖像的攝像單元獲得的捕獲圖像控制該第二投影單元的投影的方向和視角。

該第一投影單元和該第二投影單元能夠與彼此獨立的同步信號同步進行驅(qū)動，并且該控制單元能夠使該第一圖像和該第二圖像在全部該投影單元的同步信號匹配的時候被投射。

該信息處理裝置能夠進一步包括設(shè)置該注視區(qū)域的注視區(qū)域設(shè)置單元，該第一投影單元和該第二投影單元能夠與彼此獨立的同步信號同步進行驅(qū)動，并且該控制單元能夠控制攝像單元與該同步信號同步地捕獲投射在該圖像投影表面上的該第一圖像和該第二圖像并且基于該捕獲圖像控制該第二投影單元的投影的方向和視角，以使該第二圖像在由該注視區(qū)域設(shè)置單元設(shè)置的該注視區(qū)域中被投射。

該信息處理裝置能夠進一步包括該第一投影單元和該第二投影單元。

該第一投影單元和該第二投影單元之間的相對位置可以是固定的。

該信息處理裝置能夠進一步包括捕獲投射在該圖像投影表面上的該第一圖像和該第二圖像的攝像單元。

該第一投影單元、該第二投影單元、該攝像單元和該控制單元可以一體形成。

該第一投影單元和該第二投影單元可以布置在該攝像單元的周邊。

該攝像單元可以設(shè)置為多個。

根據(jù)本技術(shù)的一個方面，提供了一種信息處理方法，包括：

控制第一投影單元將第一圖像投射在圖像投影表面上；和控制第二投影單元在作為由該第一投影單元投射在該圖像投影表面上的該第一圖像的預(yù)定部分區(qū)域的注視區(qū)域中投射該第二圖像。

根據(jù)本技術(shù)的該方面，控制該第一投影單元以便該第一圖像被投射在該圖像投影表面上，并且控制該第二投影單元以便該第二圖像在作為由該第一投影單元投射在該圖像投影表面上的該第一圖像的預(yù)定部分區(qū)域的該注視區(qū)域中被投射。

本發(fā)明的有益效果

根據(jù)本技術(shù)，可以處理信息。另外，根據(jù)本技術(shù)，可以局部改變投影圖像特性。

附圖概述

[圖1]示出了投影攝像系統(tǒng)的主要配置實例的示意圖。

[圖2]用于解釋該投影攝像系統(tǒng)的外部外觀的示意圖。

[圖3]示出了圖像投影狀態(tài)的實例的示意圖。

[圖4]示出了圖像校正狀態(tài)的示意圖。

[圖5]示出了圖像校正狀態(tài)的示意圖。

[圖6]用于解釋使用實例的示意圖。

[圖7]示出了注視區(qū)域的控制的狀態(tài)的示意圖。

[圖8]示出了圖像投影狀態(tài)的實例的示意圖。

[圖9]示出了投影攝像裝置的主要配置實例的方框圖。

[圖10]示出了控制器的主要配置實例的方框圖。

[圖11]示出了該控制器實現(xiàn)的功能的實例的功能方塊圖。

[圖12]用于解釋系統(tǒng)控制處理的的流程的實例的流程圖。

[圖13]用于解釋控制參數(shù)的實例的示意圖。

[圖14]各自示出圖像投影狀態(tài)的示意圖。

[圖15]各自示出圖像投影狀態(tài)的示意圖。

[圖16]各自示出圖像投影狀態(tài)的示意圖。

[圖17]各自示出圖像投影狀態(tài)的示意圖。

[圖18]用于解釋該投影攝像裝置的模塊配置實例的示意圖。

[圖19]示出了投影儀模塊的主要配置實例的方框圖。

[圖20]示出了相機模塊的主要配置實例的方框圖。

[圖21]分別示出了投影攝像裝置和投影攝像系統(tǒng)的主要配置實例的示意圖。

[圖22]示出了投影單元的主要配置實例的方框圖。

[圖23]示出了激光掃描的實例的示意圖。

[圖24]示出了投影攝像系統(tǒng)的主要配置實例的示意圖。

[圖25]用于解釋投影儀模塊控制處理的流程的實例的流程圖。

[圖26]用于解釋照相機模塊控制處理的流程的實例的流程圖。

[圖27]用于解釋區(qū)域劃分狀態(tài)的實例的示意圖。

[圖28]用于解釋注視區(qū)域設(shè)置處理的流程的實例的流程圖。

具體實施方式

在下文，將描述體現(xiàn)本公開的方式(在下文中的，稱為實施方案)。應(yīng)當注視，將按照下列次序給出說明。

1.第一實施方案(投影攝像系統(tǒng))

<1.第一實施方案>

<投影攝像系統(tǒng)>

圖1中示出了應(yīng)用了控制裝置(即，應(yīng)用了本技術(shù)的信息處理裝置的實施方案)的投影攝像系統(tǒng)的主要配置實例。圖1中示出的投影攝像系統(tǒng)100是投射圖像的系統(tǒng)。如圖1所示，投影攝像系統(tǒng)100包括投影攝像裝置101和控制器102。該投影攝像裝置101和該控制器102通過電纜103互相連接。

該投影攝像裝置101是將圖像投射在圖像投影表面111上并捕獲投射在該圖像投影表面111上的投影圖像112的裝置。通過該投影攝像裝置101投射的圖像可以是移動圖像或者靜止圖像。同時，通過該投影攝像裝置101捕獲的捕獲圖像可以是移動圖像或者靜止圖像。進一步地，揚聲器等等可以設(shè)置在投影攝像裝置101中以便使得投影攝像裝置101能夠輸出音頻。例如，投影攝像裝置101可以配置為輸出對應(yīng)于投射圖像的音頻(例如，bgm(背景音樂)等等)或者用于確認操作的音頻(例如，嘟嘟聲、消息等等)。

控制器102經(jīng)由電纜103控制投影攝像裝置101。例如，控制器102經(jīng)由電纜103向投影攝像裝置101提供控制信號以使其投射或者捕獲圖像。控制器102還經(jīng)由電纜103向投影攝像裝置101提供待由投影攝像裝置101投射的圖像的數(shù)據(jù)或者經(jīng)由電纜103從投影攝像裝置101獲得通過投影攝像裝置101捕獲的捕獲圖像。

電纜103是預(yù)定標準的電信電纜(傳輸媒介)例如usb(通用串行總線)和hdmi(注冊商標)(高清晰度多媒體接口)，也就是說能夠傳輸包括圖像、音頻等等的控制信號和內(nèi)容數(shù)據(jù)。電纜103可以通過單個電信電纜配置或者可以通過多個電信電纜配置。

圖像投影表面111是圖像通過投影攝像裝置101被投射到其上的表面。圖像投影表面111可以是平面、曲面，或者是其部分上或者其整個表面包括凹面和凸面的表面，或者可以通過多個表面配置。此外，圖像投影表面111的顏色是任意的并且可以配置為多個顏色。

圖像投影表面111可以在任意物體上形成。例如，圖像投影表面111可以形成在片狀物體例如所謂的屏幕和壁面上。作為選擇，圖像投影表面111可以形成在立體結(jié)構(gòu)上。例如，圖像投影表面111可以形成在結(jié)構(gòu)例如建筑物、車站建筑和巨大建筑物的壁面上，可以形成在自然物體例如巖石、仿真建筑例如布告板和銅像和家具例如抽屜、椅子和書桌上，或者可以形成在生物例如人類和動物上。此外，例如，圖像投影表面111可以形成在多個表面例如墻壁、地板和房間空間的天花板上。

進一步地，圖像投影表面111可以形成在固體物體上或者可以形成在液體或者氣體上。例如，圖像投影表面111可以形成在水塘、水池等等的水表面、瀑布、噴泉等等的流動水表面，或者霧、氣等等的氣體上。另外，圖像投影表面111可以移動、變形或者改變顏色。另外，例如，圖像投影表面111可以形成在多個物體例如墻壁、家具和房屋中的人上，多個建筑上和巨大建筑物墻壁和噴泉上。

<投影攝像裝置的結(jié)構(gòu)>

圖2是用于解釋投影攝像裝置101的結(jié)構(gòu)的實例的示意圖。如圖2a所示，投影攝像裝置101包括投影儀模塊121-1至121-8和照相機模塊122。

投影儀模塊121-1至121-8具有相同的物理配置。換言之，投影儀模塊121-1至121-8不但具有共通的外殼形狀而且具有稍后描述的共通的內(nèi)部物理配置，并且因此具有類似的功能。在以下的說明中，除非需要彼此區(qū)別，投影儀模塊121-1至121-8將稱為投影儀模塊121。

投影儀模塊121通過控制器102進行控制并且將控制器102提供的圖像投射到圖像投影表面111上。投影儀模塊121的外部外觀的實例在圖2b和2c中示出。如圖2b和2c中所示，投影儀模塊121各自發(fā)射來自外殼中單向形成的發(fā)光部分121a在外殼內(nèi)部發(fā)射的光。如圖2a所示，投影儀模塊121的發(fā)光部分121a在基本上相同的方向上形成以便投影儀模塊121能夠?qū)D像投射到相同的圖像投影表面111上。

照相機模塊122由控制器102控制以捕獲投射在圖像投影表面111上的投影圖像112和獲得包括投影圖像112的捕獲圖像。例如，將這個捕獲圖像提供給控制器102以被控制器102用來控制投影儀模塊121。照相機模塊122的外部外觀的實例在圖2d和2e中示出。如圖2d和2e所示，照相機模塊122基本上包括具有與投影儀模塊121相似的形狀的外殼。另外關(guān)于照相機模塊122的內(nèi)部物理配置，可以做成與投影儀模塊121共通的部分，例如光學(xué)系統(tǒng)，被做成與投影儀模塊121共通。

進一步地，照相機模塊122將進入圖2d和2e中所示的外殼中單向形成的光入射部分122a的光進行光電轉(zhuǎn)換以獲得捕獲圖像。如圖2a所示，照相機模塊122的光入射部分122a在與投影儀模塊121的發(fā)光部分121a基本上相同的方向上形成以便能夠捕獲通過投影儀模塊121投射在圖像投影表面111上的投影圖像。

如圖2a所示，在投影攝像裝置101中，投影儀模塊121-1至121-8和照相機模塊122在縱向和橫向上各布置3個。模塊(投影儀模塊121-1至121-8和照相機模塊122)被固定到彼此。因此，相對位置(發(fā)光部分121a的相對位置)是固定的。雖然稍后描述細節(jié)，為了在控制器102的控制下彼此協(xié)作來投射圖像，投影儀模塊121互相校正投影圖像的位置和失真。投影儀模塊121間的相對位置關(guān)系用于這種校正的控制。因為如上所述該相對位置是固定的，所以投影圖像的位置和失真的校正的控制變得容易。

進一步地，雖然稍后將描述細節(jié)，照相機模塊122捕獲的捕獲圖像還被用于投影圖像的位置和失真的校正的控制。例如，同樣通過施加對應(yīng)于圖像投影表面111的形狀、角度等等的校正，可以更精確地校正投影圖像的位置和失真。因此，控制器102可以根據(jù)投影圖像(即，捕獲圖像)施加校正的控制作為實際的投影結(jié)果。為了使用用于控制的捕獲圖像，照相機模塊122和投影儀模塊121間的相對位置關(guān)系變得必要。因為如上所述該相對位置是固定的，所以使用捕獲圖像進行的投影圖像的位置和失真的校正的控制變得更加容易。

應(yīng)注意，在圖2a中所示的實例的情況下，照相機模塊122布置在縱向和橫向上各自布置3個的模塊組的中心處，并且布置8個投影儀模塊121以便圍繞照相機模塊122。通過如上所述布置模塊，各投影儀模塊121和照相機模塊122間的相對距離變得更加均一并且更短，結(jié)果是使用捕獲圖像進行的投影圖像的位置和失真的校正的控制變得更加容易。此外，有可能使投影儀模塊121的布置在縱向、橫向和斜向等上均一化并且使各方向上兩端處的模塊的相對位置更短。因此，通過投影儀模塊121投射的投影圖像112的失真對于具有更大的縱橫比差異的圖像可以降低。

進一步地，雖然模塊的物理配置可能是有區(qū)別的，但是通過如上所述使模塊的物理配置盡可能地共通，可以抑制生產(chǎn)成本的增加。此外，生產(chǎn)可以變得更容易。

<協(xié)作投影>

例如，假定將包括逐行掃描系統(tǒng)(4k@_60p)的具有4k(例如，4096×2160)的分辯率和60fps的幀頻的圖像的內(nèi)容數(shù)據(jù)提供給投影儀模塊121。每個被提供有內(nèi)容數(shù)據(jù)的投影儀模塊121切割出分配給模塊本身的圖像(例如，具有全hd分辯率和60fps的幀頻(1080@_60p)的逐行掃描系統(tǒng)的圖像)的部分圖像(4kp60p)并且將其投射到圖像投影表面111上。

例如，投影儀模塊121-1、投影儀模塊121-3、投影儀模塊121-6和投影儀模塊121-8在如圖3a所示的布置中投射圖像。在圖3a中所示的實例中，投影儀模塊121的投影圖像在圖像投影表面111上在縱向上被投射2個，在橫向上被投射2個(2×2)。更具體地，投影儀模塊121-1的投影圖像112-1在圖像投影表面111的上部左手側(cè)投射，投影儀模塊121-3的投影圖像112-3在圖像投影表面111的上部右手側(cè)投射，投影儀模塊121-6的投影圖像112-6在圖像投影表面111的下部左手側(cè)投射，并且投影儀模塊121-8的投影圖像112-8在圖像投影表面111的下部右手側(cè)投射。

如圖3a所示，這些投影圖像112(投影圖像112-1、投影圖像112-3、投影圖像112-6和投影圖像112-8)部分地彼此重疊并且形成一個區(qū)域。這些投影圖像112包括如上所述的部分圖像(1080@_60p)并且在如圖3a所示的投射狀態(tài)下在圖像投影表面111上形成圖像(4k@_60p)的投影圖像131。更具體地，投影圖像112-1包括投影圖像131(4k@_60p)的左上部分圖像，投影圖像112-3包括投影圖像131(4k@_60p)的右上部分圖像，投影圖像112-6包括投影圖像131(4k@_60p)的左下部分圖像，并且投影圖像112-8包括投影圖像131(4k@_60p)右下部分圖像。因為投影圖像112如上所述部分地彼此重疊，所以包括在各投影圖像112中的部分圖像可以是具有比全hd圖像更高的分辯率(即，更寬范圍)的圖像。

通過如上所述相互協(xié)作的投影儀模塊121-1、投影儀模塊121-3、投影儀模塊121-6和投影儀模塊121-8，投影攝像系統(tǒng)100可以投射4k-分辯率的圖像(4k@_60p)，而不會降低分辯率(沒有降低圖像質(zhì)量)。

應(yīng)注意，為了實現(xiàn)這種投影圖像131，投影圖像112的定位、幾何校正等等是必要的。照相機模塊122包括攝像功能并且能夠使用圖3b中所示的攝像功能感測投影儀模塊121投射的投影圖像112。在圖3中所示的實例中，照相機模塊122正在捕獲投影儀模塊121-8的投影圖像112-8(部分圖像131-8)。通過控制器102基于這個傳感器數(shù)據(jù)執(zhí)行各種校正，部分圖像可以以更自然的形式進行合成以便形成一個投影圖像131。

作為圖像校正的內(nèi)容，例如，存在如圖3b所示的投影儀個別差異校正、重疊校正和屏幕形狀校正。投影儀個別差異校正是對于例如亮度、灰度、亮度、對比度、白平衡、色調(diào)等等的校正。重疊校正是對于作為投影圖像112彼此重疊的區(qū)域的重疊區(qū)域的校正和包括例如水平校正和失真校正。屏幕形狀校正是用于應(yīng)對圖像投影表面102的形狀和姿態(tài)的校正并且包括例如投影變換(平面、球狀、圓柱(圓筒)、多項式的彎曲)。當然，也可以進行其他的校正。

例如，除非在如圖4所示圖像投影表面102相對于投影攝像裝置101面對傾斜方向的情況下得到校正，投影圖像是失真的，失真可以通過投影變換等等得到降低。進一步地，例如，同樣當在如圖5所示的曲面上投射多個圖像時，可以將圖像通過投影變換等等像單個圖像那樣投射。

<投影攝像系統(tǒng)的使用實例>

通過使用這種投影攝像系統(tǒng)100各種投影變得可能。例如，通過如圖6a所示布置多個投影圖像，可以提高投影圖像的分辯率。此外，如圖6b的實例所示，取決于投影儀模塊121投射的投影圖像(部分圖像)的布置，可以自由設(shè)置投影圖像(整個圖像)的縱橫比，而不取決于投影儀模塊121的規(guī)格。

進一步地，如圖6c的實例所示，圖像可以投射在多個墻壁和天花板(即，面向多個方向的屏幕(即，3d結(jié)構(gòu)))上，而沒有失真。此外，如圖6d的實例所示，也可能將圖像投射在寬的曲面屏幕上以便圍繞觀眾而沒有失真。

通過提高這種投影表面的自由度，例如由于投影圖像的表現(xiàn)性的增強，變得可以提高生動的感覺和可見性，并且提高表現(xiàn)的娛樂性和藝術(shù)性。

<投影圖像的特征的局部控制>

在過去的圖像投影系統(tǒng)中，控制器102具有投影儀校正的個別差異和相對位置以便控制投影儀的圖像投影，從而獲得一個具有均一特征的大投影圖像131。

然而，對于通過投影儀投射的投影圖像的表達性有越來越多的要求。例如，需要其中圖像特性例如亮度和分辯率不統(tǒng)一的投影圖像，并且存在這種投影圖像不能用過去的系統(tǒng)實現(xiàn)的擔心。

在這點上，控制第一投影單元以便將第一圖像投射在圖像投影表面上，控制第二投影單元以便在注視區(qū)域中投射第二圖像，該注視區(qū)域作為通過該第一投影單元投射在該圖像投影表面上的第一圖像的預(yù)定部分區(qū)域。

例如，控制第一投影單元和第二投影單元的信息處理裝置包括控制單元，該控制單元控制該第一投影單元將第一圖像投射在圖像投影表面上并且控制第二投影單元將第二圖像投射在注視區(qū)域中，該注視區(qū)域作為第一投影單元投射在圖像投影表面上的第一圖像的預(yù)定部分區(qū)域。

更具體地說，在圖1所示的投影攝像系統(tǒng)100的情況下，控制器102控制投影攝像裝置101的投影儀模塊121(第一投影單元)的一部分將第一圖像投射在圖像投影表面111上以便獲得大投影圖像131，并且控制投影攝像裝置101的另一投影儀模塊121(第二投影單元)將第二圖像投射在作為如上所述投射在圖像投影表面111上的大投影圖像131的預(yù)定部分區(qū)域的注視區(qū)域中。

應(yīng)注意，在投影圖像中局部變化的圖像特性(參數(shù))是任意的。例如，圖像特性(參數(shù))可以是亮度、顏色、分辯率、幀頻等等。多個特征(參數(shù))可以局部變化。此外，第二圖像的圖片可以與第一圖像的注視區(qū)域中投射的部分圖像相同或不同。另外，注視區(qū)域(即，第二圖像)的位置、形狀和大小是任意的(只須小于第一圖像的投影圖像)。對于各特征，注視區(qū)域可以是獨立的。進一步地，被用來投射第一圖像的投影單元的數(shù)量是任意的并且可以是單個或者多個。被用來投射第二圖像的投影單元的數(shù)量也是任意的并且可以是單個或者多個。此外，注視區(qū)域的數(shù)量也是任意的并且可以是單個或者多個。在設(shè)置多個注視區(qū)域的情況下，投射在各注視區(qū)域中的第二圖像的特征和圖片可以相同或者可以不同。另外，在設(shè)置多個注視區(qū)域的情況下，被用來投射在各注視區(qū)域的投影單元的數(shù)量是任意的并且可以是單個或者多個，并且投影單元可以互相相同或者可以互相不同。

<投影的方向和視角的控制>

進一步地，通過在投射在圖像投影表面上的第一圖像的任意部分處設(shè)置注視區(qū)域并且如上所述控制另一投影單元的投影方向和視角，也可能使第二圖像投射在設(shè)置的注視區(qū)域上。例如，在投影攝像系統(tǒng)100的情況下，控制器102在圖像投影表面111上大投影圖像131的任意位置設(shè)置任意大小與形狀的注視區(qū)域并且如上所述控制另一投影儀模塊121的投影方向和視角以便將第二圖像投射在注視區(qū)域上。

在圖7a所示的實例的情況下，投影儀模塊121的圖像投影方向(位移量和位移方向)被控制為位移1、位移2和位移3。此外，在圖7b所示的實例的情況下，投影儀模塊121的圖像投影視角(變焦量、投影范圍的大小)被控制為變焦1、變焦2和變焦3。在圖7c所示的實例中，圖7a的實例和圖7b的實例結(jié)合在一起，并且控制了投影儀模塊121的圖像投影方向和投影視角兩者。通過這樣控制每個投影儀模塊121，控制器102可以將第二圖像投射在投影圖像131(投射的第一圖像)的任意部分上(可以將任意部分設(shè)置為注視區(qū)域)。

<投影圖像實例>

例如，投影攝像系統(tǒng)100能夠如圖8所示投射圖像。在圖8所示的實例的情況下，投影儀模塊121-1的投影圖像112-1、投影儀模塊121-3的投影圖像112-3、投影儀模塊121-6的投影圖像112-6和投影儀模塊121-8的投影圖像112-8形成如參考圖3a描述的投影圖像131(第一圖像的投影圖像)。進一步地，投影儀模塊121-2的投影圖像112-2、投影儀模塊121-4的投影圖像112-4、投影儀模塊121-5的投影圖像112-5和投影儀模塊121-7的投影圖像112-7在投影圖像131的內(nèi)部形成。換言之，投影圖像131的投影圖像112-2、投影圖像112-4、投影圖像112-5和投影圖像112-7的各部分被設(shè)置為注視區(qū)域，并且第二圖像被投射在注視區(qū)域中。

例如，通過在各注視區(qū)域中投射具有與第一圖像相同的圖片的第二圖像，與注視區(qū)域外的區(qū)域比較起來，注視區(qū)域的亮度可以得到提高。此時，第二圖像的亮度可以改變從而變得比第一圖像的亮度更高或更低。此外，通過在注視區(qū)域中投射半透明的灰色圖像作為第二圖像，可以使注視區(qū)域的亮度變得似乎比注視區(qū)域外部更低。

進一步地，投影圖像112-2、投影圖像112-4、投影圖像112-5和投影圖像112-7是通過利用視角控制(變焦控制)將投影儀模塊121的投影視角變窄而獲得的投影圖像。因此，可以使這些投影圖像具有比投影圖像131更高的分辯率。例如，通過在注視區(qū)域中投射具有比第一圖像更高分辯率的第二圖像，可以使注視區(qū)域的分辯率比注視區(qū)域外部更高。

這樣，可以局部地改變投影圖像特性。例如，圖像特性(例如，亮度、分辯率等等)可以在投影圖像的預(yù)定注視區(qū)域和注視區(qū)域外部的區(qū)域之間變化。因此，由于投影圖像的表現(xiàn)性得到提高(超出投影儀模塊121的表現(xiàn)能力的圖像投影變得可能)，例如，變得可能提高生動的感覺和可見性并且同時提高表現(xiàn)的娛樂性和藝術(shù)性。

進一步地，通過控制器102設(shè)置投影圖像的任意部分作為注視區(qū)域并且控制投影儀模塊的方向和視角以便將第二圖像投射在注視區(qū)域中，可以在投影圖像的任意部分局部地改變圖像特性。

<投影攝像裝置的配置>

圖9示出了投影攝像裝置101的主要配置實例的方框圖。如圖9所示，投影攝像裝置101包括控制單元151、圖像處理單元152、存儲器153、投影儀模塊121、照相機模塊122、輸入單元161、輸出單元162、存儲單元163、通信單元164和驅(qū)動器165。

投影儀模塊121各自包括投影單元181、光學(xué)系統(tǒng)182和光學(xué)系統(tǒng)控制單元183。照相機模塊122包括光學(xué)系統(tǒng)控制單元191、光學(xué)系統(tǒng)192和攝像單元193。

投影儀模塊121的投影單元181進行圖像投影有關(guān)的處理。例如，投影單元181在控制單元151的控制下發(fā)射投射光并且將從投影攝像裝置101的外部(例如，圖像投射表面111等)的圖像處理單元152提供的圖像數(shù)據(jù)的圖像進行投射。換言之，投射單元181實現(xiàn)投影功能。投影單元181的光源是任意的并且可以是led(發(fā)光二極管)、氙等等。進一步地，可以發(fā)射激光作為投影單元181發(fā)射的投射光。投射單元181發(fā)射的投射光經(jīng)由光學(xué)系統(tǒng)182離開投影攝像裝置101。

光學(xué)系統(tǒng)182包括例如多個透鏡、光闌等，并且對從投影單元181發(fā)出的投射光施加光學(xué)影響。例如，光學(xué)系統(tǒng)182控制投射光的焦距、曝光、投影方向、投影視角等等。

光學(xué)系統(tǒng)控制單元183包括致動器、電磁線圈等并且在控制單元151的控制下控制光學(xué)系統(tǒng)182以控制投射光的焦距、曝光、投影方向、投影視角等。

照相機模塊122的光學(xué)系統(tǒng)控制單元191包括致動器、電磁線圈等并且在控制單元151的控制下控制光學(xué)系統(tǒng)192以控制入射光的焦距、攝像方向和視角等。

光學(xué)系統(tǒng)192包括例如多個透鏡、光闌等，并且對進入攝像單元193的入射光施加光學(xué)影響。例如，光學(xué)系統(tǒng)192控制入射光的焦距、曝光、攝像方向和視角等等。

攝像單元193包括圖像傳感器。通過使用圖像傳感器對經(jīng)由光學(xué)系統(tǒng)192進入的入射光進行光電轉(zhuǎn)換，捕獲裝置外部的物體，并且生成捕獲圖像。攝像單元193向圖像處理單元152提供獲得的捕獲圖像的數(shù)據(jù)。換言之，攝像單元193實現(xiàn)攝像功能(傳感器功能)。例如，攝像單元193捕獲通過投影單元181投射在圖像投影表面111上的投影圖像112。應(yīng)注意，攝像單元193中設(shè)置的圖像傳感器是任意的并且可以是例如使用cmos(互補金屬氧化物半導(dǎo)體)的cmos圖像傳感器或者使用ccd(電荷耦合器件)的ccd圖像傳感器。

控制單元151在其中包括cpu(中央處理器)、rom(只讀存儲器)、ram(隨機存取存儲器)等等并且執(zhí)行程序和處理數(shù)據(jù)以執(zhí)行與投影攝像裝置101的各處理單元的控制相關(guān)的處理。換言之，投影攝像裝置101的各處理單元在控制單元151的控制下執(zhí)行與投影、攝像等相關(guān)的處理。

例如，控制單元151獲得經(jīng)由通信單元164從控制器102提供的、與投影有關(guān)的控制信息。例如，控制單元151基于控制信息控制圖像處理單元152執(zhí)行對待投射的圖像的預(yù)定圖像處理。進一步地，例如，控制單元151基于控制信息控制投影儀模塊121的投影單元181投射圖像。此外，例如，控制單元151基于控制信息控制投影儀模塊121的光學(xué)系統(tǒng)控制單元183控制投射光的焦距、曝光、投影方向、投影視角等。

進一步地，例如，控制單元151獲得經(jīng)由通信單元164從控制器102提供的、與攝像有關(guān)的控制信息。例如，控制單元151基于控制信息控制照相機模塊122的光學(xué)系統(tǒng)控制單元191以控制入射光的焦距、曝光、攝像方向和視角等。此外、例如，控制單元151基于控制信息控制照相機模塊122的攝像單元193以捕獲圖像。進一步地，例如，控制單元151基于控制信息控制圖像處理單元152執(zhí)行對捕獲圖像的預(yù)定圖像處理。

圖像處理單元152對待投射的圖像和通過攝像獲得的捕獲圖像執(zhí)行圖像處理。例如，圖像處理單元152經(jīng)由通信單元164獲得從控制器102提供的圖像數(shù)據(jù)并且將其存儲在存儲器153中。圖像處理單元152還例如獲得從攝像單元193提供的捕獲圖像的數(shù)據(jù)(捕獲圖像數(shù)據(jù))，并且將其存儲在存儲器153中。例如，圖像處理單元152讀取存儲在存儲器153中的圖像數(shù)據(jù)或者捕獲圖像數(shù)據(jù)并且執(zhí)行圖像處理。圖像處理的內(nèi)容是任意的并且例如包括諸如剪切和人工合成的處理、參數(shù)調(diào)整等。圖像處理單元152將已經(jīng)進行了圖像處理的圖像數(shù)據(jù)或者捕獲圖像數(shù)據(jù)存儲在存儲器153中。

進一步地，例如，圖像處理單元152讀取存儲在存儲器153中的圖像數(shù)據(jù)，將其提供給期望的投影儀模塊121的投影單元181，并使其投射該圖像。進一步地，例如，圖像處理單元152讀取存儲在存儲器153中的捕獲圖像數(shù)據(jù)并經(jīng)由通信單元164將其提供給控制器102。

響應(yīng)于來自圖像處理單元152等的請求，存儲器153存圖像處理單元152處理的儲圖像數(shù)據(jù)和捕獲圖像數(shù)據(jù)并且將存儲的圖像數(shù)據(jù)或者捕獲圖像數(shù)據(jù)提供給圖像處理單元152。

輸入單元161由接收外部信息諸如用戶輸入的輸入設(shè)備組成。例如，輸入單元161包括操作按鈕、觸板、相機、麥克風、輸入終端等等。輸入單元161還可以包括各種傳感器諸如加速度傳感器、光學(xué)傳感器和溫度傳感器。輸出單元162由輸出信息諸如圖像和音頻的輸出設(shè)備組成。例如，輸出單元162包括顯示器、揚聲器、輸出終端等等。

存儲單元163由存儲信息諸如程序和數(shù)據(jù)的存儲介質(zhì)組成。例如，存儲器163包括硬盤、ram磁盤、非易失存儲器等等。通信單元164由執(zhí)行用于經(jīng)由預(yù)定通信介質(zhì)與外部裝置交換信息諸如程序和數(shù)據(jù)的通信的通信設(shè)備組成。通信單元164由例如網(wǎng)絡(luò)接口組成。例如，電纜103連接至通信單元164。通信單元164經(jīng)由電纜103與控制器102通信(交換程序、數(shù)據(jù)等)。

驅(qū)動器165讀取存儲在其中加載的可移動介質(zhì)171中的信息(程序、數(shù)據(jù)等)，可移動介質(zhì)171的實例包括磁盤、光盤、磁光盤和半導(dǎo)體存儲器。驅(qū)動器165將從可移動介質(zhì)171讀取的信息提供給控制單元151。在其中可寫入可移動介質(zhì)171加載在驅(qū)動器165中的情況下，驅(qū)動器165還能夠存儲經(jīng)由可移動介質(zhì)171中的控制單元151提供的信息(程序、數(shù)據(jù)等)。

<控制器的配置>

圖10是示出了控制器102的主要配置實例的方框圖。如圖10所示，在控制器102中，cpu201、rom202和ram203經(jīng)由總線204互相連接。

輸入/輸出接口210也連接至總線204。輸入單元211、輸出單元212、存儲單元213、通信單元214和驅(qū)動器215連接至輸入/輸出接口210。

輸入單元211由接收外部信息諸如用戶輸入的輸入設(shè)備組成。例如，輸入單元211包括鍵盤、鼠標、操作按鈕、觸板、相機、麥克風、輸入終端等等。輸入單元211還可以包括各種傳感器諸如加速度傳感器、光學(xué)傳感器和溫度傳感器以及輸入裝置諸如條型碼閱讀器。輸出單元212由輸出信息諸如圖像和音頻的輸出設(shè)備組成。例如，輸出單元212包括顯示器、揚聲器、輸出終端等等。

存儲單元213由存儲信息諸如程序和數(shù)據(jù)的存儲介質(zhì)組成。例如，存儲單元213包括硬盤、ram磁盤、非易失存儲器等等。通信單元214由執(zhí)行用于經(jīng)由預(yù)定通信介質(zhì)與外部裝置交換信息諸如程序和數(shù)據(jù)的通信的通信設(shè)備組成。通信單元214由例如網(wǎng)絡(luò)接口組成。例如，電纜103連接至通信單元214。通信單元214經(jīng)由電纜103與投影攝像裝置101通信(交換程序和數(shù)據(jù))。

驅(qū)動器215讀取存儲在其中加載的可移動介質(zhì)221中的信息(程序、數(shù)據(jù)等)，可移動介質(zhì)221的實例包括磁盤、光盤、磁光盤和半導(dǎo)體存儲器。驅(qū)動器215將從可移動介質(zhì)221讀取的信息提供給cpu201、ram203等等。在其中可寫入可移動介質(zhì)221加載在驅(qū)動器215中的情況下，驅(qū)動器215還能夠存儲從可移動介質(zhì)221中的cpu201、ram203等提供的信息(程序、數(shù)據(jù)等)。

cpu201例如通過經(jīng)由輸入/輸出接口210和總線204加載存儲在ram203中的存儲單元213中的程序并且執(zhí)行它們來進行各種處理。根據(jù)需要，ram203還存儲中央處理器201執(zhí)行各種處理所需的數(shù)據(jù)等。

<功能塊的配置>

圖11是示出了控制器102實現(xiàn)的主要功能的實例的功能方塊圖。如圖11所示，控制器102實現(xiàn)校正參數(shù)設(shè)置單元231、整體圖像模塊選擇單元232、整體圖像控制參數(shù)設(shè)置單元233、注視區(qū)域設(shè)置單元234、注視區(qū)域模塊選擇單元235、注視區(qū)域控制參數(shù)設(shè)置單元236、光學(xué)系統(tǒng)控制單元237、圖像處理單元238、圖像投影控制單元239、攝像控制單元240等的功能塊。

校正參數(shù)設(shè)置單元231進行與投影儀模塊121投射的投影圖像的校正參數(shù)的設(shè)置有關(guān)的處理。整體圖像模塊選擇單元232進行與用于投射整個圖像(即，第一圖像的投影)的投影儀模塊121的選擇有關(guān)的處理。整體圖像控制參數(shù)設(shè)置單元233進行與整個圖像的投影(即，第一圖像的投影)中涉及的投影儀模塊的控制參數(shù)的設(shè)置有關(guān)的處理。

注視區(qū)域設(shè)置單元234進行與注視區(qū)域的設(shè)置有關(guān)的處理。注視區(qū)域模塊選擇單元235進行與用于相對于注視區(qū)域投射圖像(即，第二圖像的投影)的投影儀模塊121的選擇有關(guān)的處理。注視區(qū)域控制參數(shù)設(shè)置單元236進行與相對于注視區(qū)域的圖像的投影(即，第二圖像的投影)中涉及的投影儀模塊的控制參數(shù)的設(shè)置有關(guān)的處理。

光學(xué)系統(tǒng)控制單元237進行與投影儀模塊121的光學(xué)系統(tǒng)控制單元183和照相機模塊122的光學(xué)系統(tǒng)控制單元191的控制有關(guān)的處理。圖像處理單元238進行與圖像處理單元152的控制有關(guān)的處理。圖像投影控制單元239進行與投影儀模塊121的投影單元181的控制有關(guān)的處理。攝像控制單元240進行與照相機模塊122的攝像單元193的控制有關(guān)的處理。

通過控制器102的cpu201執(zhí)行從ram203、存儲單元213等使用ram203讀取的程序并且處理通過執(zhí)行該程序生成的數(shù)據(jù)或者使用ram203從ram203、存儲單元213等讀取的數(shù)據(jù)來實現(xiàn)這些功能。

<系統(tǒng)控制處理的流程>

通過控制器102使用這些功能塊執(zhí)行的系統(tǒng)控制處理的流程的實例將參考圖12所示的流程圖進行說明。

當系統(tǒng)控制處理開始時，校正參數(shù)設(shè)置單元231在步驟s101中設(shè)置投影儀模塊的校正參數(shù)。投影儀模塊121的投影圖像的校正的實例包括校正投影儀模塊的個別差異的校正(對亮度、灰度、亮度、對比度、白平衡、色調(diào)等的校正等)、相對于重疊區(qū)域的校正(水平校正、失真校正等)和基于圖像投影表面111的形狀的校正(投影轉(zhuǎn)換(平面、球狀、圓柱、多項式曲線)。當然，校正內(nèi)容是任意的，并且可以進行其他校正來作為替代。校正參數(shù)設(shè)置單元231設(shè)置校正參數(shù)，這些校正參數(shù)是上述被用于校正的參數(shù)(對應(yīng)于校正結(jié)果)。

在步驟s102中，整體圖像模塊選擇單元232選擇將分配給整體圖像投影(即，第一圖像的投影)的投影儀模塊121，該整體圖像投影作為形成大投影圖像的圖像投影。例如，在圖8所示的實例的情況下，將投影儀模塊121-1、投影儀模塊121-3、投影儀模塊121-6和投影儀模塊121-8分配給用于形成大投影圖像131的整體圖像投影。應(yīng)注意，將哪個投影儀模塊121分配給整體圖像投影是任意的，并且可以用與圖8所示不同的方式分配投影儀模塊。此外，將多少個投影儀模塊121分配給整體圖像投影是任意的，并且其數(shù)量可以與圖8所示不同。

在步驟s103中的，整體圖像控制參數(shù)設(shè)置單元233設(shè)置用于分配給整體圖像投影的投影儀模塊121的光學(xué)系統(tǒng)控制和圖像處理的控制參數(shù)。整體圖像控制參數(shù)設(shè)置單元233基于分配給整體圖像投影的投影儀模塊121的相對位置關(guān)系、投影儀模塊121投射的投影圖像112的布局圖案、步驟s101中設(shè)置的投影儀校正參數(shù)等來設(shè)置分配給整體圖像投影的投影儀模塊121的控制參數(shù)。如圖13所示，控制參數(shù)包括，例如，用于控制投影方向和視角、梯形失真校正、混和校正、亮度和顏色的調(diào)整等的控制參數(shù)。當然，這一處理中設(shè)置的控制參數(shù)是任意的并且不局限于圖13中所示實例。

在步驟s104中，注視區(qū)域設(shè)置單元234設(shè)置整體圖像(大投影圖像)的一部分作為注視區(qū)域。注視區(qū)域的位置、大小和形狀是任意的。另外，設(shè)置注視區(qū)域的方法也是任意的。例如，注視區(qū)域設(shè)置單元234可以使用第一圖像的直方圖設(shè)置在大投影圖像中亮度水平在期望范圍(例如，比預(yù)定參考水平大)的區(qū)域作為注視區(qū)域。此外，例如，注視區(qū)域設(shè)置單元234可以使用第一圖像的正交變換系數(shù)設(shè)置在大投影圖像中空間頻率在期望范圍(例如，比預(yù)定參考水平高)的區(qū)域作為注視區(qū)域。此外，例如，注視區(qū)域設(shè)置單元234可以使用第一圖像的顏色分布等設(shè)置在大投影圖像中各顏色分布在期望范圍(例如，與預(yù)定顏色匹配)的區(qū)域作為注視區(qū)域。換言之，注視區(qū)域設(shè)置單元234可以設(shè)置相對于第一圖像的特性參數(shù)在期望范圍內(nèi)的區(qū)域作為注視區(qū)域。特性參數(shù)是任意的。例如，特性參數(shù)可以是如上所述的亮度水平、空間頻率、顏色組成等等或者可以是除了那些以外的。此外，注視區(qū)域可以基于多個特性參數(shù)來設(shè)置。

此外，例如，注視區(qū)域設(shè)置單元234可以檢測相對于包括在第一圖像內(nèi)的對象的距離(在深度方向上的距離)并且在大投影圖像中設(shè)置包括具有期望范圍內(nèi)的距離(例如，比預(yù)定參考距離更近)的對象的區(qū)域作為注視區(qū)域。進一步地，例如，注視區(qū)域設(shè)置單元234可以對第一圖像進行特征檢測諸如人類檢測和臉部檢測，并且設(shè)置大投影圖像中檢測到特征的區(qū)域(例如，檢測到人、臉等的區(qū)域)作為注視區(qū)域。進一步地，例如，注視區(qū)域設(shè)置單元234可以對第一圖像進行移動檢測并且設(shè)置大投影圖像中檢測到移動的區(qū)域作為注視區(qū)域。此外，例如，注視區(qū)域設(shè)置單元234可以從注視區(qū)域排除檢測到移動的區(qū)域。

進一步地，例如，可以將包括大投影圖像中第一圖像的預(yù)定對象的注視區(qū)域設(shè)置為注視區(qū)域。例如，在包括在第一圖像內(nèi)的對象可識別(可抽取)為cg(電腦圖形)圖像的情況下，注視區(qū)域設(shè)置單元234可以設(shè)置包括從大投影圖像中識別(抽取)的對象的區(qū)域作為注視區(qū)域。例如，在第一圖像由多個層配置的情況下，注視區(qū)域設(shè)置單元234可以設(shè)置包括大投影圖像中的期望層中包括的對象的區(qū)域作為注視區(qū)域。

此外，例如，注視區(qū)域設(shè)置單元234可以設(shè)置大投影圖像的外部指定的區(qū)域作為注視區(qū)域。例如，注視區(qū)域設(shè)置單元234可以設(shè)置用戶等使用指針等從大投影圖像中指定的區(qū)域作為注視區(qū)域。

進一步地，例如，注視區(qū)域設(shè)置單元234可以設(shè)置預(yù)先設(shè)置好的大投影圖像的預(yù)定部分作為注視區(qū)域。

此外，如上所述的多個方法可以結(jié)合只用，或者如上所述的方法可以與上述以外的方法結(jié)合使用。

在步驟s105中，注視區(qū)域設(shè)置單元234判斷是否存在注視區(qū)域。當判定注視區(qū)域已經(jīng)通過步驟s104的處理進行了設(shè)置并且因此存在時，處理進入步驟s106。

在步驟s106中的，注視區(qū)域模塊選擇單元235選擇將分配給步驟s104中的設(shè)置的注視區(qū)域中圖像(第二圖像)的投影的投影儀模塊121。換言之，注視區(qū)域模塊選擇單元235選擇將分配給用于在注視區(qū)域中形成比如上所述大投影圖像小的投影圖像的圖像投影的投影儀模塊121。注視區(qū)域模塊選擇單元235從步驟s102中選擇的哪些以外的投影儀模塊121中選擇將分配給針對注視區(qū)域的圖像投影的投影儀模塊121。

在步驟s107中的，注視區(qū)域控制參數(shù)設(shè)置單元236設(shè)置將分配給注視區(qū)域的投影儀模塊的控制參數(shù)?？刂茀?shù)與通過步驟s103的處理設(shè)置的相似。

應(yīng)注意，將投影儀模塊121分配給針對注視區(qū)域的圖像投影可以優(yōu)先于步驟s102中將投影儀模塊121分配給整體圖像投影。在這種情況下，例如，只須在步驟s102和s103的處理之前進行步驟s104至s107的處理。

在結(jié)束步驟s107的處理之后，處理進入步驟s108。同樣，當在步驟s105中判定注視區(qū)域不存在時，處理進入步驟s108。

在步驟s108中，光學(xué)系統(tǒng)控制單元237使用步驟s103中設(shè)置的控制參數(shù)和步驟s107中設(shè)置的控制參數(shù)來控制投影儀模塊121的光學(xué)系統(tǒng)控制單元183，以控制圖像投影方向和視角等。

在步驟s109中，圖像投影控制單元239向投影儀模塊121提供圖像并且使它們顯示該圖像。進一步地，圖像處理單元238控制投影儀模塊121的圖像處理單元152以酌情進行圖像處理從而校正/編輯(處理)待投射的圖像(第一和第二圖像)。

在步驟s110中，圖像投影控制單元239判定是否結(jié)束系統(tǒng)控制處理。例如，當判斷由于待投射的圖像是活動圖像所以不會終止系統(tǒng)控制處理并且將要對下一個以及后續(xù)的幀進行類似的控制處理時，處理回到步驟s102從而對下一幀的圖像重復(fù)步驟s102和后續(xù)步驟的處理。

換言之，在投射活動圖像的情況下，對處理目標幀的圖像執(zhí)行步驟s102至s110的處理。這些處理可以對活動圖像的每一幀執(zhí)行或者可以對每隔一些幀的部分幀等執(zhí)行。換言之，注視區(qū)域的設(shè)置和注視區(qū)域中第二圖像的投影可以針對每一幀進行更新、每隔多個幀更新不規(guī)則地更新或者根本不更新。

當在步驟s110中判斷由于圖像投影的結(jié)束等而將還要終止系統(tǒng)控制處理時，則終止系統(tǒng)控制處理。

應(yīng)注意，步驟s108的處理和步驟s109的處理可以彼此并行來執(zhí)行。換言之，在執(zhí)行圖像投影的同時，可以控制圖像投影的方向、視角等等。另外，步驟s108中光學(xué)系統(tǒng)的控制可以與步驟s102至s110的處理并行進行。換言之，步驟s108中光學(xué)系統(tǒng)的控制可以獨立于待投射的活動圖像的幀定時而進行。例如，在每隔一些幀執(zhí)行步驟s102至s110的處理的情況下，步驟s108的處理可以在這些幀之間的任意時間執(zhí)行。

應(yīng)注意，在如上所述的處理中，可以使用照相機模塊122捕獲的捕獲圖像。例如，在步驟s101中的校正參數(shù)的設(shè)置、在步驟s103中控制參數(shù)步驟設(shè)置、步驟s104中注視區(qū)域的設(shè)置、步驟s107中控制參數(shù)的設(shè)置、步驟s108的控制處理、步驟s109的控制處理等中，攝像控制單元240可以控制照相機模塊122的各單元來捕獲圖像投影表面111上的投影圖像112，以便各處理單元可以使用該捕獲圖像。

通過執(zhí)行如上所述的系統(tǒng)控制處理，投影攝像系統(tǒng)100可以局部地改變投影圖像特性。

<投影圖像的實例>

接下來，將描述這樣配置的投影攝像系統(tǒng)100獲得的投影圖像的實例。在圖14a中所示的實例的情況下，大投影圖像(第一圖像的投影圖像)由投影圖像112-1、投影圖像112-3、投影圖像112-6和投影圖像112-8形成，將包括人和摩托車并且接近大投影圖像的圖片內(nèi)的對象的區(qū)域設(shè)置為注視區(qū)域。換言之，小投影圖像(第二圖像的投影圖像)由投影圖像112-2、投影圖像112-4、投影圖像112-5和投影圖像112-7形成。例如，當投影圖像112-2、投影圖像112-4、投影圖像112-5和投影圖像112-7具有與投影圖像112-1、投影圖像112-3、投影圖像112-6和投影圖像-8相當?shù)姆洲q率時，注視區(qū)域中小投影圖像的分辯率變得比其他區(qū)域的圖像的分辯率更高。因此，在投影圖像中，人和位置在更靠前的摩托車可以用高分辨率來表示。此外，通過使投影圖像互相重疊，注視區(qū)域的亮度變得比其他區(qū)域更高。因此，在投影圖像中，人和位置在更靠前的摩托車可以更明亮地來表示。因而，可以這樣顯示投影圖像，使得注視區(qū)域(人和摩托車)的注視度自然地變得比其他區(qū)域(即，背景)的注視度更高(即，吸引對注視區(qū)域的注視)。

在圖14b中所示的實例的情況下，大投影圖像(第一圖像的投影圖像)由投影圖像112-1、投影圖像112-3、投影圖像112-6和投影圖像112-8形成，將檢測到移動而且包括在大投影圖像的圖片內(nèi)已經(jīng)作為移動檢測到的選手和球的區(qū)域設(shè)置為注視區(qū)域。換言之，小投影圖像(第二圖像的投影圖像)由投影圖像112-2、投影圖像112-4、投影圖像112-5和投影圖像112-7形成。用這種方法，可以針對一個大投影圖像設(shè)置多個注視區(qū)域。

在圖15a中所示的實例的情況下，投影圖像112-1被投射到前壁的一部分和房間空間的天花板的一部分，投影圖像112-3被投射到前壁的一部分和房屋空間的右側(cè)壁的一部分，投影圖像112-6被投射到前壁的一部分和房屋空間的左側(cè)壁的一部分，投影圖像112-8被投射到前壁的一部分和房屋空間的地板的一部分，這樣形成了跨越前面和天花板的一部分、右側(cè)壁的一部分、左側(cè)壁的一部分和房間空間的地板的一部分的大投影圖像(第一圖像的投影圖像)。進一步地，將房屋空間的前壁設(shè)置為注視區(qū)域，投影圖像112-2、投影圖像112-4、投影圖像112-5和投影圖像112-7形成在該前壁上。因而，可以將圖像投影范圍拓寬至側(cè)面、天花板和地板以便提高沉浸感，并且位于用戶的視力中心附近的前壁(即，主要圖像范圍位置)上的投影圖像的亮度和分辯率可以得到充分地提高以便抑制圖像質(zhì)量的降低。

應(yīng)注意，如在15b中所示的實例中，即使當圖像投影表面(墻壁等等)為彎曲表面時也可以形成相似的投影圖像。

通過用這種方法局部地提高亮度、分辯率等等，可以提高(變得在視覺上突出)更重要區(qū)域(注視區(qū)域)的注視度。換言之，可以僅提高更重要區(qū)域(注視區(qū)域)中的圖像質(zhì)量并且降低不重要的其他區(qū)域(注視區(qū)域以外的區(qū)域)中的圖像質(zhì)量(降低亮度和分辯率)。具體地，由于不必提高整個投影圖像的圖像質(zhì)量，所以可以很大程度上降低投影攝像裝置101所必需的圖像投影性能，并且可以以更低的成本實現(xiàn)投影攝像系統(tǒng)100。此外，由于注視區(qū)域除外的區(qū)域可以在圖像質(zhì)量方面下降，所以圖像投影所必需的功率消耗的增加可以得到抑制。

應(yīng)注意，還可以將注視區(qū)域的圖像質(zhì)量設(shè)置為低于其他區(qū)域的圖像質(zhì)量。例如，作為第二圖像，可以投射具有比其他區(qū)域更低分辯率的圖像或者模糊圖像，可以在偏離其位置的情況下投射圖像，或者可以投射灰色圖像或者經(jīng)過馬賽克處理的圖像。用這種方法同樣可以降低注視區(qū)域的注視度。進一步地，例如，通過在將邊界線設(shè)置為注視區(qū)域時用這種方法降低圖像質(zhì)量，可以實現(xiàn)防混疊效應(yīng)。

進一步地，可以將具有與第一圖像完全不同的圖案的圖像作為第二圖像在注視區(qū)域中投射。例如，如圖16a所示，由副標題、菜單屏幕和數(shù)據(jù)屏幕示范的數(shù)字圖像可以疊加為第一圖像301的一部分上的第二圖像302。因此，可以例如實現(xiàn)隱藏式字幕、同屏顯示等等。同樣在這種情況下，由于可以如上所述使第二圖像302的分辯率變高，因為可以防止第二圖像302的小字等被壓擠。

此外，如圖16b所示，例如，可以將作為第二圖像312的所謂的擦拭圖像疊加在第一圖像311的一部分上。因此，例如可以實現(xiàn)圖中圖。同樣在這種情況下，由于如上所述使第二圖像312的分辯率變高，所以也可以使不能在過去的具有低分辨率的擦拭圖像中表示的小型圖像更清楚地顯示在第二圖像312中。

此外，通過提高注視區(qū)域的亮度，還可以實現(xiàn)高動態(tài)范圍。例如，如圖16c所示，可以將第一圖像321中看來像太陽的光源設(shè)置為注視區(qū)域，并且可以將具有高亮度的第二圖像322疊加在注視區(qū)域上。因而，第一圖像321的黑暗部分和第二圖像322之間的對比率變得更大，從而實現(xiàn)高動態(tài)范圍。

進一步地，通過將色域不同于第一圖像的第二圖像疊加在第一圖像的注視區(qū)域上，可以擴展投影圖像的色域。在圖17a所示的實例的情況下，投射第一圖像的投影儀模塊121-1(pj1)在注視區(qū)域中投射具有在(r1、g1、b1)具有峰值的顏色分量的圖像，并且投射第二圖像的投影儀模塊121-2(pj2)在同一地點投射具有在(r2、g2、b2)具有峰值的顏色分量的圖像。因而，可以實現(xiàn)超出投影攝像裝置101的圖像投影性能的投影圖像的投影。

進一步地，例如，可以通過如圖17b所示區(qū)分第一圖像和第二圖像的顯示時間來實現(xiàn)高幀頻。特別是可以實現(xiàn)局部高幀頻。圖17b顯示了投射第一圖像的投影儀模塊121-1(pj1)的同步時間和投射第二圖像的投影儀模塊121-2(pj2)的同步時間的實例。在這個實例的情況下，由于投影儀模塊121的投影時間偏離了半周期，所以第一圖像和第二圖像交替地在注視區(qū)域中顯示。因此，實現(xiàn)了局部高幀頻投影。

應(yīng)注意，在這個時候，在注視區(qū)域中的第一和第二圖像中水平像素線的一部分可能變稀疏。例如，可以在第一圖像中投射奇數(shù)條像素線，在第二圖像中投射偶數(shù)條像素線。作為選擇，像素線可以每隔數(shù)個線變稀疏。進一步地，例如，垂直像素線，而不是水平像素線，可能變稀疏。此外，例如，部分區(qū)域，而不是水平像素線，可能變稀疏。

進一步地，可以使用這種高幀頻投射包括視差的立體圖像。例如，關(guān)于注視區(qū)域，可以投射右眼圖像作為第一圖像，投射左眼圖像作為第二圖像。因而，可以實現(xiàn)局部立體圖像投影。

換言之，第一圖像的投影時間和第二圖像的投影時間不需要匹配。也就是說，可以在不投射第一圖像的狀態(tài)下僅投射第二圖像，而同時控制其投影位置、大小、形狀等。例如，還可以再移動的同時投射第二圖像。

<投影攝像裝置的其他配置實例>

投影攝像系統(tǒng)100的配置不局限于上述實例。例如，投影攝像裝置101的投影儀模塊的布置不局限于圖2中所示的實例。例如，如.圖18a所示，照相機模塊122不必布置在3×3配置的中心。此外，如圖18b所示，可以設(shè)置多個照相機模塊122。在圖18b中所示的實例的情況下，照相機模塊122-1和照相機模塊122-2布置在3×3配置的間斷的兩側(cè)上。通過如上所述使用多個照相機模塊122，變得可以更容易地使用照相機模塊122的視差來測量捕獲圖像和圖像投影表面111之間的距離。因此，控制器102可以更容易和更精確地設(shè)置校正參數(shù)和控制參數(shù)。當然，在這種情況下照相機模塊122的布置位置是任意的并且不局限于圖18b中所示的實例。

另外，投影攝像裝置101的模塊配置是任意的并且不局限于3×3。例如，如在圖18c所示的實例中，投影攝像裝置101還可以包括以1(縱向)×3(橫向)配置而布置的投影儀模塊121-1、照相機模塊122和投影儀模塊121-2。做為選擇、例如，如在圖18d中顯示的實例中，模塊可以形成3(縱向)×1(橫向)配置。作為選擇，如在圖18e中所示的實例中，投影攝像裝置101可以包括以3(縱向)×4(橫向)配置而布置的投影儀模塊121-1和兩個照相機模塊122。

作為選擇，如在圖18f中所示的實例中，模塊可以布置為互相分離。在這種情況下，例如，可以通過固定元件等等(不顯示)來固定相對位置，或者模塊可以布置為彼此獨立。

進一步地，雖然在圖9中所示的實例中在投影攝像裝置101中設(shè)置了為模塊共有的控制單元151等，但是模塊可以彼此獨立地操作。

這種情況下的投影儀模塊121的主要配置實例在圖19中示出。在圖19中所示的實例的情況下，投影儀模塊121包括控制單元351、圖像處理單元352、存儲器353、投影單元354、光學(xué)系統(tǒng)355、光學(xué)系統(tǒng)控制單元356、輸入單元361、輸出單元362、存儲單元363、通信單元364和驅(qū)動器365。

控制單元351是類似于控制單元151的處理單元。圖像處理單元352是類似于圖像處理單元152的處理單元。存儲器353是類似于存儲器153的處理單元。投影單元354是類似于投影單元181的處理單元。光學(xué)系統(tǒng)355是類似于光學(xué)系統(tǒng)182的處理單元。光學(xué)系統(tǒng)控制單元356是類似于光學(xué)系統(tǒng)控制單元183的處理單元。輸入單元361是類似于輸入單元161的處理單元。輸出單元362是類似于輸出單元162的處理單元。存儲單元363是類似于存儲單元163的處理單元。通信單元364是類似于通信單元164的處理單元。驅(qū)動器365是類似于驅(qū)動器165的處理單元，并且類似于可移動介質(zhì)171的可移動介質(zhì)371可以加載在其中。

換言之，控制單元351至驅(qū)動器365的處理單元執(zhí)行與圖9中所示的相應(yīng)的處理單元的處理相似的處理。然而，圖19中所示的處理單元不對捕獲圖像進行攝像或者圖像處理方面的控制處理。

進一步地，這種情況下的照相機模塊122的主要配置實例在圖20中示出。在圖20中所示的實例的情況下，照相機模塊122包括控制單元401、光學(xué)系統(tǒng)控制單元402、光學(xué)系統(tǒng)403、攝像單元404、圖像處理單元405、存儲器406、輸入單元411、輸出單元412、存儲單元413、通信單元414和驅(qū)動器415。

控制單元401是類似于控制單元151的處理單元。光學(xué)系統(tǒng)控制單元402是類似于光學(xué)系統(tǒng)控制單元191的處理單元。光學(xué)系統(tǒng)403是類似于光學(xué)系統(tǒng)192的處理單元。攝像單元404是類似于攝像單元193的處理單元。圖像處理單元405是類似于圖像處理單元152的處理單元。存儲器406是類似于存儲器153的處理單元。輸入單元411是類似于輸入單元161的處理單元。輸出單元412是類似于輸出單元162的處理單元。存儲單元413是類似于存儲單元163的處理單元。通信單元414是類似于通信單元164的處理單元。驅(qū)動器415是類似于驅(qū)動器165的處理單元，并且類似于可移動介質(zhì)171的可移動介質(zhì)421可以加載在其中。

換言之，控制單元401至驅(qū)動器415的處理單元執(zhí)行與圖9中所示的相應(yīng)的處理單元的處理相似的處理。然而，圖20中所示的處理單元不對待投射的圖像進行關(guān)于投影或者圖像處理的控制處理。

通過在上述投影儀模塊121和照相機模塊122中的每一個中設(shè)置控制單元，模塊能夠互相獨立地操作。

<投影攝像系統(tǒng)的其他配置實例>

雖然投影攝像裝置101和控制器102經(jīng)由圖1的電纜103彼此通信，但是投影攝像裝置101和控制器102可以無線通信。在這種情況下，電纜103可以省略。同樣在這種情況下，通信單元164(通信單元364)和通信單元214(通信單元414)能夠使用無線lan(局域網(wǎng))、bluetooth(注冊商標)、irda(注冊商標)等等進行無線通信。當然，這些通信單元能夠進行有線和無線兩種通信。

進一步地，雖然投影攝像裝置101和控制器102在圖1中分離配置，但是本技術(shù)不限于此，并且投影攝像裝置101和控制器102可以如圖21a中所示整體地形成。圖21a中所示的投影攝像裝置431是其中投影攝像裝置101的投影儀模塊121和照相機模塊122以及控制器102集成并且包括與圖1中所示的投影攝像系統(tǒng)100類似的功能的裝置。

作為選擇，如圖21b所示，投影攝像裝置101和控制器102可以經(jīng)由預(yù)定網(wǎng)絡(luò)441連接。網(wǎng)絡(luò)441是作為傳播介質(zhì)的通信網(wǎng)絡(luò)。網(wǎng)絡(luò)441可以是任何通信網(wǎng)絡(luò)并且可以是有線通信網(wǎng)絡(luò)、無線通信網(wǎng)絡(luò)或者它們兩者。例如，可以使用有線lan、無線lan、公用電話網(wǎng)、用于無線移動對象的廣域通信網(wǎng)絡(luò)，諸如所謂的3g線路和4g線路、因特網(wǎng)等等，或者也可以使用它們的結(jié)合。此外，網(wǎng)絡(luò)441可以是單個通信網(wǎng)絡(luò)或者多個通信網(wǎng)絡(luò)。另外，網(wǎng)絡(luò)441的部分或者全部可以通過預(yù)定標準的通信電纜來配置，例如，諸如usb電纜和hdmi電纜(注冊商標)。

此外，如圖21c所示，投影攝像裝置101的模塊也可以獨立地操作，省略控制器102，并且在任何模塊中執(zhí)行與控制器102的處理相類似的處理。在圖21c中所示的實例的情況下，投影儀模塊121-1至121-8和照相機模塊122彼此獨立地操作，并且模塊相互連接同時能夠經(jīng)由網(wǎng)絡(luò)441彼此通信。在這些模塊中，投影儀模塊121-8變?yōu)橹鳈C來進行與控制器102類似的處理并且控制其他模塊。應(yīng)注意，模塊可以一體形成，或者每個模塊可以配置為一個裝置。

應(yīng)注意，雖然在1中投影攝像系統(tǒng)100包括投影攝像裝置101和控制器102，但是投影攝像裝置101的數(shù)量和控制器102的數(shù)量是任意的并且可以是多個。

進一步地，雖然在上述說明中由投影攝像裝置101投射的圖像(第一圖像和第二圖像)由控制器102提供，但是圖像(第一圖像和第二圖像)的提供來源是任意的并且可以是控制器102之外的。例如，圖像可以由投影攝像裝置101和控制器102之外的裝置提供，如內(nèi)容服務(wù)器，或者投影攝像裝置101可以預(yù)先存儲內(nèi)容數(shù)據(jù)。

<投影單元的其他配置實例>

投影單元181可以使用激光作為光源。這種情況下的投影單元181的主要配置實例在圖22中示出。在圖22中的，投影單元181包括視頻處理器451、激光驅(qū)動器452、激光輸出單元453-1、激光輸出單元453-2、激光輸出單元453-3、鏡片454-1、鏡片454-2、鏡片454-3、mems(微電子機械系統(tǒng))驅(qū)動器455和mems鏡片456。

視頻處理器451存儲圖像處理單元152提供的圖像并且對該圖像進行必要的圖像處理。視頻處理器451向激光驅(qū)動器452和mems驅(qū)動器455提供待投射的圖像。

激光驅(qū)動器452控制激光輸出單元453-1至453-3投射視頻處理器451提供的圖像。激光輸出單元453-1至453-3輸出相互不同顏色(波長范圍)(諸如紅色、藍色和綠色)的激光。換言之，激光驅(qū)動器452控制各顏色的輸出以便投射視頻處理器451提供的圖像。應(yīng)注意，除非有必要相互區(qū)分，激光輸出單元453-1至453-3稱為激光輸出單元453。

鏡片454-1反射從激光輸出單元453-1輸出的激光并且將其導(dǎo)引至mems鏡片456。鏡片454-2反射從激光輸出單元453-2輸出的激光并且將其導(dǎo)引至mems鏡片456。鏡片454-3反射從激光輸出單元453-3輸出的激光并且將其導(dǎo)引至mems鏡片456。應(yīng)注意，除非有必要互相區(qū)分，鏡片454-1至454-3稱為鏡片454。

mems驅(qū)動器455控制mems鏡片456的鏡片的驅(qū)動以便投射視頻處理器451提供的圖像。例如，如圖23中所示的實例中，mems鏡片456在mems驅(qū)動器455的控制下驅(qū)動附接至mems的鏡片以掃描各顏色的激光。例如，激光從發(fā)光部分121a輸出至裝置外部以照射在圖像投影表面111上。因此，從視頻處理器451提供的圖像被投射在圖像投影表面111上。

應(yīng)注意，雖然在圖22中所示的實例中設(shè)置了3個激光輸出單元453以便輸出3種顏色的激光，但是激光束的數(shù)量(或者顏色的數(shù)量)是任意的。例如，可以設(shè)置4個或者更多個激光輸出單元453，或者數(shù)量可以是2個或更少。換言之，從投影攝像裝置101(投影單元181)輸出的激光可以是兩束或者更少或者可以是4束或者更多。另外，從投影攝像裝置101(投影單元181)輸出的激光的顏色的數(shù)量也是任意的并且可以是兩種顏色或者更少或者4種顏色或者更多。此外，鏡片454和mems鏡片456的配置也是任意的并且不局限于圖22中所示的實例。當然，激光掃描圖案是任意的。

<投影儀模塊間的同步>

在使用mems的這種投影單元181的情況下，由于mems進行設(shè)備的振蕩操作，投影攝像裝置101的模塊不能由外部同步信號驅(qū)動。如果模塊間沒有準確地同步，那么存在引起視頻模糊或者殘留圖像因而降低投影圖像的圖像質(zhì)量的擔心。

在這點上，如圖24所示，例如，控制器102可以從投影儀模塊121獲得同步信號(水平同步信號和垂直同步信號)并且控制投影儀模塊在全部投影儀模塊121的同步信號(例如，垂直同步信號)都匹配的時間投射第一圖像和第二圖像。

<投影儀模塊控制處理的流程>

將參考圖25中的流程圖描述在這種情況下由控制器102執(zhí)行的投影儀模塊控制處理的流程的實例。

在步驟s131中，當投影儀模塊控制處理開始時，圖像處理單元238與外部同步信號同步地從外部裝置獲取新幀的圖像數(shù)據(jù)。在步驟s132中的，圖像處理單元238在存儲單元213等中存儲步驟s131中獲得的新幀的圖像數(shù)據(jù)。

在步驟s133中，圖像投影控制單元239從投影儀模塊121獲取水平或者垂直同步信號并且判斷是否所有投影儀模塊121的同步時間都已匹配。當判斷時間已匹配時，處理前進到步驟s134。

在步驟s134中，圖像投影控制單元239在與同步時間對應(yīng)的時間從存儲單元213讀出新幀的圖像數(shù)據(jù)并且將新幀的圖像數(shù)據(jù)提供給將投射新幀的圖像數(shù)據(jù)的投影儀模塊121。在步驟s135中，圖像投影控制單元239使投影儀模塊121在與同步時間相應(yīng)的時間投射所提供的新幀的圖像。終止步驟s135的處理之后，處理前進到步驟s137。

進一步地，當在步驟s133中判斷沒有檢測到全部投影儀模塊的同步信號時，處理前進到步驟s136。在步驟s136中，圖像投影控制單元239使投影儀模塊121在與同步時間相應(yīng)的時間投射當前幀的圖像。終止步驟s136的處理之后，處理前進到步驟s137。

在步驟s137中，圖像投影控制單元239判斷定是否結(jié)束投影儀模塊控制處理。當判斷由于活動圖像的投影正在繼續(xù)而不終止時，處理回到步驟s131，并且對于該新幀執(zhí)行該步驟以及后續(xù)步驟的處理。

另一方面，例如，當在步驟s137中判斷為由于全部幀的投影都終止而終止投影儀模塊控制處理時，那么終止投影儀模塊控制處理。

通過用這種方法執(zhí)行投影儀模塊控制處理，控制器102可以使投影儀模塊121在相同的時間投射圖像，結(jié)果可以抑制由于視頻模糊、殘留圖像等引起的投影圖像的圖像質(zhì)量的下降。

<投影儀模塊和照相機模塊間的同步>

進一步地，在這種使用mems的投影單元181的情況下，例如，控制器102可以控制模塊使得照相機模塊122在與由如圖24所示的任何一個投影儀模塊121生成的同步信號(水平同步信號或者垂直同步信號)相對應(yīng)的時間捕獲圖像。

例如，如果投影儀模塊121的圖像投影時間和照相機模塊122的攝像時間偏離，那么存在變得難以捕獲投影圖像的擔心。

在這點上，在圖24中所示的實例的情況下，設(shè)置用投影儀模塊121生成的垂直同步信號輸入的或門461，并且將或門461的輸出提供給照相機模塊122作為垂直同步信號。因此，照相機模塊122可以在與任意一個投影儀模塊121的同步時間相對應(yīng)的時間捕獲圖像。

<照相機模塊控制處理的流程>

將參考圖26中的流程圖描述在這種情況下由控制器102執(zhí)行的照相機模塊控制處理的流程的實例。

當照相機模塊控制處理開始時，在步驟s151中，攝像控制單元240從投影儀模塊121獲取水平或者垂直同步信號，并且判斷其是否與任意一個投影儀模塊121的同步時間匹配。當判斷為匹配時，處理前進到步驟s152。

在步驟s152中，攝像控制單元240控制照相機模塊122捕獲圖像并且在與該同步時間相對應(yīng)的時間接受該捕獲圖像。在步驟s153中，攝像控制單元240從照相機模塊122獲取已經(jīng)接受的捕獲圖像數(shù)據(jù)。

在步驟s154中，圖像處理單元238將獲取的捕獲圖像數(shù)據(jù)存儲在存儲單元213等中。終止步驟s154的處理之后，處理前進到步驟s155。另一方面，當在步驟s151中判斷為不與任意一個投影儀模塊121的同步時間匹配時，處理前進到步驟s155。

在步驟s155中，圖像處理單元238判斷是否終止照相機模塊控制處理。當判斷由于活動圖像的投影正在繼續(xù)而不終止時，處理回到步驟s151，并且對于該新幀執(zhí)行該步驟以及后續(xù)步驟的處理。

另一方面，例如，當在步驟s155中判斷為由于全部幀的投影都終止而終止照相機模塊控制處理時，那么終止照相機模塊控制處理。

通過用這種方法執(zhí)行照相機模塊控制處理，控制器102可以使圖像在與投影儀模塊121的投影時間相對應(yīng)的時間被捕獲，并且可以更準確地獲得包括投影圖像的捕獲圖像。因此，可以更適當?shù)貓?zhí)行系統(tǒng)控制處理中使用捕獲圖像的處理(例如，參數(shù)設(shè)置、注視區(qū)域等)。

<注視區(qū)域的設(shè)置>

進一步地，由于在使用mems的投影單元181的情況下通過掃描激光來進行圖像投影，注視區(qū)域可以設(shè)置為矩形之外的形狀。在這點上，如在圖27中所示的實例中，可以在第一圖像中通過根據(jù)預(yù)定圖像特性(例如，亮度、空間頻率等等)來劃分和整合區(qū)域來設(shè)置注視區(qū)域。在圖27中所示的實例的情況下，注視區(qū)域設(shè)置單元234將預(yù)定圖像特性不均一(不足夠均一)的區(qū)域進行劃分并且遞歸地重復(fù)這一劃分直到圖像特性在所有區(qū)域變得足夠均一。進一步地，在相鄰區(qū)域的圖像特性匹配或者彼此足夠相近的情況下，注視區(qū)域設(shè)置單元234整合那些區(qū)域。換言之，在圖像特性在整合區(qū)域中足夠地統(tǒng)一的情況下，注視區(qū)域設(shè)置單元234整合那些相鄰區(qū)域。

用這種方法，注視區(qū)域設(shè)置單元234劃分第一圖像的區(qū)域，使得在該區(qū)域中預(yù)定圖像特性變得足夠地統(tǒng)一并且圖像特性在相鄰區(qū)域之間不匹配(不足夠相近)。然后，注視區(qū)域設(shè)置單元234從劃分區(qū)域中將其圖像特性在期望范圍內(nèi)的區(qū)域設(shè)置為注視區(qū)域。

<注視區(qū)域設(shè)置處理的流程>

將參考圖28的流程圖描述在這種情況下注視區(qū)域設(shè)置處理的流程的實例。當注視區(qū)域設(shè)置處理開始時，注視區(qū)域設(shè)置單元234在步驟s171中對預(yù)定圖像特性不均一的區(qū)域進行劃分(例如，劃分為4個區(qū)域(2×2))。

在步驟s172中，注視區(qū)域設(shè)置單元234判斷圖像特性在劃分獲得的區(qū)域中是否已經(jīng)變得足夠地均一。當斷定存在圖像特性不足夠均一的區(qū)域時，處理回到步驟s171以便在該區(qū)域上進行區(qū)域劃分。

當在步驟s172中判斷在由所述劃分獲得的全部區(qū)域中圖像特性變得足夠均一時，處理前進到步驟s173。

在步驟s173中，注視區(qū)域設(shè)置單元234將圖像特性匹配(或者足夠接近的)相鄰區(qū)域進行整合。

在步驟s174中，注視區(qū)域設(shè)置單元234判斷全部相鄰區(qū)域之間圖像特性是否不同(不足夠接近)。當斷定存在圖像特性匹配(或者足夠接近)的相鄰區(qū)域時，處理回到步驟s173以便整合圖像特性匹配(或足夠接近)的相鄰區(qū)域。

當在步驟判斷圖像特性在全部相鄰區(qū)域之間不同(不足夠接近)時，處理前進到步驟s175。

在步驟s175中，注視區(qū)域設(shè)置單元234將由劃分獲得的這樣設(shè)置的區(qū)域中圖像特性在期望范圍內(nèi)的區(qū)域設(shè)置為注視區(qū)域。

在終止步驟s175的處理之后，終止注視區(qū)域設(shè)置處理。

通過用這種方法設(shè)置注視區(qū)域，注視區(qū)域設(shè)置單元234可以設(shè)置具有更均一的圖像特性的注視區(qū)域。

如上所述的一系列處理可以通過硬件或者軟件來執(zhí)行。在通過軟件執(zhí)行如上所述的一系列處理的情況下，配置所述軟件的程序從網(wǎng)絡(luò)或者記錄介質(zhì)安裝。

如圖9、10、19、20等所示，例如，記錄介質(zhì)由其上記錄有程序的可移動介質(zhì)171、可移動介質(zhì)221、可移動介質(zhì)371、可移動介質(zhì)421等組成，那些可移動介質(zhì)被分配為將程序傳送至用戶并且與裝置主體分離設(shè)置。這些可移動介質(zhì)包括磁盤(包括軟磁盤)和光盤(包括cd-rom和dvd)以及磁光盤(包括md(minidisc))、半導(dǎo)體存儲器等等。

在這種情況下，在投影攝像裝置101中，例如，可以通過加載驅(qū)動器165中的可移動介質(zhì)171將程序安裝在存儲單元163中。此外，在控制器102中，例如，可以通過加載驅(qū)動器215中的可移動介質(zhì)221將程序安裝在存儲單元213中。進一步地，在投影儀模塊121中，例如，可以通過加載驅(qū)動器365中的可移動介質(zhì)371將程序安裝在存儲單元363中。此外，在照相機模塊122中，例如，可以通過加載驅(qū)動器415中的可移動介質(zhì)421將程序安裝在存儲單元413中。

此外，該程序還可以經(jīng)由有線或無線傳輸媒介例如局域網(wǎng)、因特網(wǎng)和數(shù)字衛(wèi)星廣播來提供。在這種情況下，在投影攝像裝置101中，例如，該程序可以通過通信單元164接收并且安裝在存儲單元163中。進一步地，在控制器102中，例如，該程序可以通過通信單元214接收并且安裝在存儲單元213中。進一步地，在投影儀模塊121中，例如，該程序可以通過通信單元364接收并且安裝在存儲單元363中。此外，在照相機模塊122中，例如，該程序可以通過通信單元414接收并且安裝在存儲單元413中。

可選擇地，也可以將程序預(yù)先安裝在存儲器、rom等中。在投影攝像裝置101的情況下，例如，可以將程序預(yù)先安裝在存儲單元163、合并到控制單元151中的rom等中。進一步地，在控制器102的情況下，例如，可以將程序預(yù)先安裝到存儲單元213、rom202等中。進一步地，在投影儀模塊121的情況下，例如，可以將程序預(yù)先安裝在存儲單元363、合并到控制單元351的rom等中。此外，在照相機模塊122的情況下，例如，可以將程序預(yù)先安裝在存儲單元413、合并到控制單元401的rom等中。

應(yīng)注意，電腦執(zhí)行的程序可以是其中按照說明書中描述的順序以時間序列執(zhí)行處理的程序或者可以是其中并行地或者在必要的時間諸如調(diào)用時執(zhí)行處理的程序。

進一步地，在說明書中，描述記錄在記錄介質(zhì)上的程序的步驟不僅包括以所述次序以時間序列進行的處理，還包括并行或者甚至是不一定以時間序列執(zhí)行時獨自執(zhí)行的處理。

此外，如上所述步驟的處理可以在如上所述的各裝置中或者除了如上所述裝置之外的任意裝置中執(zhí)行。在這種情況下，執(zhí)行處理的裝置只須包括執(zhí)行處理所必需的上述功能(功能塊等等)。此外，處理所必需的信息只須酌情傳輸至那個裝置。

此外，在本說明書中，系統(tǒng)指的是多個組成元件(裝置、模塊(組件)等等)的集合，并且全部組成元件是否設(shè)置在同一殼體中是沒關(guān)系的。因此，容納在不同殼體中并且經(jīng)由網(wǎng)絡(luò)連接的多個裝置和其中多個模塊容納在單個殼體中的單個裝置都稱為體系。

此外，上面描述為單個裝置(或者處理單元)的配置可以劃分為配置多個裝置(或者處理單元)。相反地，上面描述為多個裝置(或者處理單元)的配置可以整合為單一的裝置(或者處理單元)。此外，當然可以將不是如上所述的配置添加至各裝置(或者處理單元)的配置。此外，只要整個系統(tǒng)的配置并且操作基本上相同，某個裝置(或者處理單元)的配置的一部分可以包括在另一裝置(或者處理單元)的配置中。

迄今為止，已經(jīng)參考附圖對本公開的優(yōu)選實施方案進行了具體的描述，但是本公開的技術(shù)范圍不局限于以上實例。本領(lǐng)域技術(shù)人員應(yīng)該理解，只要在所附權(quán)利要求或者其對等物的范圍內(nèi)，可以基于設(shè)計要求和其他因素進行各種修改、合并、子合并和變化。

例如，本技術(shù)可以采用云計算配置，其中經(jīng)由網(wǎng)絡(luò)通過多個裝置將一個功能分割并且協(xié)作處理。

進一步地，以上流程圖中描述的步驟可以通過單個裝置執(zhí)行或者可以通過多個裝置劃分并執(zhí)行。

此外，在其中多個處理包括在單個步驟中的情況下，可以通過單個裝置執(zhí)行包括在單個步驟中的多個處理或者通過多個裝置進行劃分并執(zhí)行。

此外，本技術(shù)不限于此，并且可以包含有這種配置系統(tǒng)的一個裝置或者多個裝置上安裝的各種配置，諸如作為系統(tǒng)lsi(大規(guī)模集成化)等的處理器、使用多個處理器等的模塊、使用多個模塊等的單元和其中將其他功能增添至該單元的集合(即，裝置的部分配置)。

應(yīng)注意，本技術(shù)還可以采取以下配置。

(1)一種信息處理裝置，包括

控制單元，所述控制單元控制第一投影單元將第一圖像投射在圖像投影表面上并控制第二投影單元在注視區(qū)域中投射第二圖像，所述注視區(qū)域作為通過所述第一投影單元投射在所述圖像投影表面上的所述第一圖像的預(yù)定部分區(qū)域。

(2)根據(jù)(1)所述的信息處理裝置，其中

所述控制單元使投射在所述第一圖像的所述注視區(qū)域中的部分圖像或者通過改變所述部分圖像的參數(shù)而獲得的圖像作為所述第二圖像投射在所述注視區(qū)域中。

(3)根據(jù)(1)或(2)所述的信息處理裝置，其中

所述控制單元使具有與在所述第一圖像的所述注視區(qū)域中投射的部分圖像不同的圖案的圖像作為所述第二圖像投射在所述注視區(qū)域中。

(4)根據(jù)(1)至(3)中任一項所述的信息處理裝置，其中

注視區(qū)域設(shè)置單元，其設(shè)置所述注視區(qū)域，

其中所述控制單元控制所述第二投影單元的投影的方向和視角以使所述第二圖像在由所述注視區(qū)域設(shè)置單元設(shè)置的所述注視區(qū)域中進行投射。

(5)根據(jù)(4)所述的信息處理裝置，其中

所述注視區(qū)域設(shè)置單元基于預(yù)定圖像特性設(shè)置所述注視區(qū)域。

(6)根據(jù)(5)所述的信息處理裝置，其中

所述注視區(qū)域設(shè)置單元將相對于所述第一圖像的特征參數(shù)在期望范圍內(nèi)的區(qū)域設(shè)置為所述注視區(qū)域。

(7)根據(jù)(5)或(6)所述的信息處理裝置，其中

所述注視區(qū)域設(shè)置單元將包括其與所述第一圖像在深度方向上的距離在期望范圍內(nèi)的對象的區(qū)域設(shè)置為所述注視區(qū)域。

(8)根據(jù)(5)至(7)中任一項所述的信息處理裝置，其中

所述注視區(qū)域設(shè)置單元將相對于所述第一圖像檢測到特色的區(qū)域設(shè)置為所述注視區(qū)域。

(9)根據(jù)(4)至(8)中任一項所述的信息處理裝置，其中

所述注視區(qū)域設(shè)置單元將相對于所述第一圖像包括對象的區(qū)域設(shè)置為所述注視區(qū)域。

(10)根據(jù)(4)至(9)中任一項所述的信息處理裝置，其中

所述注視區(qū)域設(shè)置單元將相對于所述第一圖像指定的區(qū)域設(shè)置為所述注視區(qū)域。

(11)根據(jù)(4)至(10)中任一項所述的信息處理裝置，其中

所述控制單元基于通過捕獲投射在所述圖像投影表面上的所述第一圖像和所述第二圖像的攝像單元獲得的捕獲圖像控制所述第二投影單元的投影的方向和視角。

(12)根據(jù)(1)至(11)中任一項所述的信息處理裝置，其中

與彼此獨立的同步信號同步地驅(qū)動所述第一投影單元和所述第二投影單元，并且

所述控制單元使所述第一圖像和所述第二圖像在所有所述投影單元的所述同步信號都匹配的時間進行投射。

(13)根據(jù)(1)至(12)中任一項所述的信息處理裝置，其中

注視區(qū)域設(shè)置單元，其設(shè)置所述注視區(qū)域，

其中

與彼此獨立的同步信號同步地驅(qū)動所述第一投影單元和所述第二投影單元，并且

所述控制單元控制攝像單元與所述同步信號同步地捕獲投射在所述圖像投影表面上的所述第一圖像和所述第二圖像，并且基于所述捕獲圖像控制所述第二投影單元的投影的方向和視角，以使所述第二圖像投射在由所述注視區(qū)域設(shè)置單元設(shè)置的所述注視區(qū)域中。

(14)根據(jù)(1)至(13)中任一項所述的信息處理裝置，其中

所述第一投影單元，和

所述第二投影單元。

(15)根據(jù)(14)所述的信息處理裝置，其中

所述第一投影單元和所述第二投影單元之間的相對位置是固定的。

(16)根據(jù)(15)所述的信息處理裝置，進一步包括

攝像單元，其捕獲投射在所述圖像投影表面上的所述第一圖像和所述第二圖像。

(17)根據(jù)(16)所述的信息處理裝置，其中

所述第一投影單元、所述第二投影單元、所述攝像單元和所述控制單元一體形成。

(18)根據(jù)(17)所述的信息處理裝置，其中

所述第一投影單元和所述第二投影單元布置在所述攝像單元的周邊。

(19)根據(jù)(16)至(18)中任一項所述的信息處理裝置，其中

所述攝像單元設(shè)置為多個。

(20)一種信息處理方法，其包括：

控制第一投影單元將第一圖像投射在圖像投影表面上；和

控制第二投影單元在注視區(qū)域中投射所述第二圖像，所述注視區(qū)域作為由所述第一投影單元投射在所述圖像投影表面上的所述第一圖像的預(yù)定部分區(qū)域。

參考符號目錄

100投影攝像系統(tǒng)

101投影攝像裝置

102控制器

111圖像投影表面

112投影圖像

121投影儀模塊

122照相機模塊

131投影圖像

151控制單元

152圖像處理單元

153存儲器

161輸入單元

162輸出單元

163存儲單元

164通信單元

165驅(qū)動器

171可移動介質(zhì)

181投影單元

182光學(xué)系統(tǒng)

183光學(xué)系統(tǒng)控制單元

191光學(xué)系統(tǒng)控制單元

192光學(xué)系統(tǒng)

193攝像單元

201cpu

202rom

203ram

204總線

210輸入/輸出接口

211輸入單元

212輸出單元

213存儲單元

214通信單元

215驅(qū)動器

221可移動介質(zhì)

231校正參數(shù)設(shè)置單元

232整體圖像模塊選擇單元

233整體圖像控制參數(shù)設(shè)置單元

234注視區(qū)域設(shè)置單元

235注視區(qū)域模塊選擇單元

236注視區(qū)域控制參數(shù)設(shè)置單元

237光學(xué)系統(tǒng)控制單元

238圖像處理單元

239圖像投影控制單元

240攝像控制單元

351控制單元

352圖像處理單元

353存儲器

354投影單元

355光學(xué)系統(tǒng)

356光學(xué)系統(tǒng)控制單元

361輸入單元

362輸出單元

363存儲單元

364通信單元

365驅(qū)動器

371可移動介質(zhì)

401控制單元

402光學(xué)系統(tǒng)控制單元

403光學(xué)系統(tǒng)

404攝像單元

405圖像處理單元

406存儲器

411輸入單元

412輸出單元

413存儲器

414通信單元

415驅(qū)動器

421可移動介質(zhì)

431投影攝像裝置

441網(wǎng)絡(luò)

451視頻處理器

452激光驅(qū)動器

453激光輸出單元

454鏡片

455mems驅(qū)動器

456mems鏡片

461或門。