顯示控制設備、顯示控制方法和程序的制作方法
【專利摘要】在一個說明性實施例中,提供了一種顯示控制設備。該顯示控制設備包括顯示控制部分,用于根據(jù)成像設備和顯示設備之間的位置關系來控制虛擬物體的顯示。
【專利說明】顯示控制設備、顯示控制方法和程序
[0001]相關申請的交叉引用
[0002]本申請要求在2012年3月27日在日本專利局中提交的日本專利申請P2012-071332的優(yōu)先權,其整體內(nèi)容由此通過引用被并入在此。
【技術領域】
[0003]本申請涉及顯示控制設備、顯示控制方法和程序。
【背景技術】
[0004]近些年來,已經(jīng)開發(fā)了使用由成像設備捕獲的用戶的成像結(jié)果(例如,用戶等的手勢)作為輸入接口的技術。
[0005]根據(jù)該技術,例如,變得有可能控制向與在所捕獲的圖像中所示的用戶的位置(例如,用戶的身體的一部分或整體的位置)對應的區(qū)域增加的物體。在使用輸入接口的該技術中,通常,使用由面向用戶安裝的成像設備拍攝的所捕獲圖像,并且,控制向與在所捕獲的圖像中所示的用戶的二維位置對應的區(qū)域增加的物體。
[0006]例如,公開了一種技術,用于從由面向用戶安裝的成像設備拍攝的所捕獲圖像檢測移動二維區(qū)域,并且根據(jù)檢測結(jié)果來控制在計算機圖像中包括的物體的移動(例如,參BPTLl)。
[0007][引用列表]
[0008][專利文獻]
[0009][PTL1]JP2006-014875A
【發(fā)明內(nèi)容】
[0010][技術問題]
[0011]然而,不總是面向用戶安裝成像設備。例如,在向由成像設備拍攝的所捕獲的圖像增加用于操作的虛擬物體的前提下,在用戶后面斜著安裝成像設備的情況下,當通過與在其中面向用戶安裝成像設備的情況中相同的技術來向所捕獲的圖像增加用于操作的虛擬物體時,用戶可操作性劣化。因此,期望實現(xiàn)用于增強用戶可操作性的技術。
[0012][對于問題的解決方案]
[0013]鑒于上面情況,提供了本實施例。在說明性實施例中,一種顯示控制設備包括顯示控制部分,用于根據(jù)在成像設備和顯示設備之間的位置關系來控制虛擬物體的顯示。
[0014]根據(jù)如上所述的本公開的實施例,可以增強用戶可操作性。
【專利附圖】
【附圖說明】
[0015]圖1是示出根據(jù)第一實施例的顯示控制系統(tǒng)的配置的示例的圖。
[0016]圖2是示出在根據(jù)在圖1中所示的示例而配置顯示控制系統(tǒng)的情況下的用于操作的虛擬物體的增加的示例的圖。
[0017]圖3是示出根據(jù)第一實施例的顯示控制系統(tǒng)的配置的另一個示例的圖。
[0018]圖4是示出在根據(jù)在圖3中所示的示例配置顯示控制系統(tǒng)的情況下的用于操作的虛擬物體的增加的示例的圖。
[0019]圖5是示出根據(jù)第一實施例的顯示控制設備的功能配置示例的框圖。
[0020]圖6是示出根據(jù)第一實施例的顯示控制系統(tǒng)的配置的另一個示例的圖。
[0021]圖7是示出在根據(jù)在圖6中所示的示例來配置顯示控制系統(tǒng)的情況下的用于操作的虛擬物體的增加的示例。
[0022]圖8是示出在根據(jù)在圖6中所示的示例來配置顯示控制系統(tǒng)的情況下的用于操作的虛擬物體的增加的另一個示例的圖。
[0023]圖9是示出改變用于操作的虛擬物體的顯示的一個示例的圖。
[0024]圖10是示出改變用于操作的虛擬物體的顯示的另一個示例的圖。
[0025]圖11是示出改變用于操作的虛擬物體的顯示的另一個示例的圖。
[0026]圖12是示出根據(jù)第一實施例的由顯示控制設備執(zhí)行的操作的流程的流程圖。
[0027]圖13是示出根據(jù)第二實施例的顯示控制系統(tǒng)的配置的示例的圖。
[0028]圖14是示出根據(jù)第二實施例的顯示控制設備的功能配置示例的框圖。
[0029]圖15是示出根據(jù)第二實施例的由顯示控制設備執(zhí)行的操作的流程的流程圖。
【具體實施方式】
[0030]以下,將參考附圖詳細描述本公開的優(yōu)選實施例。注意,在本說明書和附圖中,使用相同的附圖標號來表示具有大體相同的功能和結(jié)構的結(jié)構元件,并且省略這些結(jié)構元件的重復說明。
[0031]而且,在本說明書和附圖中,存在下述一些情況:其中,通過在相同的附圖標號后使用不同的字母表示來彼此區(qū)分具有大體相同的功能和結(jié)構的多個結(jié)構元件。注意,在不必彼此區(qū)分具有大體相同功能和結(jié)構的多個結(jié)構元件的情況下,僅使用相同的附圖標號來表示該多個結(jié)構元件。
[0032]而且,將以下面的順序來描述“【具體實施方式】”。
[0033]1.第一實施例
[0034]2.第二實施例
[0035]3.結(jié)論
[0036]〈1.第一實施例>
[0037]以下,將描述本公開的第一實施例。首先,將描述根據(jù)本公開的第一實施例的顯示控制系統(tǒng)的配置的示例。注意,該示例對應于在其中將模式設置為下述的第一模式的情況下的顯示控制系統(tǒng)的配置示例。
[0038]圖1是示出根據(jù)本公開的第一實施例的顯示控制系統(tǒng)的配置的示例的圖。如圖1中所示,根據(jù)本公開的第一實施例的顯示控制系統(tǒng)IA包括顯示控制設備10A、顯示設備20和成像設備30。成像設備30具有將用戶U成像的功能。顯示控制設備1A具有以下述方式來控制顯示設備20的功能:在顯示設備20上顯示由成像設備30拍攝的所捕獲的圖像。顯示設備20具有根據(jù)由顯示控制設備1A執(zhí)行的控制來顯示所捕獲的圖像的功能。
[0039]圖2是示出在根據(jù)在圖1中所示的示例來配置顯示控制系統(tǒng)IA的情況下,用于操作的虛擬物體的增加的示例的圖。如圖2中所示,在顯示設備20上顯示由成像設備30拍攝的所捕獲的圖像,并且向所捕獲的圖像加上用于操作的虛擬物體211a和211b。在圖2中所示的示例具有兩個用于操作的虛擬物體,但是用于操作的虛擬物體的數(shù)量不被特別限制。而且,雖然圖2作為示例示出在機頂盒(STB)中嵌入顯示控制設備1A的情況,但是顯示控制設備1A可以被嵌入在顯示設備20中或可以被嵌入在成像設備30中。而且,顯示控制設備1A可以被嵌入在另一個設備中,或者可以不被嵌入在另一個設備中并且可以作為單個設備存在。
[0040]接下來,將描述根據(jù)本公開的第一實施例的顯示控制系統(tǒng)IA的配置的另一個示例。注意,這個示例對應于在將模式設置為下述的第二模式的情況下的顯示控制系統(tǒng)IA的配置示例。
[0041]圖3是示出根據(jù)本公開的第一實施例的顯示控制系統(tǒng)IA的配置的另一個示例的圖。如圖3中所示,根據(jù)本公開的第一實施例的顯示控制系統(tǒng)IA的另一個示例包括顯示控制設備10A、顯示設備20、成像設備30和檢測設備40。顯示控制設備1A具有以下述方式控制顯示設備20的功能:在顯示設備20上顯示由成像設備30拍攝的所捕獲的圖像。檢測設備40具有檢測用戶U的行為的功能。檢測設備40可以是可以獲取深度信息的設備,并且可以由例如紅外線傳感器配置。
[0042]圖4是示出在根據(jù)在圖3中所示的示例來配置顯示控制系統(tǒng)IA的情況下,用于操作的虛擬物體的增加的示例的圖。如圖4中所示,在顯示設備20上顯示由成像設備30拍攝的所捕獲的圖像,并且向所捕獲的圖像加上用于操作的虛擬物體211c。在圖4中所示的示例具有10個用于操作的虛擬物體211c,但是用于操作的虛擬物體211c的數(shù)量不被具體限制。而且,雖然圖4作為示例示出在STB中嵌入顯示控制設備1A的情況,但是顯示控制設備1A可以被嵌入在顯示設備20中,可以被嵌入在成像設備30中,或者可以被嵌入在檢測設備40中。而且,顯示控制設備1A可以被嵌入在另一個設備中,或者可以不被嵌入在另一個設備中并且可以作為單個設備存在。
[0043]在圖4中,基于由用戶U選擇的用于操作的虛擬物體211c進展的應用的顯示屏幕被顯示為計算機圖像220。因此,用戶U可以在觀看計算機圖像220的同時確定要選擇哪個用于操作的虛擬物體211c。雖然在圖2中所示的顯示設備20上未顯示計算機圖像220,但是在圖2中所示的顯示設備20也可以具有以相同方式在其上顯示的計算機圖像220。
[0044]迄今,已經(jīng)描述了根據(jù)本公開的第一實施例的顯示控制系統(tǒng)IA的配置的一個示例和另一個示例。接下來,將描述在如在那些示例中所示配置顯示控制系統(tǒng)IA的情況下的顯示控制設備1A的功能。
[0045]圖5是示出根據(jù)第一實施例的顯示控制設備1A的功能配置示例的框圖。如圖5中所示,顯示控制設備1A連接到顯示設備20、成像設備30、檢測設備40和存儲設備50。注意,在根據(jù)在圖1中所示的示例來配置顯示控制系統(tǒng)IA的情況下,檢測設備40可以不具體存在。而且,如圖5中所示,顯示控制設備1A包括圖像獲取部分110、模式設置部分120、區(qū)域確定部分130、面積檢測部分140、顯示控制部分150、行為檢測部分160和命令執(zhí)行部分 170。
[0046]顯示控制設備1A對應于諸如中央處理單元(CPU)或數(shù)字信號處理器(DSP)的處理器。顯示控制設備1A執(zhí)行在存儲設備50或另一個存儲介質(zhì)中存儲的程序,并且由此操作顯示控制設備1A的各種功能。
[0047]存儲設備50使用諸如半導體存儲器或硬盤的存儲介質(zhì)存儲用于由顯示控制設備1A執(zhí)行的處理的程序和數(shù)據(jù)。例如,存儲設備50存儲用于項目識別的特征量詞典。另外,存儲設備50也可以存儲作為項目識別的結(jié)果產(chǎn)生的識別結(jié)果。在圖5中所示的示例中,存儲設備50是與顯示控制設備1A分離的設備,但是存儲設備50也可以被嵌入在顯示控制設備1A中。
[0048]圖像獲取部分110獲取由成像設備30拍攝的所捕獲的圖像。顯示控制部分150以下述方式控制顯示設備20:在顯示設備20上顯示所捕獲的圖像和向所捕獲的圖像增加的用于操作的虛擬物體。顯示控制部分150根據(jù)在成像設備30和顯示設備20之間的位置關系來控制用于操作的虛擬物體的顯示。利用這樣的控制,可以靈活地改變用于操作的虛擬物體的顯示,并且因此,可以增強用戶可操作性。
[0049]在成像設備30和顯示設備20之間的位置關系不被特別限制,并且例如,在圖1和圖3中所示的示例中,位置關系可以是在成像設備的方向i和顯示設備的方向d之間的關系,并且可以是在成像設備30的位置和顯示設備20的位置之間的關系。用于操作的虛擬物體的顯示的控制可以是用于操作的虛擬物體的位置的控制,并且可以是用于操作的虛擬物體的透明度的控制。
[0050]例如,可以準備下面兩種不同的模式:其中在所捕獲的圖像中的二維位置處增加用于操作的虛擬物體211a和211b的每一個的模式(以下,稱為“第一模式”);以及,其中在從所捕獲的圖像識別的三維空間中的位置處增加用于操作的虛擬物體211c的每一個的模式(以下,稱為“第二模式”)。在準備那兩個不同模式的情況下,模式設置部分120將模式設置為第一模式或第二模式的任何一個,并且顯示控制部分150根據(jù)由模式設置部分120設置的模式來執(zhí)行用于操作的虛擬物體的增加。
[0051]例如,圖2示出下述情況的顯示示例:其中,模式設置部分120將模式設置為第一模式,并且,顯示控制部分150根據(jù)第一模式來向所捕獲的圖像加上用于操作的虛擬物體211和211b。在這個示例中,因為在所捕獲的圖像中的二維位置處增加用于操作的虛擬物體211a和211b,所以用戶U可以選擇用于操作的虛擬物體21 Ia和211b,而不關注相對于成像設備30的深度。
[0052]另一方面,圖4示出下述情況的顯示示例:其中,模式設置部分120將模式設置為第二模式,并且,顯示控制部分150根據(jù)第二模式來向所捕獲的圖像增加用于操作的虛擬物體211c。在這個示例中,因為在從所捕獲的圖像識別的三維空間中的位置處增加用于操作的虛擬物體21 Ic,所以用戶U可以使用相對于成像設備30的深度上的差來選擇多個虛擬物體211c的任何一個。
[0053]更詳細地,增加用于操作的虛擬物體211c的位置是在假設在三維空間中布置用于操作的虛擬物體211c的情況下,在所捕獲的圖像中所示的用于操作的虛擬物體211c的所捕獲的圖像中的位置。在該情況下,可以基于成像設備的方向i和成像設備30的視角,從在三維空間中的用于操作的虛擬物體211c的布置,容易地估計在所捕獲的圖像中所示的用于操作的虛擬物體211c的所捕獲的圖像中的位置。例如,在上述的應用中確定在三維空間中的用于操作的虛擬物體211c的布置。
[0054]在其中使用在成像設備的方向i和顯示設備的方向d之間的關系的情況下,模式設置部分120可以根據(jù)在成像設備的方向i和顯示設備的方向d之間的角度將模式設置為第一模式或第二模式的任何一個。例如,成像設備的方向i和顯示設備的方向d之間的角度小于預定閾值的情況下,模式設置部分120可以將模式設置為第一模式,并且在其中在成像設備的方向i和顯示設備的方向d之間的角度大于預定閾值的情況下,模式設置部分120可以將模式設置為第二模式。
[0055]在此,可以預先確定預定閾值。而且,在其中成像設備的方向i和顯示設備的方向d之間的角度等于預定閾值的情況下,模式可以被設置為第一模式或者可以被設置為第二模式。例如,讓我們假設其中預定閾值是90度的情況。在該情況下,如圖1中所示,在其中在成像設備的方向i和顯示設備的方向d之間的角度小于90度的情況下,模式可以被設置為第一模式(參見圖2),并且如圖3中所示,在其中在成像設備的方向i和顯示設備的方向d之間的角度大于90度的情況下,模式可以被設置為第二模式(參見圖4)。
[0056]以這種方式,可以基于在在成像設備的方向i和顯示設備的方向d之間的角度和預定閾值之間的關系來將第一模式和第二模式在其間轉(zhuǎn)換。在在成像設備的方向i和顯示設備的方向d之間的角度大于預定閾值的情況下(例如,在從用戶U的斜后執(zhí)行成像的情況下),與其中在成像設備的方向i和顯示設備的方向d之間的角度小于預定閾值的情況作比較(例如,與其中從正面將用戶U成像的情況作比較),用戶U更容易從屏幕區(qū)分相對于成像設備30具有不同深度的多個用于操作的虛擬物體。
[0057]而且,可以以任何方式來獲取成像設備的方向i和顯示設備的方向d的每一個。例如,用戶U可以輸入成像設備的方向i和顯示設備的方向d的每一個。替代地,模式設置部分120可以使用用戶的方向u來作為顯示設備的方向d。例如,模式設置部分120可以將與用戶的方向u相反的方向設置為顯示設備的方向d??梢詮挠沙上裨O備30拍攝的所捕獲的圖像識別用戶的方向U,或者可以從由檢測設備40檢測的數(shù)據(jù)識別用戶的方向U。而且,用戶的方向u可以是用戶U的臉部的方向,或者可以是用戶U的軀干的方向。
[0058]在確定要設置第一模式和第二模式的哪個中,可以進一步考慮除了在成像設備的方向i和顯示設備的方向d之間的角度之外的條件。例如,在模式被設置為第一模式的情況下,當在用戶的方向u和成像設備的方向i之間的角度大于預定上限時,模式設置部分120可以將模式設置為第二模式。而且,在將模式設置為第二模式的情況下,當在用戶的方向u和成像設備的方向i之間的角度小于預定下限時,模式設置部分120可以將模式設置為第一模式。
[0059]在此,可以預先確定預定上限和預定下限。例如,在用戶U面向安裝顯示設備20的方向的情況下,可以基于在成像設備的方向i和顯示設備的方向d之間的角度來執(zhí)行模式的設置,并且也假定,用戶U可以不面向安裝顯示設備20的方向。因此,通過進一步考慮該條件,可以執(zhí)行更精確地反映用戶的方向u的模式的設置。
[0060]而且,在使得用戶U選擇用于操作的虛擬物體中,可以顯示用戶U要出現(xiàn)的位置。例如,區(qū)域確定部分130可以根據(jù)在成像設備30和顯示設備20之間的位置關系,來確定其中用于操作的虛擬物體的選擇有可能的區(qū)域。在該情況下,顯示控制部分150可以向由區(qū)域確定部分130確定的區(qū)域增加用于顯示的虛擬物體80,其指示該區(qū)域表示其中用于操作的虛擬物體的選擇有可能的區(qū)域。通過增加用于顯示的虛擬物體80,用戶U可以使用由用于顯示的虛擬物體80指示的位置掌握用戶U要出現(xiàn)的位置。
[0061]例如,區(qū)域確定部分130可以基于在成像設備的方向i上從成像設備30的位置延伸的線與在顯示設備的方向d上從顯示設備20的位置延伸的線的交點,來確定其中可以選擇用于操作的虛擬物體的區(qū)域。例如,區(qū)域確定部分130也可以將由具有作為參考的交點的圓圈圍繞的區(qū)域或由具有作為參考的交點的矩形圍繞的區(qū)域確定為其中可以選擇用于操作的虛擬物體的區(qū)域。
[0062]而且,可以考慮到用戶U的狀態(tài)而顯示用于操作的虛擬物體。作為一個極端示例,可以給出其中用戶U在用戶U在站立的同時執(zhí)行操作情況,并且可以假設其中用戶U坐著的同時執(zhí)行操作的情況。因此,面積檢測部分140可以檢測用戶U的可移動面積70,并且顯示控制部分150可以進一步基于被面積檢測部分140檢測的用戶U的可移動面積70,來控制用于操作的虛擬物體的位置。
[0063]用戶U的可移動面積70表示在其中用戶U可以移動他的/她的身體的三維空間中的面積,并且可以被面積檢測部分140基于由檢測設備40檢測的數(shù)據(jù)而檢測。身體是用戶U的整個身體或一部分,并且,用戶U的手可以作為其示例被給出,但是也可以是用戶U的身體的另一個部分或是由身體移動的任何物體。
[0064]更詳細地,顯示控制部分150可以以用于操作的虛擬物體在用戶U的可移動面積70內(nèi)的方式,來控制用于操作的虛擬物體的位置。利用這樣的控制,因為考慮到用戶U的狀態(tài)而顯示用于操作的虛擬物體,所以預期進一步增強可操作性??梢栽谟脩鬠指定定時執(zhí)行用戶U的可移動面積70的檢測,或者可以在顯示用于操作的虛擬物體的時間處執(zhí)行用戶U的可移動面積70的檢測。在其中執(zhí)行用戶U的可移動面積70的檢測的情況下,可以在顯示設備20上顯示下面的消息:“在你可以舒適地達到的區(qū)域內(nèi)伸展和移動你的手”。
[0065]行為檢測部分160檢測用戶U的行為。在例如模式設置部分120將模式設置為第一模式的情況下,行為檢測部分160基于由成像設備30拍攝的所捕獲的圖像來檢測用戶U的行為。而且,在例如其中模式設置部分120將模式設置為第二模式的情況下,行為檢測部分160基于由檢測設備40檢測的數(shù)據(jù)來檢測用戶U的行為。
[0066]例如,在將模式設置為第一模式的情況下,因為在所捕獲的圖像中的二維位置處增加用于操作的虛擬物體,所以可以將在所捕獲的圖像上的用戶U的身體的二維位置檢測為用戶U的行為。而且,例如,在其中將模式設置為第二模式的情況下,因為在從所捕獲的圖像識別的三維空間中的位置處增加用于操作的虛擬物體,所以可以將在三維空間中的用戶U的身體的位置檢測為用戶U的行為。
[0067]更詳細地,在將模式設置為第一模式的情況下,行為檢測部分160可以當在用于操作的虛擬物體的所捕獲的圖像中的二維位置和用戶U的身體彼此對應的時,檢測用于選擇用于操作的虛擬物體的用戶行為。而且,在將模式設置為第二模式的情況下,行為檢測部分160可以當在用于操作的虛擬物體的三維空間中的位置和用戶U的身體彼此對應時,檢測用于選擇用于操作的虛擬物體的用戶行為。
[0068]命令執(zhí)行部分170在其中行為檢測部分160檢測到用于選擇用于操作的虛擬物體的用戶行為的情況下,執(zhí)行與用于操作的虛擬物體對應的命令。例如,在圖2中所示的示例中,在檢測到用于選擇用于操作的虛擬物體211a的用戶行為的情況下,命令執(zhí)行部分170執(zhí)行用于開始由應用提供的服務的命令,并且在其中檢測到用于選擇用于操作的虛擬物體211b的用戶行為的情況下,命令執(zhí)行部分170執(zhí)行用于結(jié)束由應用提供的服務的命令。
[0069]而且,在圖4中所示的示例中,在其中檢測到用于選擇用于操作的虛擬物體211c的用戶行為的情況下,命令執(zhí)行部分170執(zhí)行由應用提供的服務中的各種類型的命令。要被執(zhí)行的命令可以對于全部的用于操作的虛擬物體211c彼此不同,或者該命令可以對于用于操作的虛擬物體211c的一些彼此相同。
[0070]以上,已經(jīng)描述了顯示控制設備1A的功能。注意,在根據(jù)本公開的第一實施例的顯示控制系統(tǒng)IA的另一個示例(在圖3和圖4中所示的示例)中,在要被成像設備30成像的區(qū)域中不包括顯示設備20。然而,也考慮其中在該成像區(qū)域中包括顯示設備20的情況。在下面,將描述其中在該成像區(qū)域中包括顯示設備20的情況。
[0071]圖6是示出根據(jù)第一實施例的顯示控制系統(tǒng)IA的配置的另一個示例的圖。如圖6中所示,根據(jù)本公開的第一實施例的顯示控制系統(tǒng)IA的另一個示例包括顯示控制設備10A、顯示設備20、成像設備30和檢測設備40。而且,在圖6中所示的顯示控制系統(tǒng)IA的配置的另一個示例中,在要被成像設備30成像的區(qū)域包括顯示設備20。
[0072]如上所述,第一模式和第二模式可以基于在在成像設備的方向i和顯示設備的方向d之間的角度和預定閾值之間的關系來在其間轉(zhuǎn)換。如圖6中所示,在其中在由成像設備30拍攝的所捕獲的圖像中示出顯示設備20的情況下,模式設置部分120可以使用從所捕獲的圖像識別的顯示設備20的角度,來作為在成像設備的方向i和顯示設備的方向d之間的角度。
[0073]例如,在其中識別由顯示設備20顯示的屏幕的高度的情況下,可以通過屏幕的高度來識別顯示設備20的角度,并且在其中識別顯示設備20本身的高度的情況下,可以通過顯示設備20本身的高度來識別顯示設備20的角度。例如,在其中在所捕獲的圖像中的情況下,在成像設備的方向i和顯示設備的方向d之間的角度是180度,并且在其中顯示設備20以其向前的后表面示出在所捕獲的圖像中的情況下,在成像設備的方向i和顯示設備的方向d之間的角度是O度。
[0074]注意,在其中模式被設置為第二模式的情況下,在從所捕獲的圖像識別的三維空間中增加用于操作的虛擬物體。然而,在其中在比顯示設備20的位置更深的位置處增加用于操作的虛擬物體的情況下,變得需要用戶U在顯示設備20后伸展他的/她的手,以便選擇用于操作的虛擬物體,這迫使用戶U執(zhí)行不自然的移動。因此,在模式設置部分120將模式設置為第二模式的情況下,顯示控制部分150可以將用于操作的虛擬物體的增加限制在比在所捕獲的圖像中所示的顯示設備20的位置更深的位置處。
[0075]例如,在其中模式設置部分120將模式設置為第二模式的情況下,顯示控制部分150可以禁止在比在所捕獲的圖像中所示的顯示設備20的位置更深的位置處增加用于操作的虛擬物體。在圖6中所示的示例中,在顯示設備20后的區(qū)域被示出為虛擬物體增加禁止區(qū)域90。例如,在模式設置部分120將模式設置為第二模式的情況下,顯示控制部分150可以禁止在比在所捕獲的圖像中所示的顯示設備20的位置更深的位置處增加用于操作的虛擬物體,并且可以在所捕獲的圖像中所示的顯示設備20的位置之前的位置增加用于操作的虛擬物體。
[0076]圖7是示出在其中根據(jù)在圖6中所示的示例來配置顯示控制系統(tǒng)IA的情況下,用于操作的虛擬物體的增加的示例的圖。如圖7中所示,也在成像區(qū)域中包括顯示設備20的情況下,在顯示設備20上顯示由成像設備30拍攝的所捕獲的圖像Img,并且,向所捕獲的圖像Img增加用于操作的虛擬物體211c。然而,因為在所捕獲的圖像Img中包括顯示設備20并且也在顯示設備20上顯示所捕獲的圖像Img,所以接連地顯示多個所捕獲的圖像Img。
[0077]圖8是示出在其中根據(jù)在圖6中的示例來配置顯示控制系統(tǒng)IA的情況下,用于操作的虛擬物體的增加的另一個示例的圖。為了避免如上所述的接連顯示,當模式設置部分120將模式設置為第二模式時,顯示控制部分150可以將在所捕獲的圖像Img中示出的由顯示設備20顯示的圖像替換為另一個圖像。該另一個圖像不被特別限制,并且如圖8中所示,例如,顯示控制部分150可以將在所捕獲的圖像Img中示出的由顯示設備20顯示的圖像替換為計算機圖像220。
[0078]以上,已經(jīng)描述了其中在由成像設備30要成像的區(qū)域中包括顯示設備20的情況。然而,因為在上面的說明中執(zhí)行用于操作的虛擬物體的增加而未具體考慮用戶U的身體的位置,所以也考慮其中用戶U的身體被用于操作的虛擬物體隱藏的情況。以下,將進行關于避免這樣的情況并且進一步增強用戶可操作性的示例的描述。
[0079]圖9是示出其中改變用于操作的虛擬物體的顯示的示例的圖。例如,在其中模式設置部分120將模式設置為第二模式的情況下,當在所捕獲的圖像中用于操作的虛擬物體與用戶U重疊時,顯示控制部分150可以使得改變用于操作的虛擬物體的顯示。可以基于在用于操作的虛擬物體211c內(nèi)的預定區(qū)域與用戶U的重疊,或可以基于超過用于操作的虛擬物體211c的預定量的部分與用戶U重疊,來確定用于操作的虛擬物體211c與用戶U的重疊。
[0080]在圖9中所示的示例中,因為在所捕獲的圖像中用于操作的虛擬物體211c與用戶U重疊,所以顯示控制部分150向所捕獲的圖像增加具有減小的透射率的用于操作的虛擬物體211c,并且因此使得用于操作的虛擬物體211c的顯示改變。透射率的減小程度不被特別限制。利用這樣的控制,用戶U變得更容易掌握用戶U他/她本身的身體的位置。
[0081]圖10是示出其中改變用于操作的虛擬物體的顯示的另一個示例的圖。在圖10中所示的示例中,因為在所捕獲的圖像中用于操作的虛擬物體211c與用戶U重疊,所以顯示控制部分150在不與用戶U重疊的位置處增加用于操作的虛擬物體211c,并且因此使得用于操作的虛擬物體211c的顯示改變。具體地說,在圖10中所示的示例中,以虛擬物體211c接近顯示設備20的方式來移動用于操作的虛擬物體211c。使用這樣的控制,用戶U變得更容易掌握用戶U他/她本身的身體的位置。
[0082]圖11是示出其中改變用于操作的虛擬物體的顯示的另一個示例的圖。在圖11中所示的示例中,因為在所捕獲的圖像中用于操作的虛擬物體211c與用戶U重疊,所以顯示控制部分150在不與用戶U重疊的位置處增加用于操作的虛擬物體211c,并且因此使得用于操作的虛擬物體211c的顯示改變。具體地說,在圖11中所示的示例中,改變用于操作的虛擬物體211c的高度。利用這樣的控制,用戶U變得更容易掌握用戶U他/她本身的身體的位置。
[0083]以上,已經(jīng)進行關于用于避免其中用戶U的身體被用于操作的虛擬物體隱藏的情況的示例的描述。以下,將描述根據(jù)第一實施例的由顯示控制設備1A執(zhí)行的操作的流程。
[0084]圖12是示出根據(jù)第一實施例的由顯示控制設備1A執(zhí)行的操作的流程的流程圖。如圖12中所示,首先,圖像獲取部分110獲取由成像設備30拍攝的所捕獲的圖像(步驟Sll)。在其中在成像設備的方向i和顯示設備的方向d之間的角度小于閾值的情況下(在步驟S12中的“是”),模式設置部分120將模式設置為第一模式。另一方面,在其中在成像設備的方向i和顯示設備的方向d之間的角度大于閾值的情況下(在步驟S12中的“否”),模式設置部分120將模式設置為第二模式。
[0085]在模式設置部分120將模式設置為第一模式的情況下,顯示控制部分150在所捕獲的圖像中的二維位置處增加用于操作的虛擬物體(步驟S13)。另一方面,在模式設置部分120將模式設置為第二模式的情況下,顯示控制部分150在從所捕獲的圖像識別的三維空間中的位置處增加用于操作的虛擬物體(步驟S14)。
[0086]當向所捕獲的圖像增加用于操作的虛擬物體時,顯示控制部分150以下述方式控制顯示設備20:在顯示設備20上顯示被增加用于操作的虛擬物體的所捕獲的圖像(步驟S15)。當顯示設備20根據(jù)由顯示控制部分150執(zhí)行的控制來顯示被增加用于操作的虛擬物體的所捕獲的圖像時,處理進行到步驟S16。
[0087]接下來,行為檢測部分160確定是否檢測到用于選擇用于操作的虛擬物體的位置的用戶行為(步驟S16)。在其中未檢測到用于選擇用于操作的虛擬物體的位置的用戶行為的情況下(在步驟S16中的“否”),行為檢測部分160執(zhí)行步驟S16的確定,直到檢測到用于選擇用于操作的虛擬物體的位置的用戶行為。另一方面,在其中通過行為檢測部分160檢測到用于選擇用于操作的虛擬物體的位置的用戶行為的情況下(在步驟S16中的“是”),命令執(zhí)行部分170執(zhí)行與用于操作的虛擬物體對應的命令(步驟S17),并且結(jié)束該操作。
[0088]如上所述,根據(jù)本公開的第一實施例,根據(jù)成像設備30和顯示設備20之間的位置關系來控制用于操作的虛擬物體的顯示。例如,根據(jù)在成像設備的方向i和顯示設備的方向d之間的角度來將模式設置為第一模式或第二模式的任何一個,并且根據(jù)已經(jīng)被設置的模式來控制用于操作的虛擬物體的顯示。利用這樣的控制,預期將增強用戶可操作性。
[0089]<2.第二實施例>
[0090]接下來,將描述本公開的第二實施例。本公開的第二實施例是其中顯示控制系統(tǒng)包括多個成像設備30的示例。因此,多個成像設備30的任何一個被選擇為作為所捕獲的圖像的提供源的成像設備30。而且,可以根據(jù)成像設備30的選擇來改變模式。首先,將描述根據(jù)本公開的第二實施例的顯示控制系統(tǒng)的配置的示例。
[0091]圖13是示出根據(jù)第二實施例的顯示控制系統(tǒng)的配置的示例的圖。如圖13中所示,根據(jù)本公開的第二實施例的顯示控制系統(tǒng)IB包括顯示控制設備10B、顯示設備20、多個成像設備30和檢測設備40。多個成像設備30具有將用戶U成像的功能。顯示控制設備1B具有以下述方式控制顯示設備20的功能:在顯示設備20上顯示從多個成像設備30選擇的成像設備30拍攝的所捕獲的圖像。顯示設備20具有根據(jù)由顯示控制設備1B執(zhí)行的控制來顯示所捕獲的圖像的功能。
[0092]注意,雖然圖13示出作為多個成像設備30的示例的成像設備30A和成像設備30B,但是成像設備30的數(shù)量不限于2。而且,在圖13中,成像設備30A的方向和成像設備30B的方向分別由成像設備的方向il和成像設備的方向i2表示。以與在第一實施例中相同的方式,顯示控制設備1B可以被嵌入在STB中,可以被嵌入在顯示設備20中,或者可以被嵌入在成像設備30中。而且,顯示控制設備1B可以被嵌入在另一個設備中,或者可以不被嵌入在另一個設備中并可以作為單個設備存在。
[0093]以上,已經(jīng)描述了根據(jù)本公開的第二實施例的顯示控制系統(tǒng)IB的配置的示例。接下來,將描述在其中如在該示例中所示配置顯示控制系統(tǒng)IB的情況下的顯示控制設備1B的功能。
[0094]圖14是示出根據(jù)第二實施例的顯示控制設備1B的功能配置示例的框圖。如圖14中所示,顯示控制設備1B連接到顯示設備20、多個成像設備30、檢測設備40和存儲設備50。顯示控制設備1B對應于諸如CPU或DSP的處理器。顯示控制設備1B執(zhí)行在存儲設備50或另一個存儲介質(zhì)中存儲的程序,并且由此操作顯示控制設備1B的各種功能。
[0095]而且,如圖14中所示,顯示控制設備1B除了在顯示控制設備1A中包括的功能塊之外還包括選擇部分180。選擇部分180具有下述功能:在安裝多個成像設備30的情況下,從多個成像設備30選擇一個成像設備30。圖像獲取部分110獲取由選擇部分180選擇的成像設備30拍攝的所捕獲的圖像。
[0096]由選擇部分180執(zhí)行的選擇多個成像設備30的技術不被特別限制。例如,選擇部分180可以基于由行為檢測部分160檢測的用戶U的狀態(tài)來選擇成像設備30。作為示例,給出了下面的情況:在通過行為檢測部分160檢測用于指定成像設備30的用戶行為的情況下,選擇部分180可以選擇由用戶行為指定的成像設備30。用于指定成像設備30的用戶行為不被特別限制,并且該用戶行為可以在顯示用于指定成像設備30的虛擬物體的情況下是例如選擇虛擬物體的行為。
[0097]而且,作為另一示例,給出了下面的情況:選擇部分180可以基于在用戶的方向u和多個成像設備30的各自方向之間的角度來選擇成像設備30。例如,選擇部分180可以選擇具有與用戶的方向u形成最大角度的方向的成像設備30。這是因為預期隨著在用戶的方向u和成像設備的方向i之間的角度上的增大,更容易執(zhí)行由用戶U進行的操作。
[0098]在圖13中所示的示例中,因為在用戶的方向u和成像設備的方向i2之間的角度大于在用戶的方向u和成像設備的方向il之間的角度,所以選擇部分180可以選擇成像設備30B。注意,也考慮其中由用戶U進行的操作隨著在該角度上的減小而變得更容易的情況。因此,根據(jù)由用戶U執(zhí)行的設置,可以選擇成像設備30,其具有形成在用戶的方向u和成像設備的方向i之間形成最小角度的方向。
[0099]以上,已經(jīng)描述了根據(jù)本公開的第二實施例的顯示控制系統(tǒng)IB的功能。接下來,將描述由第二實施例的顯示控制設備1B執(zhí)行的操作的流程。在該操作中,向根據(jù)第一實施例的顯示控制設備1A的操作增加從多個成像設備30選擇一個成像設備30的操作。
[0100]圖15是示出根據(jù)第二實施例的由顯示控制設備1B執(zhí)行的操作的流程的流程圖。如圖15中所示,首先,選擇部分180從多個成像設備30選擇一個成像設備30(步驟S21)。圖像獲取部分110獲取由選擇的成像設備30拍攝的所捕獲的圖像(步驟S22)。在其中在成像設備的方向i和顯示設備的方向d之間的角度小于閾值的情況下(在步驟S23中的“是”),模式設置部分120將模式設置為第一模式。另一方面,在其中在成像設備的方向i和顯示設備的方向d之間的角度大于閾值的情況下(在步驟S23中的“否”),模式設置部分120將模式設置為第二模式。
[0101]在其中模式設置部分120將模式設置為第一模式的情況下,顯示控制部分150在所捕獲的圖像中的二維位置處增加用于操作的虛擬物體(步驟S24)。另一方面,在模式設置部分120將模式設置為第二模式的情況下,顯示控制部分150在從所捕獲的圖像識別的三維空間中的位置處增加用于操作的虛擬物體(步驟S25)。
[0102]當向所捕獲的圖像增加用于操作的虛擬物體時,顯示控制部分150以下述方式來控制顯示設備20:在顯示設備20上顯示被增加用于操作的虛擬物體的所捕獲的圖像(步驟S26)。當顯示設備20根據(jù)由顯示控制部分150執(zhí)行的控制來顯示被增加用于操作的虛擬物體的所捕獲的圖像時,處理進行到步驟S27。
[0103]接下來,行為檢測部分160確定是否檢測到用于選擇用于操作的虛擬物體的位置的用戶行為(步驟S27)。在未檢測到用于選擇用于操作的虛擬物體的位置的用戶行為的情況下(在步驟S27中的“否”),行為檢測部分160執(zhí)行步驟S27的確定,直到檢測到用于選擇用于操作的虛擬物體的位置的用戶行為。另一方面,在其中行為檢測部分160檢測到用于選擇用于操作的虛擬物體的位置的用戶行為的情況下(在步驟S27中的“是”),命令執(zhí)行部分170執(zhí)行與用于操作的虛擬物體對應的命令(步驟S28),并且結(jié)束該操作。
[0104]如上所述,根據(jù)本公開的第二實施例,使用選擇部分180的功能從多個成像設備30選擇一個成像設備30,并且圖像獲取部分110獲取由所選擇的成像設備30拍攝的所捕獲的圖像。因此,根據(jù)第二實施例,預期進一步增強用戶的方便性。
[0105]<3.結(jié)論〉
[0106]如上所述,根據(jù)本公開的第一實施例,提供了顯示控制設備10,其包括:圖像獲取部分110,其獲取由成像設備30拍攝的所捕獲的圖像;以及顯示控制部分150,其以在顯示設備20上顯示所捕獲的圖像和向所捕獲的圖像增加的用于操作的虛擬物體的方式來控制顯示設備20。顯示控制部分150根據(jù)在成像設備30和顯示設備20之間的位置關系來控制用于操作的虛擬物體的顯示。
[0107]根據(jù)這樣的配置,根據(jù)在成像設備30和顯示設備20之間的位置關系來控制用于操作的虛擬物體的顯示。例如,模式可以根據(jù)在成像設備的方向i和顯示設備的方向d之間的角度而被設置為第一模式或第二模式的任何一個,并且根據(jù)已經(jīng)設置的模式來控制用于操作的虛擬物體的顯示。利用這樣的控制,預期將增強用戶可操作性。
[0108]而且,根據(jù)本公開的第二實施例,提供了顯示控制設備10B,其進一步包括選擇部分180,選擇部分180從多個成像設備30選擇一個成像設備30。根據(jù)這樣的配置,圖像獲取部分110獲取由選擇部分180選擇的成像設備30拍攝的所捕獲的圖像。因此,預期進一步增強用戶的方便性。
[0109]本領域內(nèi)的技術人員應當明白,各種修改、組合、子組合和改變可以根據(jù)設計要求和其他因素出現(xiàn),只要他們在所附的權利要求或其等同內(nèi)容的范圍內(nèi)。
[0110]而且,例如,在上面,已經(jīng)主要進行關于其中顯示控制設備10具有識別顯示設備20的功能(或者,識別由顯示設備20顯示的屏幕的功能)的示例的描述,但是,取代顯示控制設備10服務器可以具有這樣的功能。例如,在顯示控制設備10向服務器發(fā)送所捕獲的圖像的情況下,取代顯示控制設備10的服務器可以從所捕獲的圖像識別顯示設備20。以這種方式,本公開的技術可以被應用到云計算。
[0111]而且,不必然根據(jù)流程圖以時間順序來處理在本申請的顯示控制設備10的操作中包括的相應步驟。例如,可以以與流程圖不同的順序來處理或者可以以并行方式來處理在顯示控制設備10的操作中包括的相應步驟。
[0112]而且,也可能建立計算機程序,該計算機程序使得在顯示控制設備10中內(nèi)置的諸如CPU、ROM或RAM的硬件展示與如上所述的顯示控制設備10的結(jié)構的那些等同的功能。而且,也提供了其中存儲了該計算機程序的存儲介質(zhì)。
[0113]另外,本技術也可以被配置如下。
[0114](I) 一種顯示控制設備,包括顯示控制部分,用于根據(jù)在像設備和顯示設備之間的位置關系來控制虛擬物體的顯示。
[0115](2)根據(jù)(I)所述的顯示控制設備,進一步包括模式設置部分,并且其中,所述模式設置部分將模式設置為至少第一模式和第二模式之一,在所述第一模式中,在所捕獲的圖像內(nèi)的二維位置處增加所述虛擬物體,并且在所述第二模式中,在所捕獲的圖像內(nèi)的三維位置處增加所述虛擬物體。
[0116](3)根據(jù)(I)所述的顯示控制設備,進一步包括模式設置部分,并且其中,基于在所述成像設備的方向和所述顯示設備的方向之間的角度來設置所述模式。
[0117](4)根據(jù)(3)所述的顯示控制設備,其中,所述成像設備的所述方向和所述顯示設備的所述方向由用戶輸入。
[0118](5)根據(jù)(I)所述的顯示控制設備,進一步包括模式設置部分,并且其中,基于在所述成像設備的方向和用戶的方向之間的角度來設置所述模式。
[0119](6)根據(jù)(I)所述的顯示控制設備,進一步包括模式設置部分,并且其中,基于從所捕獲的圖像識別的信息設置所述模式。
[0120](7)根據(jù)(I)至(6)的任何一項所述的顯示控制設備,其中,基于用戶的可移動面積來控制所述虛擬物體的顯示。
[0121](8)根據(jù)(7)所述的顯示控制設備,其中,所述可移動面積是所述用戶的整個身體的可移動面積。
[0122](9)根據(jù)(7)所述的顯示控制設備,其中,所述可移動面積是所述用戶的所述整個身體的一部分的可移動面積。
[0123](10)根據(jù)(I)至(9)的任何一項所述的顯示控制設備,其中,基于由所述用戶移動的物體的可移動面積來控制所述虛擬物體的顯示。
[0124](11)根據(jù)(I)至(10)的任何一項所述的顯示控制設備,進一步包括檢測部分,用于檢測用戶的所述虛擬物體的選擇。
[0125](12)根據(jù)(11)所述的顯示控制設備,進一步包括執(zhí)行部分,用于當所述用戶選擇所述虛擬物體時執(zhí)行與所述虛擬物體對應的命令。
[0126](13)根據(jù)(11)或(12)所述的顯示控制設備,其中,通過所述用戶的手勢來選擇所述虛擬物體。
[0127](14)根據(jù)(13)所述的顯示控制設備,其中,所述手勢是所述用戶的身體或身體部分的移動。
[0128](15)根據(jù)(I)至(14)的任何一項所述的顯示控制設備,其中,所述顯示控制設備當在所捕獲的圖像內(nèi)所述虛擬物體與用戶重疊時改變所述虛擬物體的顯示。
[0129](16)根據(jù)(15)所述的顯示控制設備,其中,所述顯示控制設備當在所捕獲的圖像內(nèi)所述虛擬物體與用戶重疊時減小所述虛擬物體的透射率。
[0130](17)根據(jù)(15)所述的顯示控制設備,其中,所述顯示控制設備當在所捕獲的圖像內(nèi)所述虛擬物體與用戶重疊時改變所述虛擬物體的位置。
[0131](18)根據(jù)(I)至(17)的任何一項所述的顯示控制設備,其中,所述顯示控制設備設置虛擬物體增加禁止區(qū)域。
[0132](19)根據(jù)(I)至(18)的任何一項所述的顯示控制設備,其中,所述顯示設備可操作用于顯示所捕獲的圖像,并且替換所述所捕獲的圖像的至少一部分。
[0133](20)根據(jù)(I)至(19)的任何一項所述的顯示控制設備,進一步包括選擇部分,用于控制選擇多個成像設備之一,并且其中,根據(jù)所述多個成像設備的所選擇的一個和所述顯示設備之間的位置關系來控制所述虛擬物體的顯示。
[0134](21)根據(jù)(20)所述的顯示控制設備,其中,選擇所述多個成像設備之一是基于用戶的狀態(tài)。
[0135](22)根據(jù)權利要求(20)或(21))所述的顯示控制設備,其中,選擇所述多個成像設備之一是基于在所述用戶的方向和所述成像設備的各自方向之間的角度。
[0136](23) 一種顯示控制方法,包括:根據(jù)成像設備和顯示設備之間的位置關系來控制虛擬物體的顯示。
[0137](24) 一種非瞬時算機可讀介質(zhì),具有存儲其上的計算機可讀程序,該計算機可讀程序用于實現(xiàn)一種顯示控制方法,所述方法包括:根據(jù)成像設備和顯示設備之間的位置關系來控制虛擬物體的顯示。
[0138]而且,本技術也可以被配置如下。
[0139](I) 一種顯示控制設備,包括:
[0140]圖像獲取部分,其獲取由成像設備拍攝的所捕獲的圖像;以及
[0141]顯示控制部分,其以在顯示設備上顯示所述所捕獲的圖像和增加到所述所捕獲的圖像的用于操作的虛擬物體的方式來控制所述顯示設備,
[0142]其中,所述顯示控制部分根據(jù)在所述成像設備和所述顯示設備之間的位置關系來控制所述用于操作的虛擬物體的顯示。
[0143](2)根據(jù)(I)所述的顯示控制設備,進一步包括:
[0144]模式設置部分,其將模式設置為第一模式或第二模式的任何一個,在所述第一模式中,在所捕獲的圖像內(nèi)的二維位置處增加所述用于操作的虛擬物體,并且在所述第二模式中,在從所捕獲的圖像識別的三維空間中的位置處增加所述用于操作的虛擬物體。
[0145](3)根據(jù)⑵所述的顯示控制設備,
[0146]其中,所述模式設置部分根據(jù)在所述成像設備的方向和所述顯示設備的方向之間的角度將所述模式設置為所述第一模式或所述第二模式的任何一個。
[0147](4)根據(jù)⑶所述的顯示控制設備,
[0148]其中,在其中在所述成像設備的所述向和所述顯示設備的所述方向之間的所述角度小于預定閾值的情況下,所述模式設置部分將所述模式設置為所述第一模式,并且,在其中在所述成像設備的所述方向和所述顯示設備的所述方向之間的所述角度大于所述預定閾值的情況下,所述模式設置部分將所述模式設置為所述第二模式。
[0149](5)根據(jù)(2)至(4)的任何一項所述的顯示控制設備,
[0150]其中,
[0151]在其中所述模式被設置為所述第一模式的情況下,當在所述用戶的方向和所述成像設備的所述方向之間的角度大于預定上限時,所述模式設置部分將所述模式設置為所述第二模式,并且
[0152]在其中所述模式被設置為所述第二模式的情況下,當在所述用戶的方向和所述成像設備的所述方向之間的角度小于預定下限時,所述模式設置部分將所述模式設置為所述第一模式。
[0153](6)根據(jù)(I)至(5)的任何一項所述的顯示控制設備,進一步包括:
[0154]行為檢測部分,其檢測用戶行為;以及
[0155]命令執(zhí)行部分,其在其中由所述行為檢測部分檢測到用于選擇所述用于操作的虛擬物體的用戶行為的情況下,執(zhí)行與所述虛擬物體對應的命令。
[0156](7)根據(jù)(6)所述的顯示控制設備,
[0157]其中,所述行為檢測部分基于由與所述成像設備分離地安裝的檢測設備檢測的數(shù)據(jù)來檢測所述用戶行為。
[0158](8)根據(jù)(3)至(5)的任何一項所述的顯示控制設備,
[0159]其中,所述模式設置部分使用從所述所捕獲的圖像識別的所述顯示設備的角度,作為在所述成像設備的所述方向和所述顯示設備的所述方向之間的所述角度。
[0160](9)根據(jù)(3)至(5)的任何一項所述的顯示控制設備,
[0161]其中,所述模式設置部分使用用戶的方向作為所述顯示設備的所述方向。
[0162](10)根據(jù)(2)至(5)的任何一項所述的顯示控制設備,
[0163]其中,在其中所述模式被所述模式設置部分設置為所述第二模式的情況下,當在所述所捕獲的圖像中所述用于操作的虛擬物體與用戶重疊時,所述顯示控制部分使得所述用于操作的虛擬物體的所述顯示改變。
[0164](11)根據(jù)(10)所述的顯示控制設備,
[0165]其中,所述顯示控制部分向所述所捕獲的圖像增加具有減小的透射率的用于操作的虛擬物體,并且使得所述用于操作的虛擬物體的所述顯示改變。
[0166](12)根據(jù)(10)所述的顯示控制設備,
[0167]其中,所述顯示控制部分在不引起重疊的位置處增加所述用于操作的虛擬物體,并且使得所述用于操作的虛擬物體的所述顯示改變。
[0168](13)根據(jù)(2)至(5)的任何一項所述的顯示控制設備,
[0169]其中,在其中所述模式設置部分將所述模式設置為所述第二模式的情況下,所述顯示控制部分限制在比在所述所捕獲的圖像中所示的所述顯示設備的位置更深的位置處增加所述用于操作的虛擬物體。
[0170](14)根據(jù)(2)至(5)的任何一項所述的顯示控制設備,
[0171]其中,在其中所述模式設置部分將所述模式設置為所述第二模式的情況下,所述顯示控制部分將在所捕獲的圖像中所示的由所述顯示設備顯示的圖像替換為另一個圖像。
[0172](15)根據(jù)(I)至(14)的任何一項所述的顯示控制設備,進一步包括:
[0173]區(qū)域確定部分,其根據(jù)在所述成像設備和所述顯示設備之間的所述位置關系,來確定其中所述虛擬物體的選擇有可能的區(qū)域,
[0174]其中,所述顯示控制部分向由所述區(qū)域確定部分確定的所述區(qū)域增加用于顯示的虛擬物體,所述用于顯示的虛擬物體指示所述區(qū)域表示其中所述用于操作的虛擬物體的選擇有可能的區(qū)域。
[0175](16)根據(jù)(I)至(15)的任何一項所述的顯示控制設備,進一步包括:
[0176]面積檢測部分,其檢測用戶的可移動面積,
[0177]其中,所述顯示控制部分進一步基于由所述面積檢測部分檢測的所述用戶的所述可移動面積,來控制所述用于操作的虛擬物體的位置。
[0178](17)根據(jù)(I)至(16)的任何一項所述的顯示控制設備,進一步包括:
[0179]選擇部分,其在安裝多個成像設備的情況下從所述多個成像設備選擇一個成像設備,
[0180]其中,所述圖像獲取部分獲取由所述選擇部分選擇的所述成像設備拍攝的所捕獲的圖像。
[0181](18)根據(jù)權利要求(17)所述的顯示控制設備,
[0182]其中,所述選擇部分基于用戶的狀態(tài)來選擇成像設備。
[0183](19) 一種顯示控制方法,包括:
[0184]獲取由成像設備拍攝的所捕獲的圖像;
[0185]以在顯示設備上顯示所述所捕獲的圖像和向所述所捕獲的圖像增加的用于操作的虛擬物體的方式,來控制所述顯示設備;并且
[0186]根據(jù)所述成像設備和所述顯示設備之間的位置關系,來控制所述用于操作的虛擬物體的顯示。
[0187](20) 一種程序,用于使得計算機作為顯示控制設備,所述顯示控制設備包括:
[0188]圖像獲取部分,其獲取由成像設備拍攝的所捕獲的圖像;以及
[0189]顯示控制部分,其以在顯示設備上顯示所述所捕獲的圖像和增加到所述所捕獲的圖像的用于操作的虛擬物體的方式,來控制所述顯示設備,
[0190]其中,所述顯示控制部分根據(jù)在所述成像設備和所述顯示設備之間的位置關系,來控制所述用于操作的虛擬物體的顯示。
[0191][附圖標記列表]
[0192]1(1A, 1B)顯示控制系統(tǒng)
[0193]10(10A, 10B)顯示控制設備
[0194]20顯示設備
[0195]30(30A,30B)成像設備
[0196]40檢測設備
[0197]70可移動面積
[0198]80用于顯示的虛擬物體
[0199]90虛擬物體增加禁止區(qū)域
[0200]110圖像獲取部分
[0201]120模式設置部分
[0202]130區(qū)域確定部分
[0203]140面積檢測部分
[0204]150顯示控制部分
[0205]160行為檢測部分
[0206]170命令執(zhí)行部分
[0207]180選擇部分
[0208] 211a, 211b, 211c用于操作的虛擬物體
【權利要求】
1.一種顯示控制設備,包括顯示控制部分,用于根據(jù)成像設備和顯示設備之間的位置關系來控制虛擬物體的顯示。
2.根據(jù)權利要求1所述的顯示控制設備,進一步包括模式設置部分,并且其中,所述模式設置部分將模式設置為至少第一模式和第二模式之一,在所述第一模式中,在所捕獲的圖像內(nèi)的二維位置處增加所述虛擬物體,并且在所述第二模式中,在所捕獲的圖像內(nèi)的三維位置處增加所述虛擬物體。
3.根據(jù)權利要求1所述的顯示控制設備,進一步包括模式設置部分,并且其中,基于在所述成像設備的方向和所述顯示設備的方向之間的角度來設置所述模式。
4.根據(jù)權利要求3所述的顯示控制設備,其中,所述成像設備的所述方向和所述顯示設備的所述方向由用戶輸入。
5.根據(jù)權利要求1所述的顯示控制設備,進一步包括模式設置部分,并且其中,基于在所述成像設備的方向和用戶的方向之間的角度來設置所述模式。
6.根據(jù)權利要求1所述的顯示控制設備,進一步包括模式設置部分,并且其中,基于從所捕獲的圖像識別的信息設置所述模式。
7.根據(jù)權利要求1所述的顯示控制設備,其中,基于用戶的可移動面積來控制所述虛擬物體的顯示。
8.根據(jù)權利要求7所述的顯示控制設備,其中,所述可移動面積是所述用戶的整個身體的可移動面積。
9.根據(jù)權利要求7所述的顯示控制設備,其中,所述可移動面積是所述用戶的所述整個身體的一部分的可移動面積。
10.根據(jù)權利要求1所述的顯示控制設備,其中,基于由所述用戶移動的物體的可移動面積來控制所述虛擬物體的顯示。
11.根據(jù)權利要求1所述的顯示控制設備,進一步包括檢測部分,用于檢測用戶的所述虛擬物體的選擇。
12.根據(jù)權利要求11所述的顯示控制設備,進一步包括執(zhí)行部分,用于當所述用戶選擇所述虛擬物體時執(zhí)行與所述虛擬物體對應的命令。
13.根據(jù)權利要求12所述的顯示控制設備,其中,通過所述用戶的手勢來選擇所述虛擬物體。
14.根據(jù)權利要求13所述的顯示控制設備,其中,所述手勢是所述用戶的身體或身體部分的移動。
15.根據(jù)權利要求1所述的顯示控制設備,其中,所述顯示控制設備當在所捕獲的圖像內(nèi)所述虛擬物體與用戶重疊時改變所述虛擬物體的顯示。
16.根據(jù)權利要求15所述的顯示控制設備,其中,所述顯示控制設備當在所捕獲的圖像內(nèi)所述虛擬物體與用戶重疊時減小所述虛擬物體的透射率。
17.根據(jù)權利要求15所述的顯示控制設備,其中,所述顯示控制設備當在所捕獲的圖像內(nèi)所述虛擬物體與用戶重疊時改變所述虛擬物體的位置。
18.根據(jù)權利要求1所述的顯示控制設備,其中,所述顯示控制設備設置虛擬物體增加禁止區(qū)域。
19.根據(jù)權利要求1所述的顯示控制設備,其中,所述顯示設備可操作用于顯示所捕獲的圖像,并且替換所述所捕獲的圖像的至少一部分。
20.根據(jù)權利要求1所述的顯示控制設備,進一步包括選擇部分,用于控制選擇多個成像設備之一,并且其中,根據(jù)所述多個成像設備的所選擇的一個和所述顯示設備之間的位置關系來控制所述虛擬物體的顯示。
21.根據(jù)權利要求20所述的顯示控制設備,其中,選擇所述多個成像設備之一是基于用戶的狀態(tài)。
22.根據(jù)權利要求21所述的顯示控制設備,其中,選擇所述多個成像設備之一是基于在所述用戶的方向和所述成像設備的各自方向之間的角度。
23.—種顯示控制方法,包括:根據(jù)成像設備和顯示設備之間的位置關系來控制虛擬物體的顯示。
24.一種非瞬時計算機可讀介質(zhì),具有存儲其上的計算機可讀程序,該計算機可讀程序用于實現(xiàn)一種顯示控制方法,所述方法包括:根據(jù)成像設備和顯示設備之間的位置關系來控制虛擬物體的顯示。
【文檔編號】G06F3/01GK104185829SQ201380015173
【公開日】2014年12月3日 申請日期:2013年3月6日 優(yōu)先權日:2012年3月27日
【發(fā)明者】笠原俊一, 繁田脩, 鈴木誠司, 深澤遼, 森麻紀 申請人:索尼公司