選擇對(duì)象1112時(shí)，對(duì)象1112經(jīng)歷到基準(zhǔn)空間Cl的轉(zhuǎn)變，并且在用于真實(shí)空間的基準(zhǔn)空間中與移動(dòng)終端200的移動(dòng)一起移動(dòng)。當(dāng)釋放選擇時(shí)，對(duì)象1112再次經(jīng)歷到基準(zhǔn)空間C3的轉(zhuǎn)變，并且獨(dú)立于可穿戴顯示器100和移動(dòng)終端200的位置?？纱┐黠@示器100在此狀態(tài)(移動(dòng)終端200可能不移動(dòng))中移動(dòng)，然后執(zhí)行相似的拖拽操作，因此可以連續(xù)地移動(dòng)對(duì)象1112。
[0178](3-2.基準(zhǔn)空間之間的切換)
[0179]如上所述，在本公開的一些實(shí)施例中，可以在基準(zhǔn)空間之間進(jìn)行切換，在基準(zhǔn)空間中，依賴于對(duì)對(duì)象的操作狀態(tài)放置對(duì)象。在這種情況下，顯示對(duì)象而同時(shí)對(duì)象經(jīng)歷不同基準(zhǔn)空間之間的轉(zhuǎn)變。在下面，將對(duì)被用于如上所述地在基準(zhǔn)空間之間進(jìn)行切換的操作和生成的顯示示例給出說明。
[0180]圖23是示出了根據(jù)本公開的實(shí)施例的基準(zhǔn)空間之間的切換的顯示示例的圖。在此示例中，如圖23A所示，在可穿戴顯示器100的顯示單元110中所顯示的圖片中，顯示在基準(zhǔn)空間中的對(duì)象1106j被表示為擴(kuò)展圖形1114，其指示對(duì)象1106j在不同的基準(zhǔn)空間中顯示的情況下的形狀。當(dāng)對(duì)象1106j顯示在圖片1110上的位置疊加在對(duì)象1106j顯示在不同基準(zhǔn)空間中的位置上時(shí)，例如，可以表示擴(kuò)展圖形1114。在這種情況下，當(dāng)獲得預(yù)定操作(例如，對(duì)移動(dòng)終端200的觸摸傳感器220的觸摸操作或按下并且保持操作)時(shí)，對(duì)象1106J被改變?yōu)轱@示在不同基準(zhǔn)空間中的對(duì)象1106k，如圖23B所示。
[0181]圖24是示出了根據(jù)本公開的實(shí)施例的基準(zhǔn)空間之間的切換的第一操作示例的圖。在所示的示例中，當(dāng)移動(dòng)終端200的觸摸傳感器220上的觸摸操作2201結(jié)束時(shí)，顯示在基準(zhǔn)空間Cl (使用移動(dòng)終端200作為參考所設(shè)置的空間)中的對(duì)象1106經(jīng)歷到基準(zhǔn)空間C3(真實(shí)空間)的轉(zhuǎn)變，并且被放置在遠(yuǎn)離移動(dòng)終端200的空間中。
[0182]與以上所述類似的顯示可以被應(yīng)用到以上提及的拖拽操作。在圖12B所示的示例中，在觸摸操作2201結(jié)束時(shí)，與被放置在基準(zhǔn)空間Cl中的移動(dòng)終端200 —起移動(dòng)的對(duì)象1106經(jīng)歷到基準(zhǔn)空間C2的轉(zhuǎn)變，并且被放置在圖片1100中作為遠(yuǎn)離移動(dòng)終端200的對(duì)象
1106bo
[0183]圖25和圖26是示出了根據(jù)本公開的實(shí)施例的基準(zhǔn)空間之間的切換的第二操作示例的圖。在所示的示例中，被顯示在以上的基準(zhǔn)空間Cl (通過使用移動(dòng)終端200作為參考所設(shè)置的空間)中的對(duì)象1106通過對(duì)移動(dòng)終端200的觸摸傳感器220的拖拽操作2203經(jīng)歷到基準(zhǔn)空間C3(真實(shí)空間)的轉(zhuǎn)變，并且對(duì)象1106被放置在遠(yuǎn)離移動(dòng)終端200的空間中。此時(shí)，在對(duì)象1106經(jīng)歷從基準(zhǔn)空間Cl到基準(zhǔn)空間C3的轉(zhuǎn)變之后，通過諸如由拖拽操作在移動(dòng)終端200上滑動(dòng)的效果輕微地移動(dòng)對(duì)象1106，然后對(duì)象1106可以被固定。
[0184]盡管在以上示例中描述了兩個(gè)基準(zhǔn)空間之間的切換，但是這可以被應(yīng)用到三個(gè)基準(zhǔn)空間之間的切換。在圖25和圖26所示的示例中，例如，當(dāng)替代于對(duì)觸摸傳感器20的拖拽操作2203，可以執(zhí)行諸如輕敲或兩次輕敲操作的操作時(shí)，代替于從基準(zhǔn)空間Cl到基準(zhǔn)空間C3的轉(zhuǎn)變，對(duì)象1106可以經(jīng)歷到基準(zhǔn)空間C3(使用可穿戴顯示器100作為參考所設(shè)置的空間)的轉(zhuǎn)變。以這種方式，當(dāng)在轉(zhuǎn)變目的地的基準(zhǔn)空間中存在多個(gè)候選時(shí)，轉(zhuǎn)變目的地的基準(zhǔn)空間可以通過對(duì)觸摸傳感器220所執(zhí)行的各種操作來(lái)確定。
[0185]圖27是示出了根據(jù)本公開的實(shí)施例的用于每個(gè)基準(zhǔn)空間的光標(biāo)的顯示示例的圖。如上所述，在本公開的一些實(shí)施例中，可以從多個(gè)候選中選擇可以顯示對(duì)象的基準(zhǔn)空間。因此，例如，在圖片1100上的顯示中，表示要放置對(duì)象的基準(zhǔn)空間可能是有用的。
[0186]圖27A示出了當(dāng)對(duì)象1106被放置在包括基準(zhǔn)空間Cl或基準(zhǔn)空間C3的三維空間中時(shí)的光標(biāo)1108a。光標(biāo)1108a可以被顯示為包括盒子的形狀，該盒子三維地包含板狀圖標(biāo)1106。另一方面，圖27B示出了當(dāng)對(duì)象1106被放置在包括基準(zhǔn)空間C2的二維空間中時(shí)的光標(biāo)1108b。光標(biāo)1108b可以被顯示為圍繞作為平面上的區(qū)域所顯示的圖標(biāo)1106的角部的圖像。
[0187]此外，可以使用諸如對(duì)象1106或光標(biāo)1108的顏色或紋理的顯示效果來(lái)表示放置有對(duì)象1106的基準(zhǔn)空間。放置有對(duì)象1106的空間可以由在對(duì)象1106附近要顯示的圖標(biāo)表不。
[0188](4.來(lái)自真實(shí)空間的插入顯示)
[0189]將參照?qǐng)D28至圖31描述根據(jù)本公開的實(shí)施例的來(lái)自真實(shí)空間的插入顯示。出于簡(jiǎn)便的目的，使用第一裝置配置示例給出下面的描述，但是根據(jù)對(duì)裝置配置的描述的參考將變得明顯地，在第二裝置配置示例至第四裝置配置示例以及其他裝置配置中可以執(zhí)行相似的顯示。
[0190]在本公開的一些實(shí)施例中，如上述示例，可穿戴顯示器100使用移動(dòng)終端200進(jìn)行操作。在這種情況下，存在下述情況:在該情況中，即使在可穿戴顯示器100中用戶的視場(chǎng)通常被遮擋的狀態(tài)下顯示內(nèi)容或GUI圖像時(shí)，通過使得用戶至少暫時(shí)地視覺地識(shí)別真實(shí)空間中移動(dòng)終端200的位置和姿勢(shì)或?qū)σ苿?dòng)終端200的觸摸傳感器220的操作狀態(tài)，用戶也容易地操作可穿戴顯示器100。
[0191]在另一實(shí)施例中，移動(dòng)終端200不必用于可穿戴顯示器100的操作。當(dāng)在可穿戴顯示器100中用戶的視場(chǎng)被遮擋的狀態(tài)下顯示內(nèi)容或GUI圖像時(shí)，如果在移動(dòng)終端200中存在進(jìn)入(incoming)消息，則可以期望對(duì)移動(dòng)終端200或在移動(dòng)終端200上所顯示的圖片進(jìn)行檢查，而不斷開與可穿戴顯示器100的連接或中斷圖片的顯示。
[0192]在下述示例中，在如上所述的情況下，如果用戶的視場(chǎng)被遮擋并且圖片被顯示在可穿戴顯示器100中，由外部真實(shí)空間中的圖像選擇性地插入到圖片。除了顯示在移動(dòng)終端200或移動(dòng)終端200的顯示單元210上的圖片之外，真實(shí)空間中的圖像還可以是如下對(duì)象的任何圖像:通過由用戶進(jìn)行的視覺識(shí)別從該對(duì)象的任何圖像可獲得一些信息。
[0193]當(dāng)由真實(shí)空間中的圖像插入到圖片時(shí)，從由攝像裝置130所創(chuàng)建的捕獲圖像中所提取的真實(shí)空間中的圖片可以替代諸如內(nèi)容的圖片的至少一部分而被顯示，或可以以疊加的方式顯示在諸如內(nèi)容的圖片的至少一部分上，或通過部分地增加諸如內(nèi)容的圖片的透射率可以使得透過真實(shí)空間中的外部圖像。
[0194](4-1.移動(dòng)終端的插入顯示)
[0195]圖28是示出了根據(jù)本公開的實(shí)施例的移動(dòng)終端的插入顯示的示例的圖。在所示的示例中，當(dāng)遮擋用戶的視場(chǎng)的內(nèi)容圖片1102顯示在可穿戴顯示器100的顯示單元110上時(shí)，圖片被顯示為由移動(dòng)終端200’插入。
[0196]移動(dòng)終端200’是通過下述處理所顯示的圖片:通過基于由空間關(guān)系獲取單元242所估計(jì)的空間關(guān)系在由可穿戴顯示器100的攝像裝置130所創(chuàng)建的捕獲圖像之中提取移動(dòng)終端200的圖片，并且通過代替內(nèi)容圖像1102或疊加在內(nèi)容圖像1102上將所提取的圖片布置在真實(shí)空間中的視場(chǎng)中移動(dòng)終端200的位置(當(dāng)不存在顯示單元110時(shí)移動(dòng)終端200可見的位置)處。
[0197]替選地，當(dāng)顯示單元110可以在用戶的視場(chǎng)上以疊加的方式顯示透過的圖片時(shí)，通過在真實(shí)空間的視場(chǎng)中移動(dòng)終端200的位置處增加內(nèi)容圖像1102的透射率，使得真實(shí)空間中移動(dòng)終端200的圖像被透過，因此移動(dòng)終端200’可以插入到內(nèi)容圖像1102。
[0198](4-2.顯示圖片的插入顯示)
[0199]圖29是示出了根據(jù)本公開的實(shí)施例對(duì)顯示圖片的插入的顯示示例的圖。在所示的示例中，當(dāng)遮擋用戶的視場(chǎng)的內(nèi)容圖像1102顯示在可穿戴顯示器100的顯示單元110上時(shí)，通過插入顯示移動(dòng)終端的顯示圖片2100’。
[0200]顯示圖片2100’是通過下述處理所顯示的圖片:通過基于由空間關(guān)系獲取單元242所估計(jì)的空間關(guān)系在由可穿戴顯示器100的攝像裝置130所創(chuàng)建的捕獲圖像之中提取顯示在移動(dòng)終端200的顯示單元210上的圖片2100的圖片，并且通過代替內(nèi)容圖像1102或疊加在內(nèi)容圖像1102上將所提取的圖片布置在真實(shí)空間中的視場(chǎng)的圖片2100的位置(當(dāng)不存在顯示單元110時(shí)顯示圖片2100可見的位置)處。
[0201]在上述情況中，不同于由攝像裝置1300所創(chuàng)建的捕獲圖像，顯示圖片2100’可以基于所估計(jì)的空間關(guān)系在顯示控制單元246中重畫。換言之，顯示控制單元246可以使用通過下述處理所獲得的圖片作為顯示圖片2100’:通過基于與被用于將圖片2100顯示在顯示單元210上的數(shù)據(jù)相似的數(shù)據(jù)重畫“從可穿戴顯示器100所觀看的圖片2100”。在這種情況下，顯示圖片2100’與從捕獲圖像中提取的情況相比可以更清楚地顯示，并且可能可以對(duì)諸如在顯示圖片2100’中包括的鏈接的操作元素進(jìn)行操作。
[0202]替選地，當(dāng)顯示單元110可以在用戶的視場(chǎng)上以疊加的方式顯示透過的圖片時(shí)，通過在真實(shí)空間的視場(chǎng)中的顯示圖片2100的位置處增加內(nèi)容圖像1102的透射率，可以使得透過真實(shí)空間中的顯示圖片2100的圖像，因此顯示圖片2100’可以插入到內(nèi)容圖像
1102ο
[0203]圖30是示出了根據(jù)本公開的實(shí)施例的顯示圖片的插入顯示的另一示例的圖。在所示的示例中，當(dāng)遮擋用戶的視場(chǎng)的內(nèi)容圖片1102顯示在可穿戴顯示器100的顯示單元110上時(shí)，與移動(dòng)終端的顯示圖片相關(guān)地生成的信息窗口 1116通過插入被顯示。
[0204]在圖30Α所示的示例中，內(nèi)容圖片1102由信息窗口 1116b以一部分被顯示在顯示單元110上所顯示的內(nèi)容圖片1102的范圍中(或遠(yuǎn)離可穿戴顯示器100)的方式插入，其中信息窗口 1116b被顯示以用于指示在移動(dòng)終端200中存在進(jìn)入的消息。在圖30B所示的示例中，內(nèi)容圖片1102由信息窗口 1106b以稍微更大的部分被顯示在顯示單元110上所顯示的內(nèi)容圖片1102的范圍中(或中等遠(yuǎn)離可穿戴顯示器100)的方式插入，其中信息窗口1106b被顯示以用于指示在移動(dòng)終端200中存在進(jìn)入的消息。在圖30C所示的示例中，內(nèi)容圖片1102由信息窗口 1106c以更大的部分被顯示在顯示單元110上所顯示的內(nèi)容圖片1102的范圍中(或接近可穿戴顯示器100)的方式插入，其中信息窗口 1106c被顯示以用于指示在移動(dòng)終端200中存在進(jìn)入的消息。
[0205]在上述示例中，在信息窗口 1116中所包括的信息量隨著移動(dòng)終端200接近可穿戴顯示器100而增加。換言之，在此示例中，顯示控制單元246使得在作為基于移動(dòng)終端200的顯示單元210上所顯示的圖片2100所編輯的圖片的信息窗口 1116中所包括的信息量依賴于可穿戴顯示器100與移動(dòng)終端200之間的空間關(guān)系而改變。
[0206](4-3.一般對(duì)象的插入顯示)
[0207]圖31是示出了根據(jù)本公開的實(shí)施例的一般對(duì)象的插入顯示的示例的圖。在所示的示例中，當(dāng)遮擋用戶的視場(chǎng)的內(nèi)容圖片1102顯示在可穿戴顯示器100的顯示單元110上時(shí)，通過用戶的視場(chǎng)中的插入顯示各種對(duì)象。
[0208]作為一個(gè)示例，在圖31A中，在用戶U的視場(chǎng)V2中所包括的電視TVl的顯示圖片2100’通過對(duì)內(nèi)容圖片1102的插入而被顯示。在圖31B中，在用戶U的視場(chǎng)Vl中所包括的電視TV2的顯示圖片2100’和在視場(chǎng)Vl中相似地包括的時(shí)鐘CLOCK的圖片CLOCK’ (時(shí)鐘’)通過對(duì)內(nèi)容圖片1102的插入而被顯示。盡管未示出，例如，當(dāng)個(gè)人計(jì)算機(jī)PC在用戶U的視場(chǎng)內(nèi)時(shí)，通過對(duì)內(nèi)容圖片1102的插入顯示PC的顯示圖片。
[0209]作為一個(gè)示例，當(dāng)如圖31B所示地執(zhí)行插入顯示時(shí)，通過用戶的操作輸入所選擇的顯示圖片2100’如圖31C所示地被放大并且變形，然后可以在顯示單元110上顯示為全屏視圖。以上所提及的操作輸入不限于如以上所描述的示例通過移動(dòng)終端200執(zhí)行的操作輸入，并且操作輸入可以包括使用聲音或手勢(shì)的操作輸入。替選地，可以使用加速度傳感器等確定穿戴有可穿戴顯示器100的用戶的旋轉(zhuǎn)。當(dāng)確定用戶面對(duì)電視TV2時(shí)，如上所述可以在全屏視圖中放大并且顯示顯示圖片2100’。
[0210]在上述示例中，在諸如電視和鐘表的對(duì)象之中通過插入而要顯示的對(duì)象的選擇可以由用戶預(yù)先通過登記來(lái)確定。當(dāng)?shù)怯浟送ㄟ^插入要顯示的對(duì)象時(shí)，很可能為通過插入要顯示在顯示單元110上所顯示的圖片上的目標(biāo)的對(duì)象可以虛擬顯示，并且當(dāng)用戶選擇虛擬顯示時(shí)，對(duì)象可以被設(shè)置為通過插入要顯示的目標(biāo)。
[0211]對(duì)于很可能為通過插入要顯示的目標(biāo)的對(duì)象，可穿戴顯示器100與移動(dòng)終端200之間的對(duì)象