用于頭戴式顯示器的反應(yīng)性用戶接口的制作方法
【專利摘要】本發(fā)明的實(shí)施例是針對(duì)允許透視HMD對(duì)傳感器及其它輸入作出智能反應(yīng)以調(diào)整顯示展示視頻的視覺(jué)元素的方式。HMD可以不同方式對(duì)不同傳感器輸入作出反應(yīng)，從而使得HMD能夠基于所接收的傳感器輸入的程度及類型而提供分級(jí)式響應(yīng)。這些響應(yīng)可進(jìn)一步基于用戶上下文的確定以幫助確保智能的、適當(dāng)?shù)捻憫?yīng)。
【專利說(shuō)明】用于頭戴式顯示器的反應(yīng)性用戶接口

【背景技術(shù)】
[0001]透視頭戴式顯示器(HMD)可在用戶的視野內(nèi)提供透明的顯示區(qū)域，其中用戶可觀看用戶的周圍環(huán)境中的物理對(duì)象及顯示器上的視覺(jué)元素兩者。然而，在一些情形中，例如當(dāng)用戶正導(dǎo)覽忙碌環(huán)境時(shí)，所顯示的視覺(jué)元素可能分散注意力及/或可能損害使用者觀看其周圍環(huán)境中的物理對(duì)象。


【發(fā)明內(nèi)容】

[0002]本發(fā)明的實(shí)施例是針對(duì)允許透視HMD對(duì)傳感器及其它輸入做出智能反應(yīng)以調(diào)整跨越用戶接口顯示視覺(jué)元素的方式。HMD可以不同方式對(duì)不同傳感器輸入作出反應(yīng)，從而使得HMD能夠基于所接收的傳感器輸入的程度及類型而提供分級(jí)式響應(yīng)(graduatedresponse)。這些響應(yīng)可進(jìn)一步基于用戶上下文的確定以幫助確保智能的、適當(dāng)?shù)捻憫?yīng)。
[0003]根據(jù)本發(fā)明，一種提供用于頭戴式顯示器的反應(yīng)性視頻回放介面的實(shí)例方法包含致使所述頭戴式顯示器的顯示器展示包含視頻的至少一個(gè)視覺(jué)元素。當(dāng)不顯示內(nèi)容時(shí)，所述顯示器從所述頭戴式顯示器的用戶來(lái)看至少是半透明的。所述方法進(jìn)一步包含使用來(lái)自一或多個(gè)傳感器的第一組傳感器數(shù)據(jù)檢測(cè)觸發(fā)事件，以及基于所述觸發(fā)事件在繼續(xù)展示所述視頻的同時(shí)改變所述視頻的可見(jiàn)度。
[0004]根據(jù)本發(fā)明，一種實(shí)例頭戴式顯示系統(tǒng)包含:用于將一或多個(gè)視覺(jué)元素顯示給用戶以使得所述用戶能夠至少選擇性地觀看所述用戶的周圍環(huán)境的顯示裝置；經(jīng)配置以搜集傳感器數(shù)據(jù)的感測(cè)裝置；以及用于致使所述顯示裝置展示包含視頻的視覺(jué)元素的裝置。所述頭戴式顯示系統(tǒng)進(jìn)一步包含:用于使用來(lái)自所述感測(cè)裝置的一組傳感器數(shù)據(jù)檢測(cè)觸發(fā)事件的裝置；以及用于基于所述觸發(fā)事件在繼續(xù)展示所述視頻的同時(shí)改變由所述顯示裝置展示的所述視頻的可見(jiàn)度的裝置。
[0005]根據(jù)描述，一種實(shí)例頭戴式顯示裝置包含:主體，其經(jīng)配置以佩戴在用戶的頭部上；以及顯示器，其與所述主體耦合且經(jīng)配置以允許所述用戶觀看所述用戶的周圍環(huán)境及由所述顯示器展示的視覺(jué)元素。所述頭戴式顯示裝置進(jìn)一步包含:至少一個(gè)傳感器，其經(jīng)配置以提供傳感器數(shù)據(jù)；以及處理單元，其以通信方式耦合到所述顯示器及所述至少一個(gè)傳感器。所述處理單元經(jīng)配置以進(jìn)行以下操作:致使所述顯示器展示所述視覺(jué)元素，所述視覺(jué)元素包含視頻；使用來(lái)自所述至少一個(gè)傳感器的第一組傳感器數(shù)據(jù)檢測(cè)觸發(fā)事件；以及致使所述顯示器基于所述觸發(fā)事件在繼續(xù)展示所述視頻的同時(shí)改變由所述顯示器展示的所述視頻的可見(jiàn)度。
[0006]根據(jù)本發(fā)明，一種實(shí)例非暫時(shí)性計(jì)算機(jī)可讀媒體具有嵌入其上的指令，所述指令用于提供用于頭戴式顯示器的反應(yīng)性視頻回放介面。所述指令包含用于致使所述頭戴式顯示器的顯示器展示包含視頻的至少一個(gè)視覺(jué)元素的計(jì)算機(jī)可執(zhí)行代碼。當(dāng)不顯示內(nèi)容時(shí)，所述顯示器從所述頭戴式顯示器的用戶來(lái)看至少是半透明的。所述指令進(jìn)一步包含用于使用來(lái)自一或多個(gè)傳感器的第一組傳感器數(shù)據(jù)檢測(cè)觸發(fā)事件，且基于所述觸發(fā)事件在繼續(xù)展示所述視頻的同時(shí)改變所述視頻的可見(jiàn)度的的計(jì)算機(jī)可執(zhí)行代碼。
[0007]根據(jù)描述，一種用于與HMD —起使用的實(shí)例方法包含:顯示一或多個(gè)特征；檢測(cè)所述HMD的運(yùn)動(dòng)；以及響應(yīng)于所述所檢測(cè)到的運(yùn)動(dòng)而更改所述特征的所述顯示。所述更改可增大從所述HMD的用戶的角度在所述HMD外部的對(duì)象的可見(jiàn)度。在一些實(shí)施例中，更改所述特征的所述顯示可包含以下各者中的一或多者:增大所述一或多個(gè)特征中的至少一者的透明度；減小所述一或多個(gè)特征中的至少一者的大?。换驈娘@示器移除所述一或多個(gè)特征中的至少一者。
[0008]根據(jù)本發(fā)明，另一實(shí)例方法包含:檢測(cè)關(guān)于抬頭顯示器(heads-up display)的用戶的上下文；至少部分基于所述所檢測(cè)到的上下文而致使所述抬頭顯示器顯示一或多個(gè)特征；檢測(cè)觸發(fā)事件；以及至少部分基于所述所檢測(cè)到的觸發(fā)事件而致使所述一或多個(gè)特征的所述顯示更改。
[0009]所述方法可包含以下特征中的一或多者。所述上下文可包含所述用戶的活動(dòng)。可使用一或多個(gè)傳感器檢測(cè)所述上下文。所述一或多個(gè)傳感器可包含運(yùn)動(dòng)傳感器、慣性傳感器、光傳感器、麥克風(fēng)或天線中的至少一者。所述一或多個(gè)傳感器可附接到所述抬頭顯示器。
[0010]根據(jù)本發(fā)明，用于與HMD—起使用的又一實(shí)例方法可包含:將一或多個(gè)特征顯示給所述HMD的用戶；檢測(cè)所述用戶的頭部的運(yùn)動(dòng)；以及響應(yīng)于所述所檢測(cè)到的運(yùn)動(dòng)而增大所述一或多個(gè)特征中的至少一者的透明度。
[0011]根據(jù)本發(fā)明，用于與HMD —起使用的另一實(shí)例方法包含:檢測(cè)所述HMD的用戶正坐下；顯示一或多個(gè)特征；檢測(cè)所述用戶正站立；以及響應(yīng)于所述用戶正站立之所述檢測(cè)而減小所述一或多個(gè)特征中的至少一者的大小。
[0012]涵蓋其它功能及特征。舉例來(lái)說(shuō)，一種實(shí)例方法可包含:致使一或多個(gè)元素由處于第一等級(jí)的頭戴式顯示器呈現(xiàn)；檢測(cè)所述頭戴式顯示器的移動(dòng)；基于所述所檢測(cè)到的移動(dòng)的量值或量而確定調(diào)整量；以及致使基于所述所確定的調(diào)整量調(diào)整所述第一等級(jí)。
[0013]此實(shí)例方法可包含以下特征中的一或多者。確定所述調(diào)整量可包含基于所確定移動(dòng)的量值或量而從多個(gè)量中選擇一量。致使調(diào)整所述第一等級(jí)可包含引起逐漸或分層調(diào)整。調(diào)整量可經(jīng)確定以便與所確定移動(dòng)的量值或量大致成比例，一直到閾值。致使調(diào)整所述第一等級(jí)可不包含停止呈現(xiàn)所述一或多個(gè)元素。所呈現(xiàn)的所述一或多個(gè)元素可為音頻元素，且致使調(diào)整第一等級(jí)可包含減小呈現(xiàn)所述音訊的音量。所呈現(xiàn)的所述一或多個(gè)元素可為所顯示的視覺(jué)元素，且致使調(diào)整第一等級(jí)可包含增大所顯示的視覺(jué)元素的透明度。所呈現(xiàn)的所述一或多個(gè)元素可為所顯示的視覺(jué)元素，且致使調(diào)整第一等級(jí)可包含減小所顯示的視覺(jué)元素的大小。所顯示的視覺(jué)元素可包含視頻的一部分。所顯示的視覺(jué)元素包含導(dǎo)覽接口。所顯示的視覺(jué)元素包含文本信息、消息中心、多格式文本及/或圖像、圖、數(shù)據(jù)、股票信息、科學(xué)數(shù)據(jù)或體育內(nèi)容或分?jǐn)?shù)。
[0014]另外或替代地，所述實(shí)例方法可包含以下特征中的一或多者。所述方法還可包含:確定所述頭戴式顯示器已返回到所述頭戴式顯示器在移動(dòng)之前所處的狀態(tài)；以及基于確定所述頭戴式顯示器已返回到所述狀態(tài)而致使在所述第一等級(jí)下呈現(xiàn)所述一或多個(gè)元素。所述方法可包含:基于所述檢測(cè)而暫停所述一或多個(gè)元素中的至少一者的回放；以及基于確定所述頭戴式顯示器已返回到所述頭戴式顯示器在移動(dòng)之前所處的狀態(tài)而恢復(fù)所述至少一個(gè)元素的回放。所述檢測(cè)除了檢測(cè)實(shí)質(zhì)上恒定的加速度之外還可包含檢測(cè)移動(dòng)、檢測(cè)所述頭戴式顯示器的旋轉(zhuǎn)，及/或忽略所述頭戴式顯示器的線性加速度。所述方法還可包含致使基于所述所檢測(cè)到的移動(dòng)而呈現(xiàn)一或多個(gè)額外元素。
[0015]本文所述的項(xiàng)目及/或技術(shù)可提供以下能力中的一或多者以及未提及的其它能力?？商峁┯糜谧詣?dòng)地改變用戶接口元素(例如視頻)的可見(jiàn)度或形式的技術(shù)，以幫助允許用戶基于環(huán)境條件及/或用戶移動(dòng)看到其環(huán)境，而不必需要用戶經(jīng)由用戶接口提供命令。這在緊急情境中可尤其有幫助，在緊急情境中，使用戶經(jīng)由用戶接口提供命令可能是繁重的及/或危險(xiǎn)的，或其中用戶可能原本沒(méi)有意識(shí)到情境是緊急或危險(xiǎn)的。這些及其它實(shí)施例連同其許多優(yōu)點(diǎn)及特征結(jié)合下文的文本及附圖而更詳細(xì)描述。

【專利附圖】

【附圖說(shuō)明】
[0016]參考以下各圖，可實(shí)現(xiàn)對(duì)各種實(shí)施例的性質(zhì)及優(yōu)點(diǎn)的進(jìn)一步理解。在附圖中，類似組件或特征可以具有相同參考標(biāo)記。此外，可通過(guò)在參考標(biāo)記之后跟著短劃線及在類似組件之間進(jìn)行區(qū)分的第二標(biāo)記來(lái)區(qū)分相同類型的各種組件。如果說(shuō)明書(shū)中只使用第一參考標(biāo)記，那么描述適用于具有相同第一參考標(biāo)記的類似組件中的任一者，而與第二參考標(biāo)記無(wú)關(guān)。
[0017]圖1A到IB是頭戴式顯示器(HMD)的實(shí)施例的簡(jiǎn)化說(shuō)明。
[0018]圖2到6是展示HMD可如何經(jīng)配置而基于用戶的情境以智能方式作出反應(yīng)的實(shí)例的簡(jiǎn)化說(shuō)明。
[0019]圖7是根據(jù)一個(gè)實(shí)施例的實(shí)現(xiàn)與HMD的用戶交互的方法的流程圖說(shuō)明。
[0020]圖8是說(shuō)明在應(yīng)用于視頻回放時(shí)用于提供用于HMD的反應(yīng)性用戶接口的實(shí)施方案的方法的流程圖。
[0021]圖9是可并入到HMD中及/或與HMD以通信方式耦合的計(jì)算機(jī)系統(tǒng)的實(shí)施例的簡(jiǎn)化框圖。

【具體實(shí)施方式】
[0022]參考圖式提供以下描述，其中類似參考標(biāo)號(hào)始終用以指類似元件。雖然本文中描述一或多個(gè)技術(shù)的各種細(xì)節(jié)，但其它技術(shù)也是可能的。在一些情況下，以框圖形式展示結(jié)構(gòu)及裝置以有助于描述各種技術(shù)。
[0023]本發(fā)明的實(shí)施例是針對(duì)用于頭戴式顯示器(HMD)的反應(yīng)性用戶接口。HMD是可向佩戴其的用戶顯示信息的裝置。此外，因?yàn)檫@些裝置佩戴在用戶的頭部上，所以HMD可具有其它顯示器無(wú)法實(shí)現(xiàn)的能力。舉例來(lái)說(shuō)，某些HMD可具有透明(或半透明)顯示器，從而使得用戶能夠觀看用戶的周圍環(huán)境以及顯示器上的視覺(jué)元素兩者。所述視覺(jué)元素自身可具有透明度，所述透明度可通過(guò)HMD執(zhí)行的應(yīng)用程序來(lái)確定。一些實(shí)施例可通過(guò)使用戶觀看的物理對(duì)象和與所述物理對(duì)象相關(guān)聯(lián)的視覺(jué)元素(例如文本及/或圖片)重疊而提供“擴(kuò)增實(shí)境”功能性。本發(fā)明的實(shí)施例允許HMD對(duì)傳感器及其它輸入智能地作出反應(yīng)以調(diào)整展示在顯示器上的內(nèi)容。具體來(lái)說(shuō)，HMD可經(jīng)配置以解釋傳感器數(shù)據(jù)以建置“情境感知”，所述“情境感知”使得HMD能夠相應(yīng)地確定由HMD的顯示器展示的上下文(例如，用戶參與其中的活動(dòng)及/或情境)及控制信息。此功能性不僅可有助于HMD用戶，而且其亦可通過(guò)例如允許用戶在某些上下文中看到及/或聽(tīng)到其周圍的境況及/或基于特定移動(dòng)而增大用戶的安全性，及/或?qū)⒂脩舻淖⒁饬腍MD所呈現(xiàn)的媒體或其它元素引開(kāi)。
[0024]圖1A是佩戴在用戶110的頭部上的HMD 120的一個(gè)實(shí)施例的簡(jiǎn)化說(shuō)明。此實(shí)施例包含主體或框架，類似于一副眼鏡，其可擱置在用戶的鼻子及耳朵上。HMD 120的顯示器的部分可定位在用戶的眼睛前方，如同一副眼鏡的鏡片。所述顯示器的至少一部分可為透明的，從而使得用戶110能夠看到用戶的周圍環(huán)境及由顯示器展示的視覺(jué)元素兩者。在顯示器220上展示的視覺(jué)元素的透明度的等級(jí)可變化，這取決于顯示器220的所要功能性、由所述顯示器展示的圖形用戶接口(GUI)的設(shè)定，及/或由HMD 120執(zhí)行的軟件應(yīng)用程序(例如，視頻、地圖、因特網(wǎng)瀏覽器等)。盡管圖1A展示具有眼鏡樣框架的HMD120的實(shí)施例，但其它實(shí)施例可具有不同外觀尺寸及/或利用可提供類似功能性的不同光學(xué)技術(shù)(例如，視網(wǎng)膜投影儀、隱形眼鏡，或其它光學(xué)系統(tǒng))。此外，HMD 120可包含用以與用戶110交互的其它接口，例如揚(yáng)聲器(其可包含頭戴式耳機(jī))、相機(jī)、觸控板、按鈕及其類似者。下文關(guān)于圖9進(jìn)一步詳細(xì)描述可集成到HMD中及/或與HMD以通信方式耦合的計(jì)算機(jī)系統(tǒng)的組件。
[0025]HMD 120進(jìn)一步可配置有用于額外功能性的多種傳感器。圖1B是包含可用以跟蹤用于與HMD 120的GUI進(jìn)行用戶交互的對(duì)象(例如用戶的手140)的外置相機(jī)130及/或其它傳感器的HMD 120的實(shí)施例的簡(jiǎn)化說(shuō)明。另外或替代地，HMD 120可包含一或多個(gè)傳感器，例如衛(wèi)星定位系統(tǒng)(SPS)接收器、加速度計(jì)、陀螺儀、磁力計(jì)、高度計(jì)、紅外線接近度檢測(cè)器、光電二極管、麥克風(fēng)及/或能夠檢測(cè)位置、運(yùn)動(dòng)、定向、光、聲音及其類似者的其它傳感器。實(shí)施例可通過(guò)嵌入及/或以其它方式將傳感器物理地耦合到HMD120而并入有此類傳感器。另外或替代地，傳感器可與HMD 120分開(kāi)、例如經(jīng)由無(wú)線數(shù)據(jù)連接以通信方式耦合。這些傳感器可用以幫助HMD 120使用例如圖9的計(jì)算機(jī)系統(tǒng)等軟件及/或硬件裝置(其可集成到HMD 120中及/或與HMD 120以通信方式耦合)確定用戶110所參與的活動(dòng)。此“情境感知”可使得HMD 120能夠基于用戶的情境以智能方式操控GUI。圖2到6說(shuō)明此類功能性的實(shí)例。
[0026]圖2為展示用戶110在就座的同時(shí)在由HMD 120回放電影期間可看到的內(nèi)容的實(shí)施例的說(shuō)明200。在此實(shí)例中，HMD 120利用傳感器數(shù)據(jù)來(lái)確定用戶就座及/或靜止，且在顯示器210內(nèi)的大窗口 220中以極小或無(wú)透明度展示電影。換句話說(shuō)，因?yàn)镠MD 120已確定用戶就座(例如，坐在家中、坐在公交車上、坐在公園中，等)且能夠?qū)Ｗ⒂陔娪?，因此HMD120可在占據(jù)所有(或接近所有)顯示器210區(qū)域的窗口 220中以極小或無(wú)透明度展示電影，因?yàn)橛脩艨赡懿恍枰虿幌胍軌蚩吹街車鷮?duì)象。
[0027]可利用各種傳感器來(lái)確定用戶已就座。如上文所論述，可使用一或多個(gè)SPS接收器、加速度計(jì)、陀螺儀、磁力計(jì)、高度計(jì)及/或其它傳感器來(lái)檢測(cè)位置、運(yùn)動(dòng)、定向、光、聲音及其類似者。作為一實(shí)例，HMD 120可利用加速度計(jì)及/或SPS輸入來(lái)隨時(shí)間推移跟蹤移動(dòng)及/或位置，在輸入指示HMD 120處于豎直定向且具有極少移動(dòng)且位置具有極小或無(wú)改變的情況下確定用戶已就座。在另一實(shí)例中，HMD 120可使用SPS數(shù)據(jù)檢測(cè)側(cè)向速度超過(guò)閾值量，但極小或無(wú)垂直移動(dòng)，其將指示步行或跑動(dòng)。在此情況下，HMD 120可得出結(jié)論，用戶正坐在車輛中。在此后一情況下，HMD 120可提示用戶確認(rèn)用戶處于車輛中，且(任選地)用戶未駕駛車輛。所屬領(lǐng)域的技術(shù)人員將了解，可使用其它傳感器及/或其它傳感器數(shù)據(jù)來(lái)確定用戶已就座。
[0028]圖3是展示HMD 120可如何操控所顯示視覺(jué)元素以對(duì)移動(dòng)及/或第一類型的觸發(fā)事件作出響應(yīng)的實(shí)例的說(shuō)明300。此處，HMD 120使用傳感器數(shù)據(jù)來(lái)檢測(cè)用戶的頭部及/或身體的快速移動(dòng)且通過(guò)改變視頻的可見(jiàn)度、使顯示電影(及/或由顯示器210展示的其它視覺(jué)元素)的窗口 220變得更透明而做出反應(yīng)。此使得用戶能夠經(jīng)由顯示器看到用戶的周圍環(huán)境。在圖3中所示的實(shí)施例中，透明度增大，從而導(dǎo)致電影不透明度的50-75%減小。在其它實(shí)施例中，不透明度可大于或小于此范圍，這取決于所要功能性。此外，透明度的改變可與用戶移動(dòng)的速度及/或范圍(例如，量)成比例(例如，透明度可隨著移動(dòng)及/或移動(dòng)速度增大而增大)。在一些實(shí)施例中，透明度調(diào)整可為逐漸的或分層的。此外，一些實(shí)施例可在用戶移動(dòng)范圍及/或速度大于閾值量時(shí)致使電影窗口 220變得透明。因此，若僅檢測(cè)到小的及/或緩慢的移動(dòng)，HMD 120可不改變視頻的可見(jiàn)度，以幫助減少回放中不希望的中斷。在一些實(shí)施例中，第一移動(dòng)(例如用戶的頭部急速地轉(zhuǎn)到側(cè)面)可將可見(jiàn)度減少第一量，且第二移動(dòng)(例如用戶站起來(lái))可進(jìn)一步減小可見(jiàn)度或致使視頻關(guān)閉。在一些實(shí)施例中，僅特定移動(dòng)(例如頭部轉(zhuǎn)動(dòng)(例如，側(cè)到側(cè))、傾斜(例如，向上及向下)，及/或垂直移動(dòng)(例如，站起、坐下，等))可觸發(fā)電影窗口 220及/或其它所顯示元素的可見(jiàn)度的改變。其它移動(dòng)(例如線性水平加速度或基礎(chǔ)等級(jí)的加速度)可忽略，例如當(dāng)用戶正乘坐公交車或火車時(shí)。因此，僅檢測(cè)到向前或向后運(yùn)動(dòng)，則HMD 120可不調(diào)整電影窗口的可見(jiàn)度或以任何其它方式更改回放。在一些實(shí)施例中，所檢測(cè)到的加速度可觸發(fā)視覺(jué)元素的操縱，使得在以大致恒定的速度移動(dòng)時(shí)電影的回放不中斷，但檢測(cè)到高于某一閾值的加速度(速度改變)可致使HMD 120如上文所描述而操控回放。取決于所要功能性，HMD 120還可致使以類似方式減小電影音頻的音量。本文所述的改變電影窗口 220的透明度的方法應(yīng)用于改變可見(jiàn)度(例如，減小窗口大小)及/或不同視覺(jué)元素的不同方法。
[0029]取決于功能性，HMD 120可通過(guò)確定后續(xù)觸發(fā)事件(例如移動(dòng)、時(shí)間的經(jīng)過(guò)、姿勢(shì)，等)而恢復(fù)窗口 220(及/或其它視覺(jué)元素)的可見(jiàn)度。舉例來(lái)說(shuō)，如果未檢測(cè)到后續(xù)快速移動(dòng)(或其它觸發(fā)事件)，則HMD 120可使電影窗口 220返回到其原始透明度等級(jí)及原始音頻音量。此返回可為突然的或逐漸的，且可在閾值時(shí)間量之后發(fā)生。在一些實(shí)施例中，閾值時(shí)間量可為1、2、3、4或5秒。在一些實(shí)施例中，閾值時(shí)間量可為某一其它量。取決于所要功能性，閾值時(shí)間量可為用戶可選擇的。另外或替代地，HMD 120可基于用戶所接收的輸入(例如，話音命令、姿勢(shì)、頭部移動(dòng)、按鈕，等)而恢復(fù)窗口 220(及/或其它視覺(jué)元素)的可見(jiàn)度。
[0030]可使用HMD 120中的加速度計(jì)、磁力計(jì)及/或陀螺儀來(lái)檢測(cè)用戶的頭部及/或身體的快速移動(dòng)，從而感測(cè)例如HMD 120圍繞中心軸的旋轉(zhuǎn)(例如，用戶頭部的轉(zhuǎn)動(dòng))。如先前所指示，可使用閾值速度及/或范圍來(lái)確定觸發(fā)事件是否已發(fā)生，例如所檢測(cè)到的轉(zhuǎn)動(dòng)在小于一定量的時(shí)間(例如，0.25,0.5、1、2或3秒，等)內(nèi)大于一定量(例如，10、20、30、40或50度，等)及/或以或高于某一速率(例如，10、20、30、40或50度/秒，等)。另外或替代地，可利用其它傳感器數(shù)據(jù)來(lái)確定其它類型的頭部移動(dòng)及/或其它觸發(fā)事件。
[0031]圖4是HMD 120可如何操控⑶I以對(duì)站立及/或第二類型的觸發(fā)事件作出響應(yīng)的說(shuō)明400。此處，HMD 120感測(cè)到用戶已從就座位置站起，其可指示用戶可能需要看到用戶的周圍環(huán)境。因此，HMD可改變展示電影的窗口 220的可見(jiàn)度，例如通過(guò)減小其大小。在圖4中所示的實(shí)例中，電影窗口 220的大小減小到用戶視野的寬度的小于33% (或小于顯示器210的寬度的33%)。其它實(shí)施例可以不同方式減小電影窗口 220(例如，小于顯示器210的寬度的40%、50%、60%，等)。此外，取決于所要功能性，HMD 120還可通過(guò)致使電影窗口 220變得部分透明、暫?；胤拧p小音頻的音量及其類似者來(lái)更改回放。在后續(xù)觸發(fā)事件(例如上文相對(duì)于圖3所描述)出現(xiàn)之后，電影窗口 220可恢復(fù)到其原始大小(且電影回放的其它方面(如果改變)也可恢復(fù))。此處，HMD 120可檢測(cè)到用戶110再次坐下，其可解釋為此類后續(xù)觸發(fā)事件。
[0032]可利用各種傳感器來(lái)確定用戶已從就座位置站起。在一個(gè)實(shí)例中，如果HMD 120已確定用戶就座，接著隨后接收到(例如從加速度計(jì)及/或陀螺儀)指示大于閾值量(例如，0.5、1、2或3英尺，等)且在某一時(shí)間周期(例如，0.5、1、2或3秒，等)內(nèi)的向上移動(dòng)的傳感器數(shù)據(jù)，則HMD 120可確定用戶已站起。另外或替代地，可取決于所要功能性而利用其它傳感器數(shù)據(jù)。
[0033]圖5到6說(shuō)明HMD 120可如何基于由HMD 120執(zhí)行的軟件應(yīng)用程序而以不同方式操控GUI。舉例來(lái)說(shuō)，圖5是HMD 120可如何執(zhí)行行程規(guī)劃軟件應(yīng)用程序的說(shuō)明500，其中⑶I在用戶110就座時(shí)提供占據(jù)幾乎整個(gè)顯示器210的地圖510。用戶可取決于所要功能性而經(jīng)由手部手勢(shì)、觸控板、音頻命令及/或其它裝置將輸入提供到行程規(guī)劃應(yīng)用程序。圖6是在檢測(cè)到用戶已從坐立位置站起之后HMD 120可如何操控⑶I的說(shuō)明600。此處，地圖510的大小已減小，從而允許用戶經(jīng)由顯示器210看到用戶的周圍環(huán)境610。顯示器210還提供展示行程規(guī)劃應(yīng)用程序的導(dǎo)航指令的另一窗口 620。圖6中所示的實(shí)施例說(shuō)明地圖510及另一窗口 620小于用戶視野的寬度的33% (或小于顯示器210的寬度的33% )，但其它實(shí)施例可以不同方式減小地圖510及/或另一窗口 620 (例如，小于顯示器210的寬度的 40%、50%、60%，等)。
[0034]圖2到6中提供的說(shuō)明僅為實(shí)例，且并非限制性的。HMD 120的實(shí)施例可使用傳感器數(shù)據(jù)以產(chǎn)生情境或上下文感知，其可使得HMD 120能夠基于各種觸發(fā)項(xiàng)而采用多種分級(jí)式響應(yīng)中的任一者。觸發(fā)項(xiàng)可包含例如用戶的特定移動(dòng)、對(duì)象到用戶的接近度、特定人員到用戶的接近度、用戶進(jìn)入車輛、用戶從車輛退出、用戶移動(dòng)狀態(tài)之間的轉(zhuǎn)變(例如，靜止、步行、跑動(dòng)狀態(tài)，及其類似者)、響亮的噪聲、用戶到達(dá)特定位置及其類似者的任何組合。用戶的特定移動(dòng)可包含用戶頭部的轉(zhuǎn)動(dòng)、用戶站起、用戶坐下、用戶跌倒，及其類似者。在一些實(shí)施例中，觸發(fā)項(xiàng)可包含接近或到達(dá)另一人員或?qū)ο蟆Ｅe例來(lái)說(shuō)，觸發(fā)項(xiàng)可包括用戶的朋友的接近或到達(dá)用戶正等待的火車或公交車。在一些實(shí)施例中，可使用例如運(yùn)動(dòng)傳感器或光傳感器等傳感器來(lái)檢測(cè)這些觸發(fā)項(xiàng)。在一些實(shí)施例中，可基于所接收數(shù)據(jù)確定或推斷這些觸發(fā)項(xiàng)。舉例來(lái)說(shuō)，可基于例如從接近實(shí)體的裝置檢測(cè)到例如NFC或藍(lán)牙信號(hào)等信號(hào)而推斷所述接近。作為另一實(shí)例，轉(zhuǎn)接系統(tǒng)可將例如公交車或火車就要到達(dá)的消息發(fā)送到具有由所述轉(zhuǎn)接系統(tǒng)提供的應(yīng)用程序的注冊(cè)用戶或裝置。此外，一些觸發(fā)事件可包括事件或觸發(fā)項(xiàng)的所辨識(shí)模式。舉例來(lái)說(shuō)，如果用戶從步行到坐下到以汽車速度移動(dòng)而轉(zhuǎn)變，則可確定用戶可能在車輛中，其可為觸發(fā)HMD的某一響應(yīng)的事件。
[0035]響應(yīng)可變化，其可或可不取決于由HMD 120執(zhí)行的軟件應(yīng)用程序。舉例來(lái)說(shuō)，應(yīng)用程序可具有基于不同觸發(fā)項(xiàng)而使用的若干不同“模式”。舉例來(lái)說(shuō)，最小化或關(guān)閉模式可致使應(yīng)用程序從顯示器210移除一或多個(gè)視覺(jué)元素。減小模式可致使應(yīng)用程序減小顯示器上的一或多個(gè)視覺(jué)元素的大小。透明模式可致使應(yīng)用程序增大顯示器上的一或多個(gè)視覺(jué)元素的透明度。媒體回放應(yīng)用程序還可包含暫停媒體回放的暫停模式?？稍跈z測(cè)到不同觸發(fā)事件之后即刻啟動(dòng)這些不同模式。HMD 120還可基于觸發(fā)事件關(guān)閉或最小化應(yīng)用程序及/或執(zhí)行另一應(yīng)用程序。在一個(gè)實(shí)施例中，HMD 120可經(jīng)配置以實(shí)施不透明模式，其中HMD 120的顯示器向HMD 120的用戶顯示全黑或以其它方式顯得不透明，例如在用戶正睡覺(jué)時(shí)。當(dāng)檢測(cè)到觸發(fā)事件時(shí)，例如當(dāng)用戶坐起或退出REM睡眠或另一個(gè)人接近時(shí)，例如，HMD 120可顯示對(duì)于用戶至少部分透明的特征或可停止顯示。
[0036]在一些實(shí)施例中，HMD 120還可檢測(cè)觸發(fā)某些響應(yīng)的極端事件，其可獨(dú)立于由HMD120執(zhí)行的應(yīng)用程序的類型(例如，電影回放、行程規(guī)劃、因特網(wǎng)瀏覽器，等)。檢測(cè)到響亮的噪聲(用戶已跌倒)及/或接收到指示警報(bào)或緊急情況的發(fā)射信號(hào)僅為一些實(shí)例。HMD120可通過(guò)關(guān)閉當(dāng)前執(zhí)行的程序及/或調(diào)用聯(lián)系緊急服務(wù)的另一應(yīng)用程序(在顯示器210上展示警報(bào)的應(yīng)用程序，例如，電話(或其它應(yīng)用程序))來(lái)做出響應(yīng)。
[0037]圖7是說(shuō)明實(shí)現(xiàn)與頭戴式顯示器的用戶交互的方法700的實(shí)施例的流程圖。在框705處，提供用戶能夠觀看用戶的周圍環(huán)境及由顯示器展示的視覺(jué)元素的顯示區(qū)域。在一些實(shí)施例(例如利用視網(wǎng)膜投影儀的實(shí)施例)中，顯示區(qū)域可為在用戶視野內(nèi)的區(qū)域，其可不必對(duì)應(yīng)于物理顯示器或屏幕。用于執(zhí)行705的功能性的裝置可包含圖9的計(jì)算機(jī)系統(tǒng)900的輸出裝置920 (例如，顯示器)。
[0038]在框710處，使用來(lái)自一或多個(gè)傳感器的第一組傳感器數(shù)據(jù)檢測(cè)用戶活動(dòng)。如上文所指示，可從多種傳感器收集傳感器數(shù)據(jù)。舉例來(lái)說(shuō)，傳感器可包含慣性傳感器、光傳感器、運(yùn)動(dòng)傳感器、麥克風(fēng)、天線，及其類似者。此傳感器數(shù)據(jù)可經(jīng)分析以確定用戶活動(dòng)，例如移動(dòng)、躺下、坐下、站起、步行、跑動(dòng)、駕駛汽車、乘坐公交車，及其類似者。檢測(cè)用戶活動(dòng)可例如由處理單元、存儲(chǔ)器及/或可并入到HMD中及/或與HMD以通信方式耦合的其它計(jì)算裝置(例如圖9的計(jì)算機(jī)系統(tǒng)900的處理器910、輸出裝置920 (例如，顯示器)、輸入裝置915(例如，傳感器)，及/或工作存儲(chǔ)器935)執(zhí)行。傳感器還可以通信方式耦合到及/或集成到HMD中。
[0039]在框715處，基于所確定的活動(dòng)用顯示器展示一或多個(gè)視覺(jué)元素。如在上文的實(shí)例中所指示，視覺(jué)元素可基于所確定的活動(dòng)而為大的、大小減小的、透明的，及其類似者。用于展示一或多個(gè)視覺(jué)元素的裝置可包含與處理單元、存儲(chǔ)器及/或其它計(jì)算裝置(例如圖9的計(jì)算機(jī)系統(tǒng)900的處理器910、輸出裝置920 (例如，顯示器)，及/或工作存儲(chǔ)器935 (包含軟件))以通信方式耦合的顯示器。
[0040]在框720處，方法700包含使用來(lái)自一或多個(gè)傳感器的第二組傳感器數(shù)據(jù)檢測(cè)觸發(fā)事件。此類觸發(fā)事件可包含如上文所指示的多種事件，例如用戶移動(dòng)及活動(dòng)、所接收警報(bào)，及更多事件。此處同樣，用于檢測(cè)觸發(fā)事件的裝置可包含與一或多個(gè)傳感器以通信方式耦合的處理單元、存儲(chǔ)器及/或其它計(jì)算裝置。此可包含例如圖9的計(jì)算機(jī)系統(tǒng)900的處理器910、輸入裝置915 (例如，傳感器)，及/或工作存儲(chǔ)器935 (包含軟件)。
[0041]在框725處，基于在框720處檢測(cè)到的觸發(fā)事件而操控用顯示器展示的一或多個(gè)視覺(jué)元素。操縱可涉及如本文中在上文所論述的多種GUI改變中的任一者，例如移除及/或添加視覺(jué)元素(例如，窗口)、改變視覺(jué)元素的透明度、減小視覺(jué)元素的大小，及更多操縱。此處，再次，用于操縱一或多個(gè)視覺(jué)元素的裝置可包含耦合到顯示器的處理單元、存儲(chǔ)器及/或其它計(jì)算裝置，例如圖9的計(jì)算機(jī)系統(tǒng)900的處理器910、輸出裝置920 (例如，顯示器)及/或工作存儲(chǔ)器935 (包含軟件)。
[0042]圖8是說(shuō)明在應(yīng)用于視頻回放時(shí)提供用于HMD的反應(yīng)性用戶接口的特定實(shí)施方案的方法800的流程圖。在框805處，提供用戶能夠觀看用戶的周圍環(huán)境及由顯示器展示的至少一個(gè)視覺(jué)元素(包含視頻)的顯示區(qū)域。由此，顯示器可為如本文所描述的HMD的透明顯示器。也就是說(shuō)，方法800還可應(yīng)用于可不具有透明顯示器但可替代地提供例如用戶的周圍環(huán)境的實(shí)況視頻圖像(除所回放的視頻之外)的HMD。
[0043]在框820處，方法800包含使用來(lái)自一或多個(gè)傳感器的第二組傳感器數(shù)據(jù)檢測(cè)觸發(fā)事件。此類觸發(fā)事件可包含如上文所指示的多種事件，例如用戶移動(dòng)及活動(dòng)、所接收警報(bào)，及更多事件。此處，再次，用于檢測(cè)觸發(fā)事件的裝置可包含與一或多個(gè)傳感器以通信方式耦合的處理單元、存儲(chǔ)器及/或其它計(jì)算裝置。此可包含例如下文描述的圖9的計(jì)算機(jī)系統(tǒng)900的處理器910、輸入裝置915 (例如，傳感器)，及/或工作存儲(chǔ)器935 (包含軟件)。
[0044]在框830處，基于觸發(fā)事件改變視頻的可見(jiàn)度。改變視頻的可見(jiàn)度可允許用戶更清楚地看到用戶的周圍環(huán)境。因此，改變視頻的可見(jiàn)度可包含增大視頻的透明度、從顯示器移除視頻、減小視頻的大小，及其類似者。一些實(shí)施例及/或觸發(fā)事件可提供減小可見(jiàn)度同時(shí)繼續(xù)展示視頻(例如，在透明及/或大小減小的窗口中展示視頻回放或暫停的視頻圖像而不從顯示器移除視頻)。另外或替代地，HMD可暫停視頻、減小及/或消除音頻音量、顯示至少一個(gè)額外視覺(jué)元素(例如，消息、來(lái)電呼叫通知、緊急情況警告，等)。此處，再次，用于操縱一或多個(gè)視覺(jué)元素的裝置可包含耦合到顯示器的處理單元、存儲(chǔ)器及/或其它計(jì)算裝置。舉例來(lái)說(shuō)，裝置可包含圖9的計(jì)算機(jī)系統(tǒng)900的處理器910、輸出裝置920 (例如，顯示器)及/或工作存儲(chǔ)器935 (包含軟件)。
[0045]應(yīng)了解，圖7及8中說(shuō)明的特定步驟提供提供用于HMD的反應(yīng)性接口的方法700、800的實(shí)例。替代實(shí)施例可包含對(duì)所展示的實(shí)施例的更改。舉例來(lái)說(shuō)，替代實(shí)施例可包含基于觸發(fā)事件的長(zhǎng)度及/或量值而并入分級(jí)式響應(yīng)。分級(jí)式響應(yīng)可包含例如隨著所檢測(cè)運(yùn)動(dòng)的范圍增大而增大由GUI展示的電影及/或視覺(jué)元素的透明度的量，使得60度的所檢測(cè)移動(dòng)(例如，頭部轉(zhuǎn)動(dòng))各比30度的類似所檢測(cè)移動(dòng)導(dǎo)致較高透明度。可取決于特定應(yīng)用而添加、移除或組合額外特征。所屬領(lǐng)域的技術(shù)人員將辨識(shí)出許多變化、修改及替代。
[0046]如先前所指示，實(shí)施方案還可涉及基于傳感器及/或其它數(shù)據(jù)的上下文確定，除了傳感器數(shù)據(jù)之外或替代傳感器數(shù)據(jù)，所述上下文確定可用作用于改變可見(jiàn)度及/或以其它方式修改由HMD展示的視覺(jué)元素的基礎(chǔ)。如先前所說(shuō)明，上下文確定可指示用戶參與的活動(dòng)、用戶所處的位置及更多信息，其可允許HMD檢測(cè)比單獨(dú)基于原始傳感器數(shù)據(jù)檢測(cè)的觸發(fā)事件更復(fù)雜的觸發(fā)事件。由此，觸發(fā)事件不僅可包含特定移動(dòng)，而且包含對(duì)象或特定人員到用戶的接近度、用戶進(jìn)入車輛及/或從車輛退出，及其類似者。此外，HMD可在不同上下文中以不同方式對(duì)特定移動(dòng)作出響應(yīng)。舉例來(lái)說(shuō)，如果用戶躺在床上，則可能不需要更改視覺(jué)元素(例如，視頻可繼續(xù)回放而不對(duì)可見(jiàn)度進(jìn)行任何改變)，而如果在用戶在公交車上或在外的同時(shí)檢測(cè)到相同移動(dòng)，則其可能意味著用戶已跌倒，在此情況下，HMD可減小或移除視覺(jué)元素以允許用戶看到其周圍環(huán)境。
[0047]圖9說(shuō)明可并入到HMD中及/或與HMD以通信方式耦合的計(jì)算機(jī)系統(tǒng)900的實(shí)施例。計(jì)算系統(tǒng)900的一或多個(gè)組件可在不同裝置之間共享，所述不同裝置例如為HMD、智能電話、平板計(jì)算機(jī)、個(gè)人計(jì)算機(jī)或其它計(jì)算裝置。在一些實(shí)施例中，軟件及其它應(yīng)用程序可在以通信方式鏈接到顯示器的單獨(dú)裝置上運(yùn)行。在其它實(shí)施例中，HMD可具有與其集成的計(jì)算機(jī)系統(tǒng)900的一些或全部。
[0048]圖9提供可執(zhí)行由各種其它實(shí)施例所提供的方法的計(jì)算機(jī)系統(tǒng)900的一個(gè)實(shí)施例的示意性說(shuō)明。應(yīng)注意，圖9僅意欲提供各種組件的一股化說(shuō)明，可按需要利用所述組件中的任一者或所有。因此，圖9廣泛地說(shuō)明可如何以相對(duì)分離或相對(duì)較集成方式實(shí)施個(gè)別系統(tǒng)元件。
[0049]計(jì)算機(jī)系統(tǒng)900展示為包括可經(jīng)由總線905 (或在適當(dāng)時(shí)可以其它方式通信)電耦合的硬件元件。硬件元件可包含處理單元，例如處理器910，其可包含(但不限于)一或多個(gè)通用處理器、一或多個(gè)專用處理器(例如數(shù)字信號(hào)處理器、圖形加速處理器及/或其類似者)，及/或如上文陳述的可用于執(zhí)行例如關(guān)于圖7及8所描述的步驟等各種步驟的其它處理裝置。硬件元件還可包含一或多個(gè)輸入裝置915，其可包含(但不限于)SPS、加速度計(jì)，及/或能夠檢測(cè)位置、運(yùn)動(dòng)、定向、光、聲音及其類似者的其它傳感器，其可用作用于搜集傳感器數(shù)據(jù)的裝置。此外，可連同處理器910 —起利用傳感器作為用于檢測(cè)用戶活動(dòng)及/或觸發(fā)事件的裝置，如本文所描述。還可包含例如觸摸墊、鍵盤(pán)、麥克風(fēng)及/或其類似者的其它裝置。還包含一或多個(gè)輸出裝置920。這些輸出裝置可包含一或多個(gè)顯示器及/或其它顯示裝置，以及音頻裝置(例如，揚(yáng)聲器)及/或可用于執(zhí)行如關(guān)于圖7及8所描述的一或多個(gè)步驟的其它裝置。舉例來(lái)說(shuō)，在系統(tǒng)1000實(shí)施于HMD中時(shí)，輸出裝置1020可包含透明或半透明顯示器。在其中裝置1000實(shí)施于電話或控制HMD的其它裝置中的實(shí)施例中，輸出裝置1020可包括觸摸屏或可被省略。
[0050]計(jì)算機(jī)系統(tǒng)900可進(jìn)一步包含(及/或與之通信)一或多個(gè)非暫時(shí)性存儲(chǔ)裝置925，其可包括(但不限于)本地及/或網(wǎng)絡(luò)可接入存儲(chǔ)裝置，及/或可包含(但不限于)磁盤(pán)驅(qū)動(dòng)器、驅(qū)動(dòng)陣列、光學(xué)存儲(chǔ)裝置、例如隨機(jī)存取存儲(chǔ)器(“RAM”)及/或只讀存儲(chǔ)器(“ROM”)的可編程、快閃可更新及/或其類似者的固態(tài)存儲(chǔ)裝置。此類存儲(chǔ)裝置可經(jīng)配置以實(shí)施任何適當(dāng)數(shù)據(jù)存儲(chǔ)裝置，包含(但不限于)各種文件系統(tǒng)、數(shù)據(jù)庫(kù)結(jié)構(gòu)及/或其類似者。
[0051]計(jì)算機(jī)系統(tǒng)900還可包含通信子系統(tǒng)930，其可包含(但不限于)調(diào)制解調(diào)器、網(wǎng)卡(無(wú)線或有線)、紅外線通信裝置、無(wú)線通信裝置及/或芯片組(例如，Bluetooth?裝置、902.11裝置、WiFi裝置、WiMax裝置、蜂窩式通信設(shè)備等)及/或其類似者。通信子系統(tǒng)930可包含準(zhǔn)許與網(wǎng)絡(luò)、其它計(jì)算機(jī)系統(tǒng)及/或任何其它電氣裝置/周邊設(shè)備交換數(shù)據(jù)的一或多個(gè)輸入及/或輸出通信接口。在許多實(shí)施例中，計(jì)算機(jī)系統(tǒng)900將進(jìn)一步包含工作存儲(chǔ)器935，工作存儲(chǔ)器935可包含RAM或ROM裝置，如上文所描述。
[0052]計(jì)算機(jī)系統(tǒng)900還可包括展示為當(dāng)前位于工作存儲(chǔ)器935內(nèi)的軟件元件，包含操作系統(tǒng)940、裝置驅(qū)動(dòng)器、可執(zhí)行庫(kù)及/或例如一或多個(gè)應(yīng)用程序945的其他代碼，其可包括由各種實(shí)施例所提供，及/或可經(jīng)設(shè)計(jì)以實(shí)施方法及/或配置系統(tǒng)，由其他實(shí)施例所提供的計(jì)算機(jī)程序，如本文中所描述。僅僅作為實(shí)例，關(guān)于上文所論述的方法描述的一或多個(gè)程序(例如，如關(guān)于圖7及8所描述的方法700及800)可實(shí)施為可由計(jì)算機(jī)(及/或計(jì)算機(jī)內(nèi)的處理單元)執(zhí)行的代碼及/或指令；在一方面中，接著，可使用此類代碼及/或指令來(lái)配置及/或調(diào)適通用計(jì)算機(jī)(或其它裝置)以執(zhí)行根據(jù)所描述方法的一或多個(gè)操作。
[0053]一組這些指令及/或代碼可存儲(chǔ)在非暫時(shí)性計(jì)算機(jī)可讀存儲(chǔ)媒體(例如上文所描述的存儲(chǔ)裝置925)上。在一些情況下，存儲(chǔ)媒體可并入于計(jì)算機(jī)系統(tǒng)(例如，計(jì)算機(jī)系統(tǒng)900)內(nèi)。在其它實(shí)施例中，存儲(chǔ)媒體可與計(jì)算機(jī)系統(tǒng)分離(例如，可移除式媒體(例如，光盤(pán))，及/或提供于安裝包中，使得存儲(chǔ)媒體可用以編程、配置及/或調(diào)適其上存儲(chǔ)有指令/代碼的通用計(jì)算機(jī)。這些指令可呈可由計(jì)算機(jī)系統(tǒng)900執(zhí)行的可執(zhí)行代碼形式，及/或可呈源及/或可安裝代碼的形式，所述源及/或可安裝代碼在由計(jì)算機(jī)系統(tǒng)900編譯及/或安裝于計(jì)算機(jī)系統(tǒng)上后(例如，使用多種大體可用編譯程序、安裝程序、壓縮/解壓縮公用程序等中的任一者)，接著呈可執(zhí)行代碼的形式。
[0054]所屬領(lǐng)域的技術(shù)人員將顯而易見(jiàn)可根據(jù)特定要求作出大量變化。舉例來(lái)說(shuō)，還可使用定制硬件，及/或可將特定元件實(shí)施于硬件、軟件(包含便攜式軟件，例如小程序等)或兩者中。另外，可使用到其他計(jì)算裝置(例如，網(wǎng)路輸入/輸出裝置)的連接。
[0055]如上文所提及，在一個(gè)方面中，一些實(shí)施例可利用計(jì)算機(jī)系統(tǒng)(例如，計(jì)算機(jī)系統(tǒng)900)以執(zhí)行根據(jù)本發(fā)明的各種實(shí)施例的方法。根據(jù)一組實(shí)施例，響應(yīng)于處理器910執(zhí)行工作存儲(chǔ)器935中所含有的一或多個(gè)指令的一或多個(gè)序列(其可并入于操作系統(tǒng)940及/或其他代碼(例如，應(yīng)用程序945中))，由計(jì)算機(jī)系統(tǒng)900執(zhí)行此類方法的程序中的一些或所有。此類指令可從另一計(jì)算機(jī)可讀媒體(例如存儲(chǔ)裝置925中的一或多者)讀取到工作存儲(chǔ)器935中。僅僅作為實(shí)例，執(zhí)行工作存儲(chǔ)器935中所含有的指令序列可使得處理器910執(zhí)行本文中所描述方法的一或多個(gè)程序。另外或替代地，可經(jīng)由專門的硬件執(zhí)行本文中所描述的方法的部分。
[0056]如本文中所使用，術(shù)語(yǔ)“機(jī)器可讀媒體”和“計(jì)算機(jī)可讀媒體”是指參與提供致使機(jī)器以特定方式操作的數(shù)據(jù)的任何媒體。在使用計(jì)算機(jī)系統(tǒng)900所實(shí)施的實(shí)施例中，各種計(jì)算機(jī)可讀媒體可涉及將指令/代碼提供到處理器910以用于執(zhí)行，及/或可用于存儲(chǔ)及/或載運(yùn)此類指令/代碼。在許多實(shí)施方案中，計(jì)算機(jī)可讀媒體為物體及/或有形存儲(chǔ)媒體。此媒體可呈非易失性媒體或易失性媒體的形式。非易失性媒體包含例如光盤(pán)及/或磁盤(pán)，例如存儲(chǔ)裝置925。易失性媒體包含(但不限于)例如工作存儲(chǔ)器935等動(dòng)態(tài)存儲(chǔ)器。
[0057]常見(jiàn)形式的物理及/或有形計(jì)算機(jī)可讀媒體包含例如軟盤(pán)、柔性磁盤(pán)、硬盤(pán)、磁帶，或任何其它磁性媒體、CD-ROM、任何其它光學(xué)媒體、打孔卡、紙帶、具有孔圖案的任何其它物理媒體、RAM、PR0M、EPR0M、快閃EPR0M、任何其它存儲(chǔ)器芯片或盒帶，或計(jì)算機(jī)可從其讀取指令及/或代碼的任何其它媒體。
[0058]在將一或多個(gè)指令的一或多個(gè)序列載運(yùn)到處理器910以用于執(zhí)行時(shí)可涉及各種形式的計(jì)算機(jī)可讀媒體。僅僅作為實(shí)例，最初可將指令攜載于遠(yuǎn)程計(jì)算機(jī)的磁盤(pán)及/或光學(xué)光盤(pán)上。遠(yuǎn)程計(jì)算機(jī)可將指令載入到其動(dòng)態(tài)存儲(chǔ)器中，并經(jīng)由傳輸媒體將指令作為信號(hào)進(jìn)行發(fā)送以由計(jì)算機(jī)系統(tǒng)900接收及/或執(zhí)行。
[0059]通信子系統(tǒng)930 (及/或其組件)大體上將接收信號(hào)，且總線905可接著將信號(hào)(及/或由信號(hào)所載運(yùn)的數(shù)據(jù)、指令等)載運(yùn)到處理器910從其檢索并執(zhí)行指令的工作存儲(chǔ)器935。由工作存儲(chǔ)器935接收的指令可任選地在由處理器910執(zhí)行之前或之后存儲(chǔ)在非暫時(shí)性存儲(chǔ)裝置925上。
[0060]上文所論述的方法、系統(tǒng)及裝置為實(shí)例。各種組態(tài)可按需要省略、替代或添加各種程序或組件。舉例來(lái)說(shuō)，在替代配置中，所述方法可以不同于所描述的順來(lái)執(zhí)行，及/或可添加、省略及/或組合各種階段。而且，可以各種其它配置組合關(guān)于某些配置所描述的特征?？梢灶愃品绞浇M合組態(tài)的不同方面和元件。而且，技術(shù)發(fā)展，且因此，元件中的許多為實(shí)例且并不限制本發(fā)明或權(quán)利要求的范圍。
[0061]在描述中給出特定細(xì)節(jié)以提供對(duì)實(shí)例組態(tài)(包含實(shí)施方案)的透徹理解。然而，可在并無(wú)這些特定細(xì)節(jié)的情況下實(shí)踐組態(tài)。舉例來(lái)說(shuō)，已在并無(wú)不必要細(xì)節(jié)的情況下展示熟知電路、過(guò)程、算法、結(jié)構(gòu)和技術(shù)以便避免混淆所述配置。這個(gè)描述僅提供實(shí)例組態(tài)，且并不限制權(quán)利要求的范圍、適用性或組態(tài)。實(shí)際上，配置的之前描述將向所屬領(lǐng)域的技術(shù)人員提供用于實(shí)施所描述技術(shù)的致能性描述。在不脫離本發(fā)明的精神或范圍的情況下可對(duì)元件的功能和配置作出各種改變。
[0062]另外，盡管本文中相對(duì)于HMD描述了實(shí)施例，但所屬領(lǐng)域的技術(shù)人員將了解，可利用其它形式的頭戴式顯示器。舉例來(lái)說(shuō)，本文中所描述的實(shí)施例可關(guān)于用戶可佩戴的一或多個(gè)隱形眼鏡來(lái)實(shí)施及/或可實(shí)施于用戶可通過(guò)其感知視野的另一形式的顯示器中。此夕卜，盡管本文中相對(duì)于透視HMD描述了實(shí)施例，但本文所揭示的技術(shù)可擴(kuò)展到其它類型的HMD,其可利用相機(jī)來(lái)俘獲用戶的環(huán)境的圖像，所述圖像接著顯示給用戶。此外，盡管本文中提供的實(shí)例描述為更改視頻的可見(jiàn)度，但實(shí)施例不限于此。本文所述的技術(shù)可類似地應(yīng)用于在HMD的顯示器上展示的任何類型的視覺(jué)元素，例如圖片、方框、窗口、圖標(biāo)、文本、圖形及其類似者。文本信息可例如充當(dāng)用于讀取及/或產(chǎn)生消息(例如短消息服務(wù)(SMS)消息、即時(shí)消息、電子郵件，及其類似者)的消息接發(fā)中心。多格式文本及圖像可包含新聞、社論內(nèi)容、因特網(wǎng)內(nèi)容，及其類似者。圖及數(shù)據(jù)可傳達(dá)關(guān)于股票、股份、體育、科學(xué)數(shù)據(jù)及其類似者的信息。本文所述的實(shí)施例可用以例如響應(yīng)于觸發(fā)事件的檢測(cè)而更改此類消息接發(fā)中心、多格式文本及圖像、圖及數(shù)據(jù)及/或內(nèi)容的可見(jiàn)度。
[0063]而且，可將組態(tài)描述為描繪為流程圖或框圖的過(guò)程。盡管每一流程圖或框圖可將操作描述為順序方法，但許多操作可并行地或同時(shí)執(zhí)行。此外，操作的次序可以重新排列。過(guò)程可具有不包含在圖中的額外步驟。此外，可由硬件、軟件、固件、中間件、微碼、硬件描述語(yǔ)言或其任何組合實(shí)施方法的實(shí)例。當(dāng)以軟件、固件、中間件或微碼實(shí)施時(shí)，用以執(zhí)行必要任務(wù)的程序代碼或代碼段可存儲(chǔ)在例如存儲(chǔ)媒體的非暫時(shí)性計(jì)算機(jī)可讀媒體中。處理器可執(zhí)行所描述任務(wù)。
[0064]如本文所使用，術(shù)語(yǔ)“和”以及“或”可包含多種含義，這些含義還預(yù)期至少部分取決于使用此些術(shù)語(yǔ)的上下文。通常，“或”如果用于聯(lián)合一個(gè)列表(例如A、B或C)，則既定意味著A、B和C，此處是在包含性意義上使用，以及A、B或C，此處是在排他性意義上使用。另外，如本文所使用的術(shù)語(yǔ)“一或多個(gè)”可用于以單數(shù)形式描述任何特征、結(jié)構(gòu)或特性，或可用于描述特征、結(jié)構(gòu)或特性的某種組合。然而，應(yīng)注意，這只是說(shuō)明性實(shí)例，并且所主張的主題不限于這個(gè)實(shí)例。此外，如果術(shù)語(yǔ)“中的至少一者”用以聯(lián)合一列表(例如A、B或C)，那么可將其解釋為意味著A、B及/或C中的任何組合，例如A、AB、AA、AAB、AABBCCC等。
[0065]已描述若干實(shí)例配置，可在不脫離本發(fā)明的精神的情況下使用各種修改、替代構(gòu)造及等效物。舉例來(lái)說(shuō)，以上元件可為較大系統(tǒng)的組件，其中其它規(guī)則可優(yōu)先于本發(fā)明的應(yīng)用或以其它方式修改本發(fā)明的應(yīng)用。而且，可在考慮以上元件之前、期間或之后進(jìn)行數(shù)個(gè)步驟。因此，以上描述并不約束本發(fā)明的范圍。
【權(quán)利要求】
1.一種提供用于頭戴式顯示器的反應(yīng)性視頻回放接口的方法，所述方法包括: 致使所述頭戴式顯示器的顯示器展示包含視頻的至少一個(gè)視覺(jué)元素，其中當(dāng)不顯示內(nèi)容時(shí)，所述顯示器從所述頭戴式顯示器的用戶觀看至少是半透明的； 使用來(lái)自一或多個(gè)傳感器的第一組傳感器數(shù)據(jù)檢測(cè)觸發(fā)事件；以及 基于所述觸發(fā)事件在繼續(xù)展示所述視頻的同時(shí)改變所述視頻的可見(jiàn)度。
2.根據(jù)權(quán)利要求1所述的方法，其進(jìn)一步包括基于第二組傳感器數(shù)據(jù)確定所述用戶的上下文，其中改變所述視頻的所述可見(jiàn)度進(jìn)一步基于所述所確定的上下文。
3.根據(jù)權(quán)利要求1所述的方法，其中所述觸發(fā)事件包括以下各者中的至少一者: 所述用戶的特定移動(dòng)， 所述用戶從一個(gè)移動(dòng)狀態(tài)到另一移動(dòng)狀態(tài)的轉(zhuǎn)變， 對(duì)象到所述用戶的接近度， 所述用戶到特定人員的接近度， 所述用戶進(jìn)入車輛中， 所述用戶從車輛退出， 事件模式， 響亮的噪聲，或 所述用戶到達(dá)特定位置。
4.根據(jù)權(quán)利要求3所述的方法，其中所述用戶的所述特定移動(dòng)包括以下各者中的至少一者: 步行、跑動(dòng)，或躺下， 所述用戶的頭部的轉(zhuǎn)動(dòng)， 所述用戶站起， 所述用戶坐下，或 所述用戶跌倒。
5.根據(jù)權(quán)利要求1所述的方法，其中所述一或多個(gè)傳感器包括以下各者中的至少一者: 運(yùn)動(dòng)傳感器， 慣性傳感器， 光傳感器， 麥克風(fēng)，或 天線。
6.根據(jù)權(quán)利要求5所述的方法，其中所述一或多個(gè)傳感器附接到所述頭戴式顯示器。
7.根據(jù)權(quán)利要求1所述的方法，其中改變所述視頻的所述可見(jiàn)度包含增大所述視頻的透明度。
8.根據(jù)權(quán)利要求1所述的方法，其中改變所述視頻的所述可見(jiàn)度包含減小所述視頻的大小。
9.根據(jù)權(quán)利要求1所述的方法，其進(jìn)一步包含基于所述觸發(fā)事件顯示至少一個(gè)新視覺(jué)元素。
10.根據(jù)權(quán)利要求1所述的方法，其進(jìn)一步包含暫停所述視頻的回放。
11.根據(jù)權(quán)利要求1所述的方法，其中: 檢測(cè)所述觸發(fā)事件包括檢測(cè)移動(dòng)；且 改變所述視頻的所述可見(jiàn)度包含與所述所檢測(cè)到的移動(dòng)的速度或量中的任一者或兩者成比例地改變所述視頻的所述可見(jiàn)度。
12.根據(jù)權(quán)利要求1所述的方法，其進(jìn)一步包含: 致使所述頭戴式顯示器回放與所述視頻有關(guān)的音頻；以及 基于所述觸發(fā)事件減小所述音頻的音量。
13.一種頭戴式顯示系統(tǒng),其包括: 用于將一或多個(gè)視覺(jué)元素顯示給用戶以使得所述用戶能夠至少選擇性地觀看所述用戶的周圍環(huán)境的顯示裝置； 經(jīng)配置以搜集傳感器數(shù)據(jù)的感測(cè)裝置； 用于致使所述顯示裝置展示包含視頻的視覺(jué)元素的裝置； 用于使用來(lái)自所述感測(cè)裝置的一組傳感器數(shù)據(jù)檢測(cè)觸發(fā)事件的裝置；以及用于基于所述觸發(fā)事件在繼續(xù)展示所述視頻的同時(shí)改變由所述顯示裝置展示的所述視頻的可見(jiàn)度的裝置。
14.根據(jù)權(quán)利要求13所述的頭戴式顯示系統(tǒng)，其進(jìn)一步包括 用于基于第二組傳感器數(shù)據(jù)確定所述用戶的上下文的裝置； 其中所述視頻的所述可見(jiàn)度改變是基于所述所確定的上下文。
15.根據(jù)權(quán)利要求13所述的頭戴式顯示系統(tǒng)，其中所述用于檢測(cè)所述觸發(fā)事件的裝置包括用于確定事件的裝置，所述事件包括以下各者中的至少一者: 所述用戶的特定移動(dòng)， 所述用戶從一個(gè)移動(dòng)狀態(tài)到另一移動(dòng)狀態(tài)的轉(zhuǎn)變， 對(duì)象到所述用戶的接近度， 所述用戶到特定人員的接近度， 所述用戶進(jìn)入車輛中， 所述用戶從車輛退出， 事件模式， 響亮的噪聲，或 所述用戶到達(dá)特定位置。
16.根據(jù)權(quán)利要求15所述的頭戴式顯示系統(tǒng)，其中所述用于確定的裝置包括用于通過(guò)確定事件而確定特定移動(dòng)的裝置，所述事件包括以下各者中的至少一者: 步行、跑動(dòng)，或躺下， 所述用戶的頭部的轉(zhuǎn)動(dòng)， 所述用戶站起， 所述用戶坐下，或 所述用戶跌倒。
17.根據(jù)權(quán)利要求13所述的頭戴式顯示系統(tǒng)，其中所述感測(cè)裝置包括以下各者中的至少一者: 運(yùn)動(dòng)傳感器， 慣性傳感器， 光傳感器， 麥克風(fēng)，或 天線。
18.根據(jù)權(quán)利要求13所述的頭戴式顯示系統(tǒng)，其中所述用于改變的裝置包括用于通過(guò)增大所述視頻的透明度而改變所述視頻的所述可見(jiàn)度的裝置。
19.根據(jù)權(quán)利要求13所述的頭戴式顯示系統(tǒng)，其中所述用于改變的裝置包括用于通過(guò)減小所述視頻的大小而改變所述視頻的所述可見(jiàn)度的裝置。
20.根據(jù)權(quán)利要求13所述的頭戴式顯示系統(tǒng)，其進(jìn)一步包括用于致使所述顯示裝置基于所述觸發(fā)事件顯示至少一個(gè)新視覺(jué)元素的裝置。
21.根據(jù)權(quán)利要求13所述的頭戴式顯示系統(tǒng)，其進(jìn)一步包括用于暫停所述視頻的回放的裝置。
22.根據(jù)權(quán)利要求13所述的頭戴式顯示系統(tǒng)，其進(jìn)一步包括: 用于檢測(cè)包括所述觸發(fā)事件的移動(dòng)的裝置；以及 用于與所述所檢測(cè)到的移動(dòng)的速度或量中的任一者或兩者成比例地改變所述視頻的所述可見(jiàn)度的裝置。
23.根據(jù)權(quán)利要求13所述的頭戴式顯示系統(tǒng)，其進(jìn)一步包含: 經(jīng)配置以回放與所述視頻有關(guān)的音頻的音頻裝置； 其中用于改變的裝置基于所述觸發(fā)事件減小所述音頻的音量。
24.一種頭戴式顯示裝置，其包括: 主體，其經(jīng)配置以佩戴在用戶的頭部上； 顯示器，其與所述主體耦合且經(jīng)配置以允許所述用戶觀看: 所述用戶的周圍環(huán)境，及 由所述顯示器展示的視覺(jué)元素； 至少一個(gè)傳感器，其經(jīng)配置以提供傳感器數(shù)據(jù)；以及 處理單元，其以通信方式耦合到所述顯示器及所述至少一個(gè)傳感器且經(jīng)配置以: 致使所述顯示器展示所述視覺(jué)元素，所述視覺(jué)元素包含視頻； 使用來(lái)自所述一或多個(gè)傳感器的第一組傳感器數(shù)據(jù)檢測(cè)觸發(fā)事件；以及致使所述顯示器基于所述觸發(fā)事件在繼續(xù)展示所述視頻的同時(shí)改變由所述顯示器展示的所述視頻的可見(jiàn)度。
25.根據(jù)權(quán)利要求24所述的頭戴式顯示裝置，其中所述處理單元進(jìn)一步經(jīng)配置以進(jìn)行以下操作: 基于第二組傳感器數(shù)據(jù)確定所述用戶的上下文；以及 致使所述顯示器進(jìn)一步基于所述所確定的上下文改變所述視頻的所述可見(jiàn)度。
26.根據(jù)權(quán)利要求24所述的頭戴式顯示裝置，其中所述處理單元進(jìn)一步經(jīng)配置以通過(guò)確定事件而確定所述觸發(fā)事件，所述事件包括以下各者中的至少一者: 所述用戶的特定移動(dòng)， 所述用戶從一個(gè)移動(dòng)狀態(tài)到另一移動(dòng)狀態(tài)的轉(zhuǎn)變， 對(duì)象到所述用戶的接近度， 所述用戶到特定人員的接近度， 所述用戶進(jìn)入車輛中， 所述用戶從車輛退出， 事件模式， 響亮的噪聲，或 所述用戶到達(dá)某一位置。
27.根據(jù)權(quán)利要求26所述的頭戴式顯示裝置，其中所述處理單元進(jìn)一步經(jīng)配置以通過(guò)確定事件而確定所述特定移動(dòng)，所述事件包括以下各者中的至少一者: 步行、跑動(dòng)，或躺下， 所述用戶的頭部的轉(zhuǎn)動(dòng)， 所述用戶站起， 所述用戶坐下，或 所述用戶跌倒。
28.根據(jù)權(quán)利要求24所述的頭戴式顯示裝置，其中所述至少一個(gè)傳感器包括以下各者中的至少一者: 運(yùn)動(dòng)傳感器， 慣性傳感器， 光傳感器， 麥克風(fēng)，或 天線。
29.根據(jù)權(quán)利要求24所述的頭戴式顯示裝置，其中所述處理單元經(jīng)配置以致使所述顯示器通過(guò)增大所述視頻的透明度而改變所述視頻的所述可見(jiàn)度。
30.根據(jù)權(quán)利要求24所述的頭戴式顯示裝置，其中所述處理單元經(jīng)配置以致使所述顯示器通過(guò)減小所述視頻的大小而改變所述視頻的所述可見(jiàn)度。
31.根據(jù)權(quán)利要求24所述的頭戴式顯示裝置，其中所述處理單元進(jìn)一步經(jīng)配置以致使所述顯示器基于所述觸發(fā)事件展示至少一個(gè)新視覺(jué)元素。
32.根據(jù)權(quán)利要求24所述的頭戴式顯示裝置，其中所述處理單元進(jìn)一步經(jīng)配置以暫停所述視頻的回放。
33.根據(jù)權(quán)利要求24所述的頭戴式顯示裝置，其中所述處理單元進(jìn)一步經(jīng)配置以進(jìn)行以下操作: 通過(guò)檢測(cè)移動(dòng)而檢測(cè)所述觸發(fā)事件；以及 與所述所檢測(cè)到的移動(dòng)的速度或量中的任一者或兩者成比例地改變所述視頻的所述可見(jiàn)度。
34.根據(jù)權(quán)利要求24所述的頭戴式顯示裝置，其中所述處理單元進(jìn)一步經(jīng)配置以進(jìn)行以下操作: 致使與所述視頻有關(guān)的音頻被回放；以及 基于所述觸發(fā)事件減小所述音頻的音量。
35.一種具有嵌入其上的指令的非暫時(shí)性計(jì)算機(jī)可讀媒體，所述指令用于提供用于頭戴式顯示器的反應(yīng)性視頻回放介面，所述指令包含用于進(jìn)行以下操作的計(jì)算機(jī)可執(zhí)行代碼: 致使所述頭戴式顯示器的顯示器展示包含視頻的至少一個(gè)視覺(jué)元素，其中當(dāng)不顯示內(nèi)容時(shí)，所述顯示器從所述頭戴式顯示器的用戶觀看至少是半透明的； 使用來(lái)自一或多個(gè)傳感器的第一組傳感器數(shù)據(jù)檢測(cè)觸發(fā)事件；以及 基于所述觸發(fā)事件在繼續(xù)展示所述視頻的同時(shí)改變所述視頻的可見(jiàn)度。
【文檔編號(hào)】G02B27/01GK104380237SQ201380031960
【公開(kāi)日】2015年2月25日 申請(qǐng)日期:2013年5月22日 優(yōu)先權(quán)日:2012年6月19日
【發(fā)明者】詹姆斯·約瑟夫·馬爾霍蘭, 朱利亞諾·馬喬奇 申請(qǐng)人:高通股份有限公司