專(zhuān)利名稱(chēng)：信息處理裝置、報(bào)警方法和程序的制作方法
技術(shù)領(lǐng)域：
本公開(kāi)涉及信息處理裝置、報(bào)警方法和程序。
背景技術(shù)：
已提出了針對(duì)增強(qiáng)現(xiàn)實(shí)(AR)的各種應(yīng)用，它們將額外的信息添加或疊加到真實(shí)世界或真實(shí)世界圖像上以呈現(xiàn)給用戶。例如，在下面的非專(zhuān)利文獻(xiàn)I中描述的應(yīng)用中，與地圖上的任意位置相關(guān)聯(lián)的虛擬標(biāo)簽預(yù)先登記到系統(tǒng)中。然后，在由用戶攜帶的終端所捕捉的圖像中，與出現(xiàn)在圖像中的位置相關(guān)聯(lián)的標(biāo)簽被顯示為疊加到該位置上。引用文獻(xiàn)列表非專(zhuān)利文獻(xiàn)“Sekai Camera Support Center”，< 在線 >,〈于 2010 年 12 月 22 日檢索 >，互聯(lián)網(wǎng)〈URL http://support, sekaicamera. com/en>

發(fā)明內(nèi)容
在增強(qiáng)現(xiàn)實(shí)應(yīng)用正在被提供的時(shí)間期間，用戶的注意力很可能被吸引到應(yīng)用屏幕。增強(qiáng)現(xiàn)實(shí)應(yīng)用的屏幕給予用戶觀看真實(shí)世界的感覺(jué)，這不同于其他類(lèi)型應(yīng)用的屏幕。這種感覺(jué)可能具有某些后果并且甚至可能是危險(xiǎn)的。具體地，在現(xiàn)實(shí)中，移動(dòng)終端的屏幕或者頭戴式顯示器的屏幕的視角比人類(lèi)視覺(jué)的視角狹窄。此外，存在如下可能性針對(duì)用戶的觀看而言，存在于真實(shí)世界中的真實(shí)物體可能被增強(qiáng)現(xiàn)實(shí)應(yīng)用的額外信息所隱藏。這可能增加如下風(fēng)險(xiǎn)在增強(qiáng)現(xiàn)實(shí)應(yīng)用正在被提供的時(shí)間期間，用戶未能注意到(或遲于注意到)存在于真實(shí)世界中的危險(xiǎn)。考慮到前述狀況，希望提供一種信息處理裝置、報(bào)警方法和程序，其在增強(qiáng)現(xiàn)實(shí)應(yīng)用正在被提供的時(shí)間期間減少了用戶在真實(shí)世界中面臨的危險(xiǎn)的風(fēng)險(xiǎn)。在一個(gè)示例性實(shí)施例中，本公開(kāi)涉及的是提供一種包括存儲(chǔ)指令的存儲(chǔ)器的設(shè)備。該設(shè)備包括控制單元，該控制單元用于執(zhí)行指令以發(fā)送信號(hào)，以針對(duì)用戶顯示疊加到真實(shí)空間表示上的第一虛擬圖像。該控制單元進(jìn)一步執(zhí)行指令以發(fā)送信號(hào)，以識(shí)別用戶所關(guān)心的潛在源，所關(guān)心的潛在源位于真實(shí)空間表示中的用戶關(guān)注區(qū)域外部。該控制單元進(jìn)一步執(zhí)行指令以發(fā)送信號(hào)，以向用戶通知所關(guān)心的潛在源。在另一示例性實(shí)施例中，本公開(kāi)涉及一種包括針對(duì)用戶顯示疊加到真實(shí)空間表示上的虛擬圖像的方法。該方法進(jìn)一步包括識(shí)別用戶所關(guān)心的潛在源，所關(guān)心的潛在源位于真實(shí)空間表示中的用戶關(guān)注區(qū)域外部。該方法進(jìn)一步包括向用戶通知所關(guān)心的潛在源。在另一示例性實(shí)施例中，本公開(kāi)涉及一種存儲(chǔ)指令的有形地實(shí)施的非暫態(tài)的計(jì)算機(jī)可讀介質(zhì)，這些指令在由處理器執(zhí)行時(shí)，執(zhí)行包括針對(duì)用戶顯示疊加到真實(shí)空間表示上的虛擬圖像的方法。該方法進(jìn)一步包括識(shí)別用戶所關(guān)心的潛在源，所關(guān)心的潛在源位于真實(shí)空間表示中的用戶關(guān)注區(qū)域外部。該方法進(jìn)一步包括向用戶通知所關(guān)心的潛在源。根據(jù)本公開(kāi)實(shí)施例的信息處理裝置、報(bào)警方法和程序可以在增強(qiáng)現(xiàn)實(shí)應(yīng)用正在被提供的同時(shí)減少用戶忽視所關(guān)心的潛在源的風(fēng)險(xiǎn)，所關(guān)心的潛在源諸如例如用戶在真實(shí)世界中面臨的危險(xiǎn)。


圖I是示出其中可以使用增強(qiáng)現(xiàn)實(shí)應(yīng)用的情形的示例的視圖；圖2是示出根據(jù)實(shí)施例的信息處理裝置的配置示例的框圖；圖3是示出根據(jù)實(shí)施例的信息處理裝置的控制單元所實(shí)施的功能配置的示例的框圖； 圖4是用來(lái)描述根據(jù)實(shí)施例的信息處理裝置中的成像裝置和測(cè)距傳感器的布局的第一說(shuō)明圖；圖5是用來(lái)描述根據(jù)實(shí)施例的信息處理裝置中的成像裝置和測(cè)距傳感器的布局的第二說(shuō)明圖；圖6是用來(lái)描述根據(jù)實(shí)施例的可用于識(shí)別危險(xiǎn)的參數(shù)的示例的視圖；圖7是用來(lái)描述根據(jù)實(shí)施例的可以識(shí)別的危險(xiǎn)的類(lèi)型的視圖；圖8是示出根據(jù)實(shí)施例的傳送關(guān)于危險(xiǎn)的信息的裝置的第一示例的視圖；圖9是示出根據(jù)實(shí)施例的傳送關(guān)于危險(xiǎn)的信息的裝置的第二示例的視圖；圖10是示出根據(jù)實(shí)施例的傳送關(guān)于危險(xiǎn)的信息的裝置的第三示例的視圖；圖11是示出根據(jù)實(shí)施例的通過(guò)報(bào)警單元進(jìn)行的報(bào)警的第一示例的視圖；圖12是示出根據(jù)實(shí)施例的通過(guò)報(bào)警單元進(jìn)行的報(bào)警的第二示例的視圖；圖13是示出根據(jù)實(shí)施例的通過(guò)報(bào)警單元進(jìn)行的報(bào)警的第三示例的視圖；圖14是示出根據(jù)實(shí)施例的通過(guò)報(bào)警單元進(jìn)行的報(bào)警的第四示例的視圖；圖15是示出第一場(chǎng)景中的危險(xiǎn)報(bào)警處理的流程的示例的流程圖；圖16是示出第二場(chǎng)景中的危險(xiǎn)報(bào)警處理的流程的示例的流程圖；圖17是示出第三場(chǎng)景中的危險(xiǎn)報(bào)警處理的流程的示例的流程圖；圖18是示出第四場(chǎng)景中的危險(xiǎn)報(bào)警處理的流程的示例的流程圖；圖19是示出第五場(chǎng)景中的危險(xiǎn)報(bào)警處理的流程的示例的流程圖；以及圖20是圖2的控制單元的一個(gè)實(shí)施形式的框圖。
具體實(shí)施例方式在下文中，將參照附圖來(lái)詳細(xì)地描述本公開(kāi)的優(yōu)選實(shí)施例。在此，具有基本上相同的功能和結(jié)構(gòu)的結(jié)構(gòu)性元件用相同的附圖標(biāo)記指示，并且可能省略對(duì)這些結(jié)構(gòu)性元件的重復(fù)說(shuō)明。此外，將按以下順序來(lái)提供“對(duì)實(shí)施例的描述”I.根據(jù)實(shí)施例的信息處理裝置的概述2.根據(jù)實(shí)施例的信息處理裝置的配置示例
3.根據(jù)示例性實(shí)施例的處理的流程4.總結(jié)I.根據(jù)實(shí)施例的信息處理裝置的概述圖I是示出其中可以使用增強(qiáng)現(xiàn)實(shí)(AR)應(yīng)用的情形的示例的視圖。參照?qǐng)D1，在真實(shí)空間I中，用戶Ua走在人行道上，并且在用戶Ua的前面存在障礙物10和樓梯12。此夕卜，用戶Ua具有信息處理裝置100。信息處理裝置100是能夠提供AR應(yīng)用的裝置。信息處理裝置100可以是例如，智能電話、個(gè)人計(jì)算機(jī)(PC)、游戲終端、便攜式音樂(lè)播放器等或其他適當(dāng)?shù)难b置。在AR應(yīng)用通過(guò)信息處理裝置100被提供給用戶Ua的時(shí)間期間，用戶Ua的注意力可能被吸引到信息處理裝置100的屏幕。信息處理裝置100的屏幕可以示出真實(shí)世界的表示。然而，由于屏幕的視角可能比用戶Ua的視角狹窄，并且額外的應(yīng)用進(jìn)一步顯示在屏幕上，因此風(fēng)險(xiǎn)增加了 在AR應(yīng)用正在被提供的時(shí)間期間，用戶Ua未能注意到(或遲于注意到)存在于真實(shí)空間I中的所關(guān)心的物體或其他潛在源。例如，用戶可能錯(cuò)過(guò)該用 戶可能對(duì)其有興趣的餐館或商店。其他所關(guān)心的潛在源可以包括公用設(shè)施(例如升降梯、公用電話、公共信息亭等)、所關(guān)心的地方(例如醫(yī)院、汽車(chē)修理廠、博物館、電影院、公園、熟人的家、學(xué)校、圖書(shū)館等)或者事件(例如表演或展覽)。用戶所關(guān)心的潛在源的一個(gè)示例性類(lèi)別包括可能對(duì)用戶呈現(xiàn)某種水平的物理危險(xiǎn)的各種物體或地方。后者的示例將在此用于說(shuō)明本發(fā)明的各方面。然而，將理解的是，本發(fā)明不限于用在向用戶展示物理危險(xiǎn)的用戶關(guān)心的潛在源方面，而是事實(shí)上可以用在用戶關(guān)心的任何適當(dāng)?shù)臐撛谠?例如消遣的、實(shí)用的或者其他的)方面。作為物理危險(xiǎn)源的示例，用戶Ua可能在障礙物10上絆倒。還存在用戶Ua可能撞到樓梯12的可能性。此外，存在用戶Ua可能走下人行道并進(jìn)入車(chē)道或其他危險(xiǎn)區(qū)域的可能性。除了圖I所示的示例之外，多種危險(xiǎn)存在于真實(shí)世界中。根據(jù)本公開(kāi)實(shí)施例的信息處理裝置100通過(guò)以下描述的方案向用戶警告存在這樣的危險(xiǎn)。2.根據(jù)實(shí)施例的信息處理裝置的配置示例根據(jù)本公開(kāi)的一個(gè)實(shí)施例，提供了一種設(shè)備，包括存儲(chǔ)器，其存儲(chǔ)指令；以及控制單元，其執(zhí)行指令以發(fā)送信號(hào)，以針對(duì)用戶顯示疊加到真實(shí)空間表示上的第一虛擬圖像；發(fā)送信號(hào)，以識(shí)別用戶所關(guān)心的潛在源，所關(guān)心的潛在源位于真實(shí)空間表示中的用戶關(guān)注區(qū)域外部；以及發(fā)送信號(hào)，以向用戶通知所關(guān)心的潛在源。2-1.硬件配置圖2是示出圖I所示的信息處理裝置100的配置示例的框圖。參照?qǐng)D2，信息處理裝置100包括成像單元102、傳感器單元104、定位單元106、通信單元108、存儲(chǔ)單元110、輸入單元112、顯示單元114、語(yǔ)音輸出單元116、振動(dòng)單元118、總線119和控制單元120。成像單元成像單元102可以包括具有諸如電荷耦合器件(CXD)或互補(bǔ)金屬氧化物半導(dǎo)體(CMOS)的圖像拾取裝置的相機(jī)模塊。成像單元102可以對(duì)真實(shí)空間I進(jìn)行成像并且由此生成一個(gè)或多個(gè)輸入圖像。由成像單元102生成的輸入圖像可以用于提供AR應(yīng)用，并且進(jìn)一步用于估計(jì)用戶位置并且估計(jì)出現(xiàn)在輸入圖像中的真實(shí)物體的位置。成像單元102可以與信息處理裝置100分離地配置，并且在提供AR應(yīng)用時(shí)連接到信息處理裝置100。傳感器單元
傳感器單元104可以包括支持信息處理裝置100進(jìn)行的對(duì)危險(xiǎn)的識(shí)別的一個(gè)或多個(gè)傳感器。例如，傳感器單元104可以包括陀螺儀傳感器、加速度傳感器和地磁傳感器中的至少一個(gè)，并且測(cè)量信息處理裝置100的傾角、3軸加速度或方向。信息處理裝置100的傾角、3軸加速度或方向可用于估計(jì)信息處理裝置100的姿態(tài)。此外，傳感器單元104可以包括激光或紅外測(cè)距傳感器，其測(cè)量真實(shí)空間中的真實(shí)物體和用戶之間的距離。測(cè)距傳感器可以有能力沿著與成像單元102的取向(光軸)不同的方向測(cè)量距離(參見(jiàn)圖4)。這可以允許信息處理裝置100識(shí)別存在于相對(duì)信息處理裝置100的視角偏離的位置處的障礙(例如障礙物10)(參見(jiàn)圖5)。基于測(cè)距傳感器測(cè)量的距離和信息處理裝置100的姿態(tài)，還可以估計(jì)信息處理裝置100和障礙的相對(duì)位置。注意，可以面對(duì)任何方向安裝測(cè)距傳感器，不一定如圖5所示那樣面朝下。定位單元 定位單元106可以包括測(cè)量信息處理裝置100的位置的模塊。例如，定位單元106可以是全球定位系統(tǒng)(GPS)模塊，其接收GPS信號(hào)并測(cè)量信息處理裝置100的緯度、經(jīng)度和海拔?？商孢x地，定位單元106可以是諸如PlaceEngine (注冊(cè)商標(biāo))的定位模塊，其基于從無(wú)線接入點(diǎn)接收的無(wú)線電信號(hào)的強(qiáng)度來(lái)測(cè)量信息處理裝置100的位置。通信單元通信單元108可以包括由信息處理裝置100用來(lái)與別的裝置通信的通信接口。例如，通信單元108可以從外部裝置接收關(guān)于危險(xiǎn)的信息。此外，通信單元108可以將關(guān)于危險(xiǎn)的信息傳送到具有與信息處理裝置100相似或不同的危險(xiǎn)報(bào)警功能的裝置。存儲(chǔ)單元通過(guò)使用有形地實(shí)施的非暫態(tài)的、計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，諸如半導(dǎo)體存儲(chǔ)器、硬盤(pán)、⑶-ROM等，存儲(chǔ)單元110可以存儲(chǔ)用于由信息處理裝置100處理的程序和數(shù)據(jù)。例如，存儲(chǔ)單元110可以存儲(chǔ)由成像單元102生成的輸入圖像、從傳感器單元104輸出的傳感器數(shù)據(jù)、由定位單元106測(cè)量的位置數(shù)據(jù)以及由通信單元108接收的外部信息。此外，存儲(chǔ)單元110可以存儲(chǔ)稍后描述的用于圖像識(shí)別處理的特征數(shù)據(jù)。存儲(chǔ)單元110中存儲(chǔ)的特征數(shù)據(jù)是表示真實(shí)空間中的一個(gè)或多個(gè)真實(shí)物體的外觀特征的數(shù)據(jù)。輸入單元輸入單元112可以由信息處理裝置100的用戶用來(lái)操作信息處理裝置100或者將信息輸入到信息處理裝置100。輸入單元112可以包括例如鍵盤(pán)、按鈕、開(kāi)關(guān)和觸摸面板等。輸入單元112可以包括手勢(shì)識(shí)別模塊，其識(shí)別出現(xiàn)在輸入圖像中的用戶的手勢(shì)。顯示單元顯示單元114可以包括具有屏幕的顯示模塊，該屏幕顯示由AR應(yīng)用生成并且疊加到真實(shí)空間上的虛擬對(duì)象。在顯示單元114的屏幕上，還可以顯示用于警告用戶存在危險(xiǎn)的物體。顯示單元114的屏幕可以是透明類(lèi)型的或非透明類(lèi)型的。此外，顯示單元114可以與信息處理裝置100分離地配置，和/或在提供AR應(yīng)用時(shí)連接到信息處理裝置100。語(yǔ)音輸出單元語(yǔ)音輸出單元116可以典型地是向用戶輸出聲音或語(yǔ)音的揚(yáng)聲器。語(yǔ)音輸出單元116可用于通過(guò)用戶的聽(tīng)覺(jué)來(lái)警告用戶存在危險(xiǎn)。振動(dòng)單元
振動(dòng)單元118可以是諸如電驅(qū)動(dòng)的偏心馬達(dá)的振動(dòng)器。振動(dòng)單元118可用于通過(guò)用戶的觸覺(jué)警告用戶存在危險(xiǎn)?？偩€總線119可以彼此連接成像單元102、傳感器單元104、定位單元106、通信單元108、存儲(chǔ)單元110、輸入單元112、顯示單元114、語(yǔ)音輸出單元116、振動(dòng)單元118和控制單元 120?？刂茊卧刂茊卧?20可以包括諸如中央處理單元(CPU)或數(shù)字信號(hào)處理器(DSP)的處理器121、存儲(chǔ)器122和計(jì)算機(jī)可讀介質(zhì)123。圖20中示出了一個(gè)這樣的示例性控制單元120。控制單元120可以執(zhí)行形成存儲(chǔ)單元110中存儲(chǔ)的程序的指令，以例如使下面描述的信息處理裝置100的各種功能工作。 2-2.功能配置圖3是示出可以由圖2所示的信息處理裝置100的控制單元120實(shí)施的功能配置的示例的框圖。參照?qǐng)D3，控制單元120可以包括應(yīng)用單元130、圖像識(shí)別單元140、估計(jì)單元150、地圖存儲(chǔ)單元152、信息獲取單元160、危險(xiǎn)識(shí)別單元170、報(bào)警單元180和設(shè)定單元190。應(yīng)用單元應(yīng)用單元130可以向用戶提供顯示疊加到真實(shí)空間上的虛擬對(duì)象的AR應(yīng)用。由應(yīng)用單元130提供的AR應(yīng)用可以是具有任何目的的應(yīng)用，諸如例如導(dǎo)航、工作支持、信息服務(wù)或游戲。應(yīng)用單元130可以與出現(xiàn)在輸入圖像中的真實(shí)物體相關(guān)聯(lián)地創(chuàng)建將要呈現(xiàn)給用戶的虛擬對(duì)象。然后,應(yīng)用單元130將顯示創(chuàng)建的虛擬對(duì)象的圖像輸出到顯示單元114?；谳斎雸D像的圖像識(shí)別的結(jié)果，應(yīng)用單元130可以確定虛擬對(duì)象的顯示位置。圖像識(shí)別單元圖像識(shí)別單元140可以執(zhí)行由成像單元102成像的輸入圖像的圖像識(shí)別處理。例如，圖像識(shí)別單元140可以針對(duì)存儲(chǔ)在存儲(chǔ)單元110中的特征數(shù)據(jù)對(duì)從輸入圖像中提取的特征數(shù)據(jù)進(jìn)行檢查，并且由此識(shí)別出現(xiàn)在輸入圖像中的真實(shí)空間中的真實(shí)物體或區(qū)域° 例如使用 David G. Lowe 在 “Distinctive Image Features from Scale-InvariantKeypoints，，(the International Journal of Computer Vision, 2004)中描述的尺度不變特征變換(SIFT)方法，可以完成圖像識(shí)別單元140對(duì)特征數(shù)據(jù)所進(jìn)行的檢查。此夕卜，例如使用 Mustafa Oezuysal 等人在 “Fast Keypoint Recognition using RandomFerns，，(IEEE Transactions on Pattern Analysis and Machine Intelligence,Vol. 32,Nr. 3, pp. 448-461, March 2010)中描述的Random Ferns方法,可以完成圖像識(shí)別單兀140對(duì)特征數(shù)據(jù)所進(jìn)行的檢查。此外，圖像識(shí)別單元140可以識(shí)別在真實(shí)空間中的真實(shí)物體或區(qū)域中的外觀中顯露的標(biāo)記(自然的或人工的標(biāo)記)。圖像識(shí)別單元140可以向估計(jì)單元150輸出將識(shí)別的真實(shí)物體或區(qū)域識(shí)別為圖像識(shí)別的結(jié)果的信息(例如輸入圖像中的標(biāo)識(shí)符和位置或范圍)。估計(jì)單元基于圖像識(shí)別單元140進(jìn)行的圖像識(shí)別的結(jié)果，估計(jì)單元150可以估計(jì)存在于真實(shí)空間中的每個(gè)真實(shí)物體的位置以及每個(gè)真實(shí)物體和成像單元102之間的距離。例如，通過(guò)比較每個(gè)真實(shí)物體(或標(biāo)記)的實(shí)際尺寸和輸入圖像中的尺寸，估計(jì)單元150估計(jì)每個(gè)真實(shí)物體和成像單元102之間的距離。然后，根據(jù)估計(jì)的距離以及成像單元102的位置和姿態(tài)(信息處理裝置100的位置和姿態(tài))，估計(jì)單元150可以估計(jì)每個(gè)真實(shí)物體相對(duì)于信息處理裝置100的相對(duì)位置。此外，根據(jù)SLAM技術(shù)的原理，估計(jì)單元150可以動(dòng)態(tài)地估計(jì)真實(shí)空間中的每個(gè)真實(shí)物體和信息處理裝置100之間的相對(duì)位置。AndrewJ.Davison 在“Real-Time Simultaneous Localization and Mapping with a SingleCamera，，(Proceedings of the 9th IEEE International Conference on Computer VisionVolume 2,2003, pp. 1403-1410)中詳細(xì)地描述了 SLAM技術(shù)的原理?？梢约僭O(shè)真實(shí)空間中的真實(shí)物體和信息處理裝置100之間的距離對(duì)應(yīng)于真實(shí)空間中的真實(shí)物體和危險(xiǎn)識(shí)別中的用戶之間的距離。注意，估計(jì)單元150可以從成像單元102獲取諸如變焦比之類(lèi)的相機(jī)參數(shù)，并且根據(jù)獲取的相機(jī)參數(shù)來(lái)校正每個(gè)真實(shí)物體的位置和與每個(gè)真實(shí)物體的距離的估計(jì)結(jié)果。地圖存儲(chǔ)單元 通過(guò)使用諸如半導(dǎo)體存儲(chǔ)器或硬盤(pán)的存儲(chǔ)介質(zhì)，地圖存儲(chǔ)單元152可以存儲(chǔ)由估計(jì)單元150估計(jì)的每個(gè)真實(shí)物體的位置。即使在真實(shí)物體或區(qū)域隨著信息處理裝置100移動(dòng)而從輸入圖像中消失之后，信息處理裝置100仍可以由此識(shí)別圖像識(shí)別單元140識(shí)別過(guò)一次的真實(shí)物體或區(qū)域。信息獲取單元信息獲取單元160可以獲取將要由危險(xiǎn)識(shí)別單元170用來(lái)識(shí)別危險(xiǎn)的關(guān)于危險(xiǎn)的信息。關(guān)于危險(xiǎn)的信息可以預(yù)先存儲(chǔ)在存儲(chǔ)單元110中，或者可以通過(guò)通信單元108從外部裝置動(dòng)態(tài)地獲取。例如，信息獲取單元160可以獲取危險(xiǎn)區(qū)域信息，該危險(xiǎn)區(qū)域信息定義了真實(shí)空間中具有比較低的安全水平的危險(xiǎn)區(qū)域。危險(xiǎn)區(qū)域可以是例如樓梯、升降梯、車(chē)道、交叉路口、月臺(tái)、建筑工地等。危險(xiǎn)區(qū)域信息可以包括指示每個(gè)危險(xiǎn)區(qū)域的標(biāo)識(shí)符的坐標(biāo)數(shù)據(jù)和每個(gè)危險(xiǎn)區(qū)域的范圍。此外，信息獲得單元160可以獲取危險(xiǎn)物體信息，該危險(xiǎn)物體信息定義了真實(shí)空間中很可能對(duì)用戶造成危險(xiǎn)的危險(xiǎn)物體。危險(xiǎn)物體可以是例如真實(shí)空間中的靜態(tài)物體和動(dòng)態(tài)物體當(dāng)中的可能對(duì)用戶造成危險(xiǎn)的真實(shí)物體。危險(xiǎn)物體例如可以是靜態(tài)障礙，諸如例如放置在馬路上的物體、下落物體、廣告顯示器、柱或墻。此外，危險(xiǎn)物體例如可以是可高速移動(dòng)的動(dòng)態(tài)物體，諸如例如汽車(chē)、自行車(chē)或火車(chē)。危險(xiǎn)物體信息可以包括指示每個(gè)危險(xiǎn)物體的標(biāo)識(shí)符的坐標(biāo)數(shù)據(jù)、特征數(shù)據(jù)或每個(gè)危險(xiǎn)物體的位置等。危險(xiǎn)識(shí)別單元危險(xiǎn)識(shí)別單元170可以識(shí)別用戶在真實(shí)空間中面臨的危險(xiǎn)?；谟糜谔峁〢R應(yīng)用的輸入圖像的圖像識(shí)別的結(jié)果，危險(xiǎn)識(shí)別單元170可以識(shí)別危險(xiǎn)。此外，基于由傳感器單元104的測(cè)距傳感器測(cè)量的與每個(gè)真實(shí)物體的距離，危險(xiǎn)識(shí)別單元170可以識(shí)別使用輸入圖像未識(shí)別出的危險(xiǎn)。此外，危險(xiǎn)識(shí)別單元170識(shí)別與用戶面臨的危險(xiǎn)的原因相對(duì)應(yīng)的真實(shí)空間中的位置或區(qū)域。當(dāng)識(shí)別出危險(xiǎn)時(shí)，危險(xiǎn)識(shí)別單元170將表示危險(xiǎn)的細(xì)節(jié)和真實(shí)空間中的對(duì)應(yīng)位置或區(qū)域的信息輸出到報(bào)警單元180。圖6是用來(lái)描述根據(jù)這個(gè)實(shí)施例的可以由危險(xiǎn)識(shí)別單元170使用以便識(shí)別危險(xiǎn)的參數(shù)的示例的視圖。參照?qǐng)D6，在此描述的十二個(gè)不同參數(shù)被示出為可以由危險(xiǎn)識(shí)別單元17O使用的參數(shù)的示例。(I)用戶位置用戶位置是例如攜帶信息處理裝置100的用戶的位置。通過(guò)使用GPS信號(hào)的定位單元106可以測(cè)量用戶的絕對(duì)位置。此外，基于通過(guò)圖像識(shí)別單元140進(jìn)行的圖像識(shí)別的結(jié)果，可以通過(guò)估計(jì)單元150估計(jì)用戶相對(duì)于附近的真實(shí)物體或區(qū)域的相對(duì)位置。當(dāng)附近地標(biāo)的絕對(duì)位置已知時(shí)，基于用戶相對(duì)于地標(biāo)的相對(duì)位置和已知的地標(biāo)位置，可以計(jì)算用戶的絕對(duì)位置。在這個(gè)實(shí)施例中，可以假設(shè)用戶位置、信息處理裝置100的位置和成像單元102的位置彼此大致相同。
(2)用戶的行進(jìn)速度例如可以根據(jù)用戶位置隨時(shí)間的變化來(lái)計(jì)算用戶的行進(jìn)速度。此外，當(dāng)傳感器單元104包括加速度傳感器時(shí)，可以通過(guò)對(duì)加速度傳感器的輸出值的積分來(lái)計(jì)算用戶的行進(jìn)速度。(3)靜態(tài)物體的位置基于通過(guò)圖像識(shí)別單元140進(jìn)行的圖像識(shí)別的結(jié)果，可以通過(guò)估計(jì)單元150來(lái)估計(jì)靜態(tài)物體的相對(duì)位置?？梢酝ㄟ^(guò)存儲(chǔ)單元110中存儲(chǔ)的位置數(shù)據(jù)來(lái)預(yù)先定義已知的靜態(tài)物體的位置。此外，使用稍后描述的從外部裝置獲取的位置數(shù)據(jù)，可以識(shí)別靜態(tài)物體的位置。(4)與靜態(tài)物體的距離根據(jù)靜態(tài)物體相對(duì)于用戶位置的相對(duì)位置，可以計(jì)算靜態(tài)物體和用戶之間的距離。此外，使用傳感器單元104中包括的測(cè)距傳感器，可以測(cè)量靜態(tài)物體和用戶之間的距離。(5)針對(duì)靜態(tài)物體的接近速度根據(jù)靜態(tài)物體和用戶之間的距離隨時(shí)間的變化，可以計(jì)算用戶針對(duì)靜態(tài)物體的接近速度(或靜態(tài)物體針對(duì)用戶的接近速度)。(6)動(dòng)態(tài)物體的位置例如，基于通過(guò)圖像識(shí)別單元140進(jìn)行的圖像識(shí)別的結(jié)果，可以通過(guò)估計(jì)單元150來(lái)估計(jì)動(dòng)態(tài)物體的相對(duì)位置。此外，使用稍后描述的從外部裝置獲取的位置數(shù)據(jù)，可以識(shí)別動(dòng)態(tài)物體的位置。(7)與動(dòng)態(tài)物體的距離根據(jù)動(dòng)態(tài)物體相對(duì)于用戶位置的相對(duì)位置，可以計(jì)算動(dòng)態(tài)物體和用戶之間的距離。此外，使用傳感器單元104中包括的測(cè)距傳感器，可以測(cè)量動(dòng)態(tài)物體和用戶之間的距離。(8)針對(duì)動(dòng)態(tài)物體的接近速度根據(jù)動(dòng)態(tài)物體和用戶之間的距離隨時(shí)間的變化，可以計(jì)算用戶針對(duì)動(dòng)態(tài)物體的接近速度(或動(dòng)態(tài)物體針對(duì)用戶的接近速度)。(9)危險(xiǎn)物體的存在作為通過(guò)圖像識(shí)別單元140進(jìn)行的圖像識(shí)別的結(jié)果，可以識(shí)別危險(xiǎn)物體的存在。例如通過(guò)針對(duì)已知標(biāo)識(shí)符的列表來(lái)檢查識(shí)別的真實(shí)物體的標(biāo)識(shí)符，可以確定識(shí)別的真實(shí)物體是否是危險(xiǎn)物體?？商孢x地，行進(jìn)速度超過(guò)預(yù)定閾值的真實(shí)物體可以臨時(shí)被識(shí)別為危險(xiǎn)物體。此外，通過(guò)由通信單元108接收在危險(xiǎn)物體的附近發(fā)出的信標(biāo)，可以識(shí)別危險(xiǎn)物體的存在。根據(jù)地圖存儲(chǔ)單元152中存儲(chǔ)的危險(xiǎn)物體的位置和用戶位置之間的距離，可以識(shí)別未出現(xiàn)在輸入圖像中的附近危險(xiǎn)物體的存在。(10)危險(xiǎn)物體的位置以與靜態(tài)物體的位置或動(dòng)態(tài)物體的位置相同的方式，可以識(shí)別危險(xiǎn)物體的位置。(11)危險(xiǎn)區(qū)域的范圍作為通過(guò)圖像識(shí)別單元140進(jìn)行的圖像識(shí)別的結(jié)果，可以識(shí)別危險(xiǎn)區(qū)域的范圍?？梢酝ㄟ^(guò)存儲(chǔ)單元110中存儲(chǔ)的危險(xiǎn)區(qū)域信息來(lái)預(yù)先定義危險(xiǎn)區(qū)域的范圍。此外，使用從外部裝置獲取的危險(xiǎn)區(qū)域信息，可以識(shí)別危險(xiǎn)區(qū)域的范圍。 (12)對(duì)象占用率對(duì)象占用率是表示顯示的虛擬對(duì)象在屏幕上的比例的參數(shù)。危險(xiǎn)識(shí)別單元170例如從應(yīng)用單元130中獲取指示虛擬對(duì)象的顯示容量(例如虛擬對(duì)象的尺寸在屏幕上的總值)的信息。然后，通過(guò)將虛擬對(duì)象的顯示容量除以輸入圖像的尺寸(或屏幕尺寸)，危險(xiǎn)識(shí)別單元170計(jì)算對(duì)象占用率。通過(guò)使用上面描述的十二個(gè)參數(shù)中的至少一個(gè)，危險(xiǎn)識(shí)別單元170識(shí)別用戶在真實(shí)空間中面臨的危險(xiǎn)。圖7是用來(lái)描述根據(jù)這個(gè)實(shí)施例的可以由危險(xiǎn)識(shí)別單元170識(shí)別的危險(xiǎn)的類(lèi)型的視圖。應(yīng)當(dāng)注意，“危險(xiǎn)”的來(lái)源指的是提供用戶所關(guān)心的物體的具體示例。參照?qǐng)D7，可以由危險(xiǎn)識(shí)別單元170識(shí)別的危險(xiǎn)被分成五種類(lèi)型“與靜態(tài)物體碰撞”、“與動(dòng)態(tài)物體碰撞”、“接近危險(xiǎn)物體”、“接近/進(jìn)入危險(xiǎn)區(qū)域”以及“阻止用戶的注意力”。(I)與靜態(tài)物體碰撞例如當(dāng)某個(gè)靜態(tài)物體和用戶之間的距離落在預(yù)定閾值以下時(shí)，危險(xiǎn)識(shí)別單元170可以確定存在用戶可能與物體碰撞的可能性。此外，當(dāng)針對(duì)某個(gè)靜態(tài)物體的接近速度超過(guò)預(yù)定閾值時(shí)，危險(xiǎn)識(shí)別單元170可以確定存在用戶可能與物體碰撞的可能性。然后，危險(xiǎn)識(shí)別單元170可以將很可能與用戶碰撞的靜態(tài)物體的存在識(shí)別為危險(xiǎn)。(2)與動(dòng)態(tài)物體碰撞例如當(dāng)某個(gè)動(dòng)態(tài)物體和用戶之間的距離落在預(yù)定閾值以下時(shí)，危險(xiǎn)識(shí)別單元170可以確定存在用戶可能與物體碰撞的可能性。此外，當(dāng)針對(duì)某個(gè)動(dòng)態(tài)物體的接近速度(或者動(dòng)態(tài)物體針對(duì)用戶的接近速度)超過(guò)預(yù)定閾值時(shí)，危險(xiǎn)識(shí)別單元170可以確定存在用戶可能與物體碰撞的可能性。關(guān)于動(dòng)態(tài)物體的用于確定的閾值可以不同于上述的關(guān)于靜態(tài)物體的用于確定的閾值。然后，危險(xiǎn)識(shí)別單元170可以將可能與用戶碰撞的動(dòng)態(tài)物體的存在識(shí)別為危險(xiǎn)。(3)接近危險(xiǎn)物體危險(xiǎn)識(shí)別單元170可以將用戶針對(duì)危險(xiǎn)物體的接近識(shí)別為危險(xiǎn)。當(dāng)通過(guò)圖像識(shí)別或者通過(guò)接收來(lái)自危險(xiǎn)物體的信標(biāo)而檢測(cè)到危險(xiǎn)物體的存在時(shí)，危險(xiǎn)識(shí)別單元170可以確定用戶已接近危險(xiǎn)物體。此外，通過(guò)將危險(xiǎn)物體和用戶之間的距離與預(yù)定閾值相比較，危險(xiǎn)識(shí)別單元170可以確定用戶已接近危險(xiǎn)物體。
(4)接近/進(jìn)入危險(xiǎn)區(qū)域危險(xiǎn)識(shí)別單元170可以將用戶接近或進(jìn)入危險(xiǎn)區(qū)域識(shí)別為危險(xiǎn)。在當(dāng)前用戶位置處于危險(xiǎn)區(qū)域內(nèi)時(shí)，危險(xiǎn)識(shí)別單元170可以確定用戶已進(jìn)入危險(xiǎn)區(qū)域。此外，通過(guò)將危險(xiǎn)區(qū)域的邊界和當(dāng)前用戶位置之間的距離與預(yù)定閾值相比較，危險(xiǎn)識(shí)別單元170可以確定用戶已接近危險(xiǎn)區(qū)域。此外，危險(xiǎn)識(shí)別單元170可以將其中地板(或地面)的水平大幅變化的區(qū)域識(shí)別為危險(xiǎn)區(qū)域。(5)阻止用戶的注意力危險(xiǎn)識(shí)別單元170可以將其中用戶的注意力可以被阻止的狀態(tài)識(shí)別為危險(xiǎn)。當(dāng)上述的對(duì)象占用率超過(guò)預(yù)定閾值時(shí)，危險(xiǎn)識(shí)別單元170可以確定用戶的注意力可以被AR應(yīng)用阻止。此外，當(dāng)用戶的行進(jìn)速度超過(guò)預(yù)定閾值時(shí)，危險(xiǎn)識(shí)別單元170可以確定用戶的注意力可以被阻止。

當(dāng)危險(xiǎn)識(shí)別單元170識(shí)別出適用于上面描述的五種類(lèi)型中的任何一種的危險(xiǎn)時(shí)，它可以將表示識(shí)別出的危險(xiǎn)的細(xì)節(jié)(例如危險(xiǎn)的類(lèi)型、危險(xiǎn)物體或危險(xiǎn)區(qū)域的標(biāo)識(shí)符或名稱(chēng)等)和真實(shí)空間中的對(duì)應(yīng)位置或區(qū)域的信息輸出到報(bào)警單元180。外部裝置的示例通過(guò)從外部裝置向信息處理裝置100提供關(guān)于危險(xiǎn)的信息，可以增強(qiáng)信息處理裝置100的識(shí)別危險(xiǎn)的能力。圖8至10示出了這樣的外部裝置的示例。參照?qǐng)D8，在樓梯12上放置了無(wú)線電傳送器20a。樓梯12是很可能對(duì)用戶Ua造成危險(xiǎn)的真實(shí)物體或區(qū)域。無(wú)線電傳送器20a可以周期性地傳送信標(biāo)，以便向附近的裝置通知危險(xiǎn)。信標(biāo)可以包含樓梯12的標(biāo)識(shí)符和位置數(shù)據(jù)。當(dāng)通信單元108接收到信標(biāo)時(shí)，信息處理裝置100的信息獲取單元160獲取信標(biāo)中包含的信息作為外部信息,并且將獲取的信息輸出到危險(xiǎn)識(shí)別單元170。危險(xiǎn)識(shí)別單元170由此可以識(shí)別樓梯12的存在及其位置。參照?qǐng)D9，用戶Ub可以攜帶信息處理裝置20b。信息處理裝置20b是具有與信息處理裝置100等效的危險(xiǎn)報(bào)警功能的裝置。用戶Ub正在用戶Ua所處的方向上奔跑。信息處理裝置20b可以識(shí)別用戶Ub的行進(jìn)速度超過(guò)了預(yù)定閾值并且傳送信標(biāo)，用于向附近的裝置通知危險(xiǎn)。信標(biāo)例如可以包含信息處理裝置20b的標(biāo)識(shí)符、位置數(shù)據(jù)和速度數(shù)據(jù)。當(dāng)通信單元108接收到信標(biāo)時(shí),信息處理裝置100的信息獲取單元160獲取信標(biāo)中包含的信息作為外部信息，并且將獲取的信息輸出到危險(xiǎn)識(shí)別單元170。危險(xiǎn)識(shí)別單元170由此可以識(shí)別存在用戶Ua可能與用戶Ub相撞的可能性。參照?qǐng)D10，示出了數(shù)據(jù)服務(wù)器20c，其可以有能力與信息處理裝置100進(jìn)行通信。數(shù)據(jù)服務(wù)器20c是與位置數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)識(shí)別很可能對(duì)用戶造成危險(xiǎn)的真實(shí)物體或區(qū)域的數(shù)據(jù)(例如真實(shí)物體或區(qū)域的標(biāo)識(shí)符)的服務(wù)器。數(shù)據(jù)服務(wù)器20c中存儲(chǔ)的數(shù)據(jù)例如對(duì)應(yīng)于上述的危險(xiǎn)物體信息和危險(xiǎn)區(qū)域信息。信息處理裝置100的信息獲取單元160從數(shù)據(jù)服務(wù)器20c中下載危險(xiǎn)物體信息和危險(xiǎn)區(qū)域信息(圖10中的下載數(shù)據(jù)22)。危險(xiǎn)識(shí)別單元170由此可以使用下載的危險(xiǎn)物體信息和危險(xiǎn)區(qū)域信息來(lái)識(shí)別危險(xiǎn)。報(bào)警單元例如在AR應(yīng)用正在被提供給用戶的時(shí)間期間，當(dāng)危險(xiǎn)識(shí)別單元170識(shí)別出危險(xiǎn)時(shí)，報(bào)警單元180可以警告用戶存在危險(xiǎn)。例如，通過(guò)控制AR應(yīng)用的顯示可以進(jìn)行由報(bào)警單元180進(jìn)行的報(bào)警。更加具體地，在這個(gè)實(shí)施例中，當(dāng)危險(xiǎn)識(shí)別單元170識(shí)別出危險(xiǎn)時(shí)，報(bào)警單元180中斷進(jìn)入AR應(yīng)用。然后，報(bào)警單元180控制AR應(yīng)用的顯示。對(duì)AR應(yīng)用的顯示的控制可以是簡(jiǎn)單地暫停或終止AR應(yīng)用。此外，報(bào)警單元180可以減弱AR應(yīng)用中正在顯示的虛擬對(duì)象的顯示。作為示例，報(bào)警單元180使顯示的虛擬對(duì)象閃爍或半透明。此外，報(bào)警單元180可以在其中提供AR應(yīng)用的顯示單元114的屏幕上顯示用于報(bào)警的對(duì)象。用于報(bào)警的對(duì)象可以是例如向用戶指示危險(xiǎn)識(shí)別單元170識(shí)別的危險(xiǎn)的位置或區(qū)域的對(duì)象。
可替選地或者此外，可以通過(guò)除了對(duì)AR應(yīng)用的顯示進(jìn)行控制之外的手段來(lái)進(jìn)行由報(bào)警單元180進(jìn)行的報(bào)警。例如，報(bào)警單元180可以通過(guò)從語(yǔ)音輸出單元116中輸出報(bào)警聲音或報(bào)警消息來(lái)警告用戶存在危險(xiǎn)。此外，報(bào)警單元180可以通過(guò)使振動(dòng)單元118振動(dòng)來(lái)警告用戶存在危險(xiǎn)。報(bào)警單元180可以是獨(dú)立地并入到信息處理裝置100中的功能，而非取決于AR應(yīng)用?？商孢x地，任何安裝到信息處理裝置100中的AR應(yīng)用都可以具有如報(bào)警單元180那樣的功能。 圖11至14示出了這個(gè)實(shí)施例中的報(bào)警單元180進(jìn)行的警告存在危險(xiǎn)的示例。(I)第一示例圖11左側(cè)的圖像Imll是可以由AR應(yīng)用顯示的輸出圖像的示例。在圖像Imll中，虛擬對(duì)象Tl被顯示為疊加到真實(shí)空間中的建筑物上。虛擬對(duì)象Tl是例如表示關(guān)于建筑物中餐館等級(jí)的信息的對(duì)象。圖11右側(cè)的圖像Iml2是在顯示圖像Imll之后作為用戶Ua已接近樓梯12的結(jié)果、當(dāng)報(bào)警單元180進(jìn)行報(bào)警時(shí)的輸出圖像的示例。在圖像Iml2中，虛擬對(duì)象Tl被顯示成半透明。很可能造成危險(xiǎn)的真實(shí)物體或區(qū)域由此不被虛擬對(duì)象Tl隱藏。此外，向用戶指示樓梯的位置(區(qū)域)的對(duì)象Al和指示消息以警告用戶的對(duì)象A2被顯示。用戶由此可以迅速并準(zhǔn)確地識(shí)別出他/她面臨的危險(xiǎn)。(2)第二示例圖12左側(cè)的圖像Im21是可以由AR應(yīng)用顯示的輸出圖像的示例。同樣在圖像Im21中，虛擬對(duì)象Tl被顯示為疊加到真實(shí)空間中的建筑物上。此外，很可能成為對(duì)用戶Ua的障礙的障礙物10出現(xiàn)在圖像Im21中。圖12右側(cè)的圖像Im22是在顯示圖像Im21之后作為用戶Ua已接近障礙物10的結(jié)果、當(dāng)報(bào)警單元180進(jìn)行報(bào)警時(shí)的輸出圖像的示例。在圖像Im22中，從屏幕中刪除虛擬對(duì)象Tl。此外，向用戶指示障礙物10的位置并進(jìn)一步指示消息以警告用戶的對(duì)象A3被顯示。盡管障礙物10偏離了屏幕的視角，但是因?yàn)閭鞲衅鲉卧?04的測(cè)距傳感器測(cè)量了與障礙物10的距離或者地圖存儲(chǔ)單元152存儲(chǔ)了障礙物10的位置，所以危險(xiǎn)識(shí)別單元170仍可以識(shí)別出由障礙物10對(duì)用戶Ua造成的危險(xiǎn)。(3)第三示例圖13左側(cè)的圖像Im31是可以由AR應(yīng)用顯示的輸出圖像的示例。同樣在圖像Im31中，虛擬對(duì)象Tl被顯示為疊加到真實(shí)空間中的建筑物上。圖13右側(cè)的圖像Im32是在顯示圖像Im31之后作為用戶Ua已開(kāi)始奔跑的結(jié)果、當(dāng)報(bào)警單元180進(jìn)行報(bào)警時(shí)的輸出圖像的示例。在圖像Im32中，從屏幕中刪除虛擬對(duì)象Tl，并且AR應(yīng)用終止。以這種方式，報(bào)警單元180可以通過(guò)簡(jiǎn)單地暫?；蚪K止AR應(yīng)用來(lái)警告用戶。
(4)第四示例圖14左側(cè)的圖像Im41是可以由AR應(yīng)用顯示的輸出圖像的示例。同樣在圖像Im41中，虛擬對(duì)象Tl被顯示為疊加到真實(shí)空間中的建筑物上。此外，溝14存在于用戶Ua的前面。溝14也可以被識(shí)別為危險(xiǎn)物體或危險(xiǎn)區(qū)域。圖14右側(cè)的圖像Im42是在顯示圖像Im41之后作為用戶Ua已接近溝14的結(jié)果、當(dāng)報(bào)警單元180進(jìn)行報(bào)警時(shí)的輸出圖像的示例。同樣在圖像Im42中，虛擬對(duì)象Tl被顯示為半透明。此外，報(bào)警單元180使振動(dòng)單元118振動(dòng)并且從語(yǔ)音輸出單元116中輸出報(bào)警消息。以這種方式，不僅通過(guò)視覺(jué)，而且還通過(guò)聽(tīng)覺(jué)或觸覺(jué)進(jìn)行報(bào)警，可以更加強(qiáng)烈地警告用戶。設(shè)定單元設(shè)定單元190可以管理與危險(xiǎn)識(shí)別單元170進(jìn)行的危險(xiǎn)識(shí)別處理和報(bào)警單元180進(jìn)行的報(bào)警處理有關(guān)的設(shè)定。例如，設(shè)定單元190管理當(dāng)危險(xiǎn)識(shí)別單元170識(shí)別出危險(xiǎn)時(shí) 應(yīng)當(dāng)通過(guò)何種方式進(jìn)行報(bào)警。設(shè)定單元170可以進(jìn)行設(shè)定，從而報(bào)警單元180針對(duì)每個(gè)類(lèi)型的識(shí)別出的危險(xiǎn)以不同的方式進(jìn)行報(bào)警。此外，設(shè)定單元190可以提示用戶通過(guò)輸入單元112指定報(bào)警的方式。此外，設(shè)定單元190例如可以保持針對(duì)同一危險(xiǎn)警告用戶的次數(shù)的上限。報(bào)警單元180對(duì)關(guān)于每個(gè)危險(xiǎn)物體和危險(xiǎn)區(qū)域的標(biāo)識(shí)符或位置進(jìn)行報(bào)警的次數(shù)進(jìn)行計(jì)數(shù)。然后，對(duì)于向用戶已經(jīng)進(jìn)行了次數(shù)等于上限的報(bào)警的危險(xiǎn)，報(bào)警單元180可以制止向用戶警告該危險(xiǎn)的存在。此外，設(shè)定單元190例如記錄用戶的行為歷史。用戶的行為歷史例如可以是由定位單元106測(cè)量的用戶的移動(dòng)的歷史。然后，當(dāng)用戶正在執(zhí)行與用戶的行為歷史中包含的行為相類(lèi)似的行為時(shí)，報(bào)警單元180可以制止向用戶警告存在危險(xiǎn)。通過(guò)以這種方式禁用報(bào)警，可以防止針對(duì)用戶已經(jīng)識(shí)別的危險(xiǎn)進(jìn)行過(guò)度的報(bào)警。此外，設(shè)定單元190可以提示用戶通過(guò)輸入單元112預(yù)先指定對(duì)其應(yīng)當(dāng)禁用報(bào)警的危險(xiǎn)物體或危險(xiǎn)區(qū)域的標(biāo)識(shí)符或位置。在這種情況下，對(duì)于用戶明確指定的危險(xiǎn)物體或危險(xiǎn)區(qū)域，禁用通過(guò)報(bào)警單元180進(jìn)行的報(bào)警。3.根據(jù)實(shí)施例的處理的流程根據(jù)本公開(kāi)的另一實(shí)施例，提供了一種方法，包括針對(duì)用戶顯示疊加到真實(shí)空間表示上的虛擬圖像；識(shí)別用戶所關(guān)心的潛在源，所關(guān)心的潛在源位于真實(shí)空間表示中的用戶關(guān)注區(qū)域外部；以及向用戶通知所關(guān)心的潛在源。參照?qǐng)D15至19，針對(duì)示例性的五個(gè)場(chǎng)景中的每一個(gè)，在下文中描述根據(jù)這個(gè)實(shí)施例的信息處理裝置100進(jìn)行的處理的流程的示例。注意，信息處理裝置100可以?xún)H執(zhí)行五個(gè)場(chǎng)景中的一個(gè)處理，或者執(zhí)行多個(gè)處理。此外，信息處理裝置100可以執(zhí)行具有與作為示例在下面描述的處理不同的流程的處理。3-1.第一場(chǎng)景圖15是示出第一場(chǎng)景中的危險(xiǎn)報(bào)警處理的流程示例的流程圖。在第一場(chǎng)景中，執(zhí)行基于對(duì)輸入圖像的圖像識(shí)別的結(jié)果的危險(xiǎn)識(shí)別。參照?qǐng)D15，首先通過(guò)圖像識(shí)別單元140獲取輸入圖像(步驟S110)。接下來(lái)，圖像識(shí)別單元140識(shí)別出現(xiàn)在獲取的輸入圖像中的真實(shí)物體(步驟S112)。然后，估計(jì)單元150估計(jì)圖像識(shí)別單元140識(shí)別的每個(gè)真實(shí)物體的位置和用戶位置(步驟S114)。然后，估計(jì)單元150基于估計(jì)的每個(gè)真實(shí)物體的位置和用戶位置來(lái)計(jì)算每個(gè)真實(shí)物體和用戶之間的距離，并且進(jìn)一步計(jì)算用戶針對(duì)每個(gè)真實(shí)物體的接近速度(步驟S116)。然后，通過(guò)將估計(jì)單元150估計(jì)并計(jì)算的每個(gè)真實(shí)物體和用戶之間的距離以及用戶分別針對(duì)每個(gè)真實(shí)物體的接近速度與預(yù)定閾值相比較，危險(xiǎn)識(shí)別單元170可以確定是否存在危險(xiǎn)(步驟S160)。例如，當(dāng)用戶針對(duì)某個(gè)真實(shí)物體的接近速度超過(guò)預(yù)定閾值時(shí)，危險(xiǎn)識(shí)別單元170可以確定存在用戶可能與該真實(shí)物體相撞的可能性。此外，當(dāng)某個(gè)危險(xiǎn)物體和用戶之間的距離落在預(yù)定閾值以下時(shí)，危險(xiǎn)識(shí)別單元170可以確定用戶正在接近該危險(xiǎn)物體。當(dāng)危險(xiǎn)識(shí)別單元170在步驟S160中確定存在危險(xiǎn)時(shí)，報(bào)警單元180中斷進(jìn)入正在由應(yīng)用單元130提供的AR應(yīng)用(步驟S170)。然后，通過(guò)圖11至14所示的方式或別的方式，報(bào)警單元180警告用戶存在危險(xiǎn)(步驟S180)。另一方面，當(dāng)危險(xiǎn)識(shí)別單元170在步驟S160中確定不存在危險(xiǎn)時(shí)，處理返回到步驟S110。

3-2.第二場(chǎng)景圖16是示出第二場(chǎng)景中的危險(xiǎn)報(bào)警處理的流程示例的流程圖。在第二場(chǎng)景中，執(zhí)行使用從數(shù)據(jù)服務(wù)器接收的關(guān)于危險(xiǎn)的信息的危險(xiǎn)識(shí)別。參照?qǐng)D16，信息獲取單元160首先通過(guò)通信單元108從外部裝置中獲取關(guān)于危險(xiǎn)的信息(步驟S120)。在這個(gè)示例中，假定從圖10所示的數(shù)據(jù)服務(wù)器20c中獲取定義危險(xiǎn)物體的危險(xiǎn)物體信息和定義危險(xiǎn)區(qū)域的危險(xiǎn)區(qū)域信息。信息獲取單元160將在步驟S120中獲取的危險(xiǎn)區(qū)域信息存儲(chǔ)到存儲(chǔ)單元110中(步驟S122)。然后，定位單元106測(cè)量用戶位置(步驟S124)。在步驟S124中，代替通過(guò)定位單元106來(lái)測(cè)量用戶位置，可以基于輸入圖像的圖像識(shí)別的結(jié)果通過(guò)估計(jì)單元150來(lái)估計(jì)用戶位置。然后，基于危險(xiǎn)區(qū)域信息和危險(xiǎn)物體信息以及用戶位置，危險(xiǎn)識(shí)別單元170可以確定是否存在危險(xiǎn)(步驟S162)。例如，當(dāng)用戶位置包括在危險(xiǎn)區(qū)域信息所指示的危險(xiǎn)區(qū)域的范圍內(nèi)時(shí)，或者當(dāng)危險(xiǎn)區(qū)域的邊界和用戶位置之間的距離落在預(yù)定閾值以下時(shí)，危險(xiǎn)識(shí)別單元170可以確定用戶已進(jìn)入或正在接近危險(xiǎn)區(qū)域。此外，當(dāng)危險(xiǎn)物體信息所指示的危險(xiǎn)物體的位置和用戶位置之間的距離落在預(yù)定閾值以下時(shí)，危險(xiǎn)識(shí)別單元170可以確定在用戶附近存在危險(xiǎn)物體。當(dāng)危險(xiǎn)識(shí)別單元170在步驟S162中確定存在危險(xiǎn)時(shí)，報(bào)警單元180中斷進(jìn)入正在由應(yīng)用單元130提供的AR應(yīng)用(步驟S170)。然后，通過(guò)圖11至14所示的方式或別的方式，報(bào)警單元180可以警告用戶存在危險(xiǎn)(步驟S180)。另一方面，當(dāng)危險(xiǎn)識(shí)別單元170在步驟S162中確定不存在危險(xiǎn)時(shí)，處理返回到步驟S124。3~3.第二場(chǎng)景圖17是示出第三場(chǎng)景中的危險(xiǎn)報(bào)警處理的流程示例的流程圖。在第三場(chǎng)景中，執(zhí)行基于從不同于數(shù)據(jù)服務(wù)器的外部裝置中接收的信息的危險(xiǎn)識(shí)別。參照?qǐng)D17，信息獲取單元160首先通過(guò)通信單元108從外部裝置中獲取關(guān)于危險(xiǎn)的信息(步驟S130)。在這個(gè)示例中，假定從圖8所示的無(wú)線電傳送器20a或者圖9所示的信息處理裝置20b接收通知危險(xiǎn)的信標(biāo)。當(dāng)信息獲取單元160接收到通知危險(xiǎn)的信標(biāo)時(shí)，危險(xiǎn)識(shí)別單元170識(shí)別出危險(xiǎn)(步驟S164)。危險(xiǎn)識(shí)別單元170可以在接收到信標(biāo)時(shí)立刻識(shí)別出危險(xiǎn)，或者基于信標(biāo)中包含的位置數(shù)據(jù)和用戶位置來(lái)確定是否存在危險(xiǎn)。
當(dāng)危險(xiǎn)識(shí)別單元170在步驟S164中識(shí)別出危險(xiǎn)時(shí)，報(bào)警單元180中斷進(jìn)入正在由應(yīng)用單元130提供的AR應(yīng)用(步驟S170)。然后，通過(guò)圖11至14所示的方式或別的方式，報(bào)警單元180可以警告用戶存在危險(xiǎn)(步驟S180)。3-4.第四場(chǎng)景圖18是示出第四場(chǎng)景中的危險(xiǎn)報(bào)警處理的流程示例的流程圖。在第四場(chǎng)景中，執(zhí)行使用基于輸入圖像的圖像識(shí)別的結(jié)果創(chuàng)建的地圖的危險(xiǎn)識(shí)別。參照?qǐng)D18，首先通過(guò)圖像識(shí)別單元140獲取輸入圖像(步驟S140)。接下來(lái)，圖像識(shí)別單元140識(shí)別出現(xiàn)在獲取的輸入圖像中的真實(shí)物體(步驟S142)。然后，估計(jì)單元150估計(jì)圖像識(shí)別單元140識(shí)別的每個(gè)真實(shí)物體的位置和用戶位置(步驟S144)。然后，估計(jì)單元150將估計(jì)的每個(gè)真實(shí)物體的位置和用戶位置存儲(chǔ)到地 圖存儲(chǔ)單元152中(步驟S146)。在這之后，估計(jì)單元150計(jì)算地圖存儲(chǔ)單元152中存儲(chǔ)的每個(gè)真實(shí)物體的位置和最新用戶位置之間的距離，并且進(jìn)一步計(jì)算用戶針對(duì)每個(gè)真實(shí)物體的接近速度(步驟S148)。然后，通過(guò)將估計(jì)單元150估計(jì)并計(jì)算的每個(gè)真實(shí)物體和用戶之間的距離以及用戶分別針對(duì)每個(gè)真實(shí)物體的接近速度與預(yù)定閾值相比較，危險(xiǎn)識(shí)別單元170確定是否存在危險(xiǎn)(步驟S166)。當(dāng)危險(xiǎn)識(shí)別單元170確定存在危險(xiǎn)時(shí)，報(bào)警單元180中斷進(jìn)入正在由應(yīng)用單元130提供的AR應(yīng)用(步驟S170)。然后，例如通過(guò)圖11至14所示的方式或別的方式，報(bào)警單元180可以警告用戶存在危險(xiǎn)(步驟S180)。另一方面，當(dāng)危險(xiǎn)識(shí)別單元170在步驟S166中確定不存在危險(xiǎn)時(shí)，處理返回到步驟S140。3-5.第五場(chǎng)景圖19是示出第五場(chǎng)景中的危險(xiǎn)報(bào)警處理的流程示例的流程圖。在第五場(chǎng)景中，執(zhí)行使用從應(yīng)用單元130獲取的信息的危險(xiǎn)識(shí)別。參照?qǐng)D19，危險(xiǎn)識(shí)別單元170首先從應(yīng)用單元130中獲取指示虛擬對(duì)象的顯示容量的信息(步驟S150)。然后，通過(guò)將虛擬對(duì)象的顯示容量除以輸入圖像的尺寸(或屏幕尺寸)，危險(xiǎn)識(shí)別單元170計(jì)算對(duì)象占用率(步驟S152)。然后，通過(guò)將對(duì)象占用率與預(yù)定閾值相比較，危險(xiǎn)識(shí)別單元170可以確定是否存在危險(xiǎn)(步驟S168)。當(dāng)危險(xiǎn)識(shí)別單元170確定存在危險(xiǎn)時(shí)，報(bào)警單元180中斷進(jìn)入正在由應(yīng)用單元130提供的AR應(yīng)用(步驟S170)。然后，通過(guò)圖11至14所示的方式或別的方式，報(bào)警單元180可以警告用戶存在危險(xiǎn)(步驟S180)。另一方面，當(dāng)危險(xiǎn)識(shí)別單元170在步驟S168中確定不存在危險(xiǎn)時(shí)，處理返回到步驟S150。4.總結(jié)上文參照?qǐng)DI至19詳細(xì)地描述了本公開(kāi)的各種實(shí)施例。在AR應(yīng)用正在被提供給用戶的時(shí)間期間，當(dāng)在真實(shí)空間中識(shí)別出用戶面臨的危險(xiǎn)時(shí)，根據(jù)這些實(shí)施例的信息處理裝置100警告用戶存在危險(xiǎn)。這減少了用戶在真實(shí)世界中面臨危險(xiǎn)的風(fēng)險(xiǎn)。結(jié)果，用戶可以以較少的擔(dān)心使用AR應(yīng)用。此外，根據(jù)實(shí)施例，可以通過(guò)控制AR應(yīng)用的顯示來(lái)進(jìn)行對(duì)用戶的報(bào)警。AR應(yīng)用的用戶由此可以迅速識(shí)別出危險(xiǎn)而不會(huì)錯(cuò)過(guò)報(bào)警。此外，根據(jù)實(shí)施例，可以通過(guò)中斷進(jìn)入AR應(yīng)用來(lái)進(jìn)行報(bào)警。因此，不管安裝到信息處理裝置100中的AR應(yīng)用的類(lèi)型如何，都可以在AR應(yīng)用正在被提供的時(shí)間期間警告用戶存在危險(xiǎn)。此外，上述的報(bào)警功能可以被實(shí)施為不依賴(lài)于任何AR應(yīng)用的獨(dú)立的功能。在這種情況下，可以不需要針對(duì)每個(gè)AR應(yīng)用都采取措施來(lái)減少危險(xiǎn)的風(fēng)險(xiǎn)，從而可以增強(qiáng)AR應(yīng)用的開(kāi)發(fā)的靈活性。此外，根據(jù)實(shí)施例，基于用于提供AR應(yīng)用的輸入圖像的圖像識(shí)別的結(jié)果，可以識(shí)別用戶面臨的危險(xiǎn)。具體地，基于圖像識(shí)別的結(jié)果來(lái)估計(jì)參數(shù)，諸如真實(shí)空間中的真實(shí)物體和用戶之間的距離、用戶針對(duì)每個(gè)真實(shí)物體的接近速度或者用戶的行進(jìn)速度。然后，可以使用估計(jì)的參數(shù)來(lái)識(shí)別危險(xiǎn)。在這種情況下，通過(guò)以低成本擴(kuò)展能夠提供AR應(yīng)用的裝置，可以容易地實(shí)現(xiàn)上述的危險(xiǎn)報(bào)警處理。此外，根據(jù)實(shí)施例，很可能在真實(shí)空間中與用戶相撞的障礙的存在可以被識(shí)別為危險(xiǎn)。這減少了在用戶的注意力被吸引到AR應(yīng)用的同時(shí)用戶與障礙相撞的風(fēng)險(xiǎn)。此外，根據(jù)實(shí)施例，用戶接近或進(jìn)入危險(xiǎn)區(qū)域或者接近危險(xiǎn)物體也可以被識(shí)別為危險(xiǎn)。這減少了在用戶的注意力被吸引到AR應(yīng)用的同時(shí)用戶接近或進(jìn)入危險(xiǎn)區(qū)域或者用戶接近危險(xiǎn)物體的風(fēng)險(xiǎn)。 此外，根據(jù)實(shí)施例，可以從外部裝置提供關(guān)于危險(xiǎn)的信息。當(dāng)從數(shù)據(jù)服務(wù)器提供定義危險(xiǎn)區(qū)域或危險(xiǎn)物體的信息時(shí)，與其中信息處理裝置100自己識(shí)別危險(xiǎn)的情況相比，增強(qiáng)了信息處理裝置100的危險(xiǎn)識(shí)別能力。此外，當(dāng)具有與信息處理裝置100等效的危險(xiǎn)報(bào)警功能的別的用戶的裝置提供關(guān)于危險(xiǎn)的信息時(shí)，可以通過(guò)裝置之間的協(xié)作以更高的可靠性來(lái)識(shí)別危險(xiǎn)。此外，當(dāng)發(fā)出關(guān)于危險(xiǎn)的信息的裝置被放置在很可能造成危險(xiǎn)的真實(shí)物體或區(qū)域中時(shí)，可以在具有高度危險(xiǎn)的地方以更高的可靠性來(lái)識(shí)別危險(xiǎn)。此外，根據(jù)實(shí)施例，能夠沿著與成像裝置的光軸不同的方向測(cè)量與真實(shí)空間中的真實(shí)物體的距離的測(cè)距傳感器被用于識(shí)別危險(xiǎn)。這使得能夠識(shí)別僅通過(guò)圖像識(shí)別不能識(shí)別的危險(xiǎn)。此外，根據(jù)實(shí)施例，基于屏幕上顯示的虛擬對(duì)象的比例來(lái)確定用戶的注意力是否被阻止。這減少了由于屏幕上顯示的過(guò)多的虛擬對(duì)象而造成的用戶遲于注意到存在于真實(shí)世界中的危險(xiǎn)的風(fēng)險(xiǎn)。此外，根據(jù)實(shí)施例，基于報(bào)警的次數(shù)、用戶的行為歷史或用戶進(jìn)行的明確設(shè)定，禁用對(duì)于用戶而言不必要的報(bào)警。這防止了用戶對(duì)AR應(yīng)用的使用被用戶不想要的報(bào)警所阻止。此外，根據(jù)實(shí)施例，當(dāng)識(shí)別出危險(xiǎn)時(shí)可以暫?；蚪K止AR應(yīng)用。在這種情況下，用戶的注意力可以更加可靠地被吸引到識(shí)別出的危險(xiǎn)。此外，正在通過(guò)AR應(yīng)用顯示的虛擬對(duì)象可以閃爍或半透明。因此，出現(xiàn)在輸入圖像中的危險(xiǎn)的存在不會(huì)被虛擬對(duì)象完全隱藏。此外，根據(jù)實(shí)施例，當(dāng)識(shí)別出危險(xiǎn)時(shí)可以在屏幕上顯示用于報(bào)警的對(duì)象。用于報(bào)警的對(duì)象可以向用戶警告識(shí)別出的危險(xiǎn)的位置或區(qū)域。用戶由此可以迅速識(shí)別危險(xiǎn)的原因。盡管上文參照附圖描述了本公開(kāi)的優(yōu)選實(shí)施例，但是本公開(kāi)不限于此。本領(lǐng)域技術(shù)人員應(yīng)當(dāng)理解，根據(jù)設(shè)計(jì)要求和其他因素，可以進(jìn)行各種修改、組合、子組合和變更，只要它們?cè)谒綑?quán)利要求或其等同物的范圍內(nèi)。例如，本技術(shù)可以采用以下配置。(I) 一種能夠向用戶提供顯示疊加到真實(shí)空間上的虛擬對(duì)象的增強(qiáng)現(xiàn)實(shí)應(yīng)用的信息處理裝置，包括危險(xiǎn)識(shí)別單元，其識(shí)別所述用戶在所述真實(shí)空間中面臨的危險(xiǎn)；以及
報(bào)警單元，其在所述增強(qiáng)現(xiàn)實(shí)應(yīng)用正在被提供給所述用戶的時(shí)間期間，當(dāng)所述危險(xiǎn)識(shí)別單元識(shí)別出危險(xiǎn)時(shí)，向所述用戶報(bào)警存在危險(xiǎn)。(2)根據(jù)⑴所述的信息處理裝置，其中，通過(guò)控制所述增強(qiáng)現(xiàn)實(shí)應(yīng)用的顯示，所述報(bào)警單元向所述用戶報(bào)警存在危險(xiǎn)。(3)根據(jù)⑴或⑵所述的信息處理裝置，其中，通過(guò)中斷進(jìn)入所述增強(qiáng)現(xiàn)實(shí)應(yīng)用，所述報(bào)警單元向所述用戶報(bào)警存在危險(xiǎn)。(4)根據(jù)⑴至(3)中任一項(xiàng)所述的信息處理裝置，其中，當(dāng)所述危險(xiǎn)識(shí)別單元識(shí)別出危險(xiǎn)時(shí)，所述報(bào)警單元暫停或終止正在被提供給所述用戶的所述增強(qiáng)現(xiàn)實(shí)應(yīng)用。

(5)根據(jù)⑴至(4)中任一項(xiàng)所述的信息處理裝置，其中，當(dāng)所述危險(xiǎn)識(shí)別單元識(shí)別出危險(xiǎn)時(shí)，所述報(bào)警單元使正在被提供給所述用戶的所述增強(qiáng)現(xiàn)實(shí)應(yīng)用中顯示的虛擬對(duì)象閃爍或半透明。(6)根據(jù)⑴至(5)中任一項(xiàng)所述的信息處理裝置，其中，當(dāng)所述危險(xiǎn)識(shí)別單元識(shí)別出危險(xiǎn)時(shí)，所述報(bào)警單元在其上正在提供所述增強(qiáng)現(xiàn)實(shí)應(yīng)用的屏幕上顯示用于報(bào)警的對(duì)象。(7)根據(jù)⑴至(6)中任一項(xiàng)所述的信息處理裝置，其中，所述用于報(bào)警的對(duì)象指示與所述危險(xiǎn)識(shí)別單元識(shí)別的危險(xiǎn)的原因相對(duì)應(yīng)的位置或區(qū)域。(8)根據(jù)⑴至(7)中任一項(xiàng)所述的信息處理裝置，其中，所述危險(xiǎn)識(shí)別單元將很可能在所述真實(shí)空間中與所述用戶相撞的真實(shí)物體的存在識(shí)別為危險(xiǎn)。(9)根據(jù)(I)至(8)中任一項(xiàng)所述的信息處理裝置，進(jìn)一步包括信息獲取單元，其獲取定義在所述真實(shí)空間中具有相對(duì)低的安全水平的危險(xiǎn)區(qū)域的危險(xiǎn)區(qū)域信息，其中，所述危險(xiǎn)識(shí)別單元將所述用戶接近或進(jìn)入由所述危險(xiǎn)區(qū)域信息定義的所述危險(xiǎn)區(qū)域識(shí)別為危險(xiǎn)。(10)根據(jù)(I)至(9)中任一項(xiàng)所述的信息處理裝置，進(jìn)一步包括信息獲取單元，其獲取定義在所述真實(shí)空間中很可能對(duì)所述用戶造成危險(xiǎn)的危險(xiǎn)物體的危險(xiǎn)物體信息，其中，所述危險(xiǎn)識(shí)別單元將所述用戶接近由所述危險(xiǎn)物體信息定義的所述危險(xiǎn)物體識(shí)別為危險(xiǎn)。(11)根據(jù)⑴至(10)中任一項(xiàng)所述的信息處理裝置，其中，當(dāng)所顯示的虛擬對(duì)象在屏幕上的比例超過(guò)預(yù)定閾值時(shí)，所述危險(xiǎn)識(shí)別單元識(shí)別出危險(xiǎn)。(12)根據(jù)⑴至(11)中任一項(xiàng)所述的信息處理裝置，其中，對(duì)于向所述用戶已經(jīng)進(jìn)行了次數(shù)等于預(yù)定上限的報(bào)警的危險(xiǎn)，所述報(bào)警單元不向所述用戶警告所述危險(xiǎn)的存在。(13)根據(jù)⑴至(12)中任一項(xiàng)所述的信息處理裝置，其中，當(dāng)所述用戶正在執(zhí)行與所述用戶的行為歷史中包含的行為相類(lèi)似的行為時(shí)，所述報(bào)警單元不向所述用戶警告危險(xiǎn)的存在。(14)根據(jù)⑴至(13)中任一項(xiàng)所述的信息處理裝置，進(jìn)一步包括設(shè)定單元，對(duì)于所述用戶預(yù)先指定的危險(xiǎn)，所述設(shè)定單元禁用通過(guò)所述報(bào)警單元進(jìn)行的報(bào)警。(15)根據(jù)⑴至(14)中任一項(xiàng)所述的信息處理裝置，進(jìn)一步包括測(cè)距傳感器，其測(cè)量所述真實(shí)空間中的真實(shí)物體和所述用戶之間的距離，其中，基于由所述測(cè)距傳感器測(cè)量的與每個(gè)真實(shí) 物體的距離，所述危險(xiǎn)識(shí)別單元識(shí)別所述用戶面臨的危險(xiǎn)。(16)根據(jù)(15)所述的信息處理裝置，其中，所述測(cè)距傳感器被安裝成能夠沿著與用于提供所述增強(qiáng)現(xiàn)實(shí)應(yīng)用的成像裝置的光軸不同的方向來(lái)測(cè)量距離。(17)根據(jù)⑴至(15)中任一項(xiàng)所述的信息處理裝置，進(jìn)一步包括通信單元，其從外部裝置接收關(guān)于危險(xiǎn)的信息，其中，所述危險(xiǎn)識(shí)別單元使用由所述通信單元接收的關(guān)于危險(xiǎn)的信息來(lái)識(shí)別所述用戶面臨的危險(xiǎn)。(18)根據(jù)(17)所述的信息處理裝置，其中，所述外部裝置是放置在很可能對(duì)所述用戶造成危險(xiǎn)的真實(shí)物體上或區(qū)域中的裝置。(19)根據(jù)(17)所述的信息處理裝置，其中，所述外部裝置是具有與所述信息處理裝置等效的危險(xiǎn)報(bào)警功能的別的用戶的裝置。(20)根據(jù)(17)所述的信息處理裝置，其中，關(guān)于危險(xiǎn)的信息是識(shí)別很可能對(duì)所述用戶造成危險(xiǎn)的真實(shí)物體或區(qū)域的位置或范圍的信息，并且所述危險(xiǎn)識(shí)別單元基于關(guān)于危險(xiǎn)的信息和所述用戶的位置來(lái)識(shí)別所述用戶面臨的危險(xiǎn)。(21) 一種能夠向用戶提供顯示疊加到真實(shí)空間上的虛擬對(duì)象的增強(qiáng)現(xiàn)實(shí)應(yīng)用的信息處理裝置中的報(bào)警方法，包括在所述增強(qiáng)現(xiàn)實(shí)應(yīng)用正在被提供給所述用戶的時(shí)間期間，識(shí)別所述用戶在所述真實(shí)空間中面臨的危險(xiǎn)；以及當(dāng)識(shí)別出危險(xiǎn)時(shí)，向所述用戶報(bào)警存在危險(xiǎn)。(22) 一種使計(jì)算機(jī)用作如下單元的程序，所述計(jì)算機(jī)控制能夠向用戶提供顯示疊加到真實(shí)空間上的虛擬對(duì)象的增強(qiáng)現(xiàn)實(shí)應(yīng)用的信息處理裝置，所述單元為危險(xiǎn)識(shí)別單元，其識(shí)別所述用戶在所述真實(shí)空間中面臨的危險(xiǎn)；以及報(bào)警單元，其在所述增強(qiáng)現(xiàn)實(shí)應(yīng)用正在被提供給所述用戶的時(shí)間期間，當(dāng)所述危險(xiǎn)識(shí)別單元識(shí)別出危險(xiǎn)時(shí)，向所述用戶報(bào)警存在危險(xiǎn)。根據(jù)上述描述可知，本公開(kāi)的技術(shù)方案包括但不限于下列方案I. 一種設(shè)備，包括存儲(chǔ)器，其存儲(chǔ)指令；以及
控制單元，其執(zhí)行所述指令以發(fā)送信號(hào)，以針對(duì)用戶顯示疊加到真實(shí)空間表示上的第一虛擬圖像；發(fā)送信號(hào)，以識(shí)別所述用戶所關(guān)心的潛在源，所述所關(guān)心的潛在源位于所述真實(shí)空間表示中的用戶關(guān)注區(qū)域外部；以及發(fā)送信號(hào)，以向所述用戶通知所述所關(guān)心的潛在源。方案2.根據(jù)方案I所述的設(shè)備，其中，識(shí)別所關(guān)心的潛在源包括分析用于創(chuàng)建所述真實(shí)空間表示的輸入信號(hào)。方案3.根據(jù)方案I所述的設(shè)備，其中，所述所關(guān)心的潛在源包括關(guān)于所述用戶的危險(xiǎn)的潛在源。方案4.根據(jù)方案I所述的設(shè)備，其中，所述所關(guān)心的潛在源至少部分地被所述第 一虛擬圖像遮蔽。方案5.根據(jù)方案I所述的設(shè)備，其中，發(fā)送信號(hào)以通知所述用戶進(jìn)一步包括發(fā)送信號(hào)以變更所述第一虛擬圖像。方案6.根據(jù)方案I所述的設(shè)備，其中，發(fā)送信號(hào)以通知所述用戶進(jìn)一步包括發(fā)送信號(hào)以生成聽(tīng)覺(jué)警報(bào)、觸覺(jué)警報(bào)或視覺(jué)警報(bào)中的至少一個(gè)。方案7.根據(jù)方案I所述的設(shè)備，其中，所述視覺(jué)報(bào)警包括第二虛擬圖像。方案8.根據(jù)方案I所述的設(shè)備，其中，所述控制單元執(zhí)行所述指令以發(fā)送信號(hào)以監(jiān)視用戶行為；以及部分地基于監(jiān)視的用戶行為來(lái)識(shí)別所述所關(guān)心的潛在源。方案9.根據(jù)方案8所述的設(shè)備，其中，所述控制單元執(zhí)行所述指令以基于監(jiān)視的用戶行為來(lái)確定所述用戶是否知道所述所關(guān)心的潛在源。方案10.根據(jù)方案8所述的設(shè)備，其中，監(jiān)視的用戶行為包括一系列行為。方案11.根據(jù)方案10所述的設(shè)備，其中，所述控制單元執(zhí)行所述指令以通過(guò)將所述一系列行為中的行為數(shù)目與用戶行為數(shù)目閾值比較來(lái)確定所述用戶是否知道所述所關(guān)心的潛在源。方案12.根據(jù)方案10所述的設(shè)備，其中，所述控制單元執(zhí)行所述指令以確定所述一系列行為是否指示所述用戶已避免所述所關(guān)心的潛在源或者已接近所述所關(guān)心的潛在源兩者至少之一。方案13.根據(jù)方案8所述的設(shè)備，其中，所述控制單元執(zhí)行所述指令以至少部分地基于監(jiān)視的用戶行為來(lái)確定所述用戶是否關(guān)心所述所關(guān)心的潛在源。方案14.根據(jù)方案13所述的設(shè)備，其中，監(jiān)視的用戶行為是對(duì)所述所關(guān)心的潛在源所屬類(lèi)型的所關(guān)心的潛在源的反應(yīng)。方案15.根據(jù)方案I所述的設(shè)備，其中，執(zhí)行所述指令以識(shí)別所述所關(guān)心的潛在源進(jìn)一步包括執(zhí)行所述真實(shí)空間表示的分析，接收指示所述設(shè)備和所述所關(guān)心的潛在源之間的距離的信號(hào)，或者接收來(lái)自外部裝置的信號(hào)中的至少之一。方案16.根據(jù)方案15所述的設(shè)備，其中，執(zhí)行分析包括針對(duì)所述所關(guān)心的潛在源搜索所述真實(shí)空間表示。方案17.根據(jù)方案I所述的設(shè)備，其中，所述設(shè)備是用戶裝置并且所述控制單元執(zhí)行所述指令以向遠(yuǎn)程服務(wù)器發(fā)送信號(hào)以識(shí)別所關(guān)心的潛在源。
方案18.根據(jù)方案I所述的設(shè)備，其中，所述設(shè)備是服務(wù)器并且所述控制單元執(zhí)行所述指令以發(fā)送信號(hào)以識(shí)別所關(guān)心的潛在源，其包括向用戶裝置發(fā)送信號(hào)以識(shí)別所關(guān)心的潛在源。附圖標(biāo)記列表I真實(shí)空間10 障礙物(危險(xiǎn)物體的示例)12 樓梯(危險(xiǎn)物體的示例)20a-c外部裝置100 信息處理裝置 102 成像單元104 傳感器單元106 定位單元108 通信單元110 存儲(chǔ)單元150 估計(jì)單元160 信息獲取單元170 危險(xiǎn)識(shí)別單元180 報(bào)警單元190 設(shè)定單元
權(quán)利要求
1.ー種信息處理設(shè)備,包括 識(shí)別單元，其被配置成針對(duì)用戶顯示疊加到真實(shí)空間表示上的第一虛擬圖像，以及識(shí)別所述用戶所關(guān)心的潛在源，其中所述所關(guān)心的潛在源位于所述真實(shí)空間表示中的用戶關(guān)注區(qū)域外部；以及 通知単元，其被配置成向所述用戶通知所述所關(guān)心的潛在源。
2.根據(jù)權(quán)利要求I所述的信息處理設(shè)備，其中，所述識(shí)別単元被配置成通過(guò)分析用于創(chuàng)建所述真實(shí)空間表示的輸入信號(hào)來(lái)識(shí)別所關(guān)心的潛在源。
3.根據(jù)權(quán)利要求I所述的信息處理設(shè)備，其中，所述所關(guān)心的潛在源包括關(guān)于所述用戶的危險(xiǎn)的潛在源。
4.根據(jù)權(quán)利要求I所述的信息處理設(shè)備，其中，所述所關(guān)心的潛在源至少部分地被所述第一虛擬圖像遮蔽。
5.根據(jù)權(quán)利要求I所述的信息處理設(shè)備，其中，所述通知單元還被配置成變更所述第一虛擬圖像。
6.根據(jù)權(quán)利要求I所述的信息處理設(shè)備，其中，所述通知単元被配置成通過(guò)生成聽(tīng)覺(jué)警報(bào)、觸覺(jué)警報(bào)或視覺(jué)警報(bào)中的至少ー個(gè)來(lái)向所述用戶通知所述關(guān)心的潛在源。
7.根據(jù)權(quán)利要求I所述的信息處理設(shè)備，其中，所述視覺(jué)報(bào)警包括第二虛擬圖像。
8.根據(jù)權(quán)利要求I所述的信息處理設(shè)備，還包括監(jiān)視單元，其被配置成監(jiān)視用戶行為，其中，所述識(shí)別単元被配置成部分地基于由所述監(jiān)視単元所監(jiān)視的用戶行為來(lái)識(shí)別所述所關(guān)心的潛在源。
9.根據(jù)權(quán)利要求8所述的信息處理設(shè)備，還包括確定單元，其被配置成基于由所述監(jiān)視單元所監(jiān)視的用戶行為來(lái)確定所述用戶是否知道所述所關(guān)心的潛在源。
10.根據(jù)權(quán)利要求8所述的信息處理設(shè)備，其中，監(jiān)視的用戶行為包括一系列行為。
11.根據(jù)權(quán)利要求10所述的信息處理設(shè)備，其中，所述識(shí)別単元被配置成通過(guò)將所述一系列行為中的行為數(shù)目與用戶行為數(shù)目閾值比較來(lái)確定所述用戶是否知道所述所關(guān)心的潛在源。
12.根據(jù)權(quán)利要求10所述的信息處理設(shè)備，其中，所述識(shí)別単元被配置成確定所述ー系列行為是否指示所述用戶已避免所述所關(guān)心的潛在源或者已接近所述所關(guān)心的潛在源兩者至少之一。
13.根據(jù)權(quán)利要求8所述的信息處理設(shè)備，其中，所述識(shí)別単元被配置成至少部分地基于監(jiān)視的用戶行為來(lái)確定所述用戶是否關(guān)心所述所關(guān)心的潛在源。
14.根據(jù)權(quán)利要求13所述的信息處理設(shè)備，其中，監(jiān)視的用戶行為是對(duì)所述所關(guān)心的潛在源所屬類(lèi)型的所關(guān)心的潛在源的反應(yīng)。
15.根據(jù)權(quán)利要求I所述的信息處理設(shè)備，其中，所述識(shí)別単元被配置成執(zhí)行如下操作中的至少之ー以識(shí)別所述所關(guān)心的潛在源執(zhí)行所述真實(shí)空間表示的分析，接收指示所述設(shè)備和所述所關(guān)心的潛在源之間的距離的信號(hào)，或者接收來(lái)自外部裝置的信號(hào)。
16.根據(jù)權(quán)利要求15所述的信息處理設(shè)備，其中，執(zhí)行分析包括針對(duì)所述所關(guān)心的潛在源捜索所述真實(shí)空間表示。
17.根據(jù)權(quán)利要求I所述的信息處理設(shè)備，其中，所述信息處理設(shè)備是用戶裝置，并且所述用戶裝置被配置成向遠(yuǎn)程服務(wù)器發(fā)送信號(hào)以識(shí)別所關(guān)心的潛在源。
18.根據(jù)權(quán)利要求I所述的信息處理設(shè)備，其中，所述信息處理設(shè)備是服務(wù)器，并且所述服務(wù)器被配置成識(shí)別所關(guān)心的潛在源，其包括向用戶裝置發(fā)送信號(hào)以識(shí)別所關(guān)心的潛在源。
19.ー種信息處理裝置，包括根據(jù)權(quán)利要求I至18中任一項(xiàng)所述的信息處理設(shè)備，以便識(shí)別所關(guān)心的潛在源。
20.根據(jù)權(quán)利要求19所述的信息處理裝置，其中，所述信息處理設(shè)備是用戶裝置，并且所述用戶裝置被配置成向遠(yuǎn)程服務(wù)器發(fā)送信號(hào)以識(shí)別所關(guān)心的潛在源。
21.根據(jù)權(quán)利要求19所述的信息處理裝置，其中，所述信息處理設(shè)備是服務(wù)器，并且所述服務(wù)器被配置成向用戶裝置發(fā)送信號(hào)以識(shí)別所關(guān)心的潛在源。
22.—種方法,包括 針對(duì)用戶顯示疊加到真實(shí)空間表示上的虛擬圖像； 識(shí)別所述用戶所關(guān)心的潛在源，所述所關(guān)心的潛在源位于所述真實(shí)空間表示中的用戶關(guān)注區(qū)域外部；以及 向所述用戶通知所述所關(guān)心的潛在源。
23.一種存儲(chǔ)指令的有形地實(shí)施的非暫態(tài)的計(jì)算機(jī)可讀介質(zhì)，所述指令在由處理器執(zhí)行時(shí)，執(zhí)行包括以下步驟的方法 針對(duì)用戶顯示疊加到真實(shí)空間表示上的虛擬圖像； 識(shí)別所述用戶所關(guān)心的潛在源，所述所關(guān)心的潛在源位于所述真實(shí)空間表示中的用戶關(guān)注區(qū)域外部；以及 向所述用戶通知所述所關(guān)心的潛在源。
全文摘要
本公開(kāi)涉及信息處理裝置、報(bào)警方法和程序。提供了一種包括存儲(chǔ)指令的存儲(chǔ)器的設(shè)備。該設(shè)備包括控制單元，該控制單元用于執(zhí)行指令以發(fā)送信號(hào)，以針對(duì)用戶顯示疊加到真實(shí)空間表示上的第一虛擬圖像。該控制單元進(jìn)一步執(zhí)行指令以發(fā)送信號(hào)，以識(shí)別用戶所關(guān)心的潛在源，所關(guān)心的潛在源位于真實(shí)空間表示中的用戶關(guān)注區(qū)域外部。該控制單元進(jìn)一步執(zhí)行指令以發(fā)送信號(hào)，以向用戶通知所關(guān)心的潛在源。
文檔編號(hào)G08B21/02GK102682571SQ20121001891
公開(kāi)日2012年9月19日 申請(qǐng)日期2012年1月20日 優(yōu)先權(quán)日2011年1月28日
發(fā)明者吳嘉寧, 多井堅(jiān)一郎, 巖井嘉昭, 本間俊一, 貝野彰彥 申請(qǐng)人:索尼公司