信息處理設備、信息處理方法以及程序的制作方法
【專利摘要】所提供的是一種信息處理設備,包括:聲音輸出控制單元,配置成基于虛擬位置生成聲音標記的定位信息;以及聲音輸出單元,配置成基于定位信息輸出與聲音標記相關聯(lián)的聲音,其中,基于在空間中所存在的真實物體的位置確定虛擬位置。
【專利說明】信息處理設備、信息處理方法以及程序
【技術領域】
[0001] 本公開涉及一種信息處理設備、信息處理方法以及程序。
【背景技術】
[0002] 近年,用戶所獲得的信息量持續(xù)增加。至少由于這個原因,將如何提取用戶必需的 信息或?qū)⑷绾翁峁┬畔⒌膯栴}變得越來越重要。因此,提議了使用聲音的信息呈現(xiàn)。例如, PTL1公開了一種使用具有指向性的聲音為用戶提供信息的信息處理設備。用戶可以使用他 或她面部的定向從由信息處理設備所提供的多個聲音中選擇聲音。
[0003] 引用列表
[0004] 專利文獻
[0005] PTL1:JP 2008-92193A
[0006] 注意力還指向所謂的增強現(xiàn)實(AR)技術,在該技術中,附加信息通過被疊加在真 實圖像上而被呈現(xiàn)給用戶。在AR技術中,被呈現(xiàn)給用戶的信息也被稱為注釋,其可以被可 視化為各種形式的虛擬物體,例如,文字、圖標以及動畫。
【發(fā)明內(nèi)容】
[0007] 技術問題
[0008] 在AR【技術領域】很少考慮到使用聲音進行信息呈現(xiàn)。因此,本公開提議了一種新穎 的并且改進的信息處理設備、信息處理方法以及程序,其能夠基于虛擬物體的位置生成屬 于該虛擬物體的聲音的定位信息。
[0009] 問題的解決方案
[0010] 根據(jù)本公開的實施例,提供了一種信息處理設備,包括:聲音輸出控制單元,配置 成基于虛擬位置生成聲音標記的定位信息;以及聲音輸出單兀,配置成基于定位信息輸出 與聲音標記相關聯(lián)的聲音,其中,基于在空間中所存在的真實物體的位置確定虛擬位置。 [0011] 此外,根據(jù)本公開的實施例,提供了一種信息處理方法,包括:基于虛擬位置生成 聲音標記的定位信息,以及基于定位信息輸出與聲音標記相關聯(lián)的聲音,其中,基于在空間 中所存在的真實物體的位置確定虛擬位置。
[0012] 此外,根據(jù)本公開的實施例,提供了一種包含有程序的非暫態(tài)計算機可讀介質(zhì),該 程序當由計算機所執(zhí)行時使得計算機執(zhí)行下述方法,該方法包括:基于虛擬位置生成聲音 標記的定位信息,以及基于定位信息輸出與聲音標記相關聯(lián)的聲音,其中,基于在空間中所 存在的真實物體的位置確定虛擬位置。
[0013] 此外,根據(jù)本公開的實施例,提供了一種信息處理設備,包括:獲取單元,獲取基于 在空間中所存在的真實物體的位置所確定的虛擬物體的虛擬位置;以及定位信息生成單 元,基于虛擬位置生成指示與虛擬物體相關聯(lián)的聲音信息的聲音源位置的定位信息。
[0014] 此外,根據(jù)本公開的實施例,提供了一種信息處理方法,包括:獲取基于在空間中 所存在的真實物體的位置所確定的虛擬物體的虛擬位置;以及基于虛擬位置生成指示與虛 擬物體相關聯(lián)的聲音信息的聲音源位置的定位信息。
[0015] 此外,根據(jù)本公開的實施例,提供了一種使得計算機用作信息處理設備的程序,該 信息處理設備包括:獲取單元,獲取基于在空間中所存在的真實物體的位置所確定的虛擬 物體的虛擬位置;以及定位信息生成單元,基于虛擬位置生成指示與虛擬物體相關聯(lián)的聲 音信息的聲音源位置的定位信息。
[0016] 發(fā)明的有利效果
[0017] 根據(jù)如上所述的本公開,可以基于虛擬物體的位置生成屬于虛擬物體的聲音的定 位信息。
【專利附圖】
【附圖說明】
[0018] 圖1是示出了由根據(jù)本公開的實施例的信息處理設備所提供的用戶體驗的概述 的說明圖。
[0019] 圖2是示出了由根據(jù)本公開的實施例的信息處理設備所提供的視覺標記的示例 的說明圖。
[0020] 圖3是示出了由根據(jù)本公開的實施例的信息處理設備所提供的視覺標記的另一 示例的說明圖。
[0021] 圖4是示出了用于根據(jù)本公開的實施例的信息處理設備的操作的示例的說明圖。
[0022] 圖5是示出了根據(jù)本公開的實施例的信息處理設備的功能配置的框圖。
[0023] 圖6是示出了根據(jù)本公開的實施例的信息處理設備的硬件配置示例的框圖。
[0024] 圖7是用于描述根據(jù)本公開的實施例的信息處理設備的信息呈現(xiàn)操作的示例的 流程圖。
[0025] 圖8是用于描述在根據(jù)本公開的實施例的信息處理設備中的第二信息和聲音的 呈現(xiàn)操作的示例的流程圖。
[0026] 圖9是示出了在根據(jù)本公開的實施例的信息處理設備中、當不進行選擇主要信息 的用戶操作而忽略信息時生成定位信息的示例的說明圖。
[0027] 圖10是示出了在根據(jù)本公開的實施例的信息處理設備中、當用戶執(zhí)行選擇主要 信息的操作時生成定位信息的示例的說明圖。
[0028] 圖11是示出了在根據(jù)本公開的實施例的信息處理設備中、當用戶改變他或她面 部的定向時在第一狀態(tài)中生成定位信息的示例的說明圖。
[0029] 圖12是示出了在根據(jù)本公開的實施例的信息處理設備中、當用戶改變他或她面 部的定向時在第二狀態(tài)中生成定位信息的示例的說明圖。
[0030] 圖13是示出了在根據(jù)本公開的實施例的信息處理設備中、當用戶改變他或她面 部的定向時在第三狀態(tài)中生成定位信息的示例的說明圖。
【具體實施方式】
[0031] 在下文中,將參照附圖詳細地描述本公開的實施例。注意,在本說明書和附圖中, 采用相同的附圖標記標示基本上具有相同的功能和結構的結構性元件,并且省略這些結構 性元件的重復說明。
[0032] 注意,將按照下面的順序提供說明。
[0033] 1.概述
[0034] 2.配置示例
[0035] 2-1.功能配置示例
[0036] 2-2.硬件配置示例
[0037] 3.操作示例
[0038] 4.定位信息的生成
[0039] 〈1.概述〉
[0040] 首先,將參照圖1至圖4描述由根據(jù)本公開的實施例的信息處理設備所提供的用 戶體驗的概述。圖1是示出了由根據(jù)本公開的實施例的信息處理設備所提供的用戶體驗的 概述的說明圖。圖2是示出了由根據(jù)本公開的實施例的信息處理設備所提供的視覺標記的 示例的說明圖。圖3是示出了由根據(jù)本公開的實施例的信息處理設備所提供的視覺標記的 另一示例的說明圖。圖4是示出了用于根據(jù)本公開的實施例的信息處理設備的操作的示例 的說明圖。
[0041] 根據(jù)本公開的實施例的信息處理設備10可以使用視覺信息和聲音信息提供與在 真實空間中所存在的真實物體現(xiàn)相關聯(lián)的信息。在下文中,還將視覺信息稱為視覺標記Μν 或虛擬物體。另外,還將聲音信息稱為聲音標記Ms。信息處理設備10可以基于例如真實物 體的位置確定視覺標記Μν的位置。另外,信息處理設備10可以基于視覺標記Μν的位置確 定聲音標記Ms的聲音源位置。信息處理設備10可以以疊加的方式將視覺標記Μν顯示在例 如所成像的視頻中的真實物體的位置上。另外,信息處理設備10可以仿佛從所成像的視頻 中的真實物體的位置聽到聲音標記地確定聲音標記Ms的聲音源位置(圖1)。注意,圖1僅 是圖像,并且聲音標記Ms實際上可以是不可見的。可以使用聲音提供聲音標記Ms。此外, 信息處理設備10可以將通過根據(jù)用戶的偏好、目的等、對與位于用戶附近的真實物體相關 聯(lián)的信息進行過濾所獲得的信息提供給用戶。
[0042] 圖2示出了視覺標記Μν的示例。視覺標記Μν可以通過以疊加的方式顯示在例如 由攝像裝置所成像的視頻上而被提供給用戶。另外,可以使用HMD(頭戴式顯示器)提供視 覺標記Μν。過濾后的信息可以首先被提供為例如視覺標記Μν的主要信息Mvl。主要信息 Mvl例如可以是與具有簡潔的粒度(granularity)的對應位置相關聯(lián)的信息,以便將信息 的概述通知給用戶。當用戶未針對主要信息Mvl執(zhí)行任何操作時,忽略信息。
[0043] 另一方面,當用戶針對所顯示的主要信息Mvl執(zhí)行選擇操作時,可以將更詳細地 信息提供給用戶。例如,根據(jù)選擇操作,可以顯示第二信息Mv2,第二信息Mv2包括比主要信 息Mvl更詳細的信息。另外,可以隨著第二信息Mv2的顯示提供聲音標記Ms。具體地,可以 將聲音標記Ms提供為具有指向性的聲音??梢曰谝曈X標記Μν的位置與用戶位置之間的 位置關系決定聲音標記Ms的聲音源位置。因此,用戶可以從聽見聲音標記Ms的方向上察 覺到視覺標記Μν的位置。
[0044] 另外,在圖3中示出了提供視場之外的信息的示例。信息處理設備10可以使得視 覺標記Μν的主要信息Mvl顯示在顯示區(qū)域的邊緣上。當檢測到針對與在視場之外的位置 相關聯(lián)的信息的主要信息Mvl的選擇操作時,信息處理設備10可以使得第二信息Mv2顯示 在顯示區(qū)域的邊緣上,并且可以輸出聲音標記Ms。
[0045] 在此用于使用第二信息Mv2和聲音標記Ms獲取信息的選擇操作可能依賴于信息 處理設備10的種類。例如,當信息處理設備10是HMD時,可以使用用戶面部的定向執(zhí)行操 作。另外,當信息處理設備10是移動電話時,可以按照相同的方式使用用戶面部的定向、或 使用觸摸傳感器、按鈕等執(zhí)行操作。圖4示出了使用用戶面部的定向的操作的示例。例如, 當信息處理設備10基于用戶面部的定向檢測到點頭移動時,該移動可以被確定為獲取指 定信息的操作。另外,當信息處理設備10基于用戶面部的定向檢測到頭部的搖擺移動時, 該移動可以被確定為取消指定信息的選擇的操作。
[0046] 注意,在此示出了與街道上的招牌相關聯(lián)的商店信息的示例,但是本技術不限于 此示例。例如,本技術還可以用于規(guī)避風險的目的。在享受慢跑或騎行的同時通過耳機聽 音樂的人越來越多。在這種情形下,存在因為難以聽見環(huán)境聲音導致未察覺接近的車輛而 發(fā)生事故的高的可能性。因此,當車輛接近用戶時,通過顯示虛擬引擎聲音作為聲音標記Ms 并且顯示車輛圖像作為視覺標記Mv,可以使得即使聽音樂時也可以最小化或規(guī)避風險。在 下文中,針對實現(xiàn)這樣的用戶體驗,將詳細地描述依照本公開的實施例的信息處理設備10。
[0047] 〈2.配置示例〉
[0048] 在此,將描述根據(jù)本公開的實施例的信息處理設備10的配置。首先,將參照圖5 描述信息處理設備10的功能配置示例,并且將參照圖6描述信息處理設備10的硬件配置 示例。圖5是示出了根據(jù)本公開的實施例的信息處理設備的功能配置的框圖。圖6是示出 了根據(jù)本公開的實施例的信息處理設備的硬件配置示例的框圖。
[0049] 2-1.功能配置示例
[0050] 參照圖5,根據(jù)本公開的實施例的信息處理設備10主要可以包括操作單元105、操 作信息獲取單元110、顯示單元115、顯示控制單元120、聲音輸出單元125、以及聲音輸出控 制單元130。
[0051] (操作單元105)
[0052] 操作單元105可以具有諸如生成用于執(zhí)行用戶所期望的操作的輸入信號的功能。 例如,操作單元105可以包括:輸入部,諸如用于由用戶輸入信息的觸摸面板、鼠標、鍵盤、 按鈕、麥克風、開關、桿以及各種傳感器;輸入控制電路,基于用戶的輸入生成并且輸出輸入 信號,等等。例如,操作單元105可以基于由傳感器所檢測到的用戶面部的定向生成并且輸 出輸入信號。另外,例如操作單元105可以檢測到由用戶對觸摸傳感器所執(zhí)行的操作,并且 然后基于相對應的操作生成并且輸出輸入信號。
[0053] (操作信息獲取單元110)
[0054] 操作信息獲取單元110可以具有諸如獲取由用戶所輸入的操作信息的功能。例 如,操作信息獲取單元Π 0可以獲取從操作單元105所輸出的輸入信號作為操作信息。信 息處理設備10可以基于由操作信息獲取單元110所獲取的操作信息進行操作。
[0055] (顯示單元115)
[0056] 顯示單元115是輸出裝置的示例,并且可以是諸如液晶顯示器(IXD)裝置、或有機 EL(或0LED:有機發(fā)光二極管)顯示裝置的顯示裝置。另外,顯示單元115可以是HMD。顯 示單元115可以根據(jù)顯示控制單元120的控制進行操作。
[0057] (顯示控制單元120)
[0058] 顯示控制單元120可以具有諸如控制要被提供給用戶的顯示屏幕的內(nèi)容的功能。 例如,顯示控制單元120可以使得視覺標記Mv顯示在光透射類型HMD上。替選地,顯示控 制單元120可以使得通過將視覺標記Mv疊加在通過對用戶的視場成像所獲的視頻上所獲 得的視頻顯示在視頻透射類型HMD上。另外,顯示控制單元120可以基于由操作信息獲取 單元110所獲取的操作信息控制顯示屏幕的內(nèi)容。例如,當獲取針對視覺標記Mv的主要信 息Mvl的選擇操作時,顯示控制單元120可以使得與主要信息相對應的第二信息Mv2顯示 在顯示屏幕上。注意,顯示控制單元120是獲取單元的示例,該獲取單元獲取基于在空間中 所存在的真實物體的位置所確定虛擬物體的位置(在下文中稱為虛擬位置),但是不限于 此。
[0059] (聲音輸出單兀I25)
[0060] 聲音輸出單兀125可以具有諸如輸出聲音信號的功能。聲音輸出單兀125例如可 以是揚聲器。另外,聲音輸出單兀125可以是將聲音信號輸出到諸如耳機的聲音輸出裝置 的輸出端子。聲音輸出單元125可以根據(jù)聲音輸出控制單元130的控制進行操作。在此所 使用的聲音輸出裝置可能夠根據(jù)聲音的定位信息輸出立體聲。
[0061] (聲音輸出控制單兀130)
[0062] 聲音輸出控制單元130可以具有諸如控制到用戶的聲音輸出的功能。另外,聲音 輸出控制單元130是定位信息生成單元的示例,該定位信息生成單元生成指示聲音源位置 的定位信息,但是不限于此。聲音輸出控制單元130可以基于例如虛擬位置,生成指示與和 虛擬物體有關的真實物體相同的真實物體相關聯(lián)的聲音信息(例如,與虛擬物體有關的聲 音信息)的聲音源位置的定位信息。聲音輸出控制單元130還可以基于用戶位置與虛擬位 置之間的距離生成定位信息。
[0063] 具體地,當用戶位置與虛擬位置之間的距離等于或大于閾值(閾值可以是預定的 或可以不是預定的)時,聲音輸出控制單元130可以使得與虛擬位置相比聲音源位置更接 近用戶的前方。另外,當用戶位置與虛擬位置之間的距離小于閾值時,聲音輸出控制單元 130可以將聲音源位置從用戶的前方移動到更接近虛擬位置的方向。與來自側面區(qū)域的聲 音相比,人類傾向于對來自前方的區(qū)域的聲音的方向具有更高的識別能力。由于這個原因, 例如與右側相比,人類可以更容易識別前方的靜止聲音的方向。另外,與靜止的聲音的方向 相比,人類傾向于更容易地識別出聲音源位置移動的聲音的方向。由于這個原因,當虛擬位 置與用戶位置分離為預定距離或更長的距離時,例如,即使當從用戶看去聲音源位置位于 斜前方時,也存在用戶不可以識別出這樣的聲音源位置的差異的高的可能性。因此,當虛擬 位置與用戶位置分離為預定距離或更長的距離時,聲音源位置可以被設置為在用戶的前方 偵牝并且當用戶接近虛擬位置時,聲音源位置可以從用戶的前方側被移動到更接近虛擬位 置的方向,使得用戶可以更容易地識別出虛擬位置的方向。
[0064] 另外,聲音輸出控制單元130可以根據(jù)用戶面部的定向的改變,改變聲音源位置。 在這種情況下,當虛擬物體的位置位于用戶的前方區(qū)域(該區(qū)域可以是預定的或可以不是 預定的)時,可以期望將聲音源位置設置為虛擬位置。聲音輸出控制單元130可以根據(jù)所 生成的定位信息輸出聲音標記Ms。
[0065] 在上文中,示出了根據(jù)實施例的信息處理設備10的功能的示例??梢允褂猛ㄓ?構件或電路構成以上所述的各個構成元件,或可以使用針對各個構成元件的功能所指定 的硬件構成以上所述的各個構成元件。另外,可以通過從存儲控制程序的存儲介質(zhì)(諸如 ROM(只讀存儲器)或RAM(隨機存取存儲器))讀取控制程序并且通過對程序進行編譯實現(xiàn) 各個構成元件的功能,控制程序描述了諸如CPU (中央處理單元)的算術運算單元實現(xiàn)功能 的過程。因此,可以根據(jù)實施本實施例時的技術水平適當?shù)馗淖円皇褂玫呐渲?。在下?中,將示出信息處理設備10的硬件配置的示例。
[0066] 可以建立用于實現(xiàn)如上所述的根據(jù)實施例的信息處理設備10的每個功能的計算 機程序,并且其可以被安裝在個人計算機等中。另外,還可以提供存儲這樣的計算機程序并 且在計算機上可讀取的記錄介質(zhì)。記錄介質(zhì)可以包括,例如,磁盤、光盤、磁光盤、閃速存儲 器等。另外,例如可以通過網(wǎng)絡而不使用記錄介質(zhì)遞送計算機程序。
[0067] 2. 2硬件配置示例
[0068] 接下來,將參照圖6描述根據(jù)本公開的實施例的信息處理設備10的硬件配置示 例。信息處理設備10可以包括CPU 150、RAM 155、非易失性存儲器160、顯示裝置165、面 部定向檢測裝置170、以及聲音圖像定位音頻裝置175。
[0069] (CPU 150)
[0070] CPU 150可以用作例如算術處理單元或控制單元,并且可以基于在RAM 155、非易 失性存儲器160等上所記錄的各種程序控制每個構成元件的所有或一些操作。
[0071] (RAM 155)
[0072] RAM 155可以暫時地存儲在CPU 150中所讀取的程序、在程序執(zhí)行期間適當?shù)馗?變的參數(shù)等。
[0073](非易失性存儲器160)
[0074] 非易失性存儲器160可以是在斷電的情況下仍可保持存儲的存儲裝置。非易失性 存儲器160例如可以用作輔助存儲裝置或長期存儲器存儲。非易失性存儲器160可以是半 導體存儲器,例如,ROM(只讀存儲器)、閃速存儲器等。另外,非易失性存儲器160可以是諸 如HDD(硬盤驅(qū)動器)的磁存儲裝置、光盤等。
[0075] (顯示裝置165)
[0076] 顯示裝置165可以是具有顯示功能的裝置,例如HMD等。替選地,顯示裝置165可 以是諸如液晶顯示器(LCD)裝置或有機EL (或0LED :有機發(fā)光二極管)顯示裝置的顯示裝 置。
[0077] (面部定向檢測裝置170)
[0078] 面部定向檢測裝置170可以具有檢測用戶面部的定向的功能。面部定向檢測裝置 170可以是例如具有三軸加速度傳感器的HMD。在這種情況下,顯示裝置165和面部定向檢 測裝置170可以被當做同一裝置。
[0079](聲音圖像定位音頻裝置I75)
[0080] 聲音圖像定位音頻裝置175可以是可以執(zhí)行聲音圖像定位的音頻裝置。聲音圖像 定位音頻裝置175可以基于定位信息輸出具有指向性的聲音。
[0081] 〈3.操作示例〉
[0082] 接下來,將參照圖7和圖8描述根據(jù)本公開的實施例的信息處理設備10的操作示 例。圖7是用于描述根據(jù)本公開的實施例的信息處理設備的信息呈現(xiàn)操作的示例的流程 圖。圖8是用于描述在根據(jù)本公開的實施例的信息處理設備中的第二信息和聲音的呈現(xiàn)操 作的示例的流程圖。
[0083] 首先,參照圖7,顯示控制單元120可以確定信息是否正在被呈現(xiàn)(S100)。然后, 當在步驟S100中確定信息未正在被呈現(xiàn)時,顯示控制單元120可以確定要被呈現(xiàn)的信息是 否在固定的區(qū)域中(S105)。當在步驟S105的確定中確定要被呈現(xiàn)的信息在固定區(qū)域中時, 顯示控制單元120可以呈現(xiàn)視覺標記Mv的主要信息Mvl (S110)。
[0084] 另一方面,當在步驟S100中確定信息正在被呈現(xiàn)時,顯示控制單元120可以確定 主要信息Mvl是否正在被呈現(xiàn)(S115)。然后,當在步驟S115中確定主要信息未正在被呈現(xiàn) 時(換言之,第二信息正在被呈現(xiàn)時),可以關于操作信息獲取單元110是否識別處頭部搖 擺做出確定(S140)。然后,當在步驟S140的確定中未識別出頭部搖擺時,可以關于是否經(jīng) 過了固定的時間(從第二信息開始被呈現(xiàn)時起)做出確定(步驟S145)。然后,當經(jīng)過固定 的時間或當識別出頭部搖擺時,顯示控制單元120和聲音輸出控制單元130可以完成信息 呈現(xiàn)(S150)。
[0085] 另一方面,當在步驟S115的確定中確定主要信息正在被呈現(xiàn)時,然后可以確定操 作信息獲取單元110是否識別出點頭(S120)。然后,當在步驟S120的確定中確定識別出點 頭時,顯示控制單元120和聲音輸出控制單元130可以將第二信息和聲音信息呈現(xiàn)給用戶 (S125)。另一方面,當在步驟S120的確定中確定未識別出點頭時,關于是否經(jīng)過固定時間 (從主要信息開始被呈現(xiàn)時起)做出確定(S130)。然后,當在步驟S130的確定中確定經(jīng)過 固定時間時,顯示控制單元120可以完成主要信息的呈現(xiàn)(S135)。
[0086] 現(xiàn)在,將參照圖8詳細地描述在步驟S125中所示的第二信息和聲音信息的呈現(xiàn)操 作。
[0087] 參照圖8,首先,顯示控制單元120可以確定視覺標記Mv的第二信息Mv2的顯示位 置(S200)。在此,第二信息Mv2可以包括比主要信息Mvl更詳細的信息。
[0088] 接下來,基于視覺標記Mv的顯示位置,可以生成聲音標記Ms的定位信息(S205)。 稍后將更詳細地描述定位信息的生成。此外,可以基于視覺標記Mv的位置確定聲音標記Ms 的聲音源位置。
[0089] 然后,顯示控制單元120可以顯示視覺標記Mv,并且聲音輸出控制單元130可以使 得基于定位信息輸出聲音標記Ms (S210)。
[0090] 〈4.定位信息的生成〉
[0091] 接下來,將參照圖9至圖13詳細地描述定位信息的生成。圖9是示出了在根據(jù)本 公開的實施例的信息處理設備中、當不進行選擇主要信息的用戶操作而忽略信息時生成定 位信息的示例的說明圖。圖10是示出了在根據(jù)本公開的實施例的信息處理設備中、當用戶 執(zhí)行選擇主要信息的操作時生成定位信息的示例的說明圖。圖11是示出了在根據(jù)本公開 的實施例的信息處理設備中、當用戶改變他或她面部的定向時在第一狀態(tài)中生成定位信息 的示例的說明圖。圖12是示出了在根據(jù)本公開的實施例的信息處理設備中、當用戶改變他 或她面部的定向時在第二狀態(tài)中生成定位信息的示例的說明圖。圖13是示出了在根據(jù)本 公開的實施例的信息處理設備中、當用戶改變他或她面部的定向時在第三狀態(tài)中生成定位 信息的示例的說明圖。
[0092] 如上所述,可以基于視覺標記Mv的位置確定聲音標記Ms的聲音源位置。為了從 視覺標記Mv的方向聽見聲音,可以將視覺標記Mv的位置簡單地設置為聲音標記Ms的聲音 源位置。注意,人類的聽覺具有各種特征。因此,可以期望確定聲音源位置,使得人類依照 人類的聽覺特征容易地識別出聲音的方向和距離。在下文中,將連同所給出的若干示例一 起描述聲音標記Ms的聲音源位置。
[0093] 首先,參照圖9的示例,考慮真實物體從斜前方側通過用戶側面的情況。在這種情 況下,因為在時間t0時,真實物體存在于用戶的可見區(qū)域中,所以視覺標記Mv可以顯示在 真實物體的位置處。之后,在時間tl時,真實物體位于用戶的可見區(qū)域之外。因此,此時, 視覺標記Mv可以顯示在視覺區(qū)域的邊緣(顯示屏幕的邊緣)。然后,視覺標記Mv可以顯示 在可見區(qū)域的邊緣上,直到真實物體基本上位于用戶的旁邊。
[0094] 在這種情況下,與視覺標記Mv的位置相比,聲音標記Ms的聲音源位置可以位于更 接近用戶的前方側,直到視覺標記Mv與用戶之間的距離變?yōu)榭梢允腔蚩梢圆皇穷A定的閾 值(在此,虛擬半徑R以用戶作為中心)為止。另外,如果虛擬標記Mv與用戶之間的距離 小于閾值,則聲音標記Ms的聲音源位置可以畫出下述軌跡,該軌跡在以用戶位置作為中心 的虛擬半徑R的圓周上移動。例如,聲音標記Ms的聲音源位置可以在圓周上旋轉,直到位 置位于用戶正后方為止,并且然后后退。
[0095] 如上所述,人類對于接近前方側的區(qū)域中的聲音具有較高分辨能力。另一方面,人 類對于在橫向側中的聲音具有較低的分辨能力。由于這個原因,在圖9的示例中,依照視覺 標記Mv的位置,與當聲音源位置斜向地接近用戶時相比,當聲音源位置在接近前方側的區(qū) 域內(nèi)直線地接近用戶時,更容易感受到聲音源位置的距離感。另外,通過沿著虛擬半徑R的 圓周旋轉聲音的位置,更容易地識別出聲音通過的感受。
[0096] 接下來,參照圖10,示出了用戶針對主要信息執(zhí)行選擇操作的情況。在這種情況 下,因為在時間to時,真實物體存在于用戶的可見區(qū)域中,所以視覺標記Mv可以顯示在真 實物體的位置處。此時,如果用戶執(zhí)行用于視覺標記Mv的選擇操作,則視覺標記Mv可以移 動以便在時間tl和t2時,顯示在用戶的前方側。之后,在時間t3時,視覺標記Mv可以消 失到可見區(qū)域的外部。
[0097] 在這種情況下,在時間t0時,聲音標記Ms的聲音源位置可以在用戶的前方側,而 不是在視覺標記Mv的位置處。然后,聲音標記Ms的聲音源位置可以直線地接近用戶,直到 用戶與視覺標記Mv之間的距離變?yōu)榭梢允穷A定的或可以不是預定的半徑R為止。之后,隨 著視覺標記Mv顯示在用戶的前方側,聲音標記Ms的聲音源位置可以一度移動到用戶的前 方側。之后,隨著視覺標記Mv消失到可見區(qū)域的外部,聲音標記Ms的聲音源位置可以后退, 而同時在以用戶作為中心的半徑R的圓周上旋轉。
[0098] 接下來,參照圖11至圖13,將討論當用戶的面部定向改變時聲音標記Ms的聲音源 位置。例如假定,真實物體(t0)位于右側的斜前方。然后,如圖11所示,聲音標記Ms的聲 音源位置可以位于用戶的前方側而不是真實物體側。假定在此狀態(tài)下用戶面部的定向改變 為右側。然后,在此時(tl),可以改變聲音標記Ms的聲音源位置,以便更接近真實物體,如 圖12所示。另外,如果用戶面部的定向進一步改變,直到定向被設置為用戶的前方側為止, 則聲音標記Ms的聲音源位置可以是真實物體的位置。
[0099] 在上文中,參照附圖詳細地描述了本公開的實施例,但是本公開的技術范圍不限 于以上所述的實施例。本領域內(nèi)技術人員應當理解,依賴于設計需要和其他因素可以發(fā)生 各種修改、組合、子組合以及替換,只要其在所附的權利要求或其等價形式的范圍內(nèi)即可, 并且其當然被理解為屬于本公開的技術范圍。
[0100] 在以上所述的實施例中,例如,當檢測到針對主要信息的操作時,配置呈現(xiàn)第二信 息,但是本技術不限于此。例如,可以從開始時起呈現(xiàn)詳細的信息。替選地,可以在更多的 階段中呈現(xiàn)信息。
[0101] 此外,在本說明書中,在流程圖中所描述的步驟不僅包括依照所描述的順序按照 時間序列方式所執(zhí)行的處理,而且還包括并行地或以獨立地方式執(zhí)行的處理,而不必按照 時間序列執(zhí)行。另外,無需說明即使在按照時間序列方式所處理的步驟中,也可以適當?shù)馗?變順序而不改變期望的結果。
[0102] 另外,本技術還可以如下配置。
[0103] (1) 一種信息處理設備,包括:
[0104] 聲音輸出控制單元,配置成基于虛擬位置生成聲音標記的定位信息;以及
[0105] 聲音輸出單兀,配置成基于所述定位信息輸出與所述聲音標記相關聯(lián)的聲音,
[0106] 其中,基于在空間中所存在的真實物體的位置確定所述虛擬位置。
[0107] (2)根據(jù)⑴所述的信息處理設備,其中,所述聲音輸出單元還配置成在視覺標記 顯示在顯示單元的所述虛擬位置處的同時,以可聽見地方式輸出所述聲音。
[0108] (3)根據(jù)⑴所述的信息處理設備,其中,所述聲音輸出控制單元還配置成確定所 述聲音標記的聲音源位置。
[0109] (4)根據(jù)(3)所述的信息處理設備,其中,所述聲音輸出控制單元還配置成基于所 述虛擬位置確定所述聲音標記的所述聲音源位置。
[0110] (5)根據(jù)(3)所述的信息處理設備,其中,所述聲音輸出控制單元還配置成基于用 戶的位置與所述虛擬位置之間的距離,確定所述聲音標記的所述聲音源位置。
[0111] (6)根據(jù)(5)所述的信息處理設備,其中,當所述用戶的位置與所述虛擬位置之間 的所述距離大于閾值時,所述聲音輸出控制單元還配置成將所述聲音標記的所述聲音源位 置確定為與所述虛擬位置相比位于更接近所述用戶的正前方的位置處。
[0112] (7)根據(jù)(6)的信息處理設備,其中,當所述用戶的位置與所述虛擬位置之間的所 述距離小于閾值并且正在減小時,所述聲音輸出控制單元還配置成將所述聲音標記的所述 聲音源位置確定為相應地從所述用戶的前方側朝向所述真實物體移動。
[0113] (8)根據(jù)(5)的信息處理設備,其中,當所述用戶的位置與所述虛擬位置之間的所 述距離小于閾值時,所述聲音輸出控制單元還配置成將所述聲音標記的所述聲音源位置確 定為位于沿著以所述閾值為半徑且以所述用戶的位置為中心的圓周上的相應點處。
[0114] (9)根據(jù)⑶所述的信息處理設備,其中,當所述真實物體從所述用戶的前方側通 過到所述用戶的后方側時,所述聲音輸出控制單元還配置成將所述聲音標記的所述聲音源 位置確定為沿著所述圓周、從所述用戶的前方側移動到所述用戶的后方側,直到到達位于 所述用戶正后方處的位置為止,然后在該點處所述聲音標記的所述聲音源位置沿著向量路 徑后退離開所述用戶。
[0115] (10)根據(jù)(5)所述的信息處理設備,其中:
[0116] 當所述用戶的位置與所述虛擬位置之間的距離大于閾值時,所述聲音輸出控制單 元還配置成將所述聲音標記的所述聲音源位置確定為在所述用戶的前方側;以及
[0117] 當所述用戶接近與所述虛擬位置相對應的物理位置時,所述聲音輸出控制單元還 配置成將所述聲音標記的所述聲音源位置確定為沿著朝向所述虛擬位置的方向移動離開 所述用戶的前方側。
[0118] (11)根據(jù)(5)所述的信息處理設備,其中:
[0119] 隨著所述用戶的位置與所述虛擬位置之間的距離降低到接近閾值,所述聲音輸出 控制單元還配置成將所述聲音標記的所述聲音源位置確定為沿著與所述用戶一直向前的 方向平行的向量移動接近所述用戶的位置;
[0120] 隨著所述用戶的位置與所述虛擬位置之間的距離從所述閾值降低到所述虛擬位 置在所述用戶正前方的時間點處,所述聲音輸出控制單元還配置成將所述聲音標記的所述 聲音源位置確定為沿著以所述閾值為半徑且以所述用戶的位置為中心的圓周朝向位于所 述用戶正前方的位置移動;以及
[0121] 隨著所述虛擬位置從在所述用戶正前方朝向所述用戶的后方側移動,所述聲音輸 出控制單元還配置成將所述聲音標記的所述聲音源位置確定為從位于所述用戶正前方的 位置沿著所述圓周朝向所述用戶的后方側移動并且移動出所述用戶的可見區(qū)域。
[0122] (12)根據(jù)(5)所述的信息處理設備,其中,所述聲音輸出控制單元還配置成根據(jù) 用戶的面部定向的改變,改變所述聲音標記的所述聲音源位置。
[0123] (13)根據(jù)(3)所述的信息處理設備,其中,當所述虛擬位置在用戶前方的可見區(qū) 域中時,所述聲音輸出控制單元還配置成將所述聲音標記的所述聲音源位置設置為與所述 虛擬位置相同的位置。
[0124] (14)根據(jù)(3)所述的信息處理設備,其中,所述聲音源輸出控制單元還配置成確 定所述聲音標記的所述聲音源位置,使得用戶如同源自所述真實物體的位置那樣察覺到所 輸出的聲音。
[0125] (15)根據(jù)⑴所述的信息處理設備,還包括:
[0126] 顯示單元,配置成以與視頻圖像疊加的方式將視覺標記顯示在所述虛擬位置處。
[0127] (16)根據(jù)⑴所述的信息處理設備,還包括:
[0128] 頭戴式顯示器,配置成將視覺標記顯示在所述虛擬位置處。
[0129] (17)根據(jù)⑴所述的信息處理設備,其中,當所述真實物體存在于用戶的可見區(qū) 域內(nèi)時,所述虛擬位置被設置為位于所述真實物體的位置處。
[0130] (18)根據(jù)(1)所述的信息處理設備,其中,所述聲音輸出控制單元還配置成通過 對與位于接近用戶的真實物體相關聯(lián)的信息進行過濾,生成所述定位信息。
[0131] (19)根據(jù)(1)所述的信息處理設備,其中,所述聲音具有基于所述定位信息的指 向性。
[0132] (20)根據(jù)(1)所述的信息處理設備,其中,通過檢測由用戶所察覺到的聲音的頻 率在第一時間點與第二時間點之間的改變,確定所述真實物體的移動。
[0133] (21)根據(jù)(1)所述的信息處理設備,其中,所述聲音標記對于用戶不可見。
[0134] (22) 一種信息處理方法,包括:
[0135] 基于虛擬位置生成聲音標記的定位信息;以及
[0136] 基于所述定位信息輸出與所述聲音標記相關聯(lián)的聲音,
[0137] 其中,基于在空間中所存在的真實物體的位置確定所述虛擬位置。
[0138] (23)根據(jù)(22)所述的信息處理方法,其中,在視覺標記顯示在顯示單元的所述虛 擬位置處的同時,由音頻生成單元以可聽見地方式輸出所述聲音。
[0139] (24)根據(jù)(22)所述的信息處理方法,還包括:
[0140] 將視覺標記顯示在所述虛擬位置處;以及
[0141] 選擇所述視覺標記作為用戶所期望的信息。
[0142] (25)根據(jù)(24)所述的信息處理方法,其中,基于所述用戶的頭部的移動選擇所述 視覺標記。
[0143] (26)根據(jù)(22)所述的信息處理方法,其中,生成所述定位信息包括確定所述聲音 標記的聲音源位置。
[0144] (27)根據(jù)(26)所述的信息處理方法,其中,基于所述虛擬位置確定所述聲音標記 的所述聲音源位置。
[0145] (28)根據(jù)(26)所述的信息處理方法,其中,基于用戶的位置與所述虛擬位置之間 的距離,確定所述聲音標記的所述聲音源位置。
[0146] (29)根據(jù)(28)所述的信息處理方法,其中,當所述用戶的位置與所述虛擬位置之 間的所述距離大于閾值時,所述聲音標記的所述聲音源位置被確定為與所述虛擬位置相比 位于更接近所述用戶的正前方的位置處。
[0147] (30)根據(jù)(29)所述的信息處理方法,其中,當所述用戶的位置與所述虛擬位置之 間的所述距離小于閾值并且正在減小時,所述聲音標記的所述聲音源位置相應地從所述用 戶的前方側朝向所述真實物體移動。
[0148] (31)根據(jù)(28)所述的信息處理方法,其中,當所述用戶的位置與所述虛擬位置之 間的所述距離小于閾值時,所述聲音標記的所述聲音源位置被確定為位于沿著以所述閾值 為半徑且以所述用戶的位置為中心的圓周上的相應點處。
[0149] (32)根據(jù)(31)所述的信息處理方法,其中,當所述真實物體從所述用戶的前方 側通過到所述用戶的后方側時,所述聲音標記的所述聲音源位置被確定為沿著所述圓周、 從所述用戶的前方側移動到所述用戶的后方側,直到到達位于所述用戶正后方處的位置為 止,然后在該點處所述聲音標記的所述聲音源位置沿著向量路徑后退離開所述用戶。
[0150] (33)根據(jù)(28)所述的信息處理方法,其中:
[0151] 當所述用戶的位置與所述虛擬位置之間的距離大于閾值時,所述聲音標記的所述 聲音源位置被確定為在所述用戶的前方側;以及
[0152] 當所述用戶接近與所述虛擬位置相對應的物理位置時,所述聲音標記的所述聲音 源位置被確定為沿著朝向所述虛擬位置的方向移動離開所述用戶的前方側。
[0153] (34)根據(jù)(28)所述的信息處理方法,其中:
[0154] 隨著所述用戶的位置與所述虛擬位置之間的距離降低到接近閾值,所述聲音標 記的所述聲音源位置沿著與所述用戶一直向前的方向平行的向量移動接近所述用戶的位 置;
[0155] 隨著所述用戶的位置與所述虛擬位置之間的距離從所述閾值降低到所述虛擬位 置在用戶正前方的時間點處,所述聲音標記的所述聲音源位置沿著以所述閾值為半徑且以 所述用戶的位置為中心的圓周朝向位于所述用戶正前方的位置移動;以及
[0156] 隨著所述虛擬位置從在所述用戶正前方朝向所述用戶的后方側移動,所述聲音標 記的所述聲音源位置從位于所述用戶正前方的位置沿著所述圓周朝向所述用戶的后方側 移動并且移動出所述用戶的可見區(qū)域。
[0157] (35)根據(jù)(26)所述的信息處理方法,還包括:
[0158] 根據(jù)用戶的面部定向的改變,改變所述聲音標記的所述聲音源位置。
[0159] (36)根據(jù)(26)所述的信息處理方法,還包括:
[0160] 當所述虛擬位置在所述用戶前方的可見區(qū)域中時,將所述聲音標記的所述聲音源 位置設置為與所述虛擬位置相同的位置。
[0161] (37)根據(jù)(26)所述的信息處理方法,其中,確定所述聲音標記的所述聲音源位 置,使得用戶如同源自所述真實物體的位置那樣察覺到所輸出的聲音。
[0162] (38)根據(jù)(22)所述的信息處理方法,其中,由顯示單元以與視頻圖像疊加的方式 顯示將視覺標記顯示在所述虛擬位置處。
[0163] (39)根據(jù)(22)所述的信息處理方法,其中,通過使用由用戶所穿戴的頭戴式顯示 器將視覺標記顯示在所述虛擬位置處。
[0164] (40)根據(jù)(22)所述的信息處理方法,其中,當所述真實物體存在與用戶的可見區(qū) 域中時,所述虛擬位置被設置為位于所述真實物體的位置處。
[0165] (41)根據(jù)(22)所述的信息處理方法,其中,生成所述定位信息包括對與位于接近 用戶的真實物體相關聯(lián)的信息進行過濾。
[0166] (42)根據(jù)(22)所述的信息處理方法,其中,所述聲音具有基于所述定位信息的指 向性。
[0167] (43)根據(jù)(22)所述的信息處理方法,還包括:
[0168] 通過檢測由用戶所察覺到的聲音的頻率在第一時間點與第二時間點之間的改變, 確定所述真實物體的移動。
[0169] (44)根據(jù)(22)所述的信息處理方法,其中,所述聲音標記對于用戶不可見。
[0170] (45) -種包含有程序的非暫態(tài)計算機可讀介質(zhì),所述程序當由計算機所執(zhí)行時使 得所述計算機執(zhí)行下述方法,所述方法包括:
[0171] 基于虛擬位置生成聲音標記的定位信息;以及
[0172] 基于所述定位信息輸出與所述聲音標記相關聯(lián)的聲音,
[0173] 其中,基于在空間中所存在的真實物體的位置確定所述虛擬位置。
[0174] (46)根據(jù)(45)所述的計算機可讀介質(zhì),還包括:
[0175] 將視覺標記顯示在所述虛擬位置處;以及
[0176] 選擇所述視覺標記作為用戶所期望的信息。
[0177] (47)根據(jù)(46)所述的計算機可讀介質(zhì),其中,基于用戶的頭部的移動選擇所述視 覺標記。
[0178] (48)根據(jù)(45)所述的計算機可讀介質(zhì),其中,生成所述定位信息包括確定所述聲 音標記的聲音源位置。
[0179] (49)根據(jù)(48)所述的計算機可讀介質(zhì),其中,基于用戶的位置與所述虛擬位置之 間的距離確定所述聲音標記的所述聲音源位置。
[0180] (50)根據(jù)(49)的計算機可讀介質(zhì),其中,當所述用戶的位置與所述虛擬位置之間 的所述距離大于閾值時,所述聲音標記的所述聲音源位置被確定為與所述虛擬位置相比位 于更接近所述用戶的正前方的位置處。
[0181] (51)根據(jù)(50)的計算機可讀介質(zhì),其中,當所述用戶的位置與所述虛擬位置之間 的所述距離小于閾值并且正在減小時,所述聲音標記的所述聲音源位置相應地從所述用戶 的前方側朝向所述真實物體移動。
[0182] (52)根據(jù)(49)所述的計算機可讀介質(zhì),其中,當所述用戶的位置與所述虛擬位置 之間的所述距離小于閾值時,所述聲音標記的所述聲音源位置被確定為位于沿著以所述閾 值為半徑且以所述用戶的位置為中心的圓周上的相應點處。
[0183] (53)根據(jù)(50)所述的計算機可讀介質(zhì),其中,當所述真實物體從所述用戶的前方 側通過到所述用戶的后方側時,所述聲音標記的所述聲音源位置被確定為沿著所述圓周、 從所述用戶的前方側移動到所述用戶的后方側,直到到達位于所述用戶正后方處的位置為 止,然后在該點處所述聲音標記的所述聲音源位置沿著向量路徑后退離開所述用戶。
[0184] (54)根據(jù)(49)所述的計算機可讀介質(zhì),其中:
[0185] 當所述用戶的位置與所述虛擬位置之間的距離大于閾值時,所述聲音標記的所述 聲音源位置被確定為在所述用戶的前方側;以及
[0186] 當所述用戶接近與所述虛擬位置相對應的物理位置時,所述聲音標記的所述聲音 源位置被確定為沿著朝向所述虛擬位置的方向移動離開所述用戶的前方側。
[0187] (55)根據(jù)(49)所述的計算機可讀機制,其中:
[0188] 隨著所述用戶的位置與所述虛擬位置之間的距離降低到接近閾值,所述聲音標 記的所述聲音源位置沿著與所述用戶一直向前的方向平行的向量移動接近所述用戶的位 置;
[0189] 隨著所述用戶的位置與所述虛擬位置之間的距離從所述閾值降低到所述虛擬位 置在用戶正前方的時間點處,所述聲音標記的所述聲音源位置沿著以所述閾值為半徑且以 所述用戶的位置為中心的圓周朝向位于所述用戶正前方的位置移動;以及
[0190] 隨著所述虛擬位置從在所述用戶正前方朝向所述用戶的后方側移動,所述聲音標 記的所述聲音源位置從位于所述用戶正前方的位置沿著所述圓周朝向所述用戶的后方側 移動并且移動出所述用戶的可見區(qū)域。
[0191] (56)根據(jù)(48)所述的計算機可讀介質(zhì),還包括:
[0192] 根據(jù)用戶的面部定向的改變,改變所述聲音標記的所述聲音源位置。
[0193] (57) 一種信息處理設備,包括:
[0194] 獲取單元,獲取基于在空間中所存在的真實物體的位置所確定的虛擬物體的虛擬 位置;以及
[0195] 定位信息生成單元,基于所述虛擬位置生成指示與所述虛擬物體相關聯(lián)的聲音信 息的聲音源位置的定位信息。
[0196] (58)根據(jù)(57)所述的信息處理設備,其中,所述定位信息生成單元基于用戶位置 與所述虛擬位置之間的距離生成所述定位信息。
[0197] (59)根據(jù)(58)所述的信息處理設備,其中,當所述用戶位置與所述虛擬位置之間 的所述距離等于或大于預定的閾值時,所述定位信息生成單元使得所述聲音源位置與所述 虛擬位置相比變?yōu)楦咏鲇脩舻那胺絺取?br>
[0198] (60)根據(jù)(59)所述的信息處理設備,其中,當所述用戶位置與所述虛擬位置之間 的所述距離小于所述閾值時,所述定位信息生成單元使得所述聲音源位置從所述用戶的前 方側移動到真實物體的方向。
[0199] (61)根據(jù)(60)所述的信息處理設備,其中,當所述用戶位置與所述虛擬位置之間 的所述距離小于所述閾值時,所述定位信息生成單元使得所述聲音源位置沿著以所述閾值 為半徑且以所述用戶位置為中心的圓周移動。
[0200] ¢2)根據(jù)(57)至¢1)中任一項所述的信息處理設備,其中,當所述虛擬位置位于 所述用戶前方方向中的預定區(qū)域中時,所述定位信息生成單元將所述虛擬位置設置為所述 聲音源位置。
[0201] (63)根據(jù)(57)至(62)中任一項所述的信息處理設備,還包括:
[0202] 定向檢測單元,檢測用戶面部的定向,
[0203] 其中,所述定位信息生成單元基于所述面部的定向生成所述定位信息。
[0204] ¢4)根據(jù)(57)至¢3)中任一項所述的信息處理設備,還包括:
[0205] 顯示控制單元,使得所述虛擬物體顯示在所述虛擬位置處。
[0206] (65)根據(jù)(64)所述的信息處理設備,還包括:
[0207] 聲音輸出控制單元,當檢測到選擇所顯示的虛擬物體的選擇操作時,基于所述定 位信息使得輸所述聲音信息被輸出。
[0208] ¢6)根據(jù)¢4)或¢5)所述的信息處理設備,其中,所述顯示控制單元使得所述虛 擬物體的主要信息顯示在所述虛擬位置處,并且當檢測到選擇所述虛擬物體的選擇操作時 使得顯示所述虛擬物體的第二信息。
[0209] ¢7)根據(jù)¢5)或¢6)所述的信息處理設備,其中,基于用戶面部定向檢測所述選 擇操作。
[0210] (68) 一種信息處理方法,包括:
[0211] 獲取基于在空間中所存在的真實物體的位置所確定的虛擬物體的虛擬位置;以及
[0212] 基于所述虛擬位置生成指示與所述虛擬物體相關聯(lián)的聲音信息的聲音源位置的 定位信息。
[0213] (69) -種使得計算機用作信息處理設備的程序,所述信息處理設備包括:
[0214] 獲取單元,獲取基于在空間中所存在的真實物體的位置所確定的虛擬物體的虛擬 位置;以及
[0215] 定位信息生成單元,基于所述虛擬位置生成指示與所述虛擬物體相關聯(lián)的聲音信 息的聲音源位置的定位信息。
[0216] 本公開包含與在2012年2月3日向日本專利局提交的日本優(yōu)先權專利申請JP 2012-021888中所公開的主題有關的主題,其全部內(nèi)容通過引用并入于此。
【權利要求】
1. 一種信息處理設備,包括: 聲音輸出控制單元,配置成基于虛擬位置生成聲音標記的定位信息;以及 聲音輸出單兀,配置成基于所述定位信息輸出與所述聲音標記相關聯(lián)的聲音, 其中,基于在空間中所存在的真實物體的位置確定所述虛擬位置。
2. 根據(jù)權利要求1所述的信息處理設備,其中,所述聲音輸出單元還配置成在視覺標 記顯示在顯示單元的所述虛擬位置處的同時,以可聽見地方式輸出所述聲音。
3. 根據(jù)權利要求1所述的信息處理設備,其中,所述聲音輸出控制單元還配置成確定 所述聲音標記的聲音源位置。
4. 根據(jù)權利要求3所述的信息處理設備,其中,所述聲音輸出控制單元還配置成基于 所述虛擬位置確定所述聲音標記的所述聲音源位置。
5. 根據(jù)權利要求3所述的信息處理設備,其中,所述聲音輸出控制單元還配置成基于 用戶的位置與所述虛擬位置之間的距離,確定所述聲音標記的所述聲音源位置。
6. 根據(jù)權利要求5所述的信息處理設備,其中,當所述用戶的位置與所述虛擬位置之 間的所述距離大于閾值時,所述聲音輸出控制單元還配置成將所述聲音標記的所述聲音源 位置確定為與所述虛擬位置相比位于更接近所述用戶的正前方的位置處。
7. 根據(jù)權利要求6所述的信息處理設備,其中,當所述用戶的位置與所述虛擬位置之 間的所述距離小于閾值并且正在減小時,所述聲音輸出控制單元還配置成將所述聲音標記 的所述聲音源位置確定為相應地從所述用戶的前方側朝向所述真實物體移動。
8. 根據(jù)權利要求5所述的信息處理設備,其中,當所述用戶的位置與所述虛擬位置之 間的所述距離小于閾值時,所述聲音輸出控制單元還配置成將所述聲音標記的所述聲音源 位置確定為位于沿著以所述閾值為半徑且以所述用戶的位置為中心的圓周上的相應點處。
9. 根據(jù)權利要求8所述的信息處理設備,其中,當所述真實物體從所述用戶的前方側 通過到所述用戶的后方側時,所述聲音輸出控制單元還配置成將所述聲音標記的所述聲音 源位置確定為沿著所述圓周、從所述用戶的前方側移動到所述用戶的后方側,直到到達位 于所述用戶正后方處的位置為止,然后在該點處所述聲音標記的所述聲音源位置沿著向量 路徑后退離開所述用戶。
10. 根據(jù)權利要求5所述的信息處理設備,其中: 當所述用戶的位置與所述虛擬位置之間的距離大于閾值時,所述聲音輸出控制單元還 配置成將所述聲音標記的所述聲音源位置確定為在所述用戶的前方側;以及 當所述用戶接近與所述虛擬位置相對應的物理位置時,所述聲音輸出控制單元還配置 成將所述聲音標記的所述聲音源位置確定為沿著朝向所述虛擬位置的方向移動離開所述 用戶的前方側。
11. 根據(jù)權利要求5所述的信息處理設備,其中: 隨著所述用戶的位置與所述虛擬位置之間的距離降低到接近閾值,所述聲音輸出控制 單元還配置成將所述聲音標記的所述聲音源位置確定為沿著與所述用戶一直向前的方向 平行的向量移動接近所述用戶的位置; 隨著所述用戶的位置與所述虛擬位置之間的距離從所述閾值降低到所述虛擬位置在 所述用戶正前方的時間點處,所述聲音輸出控制單元還配置成將所述聲音標記的所述聲音 源位置確定為沿著以所述閾值為半徑且以所述用戶的位置為中心的圓周朝向位于所述用 戶正前方的位置移動;以及 隨著所述虛擬位置從在所述用戶正前方朝向所述用戶的后方側移動,所述聲音輸出控 制單元還配置成將所述聲音標記的所述聲音源位置確定為從位于所述用戶正前方的位置 沿著所述圓周朝向所述用戶的后方側移動并且移動出所述用戶的可見區(qū)域。
12. 根據(jù)權利要求5所述的信息處理設備,其中,所述聲音輸出控制單元還配置成根據(jù) 用戶的面部定向的改變,改變所述聲音標記的所述聲音源位置。
13. 根據(jù)權利要求3所述的信息處理設備,其中,當所述虛擬位置在用戶前方的可見區(qū) 域中時,所述聲音輸出控制單元還配置成將所述聲音標記的所述聲音源位置設置為與所述 虛擬位置相同的位置。
14. 根據(jù)權利要求3所述的信息處理設備,其中,所述聲音源輸出控制單元還配置成確 定所述聲音標記的所述聲音源位置,使得用戶如同源自所述真實物體的位置那樣察覺到所 輸出的聲音。
15. 根據(jù)權利要求1所述的信息處理設備,還包括: 顯示單元,配置成以與視頻圖像疊加的方式將視覺標記顯示在所述虛擬位置處。
16. 根據(jù)權利要求1所述的信息處理設備,還包括: 頭戴式顯示器,配置成將視覺標記顯示在所述虛擬位置處。
17. 根據(jù)權利要求1所述的信息處理設備,其中,當所述真實物體存在于用戶的可見區(qū) 域內(nèi)時,所述虛擬位置被設置為位于所述真實物體的位置處。
18. 根據(jù)權利要求1所述的信息處理設備,其中,所述聲音輸出控制單元還配置成通過 對與位于接近用戶的真實物體相關聯(lián)的信息進行過濾,生成所述定位信息。
19. 根據(jù)權利要求1所述的信息處理設備,其中,所述聲音具有基于所述定位信息的指 向性。
20. 根據(jù)權利要求1所述的信息處理設備,其中,通過檢測由用戶所察覺到的聲音的頻 率在第一時間點與第二時間點之間的改變,確定所述真實物體的移動。
21. 根據(jù)權利要求1所述的信息處理設備,其中,所述聲音標記對于用戶不可見。
22. -種信息處理方法,包括: 基于虛擬位置生成聲音標記的定位信息;以及 基于所述定位信息輸出與所述聲音標記相關聯(lián)的聲音, 其中,基于在空間中所存在的真實物體的位置確定所述虛擬位置。
23. -種包含有程序的非暫態(tài)計算機可讀介質(zhì),所述程序當由計算機所執(zhí)行時使得所 述計算機執(zhí)行下述方法,所述方法包括: 基于虛擬位置生成聲音標記的定位信息;以及 基于所述定位信息輸出與所述聲音標記相關聯(lián)的聲音, 其中,基于在空間中所存在的真實物體的位置確定所述虛擬位置。
【文檔編號】A61H3/06GK104067633SQ201380006727
【公開日】2014年9月24日 申請日期:2013年1月24日 優(yōu)先權日:2012年2月3日
【發(fā)明者】宮沢悠介, 古賀康之 申請人:索尼公司