本發(fā)明涉及用戶使用頭戴顯示器實(shí)現(xiàn)視聽虛擬空間內(nèi)的虛擬顯示器的內(nèi)容的內(nèi)容視聽系統(tǒng)、方法以及計(jì)算機(jī)程序。

背景技術(shù)：

已知有佩戴于用戶的頭部，利用被配置于眼前的顯示器等能夠向用戶提示虛擬空間中的圖像的頭戴顯示器(head-mounteddesplay。以下稱為“hmd”。)。專利文獻(xiàn)1公開的技術(shù)是若佩戴了hmd的用戶使頭部旋轉(zhuǎn)，則與此相伴能夠變更360度的全景圖像的視線方向，提高用戶進(jìn)入映像世界的身臨其境感的技術(shù)。

專利文獻(xiàn)1:日本特開2013-258614號(hào)公報(bào)

由傳感器取得的用戶的頭部動(dòng)作的信息不僅用于全景圖像的視線方向特定，而被期待在今后開發(fā)的數(shù)量眾多的應(yīng)用中使用。作為應(yīng)用的一個(gè)例子，想定將被配置于三維虛擬現(xiàn)實(shí)空間(以下有時(shí)也稱為“三維虛擬空間”、“虛擬空間”、“虛擬現(xiàn)實(shí)空間”。)的虛擬顯示器顯示在hmd上的應(yīng)用。虛擬顯示器能夠顯示電視節(jié)目那樣的映像內(nèi)容，用戶通過hmd對(duì)映像內(nèi)容進(jìn)行視聽。然而，用戶由于佩戴了hmd而無法看手，因此不能進(jìn)行電視遙控器那樣的控制器操作。

技術(shù)實(shí)現(xiàn)要素：

本發(fā)明的目的在于代替用戶以往的遙控器操作而應(yīng)用基于hmd的頭部動(dòng)作。尤其目的在于提供在從多個(gè)映像聲音內(nèi)容選擇一個(gè)時(shí)，相對(duì)于以往的基于遙控器操作的快速換臺(tái)操作，而以hmd的頭部動(dòng)作能夠取代的易操作性。

為了解決上述的課題，根據(jù)本發(fā)明的一個(gè)方式能夠得到用于內(nèi)容視聽的裝置，具備：顯示部，被配置于虛擬空間的多個(gè)虛擬顯示器顯示于頭戴顯示器；選擇部，根據(jù)由頭戴顯示器具備的檢測(cè)器檢測(cè)出的動(dòng)作，選擇虛擬顯示器中的一個(gè)；以及再生部，再生與選擇出的虛擬顯示器相關(guān)聯(lián)的內(nèi)容，多個(gè)虛擬顯示器被排列在沿著天球面設(shè)置的格子上，在選擇部中，通過根據(jù)檢測(cè)出的動(dòng)作來確定天球面上的一個(gè)格子，選擇與該格子相關(guān)聯(lián)的一個(gè)虛擬顯示器。

另外，根據(jù)本發(fā)明的一個(gè)方式能夠得到內(nèi)容視聽系統(tǒng)，是使用了頭戴顯示器的內(nèi)容視聽系統(tǒng)，具備：多個(gè)內(nèi)容視聽裝置，分別與個(gè)別的頭戴顯示器連接；以及服務(wù)器裝置，經(jīng)由網(wǎng)絡(luò)與多個(gè)內(nèi)容視聽裝置連接，各內(nèi)容視聽裝置具備：顯示部，是將被配置于虛擬空間的多個(gè)虛擬顯示器顯示于頭戴顯示器的顯示部且能夠根據(jù)由頭戴顯示器具備的檢測(cè)器檢測(cè)出的動(dòng)作選擇任意的虛擬顯示器；再生部，將接收到的多個(gè)內(nèi)容的每一個(gè)與虛擬顯示器的任一個(gè)相關(guān)聯(lián)并再生；以及用戶視聽數(shù)據(jù)取得部，其為了向服務(wù)器裝置進(jìn)行發(fā)送而取得正在特定的虛擬顯示器上再生的內(nèi)容的用戶視聽數(shù)據(jù)，服務(wù)器裝置具備視聽數(shù)據(jù)特性決定部，該視聽數(shù)據(jù)特性決定部基于從各內(nèi)容視聽裝置發(fā)送的各用戶視聽數(shù)據(jù)，來決定視聽數(shù)據(jù)特性，在虛擬空間中多個(gè)虛擬顯示器與沿著天球面設(shè)置的格子相關(guān)聯(lián)地被配置，通過根據(jù)由檢測(cè)器檢測(cè)出的動(dòng)作來確定格子，從而與該格子相關(guān)聯(lián)的一個(gè)虛擬顯示器被選擇。

根據(jù)本發(fā)明，在虛擬空間的多虛擬電視環(huán)境內(nèi)再生映像聲音內(nèi)容時(shí)，能夠用hmd的頭部動(dòng)作代替以往的遙控器操作。特別是在從多個(gè)映像聲音內(nèi)容中選擇一個(gè)的情況下，能夠提供用hmd的頭部動(dòng)作可取代以往的基于遙控器操作的快速換臺(tái)操作的易操作性。

附圖說明

本發(fā)明的上述以及其他的特征以及優(yōu)點(diǎn)根據(jù)本發(fā)明的實(shí)施例的以下更詳細(xì)的說明、添付的附圖以及技術(shù)方案的記載將變得清楚。

圖1a是本發(fā)明的實(shí)施方式的、由內(nèi)容視聽系統(tǒng)使用的一個(gè)例子的hmd系統(tǒng)的概略圖。

圖1b是本發(fā)明的實(shí)施方式的、由內(nèi)容視聽系統(tǒng)使用的其他例子的hmd系統(tǒng)的概略圖。

圖2是被圖1b中使用的紅外線傳感器檢測(cè)的、虛擬地設(shè)置于hmd上的多個(gè)檢測(cè)點(diǎn)的概要圖。

圖3是本發(fā)明的實(shí)施方式的、與內(nèi)容視聽系統(tǒng)整體的功能構(gòu)成相關(guān)的框圖。

圖4表示圖1a或者圖1b所示的將佩戴hmd的用戶的頭部規(guī)定為中心的三維空間上的正交坐標(biāo)系。

圖5a是表示本發(fā)明的實(shí)施方式的、由內(nèi)容視聽系統(tǒng)實(shí)現(xiàn)的、虛擬空間中的用戶與虛擬顯示器的一配置例的立體概要圖。

圖5b是表示本發(fā)明的實(shí)施方式的、由內(nèi)容視聽系統(tǒng)實(shí)現(xiàn)的、虛擬空間中的用戶與虛擬顯示器的其他配置例的立體概要圖。

圖6a是表示本發(fā)明的實(shí)施方式的、由內(nèi)容視聽系統(tǒng)實(shí)現(xiàn)的、虛擬空間中的多虛擬顯示器的電視臺(tái)內(nèi)容顯示例的一個(gè)例子的平面概要圖。

圖6b是表示本發(fā)明的實(shí)施方式的、由內(nèi)容視聽系統(tǒng)實(shí)現(xiàn)的、虛擬空間中的多虛擬顯示器的電視臺(tái)內(nèi)容顯示例的一個(gè)例子的平面概要圖。

圖7a是表示本發(fā)明的實(shí)施方式的、由內(nèi)容視聽系統(tǒng)實(shí)現(xiàn)的、虛擬空間中的多虛擬顯示器的其他的電視臺(tái)內(nèi)容顯示例的一個(gè)例子的平面概要圖。

圖7b是表示本發(fā)明的實(shí)施方式的、由內(nèi)容視聽系統(tǒng)實(shí)現(xiàn)的、虛擬空間中的多虛擬顯示器的其他的電視臺(tái)內(nèi)容顯示例的一個(gè)例子的平面概要圖。

圖8a是本發(fā)明的實(shí)施方式的、由內(nèi)容視聽系統(tǒng)實(shí)現(xiàn)的、與虛擬空間中的多虛擬顯示器的內(nèi)容顯示例相關(guān)且反映了視聽數(shù)據(jù)特性的一個(gè)例子的平面概要圖。

圖8b是本發(fā)明的實(shí)施方式的、由內(nèi)容視聽系統(tǒng)實(shí)現(xiàn)的、與虛擬空間中的多虛擬顯示器的內(nèi)容顯示例相關(guān)且反映了視聽數(shù)據(jù)特性的其他例子的平面概要圖。

圖9是本發(fā)明的實(shí)施方式的、內(nèi)容視聽系統(tǒng)具備的內(nèi)容視聽裝置所具備的內(nèi)容視聽部的功能構(gòu)成的框圖。

圖10是本發(fā)明的實(shí)施方式的、內(nèi)容視聽系統(tǒng)具備的服務(wù)器裝置所具備的視聽數(shù)據(jù)特性決定部的功能構(gòu)成的框圖。

圖11是本發(fā)明的實(shí)施方式的、與內(nèi)容視聽系統(tǒng)中的內(nèi)容視聽相關(guān)的hmd和內(nèi)容視聽裝置之間的處理的流程的一個(gè)例子的流程圖。

圖12是本發(fā)明的實(shí)施方式的、與內(nèi)容視聽系統(tǒng)中的內(nèi)容視聽相關(guān)的內(nèi)容視聽裝置與服務(wù)器裝置之間的處理的流程的一個(gè)例子的流程圖。

圖13是本發(fā)明的實(shí)施方式的、與內(nèi)容視聽系統(tǒng)中的內(nèi)容視聽相關(guān)的內(nèi)容視聽裝置與服務(wù)器裝置之間的處理的流程的其他例子的流程圖。

圖14是本發(fā)明的實(shí)施方式的、由內(nèi)容視聽?wèi)?yīng)用安裝的一個(gè)例子的畫面圖像。

具體實(shí)施方式

〔本發(fā)明的實(shí)施方式的說明〕

首先羅列并說明本發(fā)明的實(shí)施方式的內(nèi)容。本發(fā)明的實(shí)施方式的方法以及程序具備以下的構(gòu)成。

〔項(xiàng)目1〕用于內(nèi)容視聽的裝置，具備：

顯示部，將被配置于虛擬空間的多個(gè)虛擬顯示器顯示于頭戴顯示器；

選擇部，根據(jù)由上述頭戴顯示器具備的檢測(cè)器檢測(cè)出的動(dòng)作，選擇上述虛擬顯示器中的一個(gè)；以及

再生部，再生與上述選擇的虛擬顯示器相關(guān)聯(lián)的內(nèi)容，

上述多個(gè)虛擬顯示器被排列在沿著天球面設(shè)置的格子上，

在上述選擇部中，通過根據(jù)上述檢測(cè)出的動(dòng)作來確定上述天球面上的一個(gè)格子，從而選擇與該格子相關(guān)聯(lián)的一個(gè)上述虛擬顯示器。

〔項(xiàng)目2〕在項(xiàng)目1所述的裝置中還具備帶限制再生部，該帶限制再生部在顯示于上述頭戴顯示器的上述多個(gè)虛擬顯示器中同時(shí)帶限制地再生與各個(gè)虛擬顯示器相關(guān)聯(lián)的內(nèi)容。

〔項(xiàng)目3〕在項(xiàng)目2所述的裝置中，帶限制地再生上述內(nèi)容包括使音頻輸出無效化地再生映像聲音內(nèi)容，

再生上述內(nèi)容包括將已使上述音頻輸出無效化的映像聲音內(nèi)容的上述音頻輸出有效化。

〔項(xiàng)目4〕在項(xiàng)目2所述的裝置中，上述內(nèi)容是通過電視接收器接收的電視節(jié)目?jī)?nèi)容。

〔項(xiàng)目5〕在項(xiàng)目1至4中任一項(xiàng)所述的裝置中，還具備：

判定部，判定上述被再生的內(nèi)容是否持續(xù)給予的時(shí)間地被再生；以及

內(nèi)容調(diào)換部，在判定為持續(xù)給予的時(shí)間地被再生的情況下，將正在被再生的該內(nèi)容與和被配置于規(guī)定的位置的虛擬顯示器相關(guān)聯(lián)的內(nèi)容調(diào)換。

〔項(xiàng)目6〕在項(xiàng)目1至5中任一項(xiàng)所述的裝置中，上述檢測(cè)器是角速度傳感器，上述檢測(cè)出的動(dòng)作包含傾斜信息。

〔項(xiàng)目7〕在項(xiàng)目1至6中任一項(xiàng)所述的裝置中具備視聽數(shù)據(jù)取得部，該視聽數(shù)據(jù)取得部取得在上述選擇的虛擬顯示器上再生的內(nèi)容的視聽數(shù)據(jù)，并向服務(wù)器裝置發(fā)送上述視聽數(shù)據(jù)。

〔項(xiàng)目8〕在項(xiàng)目7的裝置中，具備視聽數(shù)據(jù)特性相關(guān)聯(lián)部，該視聽數(shù)據(jù)特性相關(guān)聯(lián)部從上述服務(wù)器裝置接收基于上述視聽數(shù)據(jù)決定的視聽數(shù)據(jù)特性，將上述視聽數(shù)據(jù)特性與上述多個(gè)虛擬顯示器中的一個(gè)以上相關(guān)聯(lián)。

〔項(xiàng)目9〕在項(xiàng)目8的裝置中，上述視聽數(shù)據(jù)特性是在規(guī)定的時(shí)機(jī)被評(píng)級(jí)的電視臺(tái)內(nèi)容視聽率，

上述視聽數(shù)據(jù)特性相關(guān)聯(lián)部，針對(duì)正在再生上述電視臺(tái)內(nèi)容視聽率被評(píng)級(jí)高的內(nèi)容的上述虛擬顯示器實(shí)施上述虛擬空間中的視覺上的處理，并顯示于上述顯示部。

〔項(xiàng)目10〕在項(xiàng)目9的裝置中，上述電視臺(tái)內(nèi)容視聽率基于發(fā)送到上述服務(wù)器裝置的上述視聽數(shù)據(jù)的總數(shù)和每個(gè)上述內(nèi)容的視聽用戶數(shù)而被決定。

〔項(xiàng)目11〕一種內(nèi)容視聽系統(tǒng)，是使用了頭戴顯示器的內(nèi)容視聽系統(tǒng)，具備：

多個(gè)內(nèi)容視聽裝置，分別與個(gè)別的上述頭戴顯示器連接；以及

服務(wù)器裝置，經(jīng)由網(wǎng)絡(luò)與上述多個(gè)內(nèi)容視聽裝置連接，

各上述內(nèi)容視聽裝置具備：

顯示部，是將被配置于虛擬空間的多個(gè)虛擬顯示器顯示于上述頭戴顯示器的顯示部且能夠根據(jù)由上述頭戴顯示器具備的檢測(cè)器檢測(cè)的動(dòng)作選擇任意的上述虛擬顯示器；

再生部，將接收到的多個(gè)內(nèi)容的每一個(gè)與上述虛擬顯示器的任一個(gè)相關(guān)聯(lián)并再生；以及

用戶視聽數(shù)據(jù)取得部，為了向上述服務(wù)器裝置進(jìn)行發(fā)送而取得正在特定的上述虛擬顯示器上再生的上述內(nèi)容的用戶視聽數(shù)據(jù)，

上述服務(wù)器裝置具備視聽數(shù)據(jù)特性決定部，該視聽數(shù)據(jù)特性決定部基于從上述各內(nèi)容視聽裝置發(fā)送的各上述用戶視聽數(shù)據(jù)，來決定視聽數(shù)據(jù)特性，

在上述虛擬空間中上述多個(gè)虛擬顯示器與沿著天球面設(shè)置的格子相關(guān)聯(lián)地被配置，通過根據(jù)由上述檢測(cè)器檢測(cè)出的動(dòng)作來確定上述格子，從而與該格子相關(guān)聯(lián)的一個(gè)上述虛擬顯示器被選擇。

〔本發(fā)明的實(shí)施方式的詳細(xì)內(nèi)容〕

參照附圖對(duì)用于使用了本發(fā)明的實(shí)施方式的頭戴顯示器(hmd)的內(nèi)容視聽的裝置以及系統(tǒng)的具體例進(jìn)行說明。此外，本發(fā)明并不限于這些的例示，意圖包含技術(shù)方案所示的、與技術(shù)方案等同的意思以及范圍內(nèi)的全部的變更。在以下的說明中，在附圖的說明中對(duì)相同的要素賦予相同的附圖標(biāo)記，并省略重復(fù)的說明。

圖1a是本發(fā)明的第1實(shí)施例的、由內(nèi)容視聽系統(tǒng)使用的一個(gè)例子的hmd系統(tǒng)100的概略圖。此外，hmd系統(tǒng)100是客戶端系統(tǒng)，能夠經(jīng)由網(wǎng)絡(luò)與服務(wù)器系統(tǒng)通信。如圖示那樣hmd系統(tǒng)100具備安裝了顯示器112以及傳感器114的hmd110以及控制電路部120。hmd110具備的顯示器112是以完全覆蓋用戶的視野的方式構(gòu)成的非透射式的顯示裝置，用戶能夠僅觀察顯示在顯示器112的畫面。佩戴了非透射式的hmd110的用戶由于完全失去外界的視野，因此完全投入到通過在控制電路部120中執(zhí)行的應(yīng)用而顯示的虛擬空間。

hmd110具備的傳感器114被固定于顯示器112附近。傳感器114包含地磁傳感器、加速度傳感器、和/或角速度(陀螺儀)傳感器，能夠通過上述一個(gè)以上的傳感器對(duì)被佩戴于用戶的頭部的hmd110的各種動(dòng)作進(jìn)行檢測(cè)。特別是在角速度傳感器的情況下，能夠根據(jù)hmd110的動(dòng)作，隨著時(shí)間經(jīng)過來檢測(cè)hmd110的繞3軸的角速度，并決定繞各軸的角度(傾斜)的時(shí)間變化(在圖4中后述)。

另外，控制電路部120作為內(nèi)容視聽裝置被設(shè)置于用戶終端內(nèi)。用戶終端能夠?yàn)榕_(tái)式電腦、筆記本電腦等普通的個(gè)人電腦，具備處理器、主存儲(chǔ)器、外部存儲(chǔ)器、用戶接口、通信部以及磁盤驅(qū)動(dòng)器等，經(jīng)由總線相互電連接。此外，在其他例子中，需要留意控制電路部120也可被安裝于hmd110內(nèi)部，內(nèi)容視聽裝置的功能也可被用戶終端以及hmd分散這些點(diǎn)。另外，應(yīng)留意的點(diǎn)還有也可構(gòu)成為使內(nèi)容視聽裝置的任一個(gè)以上作為服務(wù)器裝置發(fā)揮功能。

圖1b是本發(fā)明的其他例子的hmd系統(tǒng)100’的概略圖。與圖1a比較，在圖1b的例子中，hmd系統(tǒng)100’具備以能夠通信的方式與控制電路部120連接的紅外線傳感器130這一點(diǎn)不同。另外，hmd110也可具備圖1a的傳感器114，也可不具備傳感器114。紅外線傳感器130具有位置跟蹤功能。位置跟蹤功能進(jìn)一步如圖2中例示的所示，與用戶的動(dòng)作對(duì)應(yīng)地隨著時(shí)間變化來檢測(cè)被虛擬地設(shè)置于hmd110上的、檢測(cè)紅外線的多個(gè)檢測(cè)點(diǎn)在實(shí)際空間內(nèi)的位置。而且，能夠基于由紅外線傳感器130檢測(cè)出的實(shí)際空間內(nèi)的位置的經(jīng)時(shí)的變化，決定與hmd110的動(dòng)作對(duì)應(yīng)的繞各軸的角度的時(shí)間變化。

此外，雖然在圖1a以及圖1b沒有圖示，但hmd系統(tǒng)100、100’，能夠在hmd110或者內(nèi)容視聽裝置(控制電路部120)中內(nèi)置耳機(jī)116。當(dāng)然，耳機(jī)116也可不是內(nèi)置型而是外置型。另外，為了在虛擬空間內(nèi)的虛擬電視中接收電視節(jié)目的播放，在hmd系統(tǒng)100、100’中，在內(nèi)容視聽裝置中內(nèi)置電視接收器115或者外置。電視接收器可以是能夠接收電視播放用的映像聲音數(shù)據(jù)的任一種機(jī)器。映像聲音數(shù)據(jù)包含視覺內(nèi)容以及音頻內(nèi)容。另外，作為hmd110的控制器，能夠使用由用戶保持的公知的智能手機(jī)等移動(dòng)終端，能夠與控制電路部120以能夠通信的方式連接并相互作用。

圖3是本發(fā)明的實(shí)施方式的、使用了hmd的內(nèi)容視聽系統(tǒng)的整體概要的功能框圖。如圖示那樣，內(nèi)容視聽裝置(控制電路)120以及與多個(gè)內(nèi)容視聽裝置120連接的服務(wù)器裝置500經(jīng)由網(wǎng)絡(luò)相互作用。針對(duì)多個(gè)內(nèi)容視聽裝置的每一個(gè)連接個(gè)別的hmd。內(nèi)容視聽裝置120具備視野生成部210、動(dòng)作檢測(cè)部220以及內(nèi)容視聽部(顯示部)230。功能模塊210、220、230與被收容于空間信息儲(chǔ)存部250、內(nèi)容信息儲(chǔ)存部260等的各種表配合。另外，服務(wù)器裝置500具備視聽數(shù)據(jù)特性決定部510，并與被收容于匯總視聽數(shù)據(jù)儲(chǔ)存部520等的各種表配合。

內(nèi)容視聽裝置的視野生成部210基于被存儲(chǔ)于空間信息儲(chǔ)存部250的三維虛擬空間信息以及從傳感器114/130取得的視場(chǎng)方向的檢測(cè)信息，生成從投入到三維虛擬空間的用戶看見的視野圖像。視野圖像能夠作為360度全景圖像的一部分。動(dòng)作檢測(cè)部220根據(jù)來自傳感器114/130的動(dòng)作信息的輸入，測(cè)定被佩戴于用戶的頭部的hmd110的動(dòng)作數(shù)據(jù)。在本實(shí)施方式中，特別是決定通過角速度(陀螺儀)傳感器隨著時(shí)間變化而檢測(cè)出的角度信息數(shù)據(jù)。

參照?qǐng)D4對(duì)角度信息數(shù)據(jù)進(jìn)行說明。如圖示的那樣，以佩戴了hmd的用戶的頭部為中心，規(guī)定xyz坐標(biāo)。將用戶直立的垂直方向設(shè)為y軸，將與y軸正交且連結(jié)顯示器112的中心與用戶的方向設(shè)為z軸，將與y軸和z軸正交的方向的軸設(shè)為x軸。由角速度(陀螺儀)傳感器檢測(cè)繞各軸的角度(即，由表示將y軸作為軸的旋轉(zhuǎn)的偏航角、表示將x軸作為軸的旋轉(zhuǎn)的俯仰角、表示將z軸作為軸的旋轉(zhuǎn)的橫滾角而決定的傾斜)，通過其隨時(shí)間的變化，動(dòng)作檢測(cè)部220決定角度(傾斜)信息數(shù)據(jù)作為視野信息。

返回圖3，在內(nèi)容視聽裝置的內(nèi)容視聽部(顯示部)230中，使被配置于虛擬空間的多個(gè)虛擬顯示器顯示于hmd。并且，在本實(shí)施方式中，基于被存儲(chǔ)于內(nèi)容信息儲(chǔ)存部260的內(nèi)容信息以及由動(dòng)作檢測(cè)部220決定的傾斜角度，通過選擇來確定配置于三維虛擬空間的多個(gè)虛擬顯示器中的一個(gè)。進(jìn)而對(duì)選擇出的虛擬顯示器上的映像聲音內(nèi)容進(jìn)行再生，并向顯示器112以及耳機(jī)116輸出。此外，該內(nèi)容能夠設(shè)為靜態(tài)圖像、動(dòng)畫、聲音等任何形式。在本實(shí)施方式中，特別是內(nèi)容也可設(shè)為由電視接收器115接收的電視節(jié)目的電視臺(tái)內(nèi)容。

服務(wù)器裝置的視聽數(shù)據(jù)特性決定部510經(jīng)由網(wǎng)絡(luò)將從各內(nèi)容視聽裝置發(fā)送的各用戶視聽數(shù)據(jù)匯總，基于該用戶視聽數(shù)據(jù)來決定視聽數(shù)據(jù)特性，并存儲(chǔ)于匯總視聽數(shù)據(jù)儲(chǔ)存部520。另外，以返回內(nèi)容視聽裝置的方式發(fā)送視聽數(shù)據(jù)特性。并且，服務(wù)器裝置500也實(shí)施各種用戶信息、所屬組的管理，用戶視聽數(shù)據(jù)歷史的管理等。

此外，在圖3中作為進(jìn)行各種處理的功能模塊而記載的各要素能夠由硬件的、cpu(centralprocessingunit：中央處理器)、存儲(chǔ)器、其他的集成電路構(gòu)成，也能夠由軟件的、加載于存儲(chǔ)器的各種程序等實(shí)現(xiàn)。因此，本領(lǐng)域技術(shù)人員能夠理解這些功能模塊能夠由硬件、軟件、或者它們的組合實(shí)現(xiàn)(后述的圖9以及圖10的框圖也相同)。

參照?qǐng)D5a以后，通過本實(shí)施方式對(duì)由上述內(nèi)容視聽部230實(shí)施的內(nèi)容視聽處理進(jìn)行說明。圖5a以及圖5b分別示意性地表示投入三維虛擬空間的用戶1與虛擬顯示器的配置關(guān)系例。由點(diǎn)線圍起的多個(gè)虛擬顯示器的每個(gè)沿著全天球的球面3被配置，在各虛擬顯示器上顯示各電視臺(tái)內(nèi)容a～i。圖5a以及圖5b在虛擬空間中用戶是虛擬地位于球體的中心，還是位于離開中心的位置這點(diǎn)不同。此外，圖5a與采用了圖1a所示的例子的hmd系統(tǒng)100的情況相當(dāng)，圖5b與采用了圖1b的其他例子的hmd系統(tǒng)100’的情況相當(dāng)。換句話說，如圖1b的例子那樣，在實(shí)施基于紅外線傳感器130的位置跟蹤的情況下，用戶不必位于球體的中心，用戶基于紅外線傳感器130和hmd110的位置關(guān)系，能夠在球體內(nèi)的平面上移動(dòng)。

如圖5a以及圖5b所示，在三維虛擬空間的半徑r的全天球的球面3配置有多個(gè)虛擬顯示器。更詳細(xì)而言，沿著天球面設(shè)置多個(gè)格子2，與該格子一起相關(guān)聯(lián)地配置9個(gè)(3×3)的虛擬顯示器。即，虛擬顯示器為球面顯示器。此外，格子的形狀并不限于四邊形，還可設(shè)為三角形，能夠設(shè)為任意的形狀。也可將多個(gè)格子與一個(gè)虛擬顯示器相關(guān)聯(lián)。與包含于用戶的視場(chǎng)的全部的虛擬顯示器相關(guān)聯(lián)的電視臺(tái)內(nèi)容a～i作為初始狀態(tài)同時(shí)帶限制地被再生。電視臺(tái)內(nèi)容的帶限制的再生是指，作為一個(gè)例子是在電視臺(tái)內(nèi)容中僅再生視覺內(nèi)容，而音頻內(nèi)容是無效化(無聲)的樣態(tài)。

如圖6a的俯視圖所示，佩戴了hmd的用戶在9個(gè)虛擬顯示器上同時(shí)看見各電視臺(tái)內(nèi)容a～i的視覺內(nèi)容。用戶之后通過使頭部旋轉(zhuǎn)，傾斜hmd，從而能夠通過選擇來確定上述9個(gè)虛擬顯示器中的任一個(gè)。如上述那樣，在圖5a以及圖5b中，使hmd向配置于左上的格子的虛擬顯示器的方向傾斜，指向特定的方向。由此，確定了與圖6a所示的格子#1(1)相關(guān)聯(lián)地配置的虛擬顯示器。圖6a所示的“×”符號(hào)表示hmd指向的上述格子上的點(diǎn)，實(shí)際上可以在hmd上顯示、也可不顯示怎樣都行。

在圖6a的例中，若格子#1(1)的虛擬顯示器被確定，該虛擬顯示器例如以粗框且陰影被活性顯示，則使電視臺(tái)內(nèi)容a(無限制)再生。即，當(dāng)前，電視臺(tái)內(nèi)容a成為不僅使視覺內(nèi)容而且也使音頻內(nèi)容有效化并再生的狀態(tài)。此外，在這期間，格子#1(1)的虛擬顯示器以外的顯示器上的電視臺(tái)內(nèi)容b～i繼續(xù)同時(shí)帶限制地僅再生視覺內(nèi)容。并且，例如通過用戶活動(dòng)頭部而使hmd傾斜，其它的虛擬顯示器(例如#3(3))被確定且被活性顯示。此時(shí)，這次使內(nèi)容a的音頻內(nèi)容無效化(無聲)并且使內(nèi)容i的音頻內(nèi)容有效化并再生。

用戶能夠通過使佩戴的hmd傾斜，指向并確定任一個(gè)虛擬顯示器，依次切換再生的音頻內(nèi)容。換句話說，不需要任何的遙控器操作而僅通過使hmd傾斜的動(dòng)作就能夠?qū)崿F(xiàn)用戶對(duì)被配置于虛擬空間的多虛擬顯示器的快速換臺(tái)操作。

根據(jù)本發(fā)明的實(shí)施方式，并且在用戶對(duì)圖6a的內(nèi)容a進(jìn)行視聽的狀態(tài)持續(xù)了一定時(shí)間的情況下，能夠移至圖6b的狀態(tài)。更詳細(xì)而言，如圖示的那樣，能夠?qū)?nèi)容a移至與相當(dāng)于用戶的視野的中心部的格子#2(2)相關(guān)聯(lián)的虛擬顯示器(主虛擬顯示器)上的顯示。代替之，通過將這之前在與格子#2(2)相關(guān)聯(lián)的虛擬顯示器帶限制地再生的內(nèi)容e移至與格子#1(1)相關(guān)聯(lián)的虛擬顯示器(子虛擬顯示器)的顯示，也進(jìn)行視覺內(nèi)容的調(diào)換。作為音頻內(nèi)容，再生內(nèi)容a的音頻的狀態(tài)被維持。該移至處理是基于下述發(fā)明者的考察的處理，即若持續(xù)一定時(shí)間視聽狀態(tài)，則能夠假定為用戶進(jìn)行了從快速換臺(tái)向視聽動(dòng)作的狀態(tài)遷移，應(yīng)當(dāng)在視野的中心部顯示視聽內(nèi)容。

接著，通過用戶進(jìn)一步活動(dòng)頭部而使hmd傾斜，其它的虛擬電視(例如與格子#3(3)相關(guān)聯(lián)的)被確定且被活性顯示。此時(shí)，進(jìn)一步實(shí)施主虛擬顯示器(與格子#2(2)相關(guān)聯(lián))與子虛擬顯示器(與格子#3(3)相關(guān)聯(lián))的內(nèi)容調(diào)換。

在切換時(shí)，也可在調(diào)換視覺內(nèi)容之前切換音頻內(nèi)容。即，也可在調(diào)換視覺內(nèi)容之前，按照使由主虛擬顯示器再生的內(nèi)容a的音頻內(nèi)容無效化(無聲)并且對(duì)子虛擬顯示器的內(nèi)容i的音頻內(nèi)容進(jìn)行再生的方式進(jìn)行切換。通過先實(shí)施音頻內(nèi)容的切換，能夠針對(duì)用戶提高切換的臨場(chǎng)感。

作為代替，在切換音頻內(nèi)容時(shí)，也可以不使主虛擬顯示器的內(nèi)容a的音頻內(nèi)容突然無效化(無聲)，而是一邊調(diào)整主虛擬顯示器的內(nèi)容a的音頻內(nèi)容以及子虛擬顯示器的內(nèi)容i的音頻內(nèi)容各自的音量，一邊同時(shí)進(jìn)行再生。例如，可以將各自的音頻內(nèi)容的音量比調(diào)整成為規(guī)定的值，或者可隨著時(shí)間經(jīng)過逐漸地使主虛擬顯示器的內(nèi)容a的音頻內(nèi)容音量下降并且逐漸地使子虛擬顯示器的內(nèi)容i的音頻內(nèi)容音量上升。此外，例如也可根據(jù)主虛擬顯示器與子虛擬顯示器的配置關(guān)系，使各自的音頻內(nèi)容的輸出與耳機(jī)115的右耳輸出和左耳輸出相對(duì)應(yīng)。

圖7a以及圖7b表示與上述圖6a以及圖6b相當(dāng)?shù)钠渌亩嗵摂M顯示器的配置例以及電視臺(tái)內(nèi)容顯示例。如圖示的那樣，各虛擬顯示器可以離開任意的距離而配置，另外，配置于用戶的視野的中心部的主虛擬顯示器也可用任意的大小配置為比子虛擬顯示器大。換句話說，本實(shí)施方式的多虛擬顯示器也可構(gòu)成為，只要各虛擬顯示器與沿著全天球的球面3設(shè)置的至少一個(gè)格子相關(guān)聯(lián)，則能夠以任意的位置、大小和/或形狀進(jìn)行配置，并且這些能夠由用戶設(shè)定。

在圖7a的例中，以中央部的主虛擬顯示器為中心配置合計(jì)7個(gè)虛擬顯示器，用戶的hmd指向顯示電視臺(tái)內(nèi)容a的子虛擬顯示器。在該情況下，電視臺(tái)內(nèi)容a再生音頻內(nèi)容以及視覺內(nèi)容這兩者，其他的電視臺(tái)內(nèi)容b～f帶限制地僅被再生視覺內(nèi)容的(音頻內(nèi)容被無效化)。而且，在圖7a中用戶對(duì)電視臺(tái)內(nèi)容a進(jìn)行視聽的狀態(tài)持續(xù)了一定時(shí)間的情況下，能夠移至圖7b的狀態(tài)。更詳細(xì)而言，如圖示的那樣，將電視臺(tái)內(nèi)容a移至與用戶的視野的中心部相當(dāng)?shù)闹魈摂M顯示器上的顯示。代替之，通過將這之前由主虛擬顯示器帶限制地再生的電視臺(tái)內(nèi)容d移至子虛擬顯示器的顯示，也進(jìn)行視覺內(nèi)容的調(diào)換。當(dāng)然，作為音頻內(nèi)容，再生電視臺(tái)內(nèi)容a的音頻的狀態(tài)被維持。

通過佩戴了hmd的用戶的頭部的簡(jiǎn)易的動(dòng)作，針對(duì)多虛擬顯示器，能夠向用戶提供以往沒有考慮的快速換臺(tái)的操作方式。即，通過基于用戶的頭部的活動(dòng)的動(dòng)作，針對(duì)被配置于虛擬空間的多虛擬顯示器，能夠?qū)崿F(xiàn)用戶的快速換臺(tái)操作而不需要任何的遙控器操作，能夠向用戶提供與現(xiàn)實(shí)世界不同的畫面操作性。

接著圖7b，參照?qǐng)D8a以及圖8b對(duì)本實(shí)施方式的、將各用戶的視聽狀況設(shè)為能夠?qū)崟r(shí)掌握的多虛擬顯示器的內(nèi)容顯示例進(jìn)行說明。圖7b是1個(gè)用戶佩戴了hmd并進(jìn)行視聽的多虛擬顯示器的顯示例。另一方面，在圖8a以及圖8b中，假定多個(gè)用戶使用相同的應(yīng)用并佩戴各人持有的hmd而對(duì)多虛擬顯示器進(jìn)行視聽的這一情況。使用內(nèi)容視聽裝置120并經(jīng)由網(wǎng)絡(luò)向服務(wù)器裝置500以任意的時(shí)機(jī)(例如定期的)發(fā)送各用戶視聽的多虛擬顯示器的內(nèi)容視聽數(shù)據(jù)。特別是，也可取得由主虛擬顯示器上再生的電視臺(tái)內(nèi)容(這里是電視臺(tái)內(nèi)容a)的信息，與用戶id一起向服務(wù)器發(fā)送。

從各內(nèi)容視聽裝置接收內(nèi)容視聽數(shù)據(jù)的服務(wù)器將電視臺(tái)內(nèi)容的內(nèi)容視聽數(shù)據(jù)匯總，計(jì)算每個(gè)電視臺(tái)的視聽率那樣的視聽數(shù)據(jù)特性。而且，針對(duì)視聽數(shù)據(jù)特性進(jìn)行評(píng)級(jí)并向各內(nèi)容視聽裝置反饋。另一方面，在接收了被評(píng)級(jí)了的視聽數(shù)據(jù)特性的各內(nèi)容視聽裝置中，將視聽數(shù)據(jù)特性與多個(gè)虛擬顯示器中的一個(gè)以上相關(guān)聯(lián)。更具體而言，在虛擬空間中，針對(duì)被評(píng)級(jí)高的電視臺(tái)內(nèi)容進(jìn)行再生的虛擬顯示器實(shí)施視覺上的處理并顯示于hmd。圖8a是接受反饋并實(shí)施了視覺上的處理的多虛擬顯示器的顯示例。如圖示的那樣，用戶正在視聽主虛擬顯示器的電視臺(tái)內(nèi)容a。另一方面，在同時(shí)使用該內(nèi)容視聽系統(tǒng)的多個(gè)用戶之間，從服務(wù)器反饋按電視臺(tái)內(nèi)容c、e、b多到少的順序被視聽這一點(diǎn)。在內(nèi)容視聽裝置中，對(duì)正顯示該電視臺(tái)內(nèi)容c、e、b的虛擬顯示器實(shí)施粗框顯示(c)、粗框虛線顯示(e)、粗框點(diǎn)線顯示(b)那樣的視覺顯示。由此，能夠?qū)⒁暵犅矢?、熱門內(nèi)容按順序?qū)崟r(shí)地向用戶提示。

在圖8b的顯示例中，在圖8a的基礎(chǔ)上還假定在服務(wù)器裝置側(cè)進(jìn)行用戶組管理的情況。例如，假定使用本內(nèi)容視聽裝置120的用戶屬于與用戶1～3相同的組，在服務(wù)器裝置側(cè)進(jìn)行用戶管理。服務(wù)器裝置500基于從內(nèi)容視聽裝置120與內(nèi)容視聽數(shù)據(jù)一起接收到的用戶id，提取屬于相同組的用戶1～3的內(nèi)容視聽數(shù)據(jù)，并與用戶1～3的圖標(biāo)圖像一起送回。在內(nèi)容視聽裝置中，如圖8b那樣，能夠?qū)⒏饔脩?～3的圖標(biāo)圖像顯示于虛擬顯示器附近。由此，將用戶1、3視聽電視臺(tái)內(nèi)容a、用戶2視聽電視臺(tái)內(nèi)容c這一情況實(shí)時(shí)地向用戶提示。根據(jù)本實(shí)施方式，通過與服務(wù)器的相互作用，用戶能夠一邊通過多虛擬顯示器視聽電視臺(tái)內(nèi)容，一邊實(shí)時(shí)掌握電視臺(tái)內(nèi)容的視聽率、用戶組的成員視聽哪個(gè)電視臺(tái)內(nèi)容之類的視聽數(shù)據(jù)特性。

關(guān)于參照?qǐng)D5a～圖8b的與上述的內(nèi)容視聽相關(guān)的處理的詳細(xì)內(nèi)容，在此參照?qǐng)D9～圖13進(jìn)行進(jìn)一步的說明。圖9是圖3中已說明的構(gòu)成內(nèi)容視聽裝置具備的內(nèi)容視聽部230的詳細(xì)例示的功能框圖。另外，圖10是圖3中已說明的構(gòu)成服務(wù)器裝置具備的視聽數(shù)據(jù)特性決定部510的詳細(xì)例示的功能框圖。圖11是與內(nèi)容視聽處理相關(guān)的hmd和內(nèi)容視聽裝置之間的詳細(xì)例示的流程圖。圖12是與內(nèi)容視聽處理相關(guān)的內(nèi)容視聽裝置和服務(wù)器裝置之間的詳細(xì)例示的流程圖。

如圖9所示，內(nèi)容視聽部230具備：包含視覺內(nèi)容再生部(帶限制內(nèi)容再生部)301以及音頻內(nèi)容再生部302的內(nèi)容再生部300、虛擬顯示器選擇部303、內(nèi)容視聽判定部304、內(nèi)容調(diào)換部305、輸出部(顯示部)306、用戶/內(nèi)容視聽數(shù)據(jù)取得部307以及視聽數(shù)據(jù)特性相關(guān)聯(lián)部308。再生部300將由電視接收器接收的多個(gè)電視臺(tái)內(nèi)容的每一個(gè)與虛擬顯示器的任一個(gè)建立關(guān)聯(lián)并再生。視覺內(nèi)容再生部301在顯示于hmd的多個(gè)虛擬顯示器中，關(guān)于與各個(gè)相關(guān)聯(lián)的映像聲音內(nèi)容，同時(shí)進(jìn)行僅有視覺內(nèi)容的帶限制再生。特別是，針對(duì)通過電視接收器接收的電視節(jié)目的有聲音的動(dòng)畫內(nèi)容(例如，電視臺(tái)的映像聲音內(nèi)容)，使音頻內(nèi)容無效化(即，無聲)，僅再生視覺內(nèi)容生。

音頻內(nèi)容再生部302通過使由虛擬顯示器選擇部303選擇的與虛擬顯示器相關(guān)聯(lián)的、被視覺內(nèi)容再生部301無效化的音頻內(nèi)容有效化，從而再生內(nèi)容整體。即，內(nèi)容再生部300使由視覺內(nèi)容再生部301再生的多個(gè)音頻內(nèi)容以及由音頻內(nèi)容再生部302再生的一個(gè)音頻內(nèi)容重疊，并向輸出部306輸出，讓用戶視聽。在虛擬顯示器選擇部303中，根據(jù)由hmd具備的傳感器(114/130)檢測(cè)出的動(dòng)作，選擇任意的一個(gè)虛擬顯示器。更詳細(xì)而言，如上述那樣，傳感器能夠?yàn)榻撬俣葌鞲衅?，檢測(cè)出的hmd的動(dòng)作包含傾斜信息。而且，如圖5a～圖7b那樣，在全天球的球面3上，根據(jù)hmd的傾斜以及位置，通過確定球面上的格子，能夠通過選擇來確定與該格子相關(guān)聯(lián)的虛擬顯示器。

內(nèi)容視聽判定部304針對(duì)由音頻內(nèi)容再生部302有效化并再生的音頻內(nèi)容，判定用戶是否持續(xù)一定時(shí)間進(jìn)行了視聽。即，判定該電視臺(tái)內(nèi)容是否持續(xù)給予的時(shí)間地被再生。內(nèi)容持續(xù)給予的時(shí)間地被再生意味著判定為用戶的動(dòng)作從快速換臺(tái)移至視聽模式。此時(shí)，在內(nèi)容調(diào)換部305中，將正在再生的電視臺(tái)內(nèi)容與被配置于規(guī)定的位置的虛擬顯示器相關(guān)聯(lián)的電視臺(tái)內(nèi)容調(diào)換，并且向輸出部306輸出。特別是也可以與相當(dāng)于視野中心部的主虛擬顯示器的電視臺(tái)內(nèi)容調(diào)換。

用戶/內(nèi)容視聽數(shù)據(jù)取得部307在規(guī)定的時(shí)機(jī)取得由主虛擬顯示器上再生的電視臺(tái)內(nèi)容的用戶視聽數(shù)據(jù)，與用戶id一起向服務(wù)器裝置提供。用戶視聽數(shù)據(jù)可以包含在主虛擬顯示器上再生的電視臺(tái)內(nèi)容的電視臺(tái)信息、內(nèi)容編號(hào)、主虛擬顯示器以及子虛擬顯示器的電視臺(tái)內(nèi)容配置順序等，另外，規(guī)定的時(shí)機(jī)可以設(shè)為從服務(wù)器接收到觸發(fā)/消息的時(shí)機(jī)。然而，本領(lǐng)域技術(shù)人員應(yīng)該理解的是本發(fā)明并不限于此。

視聽數(shù)據(jù)特性相關(guān)聯(lián)部308經(jīng)由網(wǎng)絡(luò)從服務(wù)器裝置接收到視聽數(shù)據(jù)特性后，將視聽數(shù)據(jù)特性與虛擬空間內(nèi)的多個(gè)虛擬顯示器中的一個(gè)以上相關(guān)聯(lián)。視聽數(shù)據(jù)特性例如包括電視臺(tái)內(nèi)容視聽率。而且，視聽數(shù)據(jù)特性相關(guān)聯(lián)部308針對(duì)正再生電視臺(tái)內(nèi)容視聽率被高評(píng)級(jí)的電視臺(tái)內(nèi)容的虛擬顯示器實(shí)施如圖8a例示那樣的虛擬空間內(nèi)的視覺上的處理，并顯示于hmd。或者，視聽數(shù)據(jù)特性是屬于相同的用戶組的其他的用戶在他/她的虛擬空間中顯示于主虛擬顯示器上的電視臺(tái)內(nèi)容信息。此時(shí)，視聽數(shù)據(jù)特性相關(guān)聯(lián)部308如圖8b那樣，在正再生其他用戶視聽中的電視臺(tái)內(nèi)容的虛擬顯示器的附近實(shí)施顯示該其他用戶的圖標(biāo)那樣的虛擬空間內(nèi)的視覺上的處理，并顯示于hmd。

在輸出部306中，將基于虛擬空間的視野整體顯示于hmd的顯示器112，并且將被配置于虛擬空間的多個(gè)虛擬顯示器的視覺內(nèi)容與虛擬空間圖像一起向hmd的顯示器112輸出，還將音頻內(nèi)容向hmd的耳機(jī)115輸出。

如圖10所示，服務(wù)器裝置500具備的視聽數(shù)據(jù)特性決定部510具備終端觸發(fā)部511、視聽率計(jì)算部512、評(píng)級(jí)數(shù)據(jù)生成部513、用戶管理部514以及用戶視聽信息管理部。終端觸發(fā)部511以每分鐘等的規(guī)定的時(shí)機(jī)向各內(nèi)容視聽裝置發(fā)送觸發(fā)/消息，使各內(nèi)容視聽裝置同步。另外，命令各內(nèi)容視聽裝置取得用戶視聽數(shù)據(jù)。此外，本領(lǐng)域技術(shù)人員應(yīng)該理解如果各內(nèi)容視聽裝置具備能夠使各內(nèi)容視聽裝置同步的計(jì)時(shí)器等的其他單元，則也可在服務(wù)器裝置500側(cè)不設(shè)置終端觸發(fā)部511。

若從各內(nèi)容視聽裝置接收各用戶視聽數(shù)據(jù)，則在視聽率計(jì)算部512中，以規(guī)定的時(shí)機(jī)計(jì)算電視臺(tái)內(nèi)容視聽率并決定視聽數(shù)據(jù)特性。該時(shí)機(jī)也可與終端觸發(fā)部511的觸發(fā)/消息的發(fā)送時(shí)機(jī)一起設(shè)為每分鐘等。另外，對(duì)于計(jì)算的電視臺(tái)內(nèi)容視聽率而言，通過基于發(fā)送到服務(wù)器的用戶視聽數(shù)據(jù)的個(gè)數(shù)(即，發(fā)送了用戶視聽數(shù)據(jù)的活躍用戶數(shù))以及根據(jù)各用戶視聽數(shù)據(jù)匯總的每個(gè)電視臺(tái)內(nèi)容的視聽用戶數(shù)，例如以下那樣被計(jì)算。

電視臺(tái)內(nèi)容視聽率＝(視聽用戶數(shù)/活躍用戶數(shù))×100

其中，電視臺(tái)內(nèi)容視聽率計(jì)算的方式并不限于上述。其他，例如也可基于存儲(chǔ)于用戶管理部514的用戶信息，進(jìn)行與性別、年齡層、居住地域等對(duì)應(yīng)的計(jì)算，另外，也可限定于特定的用戶組，計(jì)算組內(nèi)的電視臺(tái)內(nèi)容視聽率。

若由視聽率計(jì)算部512計(jì)算電視臺(tái)內(nèi)容視聽率，則接著，在評(píng)級(jí)數(shù)據(jù)生成部513中，進(jìn)行基于電視臺(tái)內(nèi)容視聽率的評(píng)級(jí)。例如，是基于視聽率的電視臺(tái)內(nèi)容的排序、基于與過去的電視臺(tái)內(nèi)容視聽率的對(duì)比的電視臺(tái)內(nèi)容的排序等。用戶管理部514管理各種用戶信息。用戶信息包含例如用戶id、組id、用戶/圖標(biāo)圖像、用戶認(rèn)證信息等。用戶視聽信息管理部515能夠存儲(chǔ)與各用戶id相關(guān)聯(lián)的用戶視聽數(shù)據(jù)、其歷史信息，并檢索和取得各用戶的用戶視聽數(shù)據(jù)。

如圖11所示，與內(nèi)容視聽相關(guān)的用戶側(cè)的信息處理通過hmd110以及內(nèi)容視聽裝置120之間的相互作用而被實(shí)施。在步驟s201中，在應(yīng)用上將內(nèi)容視聽模式設(shè)為開啟，決定虛擬空間的視野。由此，佩戴了hmd的用戶在虛擬空間內(nèi)成為圖5a、圖5b的狀態(tài)。在步驟s202中，作為初始狀態(tài)，由視覺內(nèi)容再生部301帶限制地再生被配置于視野內(nèi)的全部的虛擬顯示器的視覺內(nèi)容，并向輸出部306輸出。

接受步驟s202，在步驟s101中，如圖6a、圖7a所示，hmd110顯示在向輸出部306輸出的視野內(nèi)的全部的虛擬顯示器上再生的視覺內(nèi)容。在顯示視覺內(nèi)容的期間，hmd110還在步驟s102中從傳感器114/130取得hmd的動(dòng)作信息，向內(nèi)容視聽裝置120提供該信息。特別是，取得基于角速度傳感器114的頭部的旋轉(zhuǎn)(傾斜)信息數(shù)據(jù)和/或基于紅外線傳感器130的虛擬空間內(nèi)的位置信息數(shù)據(jù)。

在取得了動(dòng)作信息的內(nèi)容視聽裝置120中，在步驟s203中，通過虛擬顯示器選擇部303基于動(dòng)作信息，通過選擇來確定成為目標(biāo)的虛擬顯示器。作為一個(gè)例子，使用根據(jù)圖4所示的角速度傳感器的頭部的旋轉(zhuǎn)信息所包含的偏航角、俯仰角以及橫滾角而決定的hmd的傾斜數(shù)據(jù)以及任意基于紅外線傳感器130的虛擬空間內(nèi)的位置信息數(shù)據(jù)，來計(jì)算hmd的傾斜方向(圖5a、圖5b的箭頭)的矢量與半徑r的球體表面3相交的交點(diǎn)的絕對(duì)位置坐標(biāo)。通過判斷計(jì)算出的絕對(duì)位置坐標(biāo)是位于球體面的哪個(gè)格子的區(qū)域，一個(gè)格子被確定，與該格子相關(guān)聯(lián)的虛擬顯示器被確定。格子與虛擬顯示器的相關(guān)聯(lián)例如可以在內(nèi)容信息儲(chǔ)存部260中被儲(chǔ)存為表。

若由步驟s203確定了目標(biāo)虛擬顯示器，接著，內(nèi)容視聽裝置120在內(nèi)容再生部300中對(duì)該目標(biāo)虛擬顯示器的內(nèi)容進(jìn)行再生。這里，在音頻內(nèi)容再生部302中使在步驟s202中無效化的目標(biāo)虛擬顯示器的音頻內(nèi)容有效化并再生。步驟s204以后，在hmd110中在步驟s103繼續(xù)取得hmd的動(dòng)作信息并向內(nèi)容視聽裝置120供給。

另一方面，在內(nèi)容視聽裝置120中，在步驟s205監(jiān)視在內(nèi)容視聽判定部304中持續(xù)再生多長(zhǎng)時(shí)間、目標(biāo)虛擬顯示器的電視臺(tái)內(nèi)容是否被持續(xù)再生了，并且判定是否持續(xù)再生了規(guī)定的時(shí)間。在持續(xù)規(guī)定的時(shí)間地再生的情況下，在步驟s206中，判定為用戶的動(dòng)作從快速換臺(tái)模式移至視聽模式，為了在主虛擬顯示器顯示目標(biāo)虛擬顯示器的電視臺(tái)內(nèi)容，通過內(nèi)容調(diào)換部305調(diào)換目標(biāo)虛擬顯示器的內(nèi)容、和與相當(dāng)于視野的中心的球面3上的規(guī)定的格子相關(guān)聯(lián)的主虛擬顯示器的內(nèi)容(也參照?qǐng)D6b以及圖7b)。此外，步驟s206的移至處理并不限于調(diào)換目標(biāo)虛擬顯示器與主虛擬顯示器的各內(nèi)容的處理。例如，也可以使調(diào)換對(duì)象內(nèi)容按順序滑動(dòng)或旋轉(zhuǎn)。

圖12表示與圖8a對(duì)應(yīng)的、正在進(jìn)行內(nèi)容視聽的內(nèi)容視聽裝置120與服務(wù)器裝置500的相互作用的信息處理。在步驟s301中，服務(wù)器裝置的終端觸發(fā)部511以每分鐘等的規(guī)定的時(shí)機(jī)向當(dāng)前與該服務(wù)器連接的內(nèi)容視聽裝置發(fā)送觸發(fā)/消息。響應(yīng)于觸發(fā)/消息的接收，在步驟s211中，內(nèi)容視聽裝置的用戶/內(nèi)容視聽數(shù)據(jù)取得部307以接收到觸發(fā)/消息的時(shí)機(jī)取得用戶視聽數(shù)據(jù)。特別是，取得與主虛擬顯示器相關(guān)聯(lián)的電視臺(tái)內(nèi)容的電視臺(tái)信息、內(nèi)容編號(hào)。接著在步驟s212中，將已取得的用戶視聽數(shù)據(jù)與用戶id一起向服務(wù)器裝置500發(fā)送。

從各內(nèi)容視聽裝置接收到用戶視聽數(shù)據(jù)的服務(wù)器裝置500在步驟s302中，通過視聽率計(jì)算部512決定視聽數(shù)據(jù)特性。更具體而言，計(jì)算在各內(nèi)容視聽裝置中與主虛擬顯示器相關(guān)聯(lián)的電視臺(tái)內(nèi)容的視聽率，由評(píng)級(jí)數(shù)據(jù)生成部513實(shí)施電視臺(tái)內(nèi)容視聽率的評(píng)級(jí)。決定的視聽數(shù)據(jù)特性在步驟s303中作為反饋消息被向內(nèi)容視聽裝置120發(fā)送。接收了反饋消息的內(nèi)容視聽裝置120在步驟s213中通過視聽數(shù)據(jù)特性相關(guān)聯(lián)部使該視聽數(shù)據(jù)特性與多個(gè)虛擬顯示器中的一個(gè)以上相關(guān)聯(lián)。更具體而言，針對(duì)再生電視臺(tái)內(nèi)容視聽率被高評(píng)級(jí)的電視臺(tái)內(nèi)容的虛擬顯示器，如圖8a所示實(shí)施虛擬空間中的視覺上的處理并顯示于hmd。

圖13表示與圖8b對(duì)應(yīng)的、正在進(jìn)行內(nèi)容視聽的內(nèi)容視聽裝置120與服務(wù)器裝置500的相互作用的信息處理。步驟s302之前的流程與圖12相同，這里的說明省略。通過用戶管理部514，在步驟s311中取得與從內(nèi)容視聽裝置發(fā)送來的用戶id相關(guān)聯(lián)的組id，接著在步驟s312中取得與該組id相關(guān)聯(lián)的其他用戶的用戶id以及他/她的登錄完畢的圖標(biāo)圖像。在步驟s313中，通過用戶視聽信息管理部515，使用其他用戶id，取得向服務(wù)器裝置發(fā)送并儲(chǔ)存的其他用戶的用戶視聽數(shù)據(jù)，特別是在其他用戶的內(nèi)容視聽裝置中在主虛擬顯示器上當(dāng)前再生的電視臺(tái)內(nèi)容信息。即，實(shí)時(shí)確定其他用戶在主虛擬顯示器上正視聽哪個(gè)電視臺(tái)內(nèi)容。接著，在步驟s314中，不僅向內(nèi)容視聽裝置發(fā)送視聽數(shù)據(jù)特性，還將其他用戶的圖標(biāo)圖像以及由步驟s313確定的其他的用戶的電視臺(tái)內(nèi)容信息作為反饋消息發(fā)送。

接收到反饋消息的內(nèi)容視聽裝置120在步驟s213中，通過視聽數(shù)據(jù)特性相關(guān)聯(lián)部308將該視聽數(shù)據(jù)特性與多個(gè)虛擬顯示器中的一個(gè)以上相關(guān)聯(lián)。更具體而言，針對(duì)再生電視臺(tái)內(nèi)容視聽率被高評(píng)級(jí)的電視臺(tái)內(nèi)容的虛擬顯示器，如圖8a所示實(shí)施虛擬空間中的視覺上的處理并顯示于hmd。與此相伴，在步驟s214中，如圖8b所示，將其他用戶的圖標(biāo)圖像與當(dāng)前顯示其他用戶視聽的電視臺(tái)內(nèi)容信息的虛擬顯示器建立關(guān)聯(lián)并顯示于其附近。

畫面顯示例

圖14表示基于本發(fā)明的實(shí)施方式安裝的、顯示于hmd的畫面例。圖14與圖8a對(duì)應(yīng)，在中央配置主虛擬顯示器，在其兩側(cè)分別立體地配置3個(gè)子虛擬顯示器。

在該狀態(tài)中，作為一個(gè)例子，假定hmd指向左列下的虛擬顯示器方向，將其選擇為目標(biāo)虛擬顯示器。若針對(duì)該目標(biāo)虛擬顯示器以一定時(shí)間維持hmd的傾斜，則實(shí)施畫面切換，目標(biāo)虛擬顯示器被移至中央的主顯示器部分，使其內(nèi)容放大顯示，并且也使音頻內(nèi)容再生。顯示于子虛擬顯示器的電視臺(tái)內(nèi)容被帶限制地再生并顯示。用戶進(jìn)一步使hmd傾斜，指向任一個(gè)子顯示器，在經(jīng)過一定時(shí)間的情況下，這次將指向的子顯示器的內(nèi)容與主顯示器的內(nèi)容調(diào)換。用戶按照使佩戴的hmd指向任一個(gè)虛擬顯示器的方式使佩戴的hmd傾斜，能夠確定一個(gè)虛擬顯示器，從而能夠依次切換音頻內(nèi)容。

此外，在圖14中，對(duì)左列正中的虛擬顯示器視覺顯示實(shí)線框，對(duì)右列下的虛擬顯示器視覺顯示點(diǎn)線框，表示顯示于這些虛擬顯示器的電視臺(tái)內(nèi)容的視聽率高。經(jīng)由網(wǎng)絡(luò)將用戶視聽信息向服務(wù)器發(fā)送，服務(wù)器能夠?qū)崟r(shí)匯總電視臺(tái)內(nèi)容的各用戶的視聽數(shù)據(jù)并進(jìn)行反饋。

以上對(duì)本發(fā)明的實(shí)施方式進(jìn)行了說明。本發(fā)明的實(shí)施方式的內(nèi)容視聽系統(tǒng)適用于將被配置于虛擬空間的多虛擬顯示器顯示于hmd上的應(yīng)用。特別是，該內(nèi)容視聽系統(tǒng)適用于虛擬顯示器是虛擬電視，在虛擬空間內(nèi)再生由電視接收器等接收的電視臺(tái)的映像聲音內(nèi)容(電視節(jié)目)，佩戴了hmd的用戶對(duì)電視臺(tái)內(nèi)容進(jìn)行視聽那樣的應(yīng)用。

在以往技術(shù)中，用戶在視聽電視節(jié)目時(shí)，往往實(shí)施用戶操作遙控器來切換頻道這樣的稱為快速換臺(tái)的操作。而另一方面，在用戶佩戴了hmd而投入虛擬空間的情況下，用戶無法觀察手邊，導(dǎo)致產(chǎn)生遙控器按鈕誤操作這一情況。另外，在以往技術(shù)中，用戶實(shí)時(shí)掌握與電視節(jié)目相關(guān)的、熱門的電視臺(tái)內(nèi)容是哪個(gè)是困難的。例如，視聽率數(shù)據(jù)在播放結(jié)束后由第三方機(jī)構(gòu)公布，因此正在視聽電視臺(tái)內(nèi)容的用戶無法實(shí)時(shí)掌握該電視臺(tái)內(nèi)容的視聽率。

根據(jù)本發(fā)明的實(shí)施方式，能夠?qū)F(xiàn)實(shí)世界的電視節(jié)目替換等的控制器操作的全部由hmd的頭部動(dòng)作來取代。特別是，能夠通過僅使hmd傾斜的動(dòng)作來實(shí)現(xiàn)用戶針對(duì)被配置于虛擬空間的多虛擬顯示器的快速換臺(tái)，而不需要任何的遙控器操作，能夠向用戶提供與現(xiàn)實(shí)世界不同的畫面操作性。另外，根據(jù)本發(fā)明的實(shí)施方式，由于服務(wù)器實(shí)時(shí)匯總電視臺(tái)內(nèi)容的各用戶的視聽數(shù)據(jù)并向各用戶反饋，因此用戶能夠一邊視聽電視臺(tái)內(nèi)容一邊實(shí)時(shí)掌握熱門的電視臺(tái)內(nèi)容。

本發(fā)明并不局限于上述的實(shí)施方式。本領(lǐng)域技術(shù)人員應(yīng)理解在不脫離前述的技術(shù)方案所記載的本發(fā)明的精神以及范圍的前提下能夠進(jìn)行各種實(shí)施方式的變更ろ。

附圖標(biāo)記的說明

1…虛擬空間沒入用戶；2…格子；3…球面；100、100’…h(huán)md系統(tǒng)；110…h(huán)md；112…顯示器；114…傳感器；115…電視接收器；116…耳機(jī)；120控制電路部；130…紅外線傳感器；210…視野生成部；220…動(dòng)作檢測(cè)部；230…內(nèi)容視聽部(顯示部)；250…空間信息儲(chǔ)存部；260…內(nèi)容信息儲(chǔ)存部；300…內(nèi)容再生部；301…視覺內(nèi)容再生部；302…音頻內(nèi)容再生部；303…虛擬顯示器選擇部；304…內(nèi)容視聽判定部；305…內(nèi)容調(diào)換部；306…輸出部；307…用戶/內(nèi)容視聽數(shù)據(jù)取得部；308…視聽數(shù)據(jù)特性相關(guān)聯(lián)部；500…服務(wù)器裝置；510…視聽數(shù)據(jù)特性決定部；511…終端觸發(fā)部；512…視聽率計(jì)算部；513…評(píng)級(jí)數(shù)據(jù)生成部；514…用戶管理部；515…用戶視聽信息管理部；520…匯總視聽數(shù)據(jù)儲(chǔ)存部。