專利名稱：內容播放裝置的制作方法
技術領域：
本發(fā)明涉及內容播放裝置，并且具體地涉及使得當觀看內容時能夠獲得更強的臨場感而不妨礙觀看的內容播放裝置。
背景技術：
傳統(tǒng)上，電視接收器通常是從節(jié)目的制造者到觀看者的單向信息傳輸裝置。相比之下，已經提出了 CAPTAIN系統(tǒng)(圖文電話訪問信息網絡系統(tǒng))以及在地面數(shù)字廣播中的交互服務，作為用于制造觀看者能夠參與到其中的節(jié)目的框架。另一方面，近年來，網絡的發(fā)展已經允許用戶之間大量通信。具體地，能夠打出短句的、被稱作微博客(micro-blog)的通信工具導致了對具有較高即時性的通信的偏好。使用這樣的裝置允許用戶容易地談論關于他們在當前時刻的想法的主題，從而產生親近感和臨場感。此外，提出了一種技術，其中，用戶或其他用戶寫的文本被疊加在通過流被分發(fā)的運動圖像內容上，作為用于使用戶相互進行通信的技術(例如，日本未審查專利申請公開第2008-172844號)。借助于該技術，用戶輸入的文本被傳輸?shù)搅鞣掌?，并且該文本和其他用戶書寫的其他文本被疊加在正被分發(fā)的運動圖像內容上。另外，存在一種技術，其中，當使用蜂窩電話觀看體育賽事等節(jié)目的用戶通過操作蜂窩電話來輸入歡呼信息時，歡呼信息被反饋給正舉行體育賽事等的會場，并且在會場播放對應于歡呼信息歡呼聲(例如，日本未審查專利申請公開第2005-339479號)。借助于該技術，其他用戶的歡呼信息也被反饋給觀看節(jié)目的用戶的蜂窩電話，所以蜂窩電話的用戶也可以體驗臨場感。

發(fā)明內容
然而，借助于前述技術，在觀看內容時獲得臨場感的那種動作妨礙了觀看內容。例如，借助于前述交互服務，觀看者僅可以做諸如針對程序中的問題從若干選項中選擇答案之類的事情。這沒有提供自然參與的氛圍、并且觀看者所得到的不比以受限的方式遠程參與的感覺多多少。此外，借助于微博客的交流、以及諸如將輸入文本疊加在正通過流被分發(fā)的運動圖像內容上的技術，實際上用戶必須已主動地輸入了文本。因此，如果用戶試圖專注于觀看內容，則打字和交流技巧會受到影響，但是如果用戶試圖專注于打字，則用戶可能錯失對觀看內容的完整享受。另外，借助于用于將在蜂窩電話處輸入的歡呼信息反饋到實際會場的方法，用戶傳輸歡呼和叫聲作為歡呼信息，所以用戶必須有意地傳輸該信息，這可能干擾對于內容的專注。所希望的是能夠實現(xiàn)在觀看內容時獲得的更強的臨場感而不妨礙觀看。因此，公開了一種用于生成關于觀看者對內容的情緒反應的信息的系統(tǒng)。該系統(tǒng)可以包括觀看者反應輸入單元，其被配置成捕獲表示本地觀看者對內容數(shù)據(jù)的反應的至少一個本地觀看者音頻或本地觀看者視頻的本地數(shù)據(jù)，內容數(shù)據(jù)表示至少一個內容音頻或內容視頻。該系統(tǒng)還可以包括觀看者情緒分析單元，其被配置成基于本地數(shù)據(jù)來生成指示本地觀看者對內容數(shù)據(jù)的情緒反應的本地觀看者情緒信息。還公開了一種用于生成關于觀看者對內容的情緒反應的信息的方法。該方法可以包括捕獲表示本地觀看者對內容數(shù)據(jù)的反應的至少一個本地觀看者音頻或本地觀看者視頻的本地數(shù)據(jù)，內容數(shù)據(jù)表示至少一個內容音頻或內容視頻。該方法還可以包括基于本地數(shù)據(jù)來生成指示本地觀看者對內容數(shù)據(jù)的情緒反應的本地觀看者情緒信息。另外，公開了一種用于將內容與關于觀看者對該內容的情緒反應的信息進行組合的裝置。該裝置可以包括觀看者反應輸入單元，其被配置成捕獲表示本地觀看者對內容數(shù)據(jù)的反應的至少一個本地觀看者音頻或本地觀看者視頻的本地數(shù)據(jù)，內容數(shù)據(jù)表示至少一個內容音頻或內容視頻。該裝置還可以包括觀看者情緒分析單元，其被配置成基于本地數(shù)據(jù)來生成指示本地觀看者對內容數(shù)據(jù)的情緒反應的本地觀看者情緒信息。另外，該裝置可以包括傳輸單元，其被配置成將本地觀看者情緒信息傳輸?shù)椒掌?。該裝置還可以包括合成單元。合成單元可以被配置成從服務器接收組合觀看者情緒信息。另外，合成單元可以被配置成基于組合觀看者情緒信息來確定至少一個效果音頻或效果視頻。合成單元還可以被配置成將表示所確定的至少一個效果音頻或效果視頻的至少一個效果音頻數(shù)據(jù)或效果視頻數(shù)據(jù)與內容數(shù)據(jù)進行組合。還公開了一種用于將內容與關于觀看者對該內容的情緒反應的信息進行組合的方法。處理器可以執(zhí)行程序以使內容呈現(xiàn)裝置執(zhí)行該方法。該程序可以被存儲在計算機可讀介質中。該方法可以包括捕獲表示本地觀看者對內容數(shù)據(jù)的反應的至少一個本地觀看者音頻或本地觀看者視頻的本地數(shù)據(jù)，內容數(shù)據(jù)表示至少一個內容音頻或內容視頻。該方法還可以包括基于本地數(shù)據(jù)來生成指示本地觀看者對內容數(shù)據(jù)的情緒反應的本地觀看者情緒信息。另外，該方法可以包括將本地觀看者情緒信息傳輸?shù)椒掌?。該方法還可以包括從服務器接收組合觀看者情緒信息。此外，該方法可以包括基于組合觀看者情緒信息來確定至少一個效果音頻或效果視頻。該方法還可以包以括將表示所確定的至少一個效果音頻或效果視頻的至少一個效果音頻數(shù)據(jù)或效果視頻數(shù)據(jù)與內容數(shù)據(jù)進行組合。


圖1是示出了符合本發(fā)明的實施例的內容觀看系統(tǒng)的配置的圖；圖2是示出了客戶處理單元的配置示例的圖；圖3是用于描述客戶裝置進行的合成處理以及服務器進行的分發(fā)處理的流程圖；圖4是用于描述客戶裝置進行的觀看信息生成處理以及服務器進行的合并 (consolidation)處理的流程圖；并且圖5是示出了計算機的配置示例的框圖。
具體實施例方式
將參照附圖描述本發(fā)明的實施例。內容觀看系統(tǒng)的配置示例圖1是符合本發(fā)明的實施例的內容觀看系統(tǒng)的配置示例的圖。內容觀看系統(tǒng)11 被配置為客戶裝置21-1至客戶裝置21-N、以及連接到客戶裝置21-1至客戶裝置21-N的服務器22。例如，客戶裝置21-1至客戶裝置21-N和服務器22經由諸如因特網的網絡(未示出)而彼此連接。客戶裝置21-1至客戶裝置21-N接收并播放諸如電視廣播節(jié)目等的內容。注意， 在不必單獨區(qū)分客戶裝置21-1至客戶裝置21-N的情況下，這些裝置將被簡單地統(tǒng)稱為“客戶裝置21”。例如，客戶裝置21-1被安裝在諸如用戶的家的觀看環(huán)境23中，并且經由廣播網絡、通過來自未示出的廣播站的無線電波廣播來接收節(jié)目的廣播信號。客戶裝置21-1被配置為調諧器31、觀看者反應輸入單元32、客戶處理單元33和顯示單元34。調諧器31接收從廣播站發(fā)射的廣播信號，從廣播信號中分離出用戶所指定的頻道的節(jié)目的廣播信號(即，指示了表示至少一個內容音頻或內容視頻的內容數(shù)據(jù)的廣播信號)，并將其提供給客戶處理單元33。在下文中，要根據(jù)廣播信號來播放的節(jié)目將被簡單地稱作“內容”。觀看者反應輸入單元32例如包括照相機和麥克風，觀看者反應輸入單元32獲得觀看內容的用戶的視頻(運動圖像)和音頻(即，分別是本地觀看者視頻和本地觀看者音頻)，作為指示用戶關于內容的反應的觀看者反應信息(即，表示本地觀看者視頻和本地觀看者音頻的本地數(shù)據(jù))，并且將其提供給客戶處理單元33。客戶處理單元33使用來自觀看者反應輸入單元32的觀看者反應信息并生成關于用戶正觀看的內容的觀看信息，并且經由諸如因特網等的網絡將其傳輸?shù)椒掌?2。現(xiàn)在，觀看信息是與用戶關于內容的反應有關的信息，并且觀看者信息包括觀看者反應信息，情緒構建信息(即，本地觀看者情緒信息)、以及頻道信息。注意，情緒構建信息是指示用戶的情緒構建程度(即，用戶在觀看內容時變得有多情緒化的程度或者用戶的情緒反應的強度)的信息，并且頻道信息是指示正觀看的內容的頻道的信息。此外，客戶處理單元33經由諸如因特網等網絡接收從服務器22傳輸?shù)乃杏^看者觀看信息(即，組合觀看者情緒信息)。所有觀看者觀看信息是通過合并來自連接到服務器22的每個客戶裝置21的觀看信息而生成的信息，其中所有觀看者觀看信息包括頻道信息、指示所有觀看者的情緒構建信息的平均值的平均情緒構建信息、以及每個觀看者的觀看者反應信息。注意，包括在所有觀看者觀看信息中的平均情緒構建信息指示所有用戶的情緒構建的平均程度就足夠了，并且不一定是情緒構建信息的平均值。因此，包括在所有觀看者觀看信息中的觀看者反應信息可以是部分觀看者的所有觀看者反應信息、所有觀看者的觀看者反應信息的部分信息、或部分觀看者的觀看者反應信息的部分信息。另外，所有觀看者觀看信息可以包括所合并的觀看者信息的數(shù)目，即，包括觀看者數(shù)目的信息。客戶處理單元33將根據(jù)從服務器22獲得的所有觀看者觀看信息識別出的情緒構建效果與從調諧器31提供的內容進行合成，并提供所獲得的內容(在下文中還被適當?shù)胤Q作“合成內容”)，以便被播放。現(xiàn)在，情緒構建效果由組成觀看者反應信息的使用者的視頻和音頻以及諸如準備好的笑聲、叫聲、歡呼聲等的音頻的數(shù)據(jù)組成。換言之，情緒構建效果是表示許多觀看者 (用戶)關于內容的情緒構建的視頻和音頻等的數(shù)據(jù)。注意，情緒構建效果可以是用戶關于內容的實際反應(即，遠程觀看者對該內容的反應的至少一個遠程觀看者音頻或遠程觀看者視頻)，或者可以是表示虛擬的觀看者反應的、諸如叫聲等的音頻等。顯示單元34被配置為例如液晶顯示器和揚聲器等，并且播放從客戶處理單元33 提供的合成內容。也就是說，顯示單元34顯示組成合成內容的視頻(運動圖像)，并且還輸出組成合成內容的音頻。因此，將觀看內容的全體觀看者的現(xiàn)場觀看信息(即，從所有觀看者觀看信息獲得的情緒構建效果)與內容進行合成并播放，由此觀看該內容的用戶能夠得到在觀看者之中的融入感以及臨場感。注意，以與客戶裝置21-1相同的方式來配置客戶裝置21-2至客戶裝置21-N，并且這些客戶裝置21還以相同的方式操作?？蛻籼幚韱卧呐渲檬纠敿毜?，如圖2中所示那樣配置圖1中的客戶處理單元33。具體地，客戶處理單元33被配置為分析單元(即，觀看者情緒分析單元)61、信息選擇單元(即，傳輸單元)62、 記錄單元63和合成單元64構成。分析單元61分析從觀看者反應輸入單元32提供的觀看者反應信息，生成情緒構建信息，并將其提供給信息選擇單元62。例如，分析單元61執(zhí)行運動圖像的動作檢測作為觀看者反應信息，計算包括在移動圖像中的用戶的動作量，并且取所獲得的動作量作為用戶的情緒構建信息。在這種情況下，例如，用戶動作量越大，用戶的情緒構建程度越大，并且情緒構建信息的值越大。此外，例如，分析單元61取音頻強度的變化作為觀看者反應信息，即，作為指示聲音的數(shù)量的變化量的值的情緒構建信息。在這種情況下，例如，聲音的數(shù)量的變化越大，用戶的情緒構建程度越大，并且情緒構建信息的值越大。注意，情緒構建信息并不限于用戶的動作和聲音，并且可以根據(jù)從用戶獲得的其他信息(諸如面部情緒等)而生成，只要可以指示用戶的情緒構建程度即可。此外，情緒構建信息可以是由多個元素組成的信息，這多個元素指示用戶在觀看內容時的反應(諸如用戶的移動量和聲音的數(shù)量的變化)，并且情緒構建信息可以是通過以加權方式將多個元素的值相加而獲得的信息。另外，情緒構建信息并不限于用戶的情緒構建程度，并且還可以包括用戶的情緒構建類型，諸如笑聲或叫聲，即，指示用戶情緒類型的信息。信息選擇單元62使用來自觀看者反應輸入單元32的觀看者反應信息、來自調諧器31的內容、以及來自分析單元61的情緒構建信息，生成觀看信息，并且將其傳輸?shù)椒掌?2 。注意，包括在觀看信息中的觀看者反應信息可以是在觀看者反應輸入單元32本身處獲得的觀看者反應信息，或者可以是觀看者反應信息的一部分，例如僅是用戶的運動圖像。此外，觀看信息經由網絡被傳輸?shù)椒掌?2，并且因此優(yōu)選地是盡可能輕的信息，即，具有小數(shù)據(jù)量的信息。另外，觀看信息可以包括作為客戶裝置21的裝置的信息等。記錄單元63記錄預先準備的情緒構建效果，并且將所記錄的情緒構建效果適當?shù)靥峁┙o合成單元64。注意，記錄在記錄單元63中的情緒構建效果不限于預先準備的諸如運動圖像或音頻等的數(shù)據(jù)，并且可以是從服務器22接收的所有觀看者觀看信息、或者作為所有觀看者觀看信息的部分的數(shù)據(jù)等。例如，如果包括在從服務器22接收的所有觀看者觀看信息中的觀看者反應信息被記錄，并且被用作觀看其他內容時的情緒構建效果，則可以增加情緒構建程度的表達的變化。合成單元64接收從服務器22傳輸?shù)乃杏^看者觀看信息，并且基于接收到的所有觀看者觀看信息來選擇記錄在記錄單元63中的情緒構建效果中的某些。此外，合成單元 64將所選擇的一個或多個情緒構建效果與從調諧器31提供的內容進行合成，從而生成合成內容(即，表示至少一個組合音頻或組合視頻的組合數(shù)據(jù))，并且合成內容被提供給顯示單元34并被播放。合成處理和分發(fā)處理的描述接著，將描述客戶裝置21和服務器22的操作。例如，當用戶操作客戶裝置21來指令開始觀看預定頻道的內容時，客戶裝置21開始合成處理，接收用戶所指示的內容并生成合成內容，并且播放合成內容。此外，當在客戶裝置21處開始合成處理時，服務器22開始分發(fā)處理，以將客戶裝置21的用戶正觀看的內容的所有觀看者觀看信息分發(fā)到每個客戶裝置21。下面是參照圖3中的流程圖對客戶裝置21進行的合成處理和服務器22進行的分發(fā)處理的描述。在步驟Sll中，客戶裝置21的調諧器31接收從廣播站發(fā)射的內容，并將其提供給分析單元61、信息選擇單元62和合成單元64。也就是說，接收已廣播的廣播信號，并且針對接收到的廣播信號，提取用戶所指定的頻道的內容的數(shù)據(jù)。此外，在步驟S31中，服務器 22經由網絡將關于在客戶裝置21處正播放的內容所獲得的所有觀看者觀看信息傳輸?shù)娇蛻粞b置21。在步驟S32中，服務器22確定是否要結束用于將內容的所有觀看者觀看信息傳輸 (分發(fā))到播放內容的客戶裝置21的處理。例如，在播放相關內容的客戶裝置21結束播放內容的情況下，做出確定以結束處理。例如，經由網絡從客戶裝置21通知結束播放內容。在步驟S32中做出確定將不結束處理的情況下，流程返回到步驟S31，并且重復上述處理。也就是說，新生成的所有觀看者觀看信息被相繼傳輸?shù)娇蛻粞b置21。另一方面，在步驟S32中做出確定將結束處理的情況下，服務器22停止傳輸所有觀看者觀看信息，并且分發(fā)處理結束。此外，在步驟S31中的處理中所有觀看者觀看信息從服務器22被傳輸?shù)娇蛻粞b置 21的情況下，在步驟S12中，合成單元64接收從服務器22傳輸?shù)乃杏^看者觀看信息。在步驟S13中，合成單元64基于接收到的所有觀看者觀看信息來選擇情緒構件效果，并且將所選擇的情緒構建效果與從調諧器31提供的內容進行合成。具體地，合成單元64從記錄單元63獲得由包括在所有觀看者觀看信息中的平均情緒構建信息的值所確定的情緒構建效果，將作為獲得的情緒構建效果的視頻和音頻與組成內容的視頻和音頻進行合成，從而生成合成內容。
此時，例如，用作情緒構建效果的視頻可以從包括在平均情緒構建信息中的用戶移動量的平均值中識別出，并且要用作情緒構建效果的音頻可以從包括在平均情緒構建信息中的用戶的聲音的數(shù)量的變化量的平均值中識別出。注意，可以借助于任何選擇方法進行情緒構建效果的選擇，只要根據(jù)在平均情緒構建信息中所指示的、總體觀看者的情緒構建的量級(magnitude)來選擇適當?shù)那榫w構建效果即可。此外，用作情緒構建效果的視頻的量級或音頻的音量可以被調節(jié)成對應于平均情緒構建信息值的量級，或者可以選擇根據(jù)平均情緒構建信息值所確定的數(shù)目的情緒構建效果。另外，可以將用作包括在所有觀看者觀看信息中的觀看者反應信息的視頻和音頻與內容進行合成。以這種方式將觀看相關內容的其他用戶(其他觀看者)的實際反應與內容進行合成作為情緒構建效果，允許更強的臨場感和與其他觀看者的融入感。注意，根據(jù)由所有觀看者觀看信息所指示的所有觀看者的情緒構建的狀態(tài)，可以創(chuàng)建其中沒有將情緒構建效果與內容進行合成的場景。也就是說，在情緒構建程度低的情況下，具體而言，沒有將情緒構建效果與內容進行合成，并且按原樣顯示內容。在步驟S14中，合成單元64將所生成的合成內容提供給顯示單元34，并且播放合成內容。顯示單元34顯示組成來自合成單元64的合成內容的視頻，并且還輸出組成合成內容的音頻。因此，反映觀看內容的其他客戶裝置21的用戶的反應的叫聲、笑聲、歡呼等以及觀看內容的其他客戶的用戶的視頻等與該內容一起播放。在步驟S15中，客戶處理單元33確定是否將結束用于播放合成內容的處理。例如， 在用戶操作客戶裝置21并指令結束觀看內容的情況下，做出確定以結束處理。在步驟S15中做出確定將不結束處理的情況下，流程返回到步驟S11，并且重復上述處理。也就是說，繼續(xù)用于生成和播放合成內容的處理。另一方面，在步驟S15中確定將結束處理的情況下，客戶裝置21經由網絡向服務器22通知觀看內容將結束的效果，并且合成處理結束。因此，客戶裝置21從服務器22獲得所有觀看者觀看信息，并且使用所獲得的所有觀看者觀看信息來合成適合于內容的情緒構建效果。因此，可以實時地接收到諸如其他觀看者的情緒構建的情緒反饋，并且可以將其他觀看者的反應與內容進行合成。結果，觀看內容的觀看者可以獲得就像他們處于體育場或電影院等之中的真實的臨場感，并且可以在處于家的環(huán)境中的同時獲得與其他觀看者的融入感。此外，用戶在觀看內容的同時不必輸入指示描述他們對內容感覺如何等的任何種類的信息文本，所以沒有妨礙觀看內容。通常，當在體育場中看運動會等時，或當在電影院中看電影時，通常觀眾 (spectator)或觀看者在同一情形中展現(xiàn)相同的反應，所以在該會場內的情緒構建帶來在會場中的融入感和臨場感。借助于內容觀看系統(tǒng)11，觀看同一內容的多個用戶的反應被實時反映在正觀看的內容中。因此，用戶可以獲得融入感和臨場感，其更接近于當實際看運動會時或當在電影院中看電影時獲得的融入感和臨場感。此外，借助于客戶裝置21，將預先準備的情緒構建效果與內容進行合成，所以在內容的分發(fā)側不必以任何特定的方式改變內容，并且因此這以可被應用于現(xiàn)有電視廣播節(jié)目寸。觀看信息生成處理和合并處理的描述另外，當用戶指令開始觀看內容并且上述合成處理和分發(fā)處理開始時，在客戶裝置21與服務器22之間，與該處理并行地執(zhí)行生成觀看信息的觀看信息生成處理、以及生成合并了觀看信息的所有觀看者觀看信息的合并處理。將參照圖4中的流程圖，做出關于客戶裝置21進行的觀看信息生成處理和服務器 22進行的合并處理的描述。當用戶指令開始觀看內容時，在步驟S61中，觀看者反應輸入單元32獲得觀看客戶裝置21附近的顯示器34的用戶的觀看者反應信息，并且將其提供給分析單元61和信息選擇單元62。例如，獲得指示觀看合成內容的用戶的反應的信息(諸如用戶的視頻和音頻等)作為觀看者反應信息。在步驟S62中，分析單元61使用從觀看者反應輸入單元32提供的觀看者反應信息來生成情緒構建信息，并且將其提供給信息選擇單元62。例如，生成從觀看者反應信息獲得的、在觀看合成內容時用戶的動作量或者聲音的數(shù)量的變化量作為情緒構建信息。在步驟S63中，信息選擇單元62使用來自調諧器31的內容、來自觀看者反應輸入單元32的觀看者反應信息、以及來自分析單元61的情緒構建信息，生成與客戶裝置21的各個用戶有關的觀看信息。在步驟S64中，信息選擇單元62經由網絡將所生成的觀看信息傳輸?shù)椒掌?2。在步驟S65中，客戶處理單元33關于是否將結束生成觀看信息并將其傳輸?shù)椒掌?2的處理做出確定。例如，在用戶已指令了結束觀看內容的情況下，即，在圖3中的合成處理已結束的情況下，則做出確定將結束該處理。在步驟S65中，在做出確定將不結束處理的情況下，流程返回到步驟S61，并且重復上述處理。也就是說，獲得在下一個時間點處的觀看者反應信息并且生成新的觀看信息。另一方面，在步驟S65中做出確定將結束處理的情況下，客戶裝置21停止所執(zhí)行的處理，并且觀看信息生成處理結束。此外，在觀看信息從客戶裝置21被傳輸?shù)椒掌?2的情況下，在步驟S81中，服務器22接收從客戶裝置21傳輸?shù)挠^看信息。此時，服務器22從播放預定頻道的相關內容的所有客戶裝置21接收觀看信息。也就是說，服務器22從觀看同一內容的所有用戶接收包括情緒構建信息的觀看信息的供應。在步驟S82中，服務器22使用接收到的觀看信息來生成關于預定頻道的內容的所有觀看者觀看信息。例如，服務器22生成識別內容的頻道信息、指示所有觀看者的情緒構建程度的平均情緒構建信息、以及由部分或所有觀看者的觀看者反應信息組成的所有觀看者觀看信息。這里，平均情緒構建信息例如是從每個客戶裝置21等獲得的情緒構建信息的平均值。以這種方式生成的所有觀看者觀看信息被傳輸?shù)剿锌蛻粞b置21，其在圖3中的步驟S31的處理中播放預定頻道的內容。在步驟S83中，服務器22確定是否將結束用于生成所有觀看者觀看信息的處理。 例如，在與合并處理并行執(zhí)行的圖3中的分發(fā)處理已結束的情況下，做出確定以結束。在步驟S83中做出確定不結束處理的情況下，流程返回到步驟S81，并且重復上述處理。也就是說，基于新接收到的觀看信息來生成所有觀看者觀看信息。另一方面，在步驟S83中做出確定結束處理的情況下，服務器22停止所執(zhí)行的處理，并且合并處理結束。以這種方式，客戶裝置21獲得觀看內容的用戶的反應作為觀看者反應信息，并將包括觀看者反應信息的觀看信息傳輸?shù)椒掌?2。因此，與觀看內容的用戶的反應有關的信息可以被提供給服務器22，并且結果是，可為用戶提供更真實的臨場感和融入感。此外， 在這種情況下，用戶不必輸入描述他們感覺內容如何的文本等，所以沒有妨礙觀看內容。現(xiàn)在，在以上描述中，描述了電視廣播節(jié)目作為用戶觀看的內容的示例，但是內容可以是任何其他種類的內容，諸如音頻(例如音樂)等。此外，布置并不限于像這樣的將內容從服務器22傳輸?shù)降目蛻粞b置21的布置；用作服務器22的或用作其等同物的任何布置或配置可以被用于傳輸內容，并且可以將內容直接傳輸給用戶，或者可以經由基于線纜的或無線的任何通信網絡(包括因特網)將內容傳輸給用戶。注意，上述系列處理可以由硬件來執(zhí)行、或者可以由軟件來執(zhí)行。在由軟件來執(zhí)行系列處理的情況下，將組成其軟件的程序從程序記錄介質安裝到內嵌有專用硬件的計算機、或者例如通過安裝各類程序而能夠執(zhí)行各類功能的通用個人計算機中。圖5是示出了用于執(zhí)行上述系列處理的程序的計算機的硬件配置示例的框圖。在計算機中，CPU(中央處理器)301、ROM(只讀存儲器)302和RAM(隨機存取存儲器)303經由總線304而相互連接?？偩€304進一步與輸入/輸出接口 305連接。由鍵盤、鼠標、麥克風等組成的輸入單元306，由顯示器、揚聲器等組成的輸出單元307，由硬盤或非易失性存儲器等組成的記錄單元308、由網絡接口等組成的通信單元309、以及用于驅動可移除介質311 (諸如磁盤、 光盤、磁光盤、或半導體存儲器等)的驅動器310被連接到輸入/輸出接口 305。借助于如上所述配置的計算機，CPU 301經由輸入/輸出接口 305和總線304將記錄在記錄單元308中的程序載入到RAM中，并且執(zhí)行該程序，例如，由此執(zhí)行上述系列處理。例如通過記錄在可移除介質311中、或者經由諸如局域網、因特網、數(shù)字衛(wèi)星廣播等的有線或無線傳輸介質，提供計算機(CPU 301)執(zhí)行的程序，可移除介質311是諸如磁盤 (包括軟盤)、光盤(包括⑶_R0M(致密盤-只讀存儲器)、DVD(數(shù)字多功能盤)等)、磁光盤、或半導體存儲器的封裝式介質。通過將可移除介質311安裝到驅動器310，可以經由輸入/輸出接口 305將程序安裝到記錄單元308中。此外，程序可以通過由通信單元309經由有線或無線傳輸接收來被安裝在記錄單元308中?？商孢x地，可以將程序預先安裝在ROM 302或存儲單元308中。注意，計算機執(zhí)行的程序可以是以按照本說明書中描述的順序的時間順序來執(zhí)行處理的程序，或者可以是并行地或以特定定時(例如當執(zhí)行調用時)來執(zhí)行處理的程序。注意，本發(fā)明的實施例不限于上述實施例，并且在不背離本發(fā)明的實質的情況下可以做出各種修改。本領域的普通技術人員應該理解，根據(jù)設計要求和其他因素可以做出各種修改、 組合、子組合和變型，只要它們落在所附權利要求或其等同物的范圍之內。
權利要求
1.一種用于生成關于觀看者對內容的情緒反應的信息的系統(tǒng)，包括觀看者反應輸入單元，其被配置成捕獲表示本地觀看者對內容數(shù)據(jù)的反應的至少一個本地觀看者音頻或本地觀看者視頻的本地數(shù)據(jù)，所述內容數(shù)據(jù)表示至少一個內容音頻或內容視頻；以及觀看者情緒分析單元，其被配置成基于所述本地數(shù)據(jù)來生成指示所述本地觀看者對所述內容數(shù)據(jù)的情緒反應的本地觀看者情緒信息。
2.根據(jù)權利要求1所述的系統(tǒng)，包括調諧器，其被配置成接收指示所述內容數(shù)據(jù)的廣播信號。
3.根據(jù)權利要求1所述的系統(tǒng)，其中，所述觀看者反應輸入單元被配置成在所述內容數(shù)據(jù)被呈現(xiàn)給所述本地觀看者時捕獲所述本地數(shù)據(jù)。
4.根據(jù)權利要求3所述的系統(tǒng)，其中，所述本地觀看者情緒信息指示所述本地觀看者對所呈現(xiàn)的內容數(shù)據(jù)的情緒反應的強度。
5.根據(jù)權利要求4所述的系統(tǒng)，包括服務器和多個內容呈現(xiàn)裝置，所述內容呈現(xiàn)裝置包括傳輸單元，其被配置成將至少一個所述本地數(shù)據(jù)或所述本地觀看者情緒信息傳輸給所述服務器。
6.根據(jù)權利要求5所述的系統(tǒng)，其中，所述服務器被配置成組合多個本地觀看者情緒信息以創(chuàng)建組合觀看者情緒信息。
7.根據(jù)權利要求6所述的系統(tǒng)，包括合成單元，其被配置成基于所述組合觀看者情緒信息來確定至少一個效果音頻或效果視頻；以及將表示所確定的至少一個效果音頻或效果視頻的至少一個效果音頻數(shù)據(jù)或效果視頻數(shù)據(jù)與所述內容數(shù)據(jù)進行組合，以創(chuàng)建表示至少一個組合音頻或組合視頻的組合數(shù)據(jù)。
8.根據(jù)權利要求7所述的系統(tǒng)，其中，所述服務器被配置成將所述組合觀看者情緒信息傳輸?shù)剿鰞热莩尸F(xiàn)裝置中的至少一個；所述內容呈現(xiàn)裝置中的所述至少一個包括所述合成單元；以及所述合成單元被配置成從所述服務器接收所述組合觀看者情緒信息。
9.根據(jù)權利要求7所述的系統(tǒng)，其中，所述內容呈現(xiàn)裝置中的至少一個包括顯示單元， 其被配置成將所述組合數(shù)據(jù)呈現(xiàn)給所述本地觀看者。
10.根據(jù)權利要求7所述的系統(tǒng)，其中，所述合成單元被配置成將所述組合數(shù)據(jù)輸出到所述內容呈現(xiàn)裝置之一的顯示單元。
11.根據(jù)權利要求7所述的系統(tǒng)，其中，所述至少一個效果音頻或效果視頻包括在所述內容數(shù)據(jù)被呈現(xiàn)給遠程觀看者時所述遠程觀看者對所述內容數(shù)據(jù)的反應的至少一個遠程觀看者音頻或遠程觀看者視頻。
12.根據(jù)權利要求7所述的系統(tǒng)，其中，所述至少一個效果音頻或效果視頻表示在所述內容數(shù)據(jù)被呈現(xiàn)給多個觀看者時所述多個觀看者對所述內容數(shù)據(jù)的反應。
13.根據(jù)權利要求6所述的系統(tǒng)，其中，所述組合觀看者情緒信息指示在所述內容數(shù)據(jù)被呈現(xiàn)給多個觀看者時所述多個觀看者對所述內容數(shù)據(jù)的情緒反應的平均強度。
14.根據(jù)權利要求6所述的系統(tǒng)，其中，所述服務器從所述內容呈現(xiàn)裝置接收所述多個本地觀看者情緒信息。
15.根據(jù)權利要求1所述的系統(tǒng)，其中，所述觀看者情緒分析單元基于所述本地觀看者的移動量來生成所述本地觀看者情緒信息。
16.根據(jù)權利要求15所述的系統(tǒng)，其中，所述觀看者情緒分析單元基于由所述本地觀看者生成的聲音的數(shù)量的變化來生成所述本地觀看者情緒信息。
17.根據(jù)權利要求1所述的系統(tǒng)，其中，所述觀看者情緒分析單元基于由所述本地觀看者生成的聲音的數(shù)量的變化來生成所述本地觀看者情緒信息。
18.一種用于將內容與關于觀看者對所述內容的情緒反應的信息進行組合的裝置，包括觀看者反應輸入單元，其被配置成捕獲表示本地觀看者對內容數(shù)據(jù)的反應的至少一個本地觀看者音頻或本地觀看者視頻的本地數(shù)據(jù)，所述內容數(shù)據(jù)表示至少一個內容音頻或內容視頻；觀看者情緒分析單元，其被配置成基于所述本地數(shù)據(jù)來生成指示所述本地觀看者對所述內容數(shù)據(jù)的情緒反應的本地觀看者情緒信息；傳輸單元，其被配置成將所述本地觀看者情緒信息傳輸?shù)椒掌?；以及合成單元，其被配置成從所述服務器接收組合觀看者情緒信息；基于所述組合觀看者情緒信息來確定至少一個效果音頻或效果視頻；以及將表示所確定的至少一個效果音頻或效果視頻的至少一個效果音頻數(shù)據(jù)或效果視頻數(shù)據(jù)與所述內容數(shù)據(jù)進行組合。
19.一種用于生成關于觀看者對內容的情緒反應的信息的方法，包括捕獲表示本地觀看者對內容數(shù)據(jù)的反應的至少一個本地觀看者音頻或本地觀看者視頻的本地數(shù)據(jù)，所述內容數(shù)據(jù)表示至少一個內容音頻或內容視頻；以及基于所述本地數(shù)據(jù)來生成指示所述本地觀看者對所述內容數(shù)據(jù)的情緒反應的本地觀看者情緒信息。
20.一種用于將內容與關于觀看者對所述內容的情緒反應的信息進行組合的方法，包括捕獲表示本地觀看者對內容數(shù)據(jù)的反應的至少一個本地觀看者音頻或本地觀看者視頻的本地數(shù)據(jù)，所述內容數(shù)據(jù)表示至少一個內容音頻或內容視頻；基于所述本地數(shù)據(jù)來生成指示所述本地觀看者對所述內容數(shù)據(jù)的情緒反應的觀看者情緒信息；將所述本地觀看者情緒信息傳輸?shù)椒掌鳎?從所述服務器接收組合觀看者情緒信息；基于所述組合觀看者情緒信息來確定至少一個效果音頻或效果視頻；以及將表示所確定的至少一個效果音頻或效果視頻的至少一個效果音頻數(shù)據(jù)或效果視頻數(shù)據(jù)與所述內容數(shù)據(jù)進行組合。
21.一種存儲程序的非暫時的、計算機可讀存儲介質，當由處理器執(zhí)行所述程序時，所述程序使內容呈現(xiàn)裝置執(zhí)行用于將內容與關于觀看者對所述內容的情緒反應的信息進行組合的方法，所述方法包括捕獲表示本地觀看者對內容數(shù)據(jù)的反應的至少一個本地觀看者音頻或本地觀看者視頻的本地數(shù)據(jù)，所述內容數(shù)據(jù)表示至少一個內容音頻或內容視頻；基于所述本地數(shù)據(jù)來生成指示所述本地觀看者對所述內容數(shù)據(jù)的情緒反應的本地觀看者情緒信息；將所述本地觀看者情緒信息傳輸?shù)椒掌鳎?從所述服務器接收組合觀看者情緒信息；基于所述組合觀看者情緒信息來確定至少一個效果音頻或效果視頻；以及將表示所確定的至少一個效果音頻或效果視頻的至少一個效果音頻數(shù)據(jù)或效果視頻數(shù)據(jù)與所述內容數(shù)據(jù)進行組合。
全文摘要
本發(fā)明涉及一種內容播放裝置。公開了一種用于生成關于觀看者對內容的情緒反應的信息的系統(tǒng)。該系統(tǒng)可以包括觀看者反應輸入單元，其被配置成捕獲表示本地觀看者對內容數(shù)據(jù)的反應的至少一個本地觀看者音頻或本地觀看者視頻的本地數(shù)據(jù)，內容數(shù)據(jù)表示至少一個內容音頻或內容視頻。該系統(tǒng)還可以包括觀看者情緒分析單元，其被配置成基于本地數(shù)據(jù)來生成指示本地觀看者對內容數(shù)據(jù)的情緒反應的本地觀看者情緒信息。
文檔編號H04N21/258GK102170591SQ20111004207
公開日2011年8月31日 申請日期2011年2月18日 優(yōu)先權日2010年2月26日
發(fā)明者小柳津秀紀 申請人:索尼公司