認(rèn)知與情感人機(jī)界面的制作方法
【專利摘要】認(rèn)知和/或情感狀態(tài)信息可用于自適應(yīng)游戲、廣告插入遞送定時(shí)、駕駛員或飛行員輔助、教學(xué)、廣告選擇、產(chǎn)品和/或內(nèi)容建議、和/或視頻聊天應(yīng)用。可生成人機(jī)界面(HMI)。可對HMI中的內(nèi)容植入進(jìn)行管理。可接收來自一個(gè)或多個(gè)傳感器的傳感器數(shù)據(jù)?？纱_定遞送內(nèi)容的定時(shí)。遞送內(nèi)容的定時(shí)可基于所確定的用戶的認(rèn)知狀態(tài)和所確定的用戶的情感狀態(tài)中的至少一者來確定?？苫谟脩舻恼J(rèn)知狀態(tài)和用戶的情感狀態(tài)中的至少一者來選擇遞送給用戶的內(nèi)容。所述內(nèi)容可包括廣告。
【專利說明】認(rèn)知與情感人機(jī)界面 相關(guān)申請的交叉引用
[00011 本申請要求于2014年2月23日提交的美國臨時(shí)專利申請No.61/943,467的權(quán)益，其 內(nèi)容結(jié)合于此作為參考。
【背景技術(shù)】
[0002] 某些人機(jī)界面(HMI)會(huì)使用戶無所適從或產(chǎn)生挫敗感。例如，不合時(shí)宜的廣告插入 (insertion)或難度過大或過于無聊的游戲，都可能會(huì)使用戶敬而遠(yuǎn)之。以車輛碰撞預(yù)警系 統(tǒng)為例，在其發(fā)出迫近危險(xiǎn)的告警時(shí)，如果HMI的低優(yōu)先級(jí)消息分散了用戶的注意力，那么 安全性就成為了一個(gè)問題。在市場營銷方面，選擇欠妥的時(shí)機(jī)和/或消息都會(huì)降低營銷的效 果。在向消費(fèi)者提出產(chǎn)品或內(nèi)容方面的建議時(shí)，有人會(huì)采用一些推測性的數(shù)據(jù)，而采用這種 數(shù)據(jù)可能無法很好地預(yù)測對實(shí)際產(chǎn)品或內(nèi)容的使用或興趣所在。由于教師授課或采用計(jì)算 機(jī)的培訓(xùn)過程中可能會(huì)忽視學(xué)生處理新信息的能力，從而導(dǎo)致學(xué)生學(xué)習(xí)教材的能力下降。 而吃一塹長一智這種做法則會(huì)導(dǎo)致效率低下。

【發(fā)明內(nèi)容】

[0003] 公開了用于生成人機(jī)界面(HMI)的系統(tǒng)、方法和手段，所述HMI能夠了解并適應(yīng)用 戶的認(rèn)知負(fù)荷(load)和/或情緒情感狀態(tài)。傳感器數(shù)據(jù)可用于估計(jì)用戶的認(rèn)知狀態(tài)(例如認(rèn) 知負(fù)荷)和/或情感狀態(tài)，而用戶的認(rèn)知狀態(tài)和/或情感狀態(tài)可用于對與用戶的互動(dòng)劃分優(yōu) 先級(jí)或還可以對之產(chǎn)生影響。用戶的認(rèn)知和/或情感狀態(tài)可包括除了能夠從用戶已經(jīng)消費(fèi) 的上下文和/或內(nèi)容中推斷出的信息之外的信息。例如，認(rèn)知和/或情感狀態(tài)信息可用于自 適應(yīng)游戲、廣告植入和/或遞送定時(shí)、駕駛員或飛行員輔助、教學(xué)、廣告選擇、產(chǎn)品和/或內(nèi)容 建議、和/或視頻聊天應(yīng)用。
[0004] 人機(jī)界面(HMI)可由系統(tǒng)生成。所述系統(tǒng)可對HMI中的內(nèi)容植入進(jìn)行管理。所述系 統(tǒng)可向用戶遞送內(nèi)容。所述內(nèi)容可包括視頻數(shù)據(jù)、視頻游戲數(shù)據(jù)、教學(xué)數(shù)據(jù)、培訓(xùn)數(shù)據(jù)等等。 所述系統(tǒng)可從一個(gè)或多個(gè)傳感器接收傳感器數(shù)據(jù)。所述傳感器數(shù)據(jù)與用戶關(guān)聯(lián)。來自所述 一個(gè)或多個(gè)傳感器的傳感器數(shù)據(jù)可包括下列中的至少一者:拍攝數(shù)據(jù)、皮膚電反映(GSR)數(shù) 據(jù)、語音分析數(shù)據(jù)、面部表情分析數(shù)據(jù)、肢體語言分析數(shù)據(jù)、眼球運(yùn)動(dòng)和注視點(diǎn)追蹤分析數(shù) 據(jù)、眨眼率分析數(shù)據(jù)、腦電描記數(shù)據(jù)(electroencephalographic)、皮膚電活動(dòng)數(shù)據(jù)、瞳孔測 量數(shù)據(jù)、心率數(shù)據(jù)、血壓數(shù)據(jù)、呼吸速率數(shù)據(jù)、或體溫?cái)?shù)據(jù)。所述系統(tǒng)可基于接收到的傳感器 數(shù)據(jù)確定用戶的認(rèn)知狀態(tài)或情感狀態(tài)中的至少一者。用戶的認(rèn)知狀態(tài)可包括用戶的認(rèn)知負(fù) 荷。用戶的情感狀態(tài)可包括覺醒(arousal)測量和效價(jià)(valence)測量。所述系統(tǒng)可對接收 到的傳感器數(shù)據(jù)進(jìn)行分析。所述系統(tǒng)可在二維覺醒效價(jià)空間上繪制(plot)覺醒測量和效價(jià) 測量。所述系統(tǒng)可基于該繪制將用戶與一個(gè)或多個(gè)預(yù)定義情感狀態(tài)關(guān)聯(lián)。
[0005] 所述系統(tǒng)可確定遞送內(nèi)容的定時(shí)。所述內(nèi)容可包括廣告。所述遞送內(nèi)容的定時(shí)可 基于用戶的確定的認(rèn)知狀態(tài)或用戶的確定的情感狀態(tài)中的至少一者來確定。當(dāng)用戶的認(rèn)知 負(fù)荷低于預(yù)先確定的閾值或當(dāng)用戶的情感狀態(tài)指示了用戶處于可接受狀態(tài)時(shí)，所述內(nèi)容可 被遞送給用戶。當(dāng)用戶的情感狀態(tài)距預(yù)定義情感狀態(tài)的距離測量低于預(yù)先確定的閾值時(shí)， 用戶的情感狀態(tài)指示用戶處于可接受狀態(tài)。所述預(yù)定義情感狀態(tài)可包括預(yù)定義覺醒測量和 預(yù)定義效價(jià)測量。所述距離測量可基于用戶的情感狀態(tài)與預(yù)定義情感狀態(tài)之間的距離。所 述距離測量可包括覺醒分量(component)和效價(jià)分量。所述內(nèi)容可基于預(yù)先確定的定時(shí)被 遞送給用戶。所述內(nèi)容可經(jīng)由HMI或第二HMI被遞送給用戶。
[0006] 所述系統(tǒng)可對用于遞送給用戶的內(nèi)容進(jìn)行選擇?？苫谟脩舻恼J(rèn)知狀態(tài)或用戶的 情感狀態(tài)中的至少一者對用于遞送給用戶的內(nèi)容進(jìn)行選擇?？苫谟脩舻拇碳?stimulus) 響應(yīng)模型對用于遞送給用戶的內(nèi)容進(jìn)行選擇。所述刺激響應(yīng)模型可基于對之前內(nèi)容的歷史 用戶響應(yīng)(例如用戶針對之前內(nèi)容的的認(rèn)知和/或情感狀態(tài)的歷史觀測）。用戶可與消費(fèi)者 分類關(guān)聯(lián)。用戶可基于刺激/響應(yīng)對與消費(fèi)者分類關(guān)聯(lián)。所述刺激/響應(yīng)對可基于呈現(xiàn)給用 戶的信息以及響應(yīng)于信息呈現(xiàn)的用戶的認(rèn)知狀態(tài)或用戶的情感狀態(tài)中的至少一者。所述系 統(tǒng)可對刺激/響應(yīng)對進(jìn)行存儲(chǔ)。可基于與用戶關(guān)聯(lián)的消費(fèi)者分類對用于遞送給用戶的內(nèi)容 進(jìn)行選擇?？苫陬A(yù)定義消費(fèi)者分類中的消費(fèi)者的刺激響應(yīng)數(shù)據(jù)庫對用于遞送給用戶的內(nèi) 容進(jìn)行選擇。所述預(yù)定義消費(fèi)者分類可包括所述用戶。所述內(nèi)容可以是第一產(chǎn)品的第一廣 告。所述第一產(chǎn)品的第一廣告可基于用戶對第二產(chǎn)品的第二廣告的在先響應(yīng)進(jìn)行選擇。
【附圖說明】
[0007] 圖1A是可在其中實(shí)施一個(gè)或多個(gè)所公開實(shí)施方式的示例通信系統(tǒng)的系統(tǒng)圖示。
[0008] 圖1B是可在圖1A說明的通信系統(tǒng)中使用的示例無線發(fā)射/接收單元(WTRU)的系統(tǒng) 圖示。
[0009] 圖1C是可在圖1A說明的通信系統(tǒng)中使用的示例無線電接入網(wǎng)絡(luò)和示例核心網(wǎng)絡(luò) 的系統(tǒng)圖不。
[0010] 圖1D是可在圖1A說明的通信系統(tǒng)中使用的另一示例無線電接入網(wǎng)絡(luò)和另一示例 核心網(wǎng)絡(luò)的系統(tǒng)圖示。
[0011] 圖1E是可在圖1A說明的通信系統(tǒng)中使用的另一示例無線電接入網(wǎng)絡(luò)和另一示例 核心網(wǎng)絡(luò)的系統(tǒng)圖示。
[0012 ]圖2是說明了瞳孔放大與記憶(memory)編碼困難之間的示例關(guān)系的圖示。
[0013] 圖3是說明了可用于對情感狀態(tài)進(jìn)行分類的示例二維空間的圖示。
[0014] 圖4是說明了示例情感和/或認(rèn)知自適應(yīng)游戲系統(tǒng)的框圖。
[0015] 圖5是說明了示例情感和/或認(rèn)知自適應(yīng)廣告遞送定時(shí)系統(tǒng)的框圖。
[0016] 圖6是說明了示例情感和/或認(rèn)知自適應(yīng)警告系統(tǒng)的框圖。
[0017]圖7是說明了示例情感和/或認(rèn)知自適應(yīng)教學(xué)系統(tǒng)的框圖。
[0018] 圖8是說明了示例情感和/或認(rèn)知自適應(yīng)產(chǎn)品或內(nèi)容建議系統(tǒng)的框圖。
[0019] 圖9是說明了消費(fèi)者分類示例的框圖。
[0020] 圖10是說明了產(chǎn)品/內(nèi)容建議示例的框圖。
[0021 ]圖11是說明了不例情感和/或認(rèn)知自適應(yīng)視頻聊天系統(tǒng)的框圖。
[0022] 圖12是說明了可以用培訓(xùn)數(shù)據(jù)填充狀態(tài)/解譯數(shù)據(jù)庫的示例子系統(tǒng)的框圖，其中 所述培訓(xùn)數(shù)據(jù)可將認(rèn)知和/或情感狀態(tài)與解譯相聯(lián)系。
[0023] 圖13是說明了示例視頻注釋生成子系統(tǒng)的框圖。
【具體實(shí)施方式】
[0024] 現(xiàn)在參照各個(gè)附圖對說明性實(shí)施方式進(jìn)行詳細(xì)描述。雖然該描述提供了可能實(shí)施 的具體示例，應(yīng)當(dāng)注意的是，所述細(xì)節(jié)是示例性的且不對本申請的范圍進(jìn)行限制。
[0025] 圖1A是可以實(shí)施一個(gè)或多個(gè)公開的實(shí)施方式的示例通信系統(tǒng)100的系統(tǒng)圖示。該 通信系統(tǒng)100可以是將諸如語音、數(shù)據(jù)、視頻、消息發(fā)送、廣播等之類的內(nèi)容提供給多個(gè)無線 用戶的多接入系統(tǒng)。該通信系統(tǒng)1〇〇可以通過系統(tǒng)資源(包括無線帶寬）的共享使得多個(gè)無 線用戶能夠訪問這些內(nèi)容。例如，該通信系統(tǒng)1〇〇可以使用一種或多種信道接入方法，例如 碼分多址(CDMA)、時(shí)分多址(TDMA)、頻分多址(FDMA)、正交TOMA (0FDMA)、單載波TOMA(SC-FDMA)等等。
[0026] 如圖1A所示，通信系統(tǒng)100可以包括無線發(fā)射/接收單元(WTRU) 102a、102b、102c、 和/或102d(統(tǒng)稱或合稱為WTRU 102)、無線電接入網(wǎng)（RAN) 103/104/105、核心網(wǎng)絡(luò)106/107/ 109、公共交換電話網(wǎng)（PSTN)108、因特網(wǎng)110、和其他網(wǎng)絡(luò)112,但可以理解可實(shí)施任意數(shù)量 的WTRU、基站、網(wǎng)絡(luò)和/或網(wǎng)絡(luò)元件。WTRU 102a、102b、102c、102d中的每一個(gè)可以是被配置 成在無線環(huán)境中運(yùn)行和/或通信的任何類型的裝置。作為示例，WTRU102a、102b、102c、102d 可以被配置成發(fā)送和/或接收無線信號(hào)，并且可以包括用戶設(shè)備(UE)、移動(dòng)站、固定或移動(dòng) 訂戶單元、尋呼機(jī)、蜂窩電話、個(gè)人數(shù)字助理(PDA)、智能電話、便攜式電腦、上網(wǎng)本、個(gè)人計(jì) 算機(jī)、無線傳感器、消費(fèi)電子產(chǎn)品等等。
[0027] 通信系統(tǒng)100還可以包括基站114a和基站114b?；?14a、114b中的每一個(gè)可以是 被配置成與WTRU 102a、102b、102c、102d中的至少一者無線對接，以便于接入一個(gè)或多個(gè)通 信網(wǎng)絡(luò)(例如，核心網(wǎng)絡(luò)106/107/109、因特網(wǎng)110、和/或網(wǎng)絡(luò)112)的任何類型的裝置。例如， 基站114a、114b可以是基站收發(fā)信站(BTS)、節(jié)點(diǎn)B、e節(jié)點(diǎn)B、家用節(jié)點(diǎn)B、家用e節(jié)點(diǎn)B、站點(diǎn)控 制器、接入點(diǎn)(AP)、無線路由器等。盡管基站114a、114b每個(gè)均被描述為單個(gè)元件，但是可以 理解基站114a、114b可以包括任何數(shù)量的互連基站和/或網(wǎng)絡(luò)元件。
[0028] 基站114a可以是RAN 103/104/105的一部分，該RAN還可以包括其他基站和/或網(wǎng) 絡(luò)元件(未示出），諸如基站控制器(BSC)、無線電網(wǎng)絡(luò)控制器(RNC)、中繼節(jié)點(diǎn)等?；?14a 和/或基站114b可以被配置成傳送和/或接收特定地理區(qū)域內(nèi)的無線信號(hào)，該特定地理區(qū)域 可以被稱作小區(qū)（未示出）。小區(qū)還可以被劃分成小區(qū)扇區(qū)。例如與基站114a相關(guān)聯(lián)的小區(qū) 可以被劃分成三個(gè)扇區(qū)。由此，在一種實(shí)施方式中，基站114a可以包括三個(gè)收發(fā)信機(jī)，例如 針對所述小區(qū)的每個(gè)扇區(qū)都有一個(gè)收發(fā)信機(jī)。在另一實(shí)施方式中，基站114a可以使用多輸 入多輸出(M頂0)技術(shù)，并且因此可以使用針對小區(qū)的每個(gè)扇區(qū)的多個(gè)收發(fā)信機(jī)。
[0029] 基站 114a、114b 可以通過空中接口 115/116/117 與 WTRU 102a、102b、102c、102d 中 的一者或多者通信，該空中接口 115/116/117可以是任何合適的無線通信鏈路(例如，射頻 (RF)、微波、紅外（IR)、紫外(UV)、可見光等）?？罩薪涌?115/116/117可以使用任何合適的無 線電接入技術(shù)(RAT)來建立。
[0030] 更特別地，如上所述，通信系統(tǒng)100可以是多接入系統(tǒng)，并且可以使用一種或多種 信道接入方案，例如CDMA、TDMA、FDMA、(FDMA、SC-roMA等。例如，在RAN 10 3/104/10 5中的基 站114a和WTRU 102a、102b、102c可以實(shí)施諸如通用移動(dòng)電信系統(tǒng)（UMTS)陸地?zé)o線電接入 (UTRA)之類的無線電技術(shù)，其可以使用寬帶⑶MA(W⑶MA)來建立空中接口 115/116/117。 WCDMA可以包括諸如高速分組接入(HSPA)和/或演進(jìn)型HSPA(HSPA+)的通信協(xié)議。HSPA可以 包括高速下行鏈路分組接入(HSDPA)和/或高速上行鏈路分組接入(HSUPA)。
[0031] 在另一實(shí)施方式中，基站114a和WTRU 102a、102b、102c可以實(shí)施諸如演進(jìn)型UMTS 陸地?zé)o線電接入(E-UTRA)之類的無線電技術(shù)，其可以使用長期演進(jìn)(LTE)和/或高級(jí)LTE (LTE-A)來建立空中接口 115/116/117。
[0032] 在其他實(shí)施方式中，基站114a和WTRU 102a、102b、102c可以實(shí)施諸如IEEE 802.16 (即，全球微波互聯(lián)接入(WiMAX))、CDMA2000、CDMA2000IX、CDMA2000EV-D0、臨時(shí)標(biāo)準(zhǔn)2000 (IS-2000)、臨時(shí)標(biāo)準(zhǔn)95(IS-95)、臨時(shí)標(biāo)準(zhǔn)856(IS-856)、全球移動(dòng)通信系統(tǒng)(GSM)、增強(qiáng)型 數(shù)據(jù)速率GSM演進(jìn)(EDGE)、GSM EDGE(GERAN)之類的無線電技術(shù)。
[0033]圖1A中的基站114b可以是例如無線路由器、家用節(jié)點(diǎn)B、家用e節(jié)點(diǎn)B或者接入點(diǎn)， 并且可以使用任何合適的RAT，以用于促進(jìn)在諸如商業(yè)區(qū)、家庭、車輛、校園之類的局部區(qū)域 的無線連接。在一種實(shí)施方式中，基站114b和WTRU 102c、102d可以實(shí)施諸如IEEE 802.11之 類的無線電技術(shù)以建立無線局域網(wǎng)(WLAN)。在另一個(gè)實(shí)施方式中，基站114b和WTRU 102c、 102d可以實(shí)施諸如IEEE 802.15之類的無線電技術(shù)以建立無線個(gè)域網(wǎng)(WPAN)。在另一個(gè)實(shí) 施方式中，基站114b和WTRU 102c、102d可以使用基于蜂窩的RAT(例如，WCDMA、CDMA2000、 GSM、LTE、LTE-A等）以建立微微小區(qū)（picocell)和毫微微小區(qū)（femtocell)。如圖1A所示，基 站114b可以具有至因特網(wǎng)110的直接連接。由此，基站114b可不經(jīng)由核心網(wǎng)絡(luò)106/107/109 來接入因特網(wǎng)110。
[0034] RAN 103/104/105可以與核心網(wǎng)絡(luò)106/107/109通信，該核心網(wǎng)絡(luò)106/107/109可 以是被配置成將語音、數(shù)據(jù)、應(yīng)用和/或通過網(wǎng)際協(xié)議的語音(VoIP)服務(wù)提供到WTRU 102a、 102b、102c、102d中的一者或多者的任何類型的網(wǎng)絡(luò)。例如，核心網(wǎng)絡(luò)106/107/109可以提供 呼叫控制、賬單服務(wù)、基于移動(dòng)定位的服務(wù)、預(yù)付費(fèi)呼叫、因特網(wǎng)連接、視頻分配等，和/或執(zhí) 行高級(jí)安全性功能，例如用戶認(rèn)證。盡管圖1A中未示出，可以理解RAN103/104/105和/或核 心網(wǎng)絡(luò)106/107/109可以直接或間接地與其他RAN進(jìn)行通信，這些其他RAN使用與RAN 103/ 104/105相同的RAT或者不同的RAT。例如，除了連接到可以采用E-UTRA無線電技術(shù)的RAN 103/104/105,核心網(wǎng)絡(luò)106/107/109也可以與使用GSM無線電技術(shù)的其他RAN(未顯示)通 ?目。
[0035] 核心網(wǎng)絡(luò) 106/107/109 也可以用作 WTRU 102&、10213、102(3、102(1接入？5了~108、因 特網(wǎng)110、和/或其他網(wǎng)絡(luò)112的網(wǎng)關(guān)。PSTN 108可以包括提供普通老式電話服務(wù)(POTS)的電 路交換電話網(wǎng)絡(luò)。因特網(wǎng)110可以包括使用公共通信協(xié)議的互聯(lián)計(jì)算機(jī)網(wǎng)絡(luò)及裝置的全球 系統(tǒng)，所述公共通信協(xié)議例如是傳輸控制協(xié)議(TCP)/網(wǎng)際協(xié)議(IP)因特網(wǎng)協(xié)議套件中的傳 輸控制協(xié)議(TCP)、用戶數(shù)據(jù)報(bào)協(xié)議(UDP)和網(wǎng)際協(xié)議(IP)。所述網(wǎng)絡(luò)112可以包括由其他服 務(wù)提供方擁有和/或運(yùn)營的無線或有線通信網(wǎng)絡(luò)。例如，網(wǎng)絡(luò)112可以包括連接到一個(gè)或多 個(gè)RAN的另一核心網(wǎng)，這些RAN可以使用與RAN 103/104/105相同的RAT或者不同的RAT。
[0036] 通信系統(tǒng)100中的WTRU 102&、10213、102(3、102(1中的一些或者全部可以包括多模式 能力，即WTRU 102a、102b、102c、102d可以包括用于通過不同的通信鏈路與不同的無線網(wǎng)絡(luò) 進(jìn)行通信的多個(gè)收發(fā)信機(jī)。例如，圖1A中顯示的WTRU 102c可以被配置成與可使用基于蜂窩 的無線電技術(shù)的基站114a進(jìn)行通信，并且與可使用IEEE 802無線電技術(shù)的基站114b進(jìn)行通 ?目。
[0037] 圖1B是示例WTRU 102的系統(tǒng)圖。如圖1B所示，WTRU 102可以包括處理器118、收發(fā) 信機(jī)120、發(fā)射/接收元件122、揚(yáng)聲器/麥克風(fēng)124、鍵盤126、顯示屏/觸摸板128、不可移除存 儲(chǔ)器130、可移除存儲(chǔ)器132、電源134、全球定位系統(tǒng)(GPS)芯片組136、和其他外圍設(shè)備138。 應(yīng)該理解的是，在保持與實(shí)施方式一致的情況下，WTRU 102可以包括上述元件的任何子組 合。同樣，實(shí)施方式設(shè)想基站114a和114b，和/或基站114a和114b可以表示的節(jié)點(diǎn)（例如但不 限于收發(fā)信機(jī)站(BTS)、節(jié)點(diǎn)B、站點(diǎn)控制器、接入點(diǎn)(AP)、家庭節(jié)點(diǎn)B、演進(jìn)型家庭節(jié)點(diǎn)B(e節(jié) 點(diǎn)B)、家庭演進(jìn)型節(jié)點(diǎn)B(HeNB或He節(jié)點(diǎn)B)、家庭演進(jìn)型節(jié)點(diǎn)B網(wǎng)關(guān)、以及代理節(jié)點(diǎn)等等)可以 包括圖1B中描述的以及這里描述的元件的一些或全部。
[0038] 處理器118可以是通用處理器、專用處理器、常規(guī)處理器、數(shù)字信號(hào)處理器(DSP)、 多個(gè)微處理器、與DSP核心相關(guān)聯(lián)的一個(gè)或多個(gè)微處理器、控制器、微控制器、專用集成電路 (ASIC)、現(xiàn)場可編程門陣列(FPGA)電路、任何其它類型的集成電路（1C)、狀態(tài)機(jī)等。處理器 118可以執(zhí)行信號(hào)編碼、數(shù)據(jù)處理、功率控制、輸入/輸出處理和/或使得WTRU 102能夠運(yùn)行 在無線環(huán)境中的其他任何功能。處理器118可以耦合到收發(fā)信機(jī)120,該收發(fā)信機(jī)120可以耦 合到發(fā)射/接收元件122。盡管圖1B中將處理器118和收發(fā)信機(jī)120描述為獨(dú)立的組件，但是 處理器118和收發(fā)信機(jī)120可以被一起集成到電子封裝或者芯片中。
[0039] 發(fā)射/接收元件122可以被配置成通過空中接口 115/116/117將信號(hào)傳送到基站 (例如，基站114a)，或者從基站(例如，基站114a)接收信號(hào)。例如，在一個(gè)實(shí)施方式中，發(fā)射/ 接收元件122可以是被配置成傳送和/或接收RF信號(hào)的天線。在另一個(gè)實(shí)施方式中，發(fā)射/接 收元件122可以是被配置成發(fā)送和/或接收例如IR、UV或者可見光信號(hào)的發(fā)射器/檢測器。在 另一個(gè)實(shí)施方式中，發(fā)射/接收元件122可以被配置成傳送和接收RF信號(hào)和光信號(hào)兩者。可 以理解發(fā)射/接收元件122可以被配置成傳送和/或接收無線信號(hào)的任意組合。
[0040] 此外，盡管發(fā)射/接收元件122在圖1B中被描述為單個(gè)元件，但是WTRU102可以包括 任何數(shù)量的發(fā)射/接收元件122。更具體地，WTRU 102可以使用ΜΜ0技術(shù)。由此，在一個(gè)實(shí)施 方式中，WTRU 102可以包括兩個(gè)或更多個(gè)發(fā)射/接收元件122(例如，多個(gè)天線）以用于通過 空中接口 115/116/117發(fā)射和/或接收無線信號(hào)。
[0041] 收發(fā)信機(jī)120可以被配置成對將由發(fā)射/接收元件122發(fā)送的信號(hào)進(jìn)行調(diào)制，并且 被配置成對由發(fā)射/接收元件122接收的信號(hào)進(jìn)行解調(diào)。如上所述，WTRU 102可以具有多模 式能力。由此，收發(fā)信機(jī)120可以包括多個(gè)收發(fā)信機(jī)以用于使得WTRU 102能夠經(jīng)由多個(gè)RAT 進(jìn)行通信，例如UTRA和IEEE802.11。
[0042] WTRU 102的處理器118可以被耦合到揚(yáng)聲器/麥克風(fēng)124、鍵盤126、和/或顯示屏/ 觸摸板128 (例如，液晶顯示(LCD)顯示單元或者有機(jī)發(fā)光二極管(0LED)顯示單元），并且可 以從上述裝置接收用戶輸入數(shù)據(jù)。處理器118還可以向揚(yáng)聲器/麥克風(fēng)124、鍵盤126、和/或 顯示屏/觸摸板128輸出用戶數(shù)據(jù)。此外，處理器118可以訪問來自任何類型的合適的存儲(chǔ)器 中的信息，以及向任何類型的合適的存儲(chǔ)器中存儲(chǔ)數(shù)據(jù)，所述存儲(chǔ)器例如可以是不可移除 存儲(chǔ)器130和/或可移除存儲(chǔ)器132。不可移除存儲(chǔ)器130可以包括隨機(jī)存取存儲(chǔ)器(RAM)、只 讀存儲(chǔ)器(R0M)、硬盤或者任何其他類型的存儲(chǔ)器存儲(chǔ)裝置?？梢瞥鎯?chǔ)器132可以包括訂 戶標(biāo)識(shí)模塊(SIM)卡、記憶棒、安全數(shù)字(SD)存儲(chǔ)卡等。在其他實(shí)施方式中，處理器118可以 訪問來自物理上未位于WTRU 102上（例如位于服務(wù)器或者家用計(jì)算機(jī)(未示出）上）的存儲(chǔ) 器的數(shù)據(jù)，以及在該存儲(chǔ)器中存儲(chǔ)數(shù)據(jù)。
[0043] 處理器118可以從電源134接收電能，并且可以被配置成將該電能分配給WTRU 102 中的其他組件和/或?qū)χ罻TRU 102中的其他組件的電能進(jìn)行控制。電源134可以是任何適用 于給WTRU 102供電的裝置。例如，電源134可以包括一個(gè)或多個(gè)干電池（鎳鎘(NiCd)、鎳鋅 (NiZn)、鎳氫(NiMH)、鋰離子(Li-ion)等）、太陽能電池、燃料電池等。
[0044] 處理器118還可以耦合到GPS芯片組136,該GPS芯片組136可以被配置成提供關(guān)于 WTRU 102的當(dāng)前位置的位置信息（例如，經(jīng)度和煒度）。作為來自GPS芯片組136的信息的補(bǔ) 充或者替代，WTRU 102可以通過空中接口 115/116/117從基站（例如，基站114a、114b)接收 位置信息，和/或基于從兩個(gè)或更多個(gè)相鄰基站接收到的信號(hào)的定時(shí)來確定其位置。可以理 解，在保持與實(shí)施方式一致性的同時(shí)，WTRU可以通過任何合適的位置確定實(shí)施方法來獲取 位置信息。
[0045] 處理器118還可以耦合到其他外圍設(shè)備138,該外圍設(shè)備138可以包括提供附加特 征、功能、和/或無線或有線連接的一個(gè)或多個(gè)軟件和/或硬件模塊。例如，外圍設(shè)備138可以 包括加速度計(jì)、電子指南針(e-compass)、衛(wèi)星收發(fā)信機(jī)、數(shù)字相機(jī)(用于照片或者視頻）、通 用串行總線(USB)端口、振動(dòng)裝置、電視收發(fā)信機(jī)、免持耳機(jī)、藍(lán)牙?模塊、調(diào)頻(FM)無線電 單元、數(shù)字音樂播放器、媒體播放器、視頻游戲機(jī)模塊、因特網(wǎng)瀏覽器等等。
[0046] 圖1C為根據(jù)一種實(shí)施方式的RAN 103及核心網(wǎng)絡(luò)106的系統(tǒng)圖。如上所述，RAN 103 可使用UTRA無線電技術(shù)通過空中接口 115與WTRU 102a、102b、102c通信。RAN 103還可以與 核心網(wǎng)絡(luò)106進(jìn)行通信。如圖1C所示，RAN 103可包括節(jié)點(diǎn)B 140a、140b、140c，節(jié)點(diǎn)B 140a、 140b、140c每一者均可包括一個(gè)或多個(gè)用于通過空中接口 115與WTRU 102a、102b、102c通信 的收發(fā)信機(jī)。節(jié)點(diǎn)B 140a、140b、140c中的每一者均可與RAN 103中的特定小區(qū)（未示出）相 關(guān)聯(lián)。RAN 103還可以包括RNC 142a、142b?？梢岳斫庠诒３峙c實(shí)施方式一致性的同時(shí)，RAN 103可以包括任意數(shù)量的節(jié)點(diǎn)B和RNC。
[0047] 如圖1C所示，節(jié)點(diǎn)B 140a、140b可以與RNC 142a通信。此外，節(jié)點(diǎn)B 140c可以與RNC 142b通信。節(jié)點(diǎn)B 140a、140b、140c可以經(jīng)由Iub接口與各自的RNC 142a、142b通信。RNC 142a、142b可以經(jīng)由Iur接口彼此通信。RNC 142a、142b的每一個(gè)可以被配置成控制其連接 的各自的節(jié)點(diǎn)B140a、140b、140c。此外，RNC 142a、142b的每一個(gè)可以被配制成執(zhí)行或支持 其他功能，例如外環(huán)功率控制、負(fù)載控制、準(zhǔn)許控制、分組調(diào)度、切換控制、宏分集、安全功 能、數(shù)據(jù)加密等。
[0048] 圖1C中示出的核心網(wǎng)絡(luò)106可以包括媒體網(wǎng)關(guān)(MGW) 144、移動(dòng)交換中心(MSC) 146、 服務(wù)GPRS支持節(jié)點(diǎn)（SGSNH48、和/或網(wǎng)關(guān)GPRS支持節(jié)點(diǎn)(GGSN)150。盡管前述每一個(gè)元件被 描述為核心網(wǎng)絡(luò)106的一部分，但這些元件的任何一個(gè)可以由除核心網(wǎng)絡(luò)運(yùn)營方之外的實(shí) 體所擁有和/或操作。
[0049] RAN 103中的RNC 142a可以經(jīng)由IuCS接口連接到核心網(wǎng)絡(luò)106中的MSC 146JSC 146 可以連接到MGW 144 JSC 146 和 MGW 144 可以給 WTRU 102a、102b、102c 提供對例如 PSTN 108的電路交換網(wǎng)絡(luò)的接入，以促進(jìn)WTRU 102a、102b、102c與傳統(tǒng)路線通信裝置之間的通 ?目。
[0050] RAN 103中的RNC 102a還可以經(jīng)由IuPS接口連接到核心網(wǎng)絡(luò)106中的SGSN 148。 SGSN 148 可以連接到GGSN 150 AGSN 148 和 GGSN 150 可以給 WTRU 102a、102b、102c 提供對 例如因特網(wǎng)110的分組交換網(wǎng)絡(luò)的接入，以促進(jìn)WTRU 102a、102b、102c與IP使能裝置之間的 通信。
[0051]如上所述，核心網(wǎng)絡(luò)106還可以連接到網(wǎng)絡(luò)112,網(wǎng)絡(luò)112可以包括其他服務(wù)提供方 擁有和/或運(yùn)營的其他有線或無線網(wǎng)絡(luò)。
[0052]圖1D為根據(jù)一種實(shí)施方式的RAN 104及核心網(wǎng)絡(luò)107的系統(tǒng)圖。如上所述，RAN 104 可使用E-UTRA無線電技術(shù)通過空中接口 116與WTRU102a、102b、102c通信。RAN 104還可以與 核心網(wǎng)絡(luò)107進(jìn)行通信。
[0053] RAN 104可包括e節(jié)點(diǎn)B 16〇3、16013、160(3，但可以理解1^~104可以包括任意數(shù)量 的e節(jié)點(diǎn)B而保持與實(shí)施方式一致。e節(jié)點(diǎn)B 160a、160b、160c每一者均可包括用于通過空中 接口 116與WTRU 102a、102b、102c通信的一個(gè)或多個(gè)收發(fā)信機(jī)。在一個(gè)實(shí)施方式中，e節(jié)點(diǎn)B 160a、160b、160c可以實(shí)施ΜΜ0技術(shù)。從而，例如e節(jié)點(diǎn)B 160a可以使用多個(gè)天線來向WTRU l〇2a發(fā)射無線信號(hào)并從WTRU 102a接收無線信號(hào)。
[0054] e節(jié)點(diǎn)B 160a、160b、160c中的每一個(gè)可以與特定小區(qū)（未示出）相關(guān)聯(lián)，并可被配 置為處理無線電資源管理決定、切換決定、在上行鏈路和/或下行鏈路中對用戶進(jìn)行調(diào)度 等。如圖1D所示，e節(jié)點(diǎn)B 160a、160b、160c可以通過X2接口互相通信。
[0055] 圖1D中示出的核心網(wǎng)絡(luò)107可以包括移動(dòng)性管理網(wǎng)關(guān)(MME) 162、服務(wù)網(wǎng)關(guān)164、和 分組數(shù)據(jù)網(wǎng)(PDN)網(wǎng)關(guān)166。雖然上述元件中的每一個(gè)都被描述為核心網(wǎng)絡(luò)107的一部分，這 些元件中的任何一個(gè)可被除核心網(wǎng)絡(luò)運(yùn)營商之外的實(shí)體所擁有和/或操作。
[0056] MME 162可經(jīng)由S1接口連接到RAN 104中的e節(jié)點(diǎn)B 160a、160b、160c中的每一個(gè)， 并可充當(dāng)控制節(jié)點(diǎn)。例如，MME 162可負(fù)責(zé)認(rèn)證WTRU102a、102b、102c的用戶、承載激活/去激 活、在WTRU 102a、102b、102c的初始附著期間選擇特定服務(wù)網(wǎng)關(guān)，等等。MME 162還可提供控 制平面功能，以用于在RAN 104和使用其它無線電技術(shù)(比如GSM或WCDMA)的其它RAN(未示 出）之間進(jìn)行切換。
[0057] 服務(wù)網(wǎng)關(guān)164可經(jīng)由S1接口連接到RAN 104中的e節(jié)點(diǎn)B 160a、160b、160c中的每一 個(gè)。服務(wù)網(wǎng)關(guān)164可以一般地向/從WTRU 102a、102b、102c路由并轉(zhuǎn)發(fā)用戶數(shù)據(jù)分組。服務(wù)網(wǎng) 關(guān)164還可執(zhí)行其它功能，比如在e節(jié)點(diǎn)B間切換期間錨定用戶平面、當(dāng)下行鏈路數(shù)據(jù)對WTRU 102a、102b、102c是可用的時(shí)觸發(fā)尋呼、管理并存儲(chǔ)WTRU 102a、102b、102c的上下文，等等。 [0058] 服務(wù)網(wǎng)關(guān)164還可連接到PDN 166,其可向WTRU 102a、102b、102c提供到分組交換 網(wǎng)絡(luò)(比如因特網(wǎng)110)的接入，以促進(jìn)WTRU 102a、102b、102c和IP使能裝置之間的通信。 [0059] 核心網(wǎng)絡(luò)107可以促進(jìn)與其它網(wǎng)絡(luò)的通信。例如，核心網(wǎng)絡(luò)107可以向WTRU 102a、 102b、102c提供到電路交換網(wǎng)絡(luò)（比如PSTN 108)的接入，以促進(jìn)WTRU 102a、102b、102c和傳 統(tǒng)陸線通信裝置之間的通信。例如，核心網(wǎng)絡(luò)107可以包括充當(dāng)核心網(wǎng)絡(luò)107與PSTN 108之 間的接口的IP網(wǎng)關(guān)(例如IP多媒體子系統(tǒng)（MS)服務(wù)器)或者可以與該IP網(wǎng)關(guān)通信。此外，核 心網(wǎng)絡(luò)107可以向WTRU 102a、102b、102c提供到網(wǎng)絡(luò)112的接入，網(wǎng)絡(luò)112可包括由其他服務(wù) 提供商擁有和/或操作的其它有線或無線網(wǎng)絡(luò)。
[0060]圖1E是根據(jù)一種實(shí)施方式的RAN 105和核心網(wǎng)絡(luò)109的系統(tǒng)圖。RAN105可以是利用 IEEE 802.16無線電技術(shù)通過空中接口117與WTRU102a、102b、102c進(jìn)行通信的接入服務(wù)網(wǎng) (八51^)。如將在下面詳細(xì)描述的，'^冊1023、10213、102(3、1^~105和核心網(wǎng)絡(luò)109中的不同功 能實(shí)體之間的通信鏈路可被定義為參考點(diǎn)。
[0061 ] 如圖1E中所示，RAN 105可包括基站180a、180b、180c和ASN網(wǎng)關(guān)182,但可以理解在 保持與實(shí)施方式一致性的同時(shí)RAN 105可以包括任意數(shù)量的基站和ASN網(wǎng)關(guān)。基站180a、 180b、180c每一個(gè)可以與RAN 105中的特定小區(qū)（未示出）相關(guān)聯(lián)并且均可包括用于通過空 中接口 117與WTRU102a、102b、102c通信的一個(gè)或多個(gè)收發(fā)信機(jī)。在一種實(shí)施方式中，基站 180a、180b、180c可以實(shí)施MM)技術(shù)。從而，舉例來講，基站180a可以使用多個(gè)天線來向WTRU 102a發(fā)射無線信號(hào)并從WTRU 102a接收無線信號(hào)?；?80a、180b、180c還可提供移動(dòng)性管 理功能，比如切換觸發(fā)、隧道建立、無線電資源管理、業(yè)務(wù)分類、服務(wù)質(zhì)量(QoS)策略執(zhí)行等。 ASN網(wǎng)關(guān)182可以充當(dāng)業(yè)務(wù)聚集點(diǎn)并可負(fù)責(zé)尋呼、緩存訂戶簡檔、路由到核心網(wǎng)絡(luò)109等。 [0062] WTRU 102a、102b、102c與RAN 105之間的空中接口 117可被定義為實(shí)施IEEE 802.16規(guī)范的R1參考點(diǎn)。此外，WTRU 102a、102b、102c中的每一個(gè)可與核心網(wǎng)絡(luò)109建立邏 輯接口（未示出）JTRU 102a、102b、102c和核心網(wǎng)絡(luò)109之間的邏輯接口可被定義為R2參考 點(diǎn)，其可用于認(rèn)證、授權(quán)、IP主機(jī)配置管理和/或移動(dòng)性管理。
[0063] 基站180a、180b、180c中的每一個(gè)之間的通信鏈路可被定義為包括用于促進(jìn)WTRU 切換和基站之間的數(shù)據(jù)轉(zhuǎn)移的協(xié)議的R8參考點(diǎn)。基站180a、180b、180c和ASN網(wǎng)關(guān)182之間的 通信鏈路可被定義為R6參考點(diǎn)。R6參考點(diǎn)可包括用于促進(jìn)基于與WTRU 102a、102b、102c中 的每一個(gè)相關(guān)聯(lián)的移動(dòng)性事件的移動(dòng)性管理的協(xié)議。
[0064] 如圖1E所示，RAN 105可連接到核心網(wǎng)絡(luò)109 JAN 105和核心網(wǎng)絡(luò)109之間的通信 鏈路可被定義為例如包括用于促進(jìn)數(shù)據(jù)轉(zhuǎn)移和移動(dòng)性管理能力的協(xié)議的R3參考點(diǎn)。核心網(wǎng) 絡(luò)109可包括移動(dòng)性IP本地代理(MIP-HAH84、認(rèn)證授權(quán)記賬(AAA)服務(wù)器186、和網(wǎng)關(guān)188。 雖然上述元件中的每一個(gè)都被描述為核心網(wǎng)絡(luò)109的一部分，但可以理解這些元件中的任 何一個(gè)可被除核心網(wǎng)絡(luò)運(yùn)營商之外的實(shí)體所擁有和/或操作。
[0065] 所述MIP-HA可以負(fù)責(zé)IP地址管理，并且可使得WTRU 102a、102b、102c在不同的ASN 和/或不同的核心網(wǎng)絡(luò)之間路由。所述MIP-HA 184可向WTRU 102a、102b、102c提供到分組交 換網(wǎng)絡(luò)（例如因特網(wǎng)110)的接入，以便于WTRU 102a、102b、102c與IP使能設(shè)備之間的通信。 AAA服務(wù)器186可以用于負(fù)責(zé)用戶認(rèn)證和用于支持用戶服務(wù)。網(wǎng)關(guān)188可促進(jìn)與其他網(wǎng)絡(luò)的 交互。例如，網(wǎng)關(guān)188可向WTRU 102a、102b、102c提供到電路交換網(wǎng)絡(luò)（例如PSTN 108)的接 入，以便于WTRU 102a、102b、102c與傳統(tǒng)陸線通信設(shè)備之間的通信。此外，網(wǎng)關(guān)188向WTRU 102a、102b、102c提供到網(wǎng)絡(luò)112的接入，該網(wǎng)絡(luò)112可包括由其他服務(wù)提供商所擁有和/或 操作的其他有線或無線網(wǎng)絡(luò)。
[0066] 雖然未在圖1E中示出，但應(yīng)當(dāng)理解的是，RAN 105可與其他ASN連接，并且核心網(wǎng)絡(luò) 109可與其他核心網(wǎng)絡(luò)連接。RAN 105與其他ASN之間的通信鏈路可被定義為R4參考點(diǎn)，其可 包括用于協(xié)調(diào)WTRU 102a、102b、102c在RAN 105與其他ASN之間的移動(dòng)性的協(xié)議。核心網(wǎng)絡(luò) 109與其他核心網(wǎng)絡(luò)之間的通信鏈路可被定義為R5參考點(diǎn)，其可包括用于促進(jìn)家用核心網(wǎng) 絡(luò)與受訪核心網(wǎng)絡(luò)之間的交互的協(xié)議。
[0067]人機(jī)界面(HMI)可從一個(gè)或多個(gè)傳感器接收數(shù)據(jù)(例如傳感器數(shù)據(jù)）。所述HMI可基 于接收到的傳感器數(shù)據(jù)確定用戶的認(rèn)知狀態(tài)和/或用戶的情感狀態(tài)。所述HMI可適應(yīng)用戶的 認(rèn)知狀態(tài)和/或情感狀態(tài)。所述HMI可向用戶遞送內(nèi)容。所述內(nèi)容可經(jīng)由WTRU 102 (例如智能 手機(jī)或平板電腦等)遞送給用戶，如圖1A至圖1E所示。WTRU 102可包括處理器118和顯示屏 128，如圖18所示。此處所公開的系統(tǒng)400、500、600、700、800、900、1000、1100、1200和1300可 使用如圖1C至圖1E所示的系統(tǒng)架構(gòu)實(shí)施。所述內(nèi)容可包括視頻數(shù)據(jù)、視頻游戲數(shù)據(jù)、教學(xué)數(shù) 據(jù)和/或培訓(xùn)數(shù)據(jù)。
[0068] 可對與認(rèn)知負(fù)荷和/或情感狀態(tài)相關(guān)的一個(gè)或多個(gè)(例如多個(gè))信號(hào)進(jìn)行捕獲。所 述一個(gè)或多個(gè)信號(hào)可包括接收自一個(gè)或多個(gè)傳感器的傳感器數(shù)據(jù)。例如，瞳孔放大可與認(rèn) 知嘗試(effort)關(guān)聯(lián)。心理刺激引發(fā)的瞳孔擴(kuò)張改變大約為0.5mm。瞳孔放大是由于副交感 神經(jīng)系統(tǒng)的神經(jīng)抑制機(jī)制產(chǎn)生的結(jié)果。圖2是說明了對象在對不同難度等級(jí)的記憶進(jìn)行編 碼時(shí)對對象的瞳孔直徑進(jìn)行測量的研究結(jié)果示例的圖示。參見圖2,對記憶進(jìn)行編碼可與瞳 孔直徑的增加相關(guān)。編碼存檔的難度等級(jí)可與瞳孔直徑的增加幅度相關(guān)。
[0069] 對具有不同入侵(invasiveness)等級(jí)的認(rèn)知負(fù)荷和/或情感狀態(tài)的測量存在多種 途徑。認(rèn)知負(fù)荷和/或情感狀態(tài)的測量途徑可包括:皮膚電反應(yīng)(GSR)或皮膚電活動(dòng)、語音分 析、面部表情分析、肢體語言分析、眼球運(yùn)動(dòng)和注視點(diǎn)追蹤、眨眼率分析、心率分析、血壓分 析、呼吸速率分析、體溫分析、和/或腦電描記。認(rèn)知負(fù)荷和/或情感狀態(tài)估計(jì)(例如確定)可 使用一個(gè)或多個(gè)認(rèn)知負(fù)荷和/或情感狀態(tài)的測量途徑被執(zhí)行(例如取決于數(shù)據(jù)獲取的設(shè)置 和可行性）。
[0070] 情感計(jì)算可包括能夠識(shí)別、解譯、處理和/或模擬人類情感的系統(tǒng)和/或設(shè)備的學(xué) 習(xí)和研發(fā)。情感計(jì)算是一門跨越了至少計(jì)算機(jī)科學(xué)、心理學(xué)和/或認(rèn)知科學(xué)的跨學(xué)科領(lǐng)域。 機(jī)器可以解譯人類的情緒狀態(tài)。所述機(jī)器可適應(yīng)人類的情緒狀態(tài)行為。所述機(jī)器可對人類 的情緒狀態(tài)提供適當(dāng)?shù)捻憫?yīng)。
[0071] 情感狀態(tài)可被分類為一個(gè)或多個(gè)預(yù)定義情感狀態(tài)。所述情感狀態(tài)可在空間上進(jìn)行 分類，如圖3中的示例所示。所述一個(gè)或多個(gè)預(yù)定義情感狀態(tài)可基于對人類情感的估計(jì)來作 出決定。圖3是說明了示例二維空間300的圖示，該示例二維空間300可用于通過相對效價(jià)繪 制覺醒來對情感狀態(tài)進(jìn)行分類。所述二維空間可包括一個(gè)或多個(gè)預(yù)定義情感狀態(tài)。所述二 維空間可包括與效價(jià)軸垂直的覺醒軸。預(yù)定義情感狀態(tài)可通過覺醒測量和效價(jià)測量來進(jìn)行 定義。所述覺醒測量可包括相距覺醒軸的第一距離。所述效價(jià)測量可包括相距效價(jià)軸的第 二距離。所述一個(gè)或多個(gè)預(yù)定義情感狀態(tài)可包括憤怒、緊張、恐懼、平靜、快樂、悲傷、和/或 放松。舉例來說，憤怒預(yù)定義情感狀態(tài)可包括負(fù)效價(jià)測量和激動(dòng)覺醒測量。根據(jù)另一實(shí)例， 緊張預(yù)定義情感狀態(tài)可包括中度(moderate)負(fù)效價(jià)測量和中度激動(dòng)覺醒測量。根據(jù)另一實(shí) 例，恐懼預(yù)定義情感狀態(tài)可包括負(fù)效價(jià)測量和和中度激動(dòng)覺醒測量。根據(jù)另一實(shí)例，平靜預(yù) 定義情感狀態(tài)可包括輕微激動(dòng)或鎮(zhèn)定效價(jià)測量和輕微正或負(fù)覺醒測量。根據(jù)另一實(shí)例，快 樂預(yù)定義情感狀態(tài)可包括正效價(jià)測量和激動(dòng)覺醒測量。根據(jù)另一實(shí)例，悲傷預(yù)定義情感狀 態(tài)可包括負(fù)效價(jià)測量和鎮(zhèn)定覺醒測量。根據(jù)另一實(shí)例，放松預(yù)定義情感狀態(tài)可包括正效價(jià) 測量和鎮(zhèn)定覺醒測量。覺醒可以是正被喚醒和/或刺激反應(yīng)的生理和/或精神狀態(tài)。效價(jià)是 對事件、對象、或形勢的興趣(例如正效價(jià))或厭惡(例如負(fù)效價(jià))的測量。
[0072] 可以對覺醒和/或效價(jià)進(jìn)行追蹤。例如，可經(jīng)由語言分析、面部表情分析、肢體語言 分析、腦電描記、皮膚電反應(yīng)(GSR)或皮膚電活動(dòng)(例如對交感神經(jīng)系統(tǒng)活動(dòng)的測量(例如戰(zhàn) 或逃反應(yīng)））、震顫或運(yùn)動(dòng)分析、瞳孔測量、眼球運(yùn)動(dòng)和注視點(diǎn)分析、眨眼率分析、心率分析、 血壓分析、呼吸速率分析、和/或體溫分析來對覺醒和/或效價(jià)進(jìn)行追蹤。一個(gè)或多個(gè)預(yù)定義 情感狀態(tài)可被確定并在繪制覺醒和效價(jià)的二維空間上進(jìn)行繪制。一個(gè)預(yù)定義情感狀態(tài)可與 一個(gè)或多個(gè)預(yù)定義情感狀態(tài)同時(shí)發(fā)生?？蓪τ脩舻挠X醒測量和效價(jià)測量進(jìn)行多次確定。在 所述多次確定中，覺醒測量和效價(jià)測量可在二維覺醒效價(jià)空間上進(jìn)行測量和/或繪制。
[0073] 游戲設(shè)計(jì)者(例如視頻游戲設(shè)計(jì)者)試圖在游戲難易程度上實(shí)現(xiàn)平衡，如果太難會(huì) 讓用戶產(chǎn)生挫敗感，如果太容易又會(huì)讓用戶感到無趣?？梢允褂眉狭藬z像機(jī)、加速計(jì)、運(yùn) 動(dòng)追蹤器、注視點(diǎn)追蹤器等的游戲平臺(tái)來捕獲傳感器數(shù)據(jù)?？蓪λ鰝鞲衅鲾?shù)據(jù)進(jìn)行分析 以確定用戶的情感和/或認(rèn)知狀態(tài)。對所述傳感器數(shù)據(jù)進(jìn)行分析包括對用戶的被捕獲的一 個(gè)或多個(gè)視頻圖像連同其他傳感器輸入數(shù)據(jù)(例如GSR、震顫、肢體語言、和/或面部表情)進(jìn) 行分析?？苫谒_定的情感和/或認(rèn)知狀態(tài)對游戲內(nèi)容進(jìn)行調(diào)整(例如增加或最大化用戶 的參與度和/或減少或最小化耗損(attrition))。
[0074] 舉例來說，當(dāng)用戶的效價(jià)和覺醒測量指示出游戲操作中有過度憤怒，則可通過降 低難度等級(jí)來自適應(yīng)游戲內(nèi)容。如果瞳孔計(jì)量(pupillometric)估計(jì)指示出用戶處于飽和 (saturate)狀態(tài)和/或無法編碼記憶，則可基于瞳孔計(jì)量估計(jì)來調(diào)整游戲內(nèi)容。系統(tǒng)可以開 環(huán)方式來實(shí)現(xiàn)這種權(quán)衡。例如，在用戶以多于閾值次數(shù)嘗試實(shí)現(xiàn)目標(biāo)之后，所述系統(tǒng)會(huì)向用 戶提供提示或另一形式的幫助。閉環(huán)方式能夠?qū)τ脩魧τ螒騼?nèi)容的響應(yīng)作出更好的調(diào)整。 某些系統(tǒng)可允許用戶選擇游戲的難度等級(jí)。自適應(yīng)難度模式可根據(jù)用戶測量的情感和/或 認(rèn)知狀態(tài)來確定難度等級(jí)。由于可指示幫助的情感和/或認(rèn)知狀態(tài)能夠提升用戶的游戲體 驗(yàn)，因此所述系統(tǒng)可以提供這樣的幫助和/或提示。自適應(yīng)難度可基于用戶的選擇來啟用或 禁用。
[0075] 圖4是說明了示例情感和/或認(rèn)知自適應(yīng)游戲系統(tǒng)400中的示例信息流的框圖。一 個(gè)或多個(gè)傳感器402可獲取與用戶404關(guān)聯(lián)的數(shù)據(jù)(例如傳感器數(shù)據(jù)）。所述一個(gè)或多個(gè)傳感 器402可提供所述數(shù)據(jù)以用于認(rèn)知/情感狀態(tài)估計(jì)(在406)。在406，所述認(rèn)知/情感狀態(tài)估計(jì) 可使用所述數(shù)據(jù)來確定(例如估計(jì)）用戶的認(rèn)知和/或情感狀態(tài)。用戶的認(rèn)知狀態(tài)可包括用 戶的認(rèn)知負(fù)荷。所確定的用戶認(rèn)知和/或情感狀態(tài)信息可被提供以用于游戲難度自適應(yīng)(在 408)。在408,所述游戲難度自適應(yīng)可基于所確定的用戶的認(rèn)知和/或情感狀態(tài)來調(diào)整游戲 的難度等級(jí)和/或確定提供給用戶的提示和/或其他幫助。在408,由所述游戲難度自適應(yīng)實(shí) 施的調(diào)整可由游戲引擎410來執(zhí)行。所述游戲引擎410可向用戶404呈現(xiàn)游戲體驗(yàn)。
[0076] 可對遞送(例如插入）內(nèi)容(例如一個(gè)或多個(gè)廣告）的定時(shí)進(jìn)行確定。遞送定時(shí)可增 加(例如最大化)所述一個(gè)或多個(gè)廣告的影響。用戶的情感和/或認(rèn)知狀態(tài)可用于影響廣告 植入(例如遞送定時(shí)）。在用戶會(huì)話期間，如果在錯(cuò)誤的時(shí)刻(例如當(dāng)用戶由于其他活動(dòng)處于 飽和狀態(tài))插入廣告，營銷消息可能會(huì)丟失，或者廣告可能被忽略。通過追蹤用戶的情感和/ 或認(rèn)知狀態(tài)，系統(tǒng)可在某個(gè)時(shí)刻插入廣告，而該時(shí)刻可增加或最大化消息遞送的效力和/或 減小或最小化廣告被忽略的頻率(例如點(diǎn)擊"跳過廣告"）。對遞送定時(shí)的調(diào)整可能不會(huì)對廣 告插入的整體速率造成影響。對遞送定時(shí)的調(diào)整可優(yōu)化插入定時(shí)。例如，時(shí)間窗可包括其間 有廣告插入的時(shí)間段。所述時(shí)間窗內(nèi)的廣告遞送定時(shí)可基于用戶的認(rèn)知和/或情感狀態(tài)來 確定?？苫谠跁r(shí)間窗內(nèi)的特定時(shí)刻對用戶的可接受認(rèn)知狀態(tài)和/或可接受情感狀態(tài)的檢 測在所述時(shí)間窗內(nèi)的所述特定時(shí)刻插入廣告。在用戶的情感和/或認(rèn)知狀態(tài)未在時(shí)間窗的 初期觸發(fā)廣告插入的情況下，可在所述時(shí)間窗的末期或快到末期的時(shí)刻觸發(fā)所述廣告。內(nèi) 容瀏覽時(shí)間線可被一個(gè)或多個(gè)這樣的時(shí)間窗覆蓋或被劃分成一個(gè)或多個(gè)這樣的時(shí)間窗，由 此一個(gè)或多個(gè)廣告在用戶瀏覽所述內(nèi)容時(shí)被插入。舉例來說，一個(gè)一小時(shí)長的視頻節(jié)目（或 者一小時(shí)的視頻瀏覽，哪怕不是單個(gè)視頻節(jié)目）可以被劃分成五個(gè)十二分鐘的時(shí)間窗，并且 可以使用用戶的認(rèn)知和/或情感狀態(tài)來調(diào)整遞送(例如插入)廣告到這五個(gè)時(shí)間窗中的每一 時(shí)間窗的定時(shí)。采用這種方式，廣告商可以將廣告的遞送時(shí)間設(shè)置為與用戶的可接受認(rèn)知 和/或情感狀態(tài)一致，同時(shí)維持預(yù)先確定的廣告插入的整體速率(例如每小時(shí)五個(gè)廣告）。所 述時(shí)間窗可與標(biāo)準(zhǔn)化峰值檢測器結(jié)合。所述標(biāo)準(zhǔn)化峰值檢測器可基于用戶的情感和/或認(rèn) 知狀態(tài)的活動(dòng)平均來確定情感和/或認(rèn)知狀態(tài)標(biāo)準(zhǔn)。對廣告植入的閾值情感和/或認(rèn)知狀態(tài) 可適應(yīng)于具有較低平均響應(yīng)的用戶。
[0077]圖5是說明了示例情感和/或認(rèn)知自適應(yīng)廣告插入定時(shí)系統(tǒng)500中的示例信息流的 框圖。一個(gè)或多個(gè)傳感器502可獲取與用戶504關(guān)聯(lián)的數(shù)據(jù)(例如傳感器數(shù)據(jù)）。所述一個(gè)或 多個(gè)傳感器502可為認(rèn)知/情感狀態(tài)估計(jì)506提供所述數(shù)據(jù)。所述認(rèn)知/情感狀態(tài)估計(jì)子系統(tǒng) 506可使用所述數(shù)據(jù)來確定(例如估計(jì)）用戶504的認(rèn)知和/或情感狀態(tài)。舉例來說，可基于所 述數(shù)據(jù)來確定用戶的覺醒和效價(jià)。用戶504的覺醒和效價(jià)可被繪制在二維覺醒和效價(jià)空間 上。用戶504的情感狀態(tài)可基于所繪制的用戶504的覺醒和效價(jià)來確定。所述用戶可基于覺 醒和效價(jià)的繪制來與一個(gè)或多個(gè)預(yù)定義的情感狀態(tài)關(guān)聯(lián)。用戶504的認(rèn)知狀態(tài)可基于所述 數(shù)據(jù)來確定。用戶504的認(rèn)知狀態(tài)可包括用戶504的認(rèn)知負(fù)荷。
[0078]用戶504的被確定的認(rèn)知和/或情感狀態(tài)可被提供以用于廣告遞送定時(shí)508。所述 認(rèn)知/情感狀態(tài)估計(jì)506可經(jīng)由網(wǎng)絡(luò)510來提供。在508，所述廣告遞送定時(shí)可基于用戶504的 所確定的認(rèn)知和/或情感狀態(tài)來確定遞送(例如插入進(jìn)度(schedule))-個(gè)或多個(gè)廣告的定 時(shí)。廣告插入可在用戶處于可接受狀態(tài)時(shí)觸發(fā)。例如，當(dāng)用戶處于可接受狀態(tài)時(shí)，可將廣告 遞送給用戶。用戶的情感狀態(tài)可指示用戶何時(shí)處于可接受狀態(tài)。例如，可確定用戶的情感狀 態(tài)距預(yù)定義情感狀態(tài)的距離測量。所述預(yù)定義情感狀態(tài)可包括預(yù)定義覺醒測量和預(yù)定義效 價(jià)測量。當(dāng)用戶的情感狀態(tài)距預(yù)先確定的情感狀態(tài)的距離測量低于預(yù)先確定的閾值時(shí)，用 戶處于可接受狀態(tài)。當(dāng)用戶呈現(xiàn)適當(dāng)高的覺醒和適當(dāng)高的效價(jià)時(shí)，用戶處于可接受狀態(tài)。當(dāng) 用戶的認(rèn)知負(fù)荷低于預(yù)先確定的閾值時(shí)，可將廣告遞送給用戶。當(dāng)用戶能夠?qū)π碌挠洃涍M(jìn) 行編碼時(shí)，用戶的認(rèn)知負(fù)荷低于預(yù)先確定的閾值。
[0079] 在508,遞送一個(gè)或多個(gè)廣告的所確定的定時(shí)可被提供給內(nèi)容發(fā)布商512。內(nèi)容發(fā) 布商512可基于所確定的定時(shí)來向用戶504遞送所述一個(gè)或多個(gè)廣告和/或其他內(nèi)容?？墒?用如圖1C至圖1E示出的系統(tǒng)架構(gòu)來實(shí)現(xiàn)情感和/或認(rèn)知自適應(yīng)廣告插入定時(shí)系統(tǒng)500。例 如，廣告和/或內(nèi)容可經(jīng)由WTRU102(例如智能手機(jī)或平板電腦等)遞送給用戶，如圖1C至圖 1E所示。通過對用戶的認(rèn)知負(fù)荷進(jìn)行監(jiān)控并在用戶能夠編碼新的記憶時(shí)觸發(fā)(例如遞送)廣 告，對廣告的營銷消息的保留可得以增加或最大化。當(dāng)用戶的認(rèn)知負(fù)荷低于預(yù)先確定的閾 值而遞送廣告時(shí)，可增加由于廣告營銷消息而導(dǎo)致用戶行為改變的可能性。
[0080] 可使用用戶的情感和/或認(rèn)知狀態(tài)來幫助駕駛員和/或飛行員。用戶的認(rèn)知狀態(tài)的 比重較用戶的情感狀態(tài)更大（例如認(rèn)知處理可以比情感狀態(tài)更重要）。如此處所述，信息娛 樂系統(tǒng)的自適應(yīng)可促進(jìn)情感狀態(tài)估計(jì)。例如，可基于駕駛員的情感狀態(tài)來向駕駛員推薦音 樂。
[0081 ]在較低優(yōu)先級(jí)界面警告的情況下，駕駛員或飛行員可能會(huì)注意力分散或處于飽和 狀態(tài)，并且可能忽略掉高優(yōu)先級(jí)的消息(例如碰撞警告）。可通過瞳孔測量(例如使用后視鏡 或安裝在儀表盤上的攝像頭）、GSR(例如使用集成在方向盤或飛機(jī)支架上的GSR傳感器）、聲 音分析(例如由車輛通信系統(tǒng)捕獲）、和/或來自車輛導(dǎo)航系統(tǒng)(例如基于GPS等)的信息來監(jiān) 控用戶的認(rèn)知負(fù)荷。這些輸入可被合成到用于提供一個(gè)或多個(gè)觸發(fā)(例如針對用戶界面警 告的動(dòng)態(tài)觸發(fā)）的認(rèn)知負(fù)荷評估中。例如，如果燃油水平降到閾值之下，可以按時(shí)遞送警告 以防止注意力分散和/或允許駕駛員的注意力保持在較高優(yōu)先級(jí)任務(wù)上(例如避免碰撞）。 可基于駕駛員或飛行員的認(rèn)知和/或情感狀態(tài)來以按照優(yōu)先級(jí)順序的方式按時(shí)遞送警告。 所述按照優(yōu)先級(jí)順序的方式可使得一個(gè)或多個(gè)危險(xiǎn)警告立即得到處理(例如不發(fā)生延遲）。 根據(jù)按照優(yōu)先級(jí)順序的方式，較低優(yōu)先級(jí)的警告可在駕駛員或飛行員的認(rèn)知帶寬（例如認(rèn) 知負(fù)荷)使得駕駛員或飛行員將注意力集中在該較低優(yōu)先級(jí)警告時(shí)進(jìn)行遞送。車輛導(dǎo)航系 統(tǒng)可用于追蹤路線的關(guān)鍵點(diǎn)和/或觸發(fā)對即將進(jìn)行的演習(xí)(maneuver)發(fā)出警告。
[0082] 認(rèn)知負(fù)荷可提供輸入到一個(gè)或多個(gè)用戶界面消息的定時(shí)。例如，如果駕駛員或飛 行員正在接近涉及演習(xí)的位置(例如根據(jù)預(yù)先計(jì)劃的導(dǎo)航路線或飛行路線），該位置例如為 高速出口或航向改變，HMI可在監(jiān)控認(rèn)知負(fù)荷時(shí)遞送一個(gè)或多個(gè)不重要的消息并基于用戶 的認(rèn)知負(fù)荷提供一個(gè)或多個(gè)指示。例如，如果瞳孔計(jì)量和/或皮膚電反應(yīng)(GSR)測量指示了 駕駛員或飛行員并未處于心理活動(dòng)飽和狀態(tài)，在關(guān)鍵演習(xí)之前，界面可指示存在較低優(yōu)先 級(jí)干擾(例如維護(hù)提醒等）。再例如，如果瞳孔計(jì)量和/或GSR測量指示了駕駛員或飛行員處 于心理活動(dòng)飽和狀態(tài)，則所述界面可忽略或延遲指示存在較低優(yōu)先級(jí)干擾。
[0083] 圖6是說明了示例情感和/或認(rèn)知狀態(tài)告警系統(tǒng)600中的示例信息流的框圖。一個(gè) 或多個(gè)傳感器602 (例如駕駛員或飛行員面對的攝像頭、方向盤或支架安裝的（yoke-mounted)GSR傳感器等）可獲取與駕駛員或飛行員604關(guān)聯(lián)的數(shù)據(jù)。所述一個(gè)或多個(gè)傳感器 602可向認(rèn)知/情感狀態(tài)估計(jì)606提供所述數(shù)據(jù)。在606,所述認(rèn)知/情感狀態(tài)估計(jì)可使用所述 數(shù)據(jù)來確定（例如估計(jì)）駕駛員或飛行員604的認(rèn)知和/或情感狀態(tài)。駕駛員或飛行員604的 認(rèn)知狀態(tài)可包括駕駛員或飛行員604的認(rèn)知負(fù)荷。所確定的認(rèn)知和/或情感狀態(tài)可被提供用 于警告進(jìn)度在608和/或音樂或多媒體選擇在610。在608,所述警告進(jìn)度可確定遞送一個(gè)或 多個(gè)警告的定時(shí)以呈現(xiàn)在警告顯示界面612上。遞送所述一個(gè)或多個(gè)警告的定時(shí)可基于駕 駛員或飛行員604的所確定的認(rèn)知和/或情感狀態(tài)、來自車載導(dǎo)航系統(tǒng)614的信息、來自車輛 狀態(tài)監(jiān)控616的信息、和/或來自車輛通信系統(tǒng)618的信息。在610,音樂或多媒體選擇可基于 駕駛員或飛行員604的所確定的情感狀態(tài)來選擇駕駛員或飛行員604的音樂和/或多媒體內(nèi) 容。所選擇的音樂和/或多媒體內(nèi)容可經(jīng)由車輛信息娛樂系統(tǒng)620遞送給駕駛員或飛行員 604〇
[0084] 情感和/或認(rèn)知狀態(tài)可在教學(xué)設(shè)置（例如基于計(jì)算機(jī)的培訓(xùn)課程和/或課堂環(huán)境 (例如在線課堂））中得以使用?？墒褂靡粋€(gè)或多個(gè)線索(cues)來確定學(xué)員參與度和保留率。 可使用所述一個(gè)或多個(gè)線索來控制信息流和/或所述信息流中的間斷的定時(shí)?？墒褂脤W(xué)員 的認(rèn)知和/或情感狀態(tài)來確定呈現(xiàn)教材的定時(shí)（例如進(jìn)度）。學(xué)員的認(rèn)知狀態(tài)可包括學(xué)員的 認(rèn)知負(fù)荷。學(xué)員的認(rèn)知和/或情感狀態(tài)可被用作對重復(fù)和/或增強(qiáng)的觸發(fā)。舉例來說，如果對 某一主題的第一次呈現(xiàn)導(dǎo)致了負(fù)面情感(例如高覺醒和負(fù)效價(jià)），則該主題可被闡明和/或 可提供額外的實(shí)例。學(xué)員的認(rèn)知和/或情感狀態(tài)可由教員（例如在線教員）使用或在基于計(jì) 算機(jī)的培訓(xùn)中使用。例如，學(xué)員掌握教材的能力可基于學(xué)員的認(rèn)知和/或情感狀態(tài)來計(jì)算。 再例如，間斷(例如適當(dāng)?shù)拈g斷）的定時(shí)可基于學(xué)員的認(rèn)知和/或情感狀態(tài)來計(jì)算?；谟?jì)算 機(jī)的培訓(xùn)系統(tǒng)或在線培訓(xùn)系統(tǒng)可對課程的一個(gè)或多個(gè)學(xué)員進(jìn)行監(jiān)控。所述基于計(jì)算機(jī)的培 訓(xùn)系統(tǒng)或在線培訓(xùn)系統(tǒng)可提供對一個(gè)或多個(gè)學(xué)員的認(rèn)知和/或情感狀態(tài)的一個(gè)或多個(gè)指示 (例如報(bào)告）。例如，可在課程期間經(jīng)由HMI將所述一個(gè)或多個(gè)指示呈現(xiàn)給在線課堂的教員。 基于一個(gè)或多個(gè)學(xué)員的認(rèn)知和/或情感狀態(tài)，所述基于計(jì)算機(jī)的培訓(xùn)系統(tǒng)或在線培訓(xùn)系統(tǒng) 可確定教學(xué)速率(例如當(dāng)前速率）的效力和/或可監(jiān)控可能有所發(fā)展的初期挫敗感。在在線 培訓(xùn)(例如課堂）系統(tǒng)中，可(例如經(jīng)由HMI)向教員提供建議，來改變教學(xué)進(jìn)度、花費(fèi)更多的 時(shí)間來強(qiáng)化與低(例如不足的)認(rèn)知和/或情感狀態(tài)相關(guān)聯(lián)的教材、和/或花費(fèi)更多的時(shí)間來 輔導(dǎo)被確認(rèn)為具有低(例如不足的）認(rèn)知和/或情感狀態(tài)的一名或多名學(xué)員。在基于計(jì)算機(jī) 的培訓(xùn)(例如學(xué)習(xí)）系統(tǒng)中，可響應(yīng)于對學(xué)員的低(例如不足的）認(rèn)知和/或情感狀態(tài)的檢測 來自動(dòng)調(diào)整教學(xué)進(jìn)度(例如課程進(jìn)度)和/或加強(qiáng)學(xué)生的教材。
[0085] 圖7是說明了示例情感和/或認(rèn)知自適應(yīng)教學(xué)系統(tǒng)700中的示例信息流的框圖。對 于基于計(jì)算機(jī)的培訓(xùn)，學(xué)員702可處于與計(jì)算機(jī)非常接近的位置。學(xué)員702的認(rèn)知和/或情感 狀態(tài)追蹤可經(jīng)由一個(gè)或多個(gè)傳感器704來執(zhí)行(例如經(jīng)由前置攝像頭）。所述一個(gè)或多個(gè)傳 感器704可向認(rèn)知/情感狀態(tài)估計(jì)(在706)提供與學(xué)員702關(guān)聯(lián)的數(shù)據(jù)(例如傳感器數(shù)據(jù)）。在 706,所述認(rèn)知/情感狀態(tài)估計(jì)可基于所述傳感器數(shù)據(jù)對學(xué)員702的認(rèn)知和/或情感狀態(tài)進(jìn)行 估計(jì)。所確定的用戶的認(rèn)知和/或情感狀態(tài)可被提供以分析進(jìn)度、重復(fù)、回顧和/或間斷的效 力。在708,所述進(jìn)度、重復(fù)、回顧以及間斷分析可向教員或基于計(jì)算機(jī)的培訓(xùn)子系統(tǒng)710指 示是否增強(qiáng)或減緩信息流的進(jìn)度和/或是否回顧之前的主題。認(rèn)知和/或情感狀態(tài)追蹤輸入 可用于培訓(xùn)中的時(shí)間間斷(例如向?qū)W員提供休息的時(shí)間并能夠以更佳的狀態(tài)和處于恢復(fù)水 平的認(rèn)知資源回到培訓(xùn)課程中）。對于在線課堂設(shè)置，情感和/或認(rèn)知自適應(yīng)教學(xué)系統(tǒng)700可 在顯示器(例如平視顯示器(HUD，其在課程學(xué)習(xí)期間對于教員是可視的）上提供對學(xué)員接受 的指示。在課堂(例如在線課堂)的設(shè)置中，可使用一個(gè)或多個(gè)傳感器704來追蹤一個(gè)或多個(gè) 學(xué)員的認(rèn)知負(fù)荷。所述一個(gè)或多個(gè)傳感器704可被安裝在課堂的前端。所述一個(gè)或多個(gè)傳感 器704可對所述一個(gè)或多個(gè)學(xué)生的面部進(jìn)行追蹤。所述一個(gè)或多個(gè)傳感器704可包括一個(gè)或 多個(gè)長焦鏡頭。所述一個(gè)或多個(gè)傳感器704可使用機(jī)電控制（electromechanical steering)(例如，來為瞳孔計(jì)量測量提供足夠的分辨率）。
[0086] 情感和/或認(rèn)知狀態(tài)可用于產(chǎn)品建議(例如廣告選擇）。內(nèi)容提供商可基于反饋(例 如顯式反饋）向用戶提供建議。所述反饋可包括對"同意"按鍵的點(diǎn)擊和/或用戶先前作出的 瀏覽選擇。零售商可基于用戶的瀏覽和/或購買歷史來建議(例如選擇遞送)一個(gè)或多個(gè)產(chǎn) 品。用戶的認(rèn)知和/或情感狀態(tài)可以被追蹤(例如，以對用戶喜愛的產(chǎn)品和/或內(nèi)容的廣告選 擇提供幫助）。例如，當(dāng)呈現(xiàn)某種類型的視頻、音頻或產(chǎn)品之后用戶顯示出高等級(jí)的覺醒(例 如高覺醒測量)和正效價(jià)(例如開心）時(shí)，零售商可選擇歷史上已經(jīng)得到類似用戶的正面情 感響應(yīng)的產(chǎn)品來遞送。類似的用戶可以包括具有與對感興趣的當(dāng)前用戶對內(nèi)容的情感響應(yīng) 類似的響應(yīng)的用戶。具有類似響應(yīng)的用戶能夠被用作當(dāng)前(例如目標(biāo))用戶對新內(nèi)容的預(yù)期 響應(yīng)的替代。
[0087] 圖8是說明了示例情感和/或認(rèn)知自適應(yīng)產(chǎn)品建議系統(tǒng)800中的示例信息流的框 圖。一個(gè)或多個(gè)傳感器802可生成與用戶804關(guān)聯(lián)的數(shù)據(jù)(例如傳感器數(shù)據(jù)）。所述一個(gè)或多 個(gè)傳感器802可為認(rèn)知/情感狀態(tài)估計(jì)提供所述數(shù)據(jù)。所述認(rèn)知/情感狀態(tài)估計(jì)(在806)可基 于所述數(shù)據(jù)來估計(jì)(例如確定）用戶的認(rèn)知和/或情感狀態(tài)。用戶的認(rèn)知和/或情感狀態(tài)可針 對產(chǎn)品/內(nèi)容建議來提供。用戶的認(rèn)知和/或情感狀態(tài)可經(jīng)由網(wǎng)絡(luò)810針對產(chǎn)品/內(nèi)容建議來 提供。在808,可基于用戶的認(rèn)知和/或情感狀態(tài)對一個(gè)或多個(gè)產(chǎn)品或內(nèi)容進(jìn)行確定或選擇 以遞送給用戶。所述產(chǎn)品/內(nèi)容建議可基于歷史上得到聽眾(audience)、其他用戶、類似的 用戶或當(dāng)前用戶的類似響應(yīng)的一個(gè)或多個(gè)產(chǎn)品或內(nèi)容來確定一個(gè)或多個(gè)產(chǎn)品或內(nèi)容。由所 述產(chǎn)品/內(nèi)容建議確定的一個(gè)或多個(gè)產(chǎn)品或內(nèi)容可被提供給內(nèi)容發(fā)布商或零售商812。所述 內(nèi)容發(fā)布商或零售商812可為被選擇以遞送給用戶804的一個(gè)或多個(gè)產(chǎn)品或內(nèi)容遞送廣告。 所述情感和/或認(rèn)知自適應(yīng)產(chǎn)品建議系統(tǒng)800可使用如圖1C至圖1E示出的系統(tǒng)架構(gòu)來實(shí)施。 例如，廣告和/或內(nèi)容可經(jīng)由WTRU 102(例如智能手機(jī)或平板電腦等)來遞送給用戶，如圖1C 至圖1E所示。
[0088] 情感和/或認(rèn)知自適應(yīng)產(chǎn)品建議系統(tǒng)可在用戶消費(fèi)內(nèi)容(例如廣告)時(shí)追蹤用戶的 認(rèn)知和/或情感狀態(tài)。所述情感和/或認(rèn)知自適應(yīng)產(chǎn)品建議系統(tǒng)可在用戶消費(fèi)內(nèi)容時(shí)對用戶 的認(rèn)知和/或情感狀態(tài)進(jìn)行分類。所述情感和/或認(rèn)知自適應(yīng)產(chǎn)品建議系統(tǒng)可在用戶消費(fèi)內(nèi) 容時(shí)根據(jù)用戶的認(rèn)知和/或情感狀態(tài)對一個(gè)或多個(gè)刺激（stimulus)/響應(yīng)對進(jìn)行分類。刺 激/響應(yīng)對中的刺激可包括呈現(xiàn)給用戶的信息(例如內(nèi)容）。刺激/響應(yīng)對中的響應(yīng)可包括作 為對呈現(xiàn)給用戶的信息的響應(yīng)的用戶的認(rèn)知狀態(tài)和/或情感狀態(tài)。所述用戶可基于所述一 個(gè)或多個(gè)刺激/響應(yīng)對與消費(fèi)者分類關(guān)聯(lián)。所述一個(gè)或多個(gè)刺激/響應(yīng)對可指示用戶對內(nèi)容 或產(chǎn)品的感受。所述一個(gè)或多個(gè)刺激/響應(yīng)對可存儲(chǔ)在數(shù)據(jù)庫內(nèi)。用戶可基于所述一個(gè)或多 個(gè)刺激/響應(yīng)對與消費(fèi)者分類關(guān)聯(lián)。可基于與用戶關(guān)聯(lián)的消費(fèi)者分類選擇遞送給用戶的廣 告。所述情感和/或認(rèn)知自適應(yīng)產(chǎn)品建議系統(tǒng)可觀測用戶對不同內(nèi)容或產(chǎn)品的響應(yīng)，并且隨 著時(shí)間的推移開發(fā)刺激響應(yīng)模型。所述刺激響應(yīng)模型可基于歷史的用戶對一個(gè)或多個(gè)先前 廣告的響應(yīng)。所述刺激響應(yīng)模型可用于對用戶的一個(gè)或多個(gè)偏好進(jìn)行分類。所述刺激響應(yīng) 模型可用于選擇遞送給用戶的廣告。所述刺激響應(yīng)模型可基于用戶對一個(gè)或多個(gè)產(chǎn)品的一 個(gè)或多個(gè)廣告作出的一個(gè)或多個(gè)之前的響應(yīng)來選擇遞送給用戶的廣告。例如，可基于用戶 對第二產(chǎn)品的第二廣告的之前的響應(yīng)來選擇遞送給用戶的第一產(chǎn)品的第一廣告。
[0089] 圖9是說明了示例消費(fèi)者分類子系統(tǒng)900的框圖，該示例消費(fèi)者分類子系統(tǒng)900可 由產(chǎn)品建議系統(tǒng)(例如情感和/或認(rèn)知自適應(yīng)產(chǎn)品建議系統(tǒng)800)來使用或與所述產(chǎn)品建議 系統(tǒng)結(jié)合。當(dāng)向用戶904呈現(xiàn)內(nèi)容和/或產(chǎn)品信息910時(shí)，一個(gè)或多個(gè)傳感器902可生成與用 戶904關(guān)聯(lián)的數(shù)據(jù)(例如傳感器數(shù)據(jù)）。所述一個(gè)或多個(gè)傳感器902可提供數(shù)據(jù)至認(rèn)知/情感 狀態(tài)估計(jì)子系統(tǒng)906。所述認(rèn)知/情感狀態(tài)估計(jì)子系統(tǒng)906可使用所述數(shù)據(jù)來確定（例如估 計(jì)）用戶904的認(rèn)知和/或情感狀態(tài)。所述認(rèn)知/情感狀態(tài)估計(jì)子系統(tǒng)906可向刺激/響應(yīng)數(shù)據(jù) 庫908提供用戶904的所確定的認(rèn)知和/或情感狀態(tài)。所述認(rèn)知/情感狀態(tài)估計(jì)子系統(tǒng)906可 將用戶904的所確定的認(rèn)知和/或情感狀態(tài)與內(nèi)容和/或產(chǎn)品信息910結(jié)合。在912,所述消費(fèi) 者分類子系統(tǒng)900可對刺激/響應(yīng)條目進(jìn)行處理以將用戶904與消費(fèi)者分類關(guān)聯(lián)。所述消費(fèi) 者分類可以是預(yù)定義的消費(fèi)者分類。所述消費(fèi)者分類子系統(tǒng)900可將分類信息、一個(gè)或多個(gè) 預(yù)定義的消費(fèi)者分類、和/或一個(gè)或多個(gè)刺激/響應(yīng)對存儲(chǔ)到消費(fèi)者分類數(shù)據(jù)庫914中。所述 消費(fèi)者分類數(shù)據(jù)庫914可以是刺激響應(yīng)數(shù)據(jù)庫。
[0090] 舉例來說，用戶可被放置在(例如關(guān)聯(lián)于)有關(guān)于喜愛某個(gè)內(nèi)容或產(chǎn)品且不喜愛其 他內(nèi)容或產(chǎn)品的分類。被廣泛使用的內(nèi)容(例如特定內(nèi)容)和/或一個(gè)或多個(gè)產(chǎn)品（例如受歡 迎的內(nèi)容和/或受歡迎的產(chǎn)品）可被用作用戶吸引度的標(biāo)記。被廣泛使用的內(nèi)容和/或一個(gè) 或多個(gè)產(chǎn)品可用于將一個(gè)或多個(gè)廣告與一個(gè)或多個(gè)消費(fèi)者分類關(guān)聯(lián)。一個(gè)或多個(gè)廣告選擇 (例如產(chǎn)品建議)可基于相同或類似消費(fèi)者分類中的一個(gè)或多個(gè)其他用戶的刺激/響應(yīng)對來 確定(例如通過推斷一個(gè)或多個(gè)正面響應(yīng)）。
[0091] 圖10是說明了示例產(chǎn)品/內(nèi)容建議子系統(tǒng)1000的框圖。所述示例產(chǎn)品/內(nèi)容建議子 系統(tǒng)1000可由產(chǎn)品建議系統(tǒng)(例如情感和/或認(rèn)知自適應(yīng)產(chǎn)品建議系統(tǒng)800)使用或與所述 產(chǎn)品建議系統(tǒng)結(jié)合。在1002,所述產(chǎn)品/內(nèi)容建議子系統(tǒng)1000可對消費(fèi)者的消費(fèi)者分類進(jìn)行 確定。所述產(chǎn)品/內(nèi)容建議子系統(tǒng)1000可通過消費(fèi)者分類數(shù)據(jù)庫1004對消費(fèi)者的消費(fèi)者分 類進(jìn)行確定。在1006,所述產(chǎn)品/內(nèi)容建議子系統(tǒng)1000可從刺激/響應(yīng)數(shù)據(jù)庫1008中選擇內(nèi) 容和/或產(chǎn)品的一個(gè)或多個(gè)廣告。所選擇的內(nèi)容和/或一個(gè)或多個(gè)廣告可基于歷史上得到類 似的消費(fèi)者（例如與所述消費(fèi)者處于相同消費(fèi)者分類中的消費(fèi)者）的正面響應(yīng)來選擇。在 1010，所述產(chǎn)品/內(nèi)容建議子系統(tǒng)1 〇〇〇可將所選擇的產(chǎn)品和/或內(nèi)容的廣告(例如建議)遞送 (例如提供)給消費(fèi)者。所述產(chǎn)品/內(nèi)容建議子系統(tǒng)1000可使用如圖1C至圖1E示出的系統(tǒng)架 構(gòu)來實(shí)施。例如，廣告和/或產(chǎn)品可經(jīng)由WTRU 102(例如智能手機(jī)或平板電腦等)遞送給消費(fèi) 者，如圖1C至圖1E所示。
[0092] 情感和/或認(rèn)知自適應(yīng)產(chǎn)品建議系統(tǒng)（例如情感和/或認(rèn)知自適應(yīng)產(chǎn)品建議系統(tǒng) 800)可指示注意第一內(nèi)容或廣告和/或購買第一產(chǎn)品的用戶可能對第二內(nèi)容和/或第二產(chǎn) 品感興趣。注意和/或購買第一內(nèi)容和/或第一產(chǎn)品的人可能不喜愛或滿意第一內(nèi)容和/或 第一產(chǎn)品。注意和/或購買第一內(nèi)容和/或第一產(chǎn)品的用戶可能不滿意第二內(nèi)容和/或第二 產(chǎn)品。
[0093] 通過對用戶的情感和/或認(rèn)知狀態(tài)進(jìn)行監(jiān)控，不需要明確的用戶反饋的情感和/或 認(rèn)知自適應(yīng)產(chǎn)品建議系統(tǒng)(例如情感和/或認(rèn)知自適應(yīng)產(chǎn)品建議系統(tǒng)800)能夠向用戶指示 (例如報(bào)告)具有類似體驗(yàn)或興趣的喜愛或滿意第一內(nèi)容和/或第一產(chǎn)品的一個(gè)或多個(gè)用戶 同樣喜愛或同樣滿意第二內(nèi)容和/或第二產(chǎn)品。情感和/或認(rèn)知自適應(yīng)產(chǎn)品建議系統(tǒng)可不要 求明確的用戶反饋(例如避免對明確的用戶反饋的需求）。所述情感和/或認(rèn)知自適應(yīng)產(chǎn)品 建議系統(tǒng)可提供更快速(例如更及時(shí))和/或更直接的消費(fèi)者滿意度測量。例如，用戶可能無 法意識(shí)到用戶的喜好等級(jí)。再例如，用戶可能會(huì)受到一個(gè)或多個(gè)臨時(shí)性(trans ient)事件的 影響，所述臨時(shí)性事件可能不會(huì)影響用戶體驗(yàn)的用戶評估。
[0094] 情感和/或認(rèn)知狀態(tài)可用于人機(jī)-機(jī)人互動(dòng)，例如視頻聊天。對一個(gè)或多個(gè)參與者 的情感和/或認(rèn)知的分析可在兩個(gè)或更多個(gè)參與者之間的實(shí)時(shí)視頻聊天(例如視頻電話）中 執(zhí)行。一個(gè)或多個(gè)參與者的情感和/或認(rèn)知分析可向一個(gè)或多個(gè)參與者提供信息以增強(qiáng)信 息流和/或信息內(nèi)容。情感和/或認(rèn)知分析可基于傳感器數(shù)據(jù)確定一個(gè)或多個(gè)參與者的認(rèn)知 狀態(tài)和/或一個(gè)或多個(gè)參與者的情感狀態(tài)。情感和/或認(rèn)知狀態(tài)分析可在人際關(guān)系上提供幫 助。例如，會(huì)話中的一個(gè)參與者可能會(huì)冒犯(例如在不知情的情況下得罪)另一參與者。當(dāng)執(zhí) 行情感狀態(tài)分析時(shí)，可以增強(qiáng)兩個(gè)或更多個(gè)參與者之間的互動(dòng)（例如可以解決問題而不是 使問題懸而未決）。處于實(shí)時(shí)視頻聊天一端的用戶界面可合并認(rèn)知和/或情感狀態(tài)分析?？?在客戶處(例如每一客戶）或在處理會(huì)話視頻(例如一個(gè)或多個(gè)會(huì)話視頻流）的中央服務(wù)器 處針對認(rèn)知和/或情感狀態(tài)分析處理用戶視頻流。
[0095] 圖11是說明了不例情感和/或認(rèn)知自適應(yīng)視頻聊天系統(tǒng)1100的框圖。所述情感和/ 或認(rèn)知自適應(yīng)視頻聊天系統(tǒng)1100可包括一個(gè)或多個(gè)顯示屏1102、1104、以及一個(gè)或多個(gè)攝 像頭1106、1108。一個(gè)或多個(gè)視頻客戶端1110、1112可經(jīng)由網(wǎng)絡(luò)1114(例如因特網(wǎng)）相互通 信。所述一個(gè)或多個(gè)攝像頭1106、1108和/或其他傳感器(未在圖11中示出）可向一個(gè)或多個(gè) 認(rèn)知/情感狀態(tài)估計(jì)子系統(tǒng)1116、1118提供數(shù)據(jù)。所述一個(gè)或多個(gè)認(rèn)知/情感狀態(tài)估計(jì)子系 統(tǒng)1116、1118可確定(例如估計(jì))遠(yuǎn)程參與者的認(rèn)知和/或情感狀態(tài)。例如，認(rèn)知/情感狀態(tài)估 計(jì)子系統(tǒng)1116可使用來自攝像頭1106的數(shù)據(jù)來確定靠近攝像頭1106的參與者的認(rèn)知和/或 情感狀態(tài)。認(rèn)知/情感狀態(tài)估計(jì)子系統(tǒng)1118可使用來自攝像頭1108的數(shù)據(jù)來確定（例如估 計(jì))靠近攝像頭1108的參與者的認(rèn)知和/或情感狀態(tài)。所述認(rèn)知/情感狀態(tài)估計(jì)子系統(tǒng)1116、 1118可將所確定的認(rèn)知和/或情感狀態(tài)信息提供給各自的視頻注釋(annotation)生成子系 統(tǒng)1120、1122。各自的視頻注釋生成子系統(tǒng)1120、1122可生成將分別使用顯示屏1102、1104 顯示的一個(gè)或多個(gè)注釋(例如一個(gè)或多個(gè)視頻注釋）。所述情感和/或認(rèn)知自適應(yīng)視頻聊天 系統(tǒng)1100可使用如圖1C至圖1E所示的系統(tǒng)架構(gòu)來實(shí)施。例如，所述一個(gè)或多個(gè)顯示屏1102、 1104可包括WTRU 102 (例如智能手機(jī)或平板電腦等），如圖1C至圖1E所示。
[0096] 視頻注釋的示例可包括對于第一方的指示，指示呼叫中的第二方(例如另一方)可 能有所困惑和/或可能希望澄清或重申（reiteration)。例如，所述第二方可能要求在繼續(xù) 討論(例如在處理信息時(shí))之前有額外的時(shí)間。所述第二方可以被冒犯并且可能要求道歉或 其他形式的調(diào)解。所述第二方可能會(huì)超負(fù)荷并且可能要求在會(huì)話中中止或間斷。所述第二 方可能被分離(例如不被關(guān)注）。認(rèn)知/情感估計(jì)子系統(tǒng)可基于例如面部表情和/或認(rèn)知和/ 或情感分析來確定(例如估計(jì)）另一方可能是具有欺騙性的。當(dāng)一方被確定為具有欺騙性， 所述認(rèn)知/情感估計(jì)子系統(tǒng)可指示該方為具有欺騙性的并且該方被提出警惕（例如提防該 方提供的響應(yīng)、警惕任何欺騙性招數(shù)等）。
[0097] 可以執(zhí)行解譯。所述解譯可通過增強(qiáng)一個(gè)或多個(gè)認(rèn)知和/或情感狀態(tài)參考對和/或 一個(gè)或多個(gè)解譯來執(zhí)行，來向一個(gè)或多個(gè)用戶提供認(rèn)知和/或情感狀態(tài)的解譯。圖12是說明 了示例子系統(tǒng)1300的框圖，該示例子系統(tǒng)1300可將培訓(xùn)數(shù)據(jù)填充到狀態(tài)/解譯數(shù)據(jù)庫1202 中。所述培訓(xùn)數(shù)據(jù)可將一個(gè)或多個(gè)認(rèn)知和/或情感狀態(tài)與一個(gè)或多個(gè)解譯相聯(lián)系(例如被冒 犯、厭倦、欺騙、困惑等等）。認(rèn)知/情感狀態(tài)估計(jì)子系統(tǒng)1204可從一個(gè)或多個(gè)傳感器1206接 收數(shù)據(jù)。所述一個(gè)或多個(gè)傳感器1206可捕獲與用戶1208關(guān)聯(lián)的一個(gè)或多個(gè)圖像和/或生物 計(jì)量(biometric)數(shù)據(jù)。來自用戶1208的一個(gè)或多個(gè)圖像和/或生物計(jì)量數(shù)據(jù)可包括例如語 言分析、面部表情分析、肢體語言分析、眼球運(yùn)動(dòng)/注視點(diǎn)分析、眨眼率分析等等。所述認(rèn)知/ 情感狀態(tài)估計(jì)子系統(tǒng)1204可確定(例如估計(jì)）用戶1208的認(rèn)知和/或情感狀態(tài)。所述認(rèn)知/情 感狀態(tài)估計(jì)子系統(tǒng)1204可基于所述一個(gè)或多個(gè)圖像和/或生物計(jì)量數(shù)據(jù)來確定用戶1208的 認(rèn)知和/或情感狀態(tài)。所述認(rèn)知/情感狀態(tài)估計(jì)子系統(tǒng)1204可將用戶1208的所確定的認(rèn)知 和/或情感狀態(tài)填充到狀態(tài)/解譯數(shù)據(jù)庫1202中。
[0098]圖13是說明了示例視頻注釋生成子系統(tǒng)1300的框圖。一個(gè)或多個(gè)傳感器1302可捕 獲與用戶1304關(guān)聯(lián)的一個(gè)或多個(gè)圖像和/或生物計(jì)量數(shù)據(jù)。所述一個(gè)或多個(gè)圖像和/或生物 計(jì)量數(shù)據(jù)可包括例如語言分析、面部表情分析、肢體語言分析、眼球運(yùn)動(dòng)/注視點(diǎn)分析、眨眼 率分析等等。所述一個(gè)或多個(gè)傳感器1302可將所述一個(gè)或多個(gè)圖像和/或生物計(jì)量數(shù)據(jù)提 供給認(rèn)知/情感狀態(tài)估計(jì)子系統(tǒng)1306。所述認(rèn)知/情感狀態(tài)估計(jì)子系統(tǒng)1306可確定（例如估 計(jì)）用戶1304的認(rèn)知和/或情感狀態(tài)。所述認(rèn)知/情感狀態(tài)估計(jì)子系統(tǒng)1306可基于所述一個(gè) 或多個(gè)圖像和/或生物計(jì)量數(shù)據(jù)來確定用戶1304的認(rèn)知和/或情感狀態(tài)?？山?jīng)由狀態(tài)/解譯 數(shù)據(jù)庫1308來生成一個(gè)或多個(gè)認(rèn)知和/或情感解譯。在1310,視頻注釋生成子系統(tǒng)1300可提 供指示了所述一個(gè)或多個(gè)認(rèn)知和/或情感解譯的一個(gè)或多個(gè)視頻注釋。
[0099]此處描述的方法和手段可適用于任意組合，并且可適用于其他無線技術(shù)及其他服 務(wù)。
[0100] WTRU可涉及（ref er to)物理設(shè)備的標(biāo)識(shí)或用戶標(biāo)識(shí)（例如訂閱相關(guān)標(biāo)識(shí)，例如 MS I SDN、S IP URI等）。WTRU可涉及基于應(yīng)用的標(biāo)識(shí)，例如針對每一應(yīng)用使用的用戶名。
[0101] 此處所述的過程可在結(jié)合至計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中的計(jì)算機(jī)程序、軟件和/或固 件中實(shí)現(xiàn)，以由計(jì)算機(jī)或處理器執(zhí)行。計(jì)算機(jī)可讀介質(zhì)的示例包括但不限于電子信號(hào)(通過 有線或無線連接傳送)和計(jì)算機(jī)可讀存儲(chǔ)媒介。計(jì)算機(jī)可讀存儲(chǔ)媒介的例子包括但不限于 只讀存儲(chǔ)器(ROM)、隨機(jī)存取存儲(chǔ)器(RAM)、寄存器、緩存存儲(chǔ)器、半導(dǎo)體存儲(chǔ)設(shè)備、例如內(nèi)置 磁盤和可移動(dòng)磁盤的磁媒介、磁光媒介、和/或光媒介（例如CD-ROM盤和/或數(shù)字多用途盤 (DVD)，但不限于此。與軟件相關(guān)聯(lián)的處理器可被用于實(shí)施在WTRU、UE、終端、基站、RNC或任 何主機(jī)中使用的射頻收發(fā)信機(jī)。
【主權(quán)項(xiàng)】
1. 一種用于管理人機(jī)界面(ΗΜΙ)中的內(nèi)容植入的方法，該方法包括： 從一個(gè)或多個(gè)傳感器接收傳感器數(shù)據(jù)； 基于接收到的數(shù)據(jù)確定用戶的認(rèn)知狀態(tài)和所述用戶的情感狀態(tài)中的至少一者； 基于所確定的所述用戶的認(rèn)知狀態(tài)和所確定的所述用戶的情感狀態(tài)中的至少一者確 定遞送內(nèi)容的定時(shí)，由此當(dāng)所述用戶的認(rèn)知負(fù)荷低于預(yù)先確定的閾值或當(dāng)所述用戶的情感 狀態(tài)指示所述用戶處于可接受狀態(tài)時(shí)，廣告被遞送給所述用戶；以及 基于所確定的定時(shí)，經(jīng)由所述HMI將所述內(nèi)容遞送給所述用戶。2. 根據(jù)權(quán)利要求1所述的方法，其中所述傳感器數(shù)據(jù)包括下列中的至少一者：拍攝數(shù) 據(jù)、皮膚電反應(yīng)(GSR)數(shù)據(jù)、聲音分析數(shù)據(jù)、面部表情分析數(shù)據(jù)、肢體語言分析數(shù)據(jù)、眼球運(yùn) 動(dòng)和注視點(diǎn)分析數(shù)據(jù)、眨眼率分析數(shù)據(jù)、腦電描記數(shù)據(jù)、皮膚電活動(dòng)數(shù)據(jù)、瞳孔測量數(shù)據(jù)、心 率數(shù)據(jù)、血壓數(shù)據(jù)、呼吸速率數(shù)據(jù)、以及體溫?cái)?shù)據(jù)。3. 根據(jù)權(quán)利要求1所述的方法，其中所述用戶的認(rèn)知狀態(tài)包括所述用戶的認(rèn)知負(fù)荷。4. 根據(jù)權(quán)利要求1所述的方法，其中所述用戶的情感狀態(tài)包括覺醒測量和效價(jià)測量。5. 根據(jù)權(quán)利要求4所述的方法，其中所述用戶的情感狀態(tài)指示當(dāng)所述用戶的情感狀態(tài) 到預(yù)定義的情感狀態(tài)的距離測量低于預(yù)先確定的閾值時(shí)所述用戶處于可接受狀態(tài)，并且其 中所述預(yù)定義的情感狀態(tài)包括預(yù)定義的覺醒測量和預(yù)定義的效價(jià)測量，并且其中所述距離 測量基于所述用戶的情感狀態(tài)與所述預(yù)定義的情感狀態(tài)之間的距離，并且其中所述距離測 量包括覺醒測量和效價(jià)測量。6. 根據(jù)權(quán)利要求1所述的方法，該方法還包括:基于所述用戶的認(rèn)知狀態(tài)和所述用戶的 情感狀態(tài)中的至少一者選擇用于遞送給所述用戶的內(nèi)容。7. 根據(jù)權(quán)利要求1所述的方法，該方法還包括:基于所述用戶的刺激響應(yīng)模型來選擇用 于遞送給所述用戶的內(nèi)容，所述用戶的刺激響應(yīng)模型基于對于先前內(nèi)容的歷史用戶響應(yīng)。8. 根據(jù)權(quán)利要求1所述的方法，該方法還包括:基于包括所述用戶的預(yù)定義的消費(fèi)者分 類中的消費(fèi)者刺激響應(yīng)數(shù)據(jù)庫來選擇用于遞送給所述用戶的內(nèi)容。9. 根據(jù)權(quán)利要求1所述的方法，該方法還包括： 基于刺激/響應(yīng)對將所述用戶與消費(fèi)者分類關(guān)聯(lián)，所述刺激/響應(yīng)對基于呈現(xiàn)給所述用 戶的信息以及所述用戶的響應(yīng)于所呈現(xiàn)的信息的認(rèn)知狀態(tài)和情感狀態(tài)中的至少一者；以及 基于與所述用戶關(guān)聯(lián)的消費(fèi)者分類來選擇用于遞送給所述用戶的內(nèi)容。10. 根據(jù)權(quán)利要求1所述的方法，其中所述內(nèi)容是第一產(chǎn)品的第一廣告，所述方法還包 括:基于所述用戶的對第二產(chǎn)品的第二廣告的先前響應(yīng)來選擇用于遞送給所述用戶的所述 第一廣告。11. 根據(jù)權(quán)利要求1所述的方法，其中所述內(nèi)容是第一內(nèi)容，所述方法還包括： 經(jīng)由所述HMI將第二內(nèi)容遞送給所述用戶，其中所述第二內(nèi)容包括下列中的至少一者： 視頻數(shù)據(jù)、視頻游戲數(shù)據(jù)、教學(xué)數(shù)據(jù)、以及培訓(xùn)數(shù)據(jù)；以及 基于遞送給所述用戶的所述第二內(nèi)容以及所述用戶的響應(yīng)于遞送給所述用戶的第二 內(nèi)容的認(rèn)知狀態(tài)和情感狀態(tài)中的至少一者存儲(chǔ)刺激/響應(yīng)對。12. 根據(jù)權(quán)利要求1所述的方法，其中確定所述用戶的認(rèn)知狀態(tài)和所述用戶的情感狀態(tài) 中的至少一者包括： 對接收到的傳感器數(shù)據(jù)進(jìn)行分析； 在二維覺醒效價(jià)空間上繪制覺醒測量和效價(jià)測量；以及 基于所述繪制，將所述用戶與一個(gè)或多個(gè)預(yù)定義的情感狀態(tài)關(guān)聯(lián)。13. 根據(jù)權(quán)利要求1所述的方法，其中所述內(nèi)容包括廣告。14. 一種被配置成管理人機(jī)界面(HMI)中的內(nèi)容植入的系統(tǒng)，該系統(tǒng)包括： 處理器，至少部分被配置成： 從一個(gè)或多個(gè)傳感器接收傳感器數(shù)據(jù)； 基于接收到的傳感器數(shù)據(jù)確定用戶的認(rèn)知狀態(tài)和所述用戶的情感狀態(tài)中的至少一者； 基于所確定的所述用戶的認(rèn)知狀態(tài)和所確定的所述用戶的情感狀態(tài)中的至少一者確 定遞送內(nèi)容的定時(shí)，由此當(dāng)所述用戶的認(rèn)知負(fù)荷低于預(yù)先確定的閾值或當(dāng)所述用戶的情感 狀態(tài)指示所述用戶處于可接受狀態(tài)時(shí)，廣告被遞送給所述用戶；以及 基于所確定的定時(shí)，經(jīng)由所述HMI將所述內(nèi)容遞送給所述用戶。15. 根據(jù)權(quán)利要求14所述的系統(tǒng)，其中所述傳感器數(shù)據(jù)包括下列中的至少一者：拍攝數(shù) 據(jù)、皮膚電反應(yīng)(GSR)數(shù)據(jù)、聲音分析數(shù)據(jù)、面部表情分析數(shù)據(jù)、肢體語言分析數(shù)據(jù)、眼球運(yùn) 動(dòng)和注視點(diǎn)分析數(shù)據(jù)、眨眼率分析數(shù)據(jù)、腦電描記數(shù)據(jù)、皮膚電活動(dòng)數(shù)據(jù)、瞳孔測量數(shù)據(jù)、心 率數(shù)據(jù)、血壓數(shù)據(jù)、呼吸速率數(shù)據(jù)、以及體溫?cái)?shù)據(jù)。16. 根據(jù)權(quán)利要求14所述的系統(tǒng)，其中所述用戶的認(rèn)知狀態(tài)包括所述用戶的認(rèn)知負(fù)荷。17. 根據(jù)權(quán)利要求14所述的系統(tǒng)，其中所述用戶的情感狀態(tài)包括覺醒測量和效價(jià)測量。18. 根據(jù)權(quán)利要求17所述的系統(tǒng)，其中所述用戶的情感狀態(tài)指示當(dāng)所述用戶的情感狀 態(tài)到預(yù)定義的情感狀態(tài)的距離測量低于預(yù)先確定的閾值時(shí)所述用戶處于可接受狀態(tài)，并且 其中所述預(yù)定義的情感狀態(tài)包括預(yù)定義的覺醒測量和預(yù)定義的效價(jià)測量，并且其中所述距 離測量基于所述用戶的情感狀態(tài)與所述預(yù)定義的情感狀態(tài)之間的距離，并且其中所述距離 測量包括覺醒測量和效價(jià)測量。19. 根據(jù)權(quán)利要求14所述的系統(tǒng)，其中所述處理器還被配置成基于所述用戶的認(rèn)知狀 態(tài)和所述用戶的情感狀態(tài)中的至少一者選擇用于遞送給所述用戶的內(nèi)容。20. 根據(jù)權(quán)利要求14所述的系統(tǒng)，其中所述處理器還被配置成基于所述用戶的刺激響 應(yīng)模型來選擇用于遞送給所述用戶的內(nèi)容，所述用戶的刺激響應(yīng)模型基于對于先前內(nèi)容的 歷史用戶響應(yīng)。21. 根據(jù)權(quán)利要求14所述的系統(tǒng)，其中所述處理器還被配置成基于包括所述用戶的預(yù) 定義的消費(fèi)者分類中的消費(fèi)者刺激響應(yīng)數(shù)據(jù)庫來選擇用于遞送給所述用戶的內(nèi)容。22. 根據(jù)權(quán)利要求14所述的系統(tǒng)，其中所述處理器還被配置成： 基于刺激/響應(yīng)對將所述用戶與消費(fèi)者分類關(guān)聯(lián)，所述刺激/響應(yīng)對基于呈現(xiàn)給所述用 戶的信息以及所述用戶的響應(yīng)于所呈現(xiàn)的信息的認(rèn)知狀態(tài)和情感狀態(tài)中的至少一者；以及 基于與所述用戶關(guān)聯(lián)的消費(fèi)者分類來選擇用于遞送給所述用戶的內(nèi)容。23. 根據(jù)權(quán)利要求14所述的系統(tǒng)，其中所述內(nèi)容是第一產(chǎn)品的第一廣告，并且其中所述 處理器還被配置成:基于所述用戶的對第二產(chǎn)品的第二廣告的先前響應(yīng)來選擇用于遞送給 所述用戶的所述第一廣告。24. 根據(jù)權(quán)利要求14所述的系統(tǒng)，其中所述內(nèi)容是第一內(nèi)容，并且所述處理器還被配置 成： 經(jīng)由所述HMI將內(nèi)容遞送給所述用戶，其中所述內(nèi)容包括下列中的至少一者：視頻數(shù) 據(jù)、視頻游戲數(shù)據(jù)、教學(xué)數(shù)據(jù)、以及培訓(xùn)數(shù)據(jù)；以及 基于遞送給所述用戶的所述內(nèi)容以及所述用戶的響應(yīng)于遞送給所述用戶的內(nèi)容的認(rèn) 知狀態(tài)和情感狀態(tài)中的至少一者存儲(chǔ)刺激/響應(yīng)對。25. 根據(jù)權(quán)利要求14所述的系統(tǒng)，其中所述處理器被配置成確定所述用戶的認(rèn)知狀態(tài) 和所述用戶的情感狀態(tài)中的至少一者包括所述處理器還被配置成： 對接收到的傳感器數(shù)據(jù)進(jìn)行分析； 在二維覺醒效價(jià)空間上繪制覺醒測量和效價(jià)測量；以及 基于所述繪制，將所述用戶與一個(gè)或多個(gè)預(yù)定義的情感狀態(tài)關(guān)聯(lián)。26. 根據(jù)權(quán)利要求14所述的系統(tǒng)，其中所述內(nèi)容包括廣告。
【文檔編號(hào)】G06Q30/02GK106030642SQ201580009842
【公開日】2016年10月12日
【申請日】2015年2月23日
【發(fā)明人】G·S·斯滕伯格, Y·雷茲尼克, A·萊爾, S·羅卜, J·D·卡韋爾
【申請人】交互數(shù)字專利控股公司