專利名稱：利用網(wǎng)絡(luò)服務(wù)的精神狀態(tài)分析的制作方法
技術(shù)領(lǐng)域：
本申請(qǐng)總體上涉及精神狀態(tài)分析，更具體地涉及利用網(wǎng)絡(luò)服務(wù)來(lái)評(píng)估精神狀態(tài)。
背景技術(shù)：
精神狀態(tài)的評(píng)估是理解個(gè)體的關(guān)鍵因素，而且對(duì)于醫(yī)療和商業(yè)目的而言也是有幫助的。精神狀態(tài)涵蓋從高興到悲傷、從滿意到焦急、和從激動(dòng)到平靜以及其他很多情感的廣闊范圍。在對(duì)日常事件作出反應(yīng)時(shí)會(huì)體驗(yàn)到這些精神狀態(tài)，這些事件例如是交通堵塞時(shí)的挫折感、站隊(duì)時(shí)的厭倦感以及等候一杯咖啡時(shí)的急躁感?；谠u(píng)估和理解其他人的精神狀態(tài)，個(gè)人可能變得相當(dāng)敏銳和感性，但精神狀態(tài)的自動(dòng)評(píng)估則更具有挑戰(zhàn)性。感性的人可以察覺另一個(gè)人是焦慮的或歡喜的并相應(yīng)地作出反應(yīng)。一個(gè)人察覺另一個(gè)人的精神狀態(tài)的能力和方式可能是十分難于總結(jié)的并且常常表示為具有“直覺”。很多精神狀態(tài)(例如困惑、專注以及擔(dān)心)可以得到識(shí)別以幫助理解一個(gè)人或人群。例如在目擊一場(chǎng)大災(zāi)難后，人們可能集體地反應(yīng)為恐懼或焦慮。同樣，例如當(dāng)人們的運(yùn)動(dòng)隊(duì)獲得一場(chǎng)勝利時(shí)，他們可以集體地反應(yīng)為高興狂熱。某些面部表情和頭部姿勢(shì)可用于·識(shí)別一個(gè)人正在經(jīng)歷的精神狀態(tài)。在基于面部表情的精神狀態(tài)評(píng)估中只進(jìn)行了有限的自動(dòng)化處理。某些生理?xiàng)l件可以提供一個(gè)人心理狀態(tài)的顯著說明并已經(jīng)以粗略的方式用在測(cè)謊儀或測(cè)謊測(cè)試中。仍然存在自動(dòng)地對(duì)精神狀態(tài)進(jìn)行增強(qiáng)評(píng)估的需求。

發(fā)明內(nèi)容
精神狀態(tài)分析可以通過評(píng)估個(gè)人所展現(xiàn)的面部表情、頭部姿勢(shì)和生理?xiàng)l件來(lái)進(jìn)行。這種分析可以幫助理解消費(fèi)者行為、更加貼近于用戶需求地訂做產(chǎn)品、以及改善網(wǎng)站和計(jì)算機(jī)程序的接口。在此披露了一種用于分析精神狀態(tài)的計(jì)算機(jī)實(shí)施方法，該方法包括將與一個(gè)人相關(guān)的數(shù)據(jù)捕獲至一個(gè)計(jì)算機(jī)系統(tǒng)中，其中該數(shù)據(jù)提供評(píng)估該個(gè)人的精神狀態(tài)的信息；從一個(gè)網(wǎng)絡(luò)服務(wù)接收分析，其中該分析基于在該個(gè)人上捕獲的數(shù)據(jù)；并且基于該接收的分析來(lái)渲染一個(gè)輸出，該輸出描述該個(gè)人的精神狀態(tài)。與該個(gè)人相關(guān)的數(shù)據(jù)包括一個(gè)群組中的一種，該群組包括面部表情、生理信息以及加速計(jì)讀數(shù)。該面部表情進(jìn)一步包括頭部姿勢(shì)。該生理信息包括一個(gè)群組中的一種，該群組包括皮膚電活動(dòng)、心率、心率變異性以及呼吸。可以在不接觸該個(gè)人的情況下采集該生理信息。該精神狀態(tài)是認(rèn)知狀態(tài)和情感狀態(tài)之一。該網(wǎng)絡(luò)服務(wù)包括一個(gè)接口，該接口包括遠(yuǎn)離該個(gè)人的一個(gè)服務(wù)器和基于云的存儲(chǔ)器。該方法可以進(jìn)一步包括通過該網(wǎng)絡(luò)服務(wù)標(biāo)引與該個(gè)人相關(guān)的數(shù)據(jù)。該標(biāo)引可以包括基于效價(jià)和喚醒信息的分類。該方法可以進(jìn)一步包括接收與多個(gè)其他人相關(guān)的分析信息，其中該分析信息允許評(píng)估該多個(gè)其他人的集體精神狀態(tài)。該分析信息可以包括將該多個(gè)其他人的精神狀態(tài)關(guān)聯(lián)至在該個(gè)人的精神狀態(tài)上捕獲的數(shù)據(jù)。該關(guān)聯(lián)可以基于來(lái)自該個(gè)人的元數(shù)據(jù)和來(lái)自該多個(gè)其他人的元數(shù)據(jù)。從該網(wǎng)絡(luò)服務(wù)接收的該分析可以基于特定的訪問權(quán)限。該方法可以進(jìn)一步包括向網(wǎng)絡(luò)服務(wù)發(fā)送一條請(qǐng)求以進(jìn)行該分析。該分析可以基于一條分析請(qǐng)求而即時(shí)產(chǎn)生。該方法可以進(jìn)一步包括向該網(wǎng)絡(luò)服務(wù)發(fā)送在該個(gè)人上捕獲的數(shù)據(jù)的一個(gè)子集。該渲染可以基于從該網(wǎng)絡(luò)服務(wù)接收的數(shù)據(jù)。接收的數(shù)據(jù)可以包括JavaScript對(duì)象注解(JSON)形式的序列化對(duì)象。該方法可以進(jìn)一步包括將該序列化對(duì)象去串行化為JavaScript對(duì)象的形式。該渲染進(jìn)一步包括基于該個(gè)人的精神狀態(tài)來(lái)推薦一個(gè)行動(dòng)方案。該推薦包括一個(gè)群組中的一項(xiàng)，該群組包括修改對(duì)一個(gè)焦點(diǎn) 群體進(jìn)行查詢的問題、改變網(wǎng)頁(yè)上的廣告、編輯觀看的電影以去除有異議的部分、改變電子游戲的方向、改變醫(yī)療咨詢介紹、以及編輯基于互聯(lián)網(wǎng)的教程的令人混淆部分。在一些實(shí)施方案中，一種用于分析精神狀態(tài)的實(shí)例化在計(jì)算機(jī)可讀介質(zhì)中的計(jì)算機(jī)程序產(chǎn)品可以包括將與一個(gè)人有關(guān)的數(shù)據(jù)捕獲至一個(gè)計(jì)算機(jī)系統(tǒng)的代碼，其中，該數(shù)據(jù)提供評(píng)估該個(gè)人的精神狀態(tài)的信息；從一個(gè)網(wǎng)絡(luò)服務(wù)接收分析的代碼，其中該分析基于所捕獲的與該個(gè)人有關(guān)的數(shù)據(jù)；并且基于接收的分析來(lái)渲染一個(gè)輸出的代碼，該輸出描述該個(gè)人的精神狀態(tài)。在實(shí)施方案中，一種用于分析精神狀態(tài)的系統(tǒng)可以包括存儲(chǔ)指令的一個(gè)存儲(chǔ)器；附接至該存儲(chǔ)器的一個(gè)或多個(gè)處理器，其中當(dāng)執(zhí)行存儲(chǔ)的指令時(shí)，該一個(gè)或多個(gè)處理器被配置用于捕獲與一個(gè)人相關(guān)的數(shù)據(jù)，其中該數(shù)據(jù)提供評(píng)估該個(gè)人的精神狀態(tài)的信息；從一個(gè)網(wǎng)絡(luò)服務(wù)接收分析，其中該分析基于在該個(gè)人上所捕獲的數(shù)據(jù)；并且基于接收的分析來(lái)渲染一個(gè)輸出，該輸出描述該個(gè)人的精神狀態(tài)。不同實(shí)施方案的不同特征、方面和優(yōu)點(diǎn)將從以下進(jìn)一步的描述中變得更為清晰。


通過參考以下附圖可以理解某些實(shí)施方案的下述詳細(xì)描述，其中圖I是一個(gè)用于分析精神狀態(tài)的系統(tǒng)的圖示。圖2是在精神狀態(tài)分析中獲取并使用數(shù)據(jù)的流程圖。圖3是皮膚電活動(dòng)的圖形渲染。圖4是加速計(jì)數(shù)據(jù)的圖形渲染。圖5是皮膚溫度數(shù)據(jù)的圖形渲染。圖6展示了用于面部分析的圖像采集系統(tǒng)。圖7是進(jìn)行面部分析的流程圖。圖8是描述生理分析的圖示。圖9是描述心率分析的圖示。
圖10是進(jìn)行精神狀態(tài)分析和渲染的流程圖。圖11是描述人群的心理反應(yīng)的分析的流程圖。圖12是識(shí)別數(shù)據(jù)部分的流程圖，該數(shù)據(jù)部分匹配所選擇的感興趣精神狀態(tài)。圖13是一群人的精神狀態(tài)分析與匯總結(jié)果的圖形渲染。圖14是精神狀態(tài)分析的圖形渲染。圖15是基于元數(shù)據(jù)的精神狀態(tài)分析的圖形渲染。
具體實(shí)施例方式本披露提供了分析人們的精神狀態(tài)的不同方法和系統(tǒng)的描述。精神狀態(tài)可以是認(rèn) 知狀態(tài)或情緒狀態(tài)，并且這些狀態(tài)可以以術(shù)語(yǔ)情感來(lái)概括地涵蓋。情緒狀態(tài)的實(shí)例包括高興或悲傷。認(rèn)知狀態(tài)的實(shí)例包括專注或困惑。觀察、獲取以及分析這些精神狀態(tài)可以產(chǎn)生有關(guān)人們對(duì)各種刺激的反應(yīng)的重要信息。在精神狀態(tài)的評(píng)估中經(jīng)常使用的一些術(shù)語(yǔ)是喚醒和效價(jià)。喚醒是表示對(duì)人的激活或刺激的量。效價(jià)表示是否一個(gè)人正面或負(fù)面地進(jìn)行適應(yīng)。情感的確定可以包括分析喚醒和效價(jià)。情感還可以包括表情的面部分析，例如微笑或愁眉苦臉。分析就像跟蹤某人何時(shí)微笑或某人何時(shí)皺眉一樣簡(jiǎn)單。除此以外，可以基于跟蹤某人何時(shí)微笑或表現(xiàn)出其他情感來(lái)給出行動(dòng)方案的建議。本披露提供了與進(jìn)行精神狀態(tài)分析相關(guān)的不同方法和系統(tǒng)的描述。精神狀態(tài)可以是情緒狀態(tài)或認(rèn)知狀態(tài)。情緒狀態(tài)的實(shí)例可以是高興或悲哀。認(rèn)知狀態(tài)的實(shí)例可以是專注或困惑。圖I是一種用于分析精神狀態(tài)的系統(tǒng)100的圖示。該系統(tǒng)可以包括數(shù)據(jù)采集110、網(wǎng)絡(luò)服務(wù)120、存儲(chǔ)庫(kù)管理器130、分析器152以及渲染機(jī)140。數(shù)據(jù)采集110可以通過從多個(gè)感測(cè)結(jié)構(gòu)(例如，第一感測(cè)112、第二感測(cè)114直至第η感測(cè)116)采集數(shù)據(jù)來(lái)實(shí)現(xiàn)。該多個(gè)感測(cè)結(jié)構(gòu)可以附接至一個(gè)人，十分靠近該個(gè)人，或可以觀察該個(gè)人。這些感測(cè)結(jié)構(gòu)可以被適配用于進(jìn)行面部分析。感測(cè)結(jié)構(gòu)可以被適配用于進(jìn)行生理分析，生理分析可以包括皮膚電活動(dòng)或皮膚電傳導(dǎo)、加速計(jì)、皮膚溫度、心率、心率變異性、呼吸以及其他類型的人類分析?；谒璺治龅奶幚硪?，從這些感測(cè)結(jié)構(gòu)采集的數(shù)據(jù)可以進(jìn)行實(shí)時(shí)分析或可以采集用于未來(lái)分析。分析還可以“即時(shí)化”進(jìn)行。即時(shí)化分析可以根據(jù)要求來(lái)進(jìn)行，在這種情況下，例如當(dāng)在網(wǎng)頁(yè)上點(diǎn)擊一個(gè)按鈕時(shí)，就提供結(jié)果。還可以在采集數(shù)據(jù)時(shí)就進(jìn)行分析，因此在采集數(shù)據(jù)的同時(shí)利用相關(guān)分析實(shí)時(shí)地或相對(duì)于采集過程延遲很小或毫無(wú)延遲地提供時(shí)間線。以此方式，仍在采集個(gè)人上的數(shù)據(jù)的同時(shí)就可以提供分析結(jié)果。網(wǎng)絡(luò)服務(wù)120可以包括一個(gè)接口，該接口包括遠(yuǎn)離個(gè)人的一個(gè)服務(wù)器和基于云的存儲(chǔ)器。網(wǎng)絡(luò)服務(wù)可以包括為大量精神狀態(tài)分析工具提供訪問權(quán)的網(wǎng)站、ftp站點(diǎn)、或服務(wù)器。當(dāng)網(wǎng)絡(luò)服務(wù)120路由至系統(tǒng)100的其他部分時(shí)，它還可以是采集數(shù)據(jù)的通道。網(wǎng)絡(luò)服務(wù)120可以是服務(wù)器或可以是計(jì)算機(jī)的分布式網(wǎng)絡(luò)。網(wǎng)絡(luò)服務(wù)120可以為用戶提供登錄并請(qǐng)求信息和分析的方式。根據(jù)各種其他信息源或基于與感興趣的個(gè)人的精神狀態(tài)相關(guān)的人群，信息請(qǐng)求可以采用分析個(gè)人的精神狀態(tài)的方式。在一些實(shí)施方案中，網(wǎng)絡(luò)服務(wù)120可以將采集的數(shù)據(jù)轉(zhuǎn)發(fā)至一個(gè)或多個(gè)處理器以作進(jìn)一步分析。網(wǎng)絡(luò)服務(wù)120可以將收集的數(shù)據(jù)轉(zhuǎn)發(fā)至存儲(chǔ)庫(kù)管理器130。存儲(chǔ)庫(kù)管理器可以提供數(shù)據(jù)標(biāo)引132、數(shù)據(jù)存儲(chǔ)134、數(shù)據(jù)檢索136以及數(shù)據(jù)查詢138。通過數(shù)據(jù)采集110采集(例如通過第一感測(cè)112)的數(shù)據(jù)可以經(jīng)由網(wǎng)絡(luò)服務(wù)120轉(zhuǎn)發(fā)至存儲(chǔ)庫(kù)管理器130。接著，存儲(chǔ)庫(kù)管理器可以存儲(chǔ)采集的數(shù)據(jù)。該數(shù)據(jù)可以通過網(wǎng)絡(luò)服務(wù)與已經(jīng)在個(gè)體上(在該個(gè)體上已經(jīng)進(jìn)行了數(shù)據(jù)采集110)采集到的其他數(shù)據(jù)一起進(jìn)行標(biāo)引，或者可以與其他個(gè)體(他們的數(shù)據(jù)已經(jīng)存儲(chǔ)在存儲(chǔ)庫(kù)管理器130中)一起進(jìn)行標(biāo)引。標(biāo)引可以包括基于效價(jià)和喚醒信息的分類。標(biāo)引可以包括基于時(shí)間戳或其他元數(shù)據(jù)的排序。標(biāo)引可以包括基于一般的精神狀態(tài)或基于個(gè)體的常見經(jīng)歷來(lái)關(guān)聯(lián)數(shù)據(jù)。常見經(jīng)歷可以是瀏覽或交互網(wǎng)站、電影、電影預(yù)告片、廣告、電視節(jié)目、流視頻剪輯、遠(yuǎn)程學(xué)習(xí)節(jié)目、視頻游戲、計(jì)算機(jī)游戲、個(gè)人游戲機(jī)、手機(jī)、汽車或其他車輛、產(chǎn)品、網(wǎng)頁(yè)、進(jìn)食等?？梢栽u(píng)估精神狀態(tài)的其他經(jīng)歷包括逛商店、逛商場(chǎng)，或在商店中遇到一次展覽?？梢赃M(jìn)行多種方式的標(biāo)引。例如面部表 情或生理信息這樣的數(shù)據(jù)是可以檢索的。一類標(biāo)引可以是緊束縛標(biāo)引，在這種標(biāo)引中存在明確的關(guān)系，這對(duì)將來(lái)的分析是有幫助的。一個(gè)實(shí)例是以小時(shí)、分鐘、秒并且可能以某些極小的時(shí)間片段來(lái)記錄的數(shù)據(jù)時(shí)間戳。其他實(shí)例包括與數(shù)據(jù)相關(guān)聯(lián)的工程、客戶端或個(gè)人。另一類標(biāo)引可以是松耦合的，在這種類型中某些可能的有用關(guān)聯(lián)最初可能不是很明顯。這類標(biāo)引的一些實(shí)例可以包括工作經(jīng)歷、性別、收入或其他元數(shù)據(jù)。另一個(gè)實(shí)例可以包括捕獲數(shù)據(jù)的位置，例如在個(gè)人的家里、工作場(chǎng)所、學(xué)校或其他場(chǎng)所。又一個(gè)實(shí)例可以包括與個(gè)人的動(dòng)作或行為相關(guān)的信息。這種類型信息的實(shí)例包括一個(gè)人是否在網(wǎng)站上進(jìn)行了結(jié)賬操作、他們是否填寫了某些表單、他們進(jìn)行了哪些查詢或搜索等。獲取數(shù)據(jù)的時(shí)刻可能對(duì)某些類型的標(biāo)引而言證明是有幫助的，該時(shí)刻可能是個(gè)人日常工作時(shí)的換班時(shí)間。可能被標(biāo)引的任何種類的信息可以作為元數(shù)據(jù)進(jìn)行采集。在進(jìn)行某種分析的同時(shí)，標(biāo)引可以采用特別的方式構(gòu)成并暫時(shí)保留。可替代地，可以形成標(biāo)引并與數(shù)據(jù)一起存儲(chǔ)，以用于將來(lái)參考。另外，元數(shù)據(jù)可以包括個(gè)人(數(shù)據(jù)在該個(gè)人上采集)的自評(píng)定信息。數(shù)據(jù)可以通過訪問網(wǎng)絡(luò)服務(wù)120并請(qǐng)求為個(gè)人采集的數(shù)據(jù)進(jìn)行檢索。數(shù)據(jù)還可以針對(duì)很多個(gè)人、針對(duì)給定時(shí)間段、或針對(duì)給定經(jīng)歷來(lái)檢索。可以查詢數(shù)據(jù)以便為特定經(jīng)歷、為給定的心理反應(yīng)或精神狀態(tài)、或?yàn)閭€(gè)人或人群找到匹配項(xiàng)。關(guān)聯(lián)可以通過查詢和各種檢索來(lái)找到，這些查詢和檢索在商業(yè)或醫(yī)療環(huán)境中可以證明是有幫助的。查詢可以基于關(guān)鍵詞搜索、基于時(shí)間幀、或基于經(jīng)歷來(lái)進(jìn)行。在一些實(shí)施方案中，利用渲染機(jī)140提供顯示。渲染機(jī)140可以是計(jì)算機(jī)系統(tǒng)(它是系統(tǒng)100的另一個(gè)組件的一部分)的一部分，可以是網(wǎng)絡(luò)服務(wù)120的一部分，或可以是客戶端計(jì)算機(jī)系統(tǒng)的一部分。渲染可以包括在數(shù)據(jù)采集110上采集的信息的圖形顯示。渲染可以包括視頻、皮膚電活動(dòng)、加速計(jì)讀數(shù)、皮膚溫度、心率和心率變異性的顯示。渲染還可以包括精神狀態(tài)的顯示。在一些實(shí)施方案中，渲染可以包括某些精神狀態(tài)的概率。個(gè)人的精神狀態(tài)可以根據(jù)采集的數(shù)據(jù)進(jìn)行推斷并且可以基于活動(dòng)單元的面部分析以及面部表情和頭部姿勢(shì)。例如，專注可以通過緊縮眉頭來(lái)識(shí)別。心率增加可以表示激動(dòng)。降低的皮膚電傳導(dǎo)可以對(duì)應(yīng)于喚醒。這些以及其他因素可用于識(shí)別以圖形顯示渲染的精神狀態(tài)。系統(tǒng)100可以包括調(diào)度器150。調(diào)度器150可以獲得來(lái)自數(shù)據(jù)采集110的數(shù)據(jù)。調(diào)度器150可以與分析器152交互。調(diào)度器150可以通過分析器152確定分析的時(shí)間表，其中分析器152受到計(jì)算機(jī)處理性能的限制，數(shù)據(jù)不能進(jìn)行實(shí)時(shí)分析。在一些實(shí)施方案中，系統(tǒng)100的數(shù)據(jù)采集110、網(wǎng)絡(luò)服務(wù)120、存儲(chǔ)庫(kù)管理器130或其他組件的一些方面可能需要分析器152可使用的計(jì)算機(jī)處理性能。分析器152可以是一個(gè)單一處理器或可以是多個(gè)處理器或可以是組網(wǎng)的處理器群組。分析器152可以包括各種其他計(jì)算機(jī)組件(例如存儲(chǔ)器或類似裝置)以幫助執(zhí)行系統(tǒng)100的所需計(jì)算。分析器152可以通過網(wǎng)絡(luò)服務(wù)120與系統(tǒng)100的其他組件進(jìn)行通信。在一些實(shí)施方案中，分析器152可以與系統(tǒng)的其他組件直接進(jìn)行通信。分析器152可以提供數(shù)據(jù)(該數(shù)據(jù)采集自個(gè)人)的分析結(jié)果，其中該分析結(jié)果與個(gè)人的精神狀態(tài)相關(guān)。在一些實(shí)施方案中，分析器152即時(shí)地提供結(jié)果。調(diào)度器150可以通過分析器152請(qǐng)求即時(shí)化分析。其他個(gè)人160的信息可以提供給系統(tǒng)100。其他個(gè)人160可以具有與數(shù)據(jù)采集110在其上執(zhí)行的個(gè)人相同的經(jīng)歷。處理過程可以包括分析來(lái)自多個(gè)其他個(gè)人160的信息，其中該信息允許評(píng)估該多個(gè)其他個(gè)人160中每一個(gè)的精神狀 態(tài)并將該多個(gè)其他個(gè)人160中每一個(gè)的精神狀態(tài)與在個(gè)人的精神狀態(tài)上捕獲并標(biāo)引的數(shù)據(jù)相關(guān)聯(lián)。元數(shù)據(jù)可以在其他個(gè)人160的每一個(gè)上或在其他個(gè)人160上采集的數(shù)據(jù)上進(jìn)行采集?？商娲兀渌麄€(gè)人160的精神狀態(tài)可以與個(gè)人(數(shù)據(jù)在該個(gè)人上采集)的精神狀態(tài)相關(guān)聯(lián)。分析器152可以基于一組其他個(gè)人160進(jìn)一步提供第二分析，其中其他個(gè)人160的精神狀態(tài)與該個(gè)人的精神狀態(tài)相關(guān)聯(lián)。在其他實(shí)施方案中，一組其他個(gè)人160可以與該個(gè)人(數(shù)據(jù)采集在該個(gè)人上執(zhí)行)一起進(jìn)行分析以推斷一種精神狀態(tài)，該精神狀態(tài)是整個(gè)群組的反應(yīng)并且可以稱為集體精神狀態(tài)。這種反應(yīng)可用于評(píng)估廣告的價(jià)值，政治候選人的喜歡程度、電影如何受人歡迎等。分析可以在其他個(gè)人160上執(zhí)行，這樣可以概括整個(gè)群組的集體精神狀態(tài)。渲染可以包括顯示來(lái)自該多個(gè)個(gè)人的集體精神狀態(tài)。在一個(gè)實(shí)施方案中，一百多人可以觀看若干電影預(yù)告片，面部和生理數(shù)據(jù)從每一個(gè)人身上獲取?？梢苑治雒娌亢蜕頂?shù)據(jù)以便推斷每個(gè)人的精神狀態(tài)和作為一個(gè)整體的人群的集體反應(yīng)。具有最強(qiáng)喚醒和正效價(jià)的電影預(yù)告片可以被認(rèn)為刺激了該電影預(yù)告片的觀眾，觀眾受到了積極的鼓動(dòng)，從而當(dāng)電影發(fā)布時(shí)就地去觀看它。那么可以基于集體反應(yīng)，選擇最好的電影預(yù)告片以用于宣傳未來(lái)的電影。在一些實(shí)施方案中，個(gè)人的人口統(tǒng)計(jì)資料可用于確定哪個(gè)電影預(yù)告片最適于不同的觀眾。例如，可以推薦青少年是主要觀眾的一部電影預(yù)告片。當(dāng)青少年的父母是主要觀眾時(shí)，可以推薦另一個(gè)電影預(yù)告片。在一些實(shí)施方案中，當(dāng)人們利用媒體進(jìn)行交互時(shí)，網(wǎng)絡(luò)攝像頭或其他攝像機(jī)可用于分析他們的性別和年齡。另外，可以采集IP地址，以指明采集分析內(nèi)容時(shí)所在的地理位置。這種信息和其他信息可以作為元數(shù)據(jù)而包含并且用作分析的一部分。例如，在城市環(huán)境中周五夜晚的午夜之后仍在網(wǎng)上的青少年可以被認(rèn)為是要分析的群組。在另一實(shí)施方案中，在十二個(gè)人正與給定零售商的網(wǎng)站交互時(shí)，他們可以選擇使網(wǎng)絡(luò)攝像機(jī)觀察面部表情并收集生理反應(yīng)。這十二個(gè)人中每一個(gè)的精神狀態(tài)可以基于他們的喚醒和效價(jià)來(lái)推斷，而喚醒和效價(jià)從面部表情和生理反應(yīng)分析而得。零售商可以理解的是，某些網(wǎng)頁(yè)設(shè)計(jì)使得瀏覽者更喜歡特定商品，甚至更快地做出購(gòu)買決定。可替代地，造成疑惑的網(wǎng)頁(yè)可能由讓瀏覽者產(chǎn)生信任的網(wǎng)站所取代。聚合機(jī)170可以是系統(tǒng)100的一部分。其他數(shù)據(jù)源172可以用作系統(tǒng)100的輸入并可以用于幫助個(gè)人(在該個(gè)人上進(jìn)行數(shù)據(jù)采集110)的精神狀態(tài)評(píng)估。其他數(shù)據(jù)源172可以包括新聞?dòng)嗛?、臉譜(Facebook )網(wǎng)頁(yè)、推特(Twitter )、網(wǎng)絡(luò)相冊(cè)(Flickr )和其他社交網(wǎng)絡(luò)和媒體。聚合機(jī)170可以分析這些其他數(shù)據(jù)源172以幫助評(píng)估個(gè)人(在該個(gè)人上進(jìn)行數(shù)據(jù)采集)的精神狀態(tài)。
在一個(gè)示例實(shí)施方案中，公司的雇員可以選擇自我評(píng)估程序，在這種情況中，在執(zhí)行工作職責(zé)的同時(shí)監(jiān)控他或她的臉部和皮膚電活動(dòng)。雇員還可以選擇一種工具，在這種情況中聚合機(jī)170讀取博客帖子以及工作、公司、心情或健康的社交網(wǎng)絡(luò)帖子。久而久之，該雇員能夠在工作日那天感受的感覺中回顧社交網(wǎng)絡(luò)存在。雇員還可以查看他或她的心情和態(tài)度可以如何影響所張貼的內(nèi)容。一個(gè)實(shí)施方案可能是幾乎無(wú)破壞的，例如只是計(jì)算社交網(wǎng)絡(luò)帖子的數(shù)量，或者是有破壞的，例如通過分析引擎來(lái)抽出社交網(wǎng)絡(luò)內(nèi)容，該分析引擎從文本內(nèi)容上推斷精神狀態(tài)。在另一個(gè)實(shí)施方案中，公司可能想要理解華爾街日?qǐng)?bào)(Wall Street Journal )和其他出版物中與該公司有關(guān)的新聞報(bào)道如何影響雇員士氣和工作滿意度。可以對(duì)聚合機(jī)170進(jìn)行編程以搜索提及該公司的新聞報(bào)道并將它們鏈接回參與這種嘗試的雇員。做額外分析的人可以瀏覽與該公司相關(guān)的新聞報(bào)道以便向每個(gè)參與者的精神狀態(tài)提供額外的環(huán)境。在又一個(gè)實(shí)施方案中，面部分析工具可以處理面部動(dòng)作單元和姿勢(shì)以推斷精神狀 態(tài)。當(dāng)存儲(chǔ)圖像時(shí)，可以附上元數(shù)據(jù)，例如其面部出現(xiàn)在視頻(視頻是面部分析的一部分)中的人的姓名。這種視頻和元數(shù)據(jù)可以通過面部識(shí)別引擎進(jìn)行傳遞并告知此人的面部。當(dāng)面部對(duì)于面部識(shí)別引擎而言是可識(shí)別的，聚合機(jī)170可以在互聯(lián)網(wǎng)上廣播，或僅向特定的網(wǎng)站傳播，例如網(wǎng)絡(luò)相冊(cè)和臉譜網(wǎng)頁(yè)，以便發(fā)現(xiàn)具有相同面部的鏈接。通過面部識(shí)別定位的人的其他圖片可以再次提交給面部分析工具進(jìn)行分析，以便提供該對(duì)象的精神狀態(tài)的更深入理解。圖2是在精神狀態(tài)分析過程中獲取并使用數(shù)據(jù)的流程圖。流程200描繪了一種用于分析精神狀態(tài)的計(jì)算機(jī)實(shí)現(xiàn)方法。流程可以開始于將個(gè)人上的數(shù)據(jù)捕獲至一個(gè)計(jì)算機(jī)系統(tǒng)210，其中該數(shù)據(jù)提供評(píng)估個(gè)人的精神狀態(tài)的信息。所獲取的數(shù)據(jù)可以與個(gè)人的經(jīng)歷相關(guān)聯(lián)。經(jīng)歷可以是以下群組中的一項(xiàng)，該群組包括交互于網(wǎng)站、電影、電影預(yù)告片、產(chǎn)品、計(jì)算機(jī)游戲、視頻游戲、個(gè)人游戲機(jī)、移動(dòng)電話、移動(dòng)裝置、廣告或進(jìn)食。交互可以指簡(jiǎn)單地瀏覽或可以有意瀏覽并做出響應(yīng)。與個(gè)人相關(guān)的數(shù)據(jù)可以進(jìn)一步包括手勢(shì)和肢體語(yǔ)言方面的信息。與個(gè)人相關(guān)的數(shù)據(jù)可以包括面部表情、生理信息以及加速計(jì)讀數(shù)。面部表情可以進(jìn)一步包括頭部姿勢(shì)。生理信息可以包括皮膚電活動(dòng)、皮膚溫度、心率、心率變異性以及呼吸。生理信息可以在不接觸個(gè)人的情況下獲取，例如通過分析面部視頻。該信息可以實(shí)時(shí)地、即時(shí)地、或在計(jì)劃分析的基礎(chǔ)上獲取和分析。流程200繼續(xù)向網(wǎng)絡(luò)服務(wù)發(fā)送捕獲的數(shù)據(jù)212。發(fā)送的數(shù)據(jù)可以包括圖像、生理以及加速計(jì)信息。可以發(fā)送數(shù)據(jù)用于進(jìn)一步的精神狀態(tài)分析或用于與其他人的數(shù)據(jù)進(jìn)行關(guān)聯(lián)，或用于其他分析。在一些實(shí)施方案中，發(fā)送至網(wǎng)絡(luò)服務(wù)的數(shù)據(jù)是在個(gè)人上捕獲的數(shù)據(jù)的子集。網(wǎng)絡(luò)服務(wù)可以是網(wǎng)站、ftp站點(diǎn)或服務(wù)器，它們將訪問權(quán)提供給與精神狀態(tài)相關(guān)的大量分析工具。網(wǎng)絡(luò)服務(wù)可以是數(shù)據(jù)的通道，這些數(shù)據(jù)在其他人上收集或來(lái)自其他信息源。在一些實(shí)施方案中，處理過程可以包括標(biāo)引在網(wǎng)絡(luò)服務(wù)上獲取的數(shù)據(jù)。流程200可以繼續(xù)向網(wǎng)絡(luò)服務(wù)發(fā)送分析請(qǐng)求214。分析可以包括將捕獲的數(shù)據(jù)與其他人的數(shù)據(jù)相關(guān)聯(lián)、分析捕獲的精神狀態(tài)數(shù)據(jù)等。在一些實(shí)施方案中，基于分析請(qǐng)求，即時(shí)地產(chǎn)生分析。流程200繼續(xù)從網(wǎng)絡(luò)服務(wù)接收分析216，其中這種分析基于在個(gè)人上獲取的數(shù)據(jù)。接收的分析可以對(duì)應(yīng)于所請(qǐng)求的分析，可以基于所捕獲的數(shù)據(jù)，或可以基于精神狀態(tài)分析或最新獲取數(shù)據(jù)的一些其他邏輯分析。在一些實(shí)施方案中，捕獲的數(shù)據(jù)包括個(gè)人的圖像。圖像可以是圖像序列并且可以由視頻攝像機(jī)、網(wǎng)絡(luò)攝像機(jī)固定鏡頭、熱成像儀、CCD裝置、電話攝像機(jī)、或其他攝像機(jī)類型裝置來(lái)捕獲。流程200可以包括安排圖像內(nèi)容的分析220。分析可以實(shí)時(shí)地、即時(shí)地、或按計(jì)劃地執(zhí)行，以備后續(xù)分析。所捕獲的數(shù)據(jù)中的一些可以要求除有可能實(shí)時(shí)分析之外的進(jìn)一步分析。其他類型的數(shù)據(jù)還可以要求進(jìn)一步分析并且可以包括安排所捕獲和標(biāo)引的數(shù)據(jù)的一部分的分析，并對(duì)安排的數(shù)據(jù)的那部分進(jìn)行分析。流程200可以繼續(xù)圖像內(nèi)容的分析222。在一些實(shí)施方案中，視頻的分析可以包括與面部表情和頭部姿勢(shì)相關(guān)的數(shù)據(jù)。面部表情和頭部姿勢(shì)可以記錄在視頻中?？梢葬槍?duì)動(dòng)作單元、姿勢(shì)以及精神狀態(tài)來(lái)分析視頻。在一些實(shí)施方案中，視頻分析可用于評(píng)估皮膚孔隙大小，皮膚孔隙大小可以與皮膚電傳導(dǎo)或其他生理評(píng)估相關(guān)聯(lián)。在一些實(shí)施方案中，視頻分析可用于評(píng)估瞳孔放大。
流程200可以包括其他人的分析230?？梢苑治鰜?lái)自多個(gè)其他個(gè)人的信息，其中這些信息允許評(píng)估該多個(gè)其他個(gè)人中每一個(gè)的精神狀態(tài)并將該多個(gè)其他個(gè)人中每一個(gè)的精神狀態(tài)關(guān)聯(lián)至個(gè)人的精神狀態(tài)上所獲取和標(biāo)引的數(shù)據(jù)。還可以允許評(píng)估該多個(gè)其他個(gè)人的集體精神狀態(tài)。在評(píng)估精神狀態(tài)時(shí)，可以基于人口統(tǒng)計(jì)資料、基于地理位置、或基于感興趣的其他因素對(duì)其他個(gè)人進(jìn)行分組。分析可以包括在個(gè)人上捕獲的每種類型的數(shù)據(jù)210?？商娲?，與其他人相關(guān)的分析可以包括其他數(shù)據(jù)230，例如社交媒體網(wǎng)絡(luò)信息。其他人及其相關(guān)數(shù)據(jù)可以關(guān)聯(lián)至在其上捕獲數(shù)據(jù)的個(gè)人232。關(guān)聯(lián)可以基于共同的經(jīng)歷、共同的精神狀態(tài)、共同的人口統(tǒng)計(jì)資料或其他因素。在一些實(shí)施方案中，關(guān)聯(lián)基于來(lái)自個(gè)人的元數(shù)據(jù)和來(lái)自該多個(gè)其他人的元數(shù)據(jù)234。元數(shù)據(jù)可以包括時(shí)間戳、自評(píng)定結(jié)果以及其他信息。自評(píng)定結(jié)果可以包括指示是否某些人喜歡他們遇到的經(jīng)歷，例如像瀏覽過的視頻。流程200可以繼續(xù)從網(wǎng)絡(luò)服務(wù)接收與多個(gè)其他人相關(guān)的分析信息236，其中這些信息允許評(píng)估該多個(gè)其他人中每一個(gè)的精神狀態(tài)并將該多個(gè)其他人中每一個(gè)的精神狀態(tài)關(guān)聯(lián)至在該個(gè)人的精神狀態(tài)上捕獲的數(shù)據(jù)。從網(wǎng)絡(luò)服務(wù)接收的分析可以是基于特定訪問權(quán)限的。網(wǎng)絡(luò)服務(wù)可以具有與很多人群相關(guān)的數(shù)據(jù)。在一些情況中，例如可以僅在一個(gè)或多個(gè)人群上授權(quán)精神狀態(tài)分析。在進(jìn)行精神狀態(tài)分析過程中，流程200可以包括匯總其他信息源240。信息源可以包括新聞?dòng)嗛啞⒛樧V網(wǎng)條目、網(wǎng)絡(luò)相冊(cè)、推特消息、以及其他社交網(wǎng)絡(luò)站點(diǎn)。匯總可以包括從個(gè)人訪問的或個(gè)人為其創(chuàng)建內(nèi)容的各個(gè)站點(diǎn)收集信息。其他信息源可以關(guān)聯(lián)至個(gè)人，以幫助確定個(gè)人的精神狀態(tài)和其他彳目息源之間的關(guān)系。流程200繼續(xù)個(gè)人的精神狀態(tài)的分析250。捕獲的數(shù)據(jù)、分析的圖像內(nèi)容、與其他人的關(guān)聯(lián)以及匯總的其他信息源各自可用于推斷該個(gè)人的一種或多種精神狀態(tài)。進(jìn)一步地，精神狀態(tài)分析可以針對(duì)一群人來(lái)執(zhí)行，包括該個(gè)人和來(lái)自其他人的一個(gè)或多個(gè)人。處理過程可以包括基于在該個(gè)人上捕獲的數(shù)據(jù)來(lái)自動(dòng)推斷精神狀態(tài)。精神狀態(tài)可以是認(rèn)知狀態(tài)。精神狀態(tài)可以是情緒狀態(tài)。精神狀態(tài)可以是認(rèn)知和情緒狀態(tài)的組合?？梢酝茢嘁环N精神狀態(tài)或同該個(gè)人處于該種精神狀態(tài)的概率一起來(lái)估計(jì)這種精神狀態(tài)?？稍u(píng)估的精神狀態(tài)可以包括快樂、悲傷、滿意、擔(dān)心、專注、焦急、困惑、高興以及自信。在一些實(shí)施方案中，表示精神狀態(tài)可以像跟蹤并分析微笑一樣簡(jiǎn)單。精神狀態(tài)分析可以基于生理數(shù)據(jù)、加速計(jì)讀數(shù)、或基于所獲取的面部圖像來(lái)推斷。精神狀態(tài)可以基于喚醒或效價(jià)來(lái)分析。喚醒的范圍可以從高度活潑(例如當(dāng)某人被鼓動(dòng)時(shí)候)到完全消極(例如當(dāng)某人無(wú)聊時(shí))效價(jià)的變化范圍可以從十分積極(例如當(dāng)某人高興時(shí))到十分消極(例如當(dāng)某人生氣時(shí))。生理數(shù)據(jù)可以包括皮膚電活動(dòng)(EDA)或皮膚電傳導(dǎo)或皮膚電反應(yīng)(GSR)、加速計(jì)讀數(shù)、皮膚溫度、心率、心率變異性以及其他類型的人類分析。將會(huì)理解的是，本文檔的此處以及其他位置中，生理信息可以由傳感器或由面部觀察來(lái)獲得。在一些實(shí)施方案中，面部觀察利用網(wǎng)絡(luò)攝像頭來(lái)獲得。在一些實(shí)例中，升高的心率表示興奮狀態(tài)。增加的皮膚電傳導(dǎo)等級(jí)可以對(duì)應(yīng)于被喚醒。小的、頻繁的加速計(jì)移動(dòng)讀數(shù)可以表示煩躁和厭倦。加速計(jì)讀數(shù)還可以用于推斷例如像在電腦前工作、騎自行車、或彈吉他這樣的內(nèi)容。面部數(shù)據(jù)可以包括用于推斷精神狀態(tài)的面部動(dòng)作和頭部姿勢(shì)。另外，數(shù)據(jù)可以包括與手勢(shì)或肢體語(yǔ)言以及身體移動(dòng)(例如明顯的坐立不安)相關(guān)的信息。在一些實(shí)施方案中，這些移動(dòng)可以由攝像機(jī)或由傳感器讀數(shù)來(lái)獲得。面部數(shù)據(jù)可以包括使頭部?jī)A斜到側(cè)方、前傾、微笑、皺眉以及很多其他姿勢(shì)或表情。頭部向前傾斜可以表示關(guān)注電子顯示屏上顯示的內(nèi)容。緊縮眉頭可以表示集中精力。微笑可以表示肯定的應(yīng)答或高興。大笑可以表示喜悅并且表示已經(jīng)發(fā)現(xiàn)一個(gè)有趣的主題。頭部向側(cè)方傾斜和眉頭緊縮可以表示困惑。頭部消極地?fù)u動(dòng)可以表示不愉快。這些以及很多其他精神狀態(tài)可以基于捕獲的面部表情和 生理數(shù)據(jù)來(lái)表示。在實(shí)施方案中，生理數(shù)據(jù)、加速計(jì)讀數(shù)以及面部數(shù)據(jù)各自可以用作推斷各種精神狀態(tài)的算法中的影響因素。另外，復(fù)雜度更高的精神狀態(tài)可以從生理數(shù)據(jù)、面部表情和加速計(jì)讀數(shù)中的多項(xiàng)來(lái)推斷。進(jìn)一步地，精神狀態(tài)可以基于在一段時(shí)間上采集的生理數(shù)據(jù)、面部表情和加速計(jì)讀數(shù)來(lái)推斷。流程200繼續(xù)基于接收到的分析來(lái)渲染描述個(gè)人精神狀態(tài)的輸出260。輸出可以是表示一個(gè)或多個(gè)精神狀態(tài)的文本或數(shù)值輸出。輸出可以是一次經(jīng)歷的曲線圖(具有時(shí)間軸)和在這次經(jīng)歷過程中出現(xiàn)的精神狀態(tài)。渲染的輸出可以是采集的生理、面部或加速計(jì)數(shù)據(jù)的圖形表示。類似地，可以對(duì)結(jié)果進(jìn)行渲染，結(jié)果表示一種精神狀態(tài)以及個(gè)人處于這種精神狀態(tài)中的概率。處理過程可以包括注解所捕獲的數(shù)據(jù)并對(duì)注解進(jìn)行渲染。渲染可以在計(jì)算機(jī)屏幕上顯示數(shù)據(jù)。渲染可以包括顯示喚醒和效價(jià)。渲染可以采用文件或文件中數(shù)據(jù)的形式在計(jì)算機(jī)可讀存儲(chǔ)器上存儲(chǔ)數(shù)據(jù)。渲染可以基于從網(wǎng)絡(luò)服務(wù)接收的數(shù)據(jù)?？梢越邮崭鞣N類型的數(shù)據(jù)，包括JavaScript對(duì)象注解(JSON)形式的或XML或CSV類型文件形式的序列化對(duì)象。流程200可以包括將串行化的對(duì)象去串行化為JavaScript對(duì)象的形式262。然后，JavaScript對(duì)象可用于輸出精神狀態(tài)的文本或圖形表示。在一些實(shí)施方案中，流程200可以包括基于個(gè)人的精神狀態(tài)來(lái)推薦一個(gè)行動(dòng)方案270。推薦可以包括修改對(duì)焦點(diǎn)群體進(jìn)行查詢的問題、改變網(wǎng)頁(yè)上的廣告、編輯觀看的電影以去除有異議的部分、改變電子游戲的方向、改變醫(yī)療咨詢介紹、編輯基于互聯(lián)網(wǎng)的教程的令人混淆部分等。圖3是皮膚電活動(dòng)的圖形渲染。皮膚電活動(dòng)可以包括皮膚電傳導(dǎo)，在一些實(shí)施方案中，皮膚電傳導(dǎo)以micro-Siemens (百萬(wàn)分之一歐姆)為單位進(jìn)行測(cè)量。曲線310展示了為個(gè)人采集的皮膚電活動(dòng)。皮膚電活動(dòng)的值顯示在曲線圖的y軸320上。皮膚電活動(dòng)是在一段時(shí)間上采集的并且時(shí)標(biāo)330顯示在曲線圖的X軸上。在一些實(shí)施方案中，多個(gè)人的皮膚電活動(dòng)可以在需要時(shí)呈現(xiàn)或在匯總的基礎(chǔ)上進(jìn)行顯示?？梢园?biāo)記，以標(biāo)識(shí)曲線圖的一部分。標(biāo)記可用于描繪被放大或可放大的曲線圖的一部分。放大可以涵蓋一個(gè)短時(shí)段，在該短時(shí)段上可以專注于進(jìn)一步的分析或檢查。該放大部分可以在另一個(gè)曲線圖上渲染。還可以包括標(biāo)記，以標(biāo)識(shí)對(duì)應(yīng)于特定精神狀態(tài)的部分。可以對(duì)每個(gè)波形或時(shí)間軸進(jìn)行注解。起始注解和結(jié)束注解可以標(biāo)記一個(gè)區(qū)域或時(shí)間段的開始和結(jié)束。單一注解可以標(biāo)記特定的時(shí)間點(diǎn)。每個(gè)注解可以具有相關(guān)的文本，文本可以自動(dòng)地輸入或由用戶輸入?？梢燥@示包括文本的文本框。圖4是加速計(jì)數(shù)據(jù)的圖形渲染?？梢圆杉粋€(gè)、兩個(gè)或三個(gè)維度的加速計(jì)數(shù)據(jù)。在圖4的實(shí)例中，X軸加速計(jì)讀數(shù)的曲線圖在第一曲線圖410中示出，y軸加速計(jì)讀數(shù)的曲線圖在第二曲線圖420中示出，并且z軸加速計(jì)讀數(shù)的曲線圖在第三曲線圖430中示出。相應(yīng)加速計(jì)讀數(shù)的時(shí)間標(biāo)記在曲線圖軸線440上示出。X加速值示出在另一個(gè)軸線450上，y加速值示在軸線452上，并且z加速值示出在軸線454上。在一些實(shí)施方案中，多個(gè)人的皮膚電活動(dòng)可以在需要時(shí)呈現(xiàn)或在匯總的基礎(chǔ)上進(jìn)行顯示。可以包括和使用類似于圖3中所討論的那些標(biāo)記和注解。圖5是皮膚溫度數(shù)據(jù)的圖形渲染。曲線510展示了為個(gè)人采集的皮膚電活動(dòng)。皮膚溫度的值示出在曲線圖的I軸520上。皮膚溫度值在一段時(shí)間上收集并且時(shí)間標(biāo)記530顯示在曲線圖的X軸上。在一些實(shí)施方案中，多個(gè)人的皮膚溫度值可以在需要時(shí)呈現(xiàn)或在匯總的基礎(chǔ)上進(jìn)行顯示。可以包括和使用類似于圖3中所討論的那些標(biāo)記和注解。圖6展示了用于面部分析的圖像采集系統(tǒng)。系統(tǒng)600包括電子顯示器620和網(wǎng)絡(luò)攝像頭630。系統(tǒng)600將面部反應(yīng)捕獲至電子顯示器620。在一些實(shí)施方案中，系統(tǒng)600捕獲對(duì)其他刺激物的面部反應(yīng)，例如商店展覽、汽車、棋盤游戲、電影屏幕貨其他類型的經(jīng)歷。面部數(shù)據(jù)可以包括與精神狀態(tài)有關(guān)的視頻和信息集。在一些實(shí)施方案中，網(wǎng)絡(luò)攝像頭630可以捕獲個(gè)人610的視頻?？梢詫⒁曨l捕獲530至磁盤、磁帶上，捕獲至計(jì)算機(jī)系統(tǒng)上，或流至服務(wù)器。個(gè)人610的圖像或圖像序列可以由攝像機(jī)、網(wǎng)絡(luò)攝像機(jī)固定鏡頭、熱成像儀、CXD裝置、電話攝像機(jī)、或其他攝像機(jī)類型裝置來(lái)捕獲。·電子顯示器620可以顯示視頻或其他表示形式。電子顯示器620可以包括計(jì)算機(jī)顯示器、膝上計(jì)算機(jī)屏幕、移動(dòng)裝置顯示器、移動(dòng)電話顯示器、或某種其他電子顯示器。電子顯示器620可以包括鍵盤、鼠標(biāo)、操縱桿、觸摸板、觸摸屏、識(shí)別筆、運(yùn)動(dòng)傳感器、以及其他輸入設(shè)備。電子顯示器620可以顯示網(wǎng)頁(yè)、網(wǎng)站、能上網(wǎng)的應(yīng)用程序等。個(gè)人610的圖像可以由視頻捕獲單元640來(lái)捕獲。在一些實(shí)施方案中，可以捕獲個(gè)人610的視頻，而在其他實(shí)施方案中，捕獲一系列靜止圖像。在實(shí)施方案中，網(wǎng)絡(luò)攝像頭用于捕獲面部數(shù)據(jù)。動(dòng)作單元、姿勢(shì)、以及精神狀態(tài)的分析可以利用所捕獲的個(gè)人610的圖像來(lái)完成。動(dòng)作單元可用于識(shí)別微笑、皺眉和精神狀態(tài)的其他面部指示。在一些實(shí)施方案中，直接識(shí)別微笑，并且在一些情況中可以識(shí)別微笑程度(例如，小、中和大)。姿勢(shì)(包括頭部姿勢(shì))可以表示興趣或好奇。例如，朝向電子顯示器620移動(dòng)的頭部姿勢(shì)可以表示興趣增加或希望弄清楚。面部分析650可以基于信息和捕獲的圖像來(lái)執(zhí)行。分析可以包括面部分析和頭部姿勢(shì)的分析。基于捕獲的圖像，可以進(jìn)行生理技能的分析。生理技能的評(píng)估可以包括通過分析個(gè)人的面部或身體的圖像來(lái)評(píng)估心率、心率變異性、呼吸、汗液、溫度、皮膚孔隙大小、以及其他生理特征。在很多情況中，評(píng)估可以利用網(wǎng)絡(luò)攝像頭完成。另外，在一些實(shí)施方案中，生理傳感器可以附接至個(gè)人以獲得與精神狀態(tài)相關(guān)的進(jìn)一步數(shù)據(jù)。分析可以實(shí)時(shí)地或即時(shí)地執(zhí)行。在一些實(shí)施方案中，分析是安排好的，然后通過分析器或計(jì)算機(jī)處理器(已經(jīng)過編程)來(lái)運(yùn)行以執(zhí)行面部分析。在一些實(shí)施方案中，計(jì)算機(jī)處理器可以得到人為干預(yù)的幫助。人為干預(yù)可以識(shí)別計(jì)算機(jī)處理器不能識(shí)別的精神狀態(tài)。在一些實(shí)施方案中，處理器識(shí)別人為干預(yù)有幫助的地點(diǎn)，而在其他實(shí)施方案中，人類觀察面部視頻并提供輸入，甚至是在處理器無(wú)法識(shí)別干預(yù)是有幫助的時(shí)候。在一些實(shí)施方案中，處理器可以基于人為干預(yù)來(lái)執(zhí)行機(jī)器學(xué)習(xí)。基于人為輸入，處理器可以學(xué)習(xí)到某些面部動(dòng)作單元或姿勢(shì)對(duì)應(yīng)于特定的精神狀態(tài)，然后將來(lái)能夠自動(dòng)地識(shí)別這些精神狀態(tài)，無(wú)需人為干預(yù)。圖7是執(zhí)行面部分析的流程圖。流程700可以開始于導(dǎo)入面部視頻710。面部視頻可以事先記錄并存儲(chǔ)，以備以后分析。可替代地，導(dǎo)入面部視頻可以在觀察到一個(gè)人時(shí)實(shí)時(shí)地發(fā)生。可以檢測(cè)并分析動(dòng)作單元720。動(dòng)作單元可以包括揚(yáng)起內(nèi)側(cè)眉毛、繃緊嘴唇、降低眉毛、張開鼻孔、眼睛斜視以及很多其他可能動(dòng)作。這些動(dòng)作單元可以由分析視頻的計(jì)算機(jī)系統(tǒng)自動(dòng)地檢測(cè)。可替代地，在動(dòng)作單元的正式列表中常規(guī)上并未編號(hào)的小范圍的面部移動(dòng)也可以認(rèn)為是用于輸入給分析過程的動(dòng)作單元，例如微笑的抽動(dòng)或雙眼上方的眉毛向上移動(dòng)?？商娲?，可以提供計(jì)算機(jī)系統(tǒng)進(jìn)行的自動(dòng)檢測(cè)和人工輸入的組合形式來(lái)提高動(dòng)作單元的檢測(cè)和相關(guān)的輸入測(cè)度。也可以檢測(cè)和分析面部和頭部姿勢(shì)730。姿勢(shì)可以包括頭部向側(cè)方傾斜、前傾、微笑、皺眉以及很多其他姿勢(shì)。可以執(zhí)行精神狀態(tài)的分析740。精神 狀態(tài)可以包括快樂、悲傷、專注、困惑、以及很多其他情況。基于動(dòng)作單元和和面部或頭部姿勢(shì)，可以分析、推斷并識(shí)別精神狀態(tài)。圖8是描述生理分析的圖示。系統(tǒng)800可以對(duì)為其采集數(shù)據(jù)的個(gè)人810進(jìn)行分析。個(gè)人810可以具有附接至他或她的傳感器812。傳感器812可以置于手腕、手掌、手部、頭部、胸骨或身體的其他部分。在一些實(shí)施方案中，多個(gè)傳感器置于一個(gè)人身上，例如置于兩個(gè)手腕上。傳感器812可以包括用于皮膚電活動(dòng)、皮膚溫度以及加速計(jì)讀數(shù)的檢測(cè)器。還可以包括其他傳感器，例如心率、血壓以及其他生理檢測(cè)器。傳感器812可以利用無(wú)線技術(shù)(例如Wi-Fi、藍(lán)牙、802. 11、移動(dòng)電話或其他頻帶)向接收器820傳送收集的信息。在一些實(shí)施方案中，傳感器812可以存儲(chǔ)信息并通過無(wú)線技術(shù)引發(fā)數(shù)據(jù)下載。在其他實(shí)施方案中，傳感器812可以存儲(chǔ)信息以用于未來(lái)有線下載。接收器可以向系統(tǒng)800中的一個(gè)或多個(gè)組件提供數(shù)據(jù)。還可以采集皮膚電活動(dòng)(EDA)830。可以是每秒、每秒4次、每秒8次、每秒32次或以一些其他周期或基于某些事件來(lái)連續(xù)地采集皮膚電活動(dòng)?？梢杂涗浧つw電活動(dòng)832。記錄操作可以是記錄至磁盤、磁帶,記錄到閃存盤上，記錄到計(jì)算機(jī)系統(tǒng)中，或流入服務(wù)器上?？梢苑治銎つw電活動(dòng)834。皮膚電活動(dòng)可以基于皮膚電傳導(dǎo)中的變化表示喚醒、激動(dòng)、厭倦或其他精神狀態(tài)?？梢悦棵?、每秒4次、每秒8次、每秒32次或以一些其他周期來(lái)連續(xù)地采集皮膚溫度840?？梢杂涗浧つw溫度842。記錄操作可以是記錄至磁盤、磁帶,記錄到閃存盤上,記錄到計(jì)算機(jī)系統(tǒng)中，或流入服務(wù)器上。可以分析皮膚溫度844。基于皮膚溫度上的變化，皮膚溫度可用于表示喚醒、激動(dòng)、厭倦或其他精神狀態(tài)。可以采集加速計(jì)數(shù)據(jù)850。加速計(jì)可以表示一維、二維或三維移動(dòng)?？梢杂涗浖铀儆?jì)數(shù)據(jù)852。記錄操作可以是記錄至磁盤、磁帶，記錄到閃存盤上，記錄到計(jì)算機(jī)系統(tǒng)中，或流入服務(wù)器上?？梢苑治黾铀儆?jì)數(shù)據(jù)854。加速計(jì)數(shù)據(jù)可用于表示睡眠模式、劇烈活動(dòng)狀態(tài)、昏睡狀態(tài)或基于加速計(jì)數(shù)據(jù)的其他狀態(tài)。圖9是描述心率分析的圖示。可以觀察個(gè)人910。可以通過心率傳感器來(lái)觀察個(gè)人920。觀察可以通過接觸傳感器、通過視頻分析(能夠捕獲心率信息)、或其他無(wú)線傳感技術(shù)來(lái)進(jìn)行?？梢杂涗浶穆?30。記錄操作可以是記錄至磁盤、磁帶,記錄到閃存盤上,記錄到計(jì)算機(jī)系統(tǒng)中，或流入服務(wù)器上?？梢苑治鲂穆屎托穆首儺愋?40。提高的心率可以表示興奮、緊張或其他精神狀態(tài)。降低的心率可用于表示平靜、厭倦或其他精神狀態(tài)。作為變量的心率可以表示身體健康和缺少壓力。缺乏心率變異性可以表示壓力增加。圖10是進(jìn)行精神狀態(tài)分析和渲染的流程圖。流程1000可以開始于不同類型的數(shù)據(jù)采集和分析?？梢詧?zhí)行面部分析1010，從而識(shí)別動(dòng)作單元、面部和頭部姿勢(shì)、微笑和精神狀態(tài)。可以執(zhí)行生理分析1012。生理分析可以包括皮膚電活動(dòng)、皮膚溫度、加速計(jì)數(shù)據(jù)、心率和與人體相關(guān)的其他測(cè)量。生理數(shù)據(jù)可以通過接觸傳感器、通過視頻分析(如心率信息的情況一樣)或其他設(shè)備來(lái)采集。在一些實(shí)施方案中，可以執(zhí)行喚醒和效價(jià)評(píng)估1020。喚醒等級(jí)可以從平靜到興奮。效價(jià)可以是正面或負(fù)面傾向。效價(jià)和喚醒的組合可用于表征精神狀態(tài)1030。精神狀態(tài)可以包括困惑、專注、快樂、滿足、自信以及其他狀態(tài)。在一些實(shí)施方案中，精神狀態(tài)的表征可以完全由計(jì)算機(jī)系統(tǒng)來(lái)評(píng)估1030。 在其他實(shí)施方案中，在推斷精神狀態(tài)時(shí)可以提供人為協(xié)助1032。該過程可以包括利用人類來(lái)評(píng)估以下群組中的一項(xiàng)的一部分，該群組包括面部表情、頭部姿勢(shì)、手部姿勢(shì)和肢體語(yǔ)言。人僅僅可用于評(píng)估一小部分、甚至一個(gè)單一的表情或姿勢(shì)。因此，人可以評(píng)估面部表情、頭部姿勢(shì)或手勢(shì)中的一小部分。同樣，人可以評(píng)估觀察到的人的肢體語(yǔ)言的一部分。在實(shí)施方案中，該過程可以包括在針對(duì)所捕獲的數(shù)據(jù)的一部分對(duì)精神狀態(tài)進(jìn)行評(píng)估時(shí)提醒人進(jìn)行輸入。人可以觀察面部分析或生理分析原始數(shù)據(jù)(包括視頻)或可以觀察原始數(shù)據(jù)或分析結(jié)果的多個(gè)部分。人可以進(jìn)行干預(yù)并提供輸入以幫助推斷精神狀態(tài)，或可以為用于表征精神狀態(tài)的計(jì)算機(jī)系統(tǒng)來(lái)識(shí)別精神狀態(tài)1030。計(jì)算機(jī)系統(tǒng)可以突出顯示需要人為干預(yù)的數(shù)據(jù)的多個(gè)部分，并且可以跳至一個(gè)時(shí)間點(diǎn)，在該時(shí)間點(diǎn)上將需要干預(yù)的數(shù)據(jù)提供給人?？梢韵蛉颂峁┓答?，該反饋在表征過程中提供幫助。多個(gè)人可以在表征精神狀態(tài)的過程中提供幫助。基于精神狀態(tài)的自動(dòng)表征以及多個(gè)人進(jìn)行的評(píng)估，反饋可以提供給一個(gè)人以提高該人的表征精度。可以補(bǔ)償單獨(dú)的人以便在表征過程中提供幫助。基于自動(dòng)表征或基于幫助表征的其他人，表征過程的改進(jìn)精度可以產(chǎn)生增強(qiáng)的補(bǔ)償。流程100可以包括計(jì)算機(jī)系統(tǒng)的學(xué)習(xí)。精神狀態(tài)評(píng)估的機(jī)器學(xué)習(xí)1034可以由精神狀態(tài)的表征中使用的計(jì)算機(jī)系統(tǒng)來(lái)執(zhí)行1030。機(jī)器學(xué)習(xí)可以基于在針對(duì)一部分?jǐn)?shù)據(jù)評(píng)估精神狀態(tài)時(shí)的人類輸入?？梢凿秩揪駹顟B(tài)和相關(guān)概率的表示1040。精神狀態(tài)可以呈現(xiàn)在計(jì)算機(jī)顯示器、電子顯示器、移動(dòng)電話顯示器、個(gè)人數(shù)字助理顯示屏或其他顯示器上?？梢詧D形化地顯示精神狀態(tài)。一系列精神狀態(tài)可以呈現(xiàn)為每個(gè)狀態(tài)在給定時(shí)間點(diǎn)上出現(xiàn)的可能性。同樣，每種精神狀態(tài)的一系列概率可以呈現(xiàn)在分析面部和生理數(shù)據(jù)的時(shí)間軸上。在一些實(shí)施方案中，可以基于檢測(cè)到的精神狀態(tài)來(lái)建議動(dòng)作1042。動(dòng)作可以包括在小組座談會(huì)議上推薦問題。動(dòng)作可以是改變網(wǎng)頁(yè)上的廣告。動(dòng)作可以是編輯所觀賞的電影以便移除有異議的節(jié)段或無(wú)聊的部分。動(dòng)作可以是在商店中正在移動(dòng)顯示器。動(dòng)作可以是編輯網(wǎng)上或視頻中教程的令人混淆部分。圖11是描述群組的精神反應(yīng)分析的流程圖。流程1100可以開始于聚集人群1110。人群可以具有共同的經(jīng)歷，例如觀賞電影、觀看電視節(jié)目、觀看電影預(yù)告片、瀏覽流媒體、觀看廣告、聽歌曲、觀看或聽講座、使用計(jì)算機(jī)程序、使用產(chǎn)品、進(jìn)食、使用視頻或計(jì)算機(jī)游戲、遠(yuǎn)程教育、乘坐或駕駛運(yùn)輸車輛(例如汽車)、或其他經(jīng)歷?？梢詫?duì)人群的每個(gè)成員執(zhí)行數(shù)據(jù)采集1120(1110)?？梢栽谌巳?110的每個(gè)成員上進(jìn)行多次感測(cè)，包括例如第一感測(cè)1122、第二感測(cè)1124等等一直到第η感測(cè)1126。執(zhí)行數(shù)據(jù)采集1120所用的不同感測(cè)可以包括捕獲面部表情、皮膚電活動(dòng)、皮膚溫度、加速計(jì)讀數(shù)、心率以及其他生理信息?？梢苑治鏊东@的數(shù)據(jù)1130。這種分析可以包括表征喚醒和效價(jià)以及表征人群1110中每個(gè)人的精神狀態(tài)?？梢酝茢嗳巳旱男睦矸磻?yīng)1140，以提供集體精神狀態(tài)。可以對(duì)精神狀態(tài)進(jìn)行匯總以評(píng)估人群1110中所有人的共同經(jīng)歷?？梢詫?duì)結(jié)果進(jìn)行渲染1150。結(jié)果可以是時(shí)間的函數(shù)或人們所經(jīng)歷的一系列事件的函數(shù)。 結(jié)果可以包括效價(jià)和喚醒的圖形顯示。結(jié)果可以包括個(gè)人和全體人群的精神狀態(tài)的圖形顯示。圖12是識(shí)別數(shù)據(jù)部分的流程圖，該數(shù)據(jù)部分匹配所選擇的感興趣精神狀態(tài)。流程1200可以開始于導(dǎo)入通過感測(cè)而采集的數(shù)據(jù)以及迄今為止所進(jìn)行的任意分析1210。數(shù)據(jù)的導(dǎo)入可以是下載先前所捕獲的已存儲(chǔ)數(shù)據(jù)或可以是下載實(shí)時(shí)捕獲的數(shù)據(jù)。數(shù)據(jù)還可以已經(jīng)存在于進(jìn)行分析的系統(tǒng)內(nèi)部。感測(cè)可以包括獲取面部表情、皮膚電活動(dòng)、皮膚溫度、加速計(jì)讀數(shù)、心率采集、以及其他生理信息?？梢詫?duì)通過感測(cè)而采集的各種數(shù)據(jù)進(jìn)行分析，以表征精神狀態(tài)?？梢赃x擇引起用戶興趣的精神狀態(tài)1220。感興趣的精神狀態(tài)可以是困惑、專注、自信、高興以及很多其他精神狀態(tài)。在一些實(shí)施方案中，可以對(duì)采集的數(shù)據(jù)預(yù)先進(jìn)行分析。分析可以包括數(shù)據(jù)的標(biāo)引和對(duì)推斷或檢測(cè)的精神狀態(tài)進(jìn)行分類。當(dāng)已經(jīng)預(yù)先進(jìn)行了分析并且已經(jīng)對(duì)感興趣的精神狀態(tài)進(jìn)行了分類，可以通過分析進(jìn)行搜索1225，以找到匹配于所選狀態(tài)的一個(gè)或多個(gè)類別。例如，可以將困惑選為感興趣的精神狀態(tài)。所采集的數(shù)據(jù)已經(jīng)預(yù)先針對(duì)于不同精神狀態(tài)(包括困惑)經(jīng)過了分析。當(dāng)標(biāo)引所采集的數(shù)據(jù)時(shí)，在數(shù)據(jù)采集過程中可以在不同時(shí)間點(diǎn)上標(biāo)記困惑的類別。接著，當(dāng)任意困惑點(diǎn)已經(jīng)預(yù)先進(jìn)行了分類時(shí)就針對(duì)它們搜索分析內(nèi)容。在一些實(shí)施方案中，響應(yīng)的特征可以是對(duì)應(yīng)于感興趣的精神狀態(tài)1230。響應(yīng)可以是正效價(jià)的和激昂的，例如選擇自信作感興趣的精神狀態(tài)。響應(yīng)可以降低至效價(jià)和喚醒或可以進(jìn)一步降低以尋找動(dòng)作單元或面部表情和頭部姿勢(shì)?？梢运阉鞑杉臄?shù)據(jù)以響應(yīng)于對(duì)應(yīng)的所選狀態(tài)1240?？梢运阉鞲袦y(cè)的數(shù)據(jù)或者可以搜索源自所選數(shù)據(jù)的分析。搜索可以查找動(dòng)作單元、面部表情、頭部姿勢(shì)或匹配所選狀態(tài)的精神狀態(tài)(用戶感興趣于該精神狀態(tài))1220?？梢蕴D(zhuǎn)至數(shù)據(jù)中具有感興趣的精神狀態(tài)的部分1250。例如，當(dāng)選擇困惑時(shí)，數(shù)據(jù)或源自數(shù)據(jù)的分析可以對(duì)應(yīng)于出現(xiàn)困惑的時(shí)間點(diǎn)而展示出來(lái)。這種“跳轉(zhuǎn)特征”可以認(rèn)為是在數(shù)據(jù)中快進(jìn)至感興趣的部分，在這部分中檢測(cè)困惑或另一個(gè)所選精神狀態(tài)。當(dāng)考慮面部視頻時(shí)，可以展示視頻中匹配所選狀態(tài)的關(guān)鍵部分。在一些實(shí)施方案中，可以注釋數(shù)據(jù)中具有感興趣的精神狀態(tài)的部分1252。注釋可以沿著時(shí)間軸設(shè)置，時(shí)間軸標(biāo)記了具有所選狀態(tài)的數(shù)據(jù)和時(shí)刻。在實(shí)施方案中，可以呈現(xiàn)在具有所選狀態(tài)的時(shí)刻上感測(cè)的數(shù)據(jù)1254。數(shù)據(jù)可以包括面部視頻。數(shù)據(jù)還可以包括皮膚電活動(dòng)、皮膚溫度、加速計(jì)讀數(shù)、心率、以及其他生理讀數(shù)的圖形表示。圖13是來(lái)自人群的精神狀態(tài)分析的匯總結(jié)果的圖形渲染。這種渲染可以呈現(xiàn)在網(wǎng)頁(yè)、能上網(wǎng)的應(yīng)用程序、或其他類型的電子顯示表示形式上。曲線圖1310可以為在其上采集情感數(shù)據(jù)的個(gè)人而顯示。精神分析可以基于面部圖像或生理數(shù)據(jù)采集。在一些實(shí)施方案中，曲線圖1310可以表示為個(gè)人所觀察的微笑的量級(jí)或概率。曲線圖上的較高值或點(diǎn)表示更強(qiáng)烈的或較大的微笑。在某些點(diǎn)中，當(dāng)圖像采集出現(xiàn)缺失或不能夠識(shí)別某人的面部時(shí)，曲線圖下降或降低。情感的概率或強(qiáng)度沿著y軸1320給出。時(shí)間軸可以沿著X軸1330給出。另一個(gè)曲線圖1312可以顯示用于在另一個(gè)人上采集的情感或從多個(gè)人的匯總情感。匯總信息可以基于采用人群的平均、中間、或其他采集值。在一些實(shí)施方案中，圖形笑臉圖標(biāo)1340、1342和1344可以表示微笑或其他面部表情的量級(jí)。第一個(gè)非常明顯的笑臉圖標(biāo)1340可以表示觀察到的大笑。第一個(gè)正常的笑臉圖標(biāo)1342可以表示觀察到的微笑。第一個(gè)笑臉圖標(biāo)1344可以表示不微笑。這些圖標(biāo)各自可以對(duì)應(yīng)于y軸1320上的一個(gè)區(qū)域，該區(qū)域表示微笑的概率或強(qiáng)度。圖14是精神狀態(tài)分析的圖形渲染。這種渲染可以呈現(xiàn)在網(wǎng)頁(yè)、能上網(wǎng)的應(yīng)用程序、或其他類型的電子顯示表示形式上。曲線圖1410可以表示觀察到的情感出現(xiàn)的強(qiáng)度或概率。時(shí)間軸可以沿著X軸1420給出。情感的概率或強(qiáng)度沿著y軸1430給出。第二曲線圖1412可以展示曲線圖1410的平滑版本?？梢宰R(shí)別情感中的一個(gè)或多個(gè)低谷，例如凹處 1440?？梢宰R(shí)別情感中的一個(gè)或多個(gè)高峰，例如尖峰1442。圖15是基于元數(shù)據(jù)的精神狀態(tài)分析的圖形渲染。這種渲染可以呈現(xiàn)在網(wǎng)頁(yè)、能上網(wǎng)的應(yīng)用程序、或其他類型的電子顯示表示形式上。在曲線圖上，第一曲線1530、第二曲線1532、以及第三曲線1534各自可以對(duì)應(yīng)于采集的不同元數(shù)據(jù)。例如，可以采集自評(píng)定元數(shù)據(jù)，以表示上報(bào)的人對(duì)某個(gè)事件是否“真正喜歡”、“喜歡”或“模棱兩可”。事件可以是電影、電視節(jié)目、網(wǎng)絡(luò)系列片、網(wǎng)絡(luò)視頻短片、視頻、視頻剪輯、電子游戲、廣告、電子書、電子雜志等。第一曲線1530可以對(duì)應(yīng)于一個(gè)人“真正喜歡”的事件，而第二曲線1532可以對(duì)應(yīng)于“喜歡”該事件的另一個(gè)人。同樣，第三曲線1534可以對(duì)應(yīng)于對(duì)該事件“模棱兩可”的一個(gè)不同的人。在一些實(shí)施方案中，曲線可能對(duì)應(yīng)于多個(gè)人的匯總結(jié)果。以上方法的每一個(gè)可以在一個(gè)或多個(gè)計(jì)算機(jī)系統(tǒng)的一個(gè)或多個(gè)處理器上執(zhí)行。實(shí)施方案可以包括各種形式的分布式計(jì)算、客戶端/服務(wù)器計(jì)算、以及基于云的計(jì)算。進(jìn)一步地，將會(huì)理解的是對(duì)于本披露中的每個(gè)流程圖，提供所描繪的步驟或方框圖的目的僅僅用于圖示和解釋?？梢詫?duì)這些步驟進(jìn)行修改、省略或重新排序，而其他步驟可以在不偏離本披露范圍的情況下添加進(jìn)來(lái)。進(jìn)一步地，每個(gè)步驟可以包含一個(gè)或多個(gè)子步驟。盡管前述的附圖和描述提出了所披露系統(tǒng)的功能方面，但除非明確指出或從上下文中清晰可見，從這些描述中不應(yīng)當(dāng)推斷出實(shí)現(xiàn)這些功能方面的軟件和/或硬件的具體安排。軟件和/或硬件的所有這些安排應(yīng)當(dāng)落在本披露的范圍之內(nèi)。框圖和流程示意圖描繪了方法、設(shè)備、系統(tǒng)和計(jì)算機(jī)產(chǎn)品?？驁D和流程示意圖的每個(gè)元素以及框圖和流程示意圖中元素的每個(gè)組合形式說明了方法、設(shè)備、系統(tǒng)、計(jì)算機(jī)程序產(chǎn)品和/或計(jì)算機(jī)實(shí)施方法的一個(gè)功能、步驟或一組步驟。任意和所有這些功能可以由計(jì)算機(jī)程序指令、由專用的基于硬件的計(jì)算機(jī)系統(tǒng)、由專用硬件和計(jì)算機(jī)指令的組合形式、有通用硬件和計(jì)算機(jī)指令的組合形式、由計(jì)算機(jī)系統(tǒng)等來(lái)實(shí)施。這些功能中的任意一項(xiàng)或所有在本文通常可以稱為“電路”、“模塊”或“系統(tǒng)”。執(zhí)行以上提及的計(jì)算機(jī)程序產(chǎn)品或計(jì)算機(jī)實(shí)施方法中任意一個(gè)的可編程設(shè)備可以包括一個(gè)或多個(gè)處理器、微處理器、微控制器、嵌入式微控制器、可編程數(shù)值信號(hào)處理器、可編程裝置、可編程門陣列、可編程陣列邏輯、存儲(chǔ)裝置、特定應(yīng)用集成電路等。每一個(gè)都可以適當(dāng)?shù)厥褂没蚺渲靡蕴幚碛?jì)算機(jī)指令、執(zhí)行計(jì)算機(jī)邏輯、存儲(chǔ)計(jì)算機(jī)數(shù)據(jù)等。將會(huì)理解的是，計(jì)算機(jī)可以包括計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中的計(jì)算機(jī)程序產(chǎn)品，并且這種介質(zhì)可以是內(nèi)部的或外部的、可拆卸的或可置換的、或是固定的。另外，計(jì)算機(jī)可以包括基本輸入/輸出系統(tǒng)(BIOS)、固件、操作系統(tǒng)、數(shù)據(jù)庫(kù)等，它們可以包括、連接、或支持本文描述的軟件和硬件。本發(fā)明的實(shí)施方案不限于包括傳統(tǒng)計(jì)算機(jī)程序的應(yīng)用程序或運(yùn)行它們的可編程設(shè)備。例如，可以設(shè)想的是，當(dāng)前所聲明的發(fā)明的實(shí)施方案可能包括光學(xué)計(jì)算機(jī)、量子計(jì)算機(jī)、模擬計(jì)算機(jī)等。計(jì)算機(jī)程序可以下載到計(jì)算機(jī)上以產(chǎn)生可以執(zhí)行所描述功能的任意一項(xiàng)或全部的具體機(jī)構(gòu)。該具體機(jī)構(gòu)提供執(zhí)行所描述功能的任意一項(xiàng)或全部的方法?？梢岳靡粋€(gè)或多個(gè)計(jì)算機(jī)可讀介質(zhì)的任意組合。計(jì)算機(jī)可讀介質(zhì)可以是用于存儲(chǔ)的暫時(shí)的或非暫時(shí)的計(jì)算機(jī)可讀介質(zhì)。計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)可以是電、磁、光、電磁、紅夕卜、半導(dǎo)體或前述介質(zhì)中任意適合的組合形式。另一些計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)實(shí)例可以包括具有一個(gè)或多個(gè)導(dǎo)線的電連接、便攜式計(jì)算機(jī)軟磁盤、硬盤、隨機(jī)存儲(chǔ)器(RAM)、只讀存儲(chǔ)器(ROM)、可擦除可編程只讀存儲(chǔ)器(EPROM)、閃存、MRAM、FeRAM、相變存儲(chǔ)器、光纖、便攜式光盤只讀存儲(chǔ)器(CD-ROM)、光存儲(chǔ)裝置、磁存儲(chǔ)裝置、或前述裝置的任意適合組合形式。在本文檔的環(huán)境中，計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)可以是任意有形的包含或存儲(chǔ)程序的介質(zhì)，該程序由指令執(zhí)行系統(tǒng)、設(shè)備或裝置來(lái)使用或與它們相關(guān)聯(lián)使用。將要認(rèn)識(shí)到是，計(jì)算機(jī)程序指令可以包括計(jì)算機(jī)可執(zhí)行代碼。表達(dá)計(jì)算機(jī)程序指令的各種語(yǔ)言可以包括但不限于C、C++、Java、JavaScript 、ActionScript 、匯編語(yǔ)言、LiSp、Perl、TCl、Python、Ruby、硬件描述語(yǔ)言、數(shù)據(jù)庫(kù)程序設(shè)計(jì)語(yǔ)言、函數(shù)式程序設(shè)計(jì)語(yǔ)言、命令式程序設(shè)計(jì)語(yǔ)言等。在實(shí)施方案中，計(jì)算機(jī)程序指令可以進(jìn)行存儲(chǔ)、編譯或解釋，以便運(yùn)行在計(jì)算機(jī)、可編程數(shù)據(jù)處理設(shè)備、處理器或處理器架構(gòu)等等的不同組合上。不加限制地，本發(fā)明的實(shí)施方案可以采用基于網(wǎng)絡(luò)的計(jì)算機(jī)軟件的形式，該軟件包括客戶端/服務(wù)器軟件、軟件即服務(wù)、對(duì)等網(wǎng)絡(luò)軟件等。在實(shí)施方案中，計(jì)算機(jī)能夠執(zhí)行包括多個(gè)程序或線程的計(jì)算機(jī)程序指令。多個(gè)程 序或線程可以幾乎同時(shí)進(jìn)行處理以便提高處理器的利用率并充分地幫助同時(shí)發(fā)揮功能。通過實(shí)施，本文描述的任何和所有方法、程序代碼、程序指令等可以在一個(gè)或多個(gè)線程中執(zhí)行。每個(gè)線程可以產(chǎn)生其他線程，這些其他線程本身可以具有與它們相關(guān)的優(yōu)先權(quán)。在一些實(shí)施方案中，計(jì)算機(jī)可以基于優(yōu)先權(quán)或其他順序來(lái)處理這些線程。除非明確指出或從上下文中清晰可見，動(dòng)詞“執(zhí)行”和“處理”可以互換地使用以表示執(zhí)行、處理、解釋、編譯、匯編、鏈接、下載或前述動(dòng)作的組合。因此，執(zhí)行或處理計(jì)算機(jī)程序指令、計(jì)算機(jī)可執(zhí)行代碼等的實(shí)施方案可以采用所描述方式的任意一種或所有按照指令或代碼產(chǎn)生動(dòng)作。進(jìn)一步地，所示的方法步驟意在包括使一個(gè)或多個(gè)部分或?qū)嶓w執(zhí)行步驟的任意適合的方法。執(zhí)行步驟或步驟的一部分的多個(gè)部分不需要位于特定的地理位置或國(guó)家范圍內(nèi)。例如，如果位于美國(guó)的一個(gè)實(shí)體使得它的方法步驟或一部分在美國(guó)以外執(zhí)行，那么該方法被認(rèn)為通過使得執(zhí)行該步驟的該實(shí)體在美國(guó)執(zhí)行。盡管針對(duì)示出的并且詳細(xì)描述的優(yōu)選實(shí)施方案披露了本發(fā)明，但在其上的各種修改形式和改進(jìn)形式對(duì)本領(lǐng)域那些熟練技術(shù)人員而言將變得十分明顯。因此，本發(fā)明的精神和范圍不應(yīng)當(dāng)由前述實(shí)例所限制，而是應(yīng)當(dāng)在 法律所允許的最廣泛意義上進(jìn)行理解。
權(quán)利要求
1.一種用于分析精神狀態(tài)的計(jì)算機(jī)實(shí)施方法，該方法包括 將與一個(gè)人相關(guān)的數(shù)據(jù)捕獲至一個(gè)計(jì)算機(jī)系統(tǒng)中，其中該數(shù)據(jù)提供評(píng)估該個(gè)人的精神狀態(tài)的信息； 從一個(gè)網(wǎng)絡(luò)服務(wù)接收分析，其中該分析基于在該個(gè)人上捕獲的數(shù)據(jù)；并且 基于該接收的分析來(lái)渲染一個(gè)輸出，該輸出描述該個(gè)人的精神狀態(tài)。
2.根據(jù)權(quán)利要求I所述的方法，其中與該個(gè)人相關(guān)的數(shù)據(jù)包括一個(gè)群組中的一種，該群組包括面部表情、生理信息以及加速計(jì)讀數(shù)。
3.根據(jù)權(quán)利要求2所述的方法，其中該面部表情進(jìn)一步包括頭部姿勢(shì)。
4.根據(jù)權(quán)利要求2所述的方法，其中該生理信息包括一個(gè)群組中的一種，該群組包括皮膚電活動(dòng)、心率、心率變異性以及呼吸。
5.根據(jù)權(quán)利要求2所述的方法，其中可以在不接觸該個(gè)人的情況下采集該生理信息。
6.根據(jù)權(quán)利要求I所述的方法，其中該精神狀態(tài)是認(rèn)知狀態(tài)和情感狀態(tài)之
7.根據(jù)權(quán)利要求I所述的方法，其中該網(wǎng)絡(luò)服務(wù)包括一個(gè)接口，該接口包括遠(yuǎn)離該個(gè)人的一個(gè)服務(wù)器和基于云的存儲(chǔ)器。
8.根據(jù)權(quán)利要求I所述的方法，進(jìn)一步包括通過該網(wǎng)絡(luò)服務(wù)標(biāo)引與該個(gè)人相關(guān)的數(shù)據(jù)。
9.根據(jù)權(quán)利要求8所述的方法，其中該標(biāo)引包括基于效價(jià)和喚醒信息的分類。
10.根據(jù)權(quán)利要求I所述的方法，進(jìn)一步包括接收與多個(gè)其他人相關(guān)的分析信息，其中該分析信息允許評(píng)估該多個(gè)其他人的集體精神狀態(tài)。
11.根據(jù)權(quán)利要求10所述的方法，其中該分析信息包括將該多個(gè)其他人的精神狀態(tài)關(guān)聯(lián)至在該個(gè)人的精神狀態(tài)上捕獲的數(shù)據(jù)。
12.根據(jù)權(quán)利要求11所述的方法，其中該關(guān)聯(lián)基于來(lái)自該個(gè)人的元數(shù)據(jù)和來(lái)自該多個(gè)其他人的元數(shù)據(jù)。
13.根據(jù)權(quán)利要求I所述的方法，其中從該網(wǎng)絡(luò)服務(wù)接收的該分析基于特定的訪問權(quán)限。
14.根據(jù)權(quán)利要求I所述的方法，進(jìn)一步包括向網(wǎng)絡(luò)服務(wù)發(fā)送一條請(qǐng)求以進(jìn)行該分析。
15.根據(jù)權(quán)利要求14所述的方法，其中該分析基于一條分析請(qǐng)求而即時(shí)產(chǎn)生。
16.根據(jù)權(quán)利要求I所述的方法，進(jìn)一步包括向該網(wǎng)絡(luò)服務(wù)發(fā)送在該個(gè)人上捕獲的數(shù)據(jù)的一個(gè)子集。
17.根據(jù)權(quán)利要求I所述的方法，其中該渲染基于從該網(wǎng)絡(luò)服務(wù)接收的數(shù)據(jù)。
18.根據(jù)權(quán)利要求17所述的方法，其中接收的數(shù)據(jù)包括JavaScript對(duì)象注解(JSON)形式的一個(gè)序列化對(duì)象。
19.根據(jù)權(quán)利要求18所述的方法，進(jìn)一步包括將該序列化對(duì)象去串行化為一個(gè)JavaScript對(duì)象的形式。
20.根據(jù)權(quán)利要求I所述的方法，其中該渲染進(jìn)一步包括基于該個(gè)人的精神狀態(tài)來(lái)推薦一個(gè)行動(dòng)方案。
21.根據(jù)權(quán)利要求20所述的方法，其中該推薦包括一個(gè)群組中的一項(xiàng)，該群組包括修改對(duì)一個(gè)焦點(diǎn)群體進(jìn)行查詢的問題、改變網(wǎng)頁(yè)上的廣告、編輯觀看的電影以去除有異議的部分、改變電子游戲的方向、改變醫(yī)療咨詢介紹、以及編輯基于互聯(lián)網(wǎng)的教程的令人混淆部分。
22.一種用于分析精神狀態(tài)的計(jì)算機(jī)程序產(chǎn)品，該計(jì)算機(jī)程序產(chǎn)品實(shí)例化在一個(gè)計(jì)算機(jī)可讀介質(zhì)中，該計(jì)算機(jī)程序產(chǎn)品包括 將與一個(gè)人有關(guān)的數(shù)據(jù)捕獲至一個(gè)計(jì)算機(jī)系統(tǒng)的代碼，其中該數(shù)據(jù)提供評(píng)估該個(gè)人的精神狀態(tài)的信息； 從一個(gè)網(wǎng)絡(luò)服務(wù)接收分析的代碼，其中該分析基于所捕獲的與該個(gè)人有關(guān)的數(shù)據(jù)；并且 基于接收的分析來(lái)渲染一個(gè)輸出的代碼，該輸出描述該個(gè)人的精神狀態(tài)。
23.一種用于分析精神狀態(tài)的系統(tǒng)，該系統(tǒng)包括 一個(gè)存儲(chǔ)器，該存儲(chǔ)器存儲(chǔ)指令； 一個(gè)或多個(gè)處理器，該一個(gè)或多個(gè)處理器附接至該存儲(chǔ)器，其中當(dāng)執(zhí)行存儲(chǔ)的指令時(shí)，該一個(gè)或多個(gè)處理器被配置用于 捕獲與一個(gè)人相關(guān)的數(shù)據(jù)，其中該數(shù)據(jù)提供評(píng)估該個(gè)人的精神狀態(tài)的信息； 從一個(gè)網(wǎng)絡(luò)服務(wù)接收分析，其中該分析基于在該個(gè)人上所捕獲的數(shù)據(jù)；并且 基于接收的分析來(lái)渲染一個(gè)輸出，該輸出描述該個(gè)人的精神狀態(tài)。
全文摘要
利用網(wǎng)絡(luò)服務(wù)提供精神狀態(tài)分析，以便能夠進(jìn)行數(shù)據(jù)分析。為個(gè)人捕獲數(shù)據(jù)，其中該數(shù)據(jù)包括面部信息和生理信息。在網(wǎng)絡(luò)服務(wù)上進(jìn)行分析并接收該分析。其他人的精神狀態(tài)可以與該個(gè)人的精神狀態(tài)相關(guān)聯(lián)。可以匯總其他信息源，其中該信息可用于分析該個(gè)人的精神狀態(tài)。渲染該個(gè)人或人群的精神狀態(tài)分析以進(jìn)行顯示。
文檔編號(hào)A61B5/00GK102933136SQ201180025886
公開日2013年2月13日 申請(qǐng)日期2011年6月6日 優(yōu)先權(quán)日2010年6月7日
發(fā)明者理查德·斯科特·薩多夫斯基, R·El·卡里歐比, 羅莎琳德·賴特·皮卡德, 奧立佛·O·維爾德-史密斯, P·詹姆斯·德考特, 鄭志宏 申請(qǐng)人:阿弗科迪瓦公司