口 161、時鐘發(fā)生器接口 162、音頻接口 163 (例如,用于揚聲器194)、TCO接口 164、系統(tǒng)管理總線接口 165以及可以包括B1S 168和啟動代碼190的SPI (串行外圍接口)閃存166。I/O控制集線器150可以包括千兆比特的以太網(wǎng)支持。
[0023]該系統(tǒng)在通電時可以被配置為,執(zhí)行存儲在SPI閃存166內(nèi)的、用于B1S 168的啟動代碼190,此后在(例如,存儲在系統(tǒng)存儲器140中的)一個或更多個操作系統(tǒng)和應(yīng)用軟件的控制下處理數(shù)據(jù)。操作系統(tǒng)可以存儲在各種位置中的任何位置處并且例如根據(jù)B1S168的指令被訪問。如本文所描述的,裝置可以包括比圖1的系統(tǒng)中所示的特征更少或更多的特征。
[0024]例如圖1中概述的信息處理裝置可以與以文本形式呈現(xiàn)用戶輸入的應(yīng)用一起使用。所述以文本形式呈現(xiàn)用戶輸入可以包括各種格式,例如將語音輸入呈現(xiàn)為文本或者將手寫輸入呈現(xiàn)為文本。裝置可以單獨或組合地利用用于檢測用戶輸入的各種輸入部件,例如輸入表面(例如,觸摸屏或數(shù)字轉(zhuǎn)換器)、用于語音到文本應(yīng)用的麥克風(fēng)、用于檢測手勢的照相機等。如本文所述,實施方式對用戶輸入進行分析,以推斷或確定應(yīng)當(dāng)與用戶輸入關(guān)聯(lián)的一個或更多個情感或應(yīng)當(dāng)被標(biāo)記到用戶輸入的一個或更多個情感??梢詫⑴c被識別的情感有關(guān)的數(shù)據(jù)存儲為可以用來豐富用戶體驗的元數(shù)據(jù),例如存儲為包括與用戶輸入的一個或更多個單詞關(guān)聯(lián)的情感的標(biāo)記。
[0025]參照圖2,例如,實施方式首先生成用戶輸入的一個或更多個情感標(biāo)記。如圖所示,在210處,用戶例如向信息處理裝置(膝上型計算機、平板電腦、智能手機、電子閱讀器等)的麥克風(fēng)提供輸入。在220處,可以對該輸入進行解析和分析,以識別輸入的情感。例如,如果用戶提供待被變換成機器文本的語音輸入,則可以利用對音頻信號的聲音或聲學(xué)特征的分析來推斷或識別與輸入的單詞或單詞組相關(guān)聯(lián)的情感。因此,在220處,實施方式可以將語氣變化、音調(diào)變化和音量的變化用作為提示來識別語音輸入的情感。
[0026]對這些情感標(biāo)記的值或內(nèi)容在單詞之間或在短語之間的變化方式進行分析,可以形成作出呈現(xiàn)或修改決定的基礎(chǔ)。用于記錄例如經(jīng)由語氣、音調(diào)和音量等辨別出的情感變化的可替代方法可以包括:將時間戳附加到每個譯解出的單詞(或輸入的片段),并且將該時間戳與輸入記錄(例如,聲學(xué)記錄)進行比較。另一方式包括:使用自然斷點(例如,沉默)對輸入記錄(例如,聲學(xué)記錄)進行分析,以識別單詞分隔,然后針對情感內(nèi)容(例如,語氣、音調(diào)、音量/幅度等)的相對變化來檢查非沉默部分的聲學(xué)值。這產(chǎn)生輸入記錄的呈現(xiàn)映射,該呈現(xiàn)映射可以用于識別哪一個或多個單詞應(yīng)當(dāng)被“正?!背尸F(xiàn)(即,在340處未被修改)和哪一個或多個單詞應(yīng)當(dāng)在330處接收某種強調(diào)或修改,即,哪些輸入將具有與該輸入關(guān)聯(lián)的情感標(biāo)記。
[0027]實施方式可以被配置成當(dāng)確定或識別情感以形成或生成一個或更多個情感標(biāo)記時,允許要考慮的用戶輸入度量(例如,人與人之間的語音的音高、語氣、音量、速度等)的變化。配置還可以包括:將情感映射到特定修改(例如,如本文進一步描述的,映射到輸入呈現(xiàn)自身,例如修改特定字體特征/字體選擇;和/或映射到應(yīng)用行為)。因此,可配置性允許保持在用戶的控制內(nèi)的修改范圍(例如,視覺表示、應(yīng)用行為修改等)。
[0028]就識別情感而言,作為另一示例,在220處,除了分析音頻信號之外或替代分析音頻信號,實施方式可以分析用戶輸入自身的內(nèi)容以試圖推斷或識別情感。例如,可以將某些單詞或短語映射到某些情感(憤怒、喜悅、興奮、擔(dān)憂等)。因此,在給定用戶輸入的文本內(nèi)容的情況下,實施方式可以對在210處提供的用戶輸入的內(nèi)容進行分析,以在220處識別情感。
[0029]如在230處所確定的,如果在220處沒有識別出一個或更多個情感,則實施方式可能不生成情感標(biāo)記,并且實施方式可以例如等待進一步的用戶輸入,可以(單獨地或結(jié)合先前輸入)來分析該進一步的用戶輸入以確定或識別情感。然而,如果在220處實施方式識別出情感,則在240處實施方式可以生成情感標(biāo)記(或多于一個情感標(biāo)記),并且在250處存儲一個或更多個標(biāo)記。情感標(biāo)記包括將用戶輸入(例如,單詞或短語)與預(yù)定情感(例如,憤怒、喜悅、興奮、擔(dān)憂等)進行關(guān)聯(lián)的元數(shù)據(jù)。可以使用所存儲的一個或更多個情感標(biāo)記來修改各種應(yīng)用的操作,以在考慮到輸入的情感的情況下豐富用戶體驗。所存儲的一個或更多個情感標(biāo)記可以在本地布置于信息處理裝置上,或遠程地布置以使得信息處理裝置可通過網(wǎng)絡(luò)連接(例如,在云中)來訪問所述情感標(biāo)記。
[0030]例如,參照圖3,在310處給定用戶輸入的情況下,在320處,實施方式可以識別情感標(biāo)記與該輸入關(guān)聯(lián)或者情感標(biāo)記可用于該輸入。在一個示例中,這可以包括圖2中概述的過程,即,識別針對當(dāng)前用戶輸入的一個或更多個情感,然后生成情感標(biāo)記。
[0031]如果情感標(biāo)記可用于當(dāng)前輸入(針對當(dāng)前輸入已生成情感標(biāo)記),則在330處,實施方式可以提示用于輸入的視覺呈現(xiàn)的修改或自動將修改施加到輸入的視覺呈現(xiàn)。例如,如果用戶提供“what a wonderful time (多么美好的時光)”的語音輸入,則實施方式可以對用戶的輸入語音(例如,以所捕捉的音頻信號的形式)進行分析,以確定或識別針對該用戶輸入的情感。因此,音頻信號可以包括興奮的聲音或聲學(xué)特征,如圖2的220處所識別的。因此,實施方式可以生成包括情感“興奮”的情感標(biāo)記,并且將該情感標(biāo)記與該特定用戶輸入進行關(guān)聯(lián)??梢詫⒏鞣N修改分配給各個情感標(biāo)記。
[0032]假定針對該輸入的情感標(biāo)記可用的情況下,在330處實施方式可以基于情感標(biāo)記提示用于輸入呈現(xiàn)的修改或?qū)⑿薷氖┘拥捷斎氤尸F(xiàn)。例如,在330處,實施方式可以通過將感嘆號添加到短語“what a wonderful time”的結(jié)尾而將該短語呈現(xiàn)為“what a wonderfultime ! ”來補充輸入呈現(xiàn)。作為另一示例,實施方式可以對輸入呈現(xiàn)進行修改或改變,以加粗某些輸入或所有輸入,例如將“what a wonderful time”修改成“what a wonderfultime”,其中,具有標(biāo)記為興奮的聲學(xué)特征的單詞“wonderful”被修改為加粗和帶下劃線的文本。因此,如果情感標(biāo)記可用于一些或所有用戶輸入,則可以對所述一些或所有用戶輸入進行修改;否則,在340處可以保持呈現(xiàn)不被修改。
[0033]參照圖4,作為利用情感標(biāo)記的另一示例,可以對各種應(yīng)用的操作進行修改。因此,如果在410處用戶提供輸入并且在420處實施方式確定情感標(biāo)記可用于該輸入,則在430處實施方式可以基于此來對應(yīng)用的默認行為進行修改。作為示例,實施方式可以接收用戶形成以“This must be done by 4p.m.(這必須在下午4點之前完成)”結(jié)尾的電子郵件消息的用戶輸入。實施方式可以例如使用圖2中概述的過程來形成針對該短語的重要性或優(yōu)先級的情感標(biāo)記。因此,在420處實施方式可以識別該用戶輸入具有可用的情感標(biāo)記,并且在430處將電子郵件應(yīng)用的操作修改成例如在發(fā)送消息之前自動地將該消息列為高優(yōu)先級。
[0034]作為對應(yīng)用的操作進行修改的另一示例,實施方式可以利用先前形成的標(biāo)記來例如輔助搜索應(yīng)用。使用電子郵件應(yīng)用作為另一示例,用戶可能想要檢索以往的電子郵件消息,但是僅記得上周某時發(fā)送了該電子郵件消息并且用戶對生日慶祝感到興奮。另外假設(shè)電子郵件不包含指示“birthday(生日)”、“excited (興奮的)”等的文本,而僅包含文本“what a wonderful time,,。
[0035]實施方式可以利用對所存儲的情感標(biāo)記的分析來修改或補充電子郵件搜索工具,以便識別消息。例如,如果在410處用戶提供的搜索輸入為“excited last week(上周感到興奮的)”,則在420處實施方式可以確定出情感標(biāo)記可用于修改或輔助搜索。因此,在430處,代替僅使用在410處提供的輸入對上周的電子郵件進行基于文本的搜索,實施方式另外可以在所存儲的情感標(biāo)記中搜索情感“excited”。
[0036]與結(jié)合圖3所描述的示例一樣,使用實施方式,可以針對先前用戶輸入(例如,在電子郵件中)“what a wonderful time”來生成情感標(biāo)記“excitement (興奮)”。因此,實施方式可以檢索該電子郵件消息,因為該電子郵件消息具有與其內(nèi)容“what a wonderfultime”關(guān)聯(lián)的情感標(biāo)記“excitement”。也就是說,實施方式可以采用在410處為“excitedla