移動終端及其控制方法
【專利摘要】移動終端及其控制方法。一種移動終端,包括:輸出單元,其被構造成輸出信息;接收裝置,其被構造成從外部裝置接收信息;控制器,其被構造成在接收裝置正在接收特定信息或輸出單元正在輸出特定信息的同時接收關于用戶身體狀況的身體狀況信息,分析所述身體狀況信息并且基于所述身體狀況信息估計用戶情緒狀態(tài),生成指示估計的所述用戶情緒狀態(tài)的附著信息,將生成的所述附著信息與對應于所述特定信息的數據一起存儲,輸出生成的所述附著信息和對應于所述特定信息的數據。
【專利說明】移動終端及其控制方法
【技術領域】
[0001] 本發(fā)明涉及基于用戶的感覺輸出內容的移動終端。
【背景技術】
[0002] 通常,可將終端相應劃分成移動終端和固定終端。另外,可將移動終端劃分成手持 終端和車載終端。
[0003] 隨著此類功能變得更多樣化,移動終端可支持更復雜的功能(諸如,拍攝圖像或 視頻、再現音樂或視頻文件、玩游戲、接收廣播信號等)。因此,移動終端100可按多媒體播 放器或設備的形式實施。
[0004] 近來,在移動終端中引入了人工智能系統,該人工智能系統識別用戶的語音并且 根據用戶的狀況提供信息。然而,由于是基于用戶有意識輸入的命令提供適當的信息,因此 除非用戶輸入控制命令,否則不能提供信息。因此,用戶會無意識漏掉所需的信息或者會忘 記提供的信息,在沒有控制命令的情況下,他或她不能將信息存儲在移動終端中。
【發(fā)明內容】
[0005] 本發(fā)明的一方面提供了在沒有控制命令的情況下根據用戶感覺的變化提供內容 的移動終端。
[0006] 為了實現這些和其它優(yōu)點并且根據本發(fā)明的目的,如本文實施和廣義描述的,本 發(fā)明的一方面提供了一種移動終端,所述移動終端包括:輸入單元,其被構造成從外部接收 信息;輸出單元,其被構造成向用戶輸出信息;接收單元,其被構造成在正在從外部或從所 述輸出單元接收特定信息同時,接收用戶的身體狀況信號;分析單元,其被構造成分析所述 身體狀況信息以確定用戶的感覺;控制器,其被構造成生成關于用戶感覺的感覺數據并且 將所述感覺數據附于所述特定信息,并且控制輸出單元來輸出與所述特定信息和所述感覺 數據相關的內容。
[0007] 在與本發(fā)明相關的示例中,所述身體狀況信號可對應于關于用戶心跳的信息,所 述分析單元可分析心跳信息中包括的模式以確定用戶的感覺。
[0008] 在與本發(fā)明相關的示例中,移動終端100還可包括:終端機體,其被形成為固定于 用戶的身體:測量裝置,其安裝在所述終端機體中,被形成為具有接觸用戶皮膚的至少一部 分,被構造成將所述心跳信息發(fā)送到所述接收單元。
[0009] 在與本發(fā)明相關的示例中,移動終端100還可包括:輸入單元,其被構造成接收用 戶的控制命令,其中所述控制器可分析輸入到所述輸入單元的用戶的控制命令并且基于經 分析的所述控制命令和所述心跳信息的屬性來生成所述感覺數據。
[0010] 在與本發(fā)明相關的示例中,所述控制器可控制所述接收單元在施加用于控制輸出 所述特定信息的所述輸出單元的控制命令時接收所述身體狀況信息。
[0011] 在與本發(fā)明相關的示例中,相關內容可包括與所述特定信息的至少一個屬性相同 的屬性。
[0012] 在與本發(fā)明相關的示例中,移動終端100還可包括存儲器,其中,當所述感覺數據 匹配預設的感覺數據時,所述控制器可控制所述存儲器來存儲所述特定信息。
[0013] 在與本發(fā)明相關的示例中,移動終端100還可包括:相機,所述相機被構造成將外 部環(huán)境成像,其中當所述感覺數據匹配預設的感覺數據時,所述控制器可控制所述相機將 所述特定信息成像。
[0014] 在與本發(fā)明相關的示例中,移動終端100還可包括:存儲器,所述存儲器被構造成 存儲附有感覺數據的特定信息,其中,當分別附有多個感覺數據項的多個信息項被存儲在 所述存儲器中時,所述控制器可控制所述存儲器根據所述多個感覺數據項將所述多個信息 項分類并且存儲它們。
[0015] 在與本發(fā)明相關的示例中,所述輸出單元可包括:被構造成輸出可視數據的顯示 單元,其中在所述感覺數據被附于所述特定信息之后,當再次向用戶提供所述特定信息時, 所述控制器可控制所述顯示單元再次輸出相關內容,所述相關內容可對應于可視化的感覺 數據。
[0016] 在與本發(fā)明相關的示例中,基于被施加到所述顯示單元的輸出可視化感覺數據的 區(qū)域的觸摸輸入,所述控制器可控制所述輸出單元來輸出附有所述感覺數據的附加內容。
[0017] 在與本發(fā)明相關的示例中,移動終端100還可包括:輸入單元,所述輸入單元被啟 動以接收從外部提供的外部信號。
[0018] 在與本發(fā)明相關的示例中,所述控制器可基于通過所述輸入單元輸入的外部信號 搜索與包括在所述特定信息中的至少一部分相關的附加內容,并且控制所述輸出單元來輸 出所述附加內容。
[0019] 在與本發(fā)明相關的示例中,所述控制器可控制所述輸出單元,所述輸出單元被構 造成將附著的感覺數據可視化并且將經可視化的所述感覺數據與所述特定信息一起輸出。
[0020] 在與本發(fā)明相關的示例中,移動終端100還可包括:相機,其被構造成在正在提供 所述特定信息的同時將用戶的身體變化成像;麥克風,被構造成感測用戶的語音,其中所述 控制器可控制所述輸出單元將可視數據與所述特定信息一起輸出,所述可視數據是通過身 體狀況信號、經成像的身體變化和語音將用戶感覺可視化而得到的。
[0021] 在與本發(fā)明相關的示例中,所述可視數據可對應于從語音轉換而來的文本或者描 述身體變化的文本。
[0022] 在與本發(fā)明相關的示例中,所述控制器可控制無線通信單元,所述無線通信單元 被構造成向外部終端或網絡發(fā)送文本和特定信息。
[0023] 為了實現這些和其它優(yōu)點并且根據本發(fā)明的目的,如本文實施和廣義描述的,本 發(fā)明的另一方面提供了一種移動終端的控制方法,所述控制方法包括:在正在從外部或通 過輸出單元為用戶提供特定信息的同時,接收關于用戶身體狀況的信息;基于身體狀況信 息,生成用戶的感覺數據;將所述感覺數據附于所述特定信息;輸出與所述感覺數據和所 述特定信息中的至少一個相關的相關內容。
[0024] 在與本發(fā)明相關的示例中,所述方法還包括:基于所述感覺數據將所述特定信息 分類并且存儲它們。
[0025] 在與本發(fā)明相關的示例中,輸出與所述感覺數據和所述特定信息中的至少一個相 關的相關內容可包括:將所述感覺數據附于所述特定信息之后生成的感覺數據與預設的參 考數據進行比較;當感覺數據匹配參考數據時,搜索相關內容。
[0026] 根據本發(fā)明的實施方式,基于感測到的用戶感覺而提供的特定信息被存儲并且基 于感覺數據存儲同一類別。
[0027] 因此,用戶可回憶起他或她關于特定信息的感覺,可方便地提供基于這些感覺的 各種類型的特定信息。
[0028] 根據下文中給出的詳細描述,本發(fā)明的可應用性的其它范圍將變得清楚。然而,應 該理解,只以示例方式給出指示本發(fā)明的優(yōu)選實施方式的詳細描述和具體示例,因為根據 詳細描述,對于本領域的技術人員,本發(fā)明的精神和范圍內的各種變化和修改將變得清楚。
【專利附圖】
【附圖說明】
[0029] 根據以下給出的詳細描述和附圖,將變得更充分地理解本發(fā)明,所述詳細描述和 附圖只是以示例方式給出的,因此不限制本發(fā)明,其中:
[0030] 圖1是根據本發(fā)明的實施方式的移動終端的框圖。
[0031] 圖2A和圖2B是示出根據本發(fā)明的實施方式的移動終端能在其中進行操作的通信 系統的概念圖。
[0032] 圖3A是與本發(fā)明相關的移動終端的透視正視圖;
[0033] 圖3B是圖3A中示出的移動終端的透視后視圖;
[0034] 圖4是示出根據本發(fā)明的實施方式的移動終端的控制方法的流程圖。
[0035] 圖5A是示出根據本發(fā)明的實施方式的圖4的控制方法的概念圖。
[0036] 圖5B和圖5C是示出圖4的控制方法的概念圖。
[0037] 圖是示出測量裝置的概念圖。
[0038] 圖5E包括示出從測量裝置900接收的身體狀況信息的曲線圖。
[0039] 圖6A至圖6C是示出根據本發(fā)明的各種實施方式的移動終端的控制方法的概念 圖。
[0040] 圖7A至圖7D是示出用于提供用戶的感覺數據或附有感覺數據的特定信息和附加 內容的控制方法的概念圖。
[0041] 圖8A和圖8B是示出用于將用戶的感覺數據作為內容輸出的控制方法的概念圖。
[0042] 圖9A至圖9C是示出用于基于從各種源提供的特定信息輸出內容的方法的概念 圖。
[0043] 圖10A至圖10C是示出通過使用用戶的感覺數據和外部終端的感覺數據向用戶提 供包括關于外部終端的信息的內容的控制方法的概念圖。
【具體實施方式】
[0044] 現在,將參照附圖描述本發(fā)明的實施方式,在附圖中,盡管實施方式是不同的,但 類似的標號始終表示類似的元件,將針對不同實施方式的元件使用對第一實施方式的類似 元件的描述。在下面的描述中,僅僅為了便于說明本發(fā)明,將使用諸如"模塊"、"部件"或"單 元"的后綴來引用元件,而本身并沒有任何明顯的含義。在描述本發(fā)明的過程中,如果對相 關已知功能或構造的詳細說明被認為不必要地轉移了本發(fā)明的主旨,則省略此說明,但本 領域的技術人員將會理解此說明。本發(fā)明的附圖的目的是便于理解本發(fā)明并且不應該被理 解為限于附圖。
[0045] 本公開中描述的移動終端可包括移動電話、智能電話、筆記本計算機、平板計算 機、數字廣播接收器、PDA(個人數字助理)、PMP (便攜式多媒體播放器)、導航裝置、slate PC、平板PC、超級本等。然而,本領域的技術人員將理解,除了出于移動目的而特別構造的任 何元件之外,根據本發(fā)明的實施方式的構造還可應用于固定類型的終端(諸如,數字TV、臺 式計算機等)。
[0046] 圖1是根據本發(fā)明的實施方式的移動終端的框圖。移動終端100可包括:無線通 信單元110、A/V(音頻/視頻)輸入單元120、用戶輸入單元130、感測單元140、輸出單元 150、存儲器160、接口單元170、控制器180和電源單元190等。圖1示出了移動終端具有 各種組件,但并不需要實現所有這些示出的組件??闪磉x地實現更多或更少的組件。
[0047] 無線通信單元110典型地包括允許在移動終端100與該移動終端所處的無線通 信系統或者網絡之間進行無線通信的一個或多個模塊。例如,無線通信單元可包括廣播接 收模塊111、移動通信模塊112、無線互聯網模塊113、短距離通信模塊114和定位信息模塊 115中的至少一個。
[0048] 廣播接收模塊111經由廣播信道從外部廣播管理服務器(或其它網絡實體)接收 廣播信號和/或廣播相關信息。
[0049] 廣播信道可包括衛(wèi)星信道和/或地面信道。廣播管理服務器可以是生成并發(fā)送廣 播信號和/或廣播相關信息的服務器或者是接收之前生成的廣播信號和/或廣播相關信息 并且將它發(fā)送到終端的服務器。廣播信號可包括TV廣播信號、無線廣播信號、數據廣播信 號等。另外,廣播信號還可包括與TV或無線廣播信號結合的廣播信號。
[0050] 廣播相關信息可指與廣播信道、廣播節(jié)目或廣播業(yè)務提供商相關的信息。廣播相 關信息還可經由移動通信網絡提供,在這種情況下,可通過移動通信模塊112接收廣播相 關信息。
[0051] 廣播相關信息可以各種形式存在。例如,廣播相關信息可以數字多媒體廣播(DMB) 的電子節(jié)目指南(EPG)、數字視頻廣播手持(DVB-Η)的電子業(yè)務指南(ESG)等形式存在。
[0052] 廣播接收模塊111可被配置為接收通過使用各種類型的廣播系統廣播的信號。具 體地,廣播接收模塊111可通過使用諸如多媒體廣播-地面(DMB-T)、數字多媒體廣播-衛(wèi) 星(DMB-S)、數字視頻廣播-手持(DVB-Η)、稱為僅媒體前向鏈路(MeditiFL〇 K )的數據廣 播系統、綜合業(yè)務數字廣播-地面(ISDB-T)等數字廣播系統接收數字廣播。廣播接收模塊 111可被配置為適用于提供廣播信號的每個廣播系統以及上述數字廣播系統。
[0053] 通過廣播接收模塊111接收到的廣播信號和/或廣播相關信息可被存儲在存儲器 160 中。
[0054] 移動通信模塊112向和/或從基站、外部終端和服務器中的至少一個發(fā)送和/或 接收無線信號。這樣的無線信號可根據文本和/或多媒體消息發(fā)送和/或接收而包括語音 呼叫信號、視頻呼叫信號或各種類型的數據。
[0055] 無線互聯網模塊113支持移動終端進行無線互聯網訪問。該模塊可內部地或外部 地連接至終端。所實現的無線互聯網接入技術可包括WLAN(無線LAN) (Wi-Fi)、Wibro (無 線寬帶)、Wimax (全球微波互聯接入)、HSDPA (高速下行分組接入)等。
[0056] 短距離通信模塊114是用于支持短距離通信的模塊。短距離通信技術的一些示例 包括Bluetooth?、射頻識別(RFID)、紅外數據協會(IrDA)、超寬帶(UWB)、ZigBeeTM等。
[0057] 定位信息模塊115是用于檢查或者獲取移動終端的定位(或位置)的模塊。定位 信息模塊的典型示例是GPS (全球定位系統)或WiFi (無線保真)模塊。
[0058] 參照圖1,A/V輸入單元120被配置為接收音頻或視頻信號。A/V輸入單元120可 包括相機121和麥克風122。相機121處理由圖像拍攝裝直在視頻拍攝t旲式或圖像拍攝豐旲 式下所獲得的靜止照片或視頻的圖像數據。經處理的圖像幀可在顯示單元151上顯示。
[0059] 經相機121處理后的圖像幀可被存儲在存儲器160 (或其它存儲介質)中或者經 由無線通信單元110發(fā)送。根據移動終端的配置,可以設置兩個或更多個相機121。
[0060] 麥克風122可在電話通話模式、錄音模式、語音識別模式等下接收聲音(可聽數 據)并且可將此聲音處理成音頻數據。就電話通話模式而言,經處理后的音頻(語音)數 據可被轉換為可經由移動通信模塊112發(fā)送給移動通信基站的格式用于輸出。麥克風122 可實現用于消除(或抑制)在接收和發(fā)送音頻信號的過程中生成的噪聲或干擾的各種類型 的噪聲消除(或抑制)算法。
[0061] 用戶輸入單元130可由用戶輸入的用于控制移動終端的各種操作的命令來生成 輸入數據。用戶輸入單元130可包括鍵盤、薄膜開關、觸摸板、輕觸滾輪、輕觸開關等。
[0062] 感測單元140檢測移動終端100的當前狀態(tài)(諸如,移動終端100的打開或關閉狀 態(tài)、移動終端100的定位、用戶與移動終端100的接觸(即,觸摸輸入)存在與否、移動終端 100的朝向、移動終端100的加速或減速移動和方向等),并且生成用于控制移動終端100 的操作的命令或信號。例如,當移動終端100被實現為滑蓋型移動電話時,感測單元140可 感測滑蓋電話是打開還是關閉的。另外,感測單元140可檢測電源單元190是否供電或者 接口單元170是否與外部設備連接。
[0063] 輸出單元150被配置為以視覺、聽覺和/或觸覺方式提供輸出(例如,音頻信號、 視頻信號、報警信號、振動信號等)。輸出單元150可包括顯示單元151、音頻輸出模塊153、 報警單元154、觸覺模塊155等。
[0064] 顯示單元151顯示在移動終端100中經處理的信息。例如,當移動終端100處于 電話通話模式下時,顯示單元151可顯示與通話或其它通信(諸如,發(fā)文本消息、多媒體文 件下載等)關聯的用戶界面(UI)或圖形用戶界面(GUI)。當移動終端100處于視頻通話模 式或圖像拍攝模式下時,顯示單元151可顯示所拍攝的圖像和/或接收到的圖像、示出視頻 或圖像及其相關功能的Π 或GUI等。
[0065] 顯示單元151可包括液晶顯示器(IXD)、薄膜晶體管-IXD (TFT-IXD)、有機發(fā)光二 極管(0LED)顯示器、柔性顯示器、三維(3D)顯示器和電子墨水顯示器中的至少一種。
[0066] 這些顯示器中的一些可被配置為是透明或透光的,以允許從外部觀看,其可被稱 為透明顯示器。典型的透明顯示器可以是(例如)T0LED (透明有機發(fā)光二極管)顯示器等。 通過此配置,用戶可通過終端機體的顯示單元151所占據的區(qū)域看到設置在該終端機體后 側的對象。
[0067] 移動終端100可根據其具體所需的實施方式而包括兩個或更多個顯示單元。例 如,多個顯示單元可分別地或者一體地設置在移動終端的一個表面上,或者可分別地設置 在互不相同的表面上。
[0068] 另外,顯示單元151還可被配置為顯示立體圖像的立體顯示單元152。這里,立體 圖像可以是三維(3D)立體圖像,3D立體圖像是指使觀眾感到監(jiān)視器或屏幕上的物體的漸 進深度和逼真度與真實空間相同的圖像。3D立體圖像是通過使用雙眼視差實現的。雙眼視 差是指因雙眼位置造成的視差。當雙眼觀看不同的2D圖像時,圖像通過視網膜傳送到大腦 并且在大腦中被組合以提供深度感和逼真感覺。
[0069] 立體顯示單元152可采用立體顯示方案(諸如,立體方案(眼鏡方案)、自動立體 方案(無眼鏡方案)、投影方案(全息方案)等)。家用電視接收器等一般使用的立體方案 包括惠斯登立體方案(Wheatstone stereoscopic scheme)等。
[0070] 自動立體方案包括(例如)視差屏障方案、透鏡方案、集成成像方案等。投影方案 包括反射型全息方案、透射型全息方案等。
[0071] 通常,3D立體圖像由左圖像(左眼圖像)和右圖像(右眼圖像)組成。根據左圖 像和右圖像如何組合成3D立體圖像,3D立體成像方法被劃分成其中左圖像和右圖像在幀 中上下設置的上下方法、其中左圖像和右圖像在幀中左右設置的L-R(左右,并排)方法、 其中左圖像和右圖像的片段以搭接形式(tile form)設置的棋盤方法、其中左圖像和右圖 像按列和行交替設置的交錯方法、其中左圖像和右圖像按時間交替顯示的時間序列(或逐 幀)方法。
[0072] 另外,至于3D縮略圖圖像,分別從原始圖像幀的左圖像和右圖像生成左圖像縮略 圖和右圖像縮略圖,然后組合左圖像縮略圖和右圖像縮略圖以生成單個3D縮略圖圖像。通 常,縮略圖是指縮小的圖像或縮小的靜止圖像。顯示生成的左圖像縮略圖和右圖像縮略圖, 使其間的水平距離差是與屏幕上的左圖像和右圖像之間的視差對應的深度,從而提供立體 空間感覺。
[0073] 通過立體處理單元152a在立體顯示單元152上顯示用于實現3D立體圖像所需的 左圖像和右圖像。立體處理單元可接收3D圖像并且提取左圖像和右圖像,或者可接收2D 圖像并且將它變成左圖像和右圖像。
[0074] 同時,當顯示單元151和用于檢測觸摸操作的傳感器(下文中,稱為"觸摸傳感 器")以層合方式疊置以形成觸摸屏時,顯示單元151既可用作輸入設備又可用作輸出設 備。觸摸傳感器可具有觸摸膜、觸摸片、觸摸板等形式。
[0075] 觸摸傳感器可被配置為將施加于顯示單元151的特定部分的壓力或者在顯示單 元151的特定部分產生的電容等的變化轉變?yōu)殡娮虞斎胄盘?。觸摸傳感器可被配置為當施 加觸摸時檢測壓力以及所觸摸的位置和區(qū)域。
[0076] 當針對觸摸傳感器進行了觸摸輸入時,對應信號(或多個信號)被發(fā)送給觸摸控 制器。觸摸控制器處理信號并且將對應數據發(fā)送到控制器180。因此,控制器180可識別觸 摸了顯示單元151的哪個部分。
[0077] 參照圖1,在觸摸屏的內部或附近可設置接近傳感器141。接近傳感器141是在不 進行物理接觸的情況下利用電磁力或紅外線來檢測相對于特定檢測表面是否存在對象或 者周圍是否存在對象的傳感器。因此,接近傳感器141具有比接觸型傳感器長得多的壽命, 并且它可被用于各種目的。
[0078] 接近傳感器141的示例可包括透射型光電傳感器、直接反射型光電傳感器、鏡像 反射型光電傳感器、RF振蕩型接近傳感器、電容型接近傳感器、磁接近傳感器、紅外接近傳 感器等。在觸摸屏是電容型的情況下,通過電場按照指點物接近程度的變化來檢測該指點 物的接近程度。在這種情況下,觸摸屏(觸摸傳感器)可被歸類為接近傳感器。
[0079] 在下面的描述中,為了簡明起見,被識別為指點物被設置成靠近觸摸屏將被稱為 "接近觸摸",而被識別為指點物實際地接觸了觸摸屏將被稱為"接觸觸摸"。在這種情況下, 當指點物處于接近觸摸的狀態(tài)下時,意味著指點物被設置成垂直對應于觸摸屏。
[0080] 通過采用接近傳感器141,可檢測接近觸摸和接近觸摸模式(例如,接近觸摸距 離、接近觸摸速度、接近觸摸時間、接近觸摸位置、接近觸摸移動狀態(tài)等),并且與檢測到的 接近觸摸操作和接近觸摸模式對應的信息可被輸出到觸摸屏。
[0081] 當觸摸傳感器以分層方式交疊到立體顯示單元152上時,或者當組合了立體顯示 單元和感測觸摸操作的3D傳感器時,立體顯示單元152還可以用作3D輸入裝置。
[0082] 作為3D傳感器的示例,感測單元140可包括接近傳感器141、立體觸摸感測單元 142、超聲感測單元143、相機感測單元144。接近傳感器141檢測在沒有機械接觸的情況下 利用電磁力或紅外線施加觸摸的感測對象(例如,用戶的手指或手寫筆)和檢測表面之間 的距離。通過使用該距離,終端識別觸摸了立體圖像中的哪個部分。
[0083] 具體地,當觸摸屏是靜電觸摸屏時,根據感測對象的接近度基于電場變化來檢測 感測對象的接近程度,通過使用接近程度來識別對3D圖像的觸摸。
[0084] 立體觸摸感測單元142被配置成檢測施加到觸摸屏的觸摸的強度或持續(xù)時間。例 如,立體觸摸感測單元142感測施加觸摸的壓力,施加的壓力強,立體觸摸感測單元142識 別該觸摸是相對于朝向終端內部更遠離觸摸屏設置的對象的觸摸。
[0085] 超聲感測單元143被配置成通過使用超聲波識別感測對象的位置信息。
[0086] 超聲感測單元143可包括(例如)光學傳感器和多個超聲傳感器。光學傳感器被 配置成感測光并且超聲傳感器可被配置成感測超聲波。由于光比超聲波快得多,因此光到 達光學傳感器的時間比超聲波到達超聲傳感器的時間早得多。因此,基于作為參考信號的 光,可通過使用光到達光學傳感器的時間和超聲波到達超聲傳感器的時間之間的時間差來 計算波生成源的位置。
[0087] 相機感測單元144包括相機、光傳感器和激光傳感器中的至少一個。例如,可組合 相機和激光傳感器來檢測感測對象相對于3D立體圖像的觸摸。當激光傳感器檢測到的距 離信息被添加到相機拍攝的2D圖像上時,可得到3D信息。
[0088] 在另一個示例中,光傳感器可被層合到顯示裝置上。光傳感器被配置成掃描感測 對象接近觸摸屏的移動。詳細地,光傳感器包括多行多列的光電二極管和晶體管,用于通過 使用按所施加光量而變化的電信號來掃描安裝在光傳感器上的內容物。即,光傳感器根據 光的變化來計算感測對象的坐標,因此得到感測對象的位置信息。
[0089] 音頻輸出模塊153可在通話信號接收模式、通話模式、錄音模式、語音識別模式、 廣播接收模式等下轉換并輸出從無線通信單元110接收或存儲在存儲器160中的聲音音頻 數據。另外,音頻輸出模塊153可提供與移動終端100執(zhí)行的特定功能相關的可聽輸出(例 如,通話信號接收聲音、消息接收聲音等)。音頻輸出模塊153可包括揚聲器、蜂鳴器或其他 聲音生成設備。
[0090] 報警單元154輸出用于通知移動終端100發(fā)生了事件的信號。移動終端100中生 成的事件可包括通話信號接收、消息接收、鍵信號輸入、觸摸輸入等。除了視頻或音頻信號 之外,報警單元154還可用不同方式輸出信號,例如,用于通知發(fā)生了事件。還可經由音頻 輸出模塊153輸出視頻或音頻信號,這樣,顯不單兀151和音頻輸出模塊153可被歸類為報 警單元154的部分。
[0091] 觸覺模塊155生成用戶能感覺到的各種觸覺效果。由觸覺模塊155生成的觸覺效 果的典型示例是振動。觸覺模塊155的強度和模式是可控的。例如,不同的振動可被組合 地輸出或者順序地輸出。
[0092] 除了振動之外,觸覺模塊155還可生成多種其它觸覺效果(諸如,通過諸如針陣列 相對于接觸皮膚垂直移動的刺激所生成的效果、通過噴射孔或吸孔的空氣噴射力或吸力所 生成的效果、在皮膚上接觸所生成的效果、與電極接觸所生成的效果、靜電力所生成的效果 等、利用可吸收或生成熱的元件再現冷感和熱感所生成的效果)。
[0093] 觸覺模塊155可被實現為讓用戶通過諸如用戶的手指或手臂的肌肉感覺來感覺 觸覺效果,以及通過直接接觸傳送觸覺效果。根據移動終端100的構造,可提供兩個或更多 個觸覺模塊155。
[0094] 存儲器160可存儲用于控制器180所執(zhí)行的處理和控制操作的軟件程序,或者可 暫時存儲被輸入或輸出的數據(例如,電話簿、消息、靜止圖片、視頻等)。另外,存儲器160 可存儲關于當觸摸輸入到觸摸屏時輸出的各種模式的振動和音頻信號的數據。
[0095] 存儲器160可包括至少一種類型的存儲介質,包括閃存、硬盤、多媒體卡微型存 儲器、卡型存儲器(例如,SD或DX存儲器等)、隨機存取存儲器(RAM)、靜態(tài)隨機存取存儲 器(SRAM)、只讀存儲器(ROM)、電可擦除可編程只讀存儲器(EEPR0M)、可編程只讀存儲器 (PR0M)、磁存儲器、磁盤和光盤。另外,移動終端100可與在互聯網上執(zhí)行存儲器160的存 儲功能的網絡存儲設備相關聯地進行操作。
[0096] 接口單元170用作與連接移動終端100的每個外部設備的接口。例如,接口單元 170可向外部設備發(fā)送數據,向移動終端100的各元件收發(fā)電力,或者向外部設備發(fā)送移動 終端100的內部數據。例如,接口單元170可包括有線或無線頭戴聽筒端口、外部電源端口、 有線或無線數據端口、存儲卡端口、用于連接具有識別模塊的裝置的端口、音頻輸入/輸出 (I/O)端口、視頻I/O端口、耳機端口等。
[0097] 識別模塊可以是存儲用于認證使用移動終端100的權限的各種信息的芯片并且 可包括用戶識別模塊(UIM)、用戶身份模塊(SIM)、通用用戶身份模塊(USIM)等。另外,具 有識別模塊的裝置(下文中,被稱為"識別裝置")可采用智能卡的形式。因此,識別裝置可 經由端口與終端100連接。
[0098] 當移動終端100連接外部支架時,接口單元170可用作允許通過其從支架向移動 終端100供電的通道或者可用作允許用戶從支架輸入的各種命令信號通過其傳送到移動 終端的通道。從支架輸入的各種命令信號或電力可被操作為用于識別移動終端正確安裝在 支架上的信號。
[0099] 控制器180典型地控制移動終端的總體操作。例如,控制器180執(zhí)行與語音通話、 數據通信、視頻通話等相關的控制和處理。控制器180可包括用于再現多媒體數據的多媒 體模塊181。多媒體模塊181可被配置在控制器180內或者可被配置為與控制器180分開。
[0100] 控制器180可執(zhí)行模式識別處理,用于將在觸摸屏上執(zhí)行的手寫輸入或畫圖輸入 分別識別為字符或圖像。
[0101] 另外,當移動終端的狀態(tài)滿足預設條件時,控制器180可執(zhí)行用于限制用戶輸入 控制命令的鎖定狀態(tài)。另外,在鎖定狀態(tài)下,控制器180可基于通過顯示單元151感測到的 觸摸輸入來控制鎖定狀態(tài)下顯示的鎖定畫面。
[0102] 電源單元190接收外部電力或內部電力并且在控制器180的控制下提供操作各個 元件和組件所需的合適電力。
[0103] 本文描述的各種實施方式可利用(例如)軟件、硬件或其任何組合在計算機可讀 介質或其類似介質中實現。
[0104] 對于硬件實現,本文描述的實施方式可利用專用集成電路(ASIC)、數字信號處理 器(DSP)、數字信號處理裝置(DSPD)、可編程邏輯器件(PLD)、現場可編程門陣列(FPGA)、處 理器、控制器、微控制器、微處理器、設計用于執(zhí)行本文描述的功能的電子單元中的至少一 個來實現。在一些情況下,這種實施方式可由控制器180本身來實現。
[0105] 對于軟件實現,本文描述的諸如進程或功能的實施方式可用獨立的軟件模塊來實 現。各軟件模塊可執(zhí)行本文描述的一個或更多個功能或操作。
[0106] 軟件代碼可用以任何適當的編程語言編寫的軟件應用來實現。軟件代碼可被存儲 在存儲器160中并且由控制器180來執(zhí)行。
[0107] 下文中,將描述能通過根據本發(fā)明的實施方式的可通過移動終端100實現的通信 系統。圖2A和圖2B是根據本發(fā)明的移動終端能在其中進行操作的通信系統的概念圖。
[0108] 首先,參照圖2A,通信系統可以使用不同的空中接口和/或物理層。例如,通信系 統利用的空中接口示例包括頻分多址(FDMA)、時分多址(TDMA)、碼分多址(CDMA)、通用移 動電信系統(UMTS)(具體地,長期演進(LTE))、全球移動通信系統(GSM)等。作為非限制性 示例,此后的描述涉及CDMA通信系統,但這種教導同等地應用于其它類型的系統。
[0109] 下文中,為了描述的目的,將描述CDMA,但本發(fā)明可應用于包括CDMA無線通信系 統的任何通信系統。
[0110] 參照圖2A,CDMA無線通信系統可包括多個移動終端100、多個基站(BS)270、 基站控制器(BCS)275、移動切換中心(MSC)280。MSC280被配置成與公共交換電話網絡 (PSTN)290接口。MSC280還被配置成與BSC275接口,BSC275可經由回程線路連接到基站 270。可根據眾多已知接口(包括例如El/Tl、ATM、IP、PPP、幀中繼、HDSL、ADSL或xDSL)中 的任一個配置回程線路。要理解,如圖2A中所示的系統中可包括多個BSC275。
[0111] 各BS270可為一個或多個扇區(qū)(或區(qū)域)服務,各扇區(qū)被全向天線或從BS270徑 向向外指向特定方向的天線覆蓋。另選地,各扇區(qū)可被進行多樣接收的兩個或更多個天線 覆蓋。各BS270可被配置成支持多個頻率分配,其中,各頻率分配具有特定頻譜(例如, 1. 25MHz、5MHz 等)。
[0112] 扇區(qū)和頻率分配的交集可被稱為CDMA信道。BS270還可被稱為基站收發(fā)子系統 (BTS)或其它等價術語。在一些情況下,術語"基站"可用于被統稱為單個BSC275和至少一 個BS270。基站還可被表示為"小區(qū)站點"。另選地,特定BS270的各個扇區(qū)可被稱為多個 小區(qū)站點。
[0113] 如圖2A中所示,廣播發(fā)送器(BT) 295向在系統內操作的移動終端100發(fā)送廣播信 號。如圖1中所示的廣播接收模塊111設置在移動終端100中,用于接收BT295發(fā)送的廣 播信號。
[0114] 另外,在圖2A中,示出多個全球定位系統(GPS)衛(wèi)星200。衛(wèi)星200有助于定位多 個移動終端100中的至少一個。在圖2A中,示出許多衛(wèi)星200,但可用任意數量的衛(wèi)星來得 到有用的定位信息。如圖1中所示的GPS模塊115典型地被配置成與衛(wèi)星200協作來得到 所需的定位信息。作為GPS追蹤技術的替代或補充,可使用可追蹤移動終端位置的其它技 術。另外,至少一個GPS衛(wèi)星200可選擇性或另外地操縱衛(wèi)星DMB發(fā)送。
[0115] 作為無線通信系統的一個典型操作,BS270從各種移動終端100接收反向鏈路信 號。移動終端100典型地從事通話、發(fā)消息和其它類型通信。特定基站270接收的各反向 鏈路信號在該特定BS270內被處理。所得的數據被轉發(fā)到關聯的BSC275。BSC275提供通 話資源分配和移動管理功能,包括BS270之間的軟切換的協調。
[0116] BSC275還將接收到的數據路由到MSC280, MSC280提供用于與PSTN290接口的附 加路由服務。類似地,PSTN290與MSC280接口,MSC280與BSC275接口,BSC275進而控制 BS270以將正向鏈路信號發(fā)送到移動終端100。
[0117] 接下來,將參照圖2B描述使用Wi-Fi (無線保真)定位系統(WPS) 300獲取移動終 端的位置信息的方法。Wi-Fi定位系統(WPS) 300是指利用移動終端100中設置的Wi-Fi模 塊和用于向/從Wi-Fi模塊發(fā)送/接收的無線接入點320,利用Wi-Fi作為追蹤移動終端 100位置的技術的基于無線局域網(WLAN)的位置確定技術。
[0118] Wi-Fi定位系統300可包括WiFi位置確定服務器310、移動終端100、連接到移動 終端100的無線接入點(AP) 320、存儲有任何無線AP信息的數據庫330。
[0119] Wi-Fi位置確定服務器310基于移動終端100的位置信息請求消息(或信號)提 取連接移動終端100的無線AP320的信息。無線AP320的信息可通過移動終端100被發(fā)送 到Wi-Fi位置確定服務器310或者從無線AP320發(fā)送到Wi-Fi位置確定服務器310。
[0120] 基于移動終端100的位置信息請求消息而提取的無線AP的信息可以是MAC地址、 SSID、RSSI、信道信息、隱私、網絡類型、信號強度和噪聲強度中的至少一個。
[0121] Wi-Fi位置確定服務器310接收如上所述連接到移動終端100的無線AP320的信 息,將接收到的無線AP320的信息與預先創(chuàng)建的數據庫330中包含的信息進行比較,以提取 (或分析)移動終端100的位置信息。
[0122] 另一方面,參照圖2B,作為示例,連接到移動終端100的無線AP被圖示為第一、第 二和第三無線AP320。然而,連接到移動終端100的無線AP的數量可根據移動終端100所 處的無線通信環(huán)境以各種方式變化。當移動終端100連接到至少一個無線AP時,Wi-Fi定 位系統300可追蹤移動終端100的位置。
[0123] 接下來,更詳細地考慮存儲有任何無線AP信息的數據庫330,設置在不同位置的 任何無線AP的各種信息可被存儲在數據庫330中。
[0124] 存儲在數據庫330中的任何無線AP的信息可以是諸如MAC地址、SSID、RSSI、信道 信息、隱私、網絡類型、緯度和經度坐標、無線AP所處的建筑、樓層數、詳細的室內位置信息 (可用的GPS坐標)、AP擁有者的地址、電話號碼等信息。
[0125] 以此方式,任何無線AP信息和與任何無線AP對應的位置信息被一起存儲在數據 庫330中,因此,Wi-Fi位置確定服務器310可從數據庫330中檢索與連接到移動終端100 的無線AP320的信息對應的無線AP信息,以提取與搜索到的無線AP匹配的位置信息,從而 提取移動終端100的位置信息。
[0126] 此外,所提取的移動終端100的位置信息可通過Wi-Fi位置確定服務器310被發(fā) 送到移動終端100,從而獲取移動終端100的位置信息。
[0127] 下文中,圖3A是示出與本公開相關的移動終端100的示例的透視正視圖。本文公 開的移動終端100設置有直板型終端機體。然而,本發(fā)明不限于此,而且可能可應用于其中 兩個或更多個機體以相對可移動方式彼此組合的各種結構(諸如,手表型、夾具型、眼鏡型 或折疊型、翻蓋型、旋轉型、旋動型等)。
[0128] 終端機體包括形成終端外觀的殼體(外殼、外罩、蓋等)。在這個實施方式中,殼 體可被劃分成前殼體101和后殼體102。各種電子組件被安裝在形成在前殼體101和后殼 體102之間的空間中。在前殼體101和后殼體102之間可另外地設置至少一個中間殼體, 用于覆蓋電池191的電池蓋103可以可脫離地構造在后殼體102上。
[0129] 殼體可通過將合成樹脂注射成型來形成或者也可由例如不銹鋼(STS)、鈦(Ti)等 的金屬形成。
[0130] 顯示單元151、第一音頻輸出模塊153a、第一相機121a、第一操縱單元131等可設 置在終端機體的前表面上,麥克風122、接口單元170、第二操縱單元132等可設置在終端機 體的側表面上。
[0131] 顯示單元151可被配置成顯示(輸出)正在移動終端100中處理的信息。顯示 單元151可包括液晶顯示器(LCD)、薄膜晶體管-液晶顯示器(TFT-LCD)、有機發(fā)光二極管 (0LED)顯不器、柔性顯不器、三維(3D)顯不器和電子墨水顯不器中的至少一個。
[0132] 顯示單元151可包括用于通過觸摸方法接收控制命令的觸摸感測機制。當對顯示 單元151上的任一位置進行觸摸時,觸摸感測機制可被配置成感測這個觸摸并且輸入與所 觸摸位置對應的內容。通過觸摸方法輸入的內容可以是文本或數值、或能夠指示或指明各 種模式的菜單項。
[0133] 觸摸感測機制可形成為透明的,以允許看到顯示單元151上顯示的可視信息,并 且可包括用于增強觸摸屏亮的位置的可視性的結構。參照圖3A,顯示單元151占據前殼體 101的大部分前表面。
[0134] 第一音頻輸出單元153a和第一相機121a設置在鄰近顯示單元151的兩個端部中 的一個端部的區(qū)域,第一操縱輸入單元131和麥克風122設置在鄰近其另一個端部的區(qū)域。 第二操縱單元132 (參見圖3B)、接口 170等可設置在終端機體的側表面上。
[0135] 第一音頻輸出模塊153a可被實現為用于向用戶的耳朵或揚聲器傳送語音聲音的 接收器形式,揚聲器用于輸出各種警報聲音或多媒體再現聲音。
[0136] 可配置成使得第一音頻輸出模塊153a生成的聲音沿著結構機體之間的組裝間隙 釋放。在這種情況下,就外觀而言,被獨立形成以輸出音頻聲音的孔不會被看到或者被隱 藏,從而進一步簡化了移動終端100的外觀。然而,本發(fā)明可不限于此,但可在窗口上形成 用于釋放聲音的孔。
[0137] 第一相機121a在視頻通話模式或拍攝模式下處理通過圖像傳感器得到的視頻幀 (諸如,靜止圖像或移動圖像)。經處理的視頻巾貞可在顯示單元151上顯示。
[0138] 用戶輸入單元130被操縱成接收用于控制移動終端100操作的命令。用戶輸入單 元130可包括第一操縱單元131和第二操縱單元132。第一操縱單元131和第二操縱單元 132可被統稱為操縱部,如果是讓用戶以觸覺感覺(諸如,觸摸、推動、滾動等)執(zhí)行操縱的 觸覺方式,則可采用任何方法。
[0139] 本附圖示出第一操縱單元131是觸摸鍵,但本公開不限于此。例如,第一操縱單元 131可配置有機械鍵、或觸摸鍵和機械鍵的組合。
[0140] 第一操縱單元131和/或第二操縱單元132接收的內容可按各種方式設置。例如, 第一操縱單元131可用于接收諸如菜單、主鍵、取消、搜索等命令,第二操縱單元132可接收 諸如控制從第一音頻輸出模塊153a輸出的音量或者切換至顯示單元151的觸摸識別模式 的命令。
[0141] 麥克風122可被形成用于接收用戶的語音、其它聲音等。麥克風122可設置在多 個位置并且被配置成接收立體聲。
[0142] 接口單元170用作允許移動終端100與外部裝置交換數據的路徑。例如,接口單 元170可以是以有線或無線方式連接到耳機的連接端子、用于近場通信的端口(例如,紅外 數據協會(IrDA)端口、藍牙端口、無線LAN端口等)、用于向移動終端100供電的電源端子 中的至少一個。接口單元170可被實現為用于容納外部卡(諸如,用戶身份模塊(SIM)或 用戶識別模塊(UIM))和用于信息存儲的存儲卡的插座的形式。
[0143] 圖3B是示出圖3A中示出的移動終端100的透視后視圖。參照圖3B,第二相機 121b可附加地安裝在終端機體的后表面(即,后殼體102)上。第二相機121b具有與第一 相機單元121a的圖像拍攝方向基本上相反的圖像拍攝方向,并且可具有像素數量與第一 相機單元121a的像素數量不同的像素。
[0144] 例如,優(yōu)選地,第一相機121a具有不足以造成當用戶在視頻通話等期間拍攝他或 她自己的面部并將它發(fā)送到另一方時有困難的較小數量的像素,第二相機121b由于用戶 常常拍攝不立即發(fā)送的普通對象而具有較大數量的像素。第一相機121a和第二相機121b 可按可旋轉和可彈出方式設置在終端機體中。
[0145] 閃光燈123和反射鏡124可附加地鄰近第二相機121b設置。當用第二相機121b 拍攝對象時,閃光燈123向對象照射光。反射鏡124讓用戶在使用第二相機121b拍攝他自 己或她自己(自拍模式)時以反射方式看到他或她自己的面部等。
[0146] 第二音頻輸出模塊153b可附加地設置在終端機體的后表面上。第二音頻輸出模 塊153b與第一音頻輸出模塊153a(參見圖3A) -起可實現立體聲功能,并且還可用于實現 電話通話期間的免提模式。
[0147] 除了用于進行電話通話等的天線之外,用于接收廣播信號的天線可附加地設置在 終端機體的側表面上。構成廣播接收模塊111的部分的天線可以可縮回方式設置在終端機 體中。
[0148] 用于向移動終端100供電的電源單元190可安裝在終端機體上。電源單元190可 安裝在終端機體內,或者可包括以可脫離方式構造在終端機體外部的電池191。附圖示出 電池蓋103與后殼體102組合以覆蓋電池191,從而限制電池191的脫離并且保護電池191 免受外部沖擊和外來物質的影響。
[0149] 接下來,圖4是示出移動終端的控制方法的流程圖并且圖5A是示出根據本發(fā)明的 實施方式的圖4的控制方法的概念圖。
[0150] 參照圖5A的(a),用戶通過移動終端100的輸出單元150接收特定信息。例如,用 戶可接收輸出到移動終端1〇〇的顯示單元的第一特定信息610。另外,特定信息610可以是 通過揚聲器153輸出的音頻信息、通過顯示單元輸出的可視信息、或包括聽覺信息和可視 信息的媒體信息。然而,特定信息中包括的內容不受限制。
[0151] 參照圖5A的(a),顯示單元151為用戶顯示作為第一特定信息610的畫面信息。 然后,在用戶被提供第一特定信息610的同時,控制器180接收關于用戶身體狀況的信息。
[0152] 身體狀況信息是由接觸用戶身體的測量裝置900生成的。例如,測量裝置900可 以是固定到用戶手腕的手表,使得其至少某個區(qū)域接觸用戶的皮膚。然而,可使用任何類型 的裝置,只要它可感測用戶的身體變化即可。例如,測量裝置可以是可在連續(xù)的基礎上接觸 用戶面部區(qū)域的眼鏡、耳環(huán)、手表、手鐲等。另外,測量裝置900可被安裝在終端機體100接 觸用戶手部的區(qū)域中。
[0153] 另外,可通過用戶皮膚傳達的心跳的變化、測得的血流量的變化等來生成身體狀 況信息。
[0154] 圖?是示出測量裝置900的概念圖。參照圖測量裝置900可包括光發(fā)射單元 911、光接收單元912、專用MCU920和主MCU930。光發(fā)射單元911和光接收單元912與用戶 皮膚并聯地設置。光接收單元912被形成為感測從光發(fā)射單元911發(fā)射并且透射穿過用戶 皮膚的光。
[0155] 同時,光發(fā)射單元911和光接收單元912可被形成為設置成使用戶皮膚組織被插 入其間。例如,光發(fā)射單元911和光接收單元912可被形成為,使得測量裝置900被安裝在 其皮膚組織較薄的手指、耳垂等中。
[0156] 光接收單元可根據血流速率的密度差異來過濾光學變化,放大光學變化以形成波 形。專用MCU可被保持于啟動狀態(tài)或者可被控制成周期性地在每個預設時間打開或關閉。 光接收單元912將關于測得的血流速率的信息傳送到專用MCU。專用MCU將從光接收單元 912接收的血流速率的變化與預設的參考變化進行比較,并且當檢測到該變化是快速變化 時,專用MCU啟動主MCU930。
[0157] 另外,主MCU可基于光接收單元912收集的信息來收集用戶心跳的周期模式。例 如,主MCU可生成心率變異性(HRV)信息。然后,可通過HRV信息分析心跳的速率,進而可 估計用戶的受激狀況。
[0158] 圖5A的(a)中以曲線圖形式示出的身體狀況信息711對應于從測量裝置900接 收的HRV信息。即,在用戶正被提供第一特定信息610的同時(例如,在顯示單元151正 在輸出畫面信息的同時),控制器180可從測量裝置900接收身體狀況信息711 (圖4中的 S701)??刂破?80基于身體狀況信息711分析用戶的感覺(S702),并且可通過HRV信息估 計用戶的感覺。
[0159] 更詳細地,圖5E包括示出從測量裝置900接收的身體狀況信息711的曲線圖。將 參照圖5E描述通過身體狀況信息711估計用戶的感覺的方法。
[0160] 在圖5E中,(a)是基于當用戶沒有受激時測量裝置900感測到的血流速率的曲線 圖。當用戶沒有受激時,隨時間推移的用戶心率得以均勻保持。即,基于心率的曲線圖具有 恒定形式?;谟脩粜穆实那€圖可對應于感測到的用戶血流速率的平均值。另外,測量 裝置900可存儲在用戶沒有受激的穩(wěn)定狀況下根據用戶血流速率的曲線圖案,并且將平均 曲線圖案定義為配戴測量裝置900的用戶沒有受激的狀態(tài)。
[0161] 另外,根據個體差異出現的心率測量和感覺分析的誤差可降至最小。例如,當血流 速率由于心率增加而增加時,曲線圖中對應于y軸的電壓值會增大,并且由于心率增加,導 致形成峰值點的時間間隔窄。也就是說,峰值點之間的時間間隔是心率的周期。
[0162] 當測量這個狀態(tài)下的心率時,專用MCU920可受控制,不啟動主MCU930。即,當根據 光發(fā)射單元911和光接收單元912感測到的血流速率的曲線圖案不同于基于用戶穩(wěn)定狀況 的曲線圖案時,例如,當峰值點之間的時間差比預設的閾值時間短時,當電壓值高于預設的 參考電壓等等時,專用MCU920可啟動主MCU930。因此,當用戶處于受激狀況時,控制器180 可通過啟動的主MCU930接收身體狀況信息。
[0163] 因此,基于曲線圖案,測量裝置900可感測到用戶處于受激狀況。例如,在圖5E中, (b)示出當用戶處于來自正面感覺的受激狀況時感測到的曲線圖案。這里,正面感覺是指諸 如感激、愉快、喜愛、高興等的感覺。
[0164] 當曲線圖案被形成為是規(guī)則的并且具有徐緩彎曲形狀時,控制器180可估計用戶 的感覺是處于正面受激狀況。即,當峰值點的電壓值基本上近似、峰值點之間的間隔相對恒 定并且峰值點形成的形狀是曲線時,控制器可判定是正面感覺。可形成其中在受激狀況下 測得的電壓值逐漸增大的圖案。因此,用戶可判定他或她不處于穩(wěn)定狀態(tài)。
[0165] 同時,參照圖5E的(c),當曲線圖案相對不規(guī)則時,控制器可感測到用戶處于來自 負面感覺的受激狀況。例如,當峰值點的電壓值不規(guī)則、峰值點之間的間隔不規(guī)則并且峰值 點的形狀尖銳時,存在諸如生氣、焦慮、害怕等負面受激狀況。
[0166] 也就是說,當峰值點之間的間隔變窄時,相對于穩(wěn)定狀態(tài)的情形(或者當峰值點 的電壓值增大時),控制器180可感測到用戶處于受激狀況并且通過曲線圖案的形狀判定 情緒狀態(tài)的正面性和負面性。因此,用戶可根據正面受激狀況和負面受激狀況以不同方式 控制移動終端。
[0167] 另外,參照圖4,控制器180將基于根據測量裝置900接收的身體狀況信息而估計 的正面用戶狀況的感覺數據附于第一特定信息610 (S703)。控制器180還可控制存儲器160 存儲附有感覺數據的第一特定信息610。
[0168] 參照圖5A的(b),控制器180可控制輸出單元150來輸出與感覺數據和特定信息 中的至少一個相關的內容。例如,第一特定信息610可對應于用于購買貨物(或制品)的 互聯網購物中心的畫面信息,第一相關內容810可對應于用于接收購買貨物的信息的畫面 信息。
[0169] 更詳細地,控制器180通過使用在輸出第一特定信息610的同時接收的用戶的身 體狀況信息來估計正面感覺??刂破?80將正面感覺數據附于特定信息。另外,控制器180 控制顯示單元151基于正面感覺數據來輸出與購買包括在第一特定信息610中的貨物的階 段對應的第一相關內容810。控制器180可控制顯示單元151,以在用戶沒有施加控制命令 的情況下從第一特定信息610變成第一相關內容810。
[0170] 同時,控制器180控制存儲器160,以存儲附有感覺數據的特定信息。另外,控制器 180可控制存儲器160,以基于感覺數據將包括特定信息的多條信息歸類。例如,控制器180 可基于感覺數據以喜好次序排列多條信息,控制顯示單元151將附有基于施加到顯示單元 151的用戶觸摸輸入而選擇的感覺數據的至少一條信息與多條特定信息一起顯示。
[0171] 例如,參照圖5A的(c),控制器180可通過使用感覺數據確定多級喜好,控制存儲 器160或顯示單元151來根據喜好輸出多條信息。以喜好次序排列的這多條信息可基本上 對應于同一類別,但本發(fā)明構思不限于此。在圖5A中,(c)示出輸出根據喜好分類和存儲 的多條信息811a的畫面信息。另外,控制器180可控制顯示單元151來輸出與感覺數據相 關的內容。
[0172] 另外,控制器180可通過使用感覺數據自動地存儲用戶沒有單獨存儲的特定信 息。例如,被基于感覺數據分類的多條信息可對應于多條圖像信息,這多條圖像信息可被存 儲在圖冊應用的存儲空間中。
[0173] 因此,在特定信息被提供給用戶的同時,根據用戶的感覺提供與特定信息相關的 內容,因此,可在沒有單獨的控制命令的情況下為用戶提供內容。另外,在移動終端100提 供特定信息的同時,在沒有用戶的控制命令的情況下感覺數據被附于特定信息并且被存 儲,并且根據感覺數據將特定信息分類,因此可為用戶提供關于特定感覺的信息。因此,在 沒有控制命令的情況下,可只用包括感覺的記憶無意識地為用戶提供內容。
[0174] 接下來,圖5B和圖5C是示出圖4的控制方法的概念圖。參照圖5B,將描述基于 負面感覺數據控制移動終端的方法。在圖5B中,(a)示出被提供來自外部的第二特定信息 620的用戶。在接收第二特定信息620的同時,從測量裝置900接收用戶的感覺數據712。
[0175] 控制器180可分析感覺數據712,以估計用戶具有負面感覺。控制器180還可得到 外部提供的第二特定信息620。例如,控制器180可通過麥克風122接收與第二特定信息 620相關的聲音或者可通過相機121得到第二特定信息620的圖像。
[0176] 例如,如圖5B中所示,當通過相機121得到試映影片的介質時,控制器180可將感 覺數據附于第二特定信息620,控制存儲器160來存儲附有負面感覺數據的第二特定信息 620。
[0177] 在圖5B中,(b)示出顯示單元151,顯示單元151輸出包括與第二特定信息620基 本上相同的信息的畫面信息621。例如,畫面信息621對應于用于預訂第二特定信息620中 包括的影片的網頁。
[0178] 如圖5B的(c)中所示,當施加用于預訂影片的控制命令時,控制器180可控制顯 示單元151來輸出與附于第二特定信息620的感覺數據相關的第一附加內容821。例如,第 二相關內容821可包括詢問用戶是否想要預訂影片的提示短語(真的想預訂嗎?)或描述 感覺數據的短語(估計具有90%的不佳印象)。因此,用戶可想起他或她過去對要預訂的 影片的負面感覺并且相應作出決定。
[0179] 另外,控制器180可控制顯示單元151基于第二特定信息620和感覺數據712來 輸出第一附加內容821。例如,如圖5B的(d)中所示,控制器180可控制顯示單元151來基 于第二特定信息620的類別和負面感覺數據提供過去存儲的信息之中的附有正面感覺數 據的電影相關內容822。
[0180] 當移動終端100當前輸出的信息匹配附有用戶的感覺數據的特定信息時,控制器 180控制輸出單元150向用戶提供對應信息。因此,可為用戶提供考慮使用當前輸出的信息 來執(zhí)行功能的機會。
[0181] 接下來,圖5C是示出分類并且存儲附有感覺數據的特定信息的控制方法的概念 圖??刂破?80可控制存儲器160將附有多個感覺數據的多條特定信息分別成像,存儲它 們,還控制顯示單元151輸出感覺數據和這多條特定信息。例如,控制器180可控制顯示單 元151輸出指示感覺數據的圖標811b??刂破?80可基于施加于圖標811b的觸摸輸入控 制顯示單元151輸出附有特定感覺數據的至少一條特定信息,如圖5C的(b)和(c)中所示。
[0182] 當特定信息對應于用于購買貨物(或制品)的購買頁時,控制器180可在成像的 特定信息中形成超連接。也就是說,控制器180可基于施加于特定信息的觸摸輸入控制顯 示單元151輸出對應于特定信息的網頁。因此,可為用戶提供他或她預言的信息,盡管他或 她并沒有記錄該信息,并且用戶可以通過使用該信息立即執(zhí)行另外的功能。
[0183] 根據本實施方式,當在沒有控制命令的情況下用戶具有特別感覺時,移動終端100 記錄從移動終端100或外部提供給用戶的特定信息,將感覺數據附于該特定信息,并且存 儲它。另外,當為用戶提供與特定信息或相關信息相同的信息時,移動終端100可將附有感 覺數據的特定信息提供給用戶。因此,用戶可回想起通過周圍環(huán)境中包括的特定信息無意 識變化的感覺變化。
[0184] 圖6A至圖6C是示出根據本發(fā)明的各種實施方式的移動終端的控制方法的概念 圖。將描述將在得到圖像時生成的感覺數據附于圖像的控制方法。具體地,圖6A是示出通 過相機121 (圖6A示出前部相機121a)得到圖像的情形的視圖。
[0185] 在通過相機121得到圖像的同時,用戶將通過相機121輸出到顯示單元151的預 覽畫面識別為第三特定信息630。另外,用戶感測周圍環(huán)境以及通過顯示單元151提供的預 覽。
[0186] 在通過相機121得到圖像的同時,控制器180可通過測量裝置900接收用戶的身 體狀況信息。另外,在通過使用后部相機121b得到圖像的同時,控制器180可控制前部相 機121a拍攝用戶的面部720。例如,當施加用于控制后部相機121b的控制命令以對周圍環(huán) 境成像時,控制器180可基于控制命令操作前部相機121a。
[0187] 控制器180通過使用拍攝的用戶面部圖像和從測量裝置900接收的身體狀況信息 中的至少一個來分析用戶的感覺。控制器可將用戶的感覺數據附于得到的圖像。
[0188] 例如,控制器180基于來自用戶的另外的控制命令控制存儲器160來存儲得到的 圖像630。另外,控制器180可控制存儲器160將感覺數據可視化以生成第三相關內容830 并且控制存儲器將第三相關內容830與圖像630 -起存儲,如圖6A的(b)和(c)中所示。 另外,控制器180可控制顯示單元151來輸出第三相關內容830,使得它與圖像630重疊。
[0189] 也就是說,參照圖6A的(b),控制器180可將感覺數據成像以生成第三相關內容 830并且控制顯示單元151來輸出第三相關內容830使得它與圖像630重疊。另外,控制器 180可基于感覺數據控制存儲器160將附有各種類型的感覺數據的多個圖像作為內容進行 分類,并且存儲它們,如圖6A的(c)中所示。
[0190] 具體地,圖6A的(c)示出表現了圖冊應用的存儲空間的執(zhí)行畫面??刂破?80可 控制存儲器160將附有對應感覺數據的圖像存儲在與不同類型的感覺數據相關的劃分空 間中。另外,控制器180可控制顯示單元151輸出通過將不同類型的感覺數據可視化成對 應于各個感覺數據的文件夾圖像并且表現其中存儲有各個圖像的劃分空間而得到的相關 內容830。
[0191] 控制器180可基于施加于表現任何單個感覺數據的文件夾的觸摸輸入,控制顯示 單元151來輸出與附有所選擇的感覺數據的至少一個圖像對應的第二附加內容831。即,控 制器180將用戶的感覺分類成不同類型的感覺數據。例如,基于身體狀況信息,感覺數據可 被分類為笑、生氣、悲傷、高興、緊張等。各個感覺數據可生成為可視化的第三相關內容830, 第三相關內容830可對應于描述人類表情的圖像、文本等。
[0192] S卩,控制器180將提供的特定信息與用戶的感覺數據一起存儲,并且基于感覺數 據存儲同一類別。因此,用戶可回想起相對于特定信息的他的感覺并且可被方便地提供各 種類型的特定信息。
[0193] 將描述根據本發(fā)明的另一個實施方式的基于感覺數據提供信息的控制方法。如以 上參照圖6A描述的,在通過相機121得到圖像的同時,控制器180控制存儲器160將生成 的用戶的感覺數據附于圖像并且存儲它。另外,控制器180控制顯示單元151來輸出附有 感覺數據的圖像。
[0194] 參照圖6B,控制器180可基于施加于與輸出到顯示單元151的感覺數據對應的第 三相關內容830的觸摸輸入控制顯示單元151來輸出與第三相關內容830相關的第二附加 內容831。
[0195] 例如,控制器180可控制顯示單元151來輸出附有與第三相關內容830的感覺數 據基本上相同的感覺數據的不同圖像。不同圖像可按縮略圖形式輸出。因此,可通過使用 附于圖像的第三相關內容為用戶快速提供與感覺數據相關的不同信息。
[0196] 將參照圖6C描述通過感測用戶的語音生成感覺數據的控制方法。在圖6C中,(a) 是示出在接收到用戶的語音時控制相機121來拍攝周圍環(huán)境的情形的視圖。為了接收用戶 的語音,控制器180啟動麥克風122。控制器180可通過使用用戶的語音來控制前部相機 121a或后部相機121b。
[0197] 控制器180在得到圖像時通過測量裝置900接收身體狀況信息,并且分析通過麥 克風122接收的語音??刂破?80基于身體狀況信息和經分析語音來生成用戶的感覺數據。 例如,控制器180可分析語音的屬性(諸如,細微差異、音量、速度、聲調等)以估計用戶的 感覺。
[0198] 控制器180可控制存儲器160將通過將感覺數據成像而得到的第三相關內容830 附于圖像并且存儲它。根據本實施方式,因為輸入以控制移動終端的用戶語音以及身體狀 況信息被作為生成感覺數據的基礎,所以可以更準確地識別用戶的感覺。
[0199] 接下來,圖7A至圖7D是示出用于提供用戶的感覺數據或附有感覺數據的特定信 息和附加內容的控制方法的概念圖。
[0200] 將參照圖7A描述提供與附有感覺數據的特定信息類似的內容的控制方法。參照 圖7A,在通過輸出單元150輸出第四特定信息640的同時,控制器180通過測量裝置900接 收身體狀況信息。
[0201] 更詳細地,在輸出第四特定信息640的同時,控制器180可在向顯示單元151施加 觸摸輸入以執(zhí)行與第四特定信息640相關的功能時接收身體狀況信息。例如,當與第四特 定信息640互相配合的子信息(例如,相對于一些發(fā)布的反應、評價等)被輸入到輸出第四 特定信息640的顯示單元151時,或者當施加用于共享第四特定信息640的觸摸輸入時,控 制器180可識別用戶的感覺。
[0202] 控制器180可控制存儲器160將感覺數據附于第四特定信息640或第四特定信息 640的屬性并且存儲它。這里,第四特定信息640的屬性可對應于第四特定信息640的類 另IJ、源和更高類別、第四特定信息640中包括的內容的類型等。
[0203] 例如,將描述當生成對應于愉快的感覺數據時,同時正在輸出與對應于通過使用 無線通信接收到的名謠歌手的音樂會場景的視頻文件對應的第四特定信息640。控制器 180從無線通信單元下載作為文件的視頻,控制存儲器160將感覺數據附于視頻文件并且 存儲它。
[0204] 另選地,控制器180可通過利用與視頻一起輸出到顯示單元151的不同信息等來 確定視頻的屬性。例如,控制器180可提取視頻的信息的類型、關于視頻中包括的歌手的信 息、音樂會、歌曲的名字、歌曲的類型和關于歌詞的信息,控制存儲器160將感覺數據附于 所提取的信息并且存儲它。
[0205] 參照圖7A的(b),當用戶的感覺變化時,從測量裝置900接收身體狀況信息???制器180用身體狀況信息生成感覺數據并且在存儲器160中搜索與感覺數據匹配的內容。 例如,控制器180可控制輸出單元150來輸出附有對應于愉快的感覺數據的第三附加內容 841。
[0206] 第三附加內容841是已經存儲的信息,因為當過去將它提供給用戶時,用戶對它 的感覺是快樂。另外,控制器180可控制輸出單元150,在從測量裝置900接收身體狀況信 息時(甚至在用戶沒有操縱移動終端時)以及當用戶使用移動終端時自動地提供附加內 容。圖7A的(b)示出指示被啟動以生成第三附加內容841的移動終端的人工智能型代理 的圖像520。
[0207] 例如,當生成對應于用戶的悲傷的感覺數據時,控制器180可將移動終端100從其 未啟動狀態(tài)啟動,基于感覺數據控制顯示單元151來輸出附加內容。因此,當用戶具有特定 感覺時,可為用戶提供輔助該感覺的內容。
[0208] 參照圖7A的(c),控制器180可搜索與第四特定信息640相關的附加內容,用于進 行搜索的源不受限制。例如,當控制器180到達提供內容640的源時,控制器180可在源中 搜索與第四特定信息640相關的信息。
[0209] 更詳細地,到達源可對應于訪問包括各種類型的內容的特定網站、啟動SNS應用 等。當感覺數據是正面感覺時,控制器180可搜索與第四特定信息類似的內容。例如,控制 器180可搜索具有與第四特定信息的屬性重疊(或相同)的屬性的內容。在另一個示例中, 控制器180可在網絡中搜索視頻,視頻中包括歌手。當用戶生成關于負面感覺的感覺數據 時,或者當移動終端100到達源時,控制器180可控制輸出單元150來輸出附加內容842。
[0210] 根據本實施方式,控制器180可自動地提供與用戶感覺和附有感覺數據的特定信 息相關的信息,以幫助提高用戶的感覺或者快速地提供用戶所需的信息。
[0211] 將參照圖7B描述基于用戶的感覺數據自動存儲特定信息的控制方法。在移動終 端100輸出第五特定信息650的同時,控制器180可生成用戶的感覺數據。例如,第五特定 信息650可對應于隨時間推移而變化的視頻文件的再現畫面。
[0212] 當在輸出第五特定信息650的同時生成的感覺數據與預設的特定感覺數據相同 時,控制器180可控制存儲器160將第五特定信息650成像并且存儲它。例如,控制器180 可控制存儲器160在感覺數據與預設的特定感覺數據相同時對顯示單元151上的畫面信息 進行成像(或拍攝)。
[0213] 更詳細地,隨時間推移而移動的視頻文件的再現畫面可包括根據再現畫面而變化 的用戶感覺,用戶可在他或她觀看再現畫面的同時在沒有控制命令的情況下存儲第五特定 信息650的圖像。然而,本發(fā)明不限于此并且控制器180可控制移動終端來記錄第五特定 信息650的視頻、記錄再現的聽覺數據等。
[0214] 參照圖7B的(c),控制器180可控制存儲器160將第五特定信息650的圖像存儲 在圖冊應用的存儲空間中。即,控制器180可控制顯示單元151 (和揚聲器)將第五特定信 息的部分圖像850 (或記錄的視頻和聽覺數據)輸出到圖冊應用的執(zhí)行畫面。
[0215] 將參照圖7C描述根據另一個實施方式的將第五特定信息651的一部分存儲在移 動終端100中的控制方法。根據本實施方式的移動終端100' a對應于可配戴在用戶面部上 的可穿戴眼鏡。根據本實施方式的移動終端100'a還可包括相機,該相機被形成為在與用 戶眼睛的方向相同的方向上將周圍環(huán)境成像。
[0216] 另外,測量裝置900可被安裝在移動終端100' a中??赏ㄟ^移動終端100' a為用 戶提供通過外部圖像顯示裝置100' b輸出的第五特定信息651。第五特定信息651可被移 動終端100' a變型并且被提供給用戶。
[0217] 在從圖像顯示裝置100'b提供圖像(包括視頻)時,控制器180可通過測量裝置 900接收用戶的身體狀況信息并且生成感覺數據。然而,測量裝置900可被安裝在配戴在用 戶面部的移動終端1〇〇' a中。例如,測量裝置900可設置在移動終端100' a的區(qū)域中。
[0218] 當感覺數據與預設的感覺數據相同時,控制器180可控制安裝在移動終端100'a 中的相機得到從圖像顯示裝置100' b輸出的圖像。同時,當通過移動終端100' a變型并且 提供第五特定信息651時,控制器180可控制動終端100' a來存儲經變型的特定信息的一 部分。也就是說,在沒有用戶的控制命令的情況下,可存儲從外部提供的特定信息。
[0219] 現在,將參照圖7D描述提供搜索特定信息中包括的數據的結果的控制方法。參照 圖7D的(a),在第五特定信息652輸出到顯示單元151的同時,控制器180接收用戶的身體 狀況信息??刂破?80根據身體狀況信息生成感覺數據。控制器180可控制存儲器160來 基于感覺數據存儲第五特定信息652??刂破?80還可控制存儲器160來暫時存儲第五特 定信息652。
[0220] 另外,控制器180可通過使用存儲器160中存儲的第五特定信息652來執(zhí)行另外 的功能。例如,控制器180可搜索第五特定信息652中包括的數據并且將搜索結果提供給 用戶。例如,在提供第五特定信息652的同時,控制器180可通過用戶到麥克風122的語音 輸入731從數據中選擇待搜索數據。
[0221] 參照圖7D的(a),控制器180可分析用戶的語音731 (例如,呼喊等,對著左邊笑) 而非控制命令,從第一特定信息652之中選擇待搜索數據??刂破骺奢敵鰧⒋鎯Φ谖逄囟?信息521的一部分并且將執(zhí)行另外的功能的通知。例如,控制器180可控制輸出單元150 來輸出閃亮或輸出短通知聲音,如圖7D的(b)中所示。
[0222] 當終止輸出第五特定信息652時,控制器180可控制顯示單元151來輸出對應于 搜索結果的第四附加內容852。在輸出第五特定信息652的同時,控制器180可輸出與第五 特定信息652重疊的彈出窗口,控制顯示單元151在彈出窗口中顯示搜索結果,如圖7D的 (c)中所示。
[0223] 接下來,圖8A和圖8B是示出用于將用戶的感覺數據作為內容輸出的控制方法的 概念圖。將參照圖8A描述將用戶的感覺數據作為文本輸出的控制方法??刂破?80生成 接收到第五特定信息653的用戶的感覺數據。
[0224] 控制器180可基于來自用戶的共享第五特定信息653或者將它上傳到網站的控制 命令控制顯示單元151和無線通信單元110以共享第五特定信息653。控制器180可在提 供第五特定信息653的同時將感覺數據生成為內容,控制顯示單元151將第五特定信息653 和感覺數據853a作為內容一起上傳,并且輸出它們。
[0225] 例如,控制器180可控制顯示單元151來輸出基于感覺數據描述用戶情緒狀態(tài)的 文本或輸出描述通過相機121感測到的用戶行為的文本。另外,控制器可控制顯示單元151 來輸出與各感覺數據對應并且被存儲在存儲器中的文本或圖像。參照圖8A的(c),控制器 180可控制顯示單元151將通過麥克風122輸入的用戶語音變成文本并且將它與第五特定 信息652 -起輸出。
[0226] 將參照圖8B描述通過使用感覺數據生成評價信息的控制方法。參照圖8B,圖8B 的(a)示出用戶執(zhí)行的應用的執(zhí)行畫面654。在移動終端執(zhí)行游戲應用的同時,控制器180 從測量裝置900接收身體狀況信息。
[0227] 控制器180可通過使用身體狀況信息生成感覺數據,并且將感覺數據附于游戲應 用。即,控制器180可將用戶的感覺數據附于關于安裝在移動終端中的應用的信息并且存 儲它。
[0228] 控制器180可通過使用感覺數據生成評價應用的信息作為第四附加內容854a。例 如,控制器180可在沒有控制命令的情況下將應用評價信息上傳到網絡。另外,當根據來自 用戶的控制命令輸出應用信息時,控制器180可控制顯示單元151將第四附加內容854a - 起輸出。另外,用戶在過去對它的感覺的喜好可與應用信息一起自動地提供。
[0229] 同時,參照圖8B的(c),當從測量裝置900接收用戶的身體狀況信息時,控制器 180可控制顯示單元151來推薦附有與身體狀況信息相關的感覺數據的應用。
[0230] 這里,與接收到的身體狀況信息相關的感覺數據可對應于與身體狀況信息中包括 的用戶感覺相反的數據。例如,當基于接收到的身體狀況信息識別的用戶感覺是負面感覺 時,控制器180可控制顯示單元151來輸出圖標854b,圖標854b接收被施加的觸摸輸入以 執(zhí)行附有愉快的用戶感覺數據的應用。
[0231] 當在移動終端打開時從測量裝置900接收身體狀況信息時,控制器180可推薦應 用等。例如,控制器180可控制顯示單元151將推薦的應用的圖標854b輸出到處于沒有執(zhí) 行應用的閑置狀態(tài)下的基礎主頁畫面510。
[0232] 同時,控制器180推薦和輸出的信息不限于應用的圖標854b并且可對應于附有特 定感覺數據的內容(例如,文本、媒體文件、圖像等)。因此,可在沒有控制命令的情況下為 用戶自動地提供有助于用戶感覺的應用等,并且用戶使用根據用戶選擇而提供的應用等。
[0233] 接下來,圖9A至圖9C是示出用于基于各種源提供的特定信息輸出內容的方法的 概念圖。將描述基于從移動終端外部提供的特定信息輸出內容的控制方法。
[0234] 在圖9A中,(a)是示出從移動終端外部提供到用戶的音樂的概念圖。當從測量裝 置900接收到用戶的身體狀況信息時,控制器180可啟動麥克風122和相機121中的至少 一個,用于得到從外部提供的第六特定信息660。
[0235] 控制器180可啟動麥克風122以接收聽到的信號(音樂聲音)作為提供給用戶的 第六特定信息,并且接收聽覺信號。在接收聽覺信號的同時,控制器180可分析從測量裝置 900接收的身體狀況信息并且生成感覺數據,控制存儲器160將感覺數據附于第六特定信 息660并且存儲它。
[0236] 另外,控制器180可搜索接收到的第六特定信息660,以收集與第六特定信息660 相關的數據??刂破?80控制顯示單元151輸出與第六特定信息660相關的第六相關內容 860。相關的第六相關內容860可對應于存儲在存儲器160中的數據或通過使用第六特定 信息搜索到的數據。
[0237] 參照圖9A的(b),用戶的感覺數據被附于第六特定信息660 (音樂聲音),控制器 180可控制顯示單元151輸出基于第六特定信息660搜索到的第六相關內容860。第六相 關內容860可被輸出到輸出音樂的應用的執(zhí)行畫面。例如,第六相關內容860可包括用于 接收用戶的觸摸輸入以再現和下載音樂、音樂的名字和歌詞等的圖標。
[0238] 因此,移動終端100可自動地收集當用戶的感覺變化時以及當通過移動終端提供 特定信息時從外部提供的特定信息。另外,由于從外部提供的特定信息和用戶的感覺數據 被一起存儲和提供,因此可在沒有控制命令的情況下為用戶提供無意識傳遞的信息。
[0239] 圖9B是示出基于用戶的感覺數據在移動終端的通話模式下收集特定信息并且提 供相關內容的控制方法的視圖。參照圖9B的(a)和(b),控制器180在移動終端的通話模 式下從測量裝置900接收身體狀況信息,并且通過使用身體狀況信息生成感覺數據。
[0240] 當在通話模式下生成的感覺數據匹配預設的參考感覺數據時,控制器180可控制 存儲器160來記錄在通話模式下發(fā)送和接收的語音。當通話模式終止時,控制器180可控 制顯示單元151來輸出指示通話模式下的語音已經被記錄在存儲器160中的第七相關內容 870a〇
[0241] 例如,當觸摸輸入被施加到第七相關內容870a時,控制器180可控制揚聲器來輸 出所記錄的語音。另外,控制器180可控制存儲器160將感覺數據附于語音并且將它們一 起存儲。同時,當通話模式下生成的感覺數據匹配預設的參考感覺數據時,控制器180控制 存儲器160將感覺數據附于所連接的外部終端的電話號碼并且存儲它們。
[0242] 另外,控制器180可控制存儲器160來存儲附有感覺數據的外部終端的電話號碼 作為垃圾號碼。因此,控制器180可控制無線通信單元110切斷從附有感覺數據的電話號 碼接收的任何通信。
[0243] S卩,在通話終止之后,控制器180可控制顯示單元151來輸出確認是否要切斷與外 部終端的通信的第七相關內容870b。另外,第七相關內容870b可包括(共享)接收共享附 有用戶感覺數據的外部終端的信息的觸摸輸入的圖標。
[0244] 控制器180可分析通過移動終端的麥克風122接收的用戶語音和通過揚聲器153 輸出的對方的語音以及從測量裝置900接收的身體狀況信息,以生成感覺數據。因此,在終 止通話之后,用戶可識別他或她在通話模式下的情緒狀態(tài)并且查看電話對話的內容。另外, 當用戶具有在沒有控制命令的情況下的預設感覺時,可切斷與對應的對方的外部終端的電 話號碼的通話。
[0245] 因此,即使在用戶打電話的同時不能控制移動終端的情形下,也可以存儲電話對 話并且可在必要時為用戶提供電話對話。
[0246] 將參照圖9C描述使用關于移動終端位置的信息提供根據用戶感覺數據的內容的 控制方法。在圖9C中,(a)示出用戶在特定位置671進食的情形。參照圖9C的(b),當在 用戶處于特定位置671的同時從測量裝置900接收身體狀況信息時,控制器180可控制感 測單元(例如,GPS)來搜索特定位置671。
[0247] 控制器180可控制顯示單元151來輸出特定位置671的地圖信息671'。控制器 180可控制顯示單元151將感覺數據附于地圖信息671',控制顯示單元151來基于感覺數 據和地圖信息671'輸出第七相關內容。
[0248] 參照圖9C的(c),第七相關內容871可包括用于接收將基于當前感覺情形的感覺 數據附于地圖信息并且存儲它們的觸摸輸入的圖標(被添加到黑名單)、(共享)接收用于 共享附有感覺數據的地圖信息的觸摸輸入的圖標等??刂破?80可控制顯示單元151將第 七相關內容輸出到地圖信息671'。
[0249] S卩,用戶可將他或她的感覺數據附于他或她在室外從事特定事項的地點,存儲并 且共享關于附有感覺數據的地點的信息。
[0250] 接下來,圖10A至圖10C是示出通過使用用戶的感覺數據和外部終端的感覺數據 向用戶提供包括關于外部終端的信息的內容的控制方法的概念圖。將參照圖10A描述用于 基于用戶感覺數據推薦各種應用的控制方法。
[0251] 參照圖10A的(a),控制器180基于從測量裝置900接收的身體狀況信息生成用 戶的感覺數據??刂破?80控制顯示單元151來輸出指示移動終端的人工智能型代理520 的圖像520。例如,代理520通過使用用戶的語音識別或輸入文本接收用戶的命令并且執(zhí)行 對應的功能,顯示單元輸出指示預設功能已經在沒有控制命令的情況下一起自動執(zhí)行的信 肩、。
[0252] 控制器180控制顯示單元151來輸出指示生成的用戶感覺數據的第八相關內容 800。另外,控制器180可控制顯示單元151來輸出與感覺數據相關的第五附加內容881。 例如,第四附加內容881可包括執(zhí)行圖標881 a,執(zhí)行圖標881 a用于接收被施加以執(zhí)行所推 薦應用的觸摸。例如,當第八相關內容的感覺數據是負面感覺數據時,控制器180可提供附 有正面感覺數據的應用作為第四附加內容881。
[0253] 另外,第四附加內容881可包括呼叫圖標881b,呼叫圖標881b用于接收向外部終 端發(fā)送呼叫的觸摸輸入。控制器180可推薦用戶應當與附有正面感覺數據的對方的外部終 端通話。
[0254] 因此,當移動終端打開時,控制器180可根據用戶的感覺自動地提供所推薦內容。 因此,用戶可根據他或她的感覺而被提供所需信息,可被快速提供所需應用,可通過操縱移 動終端控制他或她的感覺。
[0255] 將參照圖10B描述接收對方的感覺數據并且將它提供給用戶的控制方法??刂破?180控制顯示單元151來輸出指示用戶感覺數據的第八相關內容880。第八相關內容880 可包括反映用戶感覺數據的面部圖像、照片等。
[0256] 另外,控制器180控制無線通信單元110從外部終端接收可用于進行無線通信的 外部終端的用戶感覺數據??刂破?80提取發(fā)送從外部終端接收的多個感覺數據中的與移 動終端的第八相關內容880對應的感覺數據的外部終端。
[0257] 另外,控制器180控制顯示單元151來輸出第四附加內容882,第四附加內容882 包括關于所提取的外部終端的信息。第四附加內容882可包括接收用于向外部終端發(fā)送呼 叫的觸摸輸入的圖形圖像、關于外部終端的信息(電話號碼、代表名字、圖像等)、基于從外 部終端接收的感覺數據的圖像等。另外,可為用戶提供關于具有與他或她的感覺近似的感 覺的用戶的信息,用戶可與外部終端的這些用戶執(zhí)行通話通信。
[0258] 同時,參照圖10B的(c),控制器180可控制無線通信單元,以接收所提取外部終端 的位置數據或追蹤所提取外部終端的位置??刂破?80可控制顯示單元151來輸出包括外 部終端位置的第六附加內容883。第六附加內容883可包括地圖圖像。
[0259] 因此,可為用戶提供關于具有與用戶感覺近似的感覺的外部終端的用戶和外部終 端位置的信息,因此,用戶可選擇性與用戶進行電話通話。
[0260] 參照圖10C,控制器180可通過使用移動終端的位置信息和外部終端的位置信息 來搜索至少一個地點。例如,控制器180可搜索位于外部終端和移動終端100之間的飯店 并且將關于該地點的信息提供給用戶。
[0261] 另外,控制器180可基于關于地點的信息和外部終端的位置信息控制顯示單元 151來輸出將被發(fā)送到外部終端的文本?;谟脩舭l(fā)送文本的觸摸輸入,控制器180可基于 用戶用于發(fā)送文本的觸摸輸入控制無線通信單元110將文本和地圖圖像發(fā)送到外部終端。
[0262] 因此,用戶可容易地與具有近似感覺的用戶執(zhí)行通話通信。即,移動終端100的人 工智能代理可基于接收到的用戶身體狀況信息自動地提供將幫助用戶的信息。
[0263] 如上所述的根據本發(fā)明的實施方式的移動終端在其構造和方法應用方面不受限 制,但這些實施方式的整體或以部分可被選擇性組合,以被構造成各種修改形式。
[0264] 因為示例性實施方式可在不脫離其特性的情況下用許多形式來實現,所以除非另 外指明,否則上述實施方式不受以上描述中的任何細節(jié)限制,而是應該在所附權利要求書 限定的其范圍內進行廣義理解。因此,落入權利要求書范圍或此范圍的等同物內的各種變 化和修改旨在被所附權利要求書涵蓋。
【權利要求】
1. 一種移動終端,所述移動終端包括: 輸出單元,其被構造成輸出信息; 接收裝置,其被構造成從外部裝置接收信息; 控制器,其被構造成: 在所述接收裝置正在接收特定信息或所述輸出單元正在輸出特定信息的同時,接收關 于用戶的身體狀況的身體狀況信息, 分析所述身體狀況信息并且基于所述身體狀況信息估計用戶的情緒狀態(tài), 生成指示估計的所述用戶的情緒狀態(tài)的附著信息, 將生成的所述附著信息與對應于所述特定信息的數據一起存儲, 輸出生成的所述附著信息和對應于所述特定信息的數據。
2. 根據權利要求1所述的移動終端,其中所述身體狀況信息對應于在所述接收裝置正 在接收所述特定信息或者所述輸出單元正在輸出所述特定信息的同時關于所述用戶的心 跳的信息, 其中所述控制器還被構造成通過分析心跳信息中包括的模式來估計所述用戶的情緒 狀態(tài)。
3. 根據權利要求2所述的移動終端,所述移動終端還包括: 終端機體,其被構造成附接于所述用戶的一部位并且包括: 測量裝置,其安裝在所述終端機體中并且具有被構造成與所述用戶的皮膚接觸的至少 一個表面; 發(fā)送裝置,其被構造成將所述心跳信息發(fā)送到接收單元。
4. 根據權利要求3所述的移動終端,其中所述終端機體與所述移動終端分開或者與所 述移動終端是一體的。
5. 根據權利要求1所述的移動終端,其中所述輸出單元包括被構造成顯示所述特定信 息的顯示單元, 其中接收到的所述身體狀況信息指示查看所述特定信息的所述用戶的身體狀況。
6. 根據權利要求5所述的移動終端,其中所述特定信息包括網頁信息, 其中,生成的所述附著信息包括與所述網頁信息相關并且基于估計的所述用戶的情緒 狀態(tài)的相關內容。
7. 根據權利要求1所述的移動終端,其中所述外部裝置將所述特定信息輸出為視頻數 據和音頻數據中的至少一種, 其中接收到的所述身體狀況信息指示查看或收聽所述特定信息的所述用戶的身體狀 況。
8. 根據權利要求7所述的移動終端,其中對應于所述特定信息的數據對應于網頁信 息, 其中生成的所述附著信息包括與所述外部裝置上輸出的所述特定信息相關并且基于 估計的所述用戶的情緒狀態(tài)的相關內容。
9. 根據權利要求1所述的移動終端,其中所述控制器還被構造成: 顯示用于指示所述用戶的情緒狀態(tài)的可滑動情緒狀態(tài)圖標, 按照所述可滑動情緒狀態(tài)圖標的滑動來分類和顯示內容條目。
10. 根據權利要求1所述的移動終端,其中所述特定信息包括至少一個多媒體數據, 其中所述數據對應于所述至少一個多媒體數據并且生成的所述附著信息對應于表示 估計的所述用戶的情緒狀態(tài)的情緒。
11. 根據權利要求10所述的移動終端,其中所述控制器還被構造成在接收到用戶輸入 請求時顯示具有類似的估計的情緒狀態(tài)的多個其它多媒體數據。
12. 根據權利要求10所述的移動終端,其中所述身體狀況信息對應于接收到的所述用 戶的語音,并且基于接收到的所述用戶的語音估計所述用戶的情緒狀態(tài)。
13. 根據權利要求1所述的移動終端,其中所述特定信息包括視頻數據, 其中所述控制器還被構造成當估計的所述用戶的情緒狀態(tài)匹配預定的情緒狀態(tài)時捕 獲所述視頻數據中包括的至少一個圖像。
14. 根據權利要求1所述的移動終端,其中生成的所述附著信息包括表示估計的所述 用戶的情緒狀態(tài)的文本和指示對所述接收裝置接收的或者所述輸出單元輸出的所述特定 信息的評價的評價信息中的一種。
15. 根據權利要求1所述的移動終端,其中所述特定信息對應于正在播放的音樂或通 話模式下的語音信息中的一種。
16. -種控制移動終端的方法,所述方法包括以下步驟: 在接收裝置正在接收特定信息或輸出單元正在輸出特定信息的同時,經由所述移動終 端的控制器接收關于用戶的身體狀況的身體狀況信息; 經由所述控制器分析所述身體狀況信息并且基于所述身體狀況信息估計所述用戶的 情緒狀態(tài); 經由所述控制器生成指示估計的所述用戶的情緒狀態(tài)的附著信息; 經由與所述移動終端關聯的存儲器,將生成的所述附著信息與對應于所述特定信息的 數據一起存儲; 經由所述輸出單元輸出生成的所述附著信息和對應于所述特定信息的數據。
17. 根據權利要求16所述的方法,其中所述身體狀況信息對應于在所述接收裝置正在 接收所述特定信息或者所述輸出單元正在輸出所述特定信息的同時關于所述用戶的心跳 的信息, 其中估計步驟通過分析心跳信息中包括的模式來估計所述用戶的情緒狀態(tài)。
18. 根據權利要求17所述的方法,所述方法還包括: 經由安裝在被構造成附接于所述用戶的一部位的終端機體中的測量裝置進行測量,所 述測量裝置被安裝在所述終端機體中并且具有被構造成與所述用戶的皮膚接觸的至少一 個表面; 經由發(fā)送裝置將所述心跳信息發(fā)送到接收單元。
19. 根據權利要求18所述的方法,其中所述終端機體與所述移動終端分開或者與所述 移動終端是一體的。
20. 根據權利要求16所述的方法,其中所述輸出單元包括被構造成顯示所述特定信息 的顯示單元, 其中接收到的所述身體狀況信息指示查看所述特定信息的所述用戶的身體狀況。
【文檔編號】H04M1/725GK104284014SQ201410323524
【公開日】2015年1月14日 申請日期:2014年7月8日 優(yōu)先權日:2013年7月9日
【發(fā)明者】林國贊, 徐慧元, 金宣希, 尹汝明, 陰惠珍, 樸荷娜 申請人:Lg電子株式會社