信息處理設備、電子裝置、信息處理方法和程序的制作方法
【專利摘要】提供了一種信息處理設備、電子裝置、信息處理方法和程序，該信息處理設備包括：數(shù)據庫更新單元，用于更新活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測用戶的活動模式；文本信息獲取單元，用于獲取所述用戶在裝置中輸入的文本信息；以及文本信息分析單元，用于從所述文本信息獲取與活動模式有關的信息。在從所述文本信息獲取到與活動模式有關的信息的情況下，所述數(shù)據庫更新單元使用從所述文本信息獲取的與活動模式有關的信息來更新所述活動模式數(shù)據庫。
【專利說明】信息處理設備、電子裝置、信息處理方法和程序
【技術領域】
[0001]本公開涉及一種信息處理設備、電子裝置、信息處理方法和程序。
【背景技術】
[0002]用于在諸如移動電話的移動終端上安裝運動傳感器并且自動地檢測和記錄使用活動歷史的技術被關注。例如，以下日本專利公開2008-003655公開了一種使用諸如加速度傳感器和陀螺儀傳感器的運動傳感器并且檢測走路操作、奔跑操作、右轉和左轉操作以及靜止狀態(tài)的技術。專利文獻公開了如下方法:該方法根據運動傳感器的輸出數(shù)據計算走路步調、走路功率和旋轉角度，并且使用計算結果來檢測走路操作、奔跑操作、右轉和左轉操作以及靜止狀態(tài)。
[0003]此外，專利文獻公開了如下方法:該方法通過利用操作和狀態(tài)模式(諸如這些操作和狀態(tài)的類型、操作和狀態(tài)持續(xù)的時間段以及操作的數(shù)量)的輸入進行統(tǒng)計處理來檢測用戶的活動模式。通過使用上述方法，可以獲取諸如“漫步”和“無休息操作”的活動模式作為時間序列數(shù)據。然而，該方法中所獲取的活動模式主要表示在相對短的時間段中執(zhí)行的用戶操作和狀態(tài)。因此，難以根據活動模式歷史來估計具體活動內容，諸如“我今天在百貨商店購物”和“我昨天在旅館飯店吃飯”。
[0004]使用在以下日本專利公開2008-003655中公開的方法來獲取的活動模式表示在相對短的時間段中執(zhí)行的活動的累積。另外，構成活動模式的各個活動本身不是用戶有意地執(zhí)行的。相較之下，具體活動內容是在大部分情況下用戶有意地執(zhí)行的并且是娛樂性高的，其在相對長的時間段中被執(zhí)行。因此，難以根據在短時間段期間執(zhí)行的活動的累積來估計以上具體活動內容。然而，近來，開發(fā)了如下的技術:該技術根據使用運動傳感器獲取的相對短時間段中的活動模式來檢測在相對長時間段中執(zhí)行的娛樂性高的活動模式(參見以下日本專利公開2011-081431)。
【發(fā)明內容】
[0005]當應用以上日本專利公開2011-081431中公開的技術時，可以檢測用戶采取的活動模式。然而，使用從位置傳感器或運動傳感器獲取的信息來執(zhí)行檢測處理，因此存在活動模式估計準確性不足的情況。更具體地，從各個用戶的運動傳感器獲取的信息存在差別。例如，檢測結果取決于攜帶狀態(tài)(諸如安裝運動傳感器的裝置被放在口袋中攜帶的狀態(tài)以及該裝置被放在包中攜帶的情況)而變化，因此估計結果會變化。因此，需要開發(fā)一種使用除了位置傳感器或運動傳感器的信息以外的信息來增強活動模式估計準確性的技術。
[0006]因此，鑒于以上情況而設計了本公開，并且本公開旨在提供一種新的、改進的信息處理設備、電子裝置、信息處理方法和程序，該信息處理設備、電子裝置、信息處理方法和程序可以改進活動模式估計準確性。
[0007]根據本公開的實施例，提供了一種信息處理設備，其包括:數(shù)據庫更新單元，用于更新活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測用戶的活動模式；文本信息獲取單元，用于獲取所述用戶在裝置中輸入的文本信息；以及文本信息分析單元，用于從所述文本信息獲取與活動模式有關的信息。在從所述文本信息獲取到與活動模式有關的信息的情況下，所述數(shù)據庫更新單元使用從所述文本信息獲取的與活動模式有關的信息來更新所述活動模式數(shù)據庫。
[0008]根據本公開的另一實施例，提供了一種電子裝置，其包括:通信單元，用于在從用戶在所述電子裝置中輸入的文本信息獲取到與活動模式有關的信息的情況下訪問活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測所述用戶的活動模式，所述活動模式數(shù)據庫是使用所獲取的信息而更新的；以及活動模式信息獲取單元，用于從所述活動模式數(shù)據庫獲取與所述傳感器檢測結果和所述文本信息對應的與活動模式有關的信息。
[0009]根據本公開的另一實施例，提供了一種信息處理方法，其包括:更新活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測用戶的活動模式。在從所述用戶在裝置中輸入的文本信息獲取到與活動模式有關的信息的情況下，使用所獲取的信息來更新所述活動模式數(shù)據庫。
[0010]根據本公開的另一實施例，提供了一種信息處理方法，包括:在從用戶在電子裝置中輸入的文本信息獲取到與活動模式有關的信息的情況下，訪問活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測所述用戶的活動模式，所述活動模式數(shù)據庫是使用所獲取的信息而更新的；以及從所述活動模式數(shù)據庫獲取與所述傳感器檢測結果和所述文本信息對應的與活動模式有關的信息。
[0011]根據本公開的另一實施例，提供了一種用于使得計算機實現(xiàn)以下功能的程序:數(shù)據庫更新功能，用于更新活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測用戶的活動模式；文本信息獲取功能，用于獲取所述用戶在裝置中輸入的文本信息；以及文本信息分析功能，用于從所述文本信息獲取與活動模式有關的信息。在從所述文本信息獲取到與活動模式有關的信息的情況下，所述數(shù)據庫更新功能使用從所述文本信息獲取的與活動模式有關的信息來更新所述活動模式數(shù)據庫。
[0012]根據本公開的另一實施例，提供了一種用于使得計算機實現(xiàn)以下功能的程序:通信功能，用于在從用戶在電子裝置中輸入的文本信息獲取到與活動模式有關的信息的情況下訪問活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測所述用戶的活動模式，所述活動模式數(shù)據庫是使用所獲取的信息而更新的；以及活動模式信息獲取功能，用于從所述活動模式數(shù)據庫獲取與所述傳感器的檢測結果和所述文本信息對應的與活動模式有關的信息。
[0013]另外，根據本公開的另一實施例，提供了一種記錄以上程序的計算機可讀存儲介質。
[0014]根據上述本公開的實施例，可以改進活動模式估計準確性。
【專利附圖】
【附圖說明】
[0015]圖1是用于說明活動/情形分析系統(tǒng)的配置示例的說明圖；
[0016]圖2是用于說明動作/狀態(tài)識別單元的功能的說明圖；
[0017]圖3是用于說明動作/狀態(tài)識別單元的功能的說明圖；[0018]圖4是用于說明GIS信息獲取單元的功能的說明圖；
[0019]圖5是用于說明GIS信息獲取單元的功能的說明圖；
[0020]圖6是用于說明GIS信息獲取單元的功能的說明圖；
[0021]圖7是用于說明GIS信息獲取單元的功能的說明圖；
[0022]圖8是用于說明活動/情形識別單元的功能的說明圖；
[0023]圖9是用于說明活動/情形識別單元的功能的說明圖；
[0024]圖10是用于說明活動/情形模式判定方法的說明圖；
[0025]圖11是用于說明使用地理直方圖的得分分布的計算方法的說明圖；
[0026]圖12是用于說明使用機器學習的得分分布的計算方法的說明圖；
[0027]圖13是用于說明所檢測的活動/情形模式的示例的說明圖；
[0028]圖14是用于說明根據本公開的實施例的活動/情形識別系統(tǒng)的配置示例的說明圖；
[0029]圖15是用于說明根據實施例的活動/情形識別系統(tǒng)的詳細配置的說明圖；
[0030]圖16是用于說明根據實施例的活動/情形識別系統(tǒng)的操作的說明圖；
[0031]圖17是用于說明根據實施例的活動/情形識別系統(tǒng)的操作的說明圖；
[0032]圖18是用于說明根據實施例的替選示例的活動/情形識別系統(tǒng)的詳細配置的說明圖；
[0033]圖19是用于說明根據實施例的替選示例的活動/情形識別系統(tǒng)的操作的說明圖；
[0034]圖20是用于說明根據實施例的替選示例的活動/情形識別系統(tǒng)的操作的說明圖；
[0035]圖21是用于說明根據實施例的替選示例的活動/情形識別系統(tǒng)的操作的說明圖；
[0036]圖22是用于說明根據實施例的替選示例的活動/情形識別系統(tǒng)的操作的說明圖；
[0037]圖23是用于說明根據本公開的使用活動模式識別結果的應用的屏幕配置示例的說明圖；以及
[0038]圖24是用于說明可以實現(xiàn)根據實施例的系統(tǒng)和各個裝置的功能的硬件配置示例的說明圖。
【具體實施方式】
[0039]在下文中，將參照附圖詳細描述本公開的優(yōu)選實施例。注意，在本說明書和附圖中，具有基本上相同的功能和結構的結構元件以相同的附圖標記來表示，并且省略對這些結構元件的重復說明。
[0040][關于說明的流程]
[0041]這里，簡要描述本文中公開的說明的流程。首先，參照圖1至圖13，說明與本實施例的技術有關的活動模式識別技術。接下來，參照圖14和圖15，說明根據本公開的實施例的活動/情形識別系統(tǒng)的配置。接下來，參照圖16和圖17，說明根據本實施例的活動/情形識別系統(tǒng)的操作。[0042]接下來，參照圖18，說明根據實施例的替選示例的活動/情形識別系統(tǒng)的配置。接下來，參照圖19至圖22，說明根據實施例的替選示例的活動/情形識別系統(tǒng)的操作。接下來，參照圖23，說明根據實施例的使用活動模式識別結果的應用的屏幕配置示例。接下來，參照圖24，說明可以實現(xiàn)根據實施例的系統(tǒng)和各個裝置的功能的硬件配置示例。
[0043]最后，總結根據實施例的技術思想，并且簡要說明從這些技術思想獲得的操作效果O
[0044](說明項)
[0045]1:介紹
[0046]1-1:活動模式識別技術
[0047]1-2:實施例的概況
[0048]1-2-1:使用文本信息對模式DB的更新
[0049]1-2-2:使用環(huán)境聲音對模式DB的更新
[0050]2:實施例的細節(jié)
[0051]2-1:系統(tǒng)配置的示例
[0052]2-2:使用文本信息和聲學信息(acoustic information)對模式DB的更新
[0053]2-2-1:功能配置
[0054]2-2-2:處理的流程
[0055]2-3:(替選示例)聲音識別技術的應用
[0056]2-3-1:功能配置
[0057]2-3-2:處理的流程
[0058]2-4:屏幕顯示的示例(應用的一個示例)
[0059]3:硬件配置示例
[0060]4:總結
[0061]〈1:介紹〉
[0062]首先，說明與本實施例的技術有關的活動模式識別技術。
[0063][1-1:活動模式識別技術]
[0064]本文中說明的活動模式識別技術涉及如下技術:該技術使用由運動傳感器等檢測的與用戶活動和狀態(tài)有關的信息以及由位置傳感器等檢測的位置信息來檢測用戶的活動和狀態(tài)。
[0065]另外，作為運動傳感器，例如，使用三軸加速度傳感器(包括加速度傳感器、重力檢測傳感器和下降檢測傳感器)和三軸陀螺儀傳感器(包括角速度傳感器、穩(wěn)定性傳感器和地磁傳感器)。另外，例如，可以使用作為位置傳感器的GPS (全球定位系統(tǒng))、RFID (射頻識別)、W1-Fi接入點或無線基站的信息。通過使用它們的信息，例如，可以檢測當前位置的緯度和經度。
[0066](活動/情形分析系統(tǒng)11的系統(tǒng)配置)
[0067]首先，參照圖1，對可以實現(xiàn)如上所述的活動模式識別技術的活動/情形分析系統(tǒng)11的系統(tǒng)配置給出說明。圖1是用于說明活動/情形分析系統(tǒng)11的整個系統(tǒng)配置的說明圖。
[0068]這里，在本說明書中，表述“動作/狀態(tài)”和表述“活動/情形”通過以下含義而區(qū)分。表述“動作/狀態(tài)”表示用戶在大約幾秒到幾分鐘的相對短時間段中執(zhí)行的活動，并且表示諸如“走路”、“奔跑”、“跳躍”和“靜止”的行為。另外，該行為可被共同地表述為“動作/狀態(tài)模式”或“LC (低情境，Low-Context)活動”。同時，表述“活動/情形”表示用戶在比“動作/狀態(tài)”的情況長的時間段中執(zhí)行的生活行動，并且表示諸如“吃飯”、“購物”和“工作”的行為。另外，該行為可被共同地表述為“活動/情形模式”或“HC (高情境，High-Context)活動”。
[0069]如圖1所示，活動/情形分析系統(tǒng)11主要包括運動傳感器111、動作/狀態(tài)識別單元112、時間信息獲取單元113、位置傳感器114、GIS信息獲取單元115和活動/情形識別單元116。
[0070]另外，活動/情形分析系統(tǒng)11可包括使用由活動/情形識別單元116檢測的活動/情形模式的應用AP或服務SV。另外，活動/情形分析系統(tǒng)11可被形成為使得用戶簡檔信息以及應用AP的活動/情形模式使用結果被輸入到活動/情形識別單元116中。
[0071]首先，當用戶活動時，運動傳感器111檢測圍繞重力軸的旋轉或加速度的改變(下文中稱為“傳感器數(shù)據”)。運動傳感器111檢測的傳感器數(shù)據被輸入到如圖2所示的動作/狀態(tài)識別單元112中。
[0072]當輸入了傳感器數(shù)據時，如圖2所示，動作/狀態(tài)識別單元112使用所輸入的傳感器數(shù)據檢測動作/狀態(tài)模式。如圖3所示，動作/狀態(tài)識別單元112可以檢測的動作/狀態(tài)模式的示例包括“走路”、“奔跑”、“靜止”、“跳躍”、“火車(搭乘/未搭乘)”和“電梯(搭乘/未搭乘/上升/下降)”。動作/狀態(tài)識別單元112檢測的動作/狀態(tài)模式被輸入到活動/情形識別單元116中。
[0073]位置傳感器114連續(xù)地或間歇地獲取表示用戶的位置(下文中稱為“當前位置”)的位置信息。例如，當前位置的位置信息由緯度和經度來表示。位置傳感器114獲取的當前位置的位置信息被輸入到GIS信息獲取單元115中。
[0074]當輸入了當前位置的位置信息時，GIS信息獲取單元115獲取GIS (地理信息系統(tǒng))信息。隨后，如圖4所示，GIS信息獲取單元115使用所獲取的GIS信息檢測當前位置的屬性。例如，GIS信息包括地圖信息以及通過人造衛(wèi)星或現(xiàn)場勘查獲取的各種信息，其是用于科學研究、土地、設施或道路的管理以及城市設計的信息。當使用GIS信息時，可以判定當前位置的屬性。例如，GIS信息獲取單元115使用稱為“地理類別代碼”(例如，參見圖5)的標識信息來表示當前位置的屬性。
[0075]如圖5所示，地理類別代碼表示用于對與地點有關的信息的類型進行分類的分類代碼。該地理類別代碼是取決于例如建筑類型、地形形狀、地質特征、地區(qū)等而設置的。因此，通過指定當前位置的地理類別代碼，可以在一定程度上識別用戶所處的環(huán)境。
[0076]GIS信息獲取單元115參考所獲取的GIS信息,指定當前位置和當前位置周圍的建筑等，并且提取與該建筑等對應的地理類別代碼。GIS信息獲取單元115所選擇的地理類別代碼被輸入到活動/情形識別單元116中。另外，在當前位置周圍存在很多建筑等的情況下，GIS信息獲取單元115可提取每個建筑的地理類別代碼，并且將諸如圖6和圖7所示的地理直方圖的信息作為與所提取的地理類別有關的信息輸入到活動/情形識別單元116中。
[0077]如圖8所示,活動/情形識別單元116接收來自動作/狀態(tài)識別單元112的動作/狀態(tài)模式的輸入和來自GIS信息獲取單元115的地理類別代碼的輸入。另外，活動/情形識別單元116接收來自時間信息獲取單元113的時間信息的輸入。該時間信息包括表示運動傳感器111獲取傳感器數(shù)據的時間的信息。另外，該時間信息可包括表示位置傳感器114獲取位置信息的時間的信息。另外，除了表示時間的信息之外，時間信息還可包括諸如日子信息、假期信息和日期信息的信息。
[0078]當輸入了以上信息時，活動/情形識別單元116基于所輸入的動作/狀態(tài)模式、所輸入的地理類別代碼(或者例如，地理直方圖)和所輸入的時間信息來檢測活動/情形模式。此時，活動/情形識別單元116使用基于規(guī)則的判定處理(下文中稱為“基于規(guī)則的判定”)和基于學習模型的判定處理(下文中稱為“學習模型判定”)來檢測活動/情形模式。在下文中，簡要說明基于規(guī)則的判定和學習模型判定。
[0079](關于基于規(guī)則的判定)
[0080]首先，說明基于規(guī)則的判定?；谝?guī)則的判定表示如下方法:該方法為地理類別代碼和活動/情形模式的組合分配得分，并且基于得分來判定與輸入數(shù)據對應的適當活動/情形模式。
[0081]得分分配規(guī)則由如圖9所示的得分圖(score map)SM來實現(xiàn)。針對每種時間信息(諸如日期、時區(qū)和日子)來準備得分圖SM。例如，準備了支持三月的第一周的周一的得分圖SM。此外，針對每種動作/狀態(tài)模式(諸如走路、奔跑和火車)來準備得分圖SM。例如，準備了走路期間的得分圖SM。因此，針對時間信息和動作/狀態(tài)模式的每種組合來準備得分圖SM。
[0082]如圖10所示，活動/情形識別單元116從預先準備的多個得分圖SM中選擇適合于所輸入的時間信息和動作/狀態(tài)模式的得分圖SM。另外，如圖11所示，活動/情形識別單元116從所選擇的得分圖SM提取與地理類別代碼對應的得分。通過該處理，將傳感器數(shù)據的獲取時間處的當前位置的狀態(tài)納入考慮，活動/情形識別單元116可以提取存在于得分圖SM中的每種活動/情形模式的得分。
[0083]接下來，活動/情形識別單元116指定所提取的得分當中的最大得分，并且提取與最大得分對應的活動/情形模式。因此，檢測活動/情形模式的方法是基于規(guī)則的判定。這里，得分圖SM中的得分表示用戶采取與該得分對應的活動/情形模式的估計概率。即，得分圖SM表示在地理類別代碼所表示的當前位置的狀態(tài)下估計用戶采取的活動/情形模式的得分分布。
[0084]例如，在周日大約三點鐘，估計百貨商店中的用戶非常可能在“購物”。然而，在同一百貨商店中大約19點鐘，估計該百貨商店中的用戶非常可能在“吃飯”。因此，在特定地點，用戶執(zhí)行的活動/情形模式的得分分布表示得分圖SM (準確地，得分圖SM組)。
[0085]例如，得分圖SM可由用戶自己或其他人預先輸入，或者可使用機器學習等來獲取。另外，得分圖SM可通過從用戶獲取的活動/情形反饋FB(輸出活動/情形模式的對與錯)或個人簡檔信息PR來優(yōu)化。作為簡檔信息PR，例如，使用年齡、性別、工作或家庭信息和工作地點信息。以上是基于規(guī)則的判定的具體處理內容。
[0086](關于學習模型判定)
[0087]接下來，說明學習模型判定。學習模型判定是如下方法:該方法通過機器學習算法生成用于判定活動/情形模式的判定模型，并且通過所生成的判定模型來判定與輸入數(shù)據對應的活動/情形模式。
[0088]作為機器學習算法，例如，可使用k均值方法、最近鄰法(nearest neighbormethod)、SVM、HMM和boosting。這里，SVM是“支持向量機”的縮寫。另外，HMM是“隱馬爾可夫模型”的縮寫。除了這些方法之外，還存在日本專利公開2009-48266中公開的使用基于遺傳搜索的算法構造方法來生成判定模型的方法。
[0089]作為機器學習算法中輸入的特征量矢量，例如，如圖12所示，可使用時間信息、動作/狀態(tài)模式、地理類別代碼(或地理類別直方圖)、傳感器數(shù)據和當前位置的位置信息。這里，在使用基于遺傳搜索的算法構造方法的情況下，對學習處理中的特征量矢量選擇階段使用遺傳搜索算法。首先，活動/情形識別單元116在機器學習算法中輸入已知正確活動/情形模式的特征量矢量作為學習數(shù)據，并且生成用于判定每種活動/情形模式的準確性或最優(yōu)活動/情形模式的判定模型。
[0090]接下來，活動/情形識別單元116將輸入數(shù)據輸入到所生成的判定模型中并且判定被估計為適合于輸入數(shù)據的活動/情形模式。然而，在關于使用所生成的判定模型執(zhí)行的判定的結果可以獲取對與錯反饋的情況下，使用該反饋來重構判定模型。在該情況下，活動/情形識別單元116使用重構后的判定模型來判定被估計為適合于輸入數(shù)據的活動/情形模式。以上是學習模型判定的具體處理內容。
[0091]通過上述方法，活動/情形識別單元116檢測如圖13所示的活動/情形模式。隨后，活動/情形識別單元116所檢測的活動/情形模式被用于提供基于活動/情形模式的推薦服務SV或者被基于活動/情形模式來執(zhí)行處理的應用AP所使用。
[0092]以上描述了活動/情形分析系統(tǒng)11的系統(tǒng)配置。根據下述實施例的技術涉及上述活動/情形分析系統(tǒng)11的功能。另外，關于活動/情形分析系統(tǒng)11的詳細功能，例如，日本專利公開2011-081431的公開內容用作參考。
[0093][1-2:實施例的概況]
[0094]首先，說明根據本實施例的技術的概況。根據本實施例的技術涉及一種用于以上活動模式識別技術的模式數(shù)據庫(下文中稱為“模式DB”)的更新方法。以上活動模式識別技術使用傳感器數(shù)據。因此，活動模式識別結果可能依賴于用戶攜帶信息終端的方法或使用環(huán)境。因此，根據本實施例的技術提出了一種更新模式DB的方法，以便改進對由攜帶方法或使用環(huán)境而導致的噪聲。
[0095](1-2-1:使用文本信息對模式DB的更新)
[0096]作為一種方法，提出了使用文本信息的模式DB更新方法。
[0097]作為文本信息，例如，可以使用在電子郵件、日歷、任務列表、備忘錄、博客、Twitter (注冊商標)、Facebook (注冊商標)或其他社交媒體中輸入的文本。另外，可以使用與如下信息相組合的文本信息:關于諸如換乘引導或路線搜索的應用的信息輸入，或者訪問點搜索信息。在下文中，盡管沒有詳細引用這樣的組合，但是應注意，自然考慮了這種應用。
[0098]存在如下的多種情況:其中，如上所述的文本信息包括實時反映用戶活動的信息或者與活動的時間和日期相關聯(lián)的信息。因此，通過分析文本信息并且將分析結果反映給模式DB，可以進一步改進活動模式識別的準確性。
[0099]例如，甚至在根據傳感器數(shù)據和位置信息判定用戶的活動模式是“在火車上”的情況下，如果用戶在文本信息中寫下短語“我第一次登上了船”，則認為活動模式“登船”是正確的。在該情況下，通過將模式DB中的相應記錄修改為“登船”，可以在活動模式“在火車上”與活動模式“登船”之間進行區(qū)分。即，可以改進活動模式識別的準確性。
[0100](1-2-2:使用環(huán)境聲音對模式DB的更新)
[0101]另外，作為另一種方法，提出了使用環(huán)境聲音的模式DB更新方法。
[0102]本文中描述的環(huán)境聲音表示用戶使用的信息終端可以收集的任意聲音信息。當用戶正在火車上時，例如，馬達驅動聲音、車內通告、在鐵軌的接合點所弓I起的有規(guī)律的振動聲音以及門打開和關閉的聲音被檢測作為環(huán)境聲音。另外，在駕駛具有乘客的私人汽車的情況下，運行汽車噪聲、與乘客的交談和汽車音響聲音被檢測作為環(huán)境聲音。此外，甚至在家里，在下雨的情況下，擊打屋頂?shù)挠幸?guī)律的雨聲以及雷聲可被檢測作為環(huán)境聲音。
[0103]另外，甚至在采取同一活動的情況下，環(huán)境聲音也會在用戶將信息終端放在口袋中來攜帶的情況與信息終端被放在手提包中來攜帶的情況之間變化。例如，在信息終端被放在厚皮包中來攜帶的情況下，檢測到的環(huán)境聲音的音量小，并且可能獲取到具有被抑制的高頻分量的聲音質量。同時，在用手攜帶該信息終端的情況下，周圍喧鬧以及與他人的說話話音會變得可能被捕獲。通過使用這樣的環(huán)境聲音，可以進一步增強活動模式識別的準確性。例如，在運動傳感器中，甚至在不能在船搖晃與火車搖晃之間進行區(qū)分的情況下，如果聽到水聲，也可以容易地判定該搖晃是船搖晃。
[0104]如上所述，通過將文本信息和環(huán)境聲音用于活動模式識別，可以進一步增強活動模式識別的準確性。特別地，通過對存儲以上動作/狀態(tài)識別單元112所使用的動作/狀態(tài)模式的信息以及活動/情形識別單元116所使用的活動模式的信息的模式DB進行更新，可以實現(xiàn)活動模式識別的更高準確性。在下文中，更詳細地說明基于該技術思想的實施例。
[0105]〈2:實施例的細節(jié)〉
[0106]詳細說明根據本實施例的技術。
[0107][2-1:系統(tǒng)配置的示例]
[0108]首先，參照圖14，介紹根據本實施例的系統(tǒng)(S卩，活動/情形識別系統(tǒng)10)的系統(tǒng)配置示例。圖14是用于說明根據實施例的系統(tǒng)(即，活動/情形識別系統(tǒng)10)的系統(tǒng)配置的說明圖。另外，這里介紹的系統(tǒng)配置僅是示例，并且可以將根據本實施例的技術應用于現(xiàn)在和將來可用的各種系統(tǒng)配置。
[0109]如圖14所示，活動/情形識別系統(tǒng)10主要包括多個信息終端CL和服務器設備SV0信息終端CL是用戶使用的裝置的示例。作為信息終端CL，例如，假設移動電話、智能電話、數(shù)字照相機、數(shù)字攝像機、個人計算機、臺式終端、汽車導航系統(tǒng)、便攜式游戲裝置、健康器械(包括計步器(注冊商標))和醫(yī)療設備。同時，作為服務器設備SV，例如，假設家庭服務器和云計算系統(tǒng)。
[0110]自然，可應用根據本實施例的技術的系統(tǒng)不限于圖14中的示例，但是為了便于說明，在假設通過有線和/或無線網絡連接的多個信息終端CL和服務器設備SV的情況下來給出說明。因此，假設如下配置:其中，可以在信息終端CL與服務器設備SV之間交換信息。然而，可以采用如下配置:其使得在活動/情形識別系統(tǒng)10所擁有的各種功能當中，自由地設計要由信息終端CL擁有的功能以及要由服務器設備CL擁有的功能。例如，期望將信息終端CL的計算能力和通信速度納入考慮來進行設計。[0111][2-2:使用文本信息和聲學信息對模式DB的更新]
[0112]在下文中，更詳細地說明活動/情形識別系統(tǒng)10的配置和操作。
[0113](2-2-1:功能配置)
[0114]首先，參照圖15，說明活動/情形識別系統(tǒng)10的功能配置。圖15是用于說明活動/情形識別系統(tǒng)10的功能配置的說明圖。這里，沒有清楚地指定信息終端CL與服務器設備SV之間的功能分布，并且作為整體說明了活動/情形識別系統(tǒng)10擁有的功能。
[0115]如圖15所示，活動/情形識別系統(tǒng)10主要包括聲學信息獲取單元101、聲學信息分析單元102、文本信息獲取單元103、文本信息分析單元104、動作/狀態(tài)模式更新單元105、動作/狀態(tài)模式數(shù)據庫106、活動模式更新單元107和活動模式數(shù)據庫108。
[0116]此外，活動/情形識別系統(tǒng)10還包括活動/情形分析系統(tǒng)11的功能。即，活動/情形識別系統(tǒng)10還包括運動傳感器111、動作/狀態(tài)識別單元112、時間信息獲取單元113、位置傳感器114、GIS信息獲取單元115和活動/情形識別單元116。然而，圖15明確了動作/狀態(tài)識別單元112使用動作/狀態(tài)模式數(shù)據庫106這一點。此外，明確了活動/情形識別單元116使用活動模式數(shù)據庫108這一點。
[0117]聲學信息獲取單元101表示用于獲取用戶周圍的環(huán)境聲音的裝置。例如，聲學信息獲取單兀101包括麥克風。聲學信息獲取單兀101獲取的環(huán)境聲音的聲學信號被輸入到聲學信息分析單元102中。這里，在將環(huán)境聲音聲學信號輸入到聲學信息分析單元102中之前，可將該環(huán)境聲音聲學信號從模擬語音波形信號轉換成數(shù)字語音波形信號。當輸入了環(huán)境聲音聲學信號時，聲學信息分析單元102分析所輸入的聲學信號并且估計用戶的活動模式。
[0118]例如，根據環(huán)境聲音聲學信號，聲學信息分析單元102估計用戶正在購物、吃飯還是在火車上。例如，使用通過機器學習方法(諸如HMM)而構造的學習模型來執(zhí)行該估計。更具體地，在構造用于估計“購物期間”的活動模式的學習模型的情況下，使用在購物期間實際收集的聲學信號。在該情況下，銷售者的叫喊、購物者的交談、自動扶梯聲音和在從架子或吊架取物品時所引起的聲音被收集作為環(huán)境聲音。這同樣適用于其它活動模式。
[0119]另外，聲學信息分析單兀102根據環(huán)境聲音聲學信號來估計活動模式(諸如動作/狀態(tài)模式和活動/情形模式)，并且同時計算確信度(即，評估得分)。隨后，根據環(huán)境聲音聲學信號而估計的活動模式和確信度被輸入到動作/狀態(tài)模式更新單元105和活動模式更新單兀107。另外，以上確信度表不由聲學信息獲取單兀101實際獲取的環(huán)境聲音聲學信號與對應于所估計的活動模式的聲學信號之間的相似度。
[0120]同時，文本信息獲取單元103獲取用戶輸入的文本信息。例如，文本信息獲取單元103可表示用于由用戶輸入文本的輸入裝置或者表示用于從社交網絡服務或應用獲取文本信息的信息收集裝置。另外，可分開設置安裝傳感器的裝置和用于輸入文本的裝置(諸如鍵盤)。這里，為了便于說明，在假設文本信息獲取單元103表示諸如軟鍵盤的輸入單元的情況下來給出說明。文本信息獲取單元103所獲取的文本信息被輸入到文本信息分析單元
104。此時,在文本信息分析單兀104中，一起輸入文本信息以及關于輸入文本信息的時間的時間信息。
[0121]當輸入了文本信息時，文本信息分析單元104對所輸入的文本信息進行分析并且估計用戶的活動模式(諸如動作/狀態(tài)模式和活動/情形模式)。例如，根據所輸入的文本信息，文本信息分析單元104估計用戶正在購物、吃飯還是在火車上。例如，使用通過機器學習方法(諸如SVM)而構造的學習模型來執(zhí)行該估計。更具體地，在構造用于估計“購物期間”的活動模式的學習模式的情況下，收集“購物期間”所輸入的文本信息，并且將所收集的文本信息用作學習數(shù)據。在該情況下，收集諸如“大減價”、“昂貴”和“收款處繁忙”的文本信息。
[0122]另外，文本信息分析單元104根據文本信息來估計活動模式,并且同時計算確信度(即，評估得分)。隨后，根據文本信息而估計的活動模式和確信度被輸入到動作/狀態(tài)模式更新單元105和活動模式更新單元107中。另外，以上確信度表示由文本信息獲取單元103實際獲取的文本信息與對應于所估計的活動模式的文本信息之間的相似度。
[0123]如上所述，動作/狀態(tài)模式更新單元105接收通過聲學信號分析而獲取的表示活動模式和確信度的信息(下文中稱為“聲學推導信息”)和通過文本信息分析而獲取的表示活動模式和確信度的信息(下文中稱為“文本推導信息”)的輸入。類似地，活動模式更新單元107接收聲學推導信息和文本推導信息的輸入。然而，存在不能獲取聲學信號或不能獲取文本信息的可能情況。在這樣的情況下，輸入到動作/狀態(tài)模式更新單元105和活動模式更新單元107中的信息不限于聲學推導信息或文本推導信息。
[0124]例如，在聲學信息獲取單元101的功能被關斷或者不存在與聲學信息獲取單元101對應的裝置的情況下，不能獲取聲學推導信息。另外，在文本信息獲取單元103的功能被關斷或者不存在文本信息獲取單元103可以獲取的文本信息的情況下，不能獲取文本推導信息。在這樣的情況下，動作/狀態(tài)模式更新單元105和活動模式更新單元107使用所輸入的信息對動作/狀態(tài)模式數(shù)據庫106和活動模式數(shù)據庫108執(zhí)行更新處理。
[0125](情況I)
[0126]首先，描述僅獲取聲學推導信息的情況。
[0127]動作/狀態(tài)模式更新單元105將聲學信號的確信度與預定閾值(下文中稱為“第一聲學閾值”)進行比較。在聲學信號的確信度大于第一聲學閾值的情況下，動作/狀態(tài)模式更新單元105利用根據聲學信號的分析結果而獲取的動作/狀態(tài)模式來更新動作/狀態(tài)模式數(shù)據庫106。相較之下，在聲學信號的確信度小于第一聲學閾值的情況下，動作/狀態(tài)模式更新單元105不更新動作/狀態(tài)模式數(shù)據庫106。因此，動作/狀態(tài)模式更新單元105根據聲學信號的確信度來判定是否更新動作/狀態(tài)模式數(shù)據庫106。
[0128]類似地，活動模式更新單元107將聲學信號的確信度與預定閾值(下文中稱為“第二聲學閾值”)進行比較。在聲學信號的確信度大于第二聲學閾值的情況下，活動模式更新單元107利用根據聲學信號的分析結果而獲取的活動/情形模式來更新活動模式數(shù)據庫108。相較之下，在聲學信號的確信度小于第二聲學閾值的情況下，活動模式更新單元107不更新活動模式數(shù)據庫108。因此，活動模式更新單元107根據聲學信號的確信度來判定是否更新活動模式數(shù)據庫108。
[0129]另外，第一聲學閾值和第二聲學閾值可以是不同的值。例如，在針對動作/狀態(tài)模式強調傳感器信息的分析結果并且針對活動/情形模式強調聲學信號的分析結果的情況下，優(yōu)選將第一聲學閾值設置為小的并且將第二聲學閾值設置為大的。同時，在使用高性能的聲學信息獲取單元101的情況下，將第一聲學閾值和第二聲學閾值設置為相同的值，并且當獲取到等于或大于特定水平的確信度時，優(yōu)選使用通過分析聲學信號而獲取的活動模式來更新動作/狀態(tài)模式數(shù)據庫106和活動模式數(shù)據庫108。
[0130](情況2)
[0131]接下來，描述僅獲取文本推導信息的情況。
[0132]動作/狀態(tài)模式更新單元105將文本信息的確信度與預定閾值(下文中稱為“第一文本閾值”)進行比較。在文本信息的確信度大于第一文本閾值的情況下，動作/狀態(tài)模式更新單元105利用根據文本信息的分析結果而獲取的動作/狀態(tài)模式來更新動作/狀態(tài)模式數(shù)據庫106。相較之下，在文本信息的確信度小于第一文本閾值的情況下，動作/狀態(tài)模式更新單元105不更新動作/狀態(tài)模式數(shù)據庫106。因此，動作/狀態(tài)模式更新單元105根據文本信息的確信度來判定是否更新動作/狀態(tài)模式數(shù)據庫106。
[0133]類似地，活動模式更新單元107將文本信息的確信度與預定閾值(下文中稱為“第二文本閾值”)進行比較。在文本信息的確信度大于第二文本閾值的情況下，活動模式更新單元107利用根據文本信息的分析結果而獲取的活動/情形模式來更新活動模式數(shù)據庫108。相較之下，在文本信息的確信度小于第二文本閾值的情況下，活動模式更新單元107不更新活動模式數(shù)據庫108。因此，活動模式更新單元107根據文本信息的確信度來判定是否更新活動模式數(shù)據庫108。
[0134]另外，第一文本閾值和第二文本閾值可以是不同的值。例如，在針對動作/狀態(tài)模式強調傳感器信息的分析結果并且針對活動/情形模式強調文本信息的分析結果的情況下，優(yōu)選將第一文本閾值設置為小的并且將第二文本閾值設置為大的。同時，在使用高性能的文本信息獲取單元103的情況下，將第一文本閾值和第二文本閾值設置為相同的值，并且當獲取到等于或大于特定水平的確信度時，優(yōu)選使用通過分析文本信息而獲取的活動模式來更新動作/狀態(tài)模式數(shù)據庫106和活動模式數(shù)據庫108。
[0135](情況3)
[0136]接下來,描述獲取聲學推導信息和文本推導信息兩者的情況。
[0137]動作/狀態(tài)模式更新單元105將聲學信號的確信度與第一聲學閾值進行比較。在聲學信號的確信度大于第一聲學閾值的情況下，動作/狀態(tài)模式更新單元105準備利用根據聲學信號的分析結果而獲取的動作/狀態(tài)模式來更新動作/狀態(tài)模式數(shù)據庫106。同時，在聲學信號的確信度小于第一聲學閾值的情況下，動作/狀態(tài)模式更新單元105不使用通過分析聲學信號而獲取的動作/狀態(tài)模式來更新動作/狀態(tài)模式數(shù)據庫106。因此，動作/狀態(tài)模式更新單元105根據聲學信號的確信度來判定是否更新動作/狀態(tài)模式數(shù)據庫106，但是不是立即執(zhí)行實際的更新處理，而是如以下所述那樣在將文本信息的確信度納入考慮的情況下確定實際的更新處理。
[0138]類似于與聲學推導信息有關的判定處理，動作/狀態(tài)模式更新單元105將文本信息的確信度與第一文本閾值進行比較。在文本信息的確信度大于第一文本閾值的情況下，動作/狀態(tài)模式更新單元105準備利用根據文本信息的分析結果而獲取的動作/狀態(tài)模式來更新動作/狀態(tài)模式數(shù)據庫106。同時,在文本信息的確信度小于第一文本閾值的情況下，動作/狀態(tài)模式更新單元105不使用通過分析文本信息而獲取的動作/狀態(tài)模式來更新動作/狀態(tài)模式數(shù)據庫106。這里，動作/狀態(tài)模式更新單元105將與聲學信號的確信度有關的判定結果和與文本信息的確信度有關的判定結果納入考慮來執(zhí)行對動作/狀態(tài)模式數(shù)據庫106的更新處理。[0139]例如,在聲學信號的確信度大于第一聲學閾值并且文本信息的確信度大于第一文本閾值的情況下，動作/狀態(tài)模式更新單元105將聲學信號的分析結果與文本信息的分析結果進行比較。如果通過聲學信號分析獲取的動作/狀態(tài)模式和通過文本信息分析獲取的動作/狀態(tài)模式相等，則動作/狀態(tài)模式更新單元105利用該動作/狀態(tài)模式來更新動作/狀態(tài)模式數(shù)據庫106。
[0140]同時，在通過聲學信號分析獲取的動作/狀態(tài)模式和通過文本信息分析獲取的動作/狀態(tài)模式不同的情況下，動作/狀態(tài)模式更新單元105將聲學信號的確信度與文本信息的確信度進行比較。例如，在聲學信號的確信度大于文本信息的確信度的情況下，動作/狀態(tài)模式更新單元105利用通過聲學信號分析而獲取的動作/狀態(tài)模式來更新動作/狀態(tài)模式數(shù)據庫106。同時，在聲學信號的確信度小于文本信息的確信度的情況下，動作/狀態(tài)模式更新單元105利用通過文本信息分析而獲取的動作/狀態(tài)模式來更新動作/狀態(tài)模式數(shù)據庫106。
[0141]例如，在聲學信號的確信度大于第一聲學閾值并且文本信息的確信度小于第一文本閾值的情況下，動作/狀態(tài)模式更新單元105利用通過聲學信號分析而獲取的動作/狀態(tài)模式來更新動作/狀態(tài)模式數(shù)據庫106。同時，在聲學信號的確信度小于第一聲學閾值并且文本信息的確信度大于第一文本閾值的情況下，動作/狀態(tài)模式更新單元105利用通過文本信息分析而獲取的動作/狀態(tài)模式來更新動作/狀態(tài)模式數(shù)據庫106。另外，在聲學信號的確信度小于第一聲學閾值并且文本信息的確信度小于第一文本閾值的情況下，動作/狀態(tài)模式更新單元105不更新動作/狀態(tài)模式數(shù)據庫106。
[0142]類似地，活動模式更新單元107將聲學信號的確信度與第一聲學閾值進行比較。在聲學信號的確信度大于第一聲學閾值的情況下，活動模式更新單元107準備利用根據聲學信號的分析結果而獲取的活動/情形模式來更新活動模式數(shù)據庫108。同時，在聲學信號的確信度小于第一聲學閾值的情況下，活動模式更新單元107不使用通過分析聲學信號而獲取的活動/情形模式來更新活動模式數(shù)據庫108。因此，活動模式更新單元107根據聲學信號的確信度來判定是否更新活動模式數(shù)據庫108，但是不是立即執(zhí)行實際的更新處理，而是如以下所述的那樣在將文本信息的確信度納入考慮的情況下確定實際的更新處理。
[0143]活動模式更新單元107將與聲學信號的確信度有關的判定結果和與文本信息的確信度有關的判定結果納入考慮來執(zhí)行對活動模式數(shù)據庫108的更新處理。在聲學信號的確信度的識別和文本信息的確信度的識別不同的情況下，活動模式更新單元107不更新活動模式數(shù)據庫108。
[0144]例如，在聲學信號的確信度大于第一聲學閾值并且文本信息的確信度大于第一文本閾值的情況下，活動模式更新單元107將聲學信號的分析結果與文本信息的分析結果進行比較。如果通過聲學信號分析獲取的活動/情形模式和通過文本信息分析獲取的活動/情形模式相等，則活動模式更新單元107利用該活動/情形模式來更新活動模式數(shù)據庫108。
[0145]同時，在通過聲學信號分析獲取的活動/情形模式和通過文本信息分析獲取的活動/情形模式不同的情況下，活動模式更新單元107將聲學信號的確信度與文本信息的確信度進行比較。隨后，在聲學信號的確信度的識別和文本信息的確信度的識別不同的情況下，活動模式更新單元107不更新活動模式數(shù)據庫108。[0146]例如,在聲學信號的確信度大于第一聲學閾值并且文本信息的確信度小于第一文本閾值的情況下，活動模式更新單元107利用通過聲學信號分析而獲取的活動/情形模式來更新活動模式數(shù)據庫108。同時，在聲學信號的確信度小于第一聲學閾值并且文本信息的確信度大于第一文本閾值的情況下，活動模式更新單元107利用通過文本信息分析而獲取的活動/情形模式來更新活動模式數(shù)據庫108。另外，在聲學信號的確信度小于第一聲學閾值并且文本信息的確信度小于第一文本閾值的情況下，活動模式更新單元107不更新活動/情形模式數(shù)據庫108。
[0147]另外，設置第一和第二聲學閾值以及第一和第二文本閾值的方法與上述情況I和2相同。
[0148]以上已說明了活動/情形識別系統(tǒng)10的功能配置。然而，省略了與活動/情形分析系統(tǒng)11對應的功能配置的詳細說明。
[0149](2-2-2:處理的流程)
[0150]接下來，參照圖16和圖17，說明活動/情形識別系統(tǒng)10的操作。圖16和圖17是用于說明活動/情形識別系統(tǒng)10的操作的說明圖。這里，也沒有清楚地指定信息終端CL與服務器設備SV之間的功能分布，而是說明了活動/情形識別系統(tǒng)10的整體操作。另外，示出了操作示例以闡明以下處理的流程，但是，如根據以上功能配置的說明所估計的，活動/情形識別系統(tǒng)10的操作不限于該示例。
[0151]如圖16所示，活動/情形識別系統(tǒng)10判定電源是否接通(S101)。當電源接通時，活動/情形識別系統(tǒng)10將處理移至步驟S102。同時，在電源沒有接通的情況下，活動/情形識別系統(tǒng)10將處理返回到步驟SlOl。在處理進行到步驟S102的情況下，活動/情形識別系統(tǒng)10利用時間信息獲取單元113的功能來獲取當前時間信息(S102)。接下來，活動/情形識別系統(tǒng)10利用位置傳感器114的功能來獲取當前位置的位置信息(S103)。接下來，活動/情形識別系統(tǒng)10利用GIS信息獲取單元115的功能來獲取當前位置的GIS信息(S104)。
[0152]接下來，活動/情形識別系統(tǒng)10利用運動傳感器111的功能來獲取運動傳感器的傳感器信息(S105)。接下來，活動/情形識別系統(tǒng)10利用動作/狀態(tài)識別單元112的功能、使用存儲在動作/狀態(tài)模式數(shù)據庫106中的信息來識別動作/狀態(tài)模式(S106)。接下來，活動/情形識別系統(tǒng)10利用活動/情形識別單元116的功能、使用存儲在活動模式數(shù)據庫108中的信息來估計活動模式(S107)。在估計了活動模式之后，活動/情形識別系統(tǒng)10將處理移至步驟A。
[0153]當處理進行到步驟A時(參見圖17)，活動/情形識別系統(tǒng)10利用聲學信息獲取單元101的功能來獲取環(huán)境聲音的聲學信號(S108)。接下來，活動/情形識別系統(tǒng)10利用文本信息獲取單元103的功能來獲取文本信息(S109)。接下來，活動/情形識別系統(tǒng)10利用聲學信息分析單元102的功能根據環(huán)境聲音的聲學信號來獲取環(huán)境估計結果(即，以上活動模式和確信度(聲學推導信息))，并且判定環(huán)境估計結果的可靠性(即，以上確信度)是否大于預定閾值(即，以上聲學閾值)(S110)。在可靠性大于預定閾值的情況下，活動/情形識別系統(tǒng)10將處理移至步驟S112。同時，在可靠性小于預定閾值的情況下，活動/情形識別系統(tǒng)10將處理移至步驟Slll。
[0154]在將處理移至步驟Slll的情況下，活動/情形識別系統(tǒng)10利用文本信息分析單元104的功能來獲取文本分析結果(B卩，以上活動模式和確信度(文本推導信息))，并且判定文本分析結果的可靠性(即，以上確信度)是否大于預定閾值(即，以上文本閾值)(S111)。在可靠性大于預定閾值的情況下，活動/情形識別系統(tǒng)10將處理移至步驟S112。同時，在可靠性小于預定閾值的情況下，活動/情形識別系統(tǒng)10將處理移至步驟S113。
[0155]在將處理移至步驟SI 12的情況下，活動/情形識別系統(tǒng)10利用動作/狀態(tài)模式更新單元105和活動模式更新單元107的功能來更新動作/狀態(tài)模式數(shù)據庫106和活動模式數(shù)據庫108 (S112)，并且將處理移至步驟S113。將處理移至步驟S113的活動/情形識別系統(tǒng)10判定電源是否被關斷(S113)。在電源被關斷的情況下，活動/情形識別系統(tǒng)10結束與活動/情形識別有關的一系列處理。同時，在電源沒有被關斷的情況下，活動/情形識別系統(tǒng)10將處理移至步驟B (參見圖16)，并且再次執(zhí)行步驟S102和后續(xù)步驟中的處理。
[0156]以上已說明了活動/情形識別系統(tǒng)10的操作。這里，與環(huán)境聲音的聲學信號有關的處理和與文本信息有關的處理的順序可以是相反的。
[0157](具體示例和補充說明)
[0158]在應用以上技術的情況下，例如，當“乘火車旅行”被輸入作為文本信息時，當前用戶的活動被判定為“火車(搭乘)”并且更新動作/狀態(tài)模式數(shù)據庫106。更具體地，關于在動作/狀態(tài)模式數(shù)據庫106中登記的動作/狀態(tài)模式“火車(搭乘)”，將當前從運動傳感器111獲取的傳感器信息視為附加的數(shù)據，并且實施活動模式學習。另外，甚至在在周日下午3點左右輸入文本信息“在百貨商店與孩子喝茶”的情況下，也更新活動模式數(shù)據庫108。
[0159]關于預先登記的動作/狀態(tài)模式，盡管登記了基于很多用戶的一般使用而學習的模式，但是通過使用用戶的傳感器信息執(zhí)行自適應處理，通過適合于用戶的使用環(huán)境(例如，在口袋或包中)的動作/狀態(tài)模式來進行更新并且可以增強后續(xù)的動作/狀態(tài)模式或活動/情形模式的識別準確性。
[0160]另外，可僅在更新動作/狀態(tài)模式數(shù)據庫106時使用聲學信息獲取單元101，或者可將聲學信息獲取單元101用來把與環(huán)境聲音的聲學信號有關的信息直接輸入到動作/狀態(tài)識別單元112中以及通過把環(huán)境聲音的時間序列數(shù)據和運動傳感器的傳感器信息相組合來直接估計活動模式。另外，盡管示出了在兩個階段中實現(xiàn)動作/狀態(tài)識別和活動/情形識別的實施例，但是，可在一個階段中實現(xiàn)動作/狀態(tài)識別和活動/情形識別或者可僅實現(xiàn)動作/狀態(tài)識別。這樣的變更自然屬于本實施例的技術范圍。
[0161][2-3:(替選示例)聲音識別技術的應用]
[0162]接下來，說明本實施例的替選示例。本替選示例涉及使用聲音識別技術的應用技術。當使用聲音識別技術時，例如，可以實時地從用戶的語音或語音對方的語音來獲取文本信息。因此，甚至對于沒有以積極方式輸入文本信息的用戶而言或者甚至在沒有輸入文本信息的狀態(tài)下，也可以使用文本信息來更新模式DB并且改進活動模式識別準確性。在以下中，說明了根據本替選示例的活動/情形識別系統(tǒng)10的功能配置和操作。
[0163](2-3-1:功能配置)
[0164]首先，參照圖18，說明了根據本替選示例的活動/情形識別系統(tǒng)10的功能配置。圖18是用于說明根據本替選示例的活動/情形識別系統(tǒng)10的詳細配置的說明圖。這里，沒有清楚地指定信息終端CL與服務器設備SV之間的功能分布，而是作為整體說明了活動/情形識別系統(tǒng)10所擁有的功能。[0165]如圖18所示，活動/情形識別系統(tǒng)10主要包括聲學信息獲取單元101、聲學信息分析單元102、文本信息獲取單元103、文本信息分析單元104、動作/狀態(tài)模式更新單元
105、動作/狀態(tài)模式數(shù)據庫106、活動模式更新單元107、活動模式數(shù)據庫108和聲音識別單元131。此外，活動/情形識別系統(tǒng)10包括活動/情形分析系統(tǒng)11的功能。即，根據本替選示例的活動/情形識別系統(tǒng)10與圖15所示的活動/情形識別系統(tǒng)10的不同之處在于是否設置了聲音識別單元131。
[0166]聲學信息獲取單元101表示用于獲取用戶周圍的環(huán)境聲音的裝置。例如，聲學信息獲取單兀101包括麥克風。聲學信息獲取單兀101獲取的環(huán)境聲音的聲學信號被輸入到聲學信息分析單兀102和聲音識別單兀131中。這里,在將環(huán)境聲音聲學信號輸入到聲學信息分析單元102中之前，可將該環(huán)境聲音聲學信號從模擬語音波形信號轉換成數(shù)字語音波形信號。
[0167]當輸入了環(huán)境聲音聲學信號時，聲學信息分析單兀102分析所輸入的聲學信號并且估計用戶的活動模式。例如，根據環(huán)境聲音聲學信號，聲學信息分析單元102估計用戶在購物、吃飯還是在火車上。例如，使用通過機器學習方法(諸如HMM)而構造的學習模型來執(zhí)行該估計。
[0168]另外，聲學信息分析單兀102根據環(huán)境聲音聲學信號來估計活動模式(諸如動作/狀態(tài)模式和活動/情形模式)，并且同時計算確信度(即，評估得分)。隨后，根據環(huán)境聲音聲學信號而估計的活動模式和確信度被輸入到動作/狀態(tài)模式更新單元105和活動模式更新單兀107中。另外，以上確信度表不由聲學信息獲取單兀101實際獲取的環(huán)境聲音聲學信號與對應于所估計的活動模式的聲學信號之間的相似度。
[0169]同時，文本信息獲取單元103獲取用戶輸入的文本信息。例如，文本信息獲取單元103可表示用于由用戶輸入文本的輸入裝置，或者表示用于從社交網絡服務或應用獲取文本信息的信息收集裝置。另外，文本信息獲取單元103可被形成為使得從GIS信息獲取諸如當前位置周圍的地名和建筑物名的信息作為文本信息。
[0170]此外，在本替選示例的情況下，文本信息獲取單元103接收由聲音識別單元131根據環(huán)境聲音聲學信號生成的文本信息的輸入。例如，聲音識別單兀131使用預定聲音識別技術來根據聲學信號生成文本信息，并且將其輸入到文本信息獲取單元103中。因此，通過設置聲音識別單元131，用戶可以省去輸入文本信息的工作。另外，可以獲取在活動中進行的自然對話作為文本信息，因此可以獲取更適合于活動模式的文本信息。另外，通過將車站或車輛中的通知轉換成文本，預期獲取與地點或活動有關的有用信息。
[0171]另外，盡管以上說明關于環(huán)境聲音的聲學信號而介紹了用于執(zhí)行聲音識別的配置示例，但是可以通過聲音識別將使用信息終端CL的呼叫功能來進行的對話的內容的一部分或全部轉換成文本。在該情況下，表示呼叫內容的文本信息被輸入到文本信息獲取單元103中。例如，存在如下多種情況:其中，約會時的呼叫內容包括當前位置的信息、時間信息或者諸如活動對象和朋友名字的信息，因此可以獲取有益于估計活動模式的信息。即，通過利用聲音識別單元131的功能將呼叫內容轉換成文本信息并且使用該文本信息來更新模式DB，預期得到進一步改進活動模式識別的準確性的效果。
[0172]如上由文本信息獲取單元103獲取的文本信息被輸入到文本信息分析單元104中。此時，在文本信息分析單兀104中，一起輸入文本信息以及關于輸入文本信息的時間的時間信息。當輸入了文本信息時，文本信息分析單元104分析所輸入的文本信息并且估計用戶的活動模式(諸如動作/狀態(tài)模式和活動/情形模式)。例如，使用通過機器學習方法(諸如SVM)而構造的學習模型來執(zhí)行該估計。
[0173]另外，文本信息分析單元104根據文本信息來估計活動模式，并且同時計算確信度(即，評估得分)。此時，該確信度是在將聲音識別處理中將聲學輸入轉換成文本的確信度納入考慮的情況下來計算的。隨后，根據文本信息而估計的活動模式和確信度被輸入到動作/狀態(tài)模式更新單元105和活動模式更新單元107中。另外，以上確信度表示由文本信息獲取單元103實際獲取的文本信息與對應于所估計的活動模式的文本信息之間的相似度。
[0174]如上所述，動作/狀態(tài)模式更新單元105接收通過聲學信號分析獲取的、表示活動模式和確信度的信息(下文中稱為“聲學推導信息”)和通過文本信息分析獲取的、表示活動模式和確信度的信息(下文中稱為“文本推導信息”)的輸入。類似地，活動模式更新單元107接收聲學推導信息和文本推導信息的輸入。然而，存在不能獲取聲學信號或不能獲取文本信息的可能情況。在這樣的情況下，輸入到動作/狀態(tài)模式更新單元105和活動模式更新單元107中的信息不限于聲學推導信息或文本推導信息。
[0175]例如，在聲學信息獲取單元101的功能被關斷或者不存在與聲學信息獲取單元101對應的裝置的情況下，不能獲取聲學推導信息。另外，在文本信息獲取單元103的功能被關斷或者不存在文本信息獲取單元103可以獲取的文本信息的情況下，不能獲取文本推導信息。在這樣的情況下，動作/狀態(tài)模式更新單元105和活動模式更新單元107使用所輸入的信息對動作/狀態(tài)模式數(shù)據庫106和活動模式數(shù)據庫108執(zhí)行更新處理。
[0176]以上說明了根據本替選示例的活動/情形識別系統(tǒng)10的功能配置。然而，省略了與活動/情形分析系統(tǒng)11對應的功能配置的詳細描述。另外，更新模式DB的方法與圖15所示的活動/情形識別系統(tǒng)10的方法相同，因此省略其說明。
[0177](2-3-2:處理的流程)
[0178]接下來，參照圖19和圖20，說明根據本替選示例的活動/情形識別系統(tǒng)10的操作。圖19和圖20是用于說明根據本替選示例的活動/情形識別系統(tǒng)10的操作的說明圖。甚至在這里，也沒有清楚地指定信息終端CL與服務器設備SV之間的功能分布，而是作為整體說明了活動/情形識別系統(tǒng)10擁有的功能。另外，示出了操作示例以闡明以下處理的流程，但是如根據以上功能配置的說明所估計的，活動/情形識別系統(tǒng)10的操作不限于該示例。
[0179]如圖19所示，活動/情形識別系統(tǒng)10判定電源是否接通(S131)。當電源接通時，活動/情形識別系統(tǒng)10將處理移至步驟S132。同時，在電源沒有接通的情況下，活動/情形識別系統(tǒng)10將處理返回到步驟S131。在處理進行到步驟S132的情況下，活動/情形識別系統(tǒng)10利用時間信息獲取單元113的功能來獲取當前時間信息(S132)。接下來，活動/情形識別系統(tǒng)10利用位置傳感器114的功能來獲取當前位置的位置信息(S133)。接下來，活動/情形識別系統(tǒng)10利用GIS信息獲取單元115的功能來獲取當前位置的GIS信息(S134)。
[0180]接下來，活動/情形識別系統(tǒng)10利用運動傳感器111的功能來獲取運動傳感器的傳感器信息(S135)。接下來，活動/情形識別系統(tǒng)10利用動作/狀態(tài)識別單元112的功能、使用存儲在動作/狀態(tài)模式數(shù)據庫106中的信息來識別動作/狀態(tài)模式(S136)。接下來，活動/情形識別系統(tǒng)10利用活動/情形識別單元116的功能、使用存儲在活動模式數(shù)據庫108中的信息來估計活動模式(S137)。在估計活動模式之后，活動/情形識別系統(tǒng)10將處理移至步驟A。
[0181]當處理進行到步驟A時(參見圖20)，活動/情形識別系統(tǒng)10利用聲學信息獲取單元101的功能來獲取環(huán)境聲音的聲學信號(S138)。接下來，活動/情形識別系統(tǒng)10利用文本信息獲取單元103的功能來獲取文本信息(S139)。在該替選示例中，文本信息包括通過聲音識別處理而獲取的信息。接下來，活動/情形識別系統(tǒng)10利用聲學信息分析單元102的功能而根據環(huán)境聲音的聲學信號獲取環(huán)境估計結果(即，以上活動模式和確信度(聲學推導信息))，并且判定環(huán)境估計結果的可靠性(即，以上確信度)是否大于預定閾值(即，以上聲學閾值)(S140)。在可靠性大于預定閾值的情況下，活動/情形識別系統(tǒng)10將處理移至步驟S142。同時，在可靠性小于預定閾值的情況下，活動/情形識別系統(tǒng)10將處理移至步驟 S141。
[0182]在將處理移至步驟S141的情況下，活動/情形識別系統(tǒng)10利用文本信息分析單元104的功能來獲取文本分析結果(即，以上活動模式和確信度(文本推導信息))，并且判定文本分析結果的可靠性(即，以上確信度)是否大于預定閾值(即，以上文本閾值)(S141)。在可靠性大于預定閾值的情況下，活動/情形識別系統(tǒng)10將處理移至步驟S142。同時，在可靠性小于預定閾值的情況下，活動/情形識別系統(tǒng)10將處理移至步驟S143。
[0183]在將處理移至步驟S142的情況下，活動/情形識別系統(tǒng)10利用動作/狀態(tài)模式更新單元105和活動模式更新單元107的功能來更新動作/狀態(tài)模式數(shù)據庫106和活動模式數(shù)據庫108 (S142)，并且將處理移至步驟S143。將處理移至步驟S143的活動/情形識別系統(tǒng)10判定電源是否被關斷(S143)。在電源被關斷的情況下，活動/情形識別系統(tǒng)10結束與活動/情形識別有關的一系列處理。同時，在電源沒有被關斷的情況下，活動/情形識別系統(tǒng)10將處理移至步驟B (參見圖19)并且再次執(zhí)行步驟S132和后續(xù)步驟中的處理。
[0184]以上已說明了活動/情形識別系統(tǒng)10的操作。這里，與環(huán)境聲音的聲學信號有關的處理和與文本信息有關的處理的順序可以是相反的。
[0185](關于用于識別更新目標的數(shù)據區(qū)間的方法)
[0186]這里，考慮識別更新目標的數(shù)據區(qū)間的方法。實際上，在更新模式DB的情況下，不易判定傳感器數(shù)據的時間序列的哪個區(qū)間適合于進行更新。例如，用戶可能從口袋拿出信息終端CL，并且在輸入文本信息之后再次將信息終端CL放在口袋中。在該情況下，輸入文本信息的定時處的用戶活動是輸入文本信息，這經常與通過對所輸入的文本信息的分析而獲取的活動模式不同。
[0187]因此，提出了如下方法:該方法關注于用戶輸入文本信息時的活動，并且識別通過分析文本信息而獲取的活動模式對應于什么定時(即，更新目標數(shù)據區(qū)間)。例如，當假設如上所述的用戶活動時，認為傳感器數(shù)據的時間序列表示了如圖22所示的波形。時段Tl表示信息終端CL在口袋中的時段，并且對應于通過分析文本信息而獲取的過去活動模式。同時，時段T4表示在輸入文本信息并且將信息終端CL放入口袋中之后的時段，并且對應于通過分析文本信息而獲取的未來活動模式。
[0188]另外，時段T2表示信息終端CL正被從口袋中拿出的時段。因此，在傳感器數(shù)據中發(fā)現(xiàn)了大的波形變化。同時，時段T3表示信息終端CL正被放入口袋中的時段。因此，在傳感器數(shù)據中發(fā)現(xiàn)了大的波形變化。通常，當輸入文本信息時，信息終端CL被維持在穩(wěn)定狀態(tài)。因此，通過檢測信息終端CL被放入和取出的時段(S卩，時段T2和T3)，可以以相對高的準確性檢測輸入文本信息的時段。另外，認為通過考慮時段Tl與T4之間的波形相似度，可以更準確地檢測文本信息的輸入時段。
[0189]作為基于這樣的考慮來識別更新目標數(shù)據區(qū)間的方法，提出了如圖21所示的處理方法。這里，為了便于說明，盡管作為示例已描述了從口袋中拿出信息終端CL或者將信息終端CL放入口袋中的活動，但是這同樣適用于如下情況:其中，除了口袋之外，信息終端CL被放入包中、公文包、行李箱或化妝包(porch)中進行攜帶。
[0190]如圖21所示，活動/情形識別系統(tǒng)10獲取文本輸入時間(S151)。接下來，活動/情形識別系統(tǒng)10獲取在文本輸入時間之前和之后的預定范圍中的傳感器數(shù)據(S152)。接下來，活動/情形識別系統(tǒng)10識別在文本輸入時間之前的、傳感器數(shù)據大大變化的部分(S153)。例如，在傳感器數(shù)據的值超過預定閾值的情況下，活動/情形識別系統(tǒng)10將相應的區(qū)域識別為傳感器數(shù)據大大變化的部分。另外，除了閾值判定之外，使用譜圖分析(spectrogram analysis)的方法也是可以的。
[0191]接下來，活動/情形識別系統(tǒng)10從所識別的部分之前的傳感器數(shù)據提取期望時間長度的數(shù)據(S154)。接下來，活動/情形識別系統(tǒng)10識別在文本輸入時間之后的、傳感器數(shù)據大大變化的部分(S155)。接下來，活動/情形識別系統(tǒng)10從所識別的部分之后的傳感器數(shù)據提取期望時間長度的數(shù)據(S156)。接下來，活動/情形識別系統(tǒng)10計算兩個提取的數(shù)據項之間的相似度(S157)。例如，活動/情形識別系統(tǒng)10判定譜圖上的相似度或者計算互相關系數(shù)并判定相似度。
[0192]接下來，活動/情形識別系統(tǒng)10判定相似度是否高(S158)。在相似度高的情況下，活動/情形識別系統(tǒng)10將處理移至步驟S159。相較之下，在相似度低的情況下，活動/情形識別系統(tǒng)10結束用于識別更新目標數(shù)據區(qū)間的一系列處理。在將處理移至步驟S159的情況下，活動/情形識別系統(tǒng)10使用所提取的數(shù)據來修改動作/狀態(tài)模式(S159)，并且結束用于識別更新目標數(shù)據區(qū)間的一系列處理。
[0193]由于用戶的活動可能在文本輸入之前或之后變化，因此在步驟S158中檢查相似度。通過執(zhí)行這樣的檢查，甚至在錯誤地判定了文本描述內容與文本輸入之前的活動有關還是與文本輸入之后的活動有關的情況下，也可以防止利用不適當?shù)膫鞲衅鲾?shù)據來修改動作/狀態(tài)模式。
[0194]另外，作為不在錯誤的傳感器數(shù)據區(qū)間中實施修改處理的預防措施，例如，存在如下可能方法:該方法避免了更新與在修改之前登記在動作/狀態(tài)模式數(shù)據庫106中的動作/狀態(tài)模式極大不同的傳感器數(shù)據。為了實現(xiàn)該方法，例如，可實施與以上可靠性計算類似的處理，并且在可靠性沒有超過預定閾值的情況下，可不執(zhí)行修改處理。因此，對于應用用于防止錯誤修改的各種措施的替選是可能的。
[0195]以上已說明了活動/情形識別系統(tǒng)10的操作。
[0196][2-4:屏幕顯示的示例(一個應用示例)]
[0197]當使用以上活動/情形識別系統(tǒng)10時，例如，可以實現(xiàn)如圖23所示的應用。圖23示出了特定信息終端CL的Π (用戶界面)屏幕的示例。該屏幕顯示表示多個人物Ml至M6的對象。在該示例中，人物Ml和M5在奔跑。人物M2在走路。人物M3躺下。人物M4和M6蹲下。每個人物的活動反映了活動/情形識別系統(tǒng)10中的分析的結果，該分析使用了在對應于每個人物的用戶持有信息終端CL時所獲取的信息。
[0198]當活動/情形識別系統(tǒng)10被應用于如圖23所示的應用時，用戶可以讓其他用戶知道該用戶的活動，而無需執(zhí)行用于指定用戶活動的專門操作。例如，在想邀請某人出去喝東西時，通過與其活動模式看起來空閑的人物說話，該人物具有較高概率接受該邀請。此夕卜，在搜索語音對方時，可以初步進行考慮以對采用繁忙活動模式的人物進行避免。已介紹了應用于如圖23所示的應用的示例,但是其它各種應用示例是可能的。
[0199]以上已說明了根據本實施例的技術的細節(jié)。
[0200]<3:示例硬件配置>
[0201]上述活動/情形識別系統(tǒng)10、信息終端CL和服務器設備SV中所包括的各個組成部件的功能可以通過使用例如圖24所示的信息處理設備的硬件配置來實現(xiàn)。S卩，每個組成部件的功能可以通過使用計算機程序控制圖24所示的硬件來實現(xiàn)。另外，該硬件的模式是任意的，并且可以是個人計算機、移動信息終端(諸如移動電話、PHS或PDA)、游戲機或者各種類型的信息設施。另外，PHS是個人手持電話系統(tǒng)的縮寫。另外，PDA是個人數(shù)字助理的縮寫。
[0202]如圖24所示，該硬件主要包括CPU902、R0M904、RAM906、主機總線908和橋910。此外，該硬件包括外部總線912、接口 914、輸入單元916、輸出單元918、存儲單元920、驅動器922、連接端口 924和通信單元926。另外，CPU是中央處理單元的縮寫。另外，ROM是只讀存儲器的縮寫。此外，RAM是隨機存取存儲器的縮寫。
[0203]CPU902用作例如算術處理單元或控制單元，并且基于記錄在R0M904、RAM906、存儲單元920或可拆卸記錄介質928上的各種程序來控制每個結構元件的整體操作或操作的一部分。R0M904是用于存儲例如要加載到CPU902上的程序或在算術運算中使用的數(shù)據等的機制。RAM906臨時地或永久地存儲例如要加載到CPU902上的程序或者在程序執(zhí)行中任意地改變的各種參數(shù)等。
[0204]這些結構元件通過例如能夠執(zhí)行高速數(shù)據傳輸?shù)闹鳈C總線908而連接到彼此。對于主機總線908的部分而言，主機總線908通過橋910而連接到例如其數(shù)據傳輸速度相對低的外部總線912。此外，輸入單元916例如是鼠標、鍵盤、觸摸板、按鈕、開關或控制桿。另夕卜，輸入單元916可以是可通過使用紅外線或其它無線電波來傳輸控制信號的遠程控制裝置。
[0205]輸出單元918是例如可以以視覺方式或以聽覺方式向用戶通知所獲取的信息的、諸如CRT、LCD、PDP或ELD的顯示裝置、諸如揚聲器或耳機的音頻輸出裝置、打印機、移動電話或傳真機。另外，CRT是陰極射線管的縮寫。LCD是液晶顯示器的縮寫。PDP是等離子顯示面板的縮寫。另外，ELD是電致發(fā)光顯示器的縮寫。
[0206]存儲單元920是用于存儲各種數(shù)據的裝置。存儲單元920是例如諸如硬盤驅動器(HDD)的磁存儲裝置、半導體存儲裝置、光存儲裝置或磁光存儲裝置。HDD是硬盤驅動器的縮寫。
[0207]驅動器922是讀取記錄在可拆卸記錄介質928 (諸如磁盤、光盤、磁光盤或半導體存儲器)上的信息或者將信息寫入可拆卸記錄介質928中的裝置?？刹鹦队涗浗橘|928是例如DVD介質、藍光介質、HD-DVD介質、各種類型的半導體存儲介質等。當然，可拆卸記錄介質928可以是例如其上安裝有非接觸式IC芯片的IC卡或電子裝置。IC是集成電路的縮與。
[0208]連接端口 924是諸如USB端口、IEEE1394端口、SCS1、RS-232C端口或者用于連接外接裝置930的端口(諸如光學音頻端子)的端口。外接裝置930是例如打印機、移動音樂播放器、數(shù)字攝像裝置、數(shù)字攝像機或者IC記錄器。另外，USB是通用串行總線的縮寫。另夕卜，SCSI是小型計算機系統(tǒng)接口的縮寫。
[0209]通信單元926是要連接到網絡932的通信裝置，并是例如用于有線或無線LAN、藍牙(注冊商標)或WUSB的通信卡、光通信路由器、ADSL路由器或者用于各種通信的調制解調器。連接到通信單元926的網絡932由有線連接網絡或無線連接網絡構成，并且是例如因特網、家用LAN、紅外通信、可見光通信、廣播或衛(wèi)星通信。另外，LAN是局域網的縮寫。另外，WUSB是無線USB的縮寫。此外，ADSL是異步數(shù)字用戶線路的縮寫。
[0210]〈4:結論〉
[0211]最后，簡要概括了本實施例的技術思想。下述技術思想可應用于各種信息處理設備，諸如PC、移動電話、便攜式游戲裝置、便攜式信息終端、信息設施和汽車導航。
[0212]另外，本技術還可如下配置。
[0213](I) 一種信息處理設備，包括:
[0214]數(shù)據庫更新單元，用于更新活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測用戶的活動模式；
[0215]文本信息獲取單元，用于獲取所述用戶在裝置中輸入的文本信息；以及
[0216]文本信息分析單元，用于從所述文本信息獲取與活動模式有關的信息，
[0217]其中，在從所述文本信息獲取到與活動模式有關的信息的情況下，所述數(shù)據庫更新單元使用從所述文本信息獲取的與活動模式有關的信息來更新所述活動模式數(shù)據庫。
[0218](2)根據(I)所述的信息處理設備，
[0219]其中，所述文本信息分析單元計算與活動模式有關的信息的第一可靠性，以及
[0220]其中，在所述第一可靠性超過第一預定閾值的情況下，所述數(shù)據庫更新單元使用從所述文本信息獲取的與活動模式有關的信息來更新所述活動模式數(shù)據庫。
[0221](3)根據(I)或(2)所述的信息處理設備，還包括:
[0222]聲音信息獲取單元，用于獲取與所述裝置所檢測的聲音有關的信息；以及
[0223]聲音信息分析單元，用于從所述與聲音有關的信息獲取與活動模式有關的信息，
[0224]其中，在從所述與聲音有關的信息獲取到與活動模式有關的信息的情況下，所述數(shù)據庫更新單元使用從所述與聲音有關的信息獲取的與活動模式有關的信息來更新所述活動模式數(shù)據庫。
[0225](4)根據(3)所述的信息處理設備，
[0226]其中，所述聲音信息分析單元計算從所述與聲音有關的信息獲取的與活動模式有關的信息的第二可靠性，以及
[0227]其中，在所述第二可靠性超過第二預定閾值的情況下，所述數(shù)據庫更新單元使用從所述與聲音有關的信息獲取的與活動模式有關的信息來更新所述活動模式數(shù)據庫。
[0228](5)根據(3)或(4)所述的信息處理設備，還包括:
[0229]聲音識別單兀，用于將所述與聲音有關的信息轉換成文本信息，[0230]其中，所述文本信息分析單元從由所述聲音識別單元轉換的文本信息和由所述文本信息獲取單元獲取的文本信息獲取與活動模式有關的信息。
[0231](6)—種電子裝置，包括:
[0232]通信單元，用于在從用戶在所述電子裝置中輸入的文本信息獲取到與活動模式有關的信息的情況下訪問活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測所述用戶的活動模式，所述活動模式數(shù)據庫是使用所獲取的信息而更新的；以及
[0233]活動模式信息獲取單元，用于從所述活動模式數(shù)據庫獲取與所述傳感器檢測結果和所述文本信息對應的與活動模式有關的信息。
[0234](7) 一種信息處理方法，包括:
[0235]更新活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測用戶的活動模式，
[0236]其中，當從所述用戶在裝置中輸入的文本信息獲取到與活動模式有關的信息的情況下，使用所獲取的信息來更新所述活動模式數(shù)據庫。
[0237](8) 一種信息處理方法，包括:
[0238]在從用戶在電子裝置中輸入的文本信息獲取到與活動模式有關的信息的情況下，訪問活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測所述用戶的活動模式，所述活動模式數(shù)據庫是使用所獲取的信息而更新的；以及
[0239]從所述活動模式數(shù)據庫獲取與所述傳感器檢測結果和所述文本信息對應的與活動模式有關的信息。
[0240](9) 一種用于使得計算式實現(xiàn)以下功能的程序:
[0241]數(shù)據庫更新功能，用于更新活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測用戶的活動模式；
[0242]文本信息獲取功能，用于獲取所述用戶在裝置中輸入的文本信息；以及
[0243]文本信息分析功能，用于從所述文本信息獲取與活動模式有關的信息，
[0244]其中，在從所述文本信息獲取到與活動模式有關的信息的情況下，所述數(shù)據庫更新功能使用從所述文本信息獲取的與活動模式有關的信息來更新所述活動模式數(shù)據庫。
[0245](10) 一種用于使得計算機實現(xiàn)以下功能的程序:
[0246]通信功能，用于在從用戶在電子裝置中輸入的文本信息獲取到與活動模式有關的信息的情況下訪問活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測所述用戶的活動模式，所述活動模式數(shù)據庫是使用所獲取的信息而更新的；以及
[0247]活動模式信息獲取功能，用于從所述活動模式數(shù)據庫獲取與所述傳感器的檢測結果和所述文本信息對應的與活動模式有關的信息。
[0248](注釋)
[0249]以上活動模式更新單元107是DB更新單元的示例。以上聲學信息獲取單元101是聲音信息獲取單元的示例。以上聲學信息分析單元102是聲音信息分析單元的示例。
[0250]盡管已參照附圖詳細描述了本公開的優(yōu)選實施例，但是本公開不限于此。對本領域技術人員來說明顯的是，各種修改或變形是可能的，只要這些修改或變形在所附權利要求或其等同的技術范圍內即可。應理解，這樣的修改或變形也在本公開的技術范圍內。
[0251]本公開包含與2012年6月7日向日本專利局提交的日本優(yōu)先權專利申請 JP2012-129799中公開的主題相關的主題，其全部內容通過引用合并于此。
【權利要求】
1.一種信息處理設備,包括: 數(shù)據庫更新單元，用于更新活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測用戶的活動模式； 文本信息獲取單元，用于獲取所述用戶在裝置中輸入的文本信息；以及 文本信息分析單元，用于從所述文本信息獲取與活動模式有關的信息， 其中，在從所述文本信息獲取到與活動模式有關的信息的情況下，所述數(shù)據庫更新單元使用從所述文本信息獲取的與活動模式有關的信息來更新所述活動模式數(shù)據庫。
2.根據權利要求1所述的信息處理設備， 其中，所述文本信息分析單元計算與活動模式有關的信息的第一可靠性，以及其中，在所述第一可靠性超過第一預定閾值的情況下，所述數(shù)據庫更新單元使用從所述文本信息獲取的與活動模式有關的信息來更新所述活動模式數(shù)據庫。
3.根據權利要求1所述的信息處理設備，還包括: 聲音信息獲取單元，用于獲取與所述裝置所檢測的聲音有關的信息；以及 聲音信息分析單元，用于從所述與聲音有關的信息獲取與活動模式有關的信息， 其中，在從所述與聲音有關的信息獲取到與活動模式有關的信息的情況下，所述數(shù)據庫更新單元使用從所述與聲音有關的信息獲取的與活動模式有關的信息來更新所述活動模式數(shù)據庫。
4.根據權利要求3所述的信息處理設備， 其中，所述聲音信息分析單元計算從所述與聲音有關的信息獲取的與活動模式有關的信息的第二可靠性，以及` 其中，在所述第二可靠性超過第二預定閾值的情況下，所述數(shù)據庫更新單元使用從所述與聲音有關的信息獲取的與活動模式有關的信息來更新所述活動模式數(shù)據庫。
5.根據權利要求3所述的信息處理設備，還包括: 聲音識別單元，用于將所述與聲音有關的信息轉換成文本信息， 其中，所述文本信息分析單元從由所述聲音識別單元轉換的文本信息和由所述文本信息獲取單元獲取的文本信息獲取與活動模式有關的信息。
6.—種電子裝置,包括: 通信單元，用于在從用戶在所述電子裝置中輸入的文本信息獲取到與活動模式有關的信息的情況下訪問活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測所述用戶的活動模式，所述活動模式數(shù)據庫是使用所獲取的信息而更新的；以及 活動模式信息獲取單元，用于從所述活動模式數(shù)據庫獲取與所述傳感器檢測結果和所述文本信息對應的與活動模式有關的信息。
7.—種信息處理方法,包括: 更新活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測用戶的活動模式， 其中，當從所述用戶在裝置中輸入的文本信息獲取到與活動模式有關的信息的情況下，使用所獲取的信息來更新所述活動模式數(shù)據庫。
8.—種信息處理方法,包括: 在從用戶在電子裝置中輸入的文本信息獲取到與活動模式有關的信息的情況下，訪問活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測所述用戶的活動模式，所述活動模式數(shù)據庫是使用所獲取的信息而更新的；以及 從所述活動模式數(shù)據庫獲取與所述傳感器檢測結果和所述文本信息對應的與活動模式有關的信息。
9.一種用于使得計算式實現(xiàn)以下功能的程序: 數(shù)據庫更新功能，用于更新活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測用戶的活動模式； 文本信息獲取功能，用于獲取所述用戶在裝置中輸入的文本信息；以及 文本信息分析功能，用于從所述文本信息獲取與活動模式有關的信息， 其中，在從所述文本信息獲取到與活動模式有關的信息的情況下，所述數(shù)據庫更新功能使用從所述文本信息獲取的與活動模式有關的信息來更新所述活動模式數(shù)據庫。
10.一種用于使得計算機實現(xiàn)以下功能的程序: 通信功能，用于在從用戶在電子裝置中輸入的文本信息獲取到與活動模式有關的信息的情況下訪問活動模式數(shù)據庫，所述活動模式數(shù)據庫被用于基于傳感器檢測結果而檢測所述用戶的活動模式，所述活動模式數(shù)據庫是使用所獲取的信息而更新的； 以及 活動模式信息獲取功能，用于從所述活動模式數(shù)據庫獲取與所述傳感器的檢測結果和所述文本信息對應的與活動模式有關的信息。
【文檔編號】G06F17/30GK103488666SQ201310211717
【公開日】2014年1月1日 申請日期:2013年5月31日 優(yōu)先權日:2012年6月7日
【發(fā)明者】淺野康治, 高村成一 申請人:索尼公司