專利名稱：接口裝置、動作控制方法、畫面顯示方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種為應(yīng)用識別技術(shù)的機(jī)器操作提供支持的接口裝置、動作控制方法、畫面顯示方法，特別涉及電視·汽車導(dǎo)航·移動電話等家電·信息終端機(jī)器的操作。
背景技術(shù)：
作為利用者操作電視·汽車導(dǎo)航·移動電話等家電·信息終端機(jī)器的方法之一，有利用聲音識別的方法。在該方法中，通過用聲音發(fā)出與給定動作對應(yīng)的指令，執(zhí)行給定的動作。
這就需要為用聲音執(zhí)行動作的聲音識別。但是，由于噪音和話語之間造成聲音上的差異，或者由于使用了沒有在識別用詞庫中登錄的詞匯發(fā)音等原因，到目前為止聲音識別還沒有達(dá)到100％不出錯的狀態(tài)。
有關(guān)識別精度的問題，是在文字識別·圖象識別·指紋識別·虹膜識別等識別、識別技術(shù)中共同的問題。為此，作為識別結(jié)果出錯時的對策方案，例如在特開平4-16043號公報、特開平2-278297號公報、特開2000-250587號公報、特開平4-106597號公報、特開平2-117252號公報等中有提案。
又，伴隨機(jī)器的高技術(shù)化·多功能化，希望采用與人的親和性高的聲音進(jìn)行識別的功能的所謂“容易使用”的接口。
本發(fā)明的目的在于提供一種對利用識別技術(shù)的機(jī)器操作可以提高方便性的接口裝置。
特開平4-16043號公報[專利文獻(xiàn)2]特開平2-278297號公報 特開2000-250587號公報[專利文獻(xiàn)4]特開平4-106597號公報[專利文獻(xiàn)5]特開平2-117252號公報發(fā)明內(nèi)容依據(jù)本發(fā)明的一方案，接口裝置包括識別部、動作控制部、提示控制部。識別部根據(jù)識別對象和包含在識別用詞典中的詞典數(shù)據(jù)之間的相似度獲取識別結(jié)果。動作控制部指示執(zhí)行與由識別部獲取的識別結(jié)果相關(guān)聯(lián)的第1動作。提示控制部提示由識別部獲取的識別結(jié)果相關(guān)聯(lián)的1個或者多個候補(bǔ)、提示該候補(bǔ)的時間達(dá)到給定時間后中止該候補(bǔ)的提示。
理想的是，上述提示控制部在顯示器上顯示候補(bǔ)，候補(bǔ)在顯示器上顯示的時間達(dá)到給定時間后中止候補(bǔ)在顯示器上的顯示。
在上述接口裝置中，即使經(jīng)過給定時間利用者也沒有選擇動作候補(bǔ)的意思時讓候補(bǔ)成非顯示狀態(tài)，當(dāng)所執(zhí)行的動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者讓動作候補(bǔ)的提示成非提示狀態(tài)。
在畫面上顯示候補(bǔ)時，隨著所提示的候補(bǔ)數(shù)量增加，顯示畫面的可利用區(qū)域(顯示畫面中顯示候補(bǔ)的區(qū)域之外的區(qū)域)減小。例如，在電視或者微機(jī)等顯示器上顯示候補(bǔ)時，有可能使得播放中的節(jié)目的一部分看不見。又，畫面尺寸越小，為顯示候補(bǔ)的區(qū)域占整個畫面的比率越高。例如，如果在移動電話等小型顯示器中顯示多個候補(bǔ)時，本來的畫面可能完全看不見。但是，依據(jù)上述接口裝置，在經(jīng)過給定時間后自動從畫面上刪除候補(bǔ)，可以有效利用畫面。
理想的是，上述識別結(jié)果表示與識別對象之間的相似度超過給定基準(zhǔn)值的詞典數(shù)據(jù)。上述第1動作與識別結(jié)果所示的詞典數(shù)據(jù)中的某一個詞典數(shù)據(jù)關(guān)聯(lián)。上述1個或者多個候補(bǔ)與上述識別結(jié)果所示的詞典數(shù)據(jù)中的其它詞典數(shù)據(jù)關(guān)聯(lián)。
理想的是，響應(yīng)提示控制部的提示，當(dāng)從所提示的候補(bǔ)中選擇的任一個所示的選擇信息后，提示控制部中止所提示的候補(bǔ)的提示。
理想的是，上述動作控制部當(dāng)從所提示的候補(bǔ)中選擇的任一個所示的選擇信息后，指示執(zhí)行與由該選擇信息所示的候補(bǔ)相關(guān)聯(lián)的第2動作。這時保持第1動作的執(zhí)行狀態(tài)。
依據(jù)上述接口裝置，可以同時執(zhí)行第1動作和第2動作。例如，在電視的2畫面顯示中，在選擇第1畫面的節(jié)目后，可以從候補(bǔ)中選擇第2畫面的節(jié)目同時顯示。
理想的是，響應(yīng)提示控制部的提示，當(dāng)從所提示的候補(bǔ)中選擇任一個所示的選擇信息后，動作控制部指示執(zhí)行與由該選擇信息所示的候補(bǔ)相關(guān)聯(lián)的第2動作。
理想的是，上述選擇信息表示第1候補(bǔ)和第2候補(bǔ)。上述第2動作包含與第1候補(bǔ)關(guān)聯(lián)的動作和與第2候補(bǔ)關(guān)聯(lián)的動作。
理想的是，響應(yīng)提示控制部的提示，在候補(bǔ)提示的期間如果指示執(zhí)行第3動作，提示控制部中止所提示的候補(bǔ)的提示。
理想的是，上述動作控制部提示到開始執(zhí)行第1動作為止的時間。
理想的是，上述識別對象包含聲音數(shù)據(jù)。
理想的是，上述識別對象包含為識別個人的信息。
依據(jù)本發(fā)明的另一方案，接口裝置包括識別部、動作控制部、候補(bǔ)制作部、提示控制部。識別部根據(jù)識別對象和包含在識別用詞典中的詞典數(shù)據(jù)之間的相似度獲取識別結(jié)果。動作控制部指示執(zhí)行由識別部獲取的識別結(jié)果相關(guān)聯(lián)的第1動作。候補(bǔ)制作部根據(jù)由識別部獲取的識別結(jié)果之間的意思相近度獲取1個或者多個候補(bǔ)。提示控制部提示由候補(bǔ)制作部獲取的候補(bǔ)。
在現(xiàn)有技術(shù)中，候補(bǔ)由于通過從識別候補(bǔ)中選擇制作，只能執(zhí)行所識別的意思相近的(例如輸入聲音「sight」時，在讀音上相近的「sigh」、「site」、「sign」等)動作。但是在上述接口裝置中，根據(jù)與識別結(jié)果的意思相近度獲取候補(bǔ)，例如在檢索電視的電子節(jié)目指南中，輸入「足球」時，按照體育種類的意思，可以選擇與「足球」相近的「棒球」、「籃球」等的動作。
此外，在所謂的「意思相近」包含以下(1)～(4)方面的內(nèi)容。
(1)相同種類對于識別結(jié)果「足球」可以采用「網(wǎng)球」、「棒球」、「高爾夫」等。
(2)聯(lián)想的關(guān)鍵詞對于識別結(jié)果「足球」可以采用「中田」、「世界杯」等。
對于識別結(jié)果「紅」可以采用「顏色」、「黑」、「蘋果」等。
(3)考慮到利用者的嗜好的關(guān)鍵詞對于識別結(jié)果「?？垂?jié)目」可以采用「足球」、「體育節(jié)選」、「今日新聞」等。
對于識別結(jié)果「當(dāng)前要做的事」可以采用「郵件」、「打開浴室開關(guān)」等。
(4)有關(guān)機(jī)器操作的關(guān)鍵詞在視頻播放機(jī)操作中對于識別「播放」可以采用「停止」、「快進(jìn)」、「后退」等。
依據(jù)本發(fā)明的又一方案，接口裝置包括第1識別用詞典、識別部、提示控制部。第1識別用詞典包含1個或者多個詞典數(shù)據(jù)。識別部根據(jù)識別對象和包含在第1識別用詞典中的詞典數(shù)據(jù)之間的相似度獲取識別結(jié)果。提示控制部提示與識別結(jié)果關(guān)聯(lián)的1個或者多個候補(bǔ)、和提示與該候補(bǔ)對應(yīng)的詞典數(shù)據(jù)是否包含在第1識別用詞典中。
依據(jù)上述接口裝置，可以自然向利用者提示登錄在第1識別用詞典中的詞匯。又，對于利用者而言，理解可識別的數(shù)據(jù)，可以提高識別率。因此，利用者使用方便。
理想的是，上述接口裝置進(jìn)一步包括第2識別用詞典和詞典控制部。第2識別用詞典包含1個或者多個詞典數(shù)據(jù)。詞典控制部將包含在第1識別用詞典中的詞典數(shù)據(jù)與包含在第2識別用詞典中的詞典數(shù)據(jù)按照給定基準(zhǔn)進(jìn)行交換。
理想的是，上述接口裝置還包括詞典控制部。詞典控制部可以在第1識別用詞典中追加某個詞典數(shù)據(jù)，從第1識別用詞典中刪除某個詞典數(shù)據(jù)。
依據(jù)本發(fā)明的又一方案，動作控制方法包括步驟(a)～(c)。在步驟(a)中，根據(jù)識別對象和包含在識別用詞典中的詞典數(shù)據(jù)之間的相似度獲取識別結(jié)果。在步驟(b)中，執(zhí)行與上述識別結(jié)果相關(guān)聯(lián)的第1動作。在步驟(c)中，提示與上述識別結(jié)果相關(guān)聯(lián)的1個或者多個候補(bǔ)、在提示該候補(bǔ)的時間達(dá)到給定時間后中止該候補(bǔ)的提示。
理想的是，在上述步驟(c)中，在顯示器上顯示上述候補(bǔ)，上述候補(bǔ)在顯示器上顯示的時間達(dá)到給定時間后中止上述候補(bǔ)在顯示器上的顯示。
理想的是，上述識別結(jié)果表示與識別對象之間的相似度超過給定基準(zhǔn)值的詞典數(shù)據(jù)。上述第1動作與識別結(jié)果所示的詞典數(shù)據(jù)中的某一詞典數(shù)據(jù)關(guān)聯(lián)。上述1個或者多個候補(bǔ)與識別結(jié)果所示的詞典數(shù)據(jù)中的其它詞典數(shù)據(jù)關(guān)聯(lián)。
理想的是，在上述步驟(c)中，當(dāng)從所提示的候補(bǔ)中選擇任一個后，中止所提示的候補(bǔ)的提示。
理想的是，上述動作控制方法進(jìn)一步包括步驟(d)。在步驟(d)中，當(dāng)從步驟(c)所提示的候補(bǔ)中選擇任一個后，執(zhí)行與所選擇的候補(bǔ)相關(guān)聯(lián)的第2動作。
理想的是，在上述步驟(c)中，在候補(bǔ)提示的期間如果指示執(zhí)行第3動作，中止所提示的候補(bǔ)的提示。
理想的是，上述動作控制方法進(jìn)一步包括步驟(e)。在步驟(e)中，提示到開始執(zhí)行上述第1動作為止的時間。
理想的是，上述識別對象包含聲音數(shù)據(jù)。
理想的是，上述識別對象包含為識別個人的信息。
依據(jù)本發(fā)明的又一方案，動作控制方法包括步驟(a)～(d)。在步驟(a)中，根據(jù)識別對象和包含在識別用詞典中的詞典數(shù)據(jù)之間的相似度獲取識別結(jié)果。在步驟(b)中，指示執(zhí)行與識別結(jié)果相關(guān)聯(lián)的第1動作。在步驟(c)中，根據(jù)與識別結(jié)果之間的意思相近度獲取1個或者多個候補(bǔ)。在步驟(d)中，提示由步驟(c)獲取的候補(bǔ)。
理想的是，上述1個或者多個候補(bǔ)屬于識別結(jié)果的種類。
理想的是，上述1個或者多個候補(bǔ)的每一個包含根據(jù)識別結(jié)果聯(lián)想的關(guān)鍵詞。
理想的是，上述1個或者多個候補(bǔ)的每一個包含根據(jù)利用者嗜好以及/或者行動模式的關(guān)鍵詞。
理想的是，上述1個或者多個候補(bǔ)的每一個表示與第1動作關(guān)聯(lián)的動作。
依據(jù)本發(fā)明的又一方案，動作控制方法包括步驟(a)～(b)。在步驟(a)中，根據(jù)識別對象和包含在第1識別用詞典中的詞典數(shù)據(jù)之間的相似度獲取識別結(jié)果。在步驟(b)中，提示與識別結(jié)果關(guān)聯(lián)的1個或者多個候補(bǔ)、和提示與該候補(bǔ)對應(yīng)的詞典數(shù)據(jù)是否包含在第1識別用詞典中。
理想的是，上述動作控制方法進(jìn)一步包括步驟(c)。在步驟(c)中，將包含在第1識別用詞典中的詞典數(shù)據(jù)與包含在第2識別用詞典中的詞典數(shù)據(jù)按照給定基準(zhǔn)進(jìn)行交換。
理想的是，上述動作控制方法進(jìn)一步包括步驟(d)。在步驟(d)中，可以在第1識別用詞典中追加某個詞典數(shù)據(jù)，從第1識別用詞典中刪除某個詞典數(shù)據(jù)。
依據(jù)本發(fā)明的又一方案，畫面顯示方法包括步驟(a)～(b)。在步驟(a)中，在畫面上顯示根據(jù)識別結(jié)果獲得的1個或者多個候補(bǔ)。在步驟(b)中，在畫面上顯示上述候補(bǔ)的時間到達(dá)給定時間后從畫面上刪除上述候補(bǔ)。
理想的是，在上述步驟(a)中，在畫面上與在顯示上述候補(bǔ)一起的同時顯示與上述識別結(jié)果相關(guān)聯(lián)的第1動作的內(nèi)容理想的是，在上述步驟(a)中，強(qiáng)調(diào)顯示第1動作的內(nèi)容。
理想的是，在上述步驟(a)中，顯示到開始執(zhí)行第1動作的時間。
理想的是，在上述步驟(a)中，在畫面的可顯示區(qū)域中在顯示第1動作內(nèi)容的區(qū)域之外的區(qū)域上顯示上述候補(bǔ)。
理想的是，在上述步驟(a)中，強(qiáng)調(diào)顯示上述候補(bǔ)中的被選中的候補(bǔ)。
理想的是，在上述步驟(a)中，顯示可以通過聲音識別技術(shù)選擇的候補(bǔ)，并強(qiáng)調(diào)顯示為選擇所顯示的候補(bǔ)應(yīng)發(fā)聲的部分理想的是，在上述步驟(a)中，強(qiáng)調(diào)顯示上述識別結(jié)果。
理想的是，在上述步驟(b)中，在刪除候補(bǔ)的同時中止識別結(jié)果的強(qiáng)調(diào)顯示。
理想的是，上述畫面顯示方法進(jìn)一步包括步驟(c)。在步驟(c)中，當(dāng)從在畫面上顯示的候補(bǔ)中選擇任一個后刪除在畫面上顯示的所有候補(bǔ)。
理想的是，在上述步驟(a)中，顯示根據(jù)與識別結(jié)果意思的相近度獲取的候補(bǔ)。
理想的是，在上述步驟(a)中，針對每個上述1個或者多個候補(bǔ)，顯示是否可以通過聲音識別技術(shù)選擇候補(bǔ)的信息。
理想的是，上述第1動作是進(jìn)行與識別結(jié)果相關(guān)信息的顯示。
理想的是，上述第1動作是與識別結(jié)果相關(guān)的機(jī)器操作。
理想的是，上述第1動作是進(jìn)行與識別結(jié)果相關(guān)的信息檢索及檢索結(jié)果的顯示。
理想的是，上述第2動作是進(jìn)行與選擇信息所表示的候補(bǔ)相關(guān)的信息的顯示。
理想的是，上述第2動作是與選擇信息所表示的候補(bǔ)相關(guān)的機(jī)器操作。
理想的是，上述第2動作是與選擇信息所表示的候補(bǔ)相關(guān)的信息檢索及檢索結(jié)果的顯示。
理想的是，上述第3動作是進(jìn)行識別對象的輸入。
理想的是，上述第3動作是進(jìn)行給定畫面(例如菜單畫面)的顯示。
理想的是，上述第3動作是由第1動作的執(zhí)行結(jié)果的聲音給出的提示。


圖1表示第1實(shí)施方案的數(shù)字電視系統(tǒng)的整體構(gòu)成方框圖。
圖2表示圖1所示系統(tǒng)的動作流程圖。
圖3表示在顯示器上顯示的畫面圖。
圖4A表示在顯示器上顯示的畫面圖。
圖4B表示在顯示器上顯示的畫面圖。
圖5表示在顯示器上顯示的另一例畫面圖。
圖6表示在顯示器上顯示的另一例畫面圖。
圖7A表示第2實(shí)施方案的數(shù)字電視系統(tǒng)的整體構(gòu)成方框圖。
圖7B表示保存在候選DB中的數(shù)據(jù)庫的內(nèi)容圖7C表示保存在識別用詞典數(shù)據(jù)以及候選DB中的詞匯數(shù)據(jù)。
圖8表示圖7所示系統(tǒng)的動作流程圖。
圖9A表示在顯示器上顯示的畫面圖。
圖9B表示在顯示器上顯示的畫面圖。
圖9C表示在顯示器上顯示的畫面圖。
圖9D表示在顯示器上顯示的畫面圖。
圖9E表示在顯示器上顯示的畫面圖。
圖9F表示為說明在識別用詞典中追加、刪除詞典數(shù)據(jù)的處理的圖。
圖9G表示為說明在識別用詞典中追加、刪除詞典數(shù)據(jù)的處理的圖。
圖9H表示為說明在識別用詞典中追加、刪除詞典數(shù)據(jù)的處理的圖。
圖10表示第3實(shí)施方案的數(shù)字電視系統(tǒng)的整體構(gòu)成方框圖。
圖11表示圖10所示系統(tǒng)的動作流程圖。
圖12A表示在顯示器上顯示的畫面圖。
圖12B表示在顯示器上顯示的畫面圖。
圖13表示第4實(shí)施方案的視頻系統(tǒng)的整體構(gòu)成方框圖。
圖14表示圖13所示系統(tǒng)的動作流程圖。
圖15A表示在顯示器上顯示的畫面圖。
圖15B表示在顯示器上顯示的畫面圖。
圖15C表示數(shù)據(jù)庫的內(nèi)容。
圖16表示第5實(shí)施方案的汽車導(dǎo)航系統(tǒng)的整體構(gòu)成方框圖。
圖17表示圖16所示系統(tǒng)的動作流程圖。
圖18表示在顯示器上顯示的畫面圖。
圖19表示第6實(shí)施方案的移動電話的整體構(gòu)成方框圖。
圖20表示圖19所示移動電話的動作流程圖。
圖21A表示在顯示器上顯示的畫面圖。
圖21B表示在顯示器上顯示的畫面圖。
圖22表示第7實(shí)施方案的翻譯裝置的整體構(gòu)成方框圖。
圖23表示圖22所示的翻譯裝置的動作流程圖。
圖24表示在顯示器上顯示的畫面圖。
圖25表示第8實(shí)施方案的監(jiān)視系統(tǒng)的整體構(gòu)成方框圖。
圖26表示圖25所示系統(tǒng)的動作流程圖。
圖27A表示在顯示器上顯示的畫面圖。
圖27B表示在顯示器上顯示的畫面圖。
圖27C表示在顯示器上顯示的畫面圖。
圖27D表示在顯示器上顯示的畫面圖。
圖27E表示數(shù)據(jù)庫的內(nèi)容。
圖28表示第9實(shí)施方案的控制系統(tǒng)的整體構(gòu)成方框圖。
圖29表示圖28所示系統(tǒng)的動作流程圖。
圖30A表示在顯示器上顯示的畫面圖。
圖30B表示在顯示器上顯示的畫面圖。
圖30C表示數(shù)據(jù)庫的內(nèi)容。
圖30D表示在顯示器上顯示的畫面圖。
圖30E表示在顯示器上顯示的畫面圖。
具體實(shí)施方案以下參照

本發(fā)明的實(shí)施方案。圖中相同或者相當(dāng)?shù)牟糠植捎孟嗤姆?，并且不重?fù)進(jìn)行說明。
(第1實(shí)施方案)<數(shù)字電視系統(tǒng)的構(gòu)成>
圖1表示依據(jù)第1實(shí)施方案的數(shù)字電視系統(tǒng)的整體構(gòu)成。該系統(tǒng)包括數(shù)字電視機(jī)主體135、聲音識別遙控器134。
數(shù)字電視機(jī)主體135包括聲音識別部11、動作控制部12、候補(bǔ)制作部13、候補(bǔ)提示部14、候補(bǔ)選擇部15、紅外線接收部136、顯示器137。聲音識別部11包括噪聲處理部120、模型制作部121、識別用詞典122、比較處理部123。
聲音識別遙控器134包括紅外線發(fā)射部130、麥克風(fēng)131、確認(rèn)鍵132、移動鍵133。麥克風(fēng)131接收利用者的聲音數(shù)據(jù)后向紅外線發(fā)射部130傳送。紅外線發(fā)射部130將來自麥克風(fēng)131的聲音數(shù)據(jù)發(fā)送給紅外線接收部136。
噪聲處理部120將來自紅外線接收部136的聲音數(shù)據(jù)傳送噪聲處理部120。
噪聲處理部120將對來自紅外線接收部1 36的聲音數(shù)據(jù)進(jìn)行噪聲處理后數(shù)據(jù)傳送得模型制作部121。
模型制作部121對來自噪聲處理部120的數(shù)據(jù)變換成到譜系數(shù)等特征量，給特征量作為模型保存。
比較處理部123對包含在詞典數(shù)據(jù)(聲音模型)和由模型制作部121保存的模型進(jìn)行比較，制作識別結(jié)果S110。由比較處理部123獲得的識別結(jié)果S110傳送給動作控制部12和候補(bǔ)制作部13。
動作控制部12根據(jù)聲音識別部11作成的識別結(jié)果S110切換顯示器137的畫面顯示。
候補(bǔ)制作部13根據(jù)聲音識別部11作成的識別結(jié)果S110制作動作候補(bǔ)S111。由候補(bǔ)制作部13制作的動作候補(bǔ)S111被傳送給候補(bǔ)提示部14。
候補(bǔ)提示部14在顯示器137上提示由候補(bǔ)制作部13制作的動作候補(bǔ)S111，將提示位置信息S144傳送給候補(bǔ)選擇部15。候補(bǔ)提示部14，當(dāng)從提示動作候補(bǔ)S111開始經(jīng)過第1時間并且從動作控制部12沒有接收到非提示信號S142時，讓在顯示器137上提示的動作候補(bǔ)S111成非提示狀態(tài)，向候補(bǔ)選擇部15傳送觸發(fā)信號S143。
紅外線發(fā)射部130向紅外線接收部136傳送操作移動鍵133和確認(rèn)鍵132的操作信號S146。
紅外線接收部136將來自紅外線發(fā)射部130的操作信號S146傳送給候補(bǔ)選擇部15。
候補(bǔ)選擇部15從接收到來自候補(bǔ)提示部14的提示位置信息S144到接收到觸發(fā)信號S143為止的期間接收到由移動鍵133形成的操作信號S146時，根據(jù)操作信號S146和提示位置信息S144制作預(yù)備候補(bǔ)位置信息S141，根據(jù)預(yù)備候補(bǔ)位置信息S141變更顯示器137的顯示。候補(bǔ)選擇部l5在接收到來自候補(bǔ)提示部14的觸發(fā)信號S143為止的期間接收到由移動鍵133形成的操作信號S146時，根據(jù)操作信號S146和提示位置信息S144制作選擇信息S112，向動作控制部12傳送選擇信息S112。
動作控制部12響應(yīng)來自候補(bǔ)選擇部15的選擇信息S112，將非提示信號S142傳送給候補(bǔ)提示部14。又，動作控制部12根據(jù)來自候補(bǔ)選擇部15的選擇信息S112切換顯示器137的畫面。
候補(bǔ)提示部14響應(yīng)來自動作控制部12的非提示信號S142，讓在顯示器137上的動作候補(bǔ)S111的提示成非提示狀態(tài)。
<數(shù)字電視系統(tǒng)的動作>
以下說明以上構(gòu)成的數(shù)字電視系統(tǒng)的動作。在此，以通過聲音和按鍵操作進(jìn)行電視的電子節(jié)目指南操作時的情況為例，參照圖2～圖4B進(jìn)行說明。
(1)顯示反應(yīng)利用者意圖的畫面時的情況首先，在顯示器137上顯示「BS大阪」的節(jié)目(參見圖3的顯示畫面3-1)。
利用者為了看足球節(jié)目的電子節(jié)目指南(EPG)，對準(zhǔn)遙控器134的麥克風(fēng)131發(fā)出「足球」聲音(參見圖3的顯示畫面3-1)。所輸入的聲音數(shù)據(jù)由紅外線發(fā)射部130被傳送給電視機(jī)主體135的紅外線接收部136。紅外線接收部136將所接收到的聲音數(shù)據(jù)傳送給聲音識別部11。聲音識別部11，作為識別結(jié)果S110輸出包含在識別用詞典122中的詞典數(shù)據(jù)中與有關(guān)該聲音數(shù)據(jù)的信息一致度最高的「足球」、和一致度第2～第4高的「曲棍球」、「酒(sake)」、「紅(aka相當(dāng)于red的日語)」。將識別結(jié)果S110的「足球」傳送給動作控制部12，將識別結(jié)果S110的「曲棍球」、「酒」、「紅」傳送給候補(bǔ)制作部13。候補(bǔ)制作部13，制作動作候補(bǔ)S111的「曲棍球」、「酒」、「紅」，并傳送給候補(bǔ)提示部14。
動作控制部12根據(jù)識別結(jié)果S110的「足球」在顯示器137上顯示足球節(jié)目的電子節(jié)目指南(第1畫面)(第1動作)。候補(bǔ)提示部14在顯示器137上顯示第1畫面之外的畫面候補(bǔ)的「曲棍球」、「酒」、「紅」(參見圖3的顯示畫面3-2)。如顯示畫面3-2所示，通過顯示「足球節(jié)目的EPG」，向利用者通知在該時刻畫面上所顯示的是足球節(jié)目的電子節(jié)目指南。又，在「足球節(jié)目的EPG」顯示中的「足球」部分、即識別結(jié)果被強(qiáng)調(diào)顯示。又，對顯示足球節(jié)目的EPG的區(qū)域用粗框進(jìn)行強(qiáng)調(diào)顯示。另一方面，畫面候補(bǔ)，用小字顯示在畫面的一端。又，通過顯示「候補(bǔ)」，向利用者通知所顯示的是候補(bǔ)。顯示「候補(bǔ)」的區(qū)域用虛線、細(xì)框、小字顯示。
此外，可以顯示「足球節(jié)目的EPG」，也可以通過在畫面候補(bǔ)中顯示「足球」替代「足球節(jié)目的EPG」的顯示，向利用者通知在該時刻畫面上所顯示的是足球節(jié)目的電子節(jié)目指南。
候補(bǔ)提示部14，將在顯示器137上顯示畫面候補(bǔ)的「曲棍球」、「酒」、「紅」的位置信息的提示位置信息S144傳送給候補(bǔ)選擇部15。
從畫面候補(bǔ)被顯示開始3秒鐘(給定時間)期間，如果利用者沒有操作移動鍵133，沒有選擇畫面候補(bǔ)的意思時(即，候補(bǔ)提示部14沒有接收到非提示信號S142時)，候補(bǔ)提示部14從畫面候補(bǔ)被顯示開始3秒鐘后(給定時間后)向候補(bǔ)選擇部15傳送觸發(fā)信號S143，在輸入下一聲音數(shù)據(jù)之前不讓候補(bǔ)選擇部15制作選擇信息S112。然后進(jìn)入到第ST25步。
如圖3的顯示畫面3-3所示，候補(bǔ)提示部14消除顯示器137上的畫面候補(bǔ)(成非顯示狀態(tài))。
(2)沒有顯示反應(yīng)利用者意圖的畫面時的情況首先，在顯示器137上顯示「BS大阪」的節(jié)目(參見圖4A的顯示畫面4-1)。
利用者為了看足球節(jié)目的電子節(jié)目指南(EPG)，對準(zhǔn)遙控器134的麥克風(fēng)131發(fā)出「足球」聲音(參見圖4A的顯示畫面4-1)。所輸入的聲音數(shù)據(jù)由紅外線發(fā)射部130被傳送給電視機(jī)主體135的紅外線接收部136。紅外線接收部136將所接收到的聲音數(shù)據(jù)傳送給聲音識別部11。聲音識別部11，作為識別結(jié)果S110輸出包含在識別用詞典122中的詞典數(shù)據(jù)中與有關(guān)該聲音數(shù)據(jù)的信息一致度最高的「曲棍球」(誤識別)、和一致度第2～第4高的「足球」、「酒」、「紅」。將識別結(jié)果S110的「曲棍球」傳送給動作控制部12，將識別結(jié)果S110的「足球」、「酒」、「紅」傳送給候補(bǔ)制作部13。候補(bǔ)制作部13，制作動作候補(bǔ)S111的「足球」、「酒」、「紅」，并傳送給候補(bǔ)提示部14。
動作控制部12根據(jù)識別結(jié)果S110的「曲棍球」在顯示器137上顯示曲棍球節(jié)目的電子節(jié)目指南(第1畫面)(第1動作)。候補(bǔ)提示部14在顯示器137上顯示第1畫面之外的畫面候補(bǔ)的「酒」、「足球」、「紅」(參見圖4A的顯示畫面4-2)。如顯示畫面4-2所示，通過顯示「曲棍球節(jié)目的EPG」，向利用者通知在該時刻畫面上所顯示的是曲棍球節(jié)目的電子節(jié)目指南。又，在「曲棍球節(jié)目的EPG」顯示中的「曲棍球」部分、即識別結(jié)果被強(qiáng)調(diào)顯示。又，對顯示曲棍球節(jié)目的EPG的區(qū)域用粗框進(jìn)行強(qiáng)調(diào)顯示。另一方面，畫面候補(bǔ)，用小字顯示在畫面的一端。又，通過顯示「候補(bǔ)」，向利用者通知所顯示的是候補(bǔ)。顯示「候補(bǔ)」的區(qū)域用虛線、細(xì)框、小字顯示。
此外，可以顯示「曲棍球節(jié)目的EPG」，也可以通過在畫面候補(bǔ)中顯示「曲棍球」替代「曲棍球節(jié)目的EPG」的顯示，向利用者通知在該時刻畫面上所顯示的是曲棍球節(jié)目的電子節(jié)目指南。
候補(bǔ)提示部14，將在顯示器137上顯示畫面候補(bǔ)的「酒」、「足球」、「紅」的位置信息的提示位置信息S144傳送給候補(bǔ)選擇部15。
由于反應(yīng)利用者意圖的畫面應(yīng)該是足球節(jié)目的電子節(jié)目指南，在從畫面候補(bǔ)被顯示開始3秒鐘(給定時間)期間，利用者操作遙控器134的移動鍵133，進(jìn)行表示選擇畫面候補(bǔ)的意思時(參見圖4A的顯示畫面4-3)。候補(bǔ)選擇部15根據(jù)響應(yīng)移動鍵133的操作制作的操作信號S146制作預(yù)備選擇位置信息S141，讓在顯示器137顯示的候補(bǔ)的框閃爍(參見圖4A的顯示畫面4-3)進(jìn)一步，如圖4B的顯示畫面4-4所示，根據(jù)移動鍵133的操作，用粗框圍住所選擇的畫面候補(bǔ)。此外，也可以采用改變所選擇的候補(bǔ)的顏色、反色、加粗顯示等。候補(bǔ)選擇部15，根據(jù)確認(rèn)鍵132制作的操作信號S146作為選擇信息S112確認(rèn)「足球」(參見圖4B的顯示畫面4-4)。候補(bǔ)選擇部15向動作控制部12傳送選擇信息S112的「足球」。
動作控制部12，根據(jù)選擇信息S112在顯示器137顯示足球節(jié)目的電子節(jié)目指南。這時，為了表明是修正后的，將足球節(jié)目的電子節(jié)目指南放大顯示，或者改變顏色進(jìn)行強(qiáng)調(diào)。又，動作控制部12在接收到選擇信息S112后，向候補(bǔ)提示部14傳送非提示信號S142。候補(bǔ)提示部14，響應(yīng)非提示信號S142，讓在顯示器137上顯示的動作候補(bǔ)成非顯示狀態(tài)(參見圖4B的顯示畫面4-5)。
<畫面顯示的另一例>
參照圖5～圖6說明畫面顯示的另一例。
(1)顯示反應(yīng)利用者意圖的畫面時的情況首先，在顯示器137上顯示「BS大阪」的節(jié)目(參見圖5的顯示畫面5-1)。
利用者為了看「電視說唱節(jié)目」，對準(zhǔn)遙控器134的麥克風(fēng)131發(fā)出「電視說唱節(jié)目」聲音(參見圖5的顯示畫面5-1)。所輸入的聲音數(shù)據(jù)，通過紅外線發(fā)射部130以及紅外線接收部136傳送給聲音識別部11。聲音識別部11，作為識別結(jié)果S110輸出包含在識別用詞典122中的詞典數(shù)據(jù)中與有關(guān)該聲音數(shù)據(jù)的信息一致度最高的「電視說唱節(jié)目」。聲音識別部11進(jìn)一步，將包含在識別用詞典122中的詞典數(shù)據(jù)中與「電視說唱節(jié)目」相關(guān)的詞典數(shù)據(jù)的「朝日TV」、「CTV」、「每日TV」也作為識別結(jié)果S110輸出。包含在識別用詞典122中的詞典數(shù)據(jù)中的「電視說唱節(jié)目」、「朝日TV」、「CTV」、「每日TV」是表示電視臺(頻道)的詞匯，這些詞典數(shù)據(jù)與電視臺(頻道)相互對應(yīng)關(guān)聯(lián)。將識別結(jié)果S110的「電視說唱節(jié)目」傳送給動作控制部12，將識別結(jié)果S110的「朝日TV」、「CTV」、「每日TV」傳送給候補(bǔ)制作部13。候補(bǔ)制作部13，制作動作候補(bǔ)S111的「朝日TV」、「CTV」、「每日TV」，并傳送給候補(bǔ)提示部14。
動作控制部12，如圖5的顯示畫面5-2所示，在顯示器137的區(qū)域R1上顯示識別結(jié)果S110的「電視說唱節(jié)目」的畫面(第1動作)。這時在識別結(jié)果的「電視說唱節(jié)目」的文字下增加下劃線進(jìn)行強(qiáng)調(diào)。候補(bǔ)提示部14在顯示器137的區(qū)域R1以外的區(qū)域上顯示畫面候補(bǔ)「朝日TV」、「CTV」、「每日TV」(參見圖5的顯示畫面5-2)。這時，對于利用者可以發(fā)聲的詞匯(為選擇而發(fā)聲的詞匯)的「朝日」、「C」、「每日」的部分下面增加下劃線進(jìn)行強(qiáng)調(diào)。由于「TV」包含在所有詞匯(候補(bǔ))中，該部分可以不發(fā)聲，所以也不用強(qiáng)調(diào)。
從畫面候補(bǔ)被顯示開始3秒鐘(給定時間)期間，如果利用者沒有選擇畫面候補(bǔ)的意思(發(fā)聲)時(即，候補(bǔ)提示部14沒有接收到非提示信號S142時)，候補(bǔ)提示部14從畫面候補(bǔ)被顯示開始3秒鐘后(給定時間后)向候補(bǔ)選擇部15傳送觸發(fā)信號S143，在輸入下一聲音數(shù)據(jù)之前不讓候補(bǔ)選擇部15制作選擇信息S112。然后進(jìn)入到第ST25步。
如圖5的顯示畫面5-3所示，候補(bǔ)提示部14消除顯示器137上的畫面候補(bǔ)(成非顯示狀態(tài))。并且，停止對識別結(jié)果的「電視說唱節(jié)目」強(qiáng)調(diào)顯示。
(2)沒有顯示反應(yīng)利用者意圖的畫面時的情況首先，在顯示器137上顯示「BS大阪」的節(jié)目(參見圖6的顯示畫面6-1)。
利用者為了看「電視說唱節(jié)目」，對準(zhǔn)遙控器134的麥克風(fēng)131發(fā)出「電視說唱節(jié)目」聲音(參見圖6的顯示畫面6-1)。所輸入的聲音數(shù)據(jù)，通過紅外線發(fā)射部130以及紅外線接收部136傳送給聲音識別部11。聲音識別部11，將包含在識別用詞典122中的詞典數(shù)據(jù)中與有關(guān)該聲音數(shù)據(jù)的信息一致度最高的「每日TV」(誤識別)作為識別結(jié)果S110輸出。聲音識別部11進(jìn)一步，將包含在識別用詞典122中的詞典數(shù)據(jù)中與「每日TV」相關(guān)的詞典數(shù)據(jù)的「朝日TV」、「電視說唱節(jié)目」、「CTV」也作為識別結(jié)果S110輸出。將識別結(jié)果S110的「每日TV」傳送給動作控制部12，將識別結(jié)果S110的「朝日TV」、「電視說唱節(jié)目」、「CTV」傳送給候補(bǔ)制作部13。候補(bǔ)制作部13，制作動作候補(bǔ)S111的「「朝日TV」、「電視說唱節(jié)目」、「CTV」，并傳送給候補(bǔ)提示部14。
動作控制部12，如圖6的顯示畫面6-2所示，在顯示器137的區(qū)域R1上顯示識別結(jié)果S110的「每日TV」的畫面(第1動作)。這時在識別結(jié)果的「每日TV」的文字下增加下劃線進(jìn)行強(qiáng)調(diào)。候補(bǔ)提示部14在顯示器137的區(qū)域R1以外的區(qū)域上顯示畫面候補(bǔ)「朝日TV」、「電視說唱節(jié)目」、「CTV」(參見圖6的顯示畫面6-2)。這時，對于利用者可以發(fā)聲的詞匯(為選擇而發(fā)聲的詞匯)的「朝日」、「說唱節(jié)目」、「C」部分下面增加下劃線進(jìn)行強(qiáng)調(diào)。
由于反應(yīng)利用者意圖的畫面應(yīng)該是「電視說唱節(jié)目」，在從畫面候補(bǔ)被顯示開始3秒鐘(給定時間)期間，利用者對準(zhǔn)遙控器134的麥克風(fēng)131發(fā)出「說唱節(jié)目」聲音(參見圖6的顯示畫面6-3)。所輸入的聲音數(shù)據(jù)，通過紅外線發(fā)射部130以及紅外線接收部136傳送給聲音識別部11。聲音識別部11，將包含在識別用詞典122中的詞典數(shù)據(jù)中與有關(guān)該聲音數(shù)據(jù)的信息一致度最高的「電視說唱節(jié)目」作為識別結(jié)果S110輸出。將識別結(jié)果S110的「電視說唱節(jié)目」傳送給動作控制部12。動作控制部12，如圖6的顯示畫面6-3所示，將識別結(jié)果S110的「電視說唱節(jié)目」的畫面在顯示器137的區(qū)域R1上顯示。又，候補(bǔ)提示部14響應(yīng)非提示信號S142，讓在顯示器137上顯示的動作候補(bǔ)成非顯示狀態(tài)(參見圖6的顯示畫面6-3)。
<效果>
依據(jù)以上說明的第1實(shí)施方案，在執(zhí)行第2動作的第1時刻和從提示動作候補(bǔ)開始到經(jīng)過第1給定時間后的第2時刻之中較早時刻之前，提示候補(bǔ)制作部13制作的動作候補(bǔ)，為執(zhí)行選擇反應(yīng)利用者意圖的動作，利用者沒有必要再次從頭開始進(jìn)行為執(zhí)行反應(yīng)利用者意圖的動作的流程。因此，利用者使用方便而不麻煩。
又，候補(bǔ)提示部14，在經(jīng)過第1給定時間后利用者仍然沒有選擇動作候補(bǔ)的意思時，讓動作候補(bǔ)自動成非提示狀態(tài)，所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者讓動作候補(bǔ)的提示成非提示狀態(tài)。因此，利用者使用方便而不麻煩。又，可以有效利用畫面顯示區(qū)域。例如，在顯示候補(bǔ)的區(qū)域中可以顯示其它信息。對于體育節(jié)目可以顯示選手的資料等。也可以顯示新聞、天氣信息等。
又，動作控制部12，由于自動執(zhí)行根據(jù)識別部11輸出的識別結(jié)果S110的第1動作，如果所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者選擇動作候補(bǔ)。因此，利用者使用方便而不麻煩。
又，候補(bǔ)提示部14由于自動提示動作候補(bǔ)，如果所執(zhí)行的第1動作不是反應(yīng)利用者意圖的動作時，沒有必要由利用者進(jìn)行為提示動作候補(bǔ)的操作。因此，利用者使用方便而不麻煩。
又，候補(bǔ)制作部13制作的動作候補(bǔ)，由于包含在通過將反應(yīng)所輸入識別對象的動作內(nèi)容的信息與識別用詞典數(shù)據(jù)進(jìn)行比較而一致度高的識別用數(shù)據(jù)相關(guān)聯(lián)的動作，即使出現(xiàn)誤識別，動作候補(bǔ)中包含識別正確的動作，通過利用者的選擇可以修改誤識別。因此，利用者使用方便。
此外，本實(shí)施方案，并不限定于上述內(nèi)容，可以形成以下各種各樣的應(yīng)用。
a)在本實(shí)施方案中也可以并用取消功能。
b)在聲音識別部11中，也可以利用語言知識、語法知識、意思知識等進(jìn)行識別，也可以進(jìn)行抽出關(guān)鍵詞等的處理。
c)識別用詞典數(shù)據(jù)，并不限定于單詞，也可以是句子。
d)動作候補(bǔ)的選擇也可以用聲音進(jìn)行。
e)也可以在多個識別結(jié)果中確定1個動作或者1個動作候補(bǔ)。
f)動作候補(bǔ)也可以只有1個。
g)作為動作候補(bǔ)之一也可以包含實(shí)現(xiàn)取消功能的動作。
h)遙控器和電視機(jī)主體之間的數(shù)據(jù)傳送也并不限定于紅外線，也可以采用藍(lán)牙等無線數(shù)據(jù)通信技術(shù)。
i)動作候補(bǔ)的提示也并不限定于畫面顯示，也可以采用聲音提示等。
j)提示動作候補(bǔ)的個數(shù)也可以不固定。
k)動作候補(bǔ)也可以在顯示器上滾動顯示。
l)動作候補(bǔ)的一部分也可以在經(jīng)過第1給定時間后提示。
(第2實(shí)施方案)<數(shù)字電視系統(tǒng)的構(gòu)成>
圖7A表示依據(jù)第2實(shí)施方案的數(shù)字電視系統(tǒng)的整體構(gòu)成。該系統(tǒng)包括電視機(jī)主體435、遙控器434。電視機(jī)主體435包括紅外線接收部436、動作控制部42、候補(bǔ)制作部43、候補(bǔ)提示部44、候補(bǔ)選擇部45、顯示器437、識別用詞典441、候補(bǔ)數(shù)據(jù)庫(DB)442和詞典控制部443。遙控器434包括麥克風(fēng)431、聲音輸入按鍵438、識別部41、移動鍵433、確認(rèn)鍵432、紅外線發(fā)射部430。識別部41包括模型制作部421、識別用詞典422、比較處理部423。
麥克風(fēng)431在按下聲音輸入按鍵438期間接收利用者的聲音數(shù)據(jù)后向模型制作部421傳送。
模型制作部421將麥克風(fēng)431傳送來的聲音數(shù)據(jù)變換成特征量，作為模型保存。
比較處理部423對包含在識別用詞典422中的詞典數(shù)據(jù)和由模型制作部421保存的模型進(jìn)行比較，制作識別結(jié)果S410，傳送給紅外線發(fā)射部430。
紅外線發(fā)射部430將識別結(jié)果S410傳送給紅外線接收部436。
紅外線接收部436將紅外線發(fā)射部430傳送來的識別結(jié)果S410傳送給動作控制部42和候補(bǔ)制作部43。
動作控制部42根據(jù)紅外線接收部436傳送來的識別結(jié)果S410切換顯示器137的畫面(第1動作)。
候補(bǔ)制作部43根據(jù)紅外線接收部436傳送來的識別結(jié)果S410制作動作候補(bǔ)S411，并將動作候補(bǔ)S411被傳送給候補(bǔ)提示部44。
候補(bǔ)提示部44在顯示器437上提示由候補(bǔ)制作部43制作的動作候補(bǔ)S411，將觸發(fā)信號S443和提示位置信息S444傳送給候補(bǔ)選擇部45。
候補(bǔ)選擇部45從接收到觸發(fā)信號S443開始在經(jīng)過第1給定時間之前，如果沒有接收到由移動鍵433形成的操作信號S446時，將非提示信號S447傳送給候補(bǔ)提示部44。
候補(bǔ)提示部44向應(yīng)非提示信號S447，讓在顯示器437上提示的動作候補(bǔ)S411成非提示狀態(tài)(第2時刻)。
紅外線發(fā)射部430將移動鍵433和確認(rèn)鍵432形成的操作信號S446傳送給紅外線接收部436。
紅外線接收部436將該操作信號S446傳送給候補(bǔ)選擇部45。
候補(bǔ)選擇部45，從接收到候補(bǔ)提示部44傳送來的觸發(fā)信號S443開始在經(jīng)過第1給定時間之前，如果接收到由移動鍵433形成的操作信號S446時，根據(jù)由移動鍵433形成的操作信號S446和候補(bǔ)提示部44傳送來的提示位置信息S444制作預(yù)備候補(bǔ)位置信息S441，根據(jù)預(yù)備候補(bǔ)位置信息S441變更顯示器437的顯示。候補(bǔ)選擇部45，從接收到觸發(fā)信號S443開始在經(jīng)過第1給定時間之前，如果接收到由移動鍵433形成的操作信號S446時，根據(jù)由移動鍵433和確認(rèn)鍵432形成的操作信號S446和提示位置信息S444制作選擇信息S412，向動作控制部42傳送選擇信息S412。
動作控制部42接收候補(bǔ)選擇部45制作的選擇信息S412后向候補(bǔ)提示部44傳送非提示信號S442。又，動作控制部42根據(jù)來自候補(bǔ)選擇部45的選擇信息S412切換顯示器437的畫面(第2動作)。
候補(bǔ)提示部44接收到動作控制部42傳送來的非提示信號S442后，讓顯示器437的動作候補(bǔ)S411的提示成非提示狀態(tài)(第1時刻)。
紅外線發(fā)射部430將通過聲音輸入按鍵438制作的反應(yīng)與第1動作不同動作內(nèi)容的一般信息的利用者的動作信號S445傳送給紅外線接收部436。
紅外線接收部436將動作信號S445傳送給候補(bǔ)選擇部45和候補(bǔ)提示部44。
候補(bǔ)選擇部45接收到動作信號S445后在接收到下一提示位置信息S444之前不制作選擇信息S412。
候補(bǔ)提示部44接收到動作信號S445后，讓顯示器437的動作候補(bǔ)S411的提示成非提示狀態(tài)(第3時刻)。
在候補(bǔ)DB442中，保存有圖7B所示的表。在圖7B所示的表中，根據(jù)種類設(shè)定有4個類似區(qū)域(組)，這里所說的“類似區(qū)域”表示“意思相近”即，屬于同～類似區(qū)域(組)的詞匯，其意思相近，并且4個組與每組對應(yīng)識別信息(組ID)為a～d。各組以種類作為關(guān)鍵詞分組化。各組包含表示該組種類的詞匯、和屬于該詞匯所表示的種類中的詞匯。組IDa所對應(yīng)的組(組a)包含表示組a的種類的詞匯「體育」、和屬于「體育」種類的詞匯「足球」、「棒球」、…、「板球」。組b包含表示組b的種類的詞匯「電影」、和屬于「電影」種類的詞匯「國產(chǎn)電影」、「西洋電影」。組c包含表示組c的種類的詞匯「新聞」、和屬于「新聞」種類的詞匯「最新」、「經(jīng)濟(jì)」、…、「文化·藝術(shù)」。組d包含表示組d的種類的詞匯「音樂」、和屬于「音樂」種類的詞匯「民樂」、「西洋音樂」、…、「古典」。
包含在各組中的每個詞匯所表示的數(shù)據(jù)(詞匯數(shù)據(jù))，如圖7C所示，保存在識別用詞典422、441以及候補(bǔ)DB442中。保存在識別用詞典422、441中的詞匯數(shù)據(jù)，以聲音識別用的詞典數(shù)據(jù)的形式保存。在候補(bǔ)DB442中，保存在聲音識別用詞典數(shù)據(jù)中沒有預(yù)備的詞匯數(shù)據(jù)。每個詞匯數(shù)據(jù)與表示該詞匯所屬組的ID、和表示通過采用聲音識別遙控器434的聲音或者按鍵操作由利用者所選擇的次數(shù)的數(shù)據(jù)相對應(yīng)。在圖7C中，表示組的ID用a.(表示組a)、b.(表示組b)等表示，表示所選擇次數(shù)的數(shù)據(jù)用(0)[表示選擇了0次]、(1)[表示選擇了1次]等表示。
為了減少在聲音識別部41中的誤識別，對保存在識別用詞典422中的詞匯數(shù)據(jù)(詞典數(shù)據(jù))的數(shù)量進(jìn)行了限制。保存在識別用詞典422中的詞匯數(shù)據(jù)根據(jù)給定標(biāo)準(zhǔn)確定。在此，將表示種類的詞匯數(shù)據(jù)「體育」、「電影」、「新聞」、「音樂」、以及所選擇次數(shù)(使用頻度)比較多的詞匯數(shù)據(jù)「足球」、「棒球」、「最新」等保存在識別用詞典422中。進(jìn)一步，對于組整體使用頻度高的組(在此為組a)，保存在識別用詞典422中的詞匯數(shù)據(jù)的數(shù)量要比其它組多。為此，將詞匯數(shù)據(jù)「籃球」也保存在識別用詞典422中。
<數(shù)字電視系統(tǒng)的動作>
以下說明以上構(gòu)成的數(shù)字電視系統(tǒng)的動作。在此，以通過聲音和按鍵操作進(jìn)行電視的電子節(jié)目指南操作時的情況為例，參照圖8以及圖9A～H進(jìn)行說明。
(1)顯示反應(yīng)利用者意圖的畫面時的情況首先，在顯示器437上顯示「BS大阪」的節(jié)目(參見圖9A的顯示畫面9-1)。
利用者為進(jìn)行聲音輸入而按下聲音輸入按鍵438。響應(yīng)該按鍵438的動作信號S445被傳送給候補(bǔ)提示部44。響應(yīng)動作信號S445，候補(bǔ)提示部44，如果有動作候補(bǔ)S411在顯示器437上顯示時，讓動作候補(bǔ)S411成非顯示狀態(tài)，并在顯示器437上顯示「請發(fā)聲」的文字(參見圖9A的顯示畫面9-1)。
利用者在按下遙控器434的聲音輸入按鍵438的同時對準(zhǔn)麥克風(fēng)431發(fā)出「足球」的聲音(參見圖9A的顯示畫面9-2)。所輸入的聲音數(shù)據(jù)被傳送給識別部41。識別部41選擇包含在識別用詞典422的詞典數(shù)據(jù)中與有關(guān)該聲音數(shù)據(jù)的信息相似度最高的詞典數(shù)據(jù)(在此為「足球」)。
然后，識別部41判斷所選擇的詞典數(shù)據(jù)的相似度是否在給定閾值以上。如果相似度在給定閾值以上，進(jìn)入到第ST52步。如果相似度比給定閾值小進(jìn)入到第ST511步。在此，假定進(jìn)入到第ST52步。
此外，「給定閾值」并不一定要固定在某一個值上。利用者根據(jù)使用環(huán)境或者使用方便(識別率低時等)，也可以適當(dāng)變更閾值。
識別部41將「足球」作為識別結(jié)果S410輸出。該識別結(jié)果S410通過紅外線發(fā)射部430傳送給電視機(jī)主體435的紅外線接收部436。紅外線接收部436將接收到的識別結(jié)果S410的「足球」傳送給動作控制部42和候補(bǔ)制作部43。
候補(bǔ)制作部43根據(jù)識別結(jié)果S410的「足球」制作動作候補(bǔ)S411。候補(bǔ)制作部43參照候補(bǔ)DB422內(nèi)的表(圖7B)，抽出屬于「足球」的組(組a)和屬于同組的詞匯數(shù)據(jù)「棒球」、「籃球」、「高爾夫」、「網(wǎng)球」、「曲棍球」、「滑雪」、「長曲棍球」、「板球」。在此，除去詞匯數(shù)據(jù)「足球」、和表示種類的詞匯數(shù)據(jù)「體育」。候補(bǔ)制作部43將所抽出的詞匯數(shù)據(jù)作為動作候補(bǔ)S411傳送給候補(bǔ)提示部44。候補(bǔ)制作部43，對于所抽出的每個詞匯數(shù)據(jù)，表示是否包含在識別用詞典422中的信息附加在動作候補(bǔ)S411中。
動作控制部42根據(jù)識別結(jié)果S410的「足球」在顯示器437上顯示第1畫面的足球節(jié)目的電子節(jié)目指南(第1動作)。候補(bǔ)提示部44在顯示器437上顯示第1畫面之外的畫面候補(bǔ)的「棒球」、「籃球」、「高爾夫」、「網(wǎng)球」、「曲棍球」、「滑雪」、「長曲棍球」、「板球」(參見圖9A的顯示畫面9-2以及圖9B)。如圖9B所示，在包含在識別用詞典422中的畫面候補(bǔ)中的「棒球」、「籃球」之前沒有附加*號，而在沒有包含在識別用詞典422中的畫面候補(bǔ)中的「高爾夫」、「網(wǎng)球」、「曲棍球」、「滑雪」、「長曲棍球」、「板球」之前附加了*號。這樣，可以向利用者表明所顯示的各個候補(bǔ)是否包含在識別用詞典422中。這樣，利用者可以知道下一次什么可以用聲音進(jìn)行選擇，什么不能用聲音進(jìn)行選擇(必須用操作鍵進(jìn)行選擇)。候補(bǔ)提示部44，在顯示畫面候補(bǔ)的時刻，將表示在顯示器437上顯示畫面候補(bǔ)的棒球」、「籃球」、「高爾夫」、「網(wǎng)球」、「曲棍球」、「滑雪」、「長曲棍球」、「板球」的位置信息的提示位置信息S444和觸發(fā)信號S443傳送給候補(bǔ)選擇部45。
候補(bǔ)選擇部45從接收到觸發(fā)信號S443開始3秒鐘(第1給定時間)期間，如果利用者沒有按下聲音輸入按鍵438輸入聲音數(shù)據(jù)，并且候補(bǔ)選擇部45從接收到觸發(fā)信號S443開始3秒鐘(給定時間)期間沒有操作移動鍵433選擇畫面候補(bǔ)的意思時，候補(bǔ)選擇部45在接收到下一動作信號S445之前不制作選擇信息S412。
候補(bǔ)提示部44讓顯示器437上的畫面候補(bǔ)成非顯示狀態(tài)(參見圖9A的顯示畫面9-3)。
(2)沒有顯示反應(yīng)利用者意圖的畫面時的情況首先，在顯示器437上顯示「BS大阪」的節(jié)目(參見圖9C的顯示畫面9-4)。
利用者為進(jìn)行聲音輸入而按下聲音輸入按鍵438。響應(yīng)該按鍵438的動作信號S445被傳送給候補(bǔ)提示部44。響應(yīng)動作信號S445，候補(bǔ)提示部44，如果有動作候補(bǔ)S411在顯示器437上顯示時，讓動作候補(bǔ)S411成非顯示狀態(tài)，并在顯示器437上顯示「請發(fā)聲」的文字(參見圖9C的顯示畫面9-4)。
利用者希望在顯示器437上顯示「長曲棍球」的EPG。然而由于「長曲棍球」是不常見的運(yùn)動，能否用聲音讓「長曲棍球」的EPG顯示，利用者不能確定。不管怎樣利用者嘗試在按下遙控器434的聲音輸入按鍵438的同時對準(zhǔn)麥克風(fēng)431發(fā)出「長曲棍球」的聲音(參見圖9C的顯示畫面9-5)。所輸入的聲音數(shù)據(jù)被傳送給識別部41。識別部41選擇包含在識別用詞典422的詞典數(shù)據(jù)中與有關(guān)該聲音數(shù)據(jù)的信息相似度最高的詞典數(shù)據(jù)[第ST510步]然后，識別部41判斷所選擇的詞典數(shù)據(jù)的相似度是否在給定閾值以上。在此假定判定相似度比給定閾值小。識別部41將表示該意思的信號傳送給動作控制部42。讓后進(jìn)入到第ST511步。
動作控制部42在顯示器437上顯示「沒能識別，對不起，請?jiān)俅伟l(fā)聲」的文字(參見圖9C的顯示畫面9-5)。然后返回到第ST57步。此外，作為向利用者通知的手段，也可以利用警音(蜂鳴音等)、光(LED發(fā)光等)、聲音。
利用者再次按下聲音輸入按鍵438。響應(yīng)該按鍵438，清除顯示器437上的顯示，并在顯示器437上顯示「請發(fā)聲」的文字(參見圖9C的顯示畫面9-6)。
然后，識別部41判斷所選擇的詞典數(shù)據(jù)的相似度是否在給定閾值以上。在此假定判定相似度在給定閾值以上。
識別部41將「體育」作為識別結(jié)果S410輸出。將該識別結(jié)果S410傳送給動作控制部42和候補(bǔ)制作部43。
候補(bǔ)制作部43根據(jù)識別結(jié)果S410的「體育」制作動作候補(bǔ)S411。候補(bǔ)制作部43參照候補(bǔ)DB422內(nèi)的表(圖7B)，抽出屬于「體育」的組(組a)相同組的詞匯數(shù)據(jù)「足球」、「棒球」、「籃球」、「高爾夫」、「網(wǎng)球」、「曲棍球」、「滑雪」、「長曲棍球」、「板球」。在此，除去詞匯數(shù)據(jù)「體育」。候補(bǔ)制作部43將所抽出的詞匯數(shù)據(jù)作為動作候補(bǔ)S411傳送給候補(bǔ)提示部44。候補(bǔ)制作部43，對于所抽出的每個詞匯數(shù)據(jù)，表示是否包含在識別用詞典422中的信息附加在動作候補(bǔ)S411中。
動作控制部42根據(jù)識別結(jié)果S410的「體育」在顯示器437上顯示「體育節(jié)目的EPG」的文字(第1動作)。候補(bǔ)提示部44在顯示器437上顯示畫面候補(bǔ)的「足球」、「棒球」、「籃球」、「高爾夫」、「網(wǎng)球」、「曲棍球」、「滑雪」、「長曲棍球」、「板球」(參見圖9D的顯示畫面9-7以及圖9E)。如圖9E所示，在此，將包含在識別用詞典422中的畫面候補(bǔ)中的「足球」、「棒球」、「籃球」與「聲音OK」的文字相關(guān)聯(lián)。這樣，向利用者表示可以用聲音選擇「足球」、「棒球」、「籃球」。另一方面，將沒有包含在識別用詞典422中的畫面候補(bǔ)中的「高爾夫」、「網(wǎng)球」、「曲棍球」、「滑雪」、「板球」、「長曲棍球」與「用操作鍵」的文字相關(guān)聯(lián)。這樣，向利用者表示不能用聲音選擇「高爾夫」、「網(wǎng)球」、「曲棍球」、「滑雪」、「板球」、「長曲棍球」，而必須用操作鍵進(jìn)行選擇。
利用者觀察顯示畫面9-7，知道所希望的「長曲棍球」不能用聲音選擇而必須用操作鍵選擇。
候補(bǔ)提示部44，在顯示畫面候補(bǔ)的時刻，將提示位置信息S444和觸發(fā)信號S443傳送給候補(bǔ)選擇部45。
候補(bǔ)選擇部45從接收到觸發(fā)信號S443開始3秒鐘(第1給定時間)期間，利用者操作遙控器434的移動鍵433選擇畫面候補(bǔ)。候補(bǔ)選擇部45根據(jù)移動鍵433形成的操作信號S446制作預(yù)備選擇位置信息S441，在顯示器437上強(qiáng)調(diào)(用粗框圍住、改變文字顏色等)顯示被認(rèn)為是當(dāng)前預(yù)備畫面候補(bǔ)的畫面候補(bǔ)的「長曲棍球」(參見圖9D的顯示畫面9-9)。
動作控制部42根據(jù)選擇信息S412在顯示器437上顯示長曲棍球節(jié)目的電子節(jié)目指南(第2動作)(參見圖9D的顯示畫面9-9)。
這次選擇的「長曲棍球」可以認(rèn)為被該利用者再次選擇的可能性高。為此，數(shù)字電視機(jī)主體435的詞典控制部443，如圖9F所示，從服務(wù)器、電視臺等下載「長曲棍球」的聲音識別用的詞典數(shù)據(jù)。所下載的詞典數(shù)據(jù)通過詞典控制部443被保存在識別用詞典441中。當(dāng)識別用詞典441的容量裝滿時，通過詞典控制部443從識別用詞典441中刪除其它詞典數(shù)據(jù)。所刪除的詞典數(shù)據(jù)通過詞典控制部443被追加到候補(bǔ)DB442中。
然后，如圖9G所示，通過詞典控制部443對所下載的「長曲棍球」與包含在識別用詞典422中的詞典數(shù)據(jù)之間進(jìn)行選擇次數(shù)的比較。如果是比「長曲棍球」的選擇次數(shù)少的詞典數(shù)據(jù)，則詞典控制部443從識別用詞典422中刪除該詞典數(shù)據(jù)。由詞典控制部443把所刪除的詞典數(shù)據(jù)追加到識別用詞典441中。然后，由詞典控制部443在識別用詞典422中追加「長曲棍球」的詞典數(shù)據(jù)。
在識別用詞典422中追加「長曲棍球」的詞典數(shù)據(jù)時，在顯示器437上顯示圖9H的顯示畫面9-10。這樣，利用者知道在下一次可以用聲音選擇「長曲棍球」。
<效果>
依據(jù)以上說明的第2實(shí)施方案，在執(zhí)行第2動作的第1時刻、從提示動作候補(bǔ)開始到經(jīng)過第1給定時間后的第2時刻、輸入反應(yīng)與第1動作不同動作內(nèi)容的一般信息的第3時刻、之中任一較早時刻之前，提示候補(bǔ)制作部43制作的動作候補(bǔ)S411，由利用者選擇，利用者沒有必要再次從頭開始進(jìn)行為執(zhí)行反應(yīng)利用者意圖的動作的流程。因此，利用者使用方便而不麻煩。
又，候補(bǔ)提示部44，在經(jīng)過第1給定時間后利用者仍然沒有選擇動作候補(bǔ)的意思時，讓動作候補(bǔ)S411自動成非提示狀態(tài)，所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者讓動作候補(bǔ)S411的提示成非提示狀態(tài)。因此，利用者使用方便而不麻煩。
又，動作控制部42，由于自動執(zhí)行根據(jù)識別部41輸出的識別結(jié)果S410的第1動作，如果所執(zhí)行的動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者選擇動作候補(bǔ)。因此，利用者使用方便而不麻煩。
又，候補(bǔ)提示部44由于自動提示動作候補(bǔ)S411，如果所執(zhí)行的第1動作不是反應(yīng)利用者意圖的動作時，沒有必要由利用者進(jìn)行為提示動作候補(bǔ)的操作。因此，利用者使用方便而不麻煩。
又，候補(bǔ)制作部43制作的動作候補(bǔ)S411，不是與由識別部41獲得的識別結(jié)果S410在聲音上相近的候補(bǔ)，而是意思相近的候補(bǔ)。這樣對于利用者而言，可以提高使用方便性。
又，動作候補(bǔ)從識別用詞典數(shù)據(jù)中制作時，由于可以向利用者提示包含在識別詞典數(shù)據(jù)中的內(nèi)容，可以提高識別率。又，動作候補(bǔ)從識別用詞典數(shù)據(jù)之外制作時，利用者可以及時執(zhí)行沒有包含在識別詞典數(shù)據(jù)中的動作，因此，利用者使用方便。
此外，本實(shí)施方案，并不限定于上述內(nèi)容，可以形成以下各種各樣的應(yīng)用。
a)在本實(shí)施方案中也可以并用取消功能。
b)在識別部41中，也可以利用語言知識、語法知識、意思知識等進(jìn)行識別，也可以進(jìn)行抽出關(guān)鍵詞等的處理。
c)識別用詞典數(shù)據(jù)422，并不限定于單詞，也可以是句子。
d)也可以在多個識別結(jié)果中確定1個動作或者1個動作候補(bǔ)。
e)動作候補(bǔ)411也可以只有1個。
f)作為動作候補(bǔ)411之一也可以包含實(shí)現(xiàn)取消功能的動作。
g)作為動作候補(bǔ)411，也可以包含有關(guān)將反應(yīng)所輸入識別對象的動作內(nèi)容的信息與識別用詞典數(shù)據(jù)422進(jìn)行比較一致度高的識別用數(shù)據(jù)的動作。
h)這里，根據(jù)種類設(shè)定了圖7B所示的表中的類似區(qū)域(種類的類似范圍)。但種類的設(shè)定基準(zhǔn)不限于此。例如，也可以根據(jù)聯(lián)想的關(guān)鍵詞來設(shè)定類似區(qū)域(詞匯的類似范圍)。在這種情況下，對每個基準(zhǔn)詞匯設(shè)定類似范圍。在對應(yīng)某個基準(zhǔn)詞匯的類似區(qū)域內(nèi)，包含有根據(jù)該基準(zhǔn)詞匯而聯(lián)想出的關(guān)鍵詞(例如在對應(yīng)基準(zhǔn)詞匯“足球”的類似區(qū)域中包含“中田”、“世界杯”等。在對應(yīng)基準(zhǔn)詞匯“紅”的類似區(qū)域內(nèi)包含“色彩”、“黑”、“蘋果”等。在對應(yīng)基準(zhǔn)詞匯“體育”的類似區(qū)域中包含“足球”、“棒球”、“高爾夫”等。
而且，也可以根據(jù)使用者的嗜好及/或行動習(xí)慣設(shè)定類似區(qū)域(習(xí)慣的類似范圍)。例如在對應(yīng)基準(zhǔn)詞匯“經(jīng)?？吹墓?jié)目”的類似區(qū)域中包含使用者經(jīng)?？吹墓?jié)目的關(guān)鍵詞“足球”、“體育點(diǎn)評”、“當(dāng)日新聞”等。在對應(yīng)基準(zhǔn)詞匯“目前要做的事”的類似區(qū)域中包含兼顧到使用者及時間的關(guān)鍵詞“郵件”、“向浴缸內(nèi)放水”等。
另外，也可以根據(jù)相關(guān)的機(jī)器操作進(jìn)行類似區(qū)域的設(shè)定(功能性類似范圍)。例如在操作錄象機(jī)時，在對應(yīng)基準(zhǔn)詞匯“回放”的類似區(qū)域內(nèi)包含“停止”、“跳過”、“倒帶”等。
i)根據(jù)需要也可以追加識別用詞典數(shù)據(jù)422。
j)作為反應(yīng)與第1動作不同的動作內(nèi)容的一般信息，也可以采用進(jìn)行取消功能的信息。
k)動作候補(bǔ)的提示也并不限定于畫面顯示，也可以采用聲音提示等。
l)提示動作候補(bǔ)的個數(shù)也可以不固定。
m)動作候補(bǔ)的一部分也可以在經(jīng)過第1給定時間后提示。
n)動作候補(bǔ)也可以在顯示器上滾動顯示。
o)遙控器和電視機(jī)主體之間的數(shù)據(jù)傳送也并不限定于紅外線，也可以采用藍(lán)牙等。
(第3實(shí)施方案)<數(shù)字電視系統(tǒng)的構(gòu)成>
圖10表示依據(jù)第3實(shí)施方案的數(shù)字電視系統(tǒng)的整體構(gòu)成。該系統(tǒng)包括電視機(jī)主體735、遙控器734。電視機(jī)主體735包括收發(fā)部736、動作控制部72、動作候補(bǔ)制作部73、動作候補(bǔ)提示部74、顯示器737。遙控器734包括麥克風(fēng)731、發(fā)話按鍵738、識別部71(動作候補(bǔ)選擇部75)、收發(fā)部730。識別部71(動作候補(bǔ)選擇部75)包括模型制作部721、識別用詞典數(shù)據(jù)722、比較處理部723。
麥克風(fēng)731在按下發(fā)話按鍵738期間接收利用者的聲音數(shù)據(jù)后向模型制作部721傳送。
模型制作部721將麥克風(fēng)731傳送來的聲音數(shù)據(jù)變換成特征量，作為模型保存。
比較處理部723對包含在識別用詞典數(shù)據(jù)722和由模型制作部721保存的模型進(jìn)行比較，制作識別結(jié)果S710，傳送給收發(fā)部730。
收發(fā)部730將識別結(jié)果S710傳送給收發(fā)部736。
收發(fā)部736將收發(fā)部730傳送來的識別結(jié)果S710傳送給動作控制部72和動作候補(bǔ)制作部73。
動作控制部72根據(jù)收發(fā)部736傳送來的識別結(jié)果S710變更顯示器737的畫面(第1動作)。
動作候補(bǔ)制作部73根據(jù)收發(fā)部736傳送來的識別結(jié)果S710制作動作候補(bǔ)S711，并將動作候補(bǔ)S711被傳送給動作候補(bǔ)提示部74和收發(fā)部736。
動作候補(bǔ)提示部74在顯示器737上提示由動作候補(bǔ)制作部73制作的動作候補(bǔ)S711，將觸發(fā)信號S743傳送給收發(fā)部736。并且動作候補(bǔ)提示部74切換信號S748傳送給收發(fā)部736。
收發(fā)部736在接收到下一切換信號S748之前，不向動作候補(bǔ)制作部73傳送選擇信息S712，將所接收到的選擇信息S712傳送給動作控制部72。收發(fā)部736將接收到的觸發(fā)信號S743和動作候補(bǔ)S711傳送給收發(fā)部730。收發(fā)部730將接收到的觸發(fā)信號S743和動作候補(bǔ)S711傳送給比較處理部723。
動作候補(bǔ)選擇部75的識別部71，從比較處理部723接收到觸發(fā)信號S743開始在經(jīng)過第1給定時間之前，如果模型制作部721接收到聲音數(shù)據(jù)時，在比較處理部723中，由動作候補(bǔ)S711對識別用詞典數(shù)據(jù)722加以限制，進(jìn)行是別處理，將識別結(jié)果作為選擇信息S712輸出。
收發(fā)部730在接收到選擇信息S712后將選擇信息S712傳送給收發(fā)部736。
收發(fā)部736將接收到的選擇信息S712傳送給動作控制部72。
動作控制部72在接收到選擇信息S712后向動作候補(bǔ)提示部傳送非提示信號S742。又，動作控制部72根據(jù)收發(fā)部736傳送的選擇信息S712變更顯示器737的畫面(第2動作)。
動作候補(bǔ)提示部74接收到動作控制部72傳送來的非提示信號S742后，讓顯示器737的動作候補(bǔ)S711的提示成非提示狀態(tài)(第1時刻)，并將切換信號S748傳送給收發(fā)部736。
動作候補(bǔ)選擇部75的識別部71，從比較處理部723接收到觸發(fā)信號S743開始在經(jīng)過第1給定時間之前，如果模型制作部721沒有接收到聲音數(shù)據(jù)時，向收發(fā)部730傳送非提示信號S742。
收發(fā)部730將接收到的非提示信號S742傳送給收發(fā)部736。
收發(fā)部736將接收到的非提示信號S742傳送給動作候補(bǔ)提示部74。
動作候補(bǔ)提示部74在接收到非提示信號S742后讓在顯示器737上提示的動作候補(bǔ)S711成非提示狀態(tài)(第2時刻)。又，動作候補(bǔ)提示部74在接收到非提示信號S742后將切換信號S748傳送給收發(fā)部736收發(fā)部736在接收到下一切換信號S748之前，將接收到的識別結(jié)果S710傳送給動作控制部72和動作候補(bǔ)制作部73。
<數(shù)字電視系統(tǒng)的動作>
以下說明以上構(gòu)成的數(shù)字電視系統(tǒng)的動作。在此，以通過聲音進(jìn)行電視節(jié)目的操作時的情況為例，參照圖11以及圖12A～B進(jìn)行說明。
(1)顯示反應(yīng)利用者意圖的畫面時的情況首先，在顯示器737上顯示「BS大阪」的節(jié)目(參見圖12A的顯示畫面12-1)。
利用者為進(jìn)行聲音輸入而按下發(fā)話按鍵738。
利用者在按下發(fā)話按鍵738的同時將「電視說唱節(jié)目」的聲音數(shù)據(jù)輸入給遙控器734的麥克風(fēng)731(參見圖12A的顯示畫面12-1)。所輸入的聲音數(shù)據(jù)被傳送給識別部71。識別部71將有關(guān)聲音數(shù)據(jù)的信息與識別用詞典數(shù)據(jù)722一致度最高的「電視說唱節(jié)目」作為識別結(jié)果S710輸出。并將識別結(jié)果S710通過收發(fā)部730傳送給電視機(jī)主體735的收發(fā)部736。收發(fā)部736將接收到的識別結(jié)果S710的「電視說唱節(jié)目」傳送給動作控制部72和動作候補(bǔ)制作部73。動作候補(bǔ)制作部73，根據(jù)識別結(jié)果S710的「電視說唱節(jié)目」，作為動作候補(bǔ)S711制作有關(guān)相同的電視臺(頻道)的種類的「朝日TV」、「CTV」、「每日TV」。動作候補(bǔ)制作部73，將動作候補(bǔ)S711傳送給動作候補(bǔ)提示部74和收發(fā)部736。
動作控制部72，根據(jù)識別結(jié)果S710的「電視說唱節(jié)目」在顯示器737上顯示電視說唱節(jié)目的節(jié)目(第1動作)。動作候補(bǔ)提示部74在顯示器737上顯示第1畫面以外的畫面候補(bǔ)「朝日TV」、「CTV」、「每日TV」(參見圖12A的顯示畫面12-2)。動作候補(bǔ)提示部74，在顯示畫面候補(bǔ)的時刻向收發(fā)部736傳送觸發(fā)信號S743。收發(fā)部736將接收到的觸發(fā)信號S743和動作候補(bǔ)S711傳送給收發(fā)部730。收發(fā)部730將接收到的觸發(fā)信號S743和動作候補(bǔ)S711傳送給比較處理部723。動作候補(bǔ)提示部74將切換信號S748傳送給收發(fā)部736。收發(fā)部736在接收到下一切換信號S748之前，將接收到的選擇信息S712傳送給動作控制部72，接收到的選擇信息S712不傳送給動作候補(bǔ)制作部73。又，收發(fā)部736進(jìn)一步在接收到下一切換信號S748時，將接收到的識別結(jié)果S710傳送給動作控制部72和動作候補(bǔ)制作部73。
動作候補(bǔ)選擇部75的識別部71，從接收到觸發(fā)信號S743開始在經(jīng)過第1給定時間的期間，如果沒有按下發(fā)話按鍵738輸入聲音進(jìn)行畫面候補(bǔ)的選擇的意思時，動作候補(bǔ)選擇部75將非提示信號S747傳送給收發(fā)部730。收發(fā)部730將接收到的非提示信號S747傳送給收發(fā)部736。收發(fā)部736將接收到的非提示信號S747傳送給動作候補(bǔ)提示部74。動作候補(bǔ)提示部74接收到非提示信號S747后，讓顯示器737的畫面候補(bǔ)成非顯示狀態(tài)(參見圖12A的顯示畫面12-3)。動作候補(bǔ)提示部74接收到非提示信號S747后，將切換信號S748傳送給收發(fā)部736。
(2)反應(yīng)利用者意圖的畫面顯示沒有結(jié)束時的情況首先，在顯示器737上顯示「BS大阪」的節(jié)目(參見圖12B的顯示畫面12-4)。
利用者為進(jìn)行聲音輸入而按下發(fā)話按鍵738。
利用者在按下發(fā)話按鍵738的同時將「電視說唱節(jié)目」的聲音數(shù)據(jù)輸入給遙控器734的麥克風(fēng)731(參見圖12B的顯示畫面12-4)。所輸入的聲音數(shù)據(jù)被傳送給識別部71。識別部71將有關(guān)聲音數(shù)據(jù)的信息與識別用詞典數(shù)據(jù)722一致度最高的「電視說唱節(jié)目」作為識別結(jié)果S710輸出，并將識別結(jié)果S710通過收發(fā)部730傳送給電視機(jī)主體735的收發(fā)部736。收發(fā)部736將接收到的識別結(jié)果S710的「電視說唱節(jié)目」傳送給動作控制部72和動作候補(bǔ)制作部73。動作候補(bǔ)制作部73，根據(jù)識別結(jié)果S710的「電視說唱節(jié)目」，作為動作候補(bǔ)S711制作有關(guān)相同的電視臺(頻道)的種類的「朝日TV」、「CTV」、「每日TV」。動作候補(bǔ)制作部73，將動作候補(bǔ)S711的「朝日TV」、「CTV」、「每日TV」傳送給動作候補(bǔ)提示部74和收發(fā)部736。
動作控制部72，根據(jù)識別結(jié)果S710的「電視說唱節(jié)目」在顯示器737上顯示電視說唱節(jié)目的節(jié)目(第1動作)。動作候補(bǔ)提示部74在顯示器737上顯示第1畫面以外的畫面候補(bǔ)「朝日TV」、「CTV」、「每日TV」(參見圖12B的顯示畫面12-5)。動作候補(bǔ)提示部74，在顯示畫面候補(bǔ)的時刻向收發(fā)部736傳送觸發(fā)信號S743。又，動作候補(bǔ)提示部74將切換信號S748傳送給收發(fā)部736。收發(fā)部736進(jìn)行將下面接收到的選擇信息S712傳送給動作控制部72而接收到的選擇信息S712不傳送給動作候補(bǔ)制作部73的準(zhǔn)備。收發(fā)部736將接收到的觸發(fā)信號S743和動作候補(bǔ)S711傳送給收發(fā)部730。收發(fā)部730將觸發(fā)信號S743和動作候補(bǔ)S711傳送給動作候補(bǔ)選擇部75的識別部71。
「第ST84、ST83步]動作候補(bǔ)選擇部75從接收到觸發(fā)信號S743開始在經(jīng)過第1給定時間的期間，利用者按下發(fā)話按鍵738用麥克風(fēng)731輸入了聲音數(shù)據(jù)的「每日TV」。麥克風(fēng)731將聲音數(shù)據(jù)傳送給模型制作部721。模型制作部721將「每日TV」的聲音數(shù)據(jù)變換成特征量保存。比較處理部723對接收到的動作候補(bǔ)S711的有關(guān)「朝日TV」、「CTV」、「每日TV」的詞典加以限制，利用模型制作部721保存的特征量和識別用詞典數(shù)據(jù)722進(jìn)行關(guān)鍵詞定位，制作選擇信息S712(識別結(jié)果S710)的「每日TV」。比較處理部723將選擇信息S712傳送給收發(fā)部736。收發(fā)部736將接收到的選擇信息S712傳送給動作控制部72。
動作控制部72根據(jù)收發(fā)部736傳送來的選擇信息S712變更顯示器737的顯示，將畫面2分割，追加顯示每日TV的節(jié)目(第2動作)。如圖12B的顯示畫面12-6所示，不是對「電視說唱節(jié)目的節(jié)目」的顯示進(jìn)行修正而顯示「每日TV的節(jié)目」，而是根據(jù)識別結(jié)果同時顯示多個節(jié)目的「電視說唱節(jié)目的節(jié)目」和「每日TV的節(jié)目」。動作控制部72，在接收到選擇信息S712后將非提示信息S742傳送給動作候補(bǔ)提示部74。動作候補(bǔ)提示部74接收非提示信息S742后讓在顯示器737顯示的動作候補(bǔ)S711非顯示狀態(tài)(參見圖12B的顯示畫面12-6)。動作候補(bǔ)提示部74接收非提示信息S742后將切換信號S748傳送給收發(fā)部736。收發(fā)部736進(jìn)行將下面接收到的識別結(jié)果S710傳送給動作控制部72和動作候補(bǔ)制作部73的準(zhǔn)備。
<效果>
依據(jù)以上說明的第3實(shí)施方案，在執(zhí)行第2動作的第1時刻、從提示動作候補(bǔ)S711開始到經(jīng)過第1給定時間后的第2時刻之中任一較早時刻之前，提示動作候補(bǔ)制作部73制作的動作候補(bǔ)S711，由利用者選擇，利用者沒有必要再次從頭開始進(jìn)行為執(zhí)行反應(yīng)利用者意圖的動作的流程。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部74，在經(jīng)過第1給定時間后利用者仍然沒有選擇動作候補(bǔ)的意思時，讓動作候補(bǔ)S711自動成非提示狀態(tài)，所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者讓動作候補(bǔ)S711的提示成非提示狀態(tài)。因此，利用者使用方便而不麻煩。
又，動作控制部72，由于自動執(zhí)行根據(jù)識別部71輸出的識別結(jié)果S710的第1動作，如果所執(zhí)行的動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者選擇動作候補(bǔ)S711。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部74由于自動提示動作候補(bǔ)S711，如果所執(zhí)行的第1動作不是反應(yīng)利用者意圖的動作時，沒有必要由利用者進(jìn)行為提示動作候補(bǔ)S711的操作。因此，利用者使用方便而不麻煩。
又，在動作候補(bǔ)S711，由于對于根據(jù)識別部71輸出的識別結(jié)果S710的第1動作，包含考慮意思相關(guān)的動作的候補(bǔ)，可以及時選擇反應(yīng)利用者意圖的動作。因此，利用者使用方便性好。
又，動作控制部72，可以同時進(jìn)行根據(jù)識別結(jié)果S710的多個動作控制(在顯示電視說唱節(jié)目的節(jié)目的同時顯示每日TV的節(jié)目等)，因此，利用者使用方便性好。
此外，本實(shí)施方案，并不限定于上述內(nèi)容，可以形成以下各種各樣的應(yīng)用。
a)在本實(shí)施方案中也可以并用取消功能。
b)在識別部71中，也可以利用語言知識、語法知識、意思知識等進(jìn)行識別。
c)作為動作候補(bǔ)之一也可以包含實(shí)現(xiàn)取消功能的動作。
d)作為動作候補(bǔ)711，也可以包含有關(guān)將反應(yīng)所輸入識別對象的動作內(nèi)容的信息與識別用詞典數(shù)據(jù)722進(jìn)行比較一致度高的識別用數(shù)據(jù)的動作。
e)作為與根據(jù)識別部71輸出的識別結(jié)果710的動作意思相關(guān)的動作候補(bǔ)S711，雖然列舉了相同種類的動作候補(bǔ)(對于「電視說唱節(jié)目」，采用「朝日TV」、「CTV」、「每日TV」等)，意思相關(guān)并不限定于種類，也可以包括聯(lián)想的動作候補(bǔ)(對于「足球」采用「中田」、「世界杯」等，對于「紅」采用「顏色」、「黑」、「蘋果」等)，或者考慮到利用者的嗜好的動作候補(bǔ)(對于「?？垂?jié)目」采用利用者經(jīng)常收視的節(jié)目的「足球」、「體育節(jié)選」、「今日新聞」等，對于「當(dāng)前要做的事」采用考慮了利用者和時間的「郵件」、「打開浴室開關(guān)」等)，或者有關(guān)操作機(jī)器的動作候補(bǔ)(在視頻播放機(jī)操作中對于「播放」采用「停止」、「快進(jìn)」、「后退」等)。
f)動作候補(bǔ)S711的提示也并不限定于畫面顯示，也可以采用聲音提示等。
g)提示動作候補(bǔ)的個數(shù)也可以不固定。
h)動作候補(bǔ)的一部分也可以在經(jīng)過第1給定時間后提示。
i)動作候補(bǔ)也可以在顯示器上滾動顯示j)遙控器和電視機(jī)主體之間的數(shù)據(jù)傳送也并不限定于紅外線，也可以采用藍(lán)牙等。
(第4實(shí)施方案)<視頻系統(tǒng)的構(gòu)成>
圖13表示依據(jù)第4實(shí)施方案的視頻系統(tǒng)的整體構(gòu)成方框圖。圖13所示系統(tǒng)包括視頻播放器1085、遙控器1084。視頻播放器1085包括接收部1086、動作控制部1056。遙控器1084包括麥克風(fēng)1081、發(fā)話按鍵1088、識別部1051、動作候補(bǔ)制作部1053、動作候補(bǔ)提示部1054、顯示器1087、按鍵1083、動作候補(bǔ)選擇部1055、發(fā)射部1080。識別部1051包括模型制作部1071、識別用詞典數(shù)據(jù)1072、比較處理部1073。
麥克風(fēng)1081在按下發(fā)話按鍵1088期間接收利用者的聲音數(shù)據(jù)后向模型制作部1071傳送。
模型制作部1071將麥克風(fēng)1081傳送來的聲音數(shù)據(jù)變換成特征量，作為模型保存。
比較處理部1073對包含在識別用詞典數(shù)據(jù)1072和由模型制作部1071保存的模型進(jìn)行比較，制作識別結(jié)果S1060，將識別結(jié)果S1060傳送給收發(fā)部1080和動作候補(bǔ)制作部1053。
發(fā)射部1080將接收到的識別結(jié)果S1060傳送給接收部1086。
接收部1086將接收到的識別結(jié)果S1060傳送給動作控制部1056。
動作控制部1056根據(jù)接收到的識別結(jié)果S1060變更視頻播放器的操作(第1動作)。
動作候補(bǔ)制作部1053根據(jù)接收到的識別結(jié)果S1060制作動作候補(bǔ)S1061，并將動作候補(bǔ)S1061被傳送給動作候補(bǔ)提示部1054。
動作候補(bǔ)提示部1054在顯示器1087上提示接收到的動作候補(bǔ)S1061，將觸發(fā)信號S1093傳送給動作候補(bǔ)選擇部1055。
動作候補(bǔ)選擇部1055，從接收到觸發(fā)信號S1093開始在經(jīng)過第1給定時間之前，如果沒有接收到由按鍵1083形成的操作信號S1096時，向動作候補(bǔ)提示部1054傳送非提示信號S1092。
動作候補(bǔ)提示部1054接收到非提示信號S1092后，讓在顯示器1087提示的動作候補(bǔ)S1061成非提示狀態(tài)(第2時刻)。
動作候補(bǔ)選擇部1055，從接收到動作候補(bǔ)提示部1054傳送來的觸發(fā)信號S1093開始在經(jīng)過第1給定時間之前，如果接收到由按鍵1083形成的操作信號S1096時，根據(jù)該操作信號S1096制作選擇信息S1062，將選擇信息S1062傳送給發(fā)射部1080。又，動作候補(bǔ)選擇部1055接收操作信號S1096后，將非提示信號S1092傳送給動作候補(bǔ)提示部1054。
發(fā)射部1080將接收到的選擇信息S1062傳送給接收部1086。
接收部1086將接收到的選擇信息S1062傳送給動作控制部1056。
動作控制部1056根據(jù)接收到的選擇信息S1062進(jìn)行視頻播放器的操作(第2動作)。
動作候補(bǔ)提示部1054接收到非提示信號S1092后，讓在顯示器1087提示的動作候補(bǔ)S1061成非提示狀態(tài)(第1時刻)。
<視頻系統(tǒng)的動作>
以下說明以上構(gòu)成的視頻系統(tǒng)的動作。在此，以通過聲音和按鍵操作進(jìn)行視頻播放器的操作時的情況為例，參照圖14以及圖15A～C進(jìn)行說明。
(1)執(zhí)行反應(yīng)利用者意圖的動作時的情況 利用者為進(jìn)行聲音輸入而按下發(fā)話按鍵1088。
利用者在按下發(fā)話按鍵1088的同時將「播放」的聲音數(shù)據(jù)輸入給遙控器1081的麥克風(fēng)1081(參見圖15A的顯示畫面15-1)。所輸入的聲音數(shù)據(jù)被傳送給識別部1051。識別部1051將有關(guān)聲音數(shù)據(jù)的信息與識別用詞典數(shù)據(jù)1072一致度最高的「播放」作為識別結(jié)果S1060輸出。并將識別結(jié)果S1060通過發(fā)射部1080、接收部1086傳送給視頻播放器1085的動作控制部1056。
動作控制部1056，根據(jù)識別結(jié)果S1060的「播放」播放視頻播放器(第1動作)。又，識別部1051將識別結(jié)果S1060傳送給動作候補(bǔ)制作部1053。動作候補(bǔ)制作部1053具有圖15C所示的表。圖15C所示的表讓識別詞匯和與該識別詞匯意思相近的操作對應(yīng)。在此「意思相近的操作」是指根據(jù)識別詞匯的操作在功能上使用的可能性高的操作。即，在圖15C所示的表中，通過機(jī)器操作設(shè)定4個類似區(qū)域(功能性的類似范圍)。4個類似區(qū)域分別對應(yīng)4個識別詞匯(基準(zhǔn)詞匯)“回放”、“停止”、“跳過”、“倒帶”。在各個類似區(qū)域中，包含有表示在相對應(yīng)的識別詞匯所表示的操作的基礎(chǔ)上進(jìn)行功能性地使用的可能性高的詞匯。動作候補(bǔ)制作部1053，參照圖15C所示的表，根據(jù)接收到的識別結(jié)果S1060的「播放」，作為動作候補(bǔ)S1061制作功能上使用的可能性高的「①停止」、「②快進(jìn)」、「③后退」，并將動作候補(bǔ)S1061傳送給動作候補(bǔ)提示部1054。動作候補(bǔ)提示部1054在顯示器1087上顯示接收到的動作候補(bǔ)S1061的「①停止」、「②快進(jìn)」、「③后退」(參見圖15A的顯示畫面15-2)。動作候補(bǔ)提示部1054接收到的動作候補(bǔ)S1061后向動作候補(bǔ)選擇部1055傳送觸發(fā)信號S1093。
動作候補(bǔ)選擇部1055，從接收到觸發(fā)信號S1093開始在經(jīng)過第1給定時間(在此為3秒)的期間，如果利用者沒有按下按鍵1083選擇動作候補(bǔ)S1061的意思時，動作候補(bǔ)選擇部1055在接收到下一觸發(fā)信號S1093之前不制作選擇信息S1062。動作候補(bǔ)選擇部1055向動作候補(bǔ)提示部1054傳送非提示信號S1092。
動作候補(bǔ)提示部1054接收到非提示信號S1092后，讓顯示器1087的動作候補(bǔ)S1061成非顯示狀態(tài)(參見圖15A的顯示畫面15-3)。
(2)沒有執(zhí)行反應(yīng)利用者意圖的動作時的情況[第ST1157步]利用者為進(jìn)行聲音輸入而按下發(fā)話按鍵1088。
利用者在按下發(fā)話按鍵1088的同時將「播放」的聲音數(shù)據(jù)輸入給遙控器1081的麥克風(fēng)1081(參見圖15B的顯示畫面15-4)。所輸入的聲音數(shù)據(jù)被傳送給識別部1051。識別部1051將有關(guān)聲音數(shù)據(jù)的信息與識別用詞典數(shù)據(jù)1072一致度最高的「播放」作為識別結(jié)果S1060輸出。并將識別結(jié)果S1060通過發(fā)射部1080、接收部1086傳送給視頻播放器1085的動作控制部1056。
動作控制部1056，根據(jù)識別結(jié)果S1060的「播放」播放視頻播放器(第1動作)。又，識別部1051將識別結(jié)果S1060傳送給動作候補(bǔ)制作部1053。動作候補(bǔ)制作部1053根據(jù)接收到的識別結(jié)果S1060的「播放」，作為動作候補(bǔ)S1061制作功能上使用的可能性高的「①停止」、「②快進(jìn)」、「③后退」，并將動作候補(bǔ)S1061傳送給動作候補(bǔ)提示部1054。動作候補(bǔ)提示部1054在顯示器1087上顯示接收到的動作候補(bǔ)S1061的「①停止」、「②快進(jìn)」、「③后退」(參見圖15B的顯示畫面15-5)。動作候補(bǔ)提示部1054接收到的動作候補(bǔ)S1061后向動作候補(bǔ)選擇部1055傳送觸發(fā)信號S1093。
動作候補(bǔ)選擇部1055，從接收到觸發(fā)信號S1093開始在經(jīng)過第1給定時間(在此為3秒)的期間，如果利用者按下按鍵1083選擇動作候補(bǔ)S1061。如圖15B的顯示畫面15-5)所示，在此按下了③的按鍵選擇「③后退」。動作候補(bǔ)選擇部1055根據(jù)按鍵1083形成的操作信號S1096制作選擇信息S1062的「后退」，并傳送給發(fā)射部1080。發(fā)射部1080將接收到的選擇信息S1062，通過接收部1086傳送給動作控制部1056。
動作控制部1056根據(jù)接收到的選擇信息S1062讓視頻播放器執(zhí)行后退操作。動作候補(bǔ)選擇部1055在制作了選擇信息S1062后向動作候補(bǔ)提示部1054傳送非提示信號S1092。動作候補(bǔ)提示部1054接收到非提示信號S1092后，讓顯示器1087的動作候補(bǔ)S1061成非顯示狀態(tài)(參見圖15B的顯示畫面15-6)。
<效果>
依據(jù)以上說明的第4實(shí)施方案，在執(zhí)行第2動作的第1時刻、從提示動作候補(bǔ)S1061開始到經(jīng)過第1給定時間后的第2時刻之中任一較早時刻之前，提示動作候補(bǔ)制作部1053制作的動作候補(bǔ)S1061，由利用者選擇，利用者沒有必要再次從頭開始進(jìn)行為執(zhí)行反應(yīng)利用者意圖的動作的流程。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部1054，在經(jīng)過第1給定時間后利用者仍然沒有選擇動作候補(bǔ)的意思時，讓動作候補(bǔ)S1061自動成非提示狀態(tài)，所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者讓動作候補(bǔ)S1061的提示成非提示狀態(tài)。因此，利用者使用方便而不麻煩。
又，動作控制部1056，由于自動執(zhí)行根據(jù)識別部1051輸出的識別結(jié)果S1060的第1動作，如果所執(zhí)行的動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者選擇動作候補(bǔ)。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部1054由于自動提示動作候補(bǔ)S1061，如果所執(zhí)行的第1動作不是反應(yīng)利用者意圖的動作時，沒有必要由利用者進(jìn)行為提示動作候補(bǔ)的操作。因此，利用者使用方便而不麻煩。
又，在動作候補(bǔ)S1061，由于對于根據(jù)識別部1051輸出的識別結(jié)果S1060的第1動作，包含考慮意思相關(guān)的動作的候補(bǔ)，可以及時選擇反應(yīng)利用者意圖的動作。因此，利用者使用方便性好。
此外，本實(shí)施方案，并不限定于上述內(nèi)容，可以形成以下各種各樣的應(yīng)用。
a)在本發(fā)明中也可以并用取消功能。
b)在識別部1051中，也可以利用語言知識、語法知識、意思知識等進(jìn)行識別，也可以進(jìn)行抽出關(guān)鍵詞等的處理。
c)識別用詞典數(shù)據(jù)1072，并不限定于單詞，也可以是句子。
d)也可以在多個識別結(jié)果中確定1個動作或者1個動作候補(bǔ)。
e)動作候補(bǔ)也可以只有1個。
f)作為動作候補(bǔ)之一也可以包含實(shí)現(xiàn)取消功能的動作。
g)作為動作候補(bǔ)S1061，也可以包含有關(guān)將反應(yīng)所輸入識別對象的動作內(nèi)容的信息與識別用詞典數(shù)據(jù)1072進(jìn)行比較一致度高的識別用數(shù)據(jù)的動作。
h)根據(jù)需要也可以追加識別用詞典數(shù)據(jù)1072。
i)動作候補(bǔ)S1061的提示也并不限定于畫面顯示，也可以采用聲音提示等。
j)提示動作候補(bǔ)S1061的個數(shù)也可以不固定。
k)動作候補(bǔ)S1061的一部分也可以在經(jīng)過第1給定時間后提示。
l)動作候補(bǔ)S1061也可以在顯示器1087上滾動顯示。
m)遙控器和視頻播放器之間的數(shù)據(jù)傳送也并不限定于紅外線，也可以采用藍(lán)牙等。
(第5實(shí)施方案)<汽車導(dǎo)航系統(tǒng)的構(gòu)成>
圖16表示依據(jù)第5實(shí)施方案的汽車導(dǎo)航系統(tǒng)的整體構(gòu)成方框圖。圖16所示的汽車導(dǎo)航系統(tǒng)包括麥克風(fēng)1381、發(fā)話按鍵1388、識別部1351(動作候補(bǔ)選擇部1355)、切換開關(guān)部1386、動作候補(bǔ)制作部1353、動作候補(bǔ)提示部1354、顯示器1387、喇叭1389、控制部1340、動作控制部1352。識別部1351包括模型制作部1371、識別用詞典數(shù)據(jù)1372、比較處理部1373。
麥克風(fēng)1381在按下發(fā)話按鍵1388期間接收利用者的聲音數(shù)據(jù)后向模型制作部1371傳送。
模型制作部1371將麥克風(fēng)1381傳送來的聲音數(shù)據(jù)變換成特征量，作為模型保存。
比較處理部1373對識別用詞典數(shù)據(jù)1372和由模型制作部1371保存的模型進(jìn)行比較，制作識別結(jié)果S1360，將識別結(jié)果S1360傳送給切換開關(guān)部1386。
切換開關(guān)部1386將接收到的識別結(jié)果S1360傳送給動作控制部1352和動作候補(bǔ)制作部1353。
動作控制部1352根據(jù)切換開關(guān)部1386傳送來的識別結(jié)果S1360變更顯示器1387的畫面，從喇叭1389發(fā)出聲音引導(dǎo)，由控制部1340設(shè)置目的地(第1動作)。
動作候補(bǔ)制作部1353根據(jù)切換開關(guān)部1386傳送來的識別結(jié)果S1360制作動作候補(bǔ)S1361，并將動作候補(bǔ)S1361被傳送給動作候補(bǔ)提示部1354。
動作候補(bǔ)提示部1354在顯示器1387上顯示動作候補(bǔ)制作部1353制作的動作候補(bǔ)S1361，將觸發(fā)信號S1393傳送給切換開關(guān)部1386。又，動作候補(bǔ)提示部1354將切換信號S1398傳送給切換開關(guān)部1386。
切換開關(guān)部1386在接收到下一切換信號S1398之前，不向動作候補(bǔ)制作部1353傳送選擇信息S1362，將所接收到的選擇信息S1362傳送給動作控制部1352。切換開關(guān)部1386將接收到的觸發(fā)信號S1393和動作候補(bǔ)S1361傳送給比較處理部1373。
作為動作候補(bǔ)選擇部1355的識別部1351，從比較處理部1373接收到觸發(fā)信號S1393開始在經(jīng)過第1給定時間之前，如果模型制作部1371接收到聲音數(shù)據(jù)時，在比較處理部1373中，由動作候補(bǔ)S1361對識別用詞典數(shù)據(jù)1372加以限制，進(jìn)行識別處理，將識別結(jié)果作為選擇信息S1362輸出。
切換開關(guān)部1386接收比較處理部1373輸出的選擇信息S1362，將選擇信息S1362傳送給動作控制部1352。
動作控制部1352接收到選擇信息S1362后向動作候補(bǔ)提示部1354傳送非提示信號S1392。又，動作控制部1352根據(jù)所接收到的選擇信息S1362變更顯示器1387的畫面，從喇叭1389發(fā)出聲音引導(dǎo)，由控制部1340設(shè)置目的地(第2動作)。
動作候補(bǔ)提示部1354接收到動作控制部1352傳送來的非提示信號S1392后，讓在顯示器1387上的動作候補(bǔ)S1061的提示成非提示狀態(tài)(第1時刻)，將切換信號S1398傳送給切換開關(guān)部1386。
作為動作候補(bǔ)選擇部1355的識別部1351，從比較處理部1373接收到觸發(fā)信號S1393開始在經(jīng)過第1給定時間之前，如果模型制作部1371沒有接收到聲音數(shù)據(jù)時，將非提示信號S1392傳送給切換開關(guān)部1386。
切換開關(guān)部1386將接收到的非提示信號S1392傳送給動作候補(bǔ)提示部1354。
動作候補(bǔ)提示部1354接收到非提示信號S1392后，讓在顯示器1387提示的動作候補(bǔ)S1361成非提示狀態(tài)(第2時刻)。又，動作候補(bǔ)提示部1354接收到非提示信號S1392后，將切換信號S1398傳送給切換開關(guān)部1386。
切換開關(guān)部1386在接收到下一切換信號S1398之前，將接收到的識別結(jié)果S1360傳送給動作控制部1352和動作候補(bǔ)制作部1353。
<汽車導(dǎo)航系統(tǒng)的動作>
以下說明以上構(gòu)成的汽車導(dǎo)航系統(tǒng)的動作。在此，以通過聲音進(jìn)行導(dǎo)航操作時的情況為例，參照圖17以及圖18進(jìn)行說明。
(1)執(zhí)行反應(yīng)利用者意圖的動作時的情況在顯示器1387上顯示「請輸入目的地」(圖18的第15-1-1步)。
利用者為了用聲音輸入目的地而按下發(fā)話按鍵1388。
利用者在按下發(fā)話按鍵1388的同時將「東京迪斯尼樂園(R)」的聲音數(shù)據(jù)輸入給麥克風(fēng)1381(參見圖18的第15-1-1步)。所輸入的聲音數(shù)據(jù)被傳送給識別部1351。識別部1351將有關(guān)聲音數(shù)據(jù)的信息與識別用詞典數(shù)據(jù)1372一致度高的「東京迪斯尼樂園(R)」、「東京迪斯尼海(R)」、「東京站」作為識別結(jié)果S1360輸出。并將識別結(jié)果S1360傳送給切換開關(guān)部1386。在此，識別用詞典數(shù)據(jù)1372保存單詞詞典數(shù)據(jù)，比較處理部1373保存每個音的聲音模型。比較處理部1373利用每個音的聲音模型和識別用詞典數(shù)據(jù)1372中的單詞詞典數(shù)據(jù)制作識別結(jié)果S1360。切換開關(guān)部1386將接收到的識別結(jié)果S1360的「東京迪斯尼樂園(R)」傳送給動作控制部1352，將所接收到的識別結(jié)果S1360的「東京迪斯尼海(R)」、「東京站」傳送給動作候補(bǔ)制作部1353。動作候補(bǔ)制作部1353根據(jù)識別結(jié)果S1360的「東京迪斯尼海(R)」、「東京站」作為動作候補(bǔ)S1361制作「①東京迪斯尼海(R)」、「②東京站」。又，動作候補(bǔ)制作部1353作為動作候補(bǔ)S1361制作「③取消」。動作候補(bǔ)制作部1353將動作候補(bǔ)S1361傳送給動作候補(bǔ)提示部1354和切換開關(guān)部1386。
動作控制部1352，根據(jù)識別結(jié)果S1360的「東京迪斯尼樂園(R)」，在顯示器1387上顯示東京迪斯尼樂園(R)附近的地圖，并從喇叭1389中發(fā)出「設(shè)定了東京迪斯尼樂園(R)為目的地」的聲音引導(dǎo)。在控制部1340中，搜索作為第1設(shè)定的去往東京迪斯尼樂園(R)的道路，設(shè)定路徑(第1動作)。
動作候補(bǔ)提示部1354，在顯示器1387上顯示動作候補(bǔ)S1361的「①東京迪斯尼海(R)」、「②東京站」、「③取消」(圖18的第15-1-2步)。動作候補(bǔ)提示部1354在顯示動作候補(bǔ)S1361的時刻，將觸發(fā)信號S1393傳送給切換開關(guān)部1386。切換開關(guān)部1386將接收到的觸發(fā)信號S1393和動作候補(bǔ)S1361傳送給比較處理部1373。動作候補(bǔ)提示部1354將切換信號S1398傳送給切換開關(guān)部1386。切換開關(guān)部1386在接收到下一切換信號S1398之前，將接收到的選擇信息S1362傳送給動作控制部1352，將接收到的選擇信息S1362不傳送給動作候補(bǔ)制作部1353。又，切換開關(guān)部1386進(jìn)一步接收到下一切換信號S1398時，將所接收到的識別結(jié)果S1360傳送給動作控制部1352和動作候補(bǔ)制作部1353。
動作候補(bǔ)選擇部1355的識別部1351，從接收到觸發(fā)信號S1393開始在經(jīng)過第1給定時間的期間，如果利用者沒有按下發(fā)話按鍵1388輸入聲音選擇動作候補(bǔ)S1361的意思時，動作候補(bǔ)選擇部1355將非提示信號S1392傳送給切換開關(guān)部1386。切換開關(guān)部1386將接收到的非提示信號S1392傳送給動作候補(bǔ)提示部1354。動作候補(bǔ)提示部1354在接收到非提示信號S1392后，讓顯示器1387上的動作候補(bǔ)成非顯示狀態(tài)(圖18的第15-1-3步)。動作候補(bǔ)提示部1354在接收到非提示信號S1392后，將切換信號S1398傳送給切換開關(guān)部1386。
(2)沒有執(zhí)行反應(yīng)利用者意圖的動作時的情況在顯示器1387上顯示「請輸入目的地」(圖18的第15-2-1步)。
利用者為了用聲音輸入目的地而按下發(fā)話按鍵1388。
利用者在按下發(fā)話按鍵1388的同時將「東京迪斯尼樂園(R)」的聲音數(shù)據(jù)輸入給麥克風(fēng)1381(參見圖18的第15-1-1步)。所輸入的聲音數(shù)據(jù)被傳送給識別部1351。識別部1351將有關(guān)聲音數(shù)據(jù)的信息與識別用詞典數(shù)據(jù)1072一致度高的「東京迪斯尼海(R)」、「東京迪斯尼樂園(R)」、「東京站」作為識別結(jié)果S1360輸出。并將識別結(jié)果S1360傳送給切換開關(guān)部1386。切換開關(guān)部1386將接收到的識別結(jié)果S1360的「東京迪斯尼海(R)」傳送給動作控制部1352，將所接收到的識別結(jié)果S1360的「東京迪斯尼樂園(R)」、「東京站」傳送給動作候補(bǔ)制作部1353。動作候補(bǔ)制作部1353根據(jù)識別結(jié)果S1360的「東京迪斯尼樂園(R)」、「東京站」作為動作候補(bǔ)S1361制作「①東京迪斯尼樂園(R)」、「②東京站」。又，動作候補(bǔ)制作部1353作為動作候補(bǔ)S1361制作「③取消」。在此，附加了與「東京迪斯尼樂園(R)」、「東京站」相比容易進(jìn)行聲音識別的編號(①、②、③等)。又，在識別用詞典數(shù)據(jù)1372中登錄有編號(①號、②號、③號等)。動作候補(bǔ)制作部1353將動作候補(bǔ)S1361傳送給動作候補(bǔ)提示部1354和切換開關(guān)部1386。
動作控制部1352，根據(jù)識別結(jié)果S1360的「東京迪斯尼海(R)」，在顯示器1387上顯示東京迪斯尼海(R)附近的地圖，并從喇叭1389中發(fā)出「設(shè)定了東京迪斯尼海(R)為目的地」的聲音引導(dǎo)。在控制部1340中，搜索作為第1設(shè)定的去往東京迪斯尼海(R)的道路，設(shè)定路徑(第1動作)。
動作候補(bǔ)提示部1354，在顯示器1387上顯示動作候補(bǔ)S1361的「①東京迪斯尼樂園(R)」、「②東京站」、「③取消」(圖18的第15-1-2步)。動作候補(bǔ)提示部1354在顯示動作候補(bǔ)S1361的時刻，將觸發(fā)信號S1393傳送給切換開關(guān)部1386。切換開關(guān)部1386將接收到的觸發(fā)信號S1393和動作候補(bǔ)S1361傳送給比較處理部1373。動作候補(bǔ)提示部1354將切換信號S1398傳送給切換開關(guān)部1386。切換開關(guān)部1386在接收到下一切換信號S1398之前，將接收到的選擇信息S1362傳送給動作控制部1352，將接收到的選擇信息S1362不傳送給動作候補(bǔ)制作部1353。又，切換開關(guān)部1386進(jìn)一步接收到下一切換信號S1398時，將所接收到的識別結(jié)果S1360傳送給動作控制部1352和動作候補(bǔ)制作部1353。
動作候補(bǔ)選擇部1355的識別部1351，從接收到觸發(fā)信號S1393開始在經(jīng)過第1給定時間的期間，利用者按下發(fā)話按鍵1388輸入聲音「①號」。麥克風(fēng)1381將聲音數(shù)據(jù)傳送給模型制作部1371。模型制作部1371將「①號」的聲音數(shù)據(jù)變換成特征量保存。比較處理部1373利用模型制作部1371保存的特征量和識別用詞典數(shù)據(jù)1372制作識別結(jié)果S1360的「①號」，根據(jù)識別結(jié)果S1360的「①號」和動作候補(bǔ)S1361的「東京迪斯尼樂園(R)」、制作選擇信息S1362的「東京迪斯尼樂園(R)」。比較處理部1373將選擇信息S1362傳送給切換開關(guān)部1386。切換開關(guān)部1386將接收到的選擇信息S1362傳送給動作控制部1352。
動作控制部1352根據(jù)接收到的選擇信息S1362，在顯示器1387上顯示東京迪斯尼樂園(R)附近的地圖，并從喇叭1389中發(fā)出「設(shè)定了東京迪斯尼樂園(R)為目的地」的聲音引導(dǎo)。在控制部1340中，搜索去往東京迪斯尼樂園(R)的道路，設(shè)定路徑(第2動作)。
動作控制部1352在接收到選擇信息S1362后將非提示信號S1392傳送給動作候補(bǔ)提示部1354。動作候補(bǔ)提示部1354在接收到非提示信號S1392后，讓顯示器1387上的動作候補(bǔ)成非顯示狀態(tài)(圖18的第15-2-3步)。動作候補(bǔ)提示部1354在接收到非提示信號S1392后，將切換信號S1398傳送給切換開關(guān)部1386。切換開關(guān)部1386進(jìn)行將接收到的下一識別結(jié)果S1360傳送給動作控制部1352和動作候補(bǔ)制作部1353的準(zhǔn)備。
<效果>
依據(jù)以上說明的第5實(shí)施方案，在執(zhí)行第2動作的第1時刻、從提示動作候補(bǔ)S1361開始到經(jīng)過第1給定時間后的第2時刻之中任一較早時刻之前，提示動作候補(bǔ)制作部1353制作的動作候補(bǔ)S1361，由利用者選擇，利用者沒有必要再次從頭開始進(jìn)行為執(zhí)行反應(yīng)利用者意圖的動作的流程。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部1354，在經(jīng)過第1給定時間后利用者仍然沒有選擇動作候補(bǔ)的意思時，讓動作候補(bǔ)S1361自動成非提示狀態(tài)，所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者讓動作候補(bǔ)S1361的提示成非提示狀態(tài)。因此，利用者使用方便而不麻煩。
又，動作控制部1352，由于自動執(zhí)行根據(jù)識別部1351輸出的識別結(jié)果S1360的第1動作，如果所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者選擇動作候補(bǔ)。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部1354由于自動提示動作候補(bǔ)S1361，如果所執(zhí)行的第1動作不是反應(yīng)利用者意圖的動作時，沒有必要由利用者進(jìn)行為提示動作候補(bǔ)的操作。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)制作部1353制作的動作候補(bǔ)，由于包含將反應(yīng)所輸入識別對象的動作內(nèi)容的信息與識別用詞典數(shù)據(jù)1372進(jìn)行比較后一致度高的識別用數(shù)據(jù)相關(guān)的動作，即使出現(xiàn)誤識別，由于在動作候補(bǔ)S1361中包含識別正確的動作，通過利用者的選擇可以更正誤識別。因此，利用者使用方便。
又，動作控制部1352根據(jù)識別結(jié)果S1360可以進(jìn)行多個動作控制(顯示東京迪斯尼樂園(R)附近的地圖，并從喇叭1389中發(fā)出「設(shè)定了東京迪斯尼樂園(R)為目的地」的聲音引導(dǎo)，在控制部1340中，搜索去往東京迪斯尼樂園(R)的道路，設(shè)定路徑等)。因此，利用者使用方便。
又，作為動作候補(bǔ)S1361，附加與識別結(jié)果S1360比較容易識別的單詞(在此已編號為例)，進(jìn)行動作候補(bǔ)S1361的選擇，不會出現(xiàn)選擇錯誤。因此，利用者使用方便。
又，作為動作候補(bǔ)S1361，包括取消功能，當(dāng)沒有執(zhí)行反應(yīng)意圖的動作時可以取消返回原來的狀態(tài)。因此，利用者使用方便。
此外，本實(shí)施方案，并不限定于上述內(nèi)容，可以形成以下各種各樣的應(yīng)用。
a)在識別部1351中，也可以利用語言知識、語法知識、意思知識等進(jìn)行識別。
b)作為動作候補(bǔ)S1361，也可以包含根據(jù)識別部1351輸出的識別結(jié)果S1360的動作意思相關(guān)的內(nèi)容。
c)動作候補(bǔ)S1361的提示也并不限定于畫面顯示，也可以采用聲音提示等。
d)提示動作候補(bǔ)S1361的個數(shù)也可以不固定。
e)動作候補(bǔ)S1361的一部分也可以在經(jīng)過第1給定時間后提示。
f)動作候補(bǔ)S1061也可以在顯示器1387上滾動顯示。
(第6實(shí)施方案)<移動電話的構(gòu)成>
圖19表示依據(jù)第6實(shí)施方案的移動電話的整體構(gòu)成方框圖。圖19所示的移動電話1685包括麥克風(fēng)1681、發(fā)話按鍵1688、識別部1651(動作候補(bǔ)選擇部1655)、切換開關(guān)部1686、動作候補(bǔ)制作部1653、動作候補(bǔ)提示部1654、顯示器1687、控制部1640、動作控制部1652。識別部1651(動作候補(bǔ)選擇部1655)包括模型制作部1671、識別用詞典數(shù)據(jù)1672、比較處理部1673。
麥克風(fēng)1681在按下發(fā)話按鍵1688期間接收利用者的聲音數(shù)據(jù)后向模型制作部1671傳送。
模型制作部1671將麥克風(fēng)1681傳送來的聲音數(shù)據(jù)變換成特征量，作為模型保存。
比較處理部1673對識別用詞典數(shù)據(jù)1672和由模型制作部保存的模型進(jìn)行比較，制作識別結(jié)果S1660，將識別結(jié)果S1660傳送給切換開關(guān)部1686。
切換開關(guān)部1686將接收到的識別結(jié)果S1660傳送給動作控制部1652和動作候補(bǔ)制作部1653。
動作控制部1652根據(jù)切換開關(guān)部1686傳送來的識別結(jié)果S1660變更顯示器1687的畫面。又，動作控制部1652接收比較處理部1673傳送來的觸發(fā)信號S1699(經(jīng)過第2給定時間后)，根據(jù)切換開關(guān)部1686傳送來的識別結(jié)果S1660變更顯示器1687的畫面，在控制部1640撥打通話方的電話(第1動作)。
動作候補(bǔ)制作部1653根據(jù)切換開關(guān)部1686傳送來的識別結(jié)果S1660制作動作候補(bǔ)S1661，并將動作候補(bǔ)S1661被傳送給動作候補(bǔ)提示部1654和比較處理部1673。
動作候補(bǔ)提示部1654在顯示器1687上顯示動作候補(bǔ)制作部1653制作的動作候補(bǔ)S1661，將觸發(fā)信號S1693傳送給比較處理部1673。又，動作候補(bǔ)提示部1654將切換信號S1698傳送給切換開關(guān)部1686。
切換開關(guān)部1686在接收到下一切換信號S1698之前，不向動作候補(bǔ)制作部1653傳送選擇信息S1662，將所接收到的選擇信息S1662傳送給動作控制部1652。
作為動作候補(bǔ)選擇部1655的識別部1651，從比較處理部1673接收到觸發(fā)信號S1693開始在經(jīng)過第1給定時間之前，如果模型制作部1671接收到聲音數(shù)據(jù)時，在比較處理部1673中，由動作候補(bǔ)S1661對識別用詞典數(shù)據(jù)1672加以限制，進(jìn)行識別處理，將識別結(jié)果作為選擇信息S1662輸出。
切換開關(guān)部1686接收到比較處理部1673輸出的選擇信息S1662后，將選擇信息S1662傳送給動作控制部1652。
動作控制部1652接收到選擇信息S1662后向動作候補(bǔ)提示部1654傳送非提示信號S1692。又，動作控制部1652根據(jù)所接收到的選擇信息S1662變更顯示器1687的畫面，在控制部1640撥打通話方的電話(第2動作)。
動作候補(bǔ)提示部1654接收到動作控制部1652傳送來的非提示信號S1692后，讓在顯示器1687上的動作候補(bǔ)S1661的提示成非提示狀態(tài)(第1時刻)，將切換信號S1698傳送給切換開關(guān)部1686。
作為動作候補(bǔ)選擇部1655的識別部1651，從比較處理部1673接收到觸發(fā)信號S1693開始在經(jīng)過第1給定時間之前，如果模型制作部1671沒有接收到聲音數(shù)據(jù)時，比較處理部1673將非提示信號S1697傳送給動作候補(bǔ)提示部1654。又，比較處理部1673將觸發(fā)信號S1699傳送給動作控制部1652。
動作候補(bǔ)提示部1654接收到非提示信號S1397后，讓在顯示器1687提示的動作候補(bǔ)S1661成非提示狀態(tài)(第2時刻)。又，動作候補(bǔ)提示部1654接收到非提示信號S1697后，將切換信號S1698傳送給切換開關(guān)部1686。
切換開關(guān)部1686在接收到下一切換信號S1698之前，將接收到的識別結(jié)果S1660傳送給動作控制部1652和動作候補(bǔ)制作部1653。
<移動電話的動作>
以下說明以上構(gòu)成的移動電話1685的動作。在此，以通過聲音進(jìn)行移動電話的通話操作時的情況為例，參照圖20以及圖21進(jìn)行說明。
(1)執(zhí)行反應(yīng)利用者意圖的動作時的情況在顯示器1687上顯示「請輸入發(fā)送方」(圖21A的顯示畫面21-1)。
利用者為了用聲音輸入發(fā)送方而按下發(fā)話按鍵1688。
利用者在按下發(fā)話按鍵1688的同時將「鈴木」的聲音數(shù)據(jù)輸入給麥克風(fēng)1681(圖21A的顯示畫面21-1)。所輸入的聲音數(shù)據(jù)被傳送給識別部1651。識別部1651將有關(guān)聲音數(shù)據(jù)的信息與識別用詞典數(shù)據(jù)1672一致度高的「鈴木」、「斎藤」、「須藤」作為識別結(jié)果S1660輸出。并將識別結(jié)果S1660傳送給切換開關(guān)部1686。切換開關(guān)部1686將接收到的識別結(jié)果S1660的「鈴木」傳送給動作控制部1652，將所接收到的識別結(jié)果S1660的「斎藤」、「須藤」傳送給動作候補(bǔ)制作部1653。動作候補(bǔ)制作部1653根據(jù)識別結(jié)果S1660的「斎藤」、「須藤」作為動作候補(bǔ)S1661制作「②斎藤」、「③須藤」。又，動作候補(bǔ)制作部1653作為動作候補(bǔ)S1661制作「①取消」、「④下一候補(bǔ)」。動作候補(bǔ)制作部1653將動作候補(bǔ)S1661傳送給動作候補(bǔ)提示部1654和比較處理部1673。
動作控制部1652，根據(jù)識別結(jié)果S1660的「鈴木」，在顯示器1687上顯示「向鈴木發(fā)送」和到第1給定時間(5秒)剩余的秒數(shù)「3秒」(第1動作)。
動作候補(bǔ)提示部1654，在顯示器1687上顯示動作候補(bǔ)S1661的「①取消」、「②斎藤」、「③須藤」、「④下一候補(bǔ)」(圖21A的顯示畫面21-2)。動作候補(bǔ)提示部1654在顯示動作候補(bǔ)S1661的時刻，將觸發(fā)信號S1693傳送給比較處理部1673。動作候補(bǔ)提示部1654將切換信號S1698傳送給切換開關(guān)部1686。切換開關(guān)部1686在接收到下一切換信號S1698之前，將接收到的選擇信息S1662傳送給動作控制部1652，將接收到的選擇信息S1662不傳送給動作候補(bǔ)制作部1653。又，切換開關(guān)部1686進(jìn)一步接收到下一切換信號S1698時，將所接收到的識別結(jié)果S1660傳送給動作控制部1652和動作候補(bǔ)制作部1653。
在作為動作候補(bǔ)選擇部1655的識別部1651中，從比較處理部1673接收到觸發(fā)信號S1693開始在經(jīng)過第1給定時間(3秒)的期間，如果利用者沒有按下發(fā)話按鍵1688輸入聲音選擇動作候補(bǔ)S1661的意思時，在動作候補(bǔ)選擇部1655中，比較處理部1673將非提示信號S1697傳送給動作候補(bǔ)提示部1654。又，比較處理部1673將觸發(fā)信號S1699傳送給動作控制部1652。動作候補(bǔ)提示部1654在接收到非提示信號S1697后，讓顯示器1687上的動作候補(bǔ)成非顯示狀態(tài)。動作控制部1652接收到觸發(fā)信號S1699后(經(jīng)過了第2給定時間(在此為5秒)后)，根據(jù)識別結(jié)果S1660的「鈴木」向鈴木撥打電話(第1動作)(圖21A的顯示畫面21-3)。動作候補(bǔ)1654接收到非提示信號S1697后，將切換信號S1698傳送給切換開關(guān)部1686。此外，在上述第1給定時間(3秒)期間如果按下菜單按鍵時，在顯示器1687上顯示菜單畫面(圖21A的顯示畫面21-4)。
(2)沒有執(zhí)行反應(yīng)利用者意圖的動作時的情況在顯示器1687上顯示「請輸入發(fā)送方」(圖21B的顯示畫面21-5)。
利用者為了用聲音輸入發(fā)送方而按下發(fā)話按鍵1688。
利用者在按下發(fā)話按鍵1688的同時將「鈴木」的聲音數(shù)據(jù)輸入給麥克風(fēng)1681(圖21B的顯示畫面21-5)。所輸入的聲音數(shù)據(jù)被傳送給識別部1651。識別部1651將有關(guān)聲音數(shù)據(jù)的信息與識別用詞典數(shù)據(jù)1672一致度高的「斎藤」、「鈴木」、「須藤」作為識別結(jié)果S1660輸出。并將識別結(jié)果S1660傳送給切換開關(guān)部1686。切換開關(guān)部1686將接收到的識別結(jié)果S1660的「斎藤」傳送給動作控制部1652，將所接收到的識別結(jié)果S1660的「「鈴木」、「須藤」傳送給動作候補(bǔ)制作部1653。動作候補(bǔ)制作部1653根據(jù)識別結(jié)果S1660的「鈴木」、「須藤」作為動作候補(bǔ)S1661制作「②鈴木」、「③須藤」。又，動作候補(bǔ)制作部1653作為動作候補(bǔ)S1661制作「①取消」、「④下一候補(bǔ)」。動作候補(bǔ)制作部1653將動作候補(bǔ)S1661傳送給動作候補(bǔ)提示部1654和比較處理部1673。
動作控制部1652，根據(jù)識別結(jié)果S1660的「斎藤」，在顯示器1687上顯示「向斎藤發(fā)送」和到第1給定時間剩余的秒數(shù)「3秒」(第1動作)。
動作候補(bǔ)提示部1654，在顯示器1687上顯示動作候補(bǔ)S1661的「①取消」、「②鈴木」、「③須藤」、「④下一候補(bǔ)」(圖21B的顯示畫面21-6)。動作候補(bǔ)提示部1654在顯示動作候補(bǔ)S1661的時刻，將觸發(fā)信號S1693傳送給比較處理部1673。動作候補(bǔ)提示部1654將切換信號S1698傳送給切換開關(guān)部1686。切換開關(guān)部1686在接收到下一切換信號S1698之前，將接收到的選擇信息S1662傳送給動作控制部1652，將接收到的選擇信息S1662不傳送給動作候補(bǔ)制作部1653。又，切換開關(guān)部1686進(jìn)一步接收到下一切換信號S1698時，將所接收到的識別結(jié)果S1660傳送給動作控制部1652和動作候補(bǔ)制作部1653。
在作為動作候補(bǔ)選擇部1655的識別部1651中，從比較處理部1673接收到觸發(fā)信號S1693開始在經(jīng)過第1給定時間(3秒)的期間，利用者按下發(fā)話按鍵1688輸入聲音「②號」。麥克風(fēng)1681將聲音數(shù)據(jù)傳送給模型制作部1671。模型制作部1671將「②號」的聲音數(shù)據(jù)變換成特征量保存。比較處理部1673利用模型制作部1671保存的特征量和識別用詞典數(shù)據(jù)1672制作識別結(jié)果S1660的「②號」，根據(jù)識別結(jié)果S1660的「②號」和動作候補(bǔ)S1661的「②鈴木」、制作選擇信息S1662的「鈴木」。比較處理部1673將選擇信息S1662傳送給切換開關(guān)部1686。切換開關(guān)部1686將接收到的選擇信息S1662傳送給動作控制部1652。
在經(jīng)過第2給定時間后，動作控制部1652根據(jù)接收到的選擇信息S1662，在顯示器1687上顯示鈴木的電話號碼和「鈴木」，撥打鈴木的電話(第2動作)。
動作控制部1652在接收到選擇信息S1662后將非提示信號S1692傳送給動作候補(bǔ)提示部1654。動作候補(bǔ)提示部1654在接收到非提示信號S1692后，讓顯示器1687上顯示的動作候補(bǔ)S1661成非顯示狀態(tài)(圖21B的顯示畫面21-7)。動作候補(bǔ)提示部1654在接收到非提示信號S1692后，將切換信號S1698傳送給切換開關(guān)部1686。切換開關(guān)部1686進(jìn)行將接收到的下一識別結(jié)果S1660傳送給動作控制部1652和動作候補(bǔ)制作部1653的準(zhǔn)備。
<效果>
依據(jù)以上說明的第6實(shí)施方案，在執(zhí)行第2動作的第1時刻、從提示動作候補(bǔ)S1661開始到經(jīng)過第1給定時間后的第2時刻之中任一較早時刻之前，提示動作候補(bǔ)制作部1653制作的動作候補(bǔ)S1661，由利用者選擇，利用者沒有必要再次從頭開始進(jìn)行為執(zhí)行反應(yīng)利用者意圖的動作的流程。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部1654，在經(jīng)過第1給定時間后利用者仍然沒有選擇動作候補(bǔ)的意思時，讓動作候補(bǔ)S1661自動成非提示狀態(tài)，所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者讓動作候補(bǔ)S1661的提示成非提示狀態(tài)。因此，利用者使用方便而不麻煩。
又，動作控制部1652，由于自動執(zhí)行根據(jù)識別部1651輸出的識別結(jié)果S1660的第1動作，如果所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者選擇動作候補(bǔ)。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部1654由于自動提示動作候補(bǔ)S1661，如果所執(zhí)行的第1動作不是反應(yīng)利用者意圖的動作時，沒有必要由利用者進(jìn)行為提示動作候補(bǔ)的操作。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)制作部1653制作的動作候補(bǔ)S1661，由于包含將反應(yīng)所輸入識別對象的動作內(nèi)容的信息與識別用詞典數(shù)據(jù)1672進(jìn)行比較后一致度高的識別用數(shù)據(jù)相關(guān)的動作，即使出現(xiàn)誤識別，由于在動作候補(bǔ)S1661中包含識別正確的動作，通過利用者的選擇可以更正誤識別。因此，利用者使用方便。
又，由于是在第2給定時間后執(zhí)行根據(jù)識別結(jié)果S1660的第1動作(撥打電話)，可以防止執(zhí)行不是利用者意圖的第1動作。因此，利用者使用方便。
又，作為動作候補(bǔ)S1661，附加與識別結(jié)果S1660比較容易識別的單詞(在此已編號為例)，進(jìn)行動作候補(bǔ)S1661的選擇，不會出現(xiàn)選擇錯誤。因此，利用者使用方便。
又，作為動作候補(bǔ)S1661，包括取消功能，當(dāng)沒有執(zhí)行反應(yīng)意圖的動作時可以取消返回原來的狀態(tài)。因此，利用者使用方便。
此外，本實(shí)施方案，并不限定于上述內(nèi)容，可以形成以下各種各樣的應(yīng)用。
a)在識別部1651中，也可以利用語言知識、語法知識、意思知識等進(jìn)行識別。
b)作為動作候補(bǔ)S1661，也可以包含根據(jù)識別部1651輸出的識別結(jié)果S1660的動作意思相關(guān)的內(nèi)容(對于「鈴木」采用「查看鈴木的郵件」、「查看鈴木的個人信息」等)。
c)動作候補(bǔ)S1661的提示也并不限定于畫面顯示，也可以采用聲音提示等。
d)提示動作候補(bǔ)S1661的個數(shù)也可以不固定。
e)如圖21A的顯示畫面21-4)所示，也可以采用反應(yīng)與第1動作不同動作內(nèi)容的一般信息的「按下了菜單畫面按鍵」的信息等。
f)識別部1651并不限定于聲音識別裝置，也可以是文字識別等。
g)第1給定時間、和有關(guān)第1動作執(zhí)行的第2給定時間也可以獨(dú)立設(shè)定。
h)動作候補(bǔ)S1661的一部分也可以在經(jīng)過第1給定時間后提示。
i)也可以采用文字識別替換聲音識別。
(第7實(shí)施方案)
<翻譯裝置的構(gòu)成>
圖22表示依據(jù)第7實(shí)施方案的翻譯裝置的整體構(gòu)成方框圖。圖22所示的翻譯裝置1985包括麥克風(fēng)1981、識別部1951、動作控制部1952動作候補(bǔ)制作部1993、動作候補(bǔ)提示部1954、動作候補(bǔ)選擇部1955、觸摸屏顯示器1987、控制部1940、喇叭1989。識別部1951包括模型制作部1971、識別用詞典數(shù)據(jù)1972、比較處理部1973。
觸摸屏顯示器1987在用筆按下「發(fā)話按鍵」部分的時刻，將操作信號S1996傳送給麥克風(fēng)1981。
麥克風(fēng)1981在接收到操作信號S1996后，接收聲音數(shù)據(jù)，向模型制作部1971傳送。
模型制作部1971將麥克風(fēng)1981傳送來的聲音數(shù)據(jù)變換成特征量，作為模型保存。
比較處理部1973對識別用詞典數(shù)據(jù)1972和由模型制作部1971保存的模型進(jìn)行比較，制作識別結(jié)果S1960，將識別結(jié)果S1960傳送給動作控制部1952和動作候補(bǔ)制作部1993。
動作控制部1952根據(jù)接收的識別結(jié)果S1960，在觸摸屏顯示器1987上顯示一致度最高的識別結(jié)果，并將觸摸屏顯示器1987上的發(fā)話按鍵變更合成音按鍵顯示器，在控制部1940進(jìn)行一致度最高的識別結(jié)果的翻譯，將翻譯結(jié)果在觸摸屏顯示器1987顯示(第1動作)。
動作候補(bǔ)制作部1993根據(jù)接收到的識別結(jié)果S1960制作動作候補(bǔ)S1961，并將動作候補(bǔ)S1961被傳送給動作候補(bǔ)提示部1954。
動作候補(bǔ)提示部1954在觸摸屏顯示器1987上顯示接收到的動作候補(bǔ)S1961，將觸發(fā)信號S1993傳送給動作候補(bǔ)選擇部1955。
動作候補(bǔ)選擇部1955，從接收到觸發(fā)信號S1993開始在經(jīng)過第1給定時間之前，如果沒有接收到由觸摸屏顯示器1987進(jìn)行候補(bǔ)選擇所形成的操作信號S1996時，將非提示信號S1997傳送給動作候補(bǔ)提示部1954。
動作候補(bǔ)提示部1954接收到非提示信號S1997后，讓在觸摸屏顯示器1987」上顯示的動作候補(bǔ)S1961成非顯示狀態(tài)(第2時刻)。
動作候補(bǔ)選擇部1955，從接收到觸發(fā)信號S1993開始在經(jīng)過第1給定時間之前，如果接收到由觸摸屏顯示器1987進(jìn)行候補(bǔ)選擇所形成的操作信號S1996時，制作根據(jù)接收到的操作信號S1996的選擇信息S1962，并將選擇信息S1962傳送給動作控制部1952。
動作控制部1952根據(jù)接收的選擇信息S 1962，在觸摸屏顯示器1987上顯示所選擇的識別結(jié)果，在控制部1940進(jìn)行所選擇的識別結(jié)果的翻譯，將翻譯結(jié)果在觸摸屏顯示器1987顯示(第2動作)。
動作控制部1952，在接收到由動作候補(bǔ)選擇部1955制作的選擇信息S1962后，將非提示信號S1992傳送給動作候補(bǔ)提示部1954。
動作候補(bǔ)提示部1954接收到動作控制部1952傳送來的非提示信號S1992后，讓在觸摸屏顯示器1987上顯示的動作候補(bǔ)S1961成非顯示狀態(tài)(第1時刻)。
動作控制部1952接收到在由觸摸屏顯示器1987按下合成音按鍵所形成的操作信號S1996(反應(yīng)與第1動作不同動作內(nèi)容的一般信息)后，將非提示信號S1992傳送給動作候補(bǔ)提示部1954。
動作候補(bǔ)選擇部1955接收在由觸摸屏顯示器1987按下合成音按鍵所形成的操作信號S1996，在接收到觸發(fā)信號S1993之前不制作選擇信息S1962。
動作候補(bǔ)提示部1954接收到非提示信號S1992后，讓在觸摸屏顯示器1987上顯示的動作候補(bǔ)S1961成非顯示狀態(tài)(第3時刻)。
<翻譯裝置的動作>
以下說明以上構(gòu)成的翻譯裝置1985的動作。在此，以通過聲音和用筆在觸摸屏顯示器1987上的操作進(jìn)行翻譯裝置的操作時的情況為例，參照圖23以及圖24進(jìn)行說明。
(1)顯示反應(yīng)利用者意圖的翻譯結(jié)果時的情況的例1[第ST2057步]利用者為進(jìn)行聲音輸入用筆按下觸摸屏顯示器1987上的發(fā)話按鍵。
利用者將「買去往東京的車票」的聲音數(shù)據(jù)輸入給麥克風(fēng)1981(圖24的第21-1-1步)。所輸入的聲音數(shù)據(jù)被傳送給識別部1951。識別部1951將有關(guān)聲音數(shù)據(jù)的信息與識別用詞典數(shù)據(jù)1972一致度高的「買去往東京的車票」、「買去往京都的車票」、「買到東京的郵票」作為識別結(jié)果S1960輸出。并將識別結(jié)果S1960的「買去往東京的車票」傳送給動作控制部1952，將識別結(jié)果S1960的「買去往京都的車票」、「買到東京的郵票」傳送給動作候補(bǔ)制作部1993。在此，識別結(jié)果S1960，通過從聲音數(shù)據(jù)中抽出關(guān)鍵詞、從識別用詞典數(shù)據(jù)1972的例文中選擇更多包含從聲音數(shù)據(jù)中抽出的關(guān)鍵詞的例文制作而成。動作候補(bǔ)制作部1993根據(jù)識別結(jié)果S1960，作為動作候補(bǔ)S1961制作「①買去往京都的車票」、「②買到東京的郵票」。動作候補(bǔ)制作部1993將動作候補(bǔ)S1961傳送給動作候補(bǔ)提示部1954。
動作控制部1952，根據(jù)識別結(jié)果S1960的「買去往東京的車票」，在觸摸屏顯示器1987上顯示「買去往東京的車票」，將觸摸屏顯示器1987上的發(fā)話按鍵變更成合成音按鍵，在控制部1940進(jìn)行「買去往東京的車票」的翻譯，并將翻譯結(jié)果顯示在觸摸屏顯示器1987(第1動作)。
動作候補(bǔ)提示部1954，在觸摸屏顯示器1987上顯示動作候補(bǔ)S1961的「①買去往京都的車票」、「②買到東京的郵票」(圖24的第21-1-2步)。
在動作候補(bǔ)選擇部1955接收到觸發(fā)信號S1993開始2秒鐘(第1給定時間)的期間，如果動作候補(bǔ)選擇部1955沒有接收到觸摸屏顯示器1987上的合成音按鍵所形成的操作信號S1996，并且動作候補(bǔ)選擇部1955沒有接收到觸摸屏顯示器1987選擇動作候補(bǔ)S1961的操作信號S1996時，動作候補(bǔ)選擇部1955將非提示信號S1996傳送給動作候補(bǔ)提示部1954。又，動作候補(bǔ)選擇部1955在接收到下一觸發(fā)信號S1993之前，不制作選擇信息S1962。
動作候補(bǔ)提示部1954讓觸摸屏顯示器1987上的動作候補(bǔ)S1961成非顯示狀態(tài)(圖24的第21-1-3步)。在此，如果按下觸摸屏顯示器1987上的合成音按鍵時，從喇叭1989發(fā)出「Could you give me a ticket bound forTokyo」的讀音。
(2)顯示反應(yīng)利用者意圖的翻譯結(jié)果時的情況的例2[第ST2057步]利用者為進(jìn)行聲音輸入用筆按下觸摸屏顯示器1987上的發(fā)話按鍵。
利用者將「買去往東京的車票」的聲音數(shù)據(jù)輸入給麥克風(fēng)1981(圖24的第21-1-1步)。所輸入的聲音數(shù)據(jù)被傳送給識別部1951。識別部1951將有關(guān)聲音數(shù)據(jù)的信息與識別用詞典數(shù)據(jù)1972-致度高的「買去往東京的車票」、「買去往京都的車票」、「買到東京的郵票」作為識別結(jié)果S1960輸出。并將識別結(jié)果S1960的「買去往東京的車票」傳送給動作控制部1952，將識別結(jié)果S1960的「買去往京都的車票」、「買到東京的郵票」傳送給動作候補(bǔ)制作部1993。在此，識別結(jié)果S1960，通過從聲音數(shù)據(jù)中抽出關(guān)鍵詞、從識別用詞典數(shù)據(jù)1972的例文中選擇更多包含從聲音數(shù)據(jù)中抽出的關(guān)鍵詞的例文制作而成。動作候補(bǔ)制作部1993根據(jù)識別結(jié)果S1960，作為動作候補(bǔ)S1961制作「①買去往京都的車票」、「②買到東京的郵票」。動作候補(bǔ)制作部1993將動作候補(bǔ)S1961傳送給動作候補(bǔ)提示部1954。
動作控制部1952，根據(jù)識別結(jié)果S1960的「買去往東京的車票」，在觸摸屏顯示器1987上顯示「買去往東京的車票」，將觸摸屏顯示器1987上的發(fā)話按鍵變更成合成音按鍵，在控制部1940進(jìn)行「買去往東京的車票」的翻譯，并將翻譯結(jié)果顯示在觸摸屏顯示器1987(第1動作)。動作候補(bǔ)提示部1954，在觸摸屏顯示器1987上顯示動作候補(bǔ)S1961的「①買去往京都的車票」、「②買到東京的郵票」(圖24的第21-1-2步)。
在動作候補(bǔ)選擇部1955接收到觸發(fā)信號S1993開始2秒鐘(第1給定時間)的期間，如果動作候補(bǔ)選擇部1955接收到觸摸屏顯示器1987上的合成音按鍵所形成的操作信號S1996，時，動作候補(bǔ)選擇部1955將非提示信號S1996傳送給動作候補(bǔ)提示部1954。又，動作候補(bǔ)選擇部1955在接收到下一觸發(fā)信號S1993之前，不制作選擇信息S1962。動作控制部1952接收到操作信號S1996后，將非提示信號S1992傳送給動作候補(bǔ)提示部1954。動作候補(bǔ)提示部1954接收到非提示信號S1992后讓觸摸屏顯示器1987上的動作候補(bǔ)S1961成非顯示狀態(tài)，動作控制部1952從喇叭1989發(fā)出「Could you give me a ticket bound for Tokyo」的讀音(圖24的第21-1-4步)。
(3)沒有顯示反應(yīng)利用者意圖的翻譯結(jié)果時的情況[第ST2057步]利用者為進(jìn)行聲音輸入用筆按下觸摸屏顯示器1987上的發(fā)話按鍵。
利用者將「買去往東京的車票」的聲音數(shù)據(jù)輸入給麥克風(fēng)1981(圖24的第21-2-1步)。所輸入的聲音數(shù)據(jù)被傳送給識別部1951。識別部1951將有關(guān)聲音數(shù)據(jù)的信息與識別用詞典數(shù)據(jù)1972一致度高的「買去往京都的車票」、「買去往東京的車票」、「買到東京的郵票」作為識別結(jié)果S1960輸出。并將識別結(jié)果S1960的「買去往京都的車票」傳送給動作控制部1952，將識別結(jié)果S1960的「買去往東京的車票」、「買到東京的郵票」傳送給動作候補(bǔ)制作部1993。在此，識別結(jié)果S1960，通過從聲音數(shù)據(jù)中抽出關(guān)鍵詞、從識別用詞典數(shù)據(jù)1972的例文中選擇更多包含從聲音數(shù)據(jù)中抽出的關(guān)鍵詞的例文制作而成。動作候補(bǔ)制作部1993根據(jù)識別結(jié)果S1960，作為動作候補(bǔ)S1961制作「①買去往東京的車票」、「②買到東京的郵票」。動作候補(bǔ)制作部1993將動作候補(bǔ)S1961傳送給動作候補(bǔ)提示部1954。
動作控制部1952，根據(jù)識別結(jié)果S1960的「買去往京都的車票」，在觸摸屏顯示器1987上顯示「買去往京都的車票」，將觸摸屏顯示器1987上的發(fā)話按鍵變更成合成音按鍵，在控制部1940進(jìn)行「買去往京都的車票」的翻譯，并將翻譯結(jié)果的「Could you give me a ticket bound for Kyoto」顯示在觸摸屏顯示器1987(第1動作)。動作候補(bǔ)提示部1954，在觸摸屏顯示器1987上顯示動作候補(bǔ)S1961的「①買去往東京的車票」、「②買到東京的郵票」(圖24的第21-2-2步)。
在動作候補(bǔ)選擇部1955接收到觸發(fā)信號S1993開始2秒鐘(第1給定時間)的期間，動作候補(bǔ)選擇部1955接收到觸摸屏顯示器1987選擇動作候補(bǔ)S1961的操作信號S1996(選擇「買去往東京的車票」時，動作候補(bǔ)選擇部1955根據(jù)接收到的操作信號S1996制作選擇信息S1962的「買去往東京的車票」(圖24的第21-2-2步)。
動作控制部1952選擇信息S1962，在觸摸屏顯示器1987上顯示「買去往東京的車票」，在控制部1940進(jìn)行「買去往東京的車票」的翻譯，并將翻譯結(jié)果的「Could you give me a ticket bound for Tokyo？」顯示在觸摸屏顯示器1987。在此，如果按下觸摸屏顯示器1987上的合成音按鍵時，從喇叭1989發(fā)出「Could you give me a ticket bound for Tokyo？」的讀音(圖24的第21-2-3步)。
<效果>
依據(jù)以上說明的第7實(shí)施方案，在執(zhí)行第2動作的第1時刻、從提示動作候補(bǔ)S1961開始到經(jīng)過第1給定時間后的第2時刻、輸入反應(yīng)與第1動作不同動作內(nèi)容的一般信息的第3時刻、之中任一較早時刻之前，提示動作候補(bǔ)制作部1993制作的動作候補(bǔ)S1661，由利用者選擇，利用者沒有必要再次從頭開始進(jìn)行為執(zhí)行反應(yīng)利用者意圖的動作的流程。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部1954，在經(jīng)過第1給定時間后利用者仍然沒有選擇動作候補(bǔ)的意思時，讓動作候補(bǔ)S1961自動成非提示狀態(tài)，所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者讓動作候補(bǔ)S1961的提示成非提示狀態(tài)。因此，利用者使用方便而不麻煩。
又，動作控制部1952，由于自動執(zhí)行根據(jù)識別部1951輸出的識別結(jié)果S1960的第1動作，如果所執(zhí)行的動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者選擇動作候補(bǔ)。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部1954由于自動提示動作候補(bǔ)S1961，如果所執(zhí)行的第1動作不是反應(yīng)利用者意圖的動作時，沒有必要由利用者進(jìn)行為提示動作候補(bǔ)的操作。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)制作部1993制作的動作候補(bǔ)S1961，由于包含將反應(yīng)所輸入識別對象的動作內(nèi)容的信息與識別用詞典數(shù)據(jù)1972進(jìn)行比較后一致度高的識別用數(shù)據(jù)相關(guān)的動作，即使出現(xiàn)誤識別，由于在動作候補(bǔ)S1961中包含識別正確的動作，通過利用者的選擇可以更正誤識別。因此，利用者使用方便。
此外，本實(shí)施方案，并不限定于上述內(nèi)容，可以形成以下各種各樣的應(yīng)用。
a)也可以與本發(fā)明并用取消功能。
b)作為動作候補(bǔ)S1661之一，也可以包含實(shí)現(xiàn)取消功能的動作。
c)也也可以根據(jù)需要追加識別用詞典數(shù)據(jù)1972。
d)作為反應(yīng)與第1動作不同動作的一般信息，也可以是執(zhí)行取消功能的信息。
e)動作候補(bǔ)S1961的提示也并不限定于畫面顯示，也可以采用聲音提示等。
f)識別部1951并不限定于聲音識別裝置，也可以是文字識別等。
g)提示動作候補(bǔ)S1961的個數(shù)可以不固定。
h)動作候補(bǔ)S1661的一部分也可以在經(jīng)過第1給定時間后提示。
i)作為動作候補(bǔ)S1961，對于識別結(jié)果S1960的動作，也可以包含意思相關(guān)的內(nèi)容。
(第8實(shí)施方案)<監(jiān)視系統(tǒng)的構(gòu)成>
圖25表示依據(jù)第8實(shí)施方案的監(jiān)視系統(tǒng)的整體構(gòu)成方框圖。圖25所示的監(jiān)視系統(tǒng)2385，在利用者1側(cè)包括攝像機(jī)2281、控制部2240，在利用者2側(cè)包括識別部2251、動作控制部2252、動作候補(bǔ)制作部2253、動作候補(bǔ)提示部2254、動作候補(bǔ)選擇部2255、觸摸屏顯示器2287，兩者通過網(wǎng)絡(luò)連接。。識別部2251包括模型制作部2271、識別用詞典數(shù)據(jù)2272、比較處理部2273。
攝像機(jī)2281接收利用者1的人移動的數(shù)據(jù)，通過網(wǎng)絡(luò)，將人移動的數(shù)據(jù)傳送給模型制作部2271和動作控制部2252。
動作控制部2252將人移動的數(shù)據(jù)在觸摸屏顯示器2287上顯示。
模型制作部2271將接收到的人移動的數(shù)據(jù)變換成特征量，作為模型保存。
比較處理部2273對識別用詞典數(shù)據(jù)2272和由模型制作部2271保存的模型進(jìn)行比較，制作識別結(jié)果S2260，將識別結(jié)果S2260傳送給動作控制部2252和動作候補(bǔ)制作部2253。
動作控制部2252，在從接收到識別結(jié)果S2260開始經(jīng)過第2給定時間后的時刻，根據(jù)接收到的識別結(jié)果S2260對控制部2240進(jìn)行控制(第1動作)。
動作候補(bǔ)制作部2253根據(jù)接收到的識別結(jié)果S2260制作動作候補(bǔ)S2261，并將動作候補(bǔ)S2261被傳送給動作候補(bǔ)提示部2254動作候補(bǔ)提示部2254在觸摸屏顯示器2287上顯示所接收到的動作候補(bǔ)S2261。
動作候補(bǔ)選擇部2255在將動作候補(bǔ)S226 1在觸摸屏顯示器2287上顯示的期間接收到由來自利用者2的動作候補(bǔ)S2261的選擇操作所形成的操作信號S2296時，動作候補(bǔ)選擇部2255制作選擇信息S2262，并將選擇信息S2262傳送給動作控制部2252。
動作控制部2252根據(jù)接收到的選擇信息S2262對控制部2240進(jìn)行控制。又，動作控制部2252將非提示信號S2292傳送給動作候補(bǔ)提示部2254。動作候補(bǔ)提示部2254接收到非提示信號S2292后，讓在觸摸屏顯示器2287顯示的動作候補(bǔ)S2261成非顯示狀態(tài)。
動作候補(bǔ)選擇部2255在將動作候補(bǔ)S2261在觸摸屏顯示器2287上顯示的期間沒有接收到由來自利用者2的動作候補(bǔ)S2261的選擇操作所形成的操作信號S2296(動作候補(bǔ)提示部2254在接收到動作候補(bǔ)S2261經(jīng)過第1給定時間的情況)時，動作候補(bǔ)提示部2254讓在觸摸屏顯示器2287顯示的動作候補(bǔ)S2261成非顯示狀態(tài)。
<監(jiān)視系統(tǒng)的動作>
以下說明以上構(gòu)成的監(jiān)視系統(tǒng)2385的動作。在此，以通過網(wǎng)絡(luò)進(jìn)行遠(yuǎn)距離操作行動監(jiān)視系統(tǒng)的的情況為例，參照圖26以及圖27A～B進(jìn)行說明。
(1)執(zhí)行反應(yīng)利用者意圖的動作時的情況 攝像機(jī)2281接收到利用者1的人移動的數(shù)據(jù)后，將該數(shù)據(jù)通過因特網(wǎng)等網(wǎng)絡(luò)傳送給識別部2251和動作控制部2252。動作控制部2252采用觸摸屏顯示器2287向利用者2顯示所接收到的人移動的數(shù)據(jù)(圖27A的顯示畫面27-1)。識別部225 1將有關(guān)人移動的數(shù)據(jù)的信息與識別用詞典數(shù)據(jù)2272中的行動模式一致度高的「肚子餓了時的行動模式」、「要打開電源開關(guān)時的行動模式」、「要洗澡時的行動模式」作為識別結(jié)果S2260輸出，將一致度最高的識別結(jié)果S2260的「肚子餓了時的行動模式」傳送給動作控制部2252，將識別結(jié)果S2260的「要打開電源開關(guān)時的行動模式」、「要洗澡時的行動模式」傳送給動作候補(bǔ)制作部2253。動作候補(bǔ)制作部2253根據(jù)接收到的識別結(jié)果S2260制作動作候補(bǔ)S2261的「打開電源」、「洗澡」，并傳送給動作候補(bǔ)提示部2254。
動作候補(bǔ)提示部2254在觸摸屏顯示器2287上顯示動作候補(bǔ)S2261的「打開電源」、「洗澡」。又，動作控制部2252在觸摸屏顯示器2287上顯示根據(jù)識別結(jié)果S2260「肚子餓了時的行動模式」的動作「是否用餐」(圖27A的顯示畫面27-2)。
動作候補(bǔ)提示部2254從接收到動作候補(bǔ)S2261開始經(jīng)過第1給定時間之前，沒有從動作控制部2252接收到非提示信號S2292時，動作候補(bǔ)提示部2254讓在觸摸屏顯示器2287上顯示的動作候補(bǔ)S2261成非顯示狀態(tài)。動作候補(bǔ)提示部2254在從接收到識別結(jié)果S2260開始經(jīng)過給定第2給定時間的時刻，讓控制部2240執(zhí)行根據(jù)識別結(jié)果S2260的動作「用餐」(第1動作)(圖27A的顯示畫面27-3)。
(2)沒有執(zhí)行反應(yīng)利用者意圖的動作時的情況[第ST2351步]攝像機(jī)2281接收到利用者1的人移動的數(shù)據(jù)后，將該數(shù)據(jù)通過因特網(wǎng)等網(wǎng)絡(luò)傳送給識別部2251和動作控制部2252。動作控制部2252采用觸摸屏顯示器2287向利用者2顯示所接收到的人移動的數(shù)據(jù)(圖27B的顯示畫面27-4)。識別部2251將有關(guān)人移動的數(shù)據(jù)的信息與識別用詞典數(shù)據(jù)2272中的行動模式一致度高的「肚子餓了時的行動模式」、「要打開電源開關(guān)時的行動模式」、「要洗澡時的行動模式」作為識別結(jié)果S2260輸出，將一致度最高的識別結(jié)果S2260的「肚子餓了時的行動模式」傳送給動作控制部2252，將識別結(jié)果S2260的「要打開電源開關(guān)時的行動模式」、「要洗澡時的行動模式」傳送給動作候補(bǔ)制作部2253。動作候補(bǔ)制作部2253根據(jù)接收到的識別結(jié)果S2260制作動作候補(bǔ)S2261的「打開電源」、「洗澡」，并傳送給動作候補(bǔ)提示部2254。
動作候補(bǔ)提示部2254在觸摸屏顯示器2287上顯示動作候補(bǔ)S2261的「打開電源」、「洗澡」。又，動作控制部2252在觸摸屏顯示器2287上顯示根據(jù)識別結(jié)果S2260「肚子餓了時的行動模式」的動作「是否用餐」(圖27B的顯示畫面27-5)。
利用者2觀察觸摸屏顯示器2287上利用者1的行動模式，選擇利用者1的行動模式最適合的動作。在將動作候補(bǔ)S2261在觸摸屏顯示器2287上顯示的期間，由利用者2選擇動作候補(bǔ)S2261。動作候補(bǔ)選擇部2255接收到操作信號S2296后，根據(jù)操作信號S2296制作選擇信息S2262的「洗澡」，并將選擇信息S2262傳送給動作控制部2252。動作控制部2252，由控制部2240執(zhí)行根據(jù)識別結(jié)果S2260的動作(第1動作)「用餐」、和根據(jù)接收到的選擇信息S2262的動作作(第2動作)「洗澡」。又，動作控制部2252為了向利用者2通知已經(jīng)執(zhí)行了第1動作和第2動作的情況，在觸摸屏顯示器2287上顯示「用餐OK」、「洗澡OK」。動作控制部2252向動作候補(bǔ)提示部2254傳送非提示信號S2292。動作候補(bǔ)提示部2254在接收到非提示信號S2292后，讓在觸摸屏顯示器2287上顯示的動作候補(bǔ)S2261成非顯示狀態(tài)(圖27B的顯示畫面27-6)。
<監(jiān)視系統(tǒng)的動作另一例>
參照圖27C～E說明監(jiān)視系統(tǒng)2385的動作的另一例。
(1)執(zhí)行反應(yīng)利用者意圖的動作時的情況攝像機(jī)2281接收到利用者1的人移動的數(shù)據(jù)后，將該數(shù)據(jù)通過因特網(wǎng)等網(wǎng)絡(luò)傳送給識別部2251和動作控制部2252。動作控制部2252采用觸摸屏顯示器2287向利用者2顯示所接收到的人移動的數(shù)據(jù)(圖27C的顯示畫面27-7)。識別部2251將包含在識別用詞典數(shù)據(jù)2272中的行動模式中與有關(guān)人移動的數(shù)據(jù)的信息一致度最高的行動模式作為識別結(jié)果S2260輸出。在此，「小偷侵入」作為識別結(jié)果S2260輸出。該識別結(jié)果S2260被傳送給動作控制部2252和動作候補(bǔ)制作部2253。動作控制部2252，參照圖27E所示的表，從與「小偷侵入」對應(yīng)的動作「發(fā)出警音」、「向警察報警」、「取消」中選擇優(yōu)先度最高的動作(在此為「發(fā)出警音」)，又控制部2240執(zhí)行所選擇的動作。在圖27E所示的表中，根據(jù)應(yīng)執(zhí)行的動作設(shè)定類似范圍(動作的類似范圍)。在對應(yīng)識別行動“盜賊的侵入”的類似范圍內(nèi)，包含對應(yīng)該識別行動應(yīng)進(jìn)行的動作“發(fā)出警音”、“通報警察”、“取消”。動作控制部2252為了向利用者2通知已經(jīng)執(zhí)行了「發(fā)出警音」的情況，在觸摸屏顯示器2287上顯示「警音OK」(圖27C的顯示畫面27-8)。動作候補(bǔ)制作部2253，參照圖27E所示的表，從與識別結(jié)果S2260的「小偷侵入」對應(yīng)的動作中剩余的「向警察報警」、「取消」作為動作候補(bǔ)S2261傳送給動作候補(bǔ)提示部2254。動作候補(bǔ)提示部2254在觸摸屏顯示器2287顯示動作候補(bǔ)S2261的「向警察報警」、「取消」(圖27C的顯示畫面27-8)。如果沒有選擇所顯示的候補(bǔ)經(jīng)過20秒后，動作候補(bǔ)提示部2254讓在觸摸屏顯示器2287上顯示的動作候補(bǔ)S2261成非顯示狀態(tài)(圖27C的顯示畫面27-9)。
(2)沒有執(zhí)行反應(yīng)利用者意圖的動作時的情況和上述同樣，在觸摸屏顯示器2287顯示「向警察報警」、「取消」(圖27D的顯示畫面27-10、27-11)。利用者2在顯示候補(bǔ)后20秒以內(nèi)選擇「向警察報警」(圖27D的顯示畫面27-11)。響應(yīng)該選擇，報警裝置通過通信路徑向警察報警。動作控制部2252為了向利用者2通知已經(jīng)執(zhí)行了向警察報警的情況，在觸摸屏顯示器2287上顯示「報警OK」。又，動作候補(bǔ)提示部2254讓在觸摸屏顯示器2287上顯示的動作候補(bǔ)S2261成非顯示狀態(tài)(圖27D的顯示畫面27-12)。
<效果>
依據(jù)以上說明的第8實(shí)施方案，在執(zhí)行第2動作的第1時刻、從提示動作候補(bǔ)S2261開始到經(jīng)過第1給定時間后的第2時刻之中任一較早時刻之前，提示動作候補(bǔ)制作部2253制作的動作候補(bǔ)S2261，由利用者選擇，利用者沒有必要再次從頭開始進(jìn)行為執(zhí)行反應(yīng)利用者意圖的動作的流程。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部2254，在經(jīng)過第1給定時間后利用者仍然沒有選擇動作候補(bǔ)的意思時，讓動作候補(bǔ)S2261自動成非提示狀態(tài)，所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者讓動作候補(bǔ)S2261的提示成非提示狀態(tài)。因此，利用者使用方便而不麻煩。
又，動作控制部2252，由于自動執(zhí)行根據(jù)識別部2251輸出的識別結(jié)果S2260的第1動作，如果所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者選擇動作候補(bǔ)S2261。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部2254由于自動提示動作候補(bǔ)S2261，如果所執(zhí)行的第1動作不是反應(yīng)利用者意圖的動作時，沒有必要由利用者進(jìn)行為提示動作候補(bǔ)S2261的操作。因此，利用者使用方便而不麻煩。
又，由于在第2給定時間之后執(zhí)行根據(jù)識別結(jié)果S2260的第1動作，可以防止執(zhí)行不是利用者意圖的第1動作。因此，利用者使用方便。
此外，本實(shí)施方案，并不限定于上述內(nèi)容，可以形成以下各種各樣的應(yīng)用。
a)提示動作候補(bǔ)S2261的個數(shù)可以不固定。
b)也可以選擇多個動作候補(bǔ)S2261，進(jìn)行多個第2動作。
c)作為網(wǎng)絡(luò)，也可以采用電話網(wǎng)絡(luò)、因特網(wǎng)、局域網(wǎng)、無線網(wǎng)等。
d)動作候補(bǔ)S2261的一部分也可以在經(jīng)過第1給定時間后提示。
(第9實(shí)施方案)<控制系統(tǒng)的構(gòu)成>
圖28表示依據(jù)第9實(shí)施方案的控制系統(tǒng)的整體構(gòu)成方框圖。圖28所示的控制系統(tǒng)2585，是帶識別功能的機(jī)器控制系統(tǒng)，包括攝像機(jī)2581A、麥克風(fēng)2581B、機(jī)器K的控制部2540K(K＝1，2，…，N)、識別部2551、動作控制部2552、動作候補(bǔ)制作部2553、動作候補(bǔ)提示部2554、動作候補(bǔ)選擇部2555、觸摸屏顯示器2587。識別部2551包括模型制作部2571、識別用詞典數(shù)據(jù)2572、比較處理部2573。
攝像機(jī)2581A接收利用者的虹膜數(shù)據(jù)，將該虹膜數(shù)據(jù)傳送給模型制作部2571。
麥克風(fēng)2581B接收利用者的聲音數(shù)據(jù)，將該聲音數(shù)據(jù)傳送給模型制作部2571。
模型制作部2571將接收到的虹膜數(shù)據(jù)和聲音數(shù)據(jù)變換成特征量，作為利用者的模型保存。
比較處理部2573對識別用詞典數(shù)據(jù)2572和由模型制作部2571保存的利用者的模型進(jìn)行比較，制作識別結(jié)果S2560。在此，作為識別用詞典數(shù)據(jù)，準(zhǔn)備多個由個人ID和識別個人的模型組成的對，將具有識別用詞典數(shù)據(jù)的模型與由模型制作部2571保存的模型之間一致度高的模型的個人ID作為識別結(jié)果S2560輸出。
比較處理部2573將制作的識別結(jié)果S2560傳送給動作控制部2552和動作候補(bǔ)制作部2553。
動作控制部2552，根據(jù)接收到的識別結(jié)果S2560對機(jī)器1的控制部25401進(jìn)行控制(第1動作)。
動作候補(bǔ)制作部2553根據(jù)接收到的識別結(jié)果S2560制作動作候補(bǔ)S2561，并傳送給動作候補(bǔ)提示部2554動作候補(bǔ)提示部2554在觸摸屏顯示器2587上顯示所接收到的動作候補(bǔ)S2561。
在將動作候補(bǔ)S2561在觸摸屏顯示器2587上顯示的期間利用者進(jìn)行了選擇動作候補(bǔ)S2561的操作時，動作候補(bǔ)選擇部2555根據(jù)所接收的識別結(jié)果S2560制作選擇信息S2562，并傳送給動作控制部2552。
動作控制部2552根據(jù)接收到的選擇信息S2562對機(jī)器K的控制部2540K(K＝1，2，…，N)、觸摸屏顯示器2587進(jìn)行控制。又，動作控制部2552將非提示信號S2592傳送給動作候補(bǔ)提示部2554。
動作候補(bǔ)提示部2554接收到非提示信號S2592后，讓在觸摸屏顯示器2587顯示的動作候補(bǔ)S2561成非顯示狀態(tài)。
在將動作候補(bǔ)S2561在觸摸屏顯示器2587上顯示的期間利用者沒有進(jìn)行了選擇動作候補(bǔ)S2561的操作時(動作候補(bǔ)提示部2554在接收到動作候補(bǔ)S2561即使經(jīng)過第1給定時間后也沒有接收到的非提示信號S2592的情況)時，動作候補(bǔ)提示部2554讓在觸摸屏顯示器2587顯示的動作候補(bǔ)S2561成非顯示狀態(tài)。
<控制系統(tǒng)的動作>
以下說明以上構(gòu)成的控制系統(tǒng)2585的動作。在此，以進(jìn)行帶識別功能的機(jī)器控制系統(tǒng)的操作的情況為例，參照圖29以及圖30A～E進(jìn)行說明。
(1)反應(yīng)利用者意圖的動作結(jié)束時的情況的例1[第ST2651步]攝像機(jī)2581A接收到利用者的虹膜數(shù)據(jù)后傳送給模型制作部2571。麥克風(fēng)2581B接收到利用者的聲音數(shù)據(jù)后傳送給模型制作部2571(圖30A的顯示畫面30-1)。模型制作部2571根據(jù)接收到的利用者的虹膜數(shù)據(jù)和聲音數(shù)據(jù)制作識別用數(shù)據(jù)后保存。作為識別用詞典數(shù)據(jù)2572，「A先生模式A」、「B先生模式B」、「C先生模式C」、「松下太郎先生模式X」等個人ID與識別用模式成對使用。識別用模式根據(jù)每個人的虹膜數(shù)據(jù)和聲音數(shù)據(jù)制作。在此，在識別用詞典數(shù)據(jù)2572中登錄了機(jī)器1的控制功能的可以打開門鎖的個人名。比較處理部2573將識別用詞典數(shù)據(jù)2572中的識別用模式和由模型制作部2571保存的模式進(jìn)行比較，探討是否可以將一致度最高的模式的「模式X」作為識別結(jié)果。在此，由于一致度滿足給定閾值，判定為「可以」，將具有一致度最高的「模式X」的「松下太郎先生」作為識別結(jié)果S2560輸出。動作控制部2552和動作候補(bǔ)制作部2553接收識別部2551輸出的識別結(jié)果S2560。
動作控制部2552根據(jù)識別結(jié)果S2560對機(jī)器1的控制部25401的「門鎖」進(jìn)行控制，打開門鎖。又，動作控制部2552在觸摸屏顯示器2587上顯示識別結(jié)果S2560。動作候補(bǔ)制作部2553，參照圖30C所示的表，將所接收的識別結(jié)果S2560的「松下太郎先生」所喜好的動作「①打開房間A的電源」、「②打開房間B的電源」、「③查看電子郵件」、「④給浴缸加熱水」、「⑤打開電視電源」作為動作候補(bǔ)S2561制作，并傳送給動作候補(bǔ)提示部2554。在圖30C所示的表中，根據(jù)使用者的嗜好及行動習(xí)慣設(shè)定類似范圍(習(xí)慣的類似范圍)。對每一個認(rèn)證結(jié)果設(shè)定相應(yīng)的類似范圍。在對應(yīng)某個認(rèn)證結(jié)果的類似范圍內(nèi)，包含該認(rèn)證結(jié)果所表示的使用者所喜好的動作、日常所進(jìn)行的動作等。動作候補(bǔ)提示部2554在觸摸屏顯示器2587上顯示動作候補(bǔ)S2561的「①打開房間A的電源」、「②打開房間B的電源」、「③查看電子郵件」、「④給浴缸加熱水」、「⑤打開電視電源」(圖30A的顯示畫面30-2)。
動作候補(bǔ)提示部2554從接收到動作候補(bǔ)S2561開始經(jīng)過第1給定時間之前，沒有從動作控制部2552接收到非提示信號S2592時，動作候補(bǔ)提示部2554讓在觸摸屏顯示器2587上顯示的動作候補(bǔ)S2561成非顯示狀態(tài)(圖30A的顯示畫面30-3)。
<反應(yīng)利用者意圖的動作結(jié)束時的情況的例2> 攝像機(jī)2581A接收到利用者的虹膜數(shù)據(jù)后傳送給模型制作部2571。麥克風(fēng)2581B接收到利用者的聲音數(shù)據(jù)后傳送給模型制作部2571(圖30A的顯示畫面30-1)。模型制作部2571根據(jù)接收到的利用者的虹膜數(shù)據(jù)和聲音數(shù)據(jù)制作識別用數(shù)據(jù)后保存。作為識別用詞典數(shù)據(jù)2572，「A先生模式A」、「B先生模式B」、「C先生模式C」、「松下太郎先生模式X」等個人ID與識別用模式成對使用。識別用模式根據(jù)每個人的虹膜數(shù)據(jù)和聲音數(shù)據(jù)制作。比較處理部2573將識別用詞典數(shù)據(jù)2572中的識別用模式和由模型制作部2571保存的模式進(jìn)行比較，探討是否可以將一致度最高的模式作為識別結(jié)果。在此，由于一致度不滿足給定閾值，判定為「不可以」，將「不可以」作為識別結(jié)果S2560輸出。動作控制部2552和動作候補(bǔ)制作部2553接收識別部2551輸出的識別結(jié)果S2560。
動作控制部2552根據(jù)識別結(jié)果S2560對機(jī)器1的控制部25401的「門鎖」進(jìn)行控制。在此由于識別結(jié)果S2560為「不可以」，動作控制部2552通過控制機(jī)器1讓門鎖保持在關(guān)閉狀態(tài)。又，動作控制部2552在觸摸屏顯示器2587上顯示識別結(jié)果S2560的「不是登錄之人」。顯示動作候補(bǔ)制作部2553，根據(jù)所接收的識別結(jié)果S2560，作為動作候補(bǔ)S2561制作「①呼出」、「②輸入密碼」、「③取消」、「④重新輸入」等，并傳送給動作候補(bǔ)提示部2554。動作候補(bǔ)提示部2554在觸摸屏顯示器2587上顯示動作候補(bǔ)S2561的「①呼出」、「②輸入密碼」、「③取消」、「④重新輸入」。
攝像機(jī)2581A接收到利用者的虹膜數(shù)據(jù)后傳送給模型制作部2571。麥克風(fēng)2581B接收到利用者的聲音數(shù)據(jù)后傳送給模型制作部2571(圖30B的顯示畫面30-4)。模型制作部2571根據(jù)接收到的利用者的虹膜數(shù)據(jù)和聲音數(shù)據(jù)制作識別用數(shù)據(jù)后保存。作為識別用詞典數(shù)據(jù)2572，「A先生模式A」、「B先生模式B」、「C先生模式C」、「松下太郎先生模式X」等個人ID與識別用模式成對使用。識別用模式根據(jù)每個人的虹膜數(shù)據(jù)和聲音數(shù)據(jù)制作。在此，在識別用詞典數(shù)據(jù)2572中登錄了機(jī)器1的控制功能的可以打開門鎖的個人名。比較處理部2573將識別用詞典數(shù)據(jù)2572中的識別用模式和由模型制作部2571保存的模式進(jìn)行比較，探討是否可以將一致度最高的模式的「模式X」作為識別結(jié)果。在此，由于一致度滿足給定閾值，判定為「可以」，將具有一致度最高的「模式X」的「松下太郎先生」作為識別結(jié)果S2560輸出。動作控制部2552和動作候補(bǔ)制作部2553接收識別部2551輸出的識別結(jié)果S2560。
動作控制部2552根據(jù)識別結(jié)果S2560對機(jī)器1的控制部25401的「門鎖」進(jìn)行控制，打開門鎖。又，動作控制部2552在觸摸屏顯示器2587上顯示識別結(jié)果S2560。顯示動作候補(bǔ)制作部2553，參照圖30C所示的表，將所接收的識別結(jié)果S2560的「松下太郎先生」所喜好的動作「①打開房間A的電源」、「②打開房間B的電源」、「③查看電子郵件」、「④給浴缸加熱水」、「⑤打開電視電源」作為動作候補(bǔ)S2561制作，并傳送給動作候補(bǔ)提示部2554。動作候補(bǔ)提示部2554在觸摸屏顯示器2587上顯示動作候補(bǔ)S2561的「①打開房間A的電源」、「②打開房間B的電源」、「③查看電子郵件」、「④給浴缸加熱水」、「⑤打開電視電源」(圖30B的顯示畫面30-5)。
利用者在第1給定時間內(nèi)從動作候補(bǔ)中選擇所希望的動作。在觸摸屏顯示器2587上顯示動作候補(bǔ)S2561的期間由利用者選擇動作候補(bǔ)S2561。在此，利用者用手指選擇了觸摸屏顯示器2587上的「③查看電子郵件」、「⑤打開電視電源」。作為選擇方法，有在所希望的動作候補(bǔ)上加上標(biāo)記后通過按下確認(rèn)鍵進(jìn)行選擇的方法、針對每個動作候補(bǔ)確定是否選擇的方法(圖30B的顯示畫面30-5)。動作候補(bǔ)選擇部2555接收來自觸摸屏顯示器2587的操作信號S2596，制作選擇信息S2562的「③查看電子郵件」、「⑤打開電視電源」，并傳送給動作控制部2552。
動作控制部2552根據(jù)接收到的選擇信息S2562，由機(jī)器2的控制部25402打開電視，在觸摸屏顯示器2587上顯示傳給松下太郎的電子郵件(第2動作)。動作控制部2552將非提示信號S2592傳送給動作候補(bǔ)提示部2554。動作候補(bǔ)提示部2554在接收到非提示信號S2592后，讓在觸摸屏顯示器2587上顯示的動作候補(bǔ)成非顯示狀態(tài)(圖30B的顯示畫面30-6)<效果>
依據(jù)以上說明的第9實(shí)施方案，在執(zhí)行第2動作的第1時刻、從提示動作候補(bǔ)S2561開始到經(jīng)過第1給定時間后的第2時刻之中任一較早時刻之前，提示動作候補(bǔ)制作部2553制作的動作候補(bǔ)S2561，由利用者選擇，利用者沒有必要再次從頭開始進(jìn)行為執(zhí)行反應(yīng)利用者意圖的動作的流程。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部2554，在經(jīng)過第1給定時間后利用者仍然沒有選擇動作候補(bǔ)的意思時，讓動作候補(bǔ)S2561自動成非提示狀態(tài)，所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者讓動作候補(bǔ)S2561的提示成非提示狀態(tài)。因此，利用者使用方便而不麻煩。
又，動作控制部2552，由于自動執(zhí)行根據(jù)識別部2251輸出的識別結(jié)果S2560的第1動作，如果所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作時，沒有必要由利用者選擇動作候補(bǔ)。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)提示部2554由于自動提示動作候補(bǔ)S2561，如果所執(zhí)行的第1動作是反應(yīng)利用者意圖的動作沒有結(jié)束時，利用者可以容易選擇動作候補(bǔ)S2561。因此，利用者使用方便而不麻煩。
又，動作候補(bǔ)選擇部2555，可以選擇多個動作候補(bǔ)S2561，動作控制部2552可以控制多個動作，因此，利用者使用方便而不麻煩。
此外，本實(shí)施方案，并不限定于上述內(nèi)容，可以形成以下各種各樣的應(yīng)用。
a)提示動作候補(bǔ)S2261的個數(shù)可以不固定。
b)動作候補(bǔ)S2261的一部分也可以在經(jīng)過第1給定時間后提示。
c)也可以在觸摸屏顯示器2587上滾動提示動作候補(bǔ)S2261。
d)識別部2551，并不限定于虹膜、聲音識別裝置，也可以包含指紋識別裝置等一般識別裝置。圖30D～E表示在使用指紋識別裝置時的動作例。這個例是對應(yīng)指紋識別的結(jié)果來控制個人計(jì)算機(jī)的系統(tǒng)。首先控制個人計(jì)算機(jī)，使其處于拒絕訪問的狀態(tài)(顯示畫面30-7、30-10)。當(dāng)指紋識別的結(jié)果表示該被識別人為已作過登錄的人(被許可訪問的人)時，使個人計(jì)算機(jī)轉(zhuǎn)變?yōu)樵S可訪問的狀態(tài)，然后把該人感興趣的URL(候補(bǔ))顯示在畫面上(顯示畫面30-8、30-11)。如果在10秒鐘內(nèi)該人未進(jìn)行候補(bǔ)的選擇，則從畫面中消去候補(bǔ)(顯示畫面30-9)。如果在10秒鐘內(nèi)選擇了某一個URL(候補(bǔ))，則在畫面中顯示該URL的內(nèi)容(顯示畫面30-11、30-12)。
權(quán)利要求
1.一種接口裝置，其特征是包括根據(jù)識別對象和包含在識別用詞典中的詞典數(shù)據(jù)之間的相似度獲取識別結(jié)果的識別部、指示執(zhí)行與所述識別結(jié)果相關(guān)聯(lián)的第1動作的動作控制部、提示與所述識別結(jié)果相關(guān)聯(lián)的1個或者多個候補(bǔ)、當(dāng)提示該候補(bǔ)的時間達(dá)到給定時間后，中止該候補(bǔ)的提示的提示控制部。
2.根據(jù)權(quán)利要求1所述的接口裝置，其特征是所述提示控制部在顯示器上顯示所述候補(bǔ)，當(dāng)所述候補(bǔ)在所述顯示器上顯示的時間達(dá)到給定時間后，中止所述候補(bǔ)在所述顯示器上的顯示。
3.根據(jù)權(quán)利要求1所述的接口裝置，其特征是所述識別結(jié)果表示與所述識別對象之間的相似度超過給定基準(zhǔn)值的詞典數(shù)據(jù)，所述第1動作與所述識別結(jié)果所示的詞典數(shù)據(jù)中的某一詞典數(shù)據(jù)關(guān)聯(lián)，所述1個或者多個候補(bǔ)與所述識別結(jié)果所示的詞典數(shù)據(jù)中的其它詞典數(shù)據(jù)關(guān)聯(lián)。
4.根據(jù)權(quán)利要求1所述的接口裝置，其特征是當(dāng)輸入有表示響應(yīng)所述提示控制部的指示所提示的候補(bǔ)中任意候補(bǔ)的選擇信息時，所述提示控制部指示中止被提示的候補(bǔ)的提示。
5.根據(jù)權(quán)利要求1所述的接口裝置，其特征是當(dāng)輸入有表示響應(yīng)所述提示控制部的提示所提示的候補(bǔ)中任意候補(bǔ)的選擇信息時，所述動作控制部指示執(zhí)行與由該選擇信息所示的候補(bǔ)相關(guān)聯(lián)的第2動作。
6.根據(jù)權(quán)利要求5所述的接口裝置，其特征是所述選擇信息表示第1候補(bǔ)和第2候補(bǔ)，所述第2動作包含與所述第1候補(bǔ)關(guān)聯(lián)的動作和與所述第2候補(bǔ)關(guān)聯(lián)的動作。
7.根據(jù)權(quán)利要求1所述的接口裝置，其特征是當(dāng)輸入有響應(yīng)所述提示控制部的提示在所述候補(bǔ)被提示的期間內(nèi)執(zhí)行第3動作的指示時，所述提示控制部中止所提示的候補(bǔ)的提示。
8.根據(jù)權(quán)利要求1所述的接口裝置，其特征是所述動作控制部指示到開始執(zhí)行所述第1動作的所剩時間的提示。
9.根據(jù)權(quán)利要求1所述的接口裝置，其特征是所述識別對象包含聲音數(shù)據(jù)。
10.根據(jù)權(quán)利要求1所述的接口裝置，其特征是所述識別對象包含用于識別個人的信息。
11.根據(jù)權(quán)利要求1所述的接口裝置，其特征是所述第1動作是表示與所述識別結(jié)果相關(guān)的信息。
12.根據(jù)權(quán)利要求1所述的接口裝置，其特征是所述第1動作是與所述識別結(jié)果相關(guān)的機(jī)器操作。
13.根據(jù)權(quán)利要求1所述的接口裝置，其特征是所述第1動作是與所述識別結(jié)果相關(guān)的信息的檢索及檢索結(jié)果的提示。
14.根據(jù)權(quán)利要求5所述的接口裝置，其特征是所述第2動作是與由所述選擇信息表示的候補(bǔ)相關(guān)的信息的顯示。
15.根據(jù)權(quán)利要求5所述的接口裝置，其特征是所述第2動作是與由所述選擇信息表示的候補(bǔ)相關(guān)的機(jī)器操作。
16.根據(jù)權(quán)利要求5所述的接口裝置，其特征是所述第2動作是與由所述選擇信息表示的候補(bǔ)相關(guān)的信息的檢索及檢索結(jié)果的提示。
17.根據(jù)權(quán)利要求7所述的接口裝置，其特征是所述第3動作是識別對象的輸入。
18.根據(jù)權(quán)利要求7所述的接口裝置，其特征是所述第3動作是顯示給定的畫面。
19.根據(jù)權(quán)利要求7所述的接口裝置，其特征是所述第3動作是所述第1動作的執(zhí)行結(jié)果的聲音提示。
20.一種接口裝置，其特征是包括根據(jù)識別對象和包含在識別用詞典中的詞典數(shù)據(jù)之間的相似度獲取識別結(jié)果的識別部、指示執(zhí)行與所述識別結(jié)果相關(guān)聯(lián)的第1動作的動作控制部、根據(jù)與所述識別結(jié)果之間的意思相近度獲取1個或者多個候補(bǔ)的候補(bǔ)制作部、提示所述候補(bǔ)制作部獲取的候補(bǔ)的提示控制部。
21.根據(jù)權(quán)利要求20所述的接口裝置，其特征是所述1個或者多個候補(bǔ)屬于所述識別結(jié)果的種類。
22.根據(jù)權(quán)利要求20所述的接口裝置，其特征是所述1個或者多個候補(bǔ)的每一個包含根據(jù)所述識別結(jié)果聯(lián)想的關(guān)鍵詞。
23.根據(jù)權(quán)利要求20所述的接口裝置，其特征是所述1個或者多個候補(bǔ)的每一個候補(bǔ)包含根據(jù)利用者嗜好以及/或者行動模式的關(guān)鍵詞。
24.根據(jù)權(quán)利要求20所述的接口裝置，其特征是所述1個或者多個候補(bǔ)的每一個候補(bǔ)表示與所述第1動作關(guān)聯(lián)的動作。
25.一種接口裝置，其特征是包括包含1個或者多個詞典數(shù)據(jù)的第1識別用詞典、根據(jù)識別對象和包含在所述第1識別用詞典中的詞典數(shù)據(jù)之間的相似度獲取識別結(jié)果的識別部、提示與所述識別結(jié)果關(guān)聯(lián)的1個或者多個候補(bǔ)、和提示與該候補(bǔ)對應(yīng)的詞典數(shù)據(jù)是否包含在所述第1識別用詞典中的提示控制部。
26.根據(jù)權(quán)利要求25所述的接口裝置，其特征是進(jìn)一步包括包含1個或者多個詞典數(shù)據(jù)的第2識別用詞典、將包含在所述第1識別用詞典中的詞典數(shù)據(jù)與包含在所述第2識別用詞典中的詞典數(shù)據(jù)按照給定基準(zhǔn)進(jìn)行交換的詞典控制部。
27.根據(jù)權(quán)利要求25所述的接口裝置，其特征是還包括可以在所述第1識別用詞典中追加某個詞典數(shù)據(jù)，從所述第1識別用詞典中刪除某個詞典數(shù)據(jù)的詞典控制部。
28.一種動作控制方法，其特征是包括根據(jù)識別對象和包含在識別用詞典中的詞典數(shù)據(jù)之間的相似度獲取識別結(jié)果的步驟(a)、執(zhí)行與所述識別結(jié)果相關(guān)聯(lián)的第1動作的步驟(b)、提示與所述識別結(jié)果相關(guān)聯(lián)的1個或者多個候補(bǔ)、在提示該候補(bǔ)的時間達(dá)到給定時間后中止該候補(bǔ)的提示的步驟(c)。
29.根據(jù)權(quán)利要求28所述的動作控制方法，其特征是在所述步驟(c)中，在顯示器上顯示所述候補(bǔ)，所述候補(bǔ)在所述顯示器上顯示的時間達(dá)到給定時間后中止所述候補(bǔ)在所述顯示器上的顯示。
30.根據(jù)權(quán)利要求28所述的動作控制方法，其特征是所述識別結(jié)果表示與所述識別對象之間的相似度超過給定基準(zhǔn)值的詞典數(shù)據(jù)，所述第1動作與所述識別結(jié)果所示的詞典數(shù)據(jù)中的某一詞典數(shù)據(jù)關(guān)聯(lián)，所述1個或者多個候補(bǔ)與所述識別結(jié)果所示的詞典數(shù)據(jù)中的其它詞典數(shù)據(jù)關(guān)聯(lián)。
31.根據(jù)權(quán)利要求28所述的動作控制方法，其特征是在所述步驟(c)中，當(dāng)從所提示的候補(bǔ)中選擇任一個后，中止所提示的候補(bǔ)的提示。
32.根據(jù)權(quán)利要求28所述的動作控制方法，其特征是進(jìn)一步包括當(dāng)從所述步驟(c)所提示的候補(bǔ)中選擇任一個后，執(zhí)行與所選擇的候補(bǔ)相關(guān)聯(lián)的第2動作的步驟(d)。
33.根據(jù)權(quán)利要求28所述的動作控制方法，其特征是在所述步驟(c)中，在所述候補(bǔ)提示的期間如果指示執(zhí)行第3動作，則中止所提示的候補(bǔ)的提示。
34.一種動作控制方法，其特征是包括根據(jù)識別對象和包含在識別用詞典中的詞典數(shù)據(jù)之間的相似度獲取識別結(jié)果的步驟(a)、指示執(zhí)行與所述識別結(jié)果相關(guān)聯(lián)的第1動作的步驟(b)、根據(jù)與所述識別結(jié)果之間的意思相近度獲取1個或者多個候補(bǔ)的步驟(c)、提示由所述步驟(c)獲取的候補(bǔ)的步驟(d)。
35.一種動作控制方法，其特征是包括根據(jù)識別對象和包含在所述第1識別用詞典中的詞典數(shù)據(jù)之間的相似度獲取識別結(jié)果的步驟(a)、提示與所述識別結(jié)果關(guān)聯(lián)的1個或者多個候補(bǔ)、和提示與該候補(bǔ)對應(yīng)的詞典數(shù)據(jù)是否包含在所述第1識別用詞典中的步驟(b)。
36.根據(jù)權(quán)利要求35所述的動作控制方法，其特征是進(jìn)一步包括將包含在所述第1識別用詞典中的詞典數(shù)據(jù)與包含在所述第2識別用詞典中的詞典數(shù)據(jù)按照給定基準(zhǔn)進(jìn)行交換的步驟(c)。
37.根據(jù)權(quán)利要求35所述的動作控制方法，其特征是進(jìn)一步包括可以在所述第1識別用詞典中追加某個詞典數(shù)據(jù)，從所述第1識別用詞典中刪除某個詞典數(shù)據(jù)的步驟(d)。
38.一種畫面顯示方法，其特征是包括在畫面顯示根據(jù)識別結(jié)果獲得的1個或者多個候補(bǔ)的步驟(a)、在所述畫面上顯示所述候補(bǔ)的時間到達(dá)給定時間后從所述畫面上刪除所述候補(bǔ)的步驟(b)。
39.根據(jù)權(quán)利要求38所述的畫面顯示方法，其特征是在所述步驟(a)中，在所述畫面上與在顯示所述候補(bǔ)一起的同時顯示與所述識別結(jié)果相關(guān)聯(lián)的第1動作的內(nèi)容。
40.根據(jù)權(quán)利要求39所述的畫面顯示方法，其特征是在所述步驟(a)中，強(qiáng)調(diào)顯示所述第1動作的內(nèi)容。
41.根據(jù)權(quán)利要求39所述的畫面顯示方法，其特征是在所述步驟(a)中，顯示到開始執(zhí)行所述第1動作的時間。
42.根據(jù)權(quán)利要求39所述的畫面顯示方法，其特征是在所述步驟(a)中，在所述畫面的可顯示區(qū)域中在顯示所述第1動作內(nèi)容的區(qū)域之外的區(qū)域上顯示所述候補(bǔ)。
43.根據(jù)權(quán)利要求38所述的畫面顯示方法，其特征是在所述步驟(a)中，強(qiáng)調(diào)顯示所述候補(bǔ)中的被選中的候補(bǔ)。
44.根據(jù)權(quán)利要求38所述的畫面顯示方法，其特征是在所述步驟(a)中，顯示可以通過聲音識別技術(shù)選擇的候補(bǔ)，并強(qiáng)調(diào)顯示為選擇所顯示的候補(bǔ)應(yīng)發(fā)聲的部分。
45.根據(jù)權(quán)利要求38所述的畫面顯示方法，其特征是在所述步驟(a)中，強(qiáng)調(diào)顯示所述識別結(jié)果。
46.根據(jù)權(quán)利要求45所述的畫面顯示方法，其特征是在所述步驟(b)中，在刪除所述候補(bǔ)的同時中止所述識別結(jié)果的強(qiáng)調(diào)顯示。
47.根據(jù)權(quán)利要求38所述的畫面顯示方法，其特征是進(jìn)一步包括當(dāng)從在所述畫面上顯示的候補(bǔ)中選擇任一個后刪除在所述畫面上顯示的所有候補(bǔ)的步驟(c)。
48.根據(jù)權(quán)利要求38所述的畫面顯示方法，其特征是在所述步驟(a)中，顯示根據(jù)與所述識別結(jié)果意思的相近度獲取的候補(bǔ)。
49.根據(jù)權(quán)利要求38所述的畫面顯示方法，其特征是在所述步驟(a)中，針對每個所述1個或者多個候補(bǔ)，顯示是否可以通過聲音識別技術(shù)選擇候補(bǔ)的信息。
全文摘要
本發(fā)明提供一種接口裝置、動作控制方法及畫面顯示方法。在本發(fā)明的接口裝置中，識別部(11)根據(jù)識別對象(聲音數(shù)據(jù))和包含在識別用詞典(122)中的詞典數(shù)據(jù)之間的相似度獲取識別結(jié)果(S110)。動作控制部(12)指示執(zhí)行與識別結(jié)果(S110)相關(guān)的第1動作。提示控制部(14)提示與識別結(jié)果(S110)相關(guān)的1個或者多個候補(bǔ)(S111)，當(dāng)提示該候補(bǔ)(S111)的時間達(dá)到給定時間后，中止該候補(bǔ)(S111)的提示。由此可以提高利用者的方便性，從而可更有效地利用顯示畫面。
文檔編號G10L15/22GK1437090SQ0310425
公開日2003年8月20日 申請日期2003年2月8日 優(yōu)先權(quán)日2002年2月4日
發(fā)明者芳澤伸一 申請人:松下電器產(chǎn)業(yè)株式會社