本公開內(nèi)容涉及信息處理設(shè)備、控制方法及程序。

背景技術(shù)：

已經(jīng)常規(guī)地開發(fā)出了對用戶的語音執(zhí)行語音識別/語義分析并通過輸出話音進(jìn)行響應(yīng)的技術(shù)。特別地，語音識別算法的最新發(fā)展和計(jì)算機(jī)技術(shù)的最新進(jìn)步已經(jīng)使得能夠在實(shí)用時處理語音識別，因此，使用話音的用戶接口(UI)已經(jīng)廣泛用于智能電話、平板終端等。

例如，安裝在智能電話、平板終端等中的話音UI應(yīng)用可以以話音響應(yīng)通過用戶的話音做出的查詢或者執(zhí)行與通過用戶的話音發(fā)出的指令相對應(yīng)的過程。

引用列表

專利文獻(xiàn)

專利文獻(xiàn)1：JP 2012-181358A

技術(shù)實(shí)現(xiàn)要素：

技術(shù)問題

然而，在使用語音識別的典型話音UI中，對于用戶的話音輸入，僅返回最終確定的一種響應(yīng)方法。因此，用戶必須等到系統(tǒng)完成了該過程。在等待時間期間，系統(tǒng)不向用戶給出反饋，使得用戶可能擔(dān)心他們的話音輸入沒有被適當(dāng)?shù)靥幚怼?/p>

此外，上述專利文獻(xiàn)1提出了一種自動將輸入語音轉(zhuǎn)換成文本的技術(shù)，具體地，提出了一種用于將輸入話音轉(zhuǎn)換成文本并實(shí)時地顯示該文本的系統(tǒng)。在該系統(tǒng)中，沒有采用上面的話音UI。具體地，與話音交互不同，僅顯示通過轉(zhuǎn)換輸入話音而獲得的文本，并且不反饋語義分析或基于語義分析的響應(yīng)(也被稱為響應(yīng)行動)。因此，系統(tǒng)開始行動之前用戶不能觀察到由他們的語音引起的特定行動。

鑒于以上，本公開內(nèi)容提出能夠從語音期間通過話音UI向用戶通知響應(yīng)候選的信息處理設(shè)備、控制方法及程序。

問題的解決方案

根據(jù)本公開內(nèi)容，提供了一種信息處理設(shè)備，其包括：語義分析單元，被配置成在語音期間對由語音識別單元識別的語音文本執(zhí)行語義分析；得分計(jì)算單元，被配置成基于由語義分析單元執(zhí)行的分析的結(jié)果來計(jì)算響應(yīng)候選的得分；以及通知控制單元，被配置成執(zhí)行控制以在語音期間根據(jù)由得分計(jì)算單元計(jì)算的得分來通知響應(yīng)候選。

根據(jù)本公開內(nèi)容，提供了一種控制方法，其包括：在語音期間對由語音識別單元識別的語音文本執(zhí)行語義分析；由得分計(jì)算單元基于語義分析的結(jié)果來計(jì)算響應(yīng)候選的得分；以及執(zhí)行控制以在語音期間根據(jù)所計(jì)算的得分來通知響應(yīng)候選。

根據(jù)本公開內(nèi)容，提供了一種程序，其用于使計(jì)算機(jī)用作：被配置成在語音期間對由語音識別單元識別的語音文本執(zhí)行語義分析的語義分析單元；被配置成基于由語義分析單元執(zhí)行的分析的結(jié)果來計(jì)算響應(yīng)候選的得分的得分計(jì)算單元；以及被配置成執(zhí)行控制以在語音期間根據(jù)由得分計(jì)算單元計(jì)算的得分來通知響應(yīng)候選的通知控制單元。

發(fā)明的有益效果

如上所述，根據(jù)本公開內(nèi)容，能夠從語音期間通過話音UI向用戶通知響應(yīng)候選。

注意，上述效果不一定是限制性的。與上述效果一起或代替上述效果，可以達(dá)到本說明書中描述的效果中的任意一種效果或者根據(jù)本說明書可以領(lǐng)會的其他效果。

附圖說明

圖1是用于描述根據(jù)本公開內(nèi)容的一種實(shí)施方式的語音識別系統(tǒng)的概況的圖。

圖2是用于描述通過典型的話音UI的語音和響應(yīng)的定時的圖。

圖3是用于描述根據(jù)這種實(shí)施方式的通過話音UI的語音和響應(yīng)的定時的圖。

圖4是示出根據(jù)這種實(shí)施方式的信息處理設(shè)備的配置的示例的圖。

圖5是示出根據(jù)這種實(shí)施方式的根據(jù)得分顯示響應(yīng)行動候選的示例的圖。

圖6是示出根據(jù)這種實(shí)施方式的語音識別系統(tǒng)的操作過程的流程圖。

圖7是示出根據(jù)這種實(shí)施方式的語音文本連同響應(yīng)行動候選的顯示一起被顯示的情況的圖。

圖8是用于描述通過改變顯示點(diǎn)的大小來反饋每個響應(yīng)行動候選之間得分的差異的顯示方法的圖。

圖9是用于描述用于根據(jù)響應(yīng)行動候選的得分來顯示顯示面積和信息量的方法的圖。

圖10是用于描述根據(jù)這種實(shí)施方式的響應(yīng)行動候選的變灰顯示的圖。

圖11是用于描述根據(jù)這種實(shí)施方式的用于當(dāng)存在多個用戶時顯示響應(yīng)行動候選的方法的圖。

圖12是用于描述根據(jù)這種實(shí)施方式的用于根據(jù)屏幕的狀態(tài)來顯示響應(yīng)行動候選的方法的圖。

圖13是示出根據(jù)這種實(shí)施方式的指示應(yīng)用中涉及的更多特定行動的圖標(biāo)的示例的圖。

圖14是示出根據(jù)這種實(shí)施方式的指示音量調(diào)節(jié)中涉及的行動的圖標(biāo)的示例的圖。

具體實(shí)施方式

在下文中，(a)將參照附圖詳細(xì)描述本公開內(nèi)容的優(yōu)選實(shí)施方式。在本說明書和附圖中，用相同的附圖標(biāo)記表示功能和結(jié)構(gòu)基本相同的結(jié)構(gòu)元素，并省略對這些結(jié)構(gòu)元素的重復(fù)說明。

此外，將按以下順序提供描述。

1.根據(jù)本公開內(nèi)容的一種實(shí)施方式的語音識別系統(tǒng)的概述

2.配置

3.操作過程

4.響應(yīng)行動候選的顯示示例

4-1.語音文本的顯示

4-2.根據(jù)得分的顯示方法

4-3.存在多個講話者的情況下的顯示方法

4-4.在除了主顯示區(qū)域之外的區(qū)域中的顯示方法

4-5.針對不同屏幕狀態(tài)的不同顯示方法

4-6.其他圖標(biāo)顯示示例

5.總結(jié)

<<1.根據(jù)本公開內(nèi)容的一種實(shí)施方式的語音識別系統(tǒng)的概述>>

根據(jù)本公開內(nèi)容的一種實(shí)施方式的語音識別系統(tǒng)具有以下基本功能：對用戶的語音執(zhí)行語音識別/語義分析以及通過輸出話音進(jìn)行響應(yīng)?，F(xiàn)在將參照圖1描述根據(jù)本公開內(nèi)容的一種實(shí)施方式的語音識別系統(tǒng)的概況。

圖1是用于描述根據(jù)本公開內(nèi)容的一種實(shí)施方式的語音識別系統(tǒng)的概況的圖。圖1所示的信息處理設(shè)備1具有話音UI代理功能，該話音UI代理功能能夠?qū)τ脩舻恼Z音執(zhí)行語音識別/語義分析，并且使用話音將響應(yīng)輸出給用戶。信息處理設(shè)備1的外觀沒有特別限制，而且可以具有例如圖1所示的圓柱形狀。信息處理設(shè)備1被放置在房間中的地板、桌子等上面。此外，信息處理設(shè)備1設(shè)置有光發(fā)射單元18，光發(fā)射單元18呈以下形狀：圍繞信息處理設(shè)備1的側(cè)表面的水平中間區(qū)域延伸的帶。光發(fā)射單元18包括光發(fā)射裝置如發(fā)光二極管(LED)等。信息處理設(shè)備1可以通過使光發(fā)射單元18從其全部或一部分發(fā)出光來給用戶通知信息處理設(shè)備1的狀態(tài)。例如，當(dāng)與用戶交互時，信息處理設(shè)備1可以通過使光發(fā)射單元18從其一部分沿用戶即講話者的方向發(fā)出光而如圖1所示那樣看起來如同注視著用戶。此外，信息處理設(shè)備1可以控制光發(fā)射單元18使得在響應(yīng)的產(chǎn)生或數(shù)據(jù)的搜索期間光繞側(cè)表面旋轉(zhuǎn)，從而向用戶通知信息處理設(shè)備1正在執(zhí)行處理。

在此，在使用語音識別的典型話音UI中，對于用戶的話音輸入，僅返回最終確定的一種響應(yīng)方法。因此，用戶必須等到系統(tǒng)完成了處理。在等待時間期間，系統(tǒng)不向用戶給出反饋，使得用戶可能擔(dān)心其話音輸入沒有被適當(dāng)?shù)靥幚怼D2是用于描述通過典型話音UI的語音和響應(yīng)的定時的圖。如圖2所示，在用戶正發(fā)出語音100“今天的天氣怎么樣”的語音部分中，系統(tǒng)不執(zhí)行語音識別或語義分析，而在語音結(jié)束之后，系統(tǒng)才執(zhí)行該過程。此外，在該過程結(jié)束之后，系統(tǒng)輸出響應(yīng)話音102“今天天氣好”或者指示天氣信息的響應(yīng)圖像104作為最終所確定的響應(yīng)。在這種情況下，總的系統(tǒng)處理時間是用戶的等待時間，在用戶的等待時間期間，系統(tǒng)不給出反饋。

鑒于以上，在根據(jù)本公開內(nèi)容的一種實(shí)施方式的語音識別系統(tǒng)中，能夠從語音期間通過話音UI向用戶通知響應(yīng)候選。

具體地，信息處理設(shè)備1在語音期間順序地執(zhí)行語音識別和語義分析，并且基于結(jié)果，獲取響應(yīng)候選，產(chǎn)生代表所獲取的響應(yīng)候選的圖標(biāo)(或文本)并向用戶通知該圖標(biāo)。圖3是用于描述根據(jù)這種實(shí)施方式的通過話音UI的語音和響應(yīng)的定時的圖。如圖3所示，在用戶正發(fā)出語音200“今天的天氣怎么樣”的語音部分中，系統(tǒng)順序地執(zhí)行語音識別過程和語義分析過程，并且基于識別結(jié)果向用戶通知響應(yīng)候選。例如，基于對一部分語音“今天的天氣”的語音識別來顯示指示天氣應(yīng)用的圖標(biāo)201。在語音結(jié)束之后，系統(tǒng)輸出響應(yīng)話音202“今天天氣好”或指示天氣信息的響應(yīng)圖像204作為最終確定的響應(yīng)。因而，盡管語音結(jié)束與最終響應(yīng)的確定之間的時間段與圖2所示的典型話音UI的系統(tǒng)處理時間相同，但是在該時間段期間系統(tǒng)給出反饋如圖標(biāo)201的顯示等。因此，在最終確定了響應(yīng)之前，用戶不會擔(dān)心并且不會覺得等待時間長。

在圖1所示的示例中，在由用戶做出的語音30“本周的天氣)……”的期間，信息處理設(shè)備1對“本周的天氣”執(zhí)行語音識別和語義分析，并且基于結(jié)果，獲取對運(yùn)動圖像應(yīng)用、天氣預(yù)報應(yīng)用和日歷應(yīng)用的激活來作為響應(yīng)行動。此后，信息處理設(shè)備1將用于運(yùn)動圖像應(yīng)用的圖標(biāo)21a、用于天氣預(yù)報應(yīng)用的圖標(biāo)21b以及用于日歷應(yīng)用的圖標(biāo)21c投影到墻20上，從而向用戶通知響應(yīng)候選。

因此，用戶能夠知道其話音輸入在語音期間被識別，并且能夠?qū)崟r了解響應(yīng)候選。

前面已經(jīng)描述了根據(jù)本公開內(nèi)容的語音識別系統(tǒng)的概況。注意，信息處理設(shè)備1的形狀不限于圖1所示的圓柱形狀，并且可以是例如立方體的、球形的、多面體的等。接下來，將順序地描述用于實(shí)現(xiàn)根據(jù)本公開內(nèi)容的一種實(shí)施方式的語音識別系統(tǒng)的信息處理設(shè)備1的基本配置和操作過程。

<<2.配置>>

圖4是示出根據(jù)這種實(shí)施方式的信息處理設(shè)備1的配置的示例的圖。如圖4所示，信息處理設(shè)備1包括控制單元10、通信單元11、麥克風(fēng)12、揚(yáng)聲器13、攝像機(jī)14、距離測量傳感器15、投影單元16、存儲單元17和光發(fā)射單元18。

(控制單元10)

控制單元10控制信息處理設(shè)備1的每個部件?？刂茊卧?0在包括中央處理單元(CPU)、只讀存儲器(ROM)、隨機(jī)存取存儲器(RAM)和非易失性存儲器的微計(jì)算機(jī)中實(shí)現(xiàn)。此外，如圖4所示，根據(jù)這種實(shí)施方式的控制單元10還用作語音識別單元10a、語義分析單元10b、響應(yīng)行動獲取單元10c、得分計(jì)算單元10d、顯示控制單元10e和執(zhí)行單元10f。

語音識別單元10a識別由信息處理設(shè)備1的麥克風(fēng)12收集的用戶的話音，并且將話音轉(zhuǎn)換成字符串以獲取語音文本。此外，語音識別單元10a可以基于話音的特征來識別發(fā)出話音的人，或者估計(jì)話音的源即講話者的方向。

此外，根據(jù)這種實(shí)施方式的語音識別單元10a從用戶的語音的開始順序地執(zhí)行實(shí)時語音識別，并且在語音期間將語音識別的結(jié)果輸出至語義分析單元10b。

語義分析單元10b對由語音識別單元10a獲取的語音文本執(zhí)行自然語言處理等以用于語義分析。語義分析的結(jié)果輸出至響應(yīng)行動獲取單元10c。

此外，根據(jù)這種實(shí)施方式的語義分析單元10b可以在語音的期間基于從語音識別單元10a輸出的語音識別的結(jié)果順序地執(zhí)行語義分析。語義分析單元10b將順序執(zhí)行的語義分析的結(jié)果輸出至響應(yīng)行動獲取單元10c。

響應(yīng)行動獲取單元10c基于語義分析的結(jié)果獲取關(guān)于用戶的語音的響應(yīng)行動。在此，響應(yīng)行動獲取單元10c可以在語音期間基于語義分析的結(jié)果來獲取當(dāng)前時刻的響應(yīng)行動候選。例如，響應(yīng)行動獲取單元10c基于由語音識別單元10a所識別的語音文本與為了語義分析的學(xué)習(xí)而記錄的示例句子的比較來獲取與具有高相似性水平的示例句子相對應(yīng)的行動作為候選。在這種情況下，因?yàn)橐容^的語音文本是不完整的，所以響應(yīng)行動獲取單元10c可以根據(jù)語音的長度將語音文本與每個示例句子的前半部分進(jìn)行比較。此外，響應(yīng)行動獲取單元10c可以通過利用包含在語音文本中的每個詞的出現(xiàn)概率來獲取響應(yīng)行動候選。在此，可以以基于學(xué)習(xí)的方式產(chǎn)生使用自然語言處理的語義分析引擎。具體地，系統(tǒng)中采用的大量語音示例先前被收集，并且每個語音示例與(即作為數(shù)據(jù)集所學(xué)習(xí)的)系統(tǒng)的響應(yīng)行動正確地關(guān)聯(lián)(也稱為“被標(biāo)記”)。因此，通過將數(shù)據(jù)集與通過語音識別獲得的語音文本進(jìn)行比較，可以獲得感興趣的響應(yīng)行動。注意，這種實(shí)施方式不取決于語義分析引擎的類型。此外，由語義分析引擎學(xué)習(xí)的數(shù)據(jù)集可以針對每個用戶而個人化。

響應(yīng)行動獲取單元10c將所獲取的響應(yīng)行動候選輸出至得分計(jì)算單元10d。

此外，當(dāng)響應(yīng)行動基于語音結(jié)束之后的語義分析結(jié)果時，響應(yīng)行動獲取單元10c確定響應(yīng)行動是最終的響應(yīng)行動，并且將該最終的響應(yīng)行動輸出至執(zhí)行單元10f。

得分計(jì)算單元10d計(jì)算由響應(yīng)行動獲取單元10c獲取的響應(yīng)行動候選的得分，并且將針對每個響應(yīng)行動候選計(jì)算的得分輸出至顯示控制單元10e。例如，得分計(jì)算單元10d根據(jù)相似性水平來計(jì)算得分，該相似性水平是通過與為了在響應(yīng)行動候選的獲取期間執(zhí)行的語義分析學(xué)習(xí)而記錄的示例句子進(jìn)行比較獲得的。

此外，得分計(jì)算單元10d可以考慮用戶環(huán)境來計(jì)算得分。例如，在根據(jù)這種實(shí)施方式的話音UI的操作期間，可以連續(xù)獲取用戶環(huán)境并將其存儲為用戶歷史。當(dāng)可以識別出用戶時，可以考慮用戶操作的歷史和當(dāng)前情形來計(jì)算得分?？梢垣@取例如時區(qū)、周中的一天、與用戶一起出現(xiàn)的人、用戶周圍的外部設(shè)備的狀態(tài)(例如，電視的打開狀態(tài)等)、噪聲環(huán)境、房間的亮度(即，照明環(huán)境)等作為用戶環(huán)境。因此，當(dāng)可以識別出用戶時，得分計(jì)算單元10d可以考慮用戶操作的歷史和當(dāng)前情況來計(jì)算得分?；旧?，可以在以上響應(yīng)行動候選的獲取期間與根據(jù)關(guān)于示例句子的相似性水平計(jì)算的得分相結(jié)合地根據(jù)用戶環(huán)境來執(zhí)行加權(quán)。

可以存在操作歷史和當(dāng)前情況的各種示例，并且下面將描述一部分示例。在下面描述的數(shù)據(jù)集的學(xué)習(xí)之后，信息處理設(shè)備1可以根據(jù)當(dāng)前用戶環(huán)境對得分進(jìn)行加權(quán)。

[表1]

因此，例如，如果用戶具有在周末晚上獨(dú)自使用運(yùn)動圖像應(yīng)用的歷史，則當(dāng)用戶處于用戶周末晚上獨(dú)自在房間的用戶環(huán)境中時，得分計(jì)算單元10d通過對作為運(yùn)動圖像應(yīng)用的激活的行動候選進(jìn)行加權(quán)來計(jì)算得分。注意，在這種實(shí)施方式中，可以根據(jù)操作歷史和當(dāng)前用戶環(huán)境來為用戶呈現(xiàn)推薦的響應(yīng)行動候選。

此外，如上所述，語音識別單元10a順序地獲取語音文本，結(jié)合語義分析單元10b順序地執(zhí)行語義分析，從而響應(yīng)行動獲取單元10c順序地更新響應(yīng)行動候選的獲取。得分計(jì)算單元10d根據(jù)響應(yīng)行動候選的獲取和更新順序地更新每個響應(yīng)行動候選的得分，并將得分輸出至顯示控制單元10e。

顯示控制單元10e用作通知控制單元，該通知控制單元執(zhí)行控制以在語音期間根據(jù)由得分計(jì)算單元10d計(jì)算的每個響應(yīng)行動候選的得分向用戶通知每個響應(yīng)行動候選。例如，顯示控制單元10e對投影單元16進(jìn)行控制，使得投影單元16在墻20上投影并顯示指示每個響應(yīng)行動候選的圖標(biāo)。此外，當(dāng)?shù)梅钟?jì)算單元10d更新得分時，顯示控制單元10e根據(jù)新得分更新顯示以向用戶通知每個響應(yīng)行動候選。

在此，將參照圖5描述與得分相對應(yīng)的響應(yīng)行動候選的顯示。圖5是示出根據(jù)這種實(shí)施方式的根據(jù)得分的響應(yīng)行動候選的顯示示例的圖。例如，如圖5的左側(cè)部分所示，當(dāng)用戶已經(jīng)發(fā)出了語音30“本周中天氣……”時，如得分表40所指示的，計(jì)算出天氣應(yīng)用的得分為“0.5”，運(yùn)動圖像應(yīng)用的得分為“0.3”，日歷應(yīng)用的得分為“0.2”。在這種情況下，如圖5的左側(cè)部分所示，顯示控制單元10e進(jìn)行控制使得指示天氣應(yīng)用的圖標(biāo)21a、指示運(yùn)動圖像應(yīng)用的圖標(biāo)21b以及指示日歷應(yīng)用的圖標(biāo)21c被投影和顯示。顯示控制單元10e可以顯示動畫，使得圖標(biāo)21a至21c從顯示區(qū)域外部滑入顯示區(qū)域。因此，用戶可以在語音期間直觀地了解系統(tǒng)正執(zhí)行語音識別過程以及由系統(tǒng)當(dāng)前獲取的響應(yīng)行動候選。此外，在這種情況下，顯示控制單元10e可以使投影的圖標(biāo)的圖像區(qū)(區(qū)域)與其得分相關(guān)聯(lián)。

接下來，如圖5的中間部分所示，當(dāng)用戶已經(jīng)發(fā)出了語音31“本周中天氣好的一天的日程安排……”時，如得分表41所示，天氣應(yīng)用的得分更新為“0.05”，運(yùn)動圖像應(yīng)用的得分更新為“0.15”，日歷應(yīng)用的得分更新為“0.8”。在這種情況下，顯示控制單元10e更新投影屏幕使得例如不顯示低于預(yù)定閾值的響應(yīng)行動并且增大剩余的響應(yīng)行動的顯示圖標(biāo)的大小。具體地，如圖5的中間部分所示，顯示控制單元10e進(jìn)行控制使得僅指示日歷應(yīng)用的圖標(biāo)21c-1被投影和顯示。注意，當(dāng)對圖標(biāo)進(jìn)行控制使得不顯示該圖標(biāo)時，可以使該圖標(biāo)滑入顯示區(qū)域的外部或淡出。

此后，如圖5的右側(cè)部分所示，當(dāng)用戶已經(jīng)發(fā)出了語音32“本周中天氣好的一天的日程安排顯示給我！”且語音結(jié)束時，如得分表42所示，天氣應(yīng)用的得分更新為“0.00”，運(yùn)動圖像應(yīng)用的得分更新為“0.02”，日歷應(yīng)用的得分更新為“0.98”。在這種情況下，因?yàn)橐呀?jīng)確定了最終的響應(yīng)行動，所以顯示控制單元10e執(zhí)行顯示控制使得已經(jīng)被顯示的指示日歷應(yīng)用的圖標(biāo)21c-2不顯示(例如，通過淡出移除顯示)。此后，響應(yīng)行動獲取單元10c基于語音結(jié)束之后所確定的最終語音文本以及語義分析的結(jié)果來將激活日歷應(yīng)用確定為響應(yīng)行動，并且執(zhí)行單元10f激活日歷應(yīng)用。此外，顯示控制單元10e顯示由執(zhí)行單元10f激活的日歷應(yīng)用生成的月度日程安排圖像22。

因而，從語音期間順序地執(zhí)行語音識別，并且將響應(yīng)行動候選反饋給用戶。此外，隨著語音進(jìn)行，對響應(yīng)行動候選進(jìn)行更新，并且在語音結(jié)束之后，執(zhí)行最終確定的響應(yīng)行動。

前面已經(jīng)描述了通過顯示控制單元10e的響應(yīng)行動候選的顯示示例。

當(dāng)語音結(jié)束之后確定了最終的語音文本(即，語音識別結(jié)束)時，執(zhí)行單元10f執(zhí)行由響應(yīng)行動獲取單元10c最終確定的響應(yīng)行動。本文中采用的響應(yīng)行動例如如下。

[表2]

(通信單元11)

通信單元11將數(shù)據(jù)發(fā)送至外部設(shè)備以及從外部設(shè)備接收數(shù)據(jù)。例如，通信單元11連接至網(wǎng)絡(luò)上的預(yù)定服務(wù)器，并且在由執(zhí)行單元10f執(zhí)行響應(yīng)行動期間接收需要的各項(xiàng)信息。

(麥克風(fēng)12)

麥克風(fēng)12具有以下功能：收集其周圍的聲音，并且將聲音作為音頻信號輸出至控制單元10。此外，麥克風(fēng)12可以以陣列麥克風(fēng)來實(shí)現(xiàn)。

(揚(yáng)聲器13)

揚(yáng)聲器13具有以下功能：在控制單元10的控制下，將音頻信號轉(zhuǎn)換成聲音并且輸出聲音。

(攝像機(jī)14)

攝像機(jī)14具有以下功能：使用布置在信息處理設(shè)備1中的成像鏡頭來拍攝周圍區(qū)域的圖像，并且將所拍攝的圖像輸出至控制單元10。此外，攝像機(jī)14可以以全方位攝像機(jī)或廣角攝像機(jī)來實(shí)現(xiàn)。

(距離測量傳感器15)

距離測量傳感器15具有以下功能：測量信息處理設(shè)備1與用戶或用戶周圍的人之間的距離。距離測量傳感器15以例如光傳感器(基于關(guān)于光發(fā)射定時/光接收定時中的相位差的信息來測量至感興趣的對象的距離的傳感器)來實(shí)現(xiàn)。

(投影單元16)

作為顯示設(shè)備的示例的投影單元16具有在墻或屏幕上投影(并放大)和顯示圖像的功能。

(存儲單元17)

存儲單元17存儲用于使信息處理設(shè)備1的每個部件運(yùn)行的程序。存儲單元17還存儲被得分計(jì)算單元10d用來計(jì)算響應(yīng)行動候選的得分各種參數(shù)以及能夠由執(zhí)行單元10f執(zhí)行的應(yīng)用程序。存儲單元17還存儲用戶的注冊信息。用戶的注冊信息包括個人可識別信息(話音的特征量、面部圖像的特征量或人的圖像(包括身體圖像)的特征量、姓名、身份證號碼等)、年齡、性別、興趣愛好、屬性(家庭主婦、職員、學(xué)生等)、關(guān)于用戶所擁有的通信終端的信息等。

(光發(fā)射單元18)

以光發(fā)射裝置如LED等實(shí)現(xiàn)的光發(fā)射單元18可以執(zhí)行全部發(fā)射、部分發(fā)射、閃爍、發(fā)射位置控制等。例如，光發(fā)射單元18可以在控制單元10的控制下從光發(fā)射單元18的一部分朝沿語音識別單元10a所識別的講話者的方向發(fā)出光，從而看起來好像光發(fā)射單元18注視著講話者。

前面已經(jīng)具體描述了根據(jù)這種實(shí)施方式的信息處理設(shè)備1的配置。注意，圖4所示的配置僅是說明性的，并且這種實(shí)施方式不限于此。例如，信息處理設(shè)備1還可以包括紅外(IR)攝像機(jī)、深度攝像機(jī)、立體攝像機(jī)、運(yùn)動傳感器等以獲取關(guān)于周圍環(huán)境的信息。此外，設(shè)置在信息處理設(shè)備1中的麥克風(fēng)12、揚(yáng)聲器13、攝像機(jī)14、光發(fā)射單元18等的安裝位置沒有特別限制。此外，投影單元16是顯示設(shè)備的示例，但是信息處理設(shè)備1還可以使用其他手段來執(zhí)行顯示。例如，信息處理設(shè)備1可以連接至顯示預(yù)定屏幕的外部顯示設(shè)備。此外，可以將根據(jù)這種實(shí)施方式的控制單元10的功能設(shè)置在云中，控制單元10通過通信單元11連接至云。

<<3.操作過程>>

接下來，將參照圖6具體地描述根據(jù)這種實(shí)施方式的語音識別系統(tǒng)的操作過程。

圖6是示出根據(jù)這種實(shí)施方式的語音識別系統(tǒng)的操作過程的流程圖。如圖6所示，最初在步驟S103中，信息處理設(shè)備1的控制單元10確定是否存在用戶語音。具體地，控制單元10使用語音識別單元10a對麥克風(fēng)12所收集的音頻信號執(zhí)行語音識別以確定是否存在定向至系統(tǒng)的用戶語音。

接下來，在步驟S106中，語音識別單元10a通過語音識別過程獲取語音文本。

接下來，在步驟S109中，控制單元10確定是否已經(jīng)完成了語音識別，即，是否已經(jīng)最終確定了語音文本。語音持續(xù)的情形(語音期間)表示尚未完成語音識別，即還沒有最終確定語音文本。

接下來，如果尚未完成語音識別(S109/否)，則在步驟S112中語義分析單元10b從語音識別單元10a獲取到當(dāng)前時刻為止已經(jīng)發(fā)出的語音文本。

接下來，在步驟S115中，語義分析單元10b在語音期間基于到某個時間點(diǎn)為止已經(jīng)發(fā)出的語音文本來執(zhí)行語義分析過程。

接下來，在步驟S118中，響應(yīng)行動獲取單元10c基于由語義分析單元10b執(zhí)行的語義分析的結(jié)果來獲取對用戶的語音的響應(yīng)行動候選，得分計(jì)算單元10d計(jì)算當(dāng)前響應(yīng)行動候選的得分。

接下來，在步驟S121中，顯示控制單元10e確定用于顯示響應(yīng)行動候選的方法。用于顯示響應(yīng)行動候選的方法的示例包括：顯示表示響應(yīng)行動候選的圖標(biāo)、顯示表示響應(yīng)行動候選的文本、在次顯示區(qū)中顯示、當(dāng)用戶正在主顯示區(qū)中觀看電影時在主顯示區(qū)下方設(shè)置的特定頁腳區(qū)域中顯示等。下面將參照圖7至圖14來描述用于顯示響應(yīng)行動候選的具體方法。此外，顯示控制單元10e可以根據(jù)響應(yīng)行動候選的數(shù)目或每個響應(yīng)行動候選的得分來確定顯示方法。

接下來，在步驟S124中，顯示控制單元10e執(zhí)行控制以顯示排名最高的N個響應(yīng)行動候選。例如，顯示控制單元10e控制投影單元16，使得投影單元16將表示響應(yīng)行動候選的圖標(biāo)投影到墻20上。

順序地執(zhí)行上述S112至S124中的過程直到語音已經(jīng)完成。當(dāng)響應(yīng)行動候選或響應(yīng)行動候選的得分更新時，顯示控制單元10e根據(jù)該更新來改變所顯示的信息。

同時，如果語音已經(jīng)結(jié)束并且已經(jīng)完成語音識別(已經(jīng)確定最終的語音文本)(S109/是)，則在步驟S127中語義分析單元10b基于最終的語音文本來執(zhí)行語義分析過程。

接下來，在步驟S130中，響應(yīng)行動獲取單元10c基于由語義分析單元10b執(zhí)行的語義分析的結(jié)果來最終確定關(guān)于用戶的語音的響應(yīng)行動。注意，當(dāng)用戶明確地選擇了響應(yīng)行動時，響應(yīng)行動獲取單元10c可以確定最終的響應(yīng)行動是用戶所選擇的響應(yīng)行動。

此后，在步驟S133中，執(zhí)行單元10f執(zhí)行由響應(yīng)行動獲取單元10c確定的最終的響應(yīng)行動。

前面已經(jīng)具體描述了根據(jù)這種實(shí)施方式的語音識別系統(tǒng)的操作過程。注意，當(dāng)由用戶執(zhí)行的操作的歷史累積時，在步驟S133之后可以執(zhí)行對語音期間感測用戶環(huán)境的結(jié)果的數(shù)據(jù)集進(jìn)行存儲以及最終確定響應(yīng)行動的過程。接下來，將參照圖7至圖14來描述根據(jù)這種實(shí)施方式的響應(yīng)行動候選的顯示示例。

<<4.響應(yīng)行動候選的顯示示例>>

<4-1.語音文本的顯示>

圖7是示出根據(jù)這種實(shí)施方式的與響應(yīng)行動候選的顯示一起顯示語音文本的情況的圖。盡管在圖1和圖5所示的示例中僅顯示了響應(yīng)行動候選，但這種實(shí)施方式不限于此，可替選地，可以另外顯示所識別的語音文本。具體地，如圖7所示，在語音期間識別的語音文本300“本周中的天氣……”與表示響應(yīng)行動候選的圖標(biāo)21b一起顯示。因此，用戶可以識別出語音識別如何處理了他們的語音。此外，所顯示的語音文本與語音關(guān)聯(lián)地順序變化。

<4-2.根據(jù)得分的顯示方法>

在上面圖5所示的示例中，通過使顯示表示響應(yīng)行動候選的每個圖標(biāo)的區(qū)域與相應(yīng)的得分相關(guān)聯(lián)，反饋每個響應(yīng)行動候選之間得分差。這種實(shí)施方式不限于此。例如，即使當(dāng)圖標(biāo)圖像具有相同的顯示面積時，仍然可以反饋每個響應(yīng)行動候選之間的得分差。這將參照圖8來具體描述。

圖8是用于描述通過改變顯示點(diǎn)大小來反饋每個響應(yīng)行動候選之間得分差的顯示方法的圖。例如，如圖8的左側(cè)部分所示，當(dāng)作為響應(yīng)行動候選的天氣應(yīng)用得分為低于預(yù)定閾值(例如，“0.5”)的“0.3”時，僅顯示圖標(biāo)21b。同時，如圖8的右側(cè)部分所示，當(dāng)與語音關(guān)聯(lián)地更新得分時，使得作為響應(yīng)行動候選的天氣應(yīng)用的得分為“0.8”，該得分超過了預(yù)定閾值，顯示包括當(dāng)執(zhí)行響應(yīng)行動時將呈現(xiàn)的信息(例如，日期和最高氣溫/最低氣溫)的圖標(biāo)21b-1?？梢愿鶕?jù)得分值來改變顯示點(diǎn)大小。

此外，在這種實(shí)施方式中，可以根據(jù)得分動態(tài)地改變顯示響應(yīng)行動候選的區(qū)域以及信息的數(shù)量。這將參照圖9來描述。

圖9是用于描述根據(jù)響應(yīng)行動候選的得分來顯示顯示面積和信息量的方法的圖。如使用圖9中示出的圖標(biāo)23所指示的，可以根據(jù)得分增大顯示區(qū)域和信息量，從而可以將更多信息呈現(xiàn)給用戶。

此外，在這種實(shí)施方式中，可以使用其他顯示方法如例如變灰來顯示得分低的響應(yīng)行動候選，而不是不顯示得分低的響應(yīng)行動候選，從而可以明確地指示得分低于預(yù)定值。這將參照圖10來描述。

圖10是用于描述根據(jù)這種實(shí)施方式的響應(yīng)行動候選的變灰顯示的圖。如圖10的左側(cè)部分所示，顯示具有相同顯示面積的在用戶語音期間通過語音識別/語義分析獲得的響應(yīng)行動候選的圖標(biāo)24a至24e，然后與語音的進(jìn)行關(guān)聯(lián)地更新這些圖標(biāo)，使得如圖10的中間部分所示，圖標(biāo)24b’和24e’被顯示為變灰。因此，用戶可以直觀地了解由圖標(biāo)24b’和24e’表示的響應(yīng)行動的得分低于預(yù)定值。

接下來，如圖10的右側(cè)部分所示，當(dāng)語音結(jié)束之后，確定最終的響應(yīng)行動是由圖標(biāo)24c表示的日歷應(yīng)用，其他圖標(biāo)24a’、24b’、24d’和24e’消失，并且當(dāng)日歷應(yīng)用被激活時圖標(biāo)24c淡出，使得使用淡入效果來顯示月度日程安排圖像22。

在上述顯示方法中，顯示響應(yīng)行動候選的列表，因此用戶甚至可以在語音期間立即選擇期望的響應(yīng)行動。具體地，所顯示的響應(yīng)行動候選可以用作行動的快捷方式。在這種情況下，用戶還可以選擇被變灰顯示的響應(yīng)行動候選。

例如，當(dāng)在語音期間顯示的響應(yīng)行動候選中存在期望的行動時，用戶可以通過說“左邊的圖標(biāo)！”、“第三個圖標(biāo)！”等來選擇期望的行動。此外，不但可以通過使用話音而且可以通過使用姿勢、觸摸操作、遙控器等來執(zhí)行選擇。此外，由用戶執(zhí)行的這樣的選擇不但可以用于確定要激活什么行動的功能而且可以用于取消功能。例如，當(dāng)發(fā)出語音“本周中的天氣……，哎呀，不是這樣”時，可以取消(不顯示)已經(jīng)與“本周中的天氣……”關(guān)聯(lián)的以較大大小(較高得分)顯示的響應(yīng)行動候選，并且可以減小得分。

<4-3.存在多個講話者的情況下的顯示方法>

此外，也可以由多個用戶使用根據(jù)這種實(shí)施方式的語音識別系統(tǒng)。例如，假定通過使用陣列麥克風(fēng)或攝像機(jī)來識別用戶(講話者)的位置，則根據(jù)用戶的位置來劃分顯示區(qū)域，并且為每個用戶顯示行動候選。在這種情況下，針對多個用戶并行執(zhí)行圖6的流程中所示的實(shí)時語音識別過程、語義分析過程和響應(yīng)行動獲取過程等。這將參照圖11來具體描述。

圖11是用于描述根據(jù)這種實(shí)施方式的當(dāng)多個用戶使用系統(tǒng)時顯示響應(yīng)行動候選的方法的圖。如圖11所示，根據(jù)用戶AA關(guān)于顯示區(qū)域的相對位置在顯示區(qū)域的左側(cè)部分中顯示關(guān)于用戶AA的語音33“本周中的天氣……”的響應(yīng)行動候選。例如，圖標(biāo)25a至25c被顯示。此外，根據(jù)用戶BB關(guān)于顯示區(qū)域的相對位置在顯示區(qū)域的右側(cè)部分中顯示關(guān)于用戶BB的語音34“音樂會的……”的響應(yīng)行動候選。例如，圖標(biāo)26被顯示。

注意，當(dāng)多個用戶使用系統(tǒng)時，根據(jù)這種實(shí)施方式的信息處理設(shè)備1可以以不針對用戶劃分顯示區(qū)域的整合方式執(zhí)行實(shí)時語音識別過程、語義分析過程、響應(yīng)行動獲取過程等，并且反饋單個結(jié)果。

<4-4.除了主顯示區(qū)域以外的區(qū)域中的顯示方法>

此外，根據(jù)這種實(shí)施方式的語音識別系統(tǒng)可以在語音期間在除了主顯示區(qū)域以外的區(qū)域中通知響應(yīng)行動候選。在此，主顯示區(qū)域指由投影單元16執(zhí)行投影和顯示的區(qū)域。信息處理設(shè)備1可以將響應(yīng)行動候選顯示在作為除了主顯示區(qū)域以外的顯示區(qū)域例如設(shè)置在信息處理設(shè)備1的側(cè)表面上的由液晶顯示器等形成的次顯示器(未示出)上或者外部顯示設(shè)備如在用戶周圍的TV、智能電話或平板終端、由用戶穿戴的可穿戴終端等上。

當(dāng)在除了主顯示區(qū)域以外的區(qū)域中執(zhí)行顯示時，代替圖5所示的顯示方法，可以僅顯示具有最高得分的響應(yīng)行動候選的圖標(biāo)或文本。此外，根據(jù)這種實(shí)施方式的語音識別系統(tǒng)可以使用LED的光等作為反饋。例如，信息處理設(shè)備1可以通過使光發(fā)射單元18發(fā)出具有先前分配給每個響應(yīng)行動的顏色的光來實(shí)時地進(jìn)行反饋。

<4-5.不同屏幕狀態(tài)的不同顯示方法>

此外，根據(jù)這種實(shí)施方式的語音識別系統(tǒng)可以根據(jù)顯示區(qū)域的當(dāng)前屏幕狀態(tài)來改變用于顯示響應(yīng)行動候選的方法。這將參照圖12來具體描述。

圖12是用于描述根據(jù)這種實(shí)施方式的用于根據(jù)屏幕的狀態(tài)來顯示響應(yīng)行動候選的方法的圖。例如，甚至當(dāng)用戶正在觀看電影等時，用戶可以向語音識別系統(tǒng)發(fā)出語音并且從而使用話音UI。因此，例如，用戶可以僅使用話音指示例如調(diào)節(jié)音量。在這種情況下，如果響應(yīng)于用戶的語音而將響應(yīng)行動候選的大圖標(biāo)顯示并重疊在屏幕上，則圖標(biāo)妨礙電影的觀看。

鑒于以上，例如，當(dāng)如圖12的左側(cè)部分所示的那樣顯示運(yùn)動圖像50時，根據(jù)這種實(shí)施方式的信息處理設(shè)備1的顯示控制單元10e在顯示區(qū)域下方提供特定頁腳區(qū)域45，并且在該區(qū)域中顯示響應(yīng)行動候選的圖標(biāo)(例如，圖標(biāo)27a至27c)。此外，如圖12的右側(cè)部分所示，當(dāng)不期望顯示被疊加在運(yùn)動圖像的一部分上時，顯示控制單元10e可以顯示與用于顯示響應(yīng)行動候選的顯示區(qū)域(頁腳區(qū)域45)不交疊的縮小的運(yùn)動圖像屏幕51。

此外，當(dāng)在頁腳區(qū)域45中顯示響應(yīng)行動候選的圖標(biāo)時，信息處理設(shè)備1可以調(diào)整所顯示的圖標(biāo)的數(shù)量或大小以不妨礙運(yùn)動圖像的觀看。

因此，根據(jù)這種實(shí)施方式的信息處理設(shè)備1的顯示控制單元10e可以根據(jù)屏幕狀態(tài)(例如，所顯示的信息的數(shù)量、顯示區(qū)域的大小等)或所顯示的響應(yīng)行動候選的顯示狀態(tài)(圖標(biāo)、文本、顯示量等)通過使用預(yù)定的顯示布局模式來執(zhí)行最佳顯示控制。此外，信息處理設(shè)備1可以在運(yùn)動圖像的回放期間使用在除了主顯示區(qū)域以外的區(qū)域中顯示的方法，例如上面所述的那些方法。因此，可以向用戶通知響應(yīng)行動候選，但響應(yīng)行動候選與在主顯示區(qū)域中回放的運(yùn)動圖像屏幕一點(diǎn)也不交疊。

<4-6.其他圖標(biāo)顯示示例>

在上面顯示屏幕示例中，指示各種應(yīng)用的激活行動的圖標(biāo)顯示為響應(yīng)行動候選的圖標(biāo)。這種實(shí)施方式不限于此?，F(xiàn)在將參照圖13和圖14來描述響應(yīng)行動候選的其他顯示示例。

圖13是示出指示應(yīng)用中涉及的更多具體行動的圖標(biāo)的示例的圖。例如，圖13示出了指示朗讀郵件的圖標(biāo)28a、指示卸載天氣應(yīng)用的圖標(biāo)28b、指示顯示日歷應(yīng)用中的月度日程安排的圖標(biāo)28c、以及指示將事件或活動添加至日歷應(yīng)用中的日程安排的圖標(biāo)28d。

圖14是示出指示在音量調(diào)節(jié)中涉及的行動的圖標(biāo)的示例的圖。如圖14的左側(cè)部分所示，例如，當(dāng)用戶在觀看運(yùn)動圖像52期間發(fā)出語音“音量……”時，在設(shè)置在顯示區(qū)域下方的頁腳區(qū)域中顯示指示音量調(diào)節(jié)的圖標(biāo)28e。接下來，如圖14的右上部分所示，當(dāng)用戶發(fā)出語音“音量增大……”時，顯示指示要將音量調(diào)節(jié)成增大的圖標(biāo)28e-1。另外，如圖14的右下部分所示，當(dāng)用戶發(fā)出語音“音量減小……”時，顯示指示要將音量調(diào)節(jié)成減小的圖標(biāo)28e-2。

<<5.總結(jié)>>

如上所述，在根據(jù)本公開內(nèi)容的實(shí)施方式的語音識別系統(tǒng)中，可以從語音期間通過話音UI向用戶通知響應(yīng)候選(響應(yīng)行動候選)，即，實(shí)時地順序執(zhí)行語義分析，并且可以將響應(yīng)候選反饋給用戶。

上面已經(jīng)參照附圖描述了本公開內(nèi)容的優(yōu)選實(shí)施方式，然而本公開內(nèi)容不限于上面的示例。本領(lǐng)域的技術(shù)人員可以發(fā)現(xiàn)所附權(quán)利要求范圍內(nèi)的各種變更和修改，還應(yīng)當(dāng)理解，這些變更和修改將自然地落入本公開內(nèi)容的技術(shù)范圍內(nèi)。

例如，可以提供計(jì)算機(jī)程序，該計(jì)算機(jī)程序使包括在信息處理設(shè)備1中的硬件(包括CPU、ROM、RAM等)提供信息處理設(shè)備1的功能。此外，提供了存儲計(jì)算機(jī)程序的計(jì)算機(jī)可讀存儲介質(zhì)。

此外，顯示控制單元10e可以顯示至少預(yù)定數(shù)量的響應(yīng)行動候選、得分超過預(yù)定閾值的所有響應(yīng)行動候選或者在得分超過預(yù)定閾值之前顯示至少預(yù)定數(shù)量的響應(yīng)行動候選。

此外，顯示控制單元10e可以將響應(yīng)行動候選連同其得分一起顯示。

另外，本說明書中描述的效果僅僅是說明性的或示例性效果而非限制性的。也就是說，連同上述效果一起或者代替上述效果，根據(jù)本公開內(nèi)容的技術(shù)可以基于本說明書的描述達(dá)到對本領(lǐng)域技術(shù)人員而言顯而易見的其他效果。

另外，還可以如下配置本技術(shù)。

(1)一種信息處理設(shè)備，包括：

語義分析單元，被配置成在語音期間對由語音識別單元識別的語音文本執(zhí)行語義分析；

得分計(jì)算單元，被配置成基于由所述語義分析單元所執(zhí)行的分析的結(jié)果來計(jì)算響應(yīng)候選的得分；以及

通知控制單元，被配置成執(zhí)行控制以在所述語音期間根據(jù)由所述得分計(jì)算單元所計(jì)算的得分來通知所述響應(yīng)候選。

(2)根據(jù)(1)所述的信息處理設(shè)備，

其中，所述得分計(jì)算單元根據(jù)由所述語義分析單元對所述語音順序執(zhí)行的所述語義分析來更新所述得分，以及

所述通知控制單元執(zhí)行控制以與所述得分的所述更新相關(guān)聯(lián)地更新所述響應(yīng)候選的顯示。

(3)根據(jù)(1)所述的信息處理設(shè)備，

其中，所述通知控制單元執(zhí)行控制來以與所述得分對應(yīng)的顯示形式通知多個所述響應(yīng)候選。

(4)根據(jù)(3)所述的信息處理設(shè)備，

其中，所述通知控制單元執(zhí)行控制以基于所述得分顯示預(yù)定數(shù)量的具有最高得分的所述響應(yīng)候選。

(5)根據(jù)(3)或(4)所述的信息處理設(shè)備，

其中，所述通知控制單元執(zhí)行控制以顯示得分超過預(yù)定值的所述響應(yīng)候選。

(6)根據(jù)(3)至(4)中任一項(xiàng)所述的信息處理設(shè)備，

其中，所述通知控制單元執(zhí)行控制以使用與所述得分的值對應(yīng)的顯示面積來顯示所述響應(yīng)候選。

(7)根據(jù)(3)至(5)中任一項(xiàng)所述的信息處理設(shè)備，

其中，所述通知控制單元執(zhí)行控制以顯示所述響應(yīng)候選的圖標(biāo)，每個圖標(biāo)包括關(guān)于與所述得分對應(yīng)的顯示點(diǎn)大小的信息。

(8)根據(jù)(3)至(6)中任一項(xiàng)所述的信息處理設(shè)備，

其中，所述通知控制單元執(zhí)行控制來以變灰方式顯示得分低于預(yù)定值的所述響應(yīng)候選。

(9)根據(jù)(3)至(8)中任一項(xiàng)所述的信息處理設(shè)備，

其中，所述通知控制單元執(zhí)行控制以顯示所識別的語音文本連同所述響應(yīng)候選。

(10)根據(jù)(1)至(8)中任一項(xiàng)所述的信息處理設(shè)備，

其中，所述得分計(jì)算單元另外考慮當(dāng)前用戶環(huán)境來計(jì)算所述得分。

(11)根據(jù)(1)至(10)中任一項(xiàng)所述的信息處理設(shè)備，還包括：

執(zhí)行控制單元，被配置成執(zhí)行控制以執(zhí)行最終響應(yīng)。

(12)根據(jù)(11)所述的信息處理設(shè)備，

其中，執(zhí)行控制使得執(zhí)行基于對在所述語音結(jié)束之后最終確定的語音文本的語義分析的結(jié)果而確定的最終響應(yīng)。

(13)根據(jù)(11)所述的信息處理設(shè)備，

其中，執(zhí)行控制使得執(zhí)行由用戶選擇的最終響應(yīng)。

(14)一種控制方法，包括：

在語音期間對由語音識別單元識別的語音文本執(zhí)行語義分析；

由得分計(jì)算單元基于所述語義分析的結(jié)果計(jì)算響應(yīng)候選的得分；以及

執(zhí)行控制以在所述語音期間根據(jù)所計(jì)算的得分來通知所響應(yīng)候選。

(15)一種程序，所述程序用于使計(jì)算機(jī)用作：

被配置成在語音期間對由語音識別單元識別的語音文本執(zhí)行語義分析的語義分析單元；

被配置成基于由所述語義分析單元所執(zhí)行的分析的結(jié)果來計(jì)算響應(yīng)候選的得分的得分計(jì)算單元；以及

被配置成執(zhí)行控制以在所述語音期間根據(jù)由所述得分計(jì)算單元所計(jì)算的得分通知所述響應(yīng)候選的通知控制單元。

附圖標(biāo)記列表

1 信息處理設(shè)備

10 控制單元

10a 語音識別單元

10b 語義分析單元

10c 響應(yīng)行動獲取單元

10d 得分計(jì)算單元

10e 顯示控制單元

10f 執(zhí)行單元

11 通信單元

12 麥克風(fēng)

13 揚(yáng)聲器

14 攝像機(jī)

15 距離測量傳感器

16 投影單元

17 存儲單元

18 光發(fā)射單元

20 墻