專(zhuān)利名稱(chēng):電子設(shè)備以及提供其用戶界面的方法
技術(shù)領(lǐng)域:
與示范性實(shí)施例一致的方法和設(shè)備涉及電子設(shè)備以及提供其用戶界面(UI)的方法,更具體地,涉及電子設(shè)備,該電子設(shè)備能夠識(shí)別用戶語(yǔ)音命令和用戶動(dòng)作姿勢(shì)并提供Π,該Π將可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)和該可運(yùn)行圖標(biāo)的名稱(chēng)與不可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)(和可運(yùn)行圖標(biāo)的名稱(chēng))不同地顯示,以及涉及提供其Π的方法。
背景技術(shù):
遙控器常常用作電子設(shè)備與用戶接口的方法,遙控器使用電子設(shè)備面板上提供的鍵或在遠(yuǎn)距離控制電子設(shè)備。隨著技術(shù)的發(fā)展,電子設(shè)備配備有各種功能,從而能夠運(yùn)行各種內(nèi)容(例如,運(yùn)動(dòng)圖像、照片、應(yīng)用等),或?yàn)g覽互聯(lián)網(wǎng)。然而,由于遙控器大小或功能的限制,它難以在遠(yuǎn)距離控制電子設(shè)備所有復(fù)雜和多元的功能。電子設(shè)備可以通過(guò)語(yǔ)音識(shí)別進(jìn)行控制。此外,電子設(shè)備可以通過(guò)動(dòng)作識(shí)別進(jìn)行控制。能夠識(shí)別用戶語(yǔ)音命令的 電子設(shè)備可以通過(guò)語(yǔ)音識(shí)別控制一些功能(例如,頻道控制)。此外,能夠識(shí)別用戶動(dòng)作姿勢(shì)的電子設(shè)備可以通過(guò)動(dòng)作識(shí)別控制一些功能(例如,頻道控制)。
發(fā)明內(nèi)容
一個(gè)或多個(gè)示范性實(shí)施例可以克服上述缺點(diǎn)和上面未描述的其他缺點(diǎn)。然而,應(yīng)理解,一個(gè)或多個(gè)示范性不需要克服上述缺點(diǎn),而且可以不克服上述任何問(wèn)題。一個(gè)或多個(gè)示范性實(shí)施例提供了能夠識(shí)別語(yǔ)音和動(dòng)作并且提供UI的電子設(shè)備,該Π將可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的熱點(diǎn)圖標(biāo)(hot icon)和該熱點(diǎn)圖標(biāo)的名稱(chēng)與不可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的熱點(diǎn)圖標(biāo)和該熱點(diǎn)圖標(biāo)的名稱(chēng)不同地顯示,以及提供該電子設(shè)備的UI的方法。根據(jù)示范性實(shí)施例的一個(gè)方面,提供了一種提供電子設(shè)備的UI的方法,該電子設(shè)備能夠識(shí)別語(yǔ)音和姿勢(shì),該方法包括識(shí)別語(yǔ)音啟動(dòng)命令(觸發(fā)語(yǔ)音);響應(yīng)于識(shí)別到的語(yǔ)音啟動(dòng)命令,在所述電子設(shè)備的顯示屏幕上顯示能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的命令集;識(shí)別與所述命令集的第一命令相對(duì)應(yīng)的第一命令語(yǔ)音;以及響應(yīng)于第一命令語(yǔ)音,在所述顯示屏幕上將能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的第一應(yīng)用的第一熱點(diǎn)圖標(biāo)與不能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的第二應(yīng)用的第二熱點(diǎn)圖標(biāo)不同地顯示。
第一熱點(diǎn)圖標(biāo)可以是第一應(yīng)用的原始熱點(diǎn)圖標(biāo)與在原始熱點(diǎn)圖標(biāo)的一側(cè)顯不的附加圖標(biāo)的結(jié)合。第一熱點(diǎn)圖標(biāo)的名稱(chēng)可以與第二熱點(diǎn)圖標(biāo)的名稱(chēng)不同地顯示。該方法還可以包括如果第一應(yīng)用是通過(guò)語(yǔ)音識(shí)別控制的,則與第二熱點(diǎn)圖標(biāo)不同地顯示第一熱點(diǎn)圖標(biāo)。該方法還可以包括,響應(yīng)于識(shí)別到的語(yǔ)音啟動(dòng)命令,在顯示屏幕的一側(cè)上顯示第一反饋。該方法還可以包括,識(shí)別與n上顯示的第一熱點(diǎn)圖標(biāo)的名稱(chēng)相對(duì)應(yīng)的第二命令語(yǔ)音,而且第一熱點(diǎn)圖標(biāo)的名稱(chēng)顯示在第一熱點(diǎn)圖標(biāo)的ー側(cè)上。該方法還可以包括,響應(yīng)于第二命令語(yǔ)音,在所述顯示屏幕上顯示第一應(yīng)用。接收和識(shí)別第二命令語(yǔ)音可以包括,如果多個(gè)應(yīng)用對(duì)應(yīng)第二命令語(yǔ)音,則在n的一側(cè)上顯不與多個(gè)應(yīng)用相對(duì)應(yīng)的應(yīng)用列表。能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的第三應(yīng)用的第三熱點(diǎn)圖標(biāo)可以顯示在n上,而且第三熱點(diǎn)圖標(biāo)的名稱(chēng)顯示在第三熱點(diǎn)圖標(biāo)的ー側(cè)上,而且如果第三熱點(diǎn)圖標(biāo)名稱(chēng)的長(zhǎng)度大于預(yù)定長(zhǎng)度,則可以只顯示第三熱點(diǎn)圖標(biāo)的名稱(chēng)的一部分。該方法還可以包括識(shí)別與第三熱點(diǎn)圖標(biāo)的名稱(chēng)的一部分相對(duì)應(yīng)的第三命令語(yǔ)音,而且響應(yīng)于第三命令語(yǔ)音,可以在顯示屏幕上顯示第三應(yīng)用。命令集可以包括返回命令,而且如果識(shí)別到與返回命令相對(duì)應(yīng)的第四命令語(yǔ)音,則電子設(shè)備可以響應(yīng)于第四命令語(yǔ)音而返回在顯示該n之前顯示的前ー個(gè)屏幕。該方法還可以包括,通過(guò)所述顯示屏幕或揚(yáng)聲器輸出與接收到的廣播信號(hào)相對(duì)應(yīng)的視頻、音頻和控制數(shù)據(jù)之ー。 該方法還可以包括識(shí)別動(dòng)作啟動(dòng)命令(觸發(fā)動(dòng)作);響應(yīng)于識(shí)別到的動(dòng)作啟動(dòng)命令,在所述顯示屏幕上顯示能夠通過(guò)動(dòng)作識(shí)別進(jìn)行控制的動(dòng)作集;以及將第一熱點(diǎn)圖標(biāo)與第二熱點(diǎn)圖標(biāo)以相同的方式顯示。該方法還可以包括,響應(yīng)于識(shí)別到的動(dòng)作啟動(dòng)命令,在顯示屏幕的一側(cè)上顯示第ニ反饋。根據(jù)示范性實(shí)施例的ー個(gè)方面,提供了ー種提供電子設(shè)備的UI的方法,該電子設(shè)備能夠識(shí)別語(yǔ)音和姿勢(shì),該方法包括識(shí)別語(yǔ)音啟動(dòng)命令;響應(yīng)于語(yǔ)音啟動(dòng)命令,在所述電子設(shè)備的顯示屏幕的ー側(cè)上命令集,所述命令集包括關(guān)于能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的第一應(yīng)用的第一熱點(diǎn)圖標(biāo)的命令;識(shí)別與所述命令相對(duì)應(yīng)的命令語(yǔ)音;以及響應(yīng)于所述命令語(yǔ)音,在所述顯示屏幕上將第一熱點(diǎn)圖標(biāo)與不能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的第二應(yīng)用的第ニ熱點(diǎn)圖標(biāo)不同地顯示,而且第一熱點(diǎn)圖標(biāo)是第一應(yīng)用的原始熱點(diǎn)圖標(biāo)與在所述原始熱點(diǎn)圖標(biāo)的一側(cè)顯示的附加圖標(biāo)的結(jié)合。該方法還可以包括,如果識(shí)別到動(dòng)作啟動(dòng)命令,則將第一熱點(diǎn)圖標(biāo)與第二熱點(diǎn)圖標(biāo)以相同的方式顯示。根據(jù)示范性實(shí)施例的ー個(gè)方面,提供了一種能夠識(shí)別語(yǔ)音和姿勢(shì)的電子設(shè)備,該電子設(shè)備包括顯示單元;語(yǔ)音輸入單元,其接收語(yǔ)音;以及控制器,其控制所述顯示単元和所述語(yǔ)音輸入單元,而且所述控制器識(shí)別通過(guò)所述語(yǔ)音輸入?yún)g元接收到的語(yǔ)音啟命令并在所述顯示単元上顯示能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的命令集,所述控制器識(shí)別通過(guò)所述語(yǔ)音輸入單元接收到的第一命令語(yǔ)音,并控制所述顯示單元顯示UI,所述UI包括能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的第一應(yīng)用的第一熱點(diǎn)圖標(biāo),而且所述n將第一熱點(diǎn)圖標(biāo)與不能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的第二應(yīng)用的第二熱點(diǎn)圖標(biāo)不同地顯示??刂破骺梢赃M(jìn)行控制以顯示第一熱點(diǎn)圖標(biāo),第一熱點(diǎn)圖標(biāo)是第一應(yīng)用的原始熱點(diǎn)圖標(biāo)與在該原始熱點(diǎn)圖標(biāo)的ー側(cè)上顯示的附加圖標(biāo)的結(jié)合。控制器可以識(shí)別與通過(guò)語(yǔ)音輸入單元接收到的第一熱點(diǎn)圖標(biāo)的名稱(chēng)相對(duì)應(yīng)的第ニ命令語(yǔ)音,并且響應(yīng)于識(shí)別到的第二命令語(yǔ)音而控制顯示單元顯示第一應(yīng)用。電子設(shè)備還可以包括接收用戶動(dòng)作的動(dòng)作輸入?yún)g元,而且控制器還可以控制動(dòng)作輸入單元并且識(shí)別通過(guò)動(dòng)作輸入單元接收到的動(dòng)作啟動(dòng)命令并在所述顯示單元上顯示能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的動(dòng)作集,而且該n可以以相同方式顯示第一熱點(diǎn)圖標(biāo)和第二熱點(diǎn)圖標(biāo)。電子設(shè)備還可以包括能夠以有線或無(wú)線方式連接到外部設(shè)備的網(wǎng)絡(luò)接ロ単元,而且控制器可以控制網(wǎng)絡(luò)接ロ單元從外部設(shè)備下載能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的第三應(yīng)用。根據(jù)示范性實(shí)施例的ー個(gè)方面,提供了ー種提供電子設(shè)備的n的方法,該方法包括進(jìn)入語(yǔ)音識(shí)別模式,并在語(yǔ)音識(shí)別模式中將與可通過(guò)語(yǔ)音識(shí)別控制的第一應(yīng)用相對(duì)應(yīng)的第一熱點(diǎn)圖標(biāo)與不可通過(guò)語(yǔ)音識(shí)別控制的第二應(yīng)用的第二熱點(diǎn)圖標(biāo)不同地顯示。
通過(guò)參照附圖詳細(xì)描述示范性實(shí)施例,上述和/或其他方面將更加清楚,附圖中圖1至圖3是根據(jù)各種示范性實(shí)施例的、解釋根據(jù)電子設(shè)備的配置的框圖;圖4和圖5是示出 對(duì)應(yīng)于語(yǔ)音任務(wù)和動(dòng)作任務(wù)的遙控器的按鈕的視圖;圖6至圖32是解釋用于執(zhí)行語(yǔ)音任務(wù)的方法的各種示例的視圖;圖33至圖58是解釋用于執(zhí)行動(dòng)作任務(wù)的方法的各種示例的視圖;圖59和圖60是根據(jù)各種示范性實(shí)施例的、解釋電子設(shè)備的控制方法的流程圖,該電子設(shè)備通過(guò)將任務(wù)劃分為動(dòng)作任務(wù)和語(yǔ)音任務(wù)來(lái)控制任務(wù);圖61和圖62是示出根據(jù)示范性實(shí)施例的、關(guān)于電子設(shè)備的語(yǔ)音任務(wù)的語(yǔ)音n的視圖;圖63是示出根據(jù)示范性實(shí)施例的、關(guān)于電子設(shè)備的動(dòng)作任務(wù)的動(dòng)作UI的視圖;圖64至圖66是示出根據(jù)示范性實(shí)施例的、語(yǔ)音識(shí)別或動(dòng)作識(shí)別的視覺(jué)反饋的視圖;圖67至圖69是根據(jù)各種示范性實(shí)施例的、解釋電子設(shè)備的控制方法的流程圖,該電子設(shè)備提供語(yǔ)音UI和動(dòng)作UI ;圖70至圖78是根據(jù)各種示范性實(shí)施例的、解釋顯示用于解釋語(yǔ)音應(yīng)用的可運(yùn)行圖標(biāo)的、電子設(shè)備的n的方法的視圖;圖79是示出根據(jù)示范性實(shí)施例的、解釋顯示電子設(shè)備的UI的方法的流程圖;圖80至圖91是示出根據(jù)各種示范性實(shí)施例的、按照沿著向上、向下、向左和向右方向的用戶動(dòng)作而改變的屏幕的視圖;圖92和圖93是示出根據(jù)各種示范性實(shí)施例的、解釋其屏幕按照用戶動(dòng)作改變的電子設(shè)備的控制方法的流程圖94至圖97是根據(jù)各種示范性實(shí)施例的、解釋用于執(zhí)行遙控模式、動(dòng)作任務(wù)模式和語(yǔ)音任務(wù)模式的方法的視圖和流程圖;圖98是根據(jù)示范性實(shí)施例的、解釋使用移動(dòng)設(shè)備進(jìn)行語(yǔ)音識(shí)別的流程圖;圖99至圖104是根據(jù)示范性實(shí)施例的、解釋指向模式的視圖和流程圖;圖105至圖108是根據(jù)示范性實(shí)施例的、解釋在指向模式中輸入動(dòng)作的情況下的顯示方法的視圖和流程圖;圖109至圖111是根據(jù)示范性實(shí)施例的、解釋用于在語(yǔ)音任務(wù)模式中顯示項(xiàng)目的方法的視圖和流程圖;圖112至圖115是根據(jù)示范性實(shí)施例的、解釋具有彼此不同的色度的n的視圖和流程圖;圖116至圖118是根據(jù)示范性實(shí)施例的、解釋執(zhí)行與除了顯示語(yǔ)音項(xiàng)目以外的命令相對(duì)應(yīng)的任務(wù)的視圖和流程圖;圖119至圖121是根據(jù)示范性實(shí)施例的、解釋使用雙手將當(dāng)前模式改變?yōu)閯?dòng)作任務(wù)模式的動(dòng)作啟動(dòng)命令的視圖和流程圖;圖122是根據(jù)示范性實(shí)施例的、解釋在多個(gè)用戶輸入動(dòng)作啟動(dòng)命令的情況下執(zhí)行動(dòng)作任務(wù)模式的方法的流程圖;圖123至圖126是根據(jù)示范性實(shí)施例的、解釋使用語(yǔ)音識(shí)別分階段執(zhí)行任務(wù)的方法的視圖和流程圖;圖127至圖129是根據(jù)示范性實(shí)施例的、解釋其名稱(chēng)被部分顯示的可運(yùn)行圖標(biāo)的運(yùn)行的視圖和流程圖;圖130至圖134是根據(jù)示范性實(shí)施例的、解釋按照特殊姿勢(shì)執(zhí)行任務(wù)的視圖和流程圖;圖135至圖137是根據(jù)示范性實(shí)施例的、解釋根據(jù)語(yǔ)音輸入方法而不同地顯示的圖標(biāo)的視圖和流程圖;圖138至圖142是根據(jù)示范性實(shí)施例的、解釋顯示文本輸入菜單的方法的視圖和流程圖;圖143是根據(jù)示范性實(shí)施例的、解釋使用外部設(shè)備來(lái)執(zhí)行語(yǔ)音任務(wù)的方法的流程圖;圖144至圖146是根據(jù)示范性實(shí)施例的、解釋在顯示屏幕上顯示可說(shuō)出的命令的情況下執(zhí)行語(yǔ)音任務(wù)的方法的視圖和流程圖;圖147是根據(jù)示范性實(shí)施例的、解釋自動(dòng)識(shí)別語(yǔ)音的方法的流程圖;圖148是根據(jù)示范性實(shí)施例的、解釋顯示候選列表的方法的流程圖;以及圖149是根據(jù)示范性實(shí)施例的、解釋指導(dǎo)語(yǔ)音識(shí)別錯(cuò)誤的UI的流程圖。
具體實(shí)施例方式下文中,將參照附圖更加詳細(xì)地描述示范性實(shí)施例。在以下描述中,當(dāng)相同的參考標(biāo)記和相同的元素在不同的附圖中繪出時(shí),相同的參考標(biāo)記用于相同的元素。說(shuō)明書(shū)中定義的內(nèi)容,諸如詳細(xì)的結(jié)構(gòu)和元素,被提供以幫助理解示范性實(shí)施例。因此,明顯的是,示范性實(shí)施例能夠在沒(méi)有這些具體定義的內(nèi)容的情況下執(zhí)行。另外,由于相關(guān)技術(shù)中已知的功能或元件將由于不必要的細(xì)節(jié)而模糊示范性實(shí)施例,因此將不對(duì)其進(jìn)行詳細(xì)描述。圖1是示出根據(jù)示范性實(shí)施例的電子設(shè)備100的示意性框圖。參照?qǐng)D1,電子設(shè)備100包括語(yǔ)音輸入單元110、動(dòng)作輸入單元120、存儲(chǔ)單元130和控制單元140。電子設(shè)備100可以由智能電視(TV)、機(jī)頂盒、個(gè)人計(jì)算機(jī)(PC)或數(shù)字電視實(shí)現(xiàn),但不限于智能電視(TV)、機(jī)頂盒、個(gè)人計(jì)算機(jī)(PC)或數(shù)字電視,其能夠連接到外部網(wǎng)絡(luò)。語(yǔ)音輸入單元110接收由用戶發(fā)出(utter)的語(yǔ)音輸入。語(yǔ)音輸入單元110將輸入的語(yǔ)音信號(hào)轉(zhuǎn)換成電信號(hào),并且將電信號(hào)輸出到控制單元140。例如,語(yǔ)音輸入?yún)g元110可以由麥克風(fēng)實(shí)現(xiàn)。此外,語(yǔ)音輸入?yún)g元110可以由電子設(shè)備100中的內(nèi)部組件或外部設(shè)備實(shí)現(xiàn)。外部設(shè)備語(yǔ)音輸入單元110可以通過(guò)有線或無(wú)線連接或通過(guò)網(wǎng)絡(luò)連接到電子設(shè)備100。動(dòng)作(motion)輸入單元120接收通過(guò)拍攝用戶動(dòng)作獲得的圖像信號(hào)(例如,連續(xù)幀),并將圖像信號(hào)提供給控制単元140。例如,動(dòng)作輸入?yún)g元120可以由包括鏡頭和圖像傳感器的単元實(shí)現(xiàn)。動(dòng)作輸入?yún)g元120可以由電子設(shè)備100中的內(nèi)部組件或外部設(shè)備實(shí)現(xiàn)。外部設(shè)備動(dòng)作輸入單元120可以通過(guò)有線或無(wú)線連接,或通過(guò)網(wǎng)絡(luò)連接到電子設(shè)備100。存儲(chǔ)單元130存儲(chǔ)用于驅(qū)動(dòng)和控制電子設(shè)備100的各種數(shù)據(jù)和程序。存儲(chǔ)單元130存儲(chǔ)語(yǔ)音識(shí)別模塊和動(dòng)作識(shí)別模塊,語(yǔ)音識(shí)別模塊識(shí)別通過(guò)語(yǔ)音輸入單元110輸入的語(yǔ)音,動(dòng)作識(shí)別模塊識(shí)別通過(guò)動(dòng)作輸入單元120輸入的動(dòng)作。存儲(chǔ)單元130可以包括語(yǔ)音數(shù)據(jù)庫(kù)和動(dòng)作數(shù)據(jù)庫(kù)。語(yǔ)音數(shù)據(jù)庫(kù)是指預(yù)定的語(yǔ)音以及與預(yù)定的語(yǔ)音匹配的語(yǔ)音任務(wù)(voice task)記錄在其上的數(shù)據(jù)庫(kù)。動(dòng)作數(shù)據(jù)庫(kù)是指預(yù)定的動(dòng)作以及與預(yù)定的動(dòng)作匹配的動(dòng)作任務(wù)(motion task)記錄在其上的數(shù)據(jù)庫(kù)??刂茊卧?40控制語(yǔ)音輸入單元110、動(dòng)作輸入單元120和存儲(chǔ)單元130。控制單元140可以包括諸如中央處理單元(CPU)的硬件處理器、以及存儲(chǔ)用于控制電子設(shè)備100的模塊和數(shù)據(jù)的只讀存儲(chǔ)器(ROM)和隨機(jī)存取存儲(chǔ)器(RAM)。如果語(yǔ)音通過(guò)語(yǔ)音輸入單元110輸入,則控制単元140使用語(yǔ)音識(shí)別模塊和語(yǔ)音數(shù)據(jù)庫(kù)來(lái)識(shí)別語(yǔ)音。語(yǔ)音識(shí)別可以被劃分為孤立詞識(shí)別(isolated word recognition)、連續(xù)語(yǔ)音識(shí)別(continuous speech recognition)和關(guān)鍵詞檢出(keyword spotting),孤立詞識(shí)別通過(guò)根據(jù)輸入的語(yǔ)音的形式而區(qū)分詞來(lái)識(shí)別發(fā)出的語(yǔ)音,連續(xù)語(yǔ)音識(shí)別識(shí)別連續(xù)的詞、連續(xù)的句子,以及對(duì)話語(yǔ)音(dialogic voice),關(guān)鍵詞檢出是介于孤立詞識(shí)別和連續(xù)語(yǔ)音識(shí)別之間的中間類(lèi)型并且通過(guò)檢測(cè)預(yù)定義的關(guān)鍵詞來(lái)識(shí)別語(yǔ)音。如果輸入了用戶語(yǔ)音,則控制単元140通過(guò)從輸入的語(yǔ)音信號(hào)中檢測(cè)出用戶發(fā)出的語(yǔ)音的開(kāi)始和結(jié)束來(lái)確定語(yǔ)音段(voice section)??刂茊卧?40計(jì)算輸入的語(yǔ)音信號(hào)的能量、按照計(jì)算出的能量對(duì)語(yǔ)音信號(hào)的能量水平進(jìn)行分類(lèi)、并通過(guò)動(dòng)態(tài)編程來(lái)檢測(cè)語(yǔ)音段??刂茊卧?40通過(guò)檢測(cè)來(lái)自檢測(cè)到的語(yǔ)音段內(nèi)的語(yǔ)音信號(hào)的音素(phoneme)(這是最小的語(yǔ)音單位)、基于聲學(xué)模型來(lái)生成音素?cái)?shù)據(jù)??刂茊卧?40通過(guò)將隱馬爾可夫模型(HMM)應(yīng)用到已生成的音素?cái)?shù)據(jù)來(lái)生成文本信息。然而,上述語(yǔ)音識(shí)別方法僅僅是示例,而且可以使用其他語(yǔ)音識(shí)別方法。在上述方法中,控制單元140識(shí)別包括在語(yǔ)音信號(hào)中的用戶語(yǔ)音。如果通過(guò)動(dòng)作輸入?yún)g元120輸入了動(dòng)作,則控制単元140使用動(dòng)作識(shí)別模塊和動(dòng)作數(shù)據(jù)庫(kù)來(lái)識(shí)別動(dòng)作。動(dòng)作識(shí)別將與通過(guò)動(dòng)作輸入單元120輸入的用戶動(dòng)作相對(duì)應(yīng)的圖像(例如,連續(xù)幀)劃分為背景和手區(qū)域(例如,張開(kāi)手指或曲手握拳),并識(shí)別連續(xù)的手部動(dòng)作。如果輸入了用戶動(dòng)作,則控制単元140以幀為基礎(chǔ)存儲(chǔ)接收到的圖像,并且使用已存儲(chǔ)的幀來(lái)感測(cè)用戶動(dòng)作的對(duì)象(例如,用戶的手)??刂茊卧?40通過(guò)感測(cè)幀中所包括的對(duì)象的形狀、顏色和動(dòng)作中的至少ー個(gè)來(lái)檢測(cè)對(duì)象??刂茊卧?40可以使用多個(gè)幀中所包括的對(duì)象的位置來(lái)追蹤對(duì)象的動(dòng)作??刂茊卧?40按照所追蹤的對(duì)象的形狀和動(dòng)作來(lái)確定該動(dòng)作。例如,控制單元140使用對(duì)象的形狀、速度、位置和方向的變化中的至少ー個(gè)來(lái)確定用戶動(dòng)作。用戶動(dòng)作包括握一只手的抓動(dòng)作(grab motion)、利用一只手移動(dòng)顯示的光標(biāo)的指向移動(dòng)動(dòng)作(pointing move motion)、在ー個(gè)方向上以預(yù)定的速度或更快的速度移動(dòng)ー只手的拍動(dòng)作(slap motion)、水平或垂直搖動(dòng)ー只手的搖動(dòng)動(dòng)作(shake motion)、以及旋轉(zhuǎn)ー只手的旋轉(zhuǎn)動(dòng)作。本公開(kāi)的技術(shù)想法可以應(yīng)用于其他動(dòng)作。例如,用戶動(dòng)作還可以包括張開(kāi)ー只手的張開(kāi)動(dòng)作(spread motion)??刂茊卧?40確定對(duì)象是否在預(yù)定時(shí)間(例如,800毫秒)內(nèi)離開(kāi)預(yù)定區(qū)域(例如,40厘米X40厘米的正方形),以便確定用戶動(dòng)作是指向(pointing)移動(dòng)動(dòng)作還是拍動(dòng)作。如果對(duì)象在預(yù)定時(shí)間內(nèi)沒(méi)有離開(kāi)預(yù)定區(qū)域,則控制単元140可以確定該用戶動(dòng)作是指向移動(dòng)動(dòng)作。如果對(duì)象在預(yù)定時(shí)間內(nèi)離開(kāi)預(yù)定區(qū)域,則控制單元140可以確定該用戶動(dòng)作是拍動(dòng)作。另ー個(gè)示例是,如果對(duì)象的速度低于預(yù)定速度(例如,30厘米/秒),則控制単元140可以確定該用戶動(dòng)作是指向移動(dòng)動(dòng)作。如果對(duì)象的速度超過(guò)預(yù)定速度,則控制単元140確定該用戶動(dòng)作是拍動(dòng)作。如上所述,控制単元140使用識(shí)別出的語(yǔ)音和動(dòng)作來(lái)執(zhí)行電子設(shè)備100的任務(wù)。電子設(shè)備的任務(wù)包括由電子設(shè)備100執(zhí)行的至少ー個(gè)功能,諸如頻道切換、音量控制、內(nèi)容回放(例如,運(yùn)動(dòng)圖像、音樂(lè)或照片)、或互聯(lián)網(wǎng)瀏覽。下面將解釋通過(guò)控制單元140控制電子設(shè)備100的具體方法。圖2是不出根據(jù)不范性實(shí)施例的電子設(shè)備100的框圖。參照?qǐng)D2,電子設(shè)備100包括語(yǔ)音輸入單元110、動(dòng)作輸入單元120、存儲(chǔ)單元130和控制單元140、廣播接收單元150、外部端子輸入單元160、遙控信號(hào)接收單元170、網(wǎng)絡(luò)接ロ單元180和圖像輸出單元190。如圖2所示,電子設(shè)備100可以由機(jī)頂盒、個(gè)人計(jì)算機(jī)等實(shí)現(xiàn)。圖2的語(yǔ)音輸入單元110、動(dòng)作輸入單元120、存儲(chǔ)單元130和控制單元140與圖1的語(yǔ)音輸入單元110、動(dòng)作輸入單元120、存儲(chǔ)單元130和控制單元140相同,因此省略其詳細(xì)描述。廣播接收單元150以有線或無(wú)線方式從外部源接收廣播信號(hào)。廣播信號(hào)包括視頻、音頻和附加數(shù)據(jù)(例如,電子節(jié)目指南(EPG))。廣播接收單元150可以從諸如地面波廣播、有線廣播、衛(wèi)星廣播、互聯(lián)網(wǎng)廣播等的各種源接收廣播信號(hào)。外部端子輸入單元160從外部源接收視頻數(shù)據(jù)(例如,運(yùn)動(dòng)圖像或照片)和音頻數(shù)據(jù)(例如,音樂(lè))。外部端子輸入單元160可以包括高清晰度多媒體接ロ(HDMI)輸入端子、分量輸入端子、PC輸入端子、USB輸入端子等中的至少ー個(gè)。遙控信號(hào)接收單元170從外部遙控器接收控制信號(hào)。遙控信號(hào)接收單元170可以以電子設(shè)備100的語(yǔ)音任務(wù)模式或動(dòng)作任務(wù)模式接收遙控信號(hào)。網(wǎng)絡(luò)接ロ單元180可以在控制單元140的控制下將電子設(shè)備100連接到外部設(shè)備(例如,服務(wù)器)。控制單元140可以從通過(guò)網(wǎng)絡(luò)接ロ単元180連接的外部設(shè)備下載應(yīng)用,或者可以執(zhí)行網(wǎng)頁(yè)(web)瀏覽。網(wǎng)絡(luò)接ロ単元180可以提供以太網(wǎng)、無(wú)線局域網(wǎng)182、藍(lán)牙等中的至少ー個(gè)。圖像輸出単元190向外部顯示設(shè)備(例如,監(jiān)視器或TV)輸出通過(guò)廣播接收單元150接收到的外部廣播信號(hào)、從外部端子輸入單元160輸入的視頻數(shù)據(jù)、或存儲(chǔ)在存儲(chǔ)單元130中的視頻數(shù)據(jù)。圖像輸出単元190可以包括輸出端子,諸如HDM1、分量、復(fù)合、視頻圖形陣列(VGA)、數(shù)字視頻接ロ(DVI)、S-視頻等。圖3是不出根據(jù)又一不范性實(shí)施例的電子設(shè)備100的框圖。如圖3所不,電子設(shè)備100包括語(yǔ)音輸入單元110、動(dòng)作輸入單元120、存儲(chǔ)單元130和控制單元140、廣播接收單元150、外部端子輸入單元160、遙控信號(hào)接收單元170、網(wǎng)絡(luò)接ロ單元180、顯示單元193和音頻輸出単元196。電子設(shè)備100可以是,但不限于,數(shù)字TV。圖3的語(yǔ)音輸入單元110、動(dòng)作輸入單元120、存儲(chǔ)單元130和控制單元140、廣播接收單元150、外部端子輸入單元160、遙控信號(hào)接收單元170和網(wǎng)絡(luò)接ロ單元180與圖1和圖2中具有相同參考標(biāo)記的那些單元相同,因此省略其詳細(xì)描述。顯示單元193顯示與通過(guò)廣播接收單元150接收到的廣播信號(hào)相對(duì)應(yīng)的圖像。顯示単元193可以顯示通過(guò)外部端子輸入單元160輸入的圖像數(shù)據(jù)(例如,運(yùn)動(dòng)圖像)或存儲(chǔ)在存儲(chǔ)單元中的視頻。顯示單元193可以在控制単元140的控制下顯示用于執(zhí)行語(yǔ)音任務(wù)的語(yǔ)音輔助(assistance)信息和用于執(zhí)行動(dòng)作任務(wù)的動(dòng)作輔助信息。音頻輸出單元196在控制單元140的控制下輸出與廣播信號(hào)相對(duì)應(yīng)的音頻。音頻輸出單元196可以包括揚(yáng)聲器196a、耳機(jī)輸出端子196b和S/TOIF輸出端子163c中的至少ー個(gè)。存儲(chǔ)單元130包括電源控制模塊130a、頻道控制模塊130b、音量控制模塊130c、外部輸入控制模塊130d、屏幕控制模塊130e、音頻控制模塊130f、互聯(lián)網(wǎng)控制模塊130g、應(yīng)用模塊130h、搜索控制模塊1301、用戶接ロ(UI)處理模塊130j、語(yǔ)音識(shí)別模塊130k、動(dòng)作識(shí)別模塊1301、語(yǔ)音數(shù)據(jù)庫(kù)130m和動(dòng)作數(shù)據(jù)庫(kù)130n。這些模塊130a至130n可以通過(guò)軟件實(shí)現(xiàn),以便執(zhí)行電源控制功能、頻道控制功能、音量控制功能、外部輸入控制功能、屏幕控制功能、音頻控制功能、互聯(lián)網(wǎng)控制功能、應(yīng)用運(yùn)行功能、搜索控制功能和UI處理功能。控制單元140通過(guò)運(yùn)行存儲(chǔ)在存儲(chǔ)單元130中的軟件執(zhí)行相應(yīng)功能。以下將參照附圖解釋各種示范性實(shí)施例。如果通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到用戶語(yǔ)音,則控制単元140執(zhí)行可由遙控器控制的任務(wù)當(dāng)中與識(shí)別到的用戶語(yǔ)音相對(duì)應(yīng)的語(yǔ)音任務(wù)。如果通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到用戶動(dòng)作,則控制単元140執(zhí)行可由遙控器控制的任務(wù)當(dāng)中與識(shí)別到的用戶動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)。語(yǔ)音任務(wù)和動(dòng)作任務(wù)可以通過(guò)利用遙控器上的按鈕進(jìn)行分類(lèi)來(lái)被映射。語(yǔ)音任務(wù)是指可按照通過(guò)語(yǔ)音識(shí)別模塊識(shí)別到的語(yǔ)音進(jìn)行控制的任務(wù)。例如,語(yǔ)音任務(wù)可以包括關(guān)閉電子設(shè)備100、頻道快捷切換(channel shortcut)、靜音、改變外部端子、設(shè)置音量等級(jí)、輸入文本以及重現(xiàn)/停止圖像的功能中的至少ー個(gè)。也就是說(shuō),具有能夠由用戶語(yǔ)音發(fā)出的名稱(chēng)或標(biāo)識(shí)符的各種任務(wù)或者需要輸入文本的任務(wù)可以被設(shè)置為語(yǔ)音任務(wù)。動(dòng)作任務(wù)是指可按照通過(guò)動(dòng)作識(shí)別模塊識(shí)別到的動(dòng)作進(jìn)行控制的任務(wù)。例如,動(dòng)作任務(wù)可以包括頻道改變、音量等級(jí)控制、屏幕導(dǎo)航、滑動(dòng)條控制和光標(biāo)指向(cursorpointing)。也就是說(shuō),能夠在各階段按照用戶動(dòng)作的類(lèi)型和方向進(jìn)行控制的各種任務(wù)以及使用光標(biāo)的任務(wù)可以被設(shè)置為動(dòng)作任務(wù)。如果通過(guò)語(yǔ)音識(shí)別模塊識(shí)別到用戶語(yǔ)音,則控制単元140執(zhí)行直接對(duì)應(yīng)于用戶語(yǔ)音中所包括的言語(yǔ)(utterance)的語(yǔ)音任務(wù)。例如,控制單元140從用戶發(fā)出的語(yǔ)音中識(shí)別頻道標(biāo)識(shí)符。頻道標(biāo)識(shí)符用于識(shí)別頻道,并且可以包括頻道名稱(chēng)、頻道號(hào)碼和節(jié)目名稱(chēng)中的至少ー個(gè)。如果頻道標(biāo)識(shí)符如上所述被存儲(chǔ)在存儲(chǔ)單元130中的語(yǔ)音數(shù)據(jù)庫(kù)中,則控制單元140使用語(yǔ)音數(shù)據(jù)庫(kù)執(zhí)行到與識(shí)別到的頻道標(biāo)識(shí)符相對(duì)應(yīng)的頻道的快捷切換。也就是說(shuō),如果用戶說(shuō)“ 11 ”,則控制単元140確認(rèn)與“11”相對(duì)應(yīng)的語(yǔ)音任務(wù)是否記錄在語(yǔ)音數(shù)據(jù)庫(kù)中。如果與“ 11”相對(duì)應(yīng)的語(yǔ)音任務(wù)是選擇頻道11的頻道快捷切換功能,則控制単元140執(zhí)行到頻道11的快捷切換。如果通過(guò)動(dòng)作識(shí)別模塊識(shí)別到用戶動(dòng)作,則控制単元140按照用戶動(dòng)作的方向執(zhí)行與用戶動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)。例如,如果通過(guò)動(dòng)作識(shí)別模塊識(shí)別到向上方向的拍動(dòng)作,則控制單元140可以從動(dòng)作數(shù)據(jù)庫(kù)中確認(rèn)與向上方向的拍動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù),并且可以執(zhí)行頻道改變以便將當(dāng)前頻道改變?yōu)轭l道號(hào)碼增加預(yù)定數(shù)量(例如,I)的頻道。如果通過(guò)動(dòng)作識(shí)別模塊識(shí)別到向下方向的拍動(dòng)作,則控制單元140可以從動(dòng)作數(shù)據(jù)庫(kù)中確認(rèn)與向下方向的拍動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù),并且可以執(zhí)行頻道改變以便將當(dāng)前頻道改變?yōu)轭l道號(hào)碼減少預(yù)定數(shù)量(例如,I)的頻道。語(yǔ)音任務(wù)和動(dòng)作任務(wù)可以通過(guò)利用圖4和圖5中所示的遙控器上的按鈕進(jìn)行分類(lèi)來(lái)被映射。圖4示出了與執(zhí)行至少ー個(gè)語(yǔ)音任務(wù)的命令相對(duì)應(yīng)的遙控器上的按鈕。也就是說(shuō),在語(yǔ)音輸入被識(shí)別出的情況下執(zhí)行的任務(wù)可以對(duì)應(yīng)于通過(guò)遙控器上的按鈕之一執(zhí)行的任務(wù)。例如,由遙控器上的電源按鈕401執(zhí)行的任務(wù)對(duì)應(yīng)于在語(yǔ)音“呼叫詞(call word)”(例如,“Ginny”)或“電源”被識(shí)別出的情況下執(zhí)行的任務(wù)。因此,外部輸入按鈕402對(duì)應(yīng)于語(yǔ)音“外部輸入”。此外,數(shù)字按鈕403對(duì)應(yīng)于所說(shuō)出的號(hào)碼。此外,上一個(gè)頻道(previouschannel)按鈕404對(duì)應(yīng)于語(yǔ)音“上ー個(gè)頻道”。靜音按鈕405對(duì)應(yīng)于語(yǔ)音“靜音”或“取消靜音”。另外,頻道列表按鈕406對(duì)應(yīng)于語(yǔ)音“頻道列表”。智能中心(smart hub)/菜單/捜索/快速菜單/信息顯示按鈕407、返回按鈕408、退出按鈕409、社交網(wǎng)絡(luò)/3D圖像提供按鈕410、幫助按鈕411以及回放/暫停/停止/錄制按鈕412對(duì)應(yīng)于與它們各自名稱(chēng)相對(duì)應(yīng)的語(yǔ)音。圖5示出了與執(zhí)行至少ー個(gè)動(dòng)作任務(wù)的動(dòng)作相對(duì)應(yīng)的遙控器上的按鈕。也就是說(shuō),在動(dòng)作輸入被識(shí)別到的情況下執(zhí)行的任務(wù)可以對(duì)應(yīng)于按照遙控器上的按鈕之一執(zhí)行的任務(wù)。例如,如圖5所示,按照音量向上/向下按鈕和頻道向上/向下按鈕421執(zhí)行的任務(wù)對(duì)應(yīng)于向上、向下、向右和向左方向上的拍動(dòng)作被識(shí)別到的情況下執(zhí)行的任務(wù)。因此,向上、向下、向左和向右方向按鈕422對(duì)應(yīng)于向上、向下、向左和向右方向的拍動(dòng)作。選擇按鈕423可以對(duì)應(yīng)于抓動(dòng)作。如果屏上顯示(on screen display, OSD)包括鍵指導(dǎo)(key guide),貝丨J功能按鈕425可以對(duì)應(yīng)于相應(yīng)鍵的指向動(dòng)作(pointing motion)。語(yǔ)音任務(wù)和動(dòng)作任務(wù)可以在不相互結(jié)合的情況下獨(dú)立改變電子設(shè)備100的設(shè)置。也就是說(shuō),語(yǔ)音任務(wù)可以使用由語(yǔ)音識(shí)別模塊130k識(shí)別到的用戶語(yǔ)音來(lái)改變電子設(shè)備100的設(shè)置,而且動(dòng)作任務(wù)可以使用由動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作來(lái)改變電子設(shè)備100的設(shè)置??刂茊卧?40通過(guò)語(yǔ)音識(shí)別模塊130k和動(dòng)作識(shí)別模塊1301之一來(lái)識(shí)別用戶語(yǔ)音和用戶動(dòng)作之一。如果通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到用戶語(yǔ)音,則控制単元140分別運(yùn)行具有內(nèi)容標(biāo)識(shí)符的多個(gè)內(nèi)容當(dāng)中的、具有與識(shí)別到的用戶語(yǔ)音相對(duì)應(yīng)的內(nèi)容標(biāo)識(shí)符的內(nèi)容。如果通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到用戶動(dòng)作,則控制単元140按照用戶動(dòng)作的方向改變多個(gè)內(nèi)容。這里所記載的內(nèi)容可以是廣播內(nèi)容。具體地,如果通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到用戶語(yǔ)音,則控制単元140分別將當(dāng)前廣播頻道改變?yōu)榫哂袕V播頻道標(biāo)識(shí)符的多個(gè)廣播頻道當(dāng)中的、具有與識(shí)別到的用戶語(yǔ)音相對(duì)應(yīng)的廣播頻道標(biāo)識(shí)符的廣播頻道。頻道標(biāo)識(shí)符可以包括頻道號(hào)碼、頻道名稱(chēng)和節(jié)目名稱(chēng)中的至少ー個(gè)。如果通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到用戶動(dòng)作,則控制単元140按照用戶動(dòng)作的方向分階段地(in phase)改變多個(gè)廣播頻道。用戶動(dòng)作可以包括拍動(dòng)作。例如,如果識(shí)別到的用戶動(dòng)作是向上方向上的拍動(dòng)作,則控制単元140執(zhí)行頻道改變,從而將當(dāng)前廣播頻道改變?yōu)轭l道號(hào)碼增加預(yù)定數(shù)量的廣播頻道。如果識(shí)別到的用戶動(dòng)作是向下方向上的拍動(dòng)作,則控制単元140執(zhí)行頻道改變,從而將當(dāng)前廣播頻道改變?yōu)轭l道號(hào)碼減少預(yù)定數(shù)量的廣播頻道。內(nèi)容可以是圖像內(nèi)容、音樂(lè)內(nèi)容和照片內(nèi)容之一。如果內(nèi)容是圖像內(nèi)容、音樂(lè)內(nèi)容和照片內(nèi)容之一,則內(nèi)容標(biāo)識(shí)符可以是內(nèi)容的名稱(chēng)。如果內(nèi)容是圖像內(nèi)容、音樂(lè)內(nèi)容和照片內(nèi)容之一,則用戶動(dòng)作可以包括拍動(dòng)作。例如,如果識(shí)別到的用戶動(dòng)作是向右方向上的拍動(dòng)作,則控制單元140可以將當(dāng)前內(nèi)容改變?yōu)榘ǘ鄠€(gè)將被重現(xiàn)的內(nèi)容的內(nèi)容列表上的下ー個(gè)內(nèi)容,而且如果識(shí)別到的用戶動(dòng)作是向左方向上的拍動(dòng)作,則控制單元140可以將當(dāng)前內(nèi)容改變?yōu)閮?nèi)容列表上的前ー個(gè)內(nèi)容。如果通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到語(yǔ)音啟動(dòng)命令,則控制単元140將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,在該語(yǔ)音任務(wù)模式中,按照通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到的用戶語(yǔ)音來(lái)控制電子設(shè)備100。如果通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到動(dòng)作啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在該動(dòng)作任務(wù)模式中,按照通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作來(lái)控制電子設(shè)備100。具體來(lái)說(shuō),控制単元140可以以遙控模式、語(yǔ)音任務(wù)模式和動(dòng)作任務(wù)模式之一操作,在遙控模式中電子設(shè)備100由遙控設(shè)備(例如,遙控器)控制,在語(yǔ)音任務(wù)模式中電子設(shè)備100根據(jù)語(yǔ)音來(lái)控制,在動(dòng)作任務(wù)模式中電子設(shè)備100根據(jù)動(dòng)作來(lái)控制。如果輸入啟動(dòng)另ー種模式的命令,則控制単元140可以將當(dāng)前模式改變?yōu)橄鄳?yīng)模式。如果在電子設(shè)備100處于遙控模式或動(dòng)作任務(wù)模式時(shí)通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到語(yǔ)音啟動(dòng)命令(觸發(fā)語(yǔ)音),則控制単元140將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式。語(yǔ)音啟動(dòng)命令是包括與進(jìn)入語(yǔ)音任務(wù)模式的操作相匹配的詞的命令。例如,如果詞“Ginny”被設(shè)置為語(yǔ)音啟動(dòng)命令,則當(dāng)識(shí)別到詞“Ginny”吋,控制單元140將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式。關(guān)于語(yǔ)音啟動(dòng)命令的詞可以在電子設(shè)備100的配置模式中由用戶直接改變,或者可以是在制造電子設(shè)備100時(shí)默認(rèn)定義的固定命令。
在語(yǔ)音任務(wù)模式中,控制單元140使用語(yǔ)音數(shù)據(jù)庫(kù)來(lái)執(zhí)行與用戶發(fā)出的語(yǔ)音中所包括的詞相對(duì)應(yīng)的語(yǔ)音任務(wù)??刂茊卧?40可以保持語(yǔ)音任務(wù)模式直至識(shí)別到返回遙控模式的啟動(dòng)命令、模式取消命令、或者改變?yōu)閯?dòng)作任務(wù)模式的動(dòng)作啟動(dòng)命令。如果在模式已經(jīng)改變?yōu)檎Z(yǔ)音任務(wù)模式之后的預(yù)定時(shí)間(例如5分鐘)內(nèi)沒(méi)有識(shí)別到語(yǔ)音,則控制単元140可以自動(dòng)返回到遙控模式。如果在處于遙控模式或語(yǔ)音任務(wù)模式時(shí)通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到動(dòng)作啟動(dòng)命令(觸發(fā)動(dòng)作),則控制単元140將當(dāng)前模式改變?yōu)閯?dòng)作任務(wù)模式。動(dòng)作啟動(dòng)命令是進(jìn)入動(dòng)作任務(wù)模式的預(yù)先設(shè)定的動(dòng)作。例如,如果水平地?fù)u動(dòng)(shake) —只手3至4次的動(dòng)作被設(shè)置為動(dòng)作啟動(dòng)命令,則當(dāng)識(shí)別到這種動(dòng)作時(shí)控制單元140將模式改變?yōu)閯?dòng)作任務(wù)模式。關(guān)于動(dòng)作啟動(dòng)命令的動(dòng)作可以在電子設(shè)備100的配置模式中由用戶直接改變,或者可以是在制造電子設(shè)備100時(shí)默認(rèn)定義的固定動(dòng)作。在動(dòng)作任務(wù)模式中,控制單元140使用動(dòng)作數(shù)據(jù)庫(kù)來(lái)執(zhí)行與用戶動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)??刂茊卧?40可以保持動(dòng)作任務(wù)模式直至識(shí)別到返回遙控模式的啟動(dòng)命令、模式取消命令、或者改變?yōu)檎Z(yǔ)音任務(wù)模式的語(yǔ)音啟動(dòng)命令。如果在模式已經(jīng)改變?yōu)閯?dòng)作任務(wù)模式之后的預(yù)定時(shí)間(例如5分鐘)內(nèi)沒(méi)有識(shí)別到動(dòng)作,則控制単元140可以自動(dòng)返回遙控模式??刂茊卧?40顯示包括指導(dǎo)語(yǔ)音識(shí)別的語(yǔ)音項(xiàng)目(item)的語(yǔ)音輔助信息以及包括指導(dǎo)動(dòng)作識(shí)別的動(dòng)作項(xiàng)目的動(dòng)作輔助信息之一。如果識(shí)別到與語(yǔ)音輔助信息中所包括的語(yǔ)音項(xiàng)目相對(duì)應(yīng)的命令之一,則控制単元140執(zhí)行與識(shí)別到的命令相對(duì)應(yīng)的語(yǔ)音任務(wù)。如果識(shí)別到與動(dòng)作輔助信息中所包括的動(dòng)作項(xiàng)目相對(duì)應(yīng)的動(dòng)作之一,則控制單元140執(zhí)行與識(shí)別到的動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)。具體來(lái)說(shuō),如果通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到語(yǔ)音啟動(dòng)命令,則控制単元140可以控制以顯示關(guān)于可由用戶語(yǔ)音控制的語(yǔ)音任務(wù)的語(yǔ)音項(xiàng)目。語(yǔ)音項(xiàng)目可以顯示與各種語(yǔ)音任務(wù)相對(duì)應(yīng)的命令。因此,如果用戶說(shuō)出某一命令,則用戶可以很容易地識(shí)別出哪個(gè)語(yǔ)音任務(wù)將被執(zhí)行,從而可以更容易地執(zhí)行該語(yǔ)音任務(wù)。如果通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到動(dòng)作啟動(dòng)命令,則控制単元140可以控制以顯示關(guān)于可由用戶動(dòng)作控制的動(dòng)作任務(wù)的動(dòng)作項(xiàng)目。語(yǔ)音項(xiàng)目可以顯示與各種動(dòng)作任務(wù)相對(duì)應(yīng)的動(dòng)作。因此,如果用戶執(zhí)行某ー動(dòng)作,則用戶可以很容易地識(shí)別哪個(gè)動(dòng)作任務(wù)將被執(zhí)行,從而可以更容易地執(zhí)行該動(dòng)作任務(wù)。語(yǔ)音項(xiàng)目或動(dòng)作項(xiàng)目可以顯示在顯示屏幕的同一區(qū)域(例如,屏幕的下部)上。顯示語(yǔ)音項(xiàng)目或動(dòng)作項(xiàng)目的區(qū)域可以與所顯示的圖像重疊。然而,這僅僅是示例,而且語(yǔ)音項(xiàng)目和動(dòng)作項(xiàng)目可以在其他位置顯示或者以其他方法顯示。例如,語(yǔ)音項(xiàng)目或動(dòng)作項(xiàng)目可以顯示在顯示屏幕的右部或左部。電子設(shè)備100的任務(wù)可以被劃分為如下的由用戶語(yǔ)音控制的語(yǔ)音任務(wù)和由用戶動(dòng)作控制的動(dòng)作任務(wù)[表I] 語(yǔ)音任務(wù)I_電源控制、頻道快捷切換、音量等級(jí)設(shè)置、靜音、外部輸 入改變、搜索、功能運(yùn)行(如果對(duì)象名稱(chēng)是明確的)、功
_能取消、文本輸入_
動(dòng)作任務(wù)頻道改變、音量等級(jí)控制、功能運(yùn)行(如果對(duì)象名稱(chēng)是不_明確的)、重現(xiàn)控制、滑動(dòng)I控制、光標(biāo)指向表I中所示的語(yǔ)音任務(wù)可以在語(yǔ)音啟動(dòng)命令運(yùn)行的語(yǔ)音任務(wù)模式中執(zhí)行,而且表I中所示的動(dòng)作任務(wù)可以在由動(dòng)作啟動(dòng)命令運(yùn)行的動(dòng)作任務(wù)模式中執(zhí)行。下文中,將參照?qǐng)D6至圖32解釋按照用戶語(yǔ)音進(jìn)行控制的語(yǔ)音任務(wù),并且將參照?qǐng)D33至圖58解釋按照用戶動(dòng)作進(jìn)行控制的動(dòng)作任務(wù)。圖6和圖7是根據(jù)示范性實(shí)施例的、解釋使用語(yǔ)音識(shí)別接通電源的視圖。如圖6所示,在圖像不被輸出但電源被提供給語(yǔ)音輸入單元110和控制單元140的待機(jī)模式中,如果通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到“接通電源”,則電子設(shè)備100如圖7所示被開(kāi)啟。圖8至圖10是根據(jù)示范性實(shí)施例的、解釋使用語(yǔ)音識(shí)別關(guān)閉電源的視圖。如圖8所示,如果電子設(shè)備100進(jìn)入語(yǔ)音任務(wù)模式并在顯示屏幕的下部顯示語(yǔ)音輔助信息,而且通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到與語(yǔ)音項(xiàng)目811相對(duì)應(yīng)的“關(guān)閉電源”,則電子設(shè)備100顯示指導(dǎo)區(qū)域920以通過(guò)語(yǔ)音指導(dǎo)信息再次確認(rèn)是否關(guān)閉電子設(shè)備100,如圖9所示。如果通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到與語(yǔ)音項(xiàng)目922相對(duì)應(yīng)的“是”,則電子設(shè)備100如圖10所示被關(guān)閉。圖11和圖12是根據(jù)示范性實(shí)施例的、解釋使用語(yǔ)音識(shí)別智能接通電源(smartpower On)的視圖。智能接通電源是開(kāi)啟電子設(shè)備100并且同時(shí)將當(dāng)前頻道改變?yōu)橛脩羝谕念l道的功能。如圖11所示,在圖像不被輸出但電源被提供給語(yǔ)音輸入單元110和控制単元140的待機(jī)模式中,如果通過(guò)語(yǔ)音識(shí)別模塊130k連續(xù)識(shí)別到“ Ginny”和“頻道6”,則電子設(shè)備100被開(kāi)啟并顯示頻道6,如圖12所示。圖13至圖16是根據(jù)示范性實(shí)施例的、解釋使用包括頻道號(hào)碼的語(yǔ)音識(shí)別進(jìn)行頻道快捷切換的視圖。如圖13所示,如果電子設(shè)備100進(jìn)入語(yǔ)音任務(wù)模式并在顯示屏幕的下部顯示語(yǔ)音輔助信息,而且通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到與語(yǔ)音項(xiàng)目812相對(duì)應(yīng)的“頻道”,則如圖14所示,電子設(shè)備100顯示指導(dǎo)區(qū)域830以通過(guò)在顯示屏幕下端的語(yǔ)音輔助信息來(lái)指導(dǎo)頻道號(hào)碼和頻道名稱(chēng)。如果顯示指導(dǎo)區(qū)域830而且通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到語(yǔ)音“七”,則電子設(shè)備100改變頻道以調(diào)諧到頻道7。如果存在包括通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到的“七”的頻道或者存在類(lèi)似“七”的候選組,則電子設(shè)備100顯示語(yǔ)音候選組1100的列表和候選組選擇指導(dǎo)1510,以便指導(dǎo)輸入語(yǔ)音候選組的方法,如圖15所示。如果顯示了語(yǔ)音候選組1100的列表并且通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到與語(yǔ)音候選組列表上的一個(gè)項(xiàng)目1101的號(hào)碼相對(duì)應(yīng)的“號(hào)碼1”,則電子設(shè)備100調(diào)諧到頻道7,如圖16所示。圖17至圖20是根據(jù)示范性實(shí)施例的、解釋使用包括頻道名稱(chēng)的語(yǔ)音識(shí)別進(jìn)行頻道快捷切換的視圖。如圖17所示,如果電子設(shè)備100進(jìn)入語(yǔ)音任務(wù)模式并在顯示屏幕的下部顯示語(yǔ)音輔助信息,而且通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到與語(yǔ)音項(xiàng)目812相對(duì)應(yīng)的“頻道”,則如圖18所示,電子設(shè)備100顯示指導(dǎo)區(qū)域830以便通過(guò)語(yǔ)音輔助信息來(lái)指導(dǎo)頻道號(hào)碼和頻道名稱(chēng)。如果顯示指導(dǎo)區(qū)域830而且通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到語(yǔ)音“MBC”,則電子設(shè)備100調(diào)諧到具有頻道名稱(chēng)“MBC”的頻道11,如圖20所示。如果存在包括通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別的語(yǔ)音“MBC”的頻道或者存在類(lèi)似“MBC”的候選組,則電子設(shè)備100顯示語(yǔ)音候選組1900的列表和候選組選擇指導(dǎo)1910,以便指導(dǎo)輸入語(yǔ)音候選組的方法,如圖19所示。如果顯示了語(yǔ)音候選組1900的列表并且通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到與語(yǔ)音候選組1900的列表上的一個(gè)項(xiàng)目1901的號(hào)碼相對(duì)應(yīng)的語(yǔ)音“號(hào)碼11”,則電子設(shè)備100調(diào)諧到具有頻道名稱(chēng)“MBC”的頻道11,如圖20所示。圖21至圖23是根據(jù)示范性實(shí)施例的解釋使用語(yǔ)音識(shí)別來(lái)靜音的視圖。如圖21所示,如果在顯示屏幕的下部顯示語(yǔ)音輔助信息而且通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到與語(yǔ)音項(xiàng)目813相對(duì)應(yīng)的“靜音”,則電子設(shè)備100控制音頻輸出単元196不輸出音頻。此外,如圖22所示,電子設(shè)備100在顯示屏幕上顯示靜音圖標(biāo)2200。在這個(gè)時(shí)候,指導(dǎo)區(qū)域2210顯示取消靜音2213命令,而不是靜音813命令。如果通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到“取消靜音”,則電子設(shè)備100控制音頻輸出單元196按照在靜音之前有效的先前等級(jí)輸出音頻。此外,如圖23所示,電子設(shè)備100刪除顯示屏幕上的靜音圖標(biāo)2200。圖24至圖26是根據(jù)示范性實(shí)施例的解釋使用語(yǔ)音識(shí)別進(jìn)行外部輸入變化的視圖。如圖24所示,如果電子設(shè)備100進(jìn)入語(yǔ)音任務(wù)模式并在顯示屏幕的下部顯示語(yǔ)音輔助信息,而且通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到與語(yǔ)音項(xiàng)目814相對(duì)應(yīng)的“外部輸入”,則如圖25所不,電子設(shè)備100顯不外部輸入列表2500和指導(dǎo)2510以便指導(dǎo)如何選擇外部輸入。外部輸入列表2500清晰地顯示連接到外部端子輸入單元160的USB外部端子、AVl外部端子、PC機(jī)外部端子,而且模糊地顯示沒(méi)有連接到外部端子輸入單元160的HDMIl和HDMI2。如果顯示了外部輸入列表2500并且通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到語(yǔ)音“PC”,則電子設(shè)備100在顯示屏幕上顯示與外部輸入“PC”的連接狀態(tài)。圖27和圖29是示出根據(jù)示范性實(shí)施例的具有將被說(shuō)出的明確名稱(chēng)的功能運(yùn)行任務(wù)的視圖。如圖27所示,如果輸入了顯示執(zhí)行智能功能(例如,訪問(wèn)互聯(lián)網(wǎng)的功能、運(yùn)行應(yīng)用的功能、重現(xiàn)運(yùn)動(dòng)圖像的功能和聽(tīng)音樂(lè)的功能)的內(nèi)容列表的用戶命令,則顯示智能中心2700。智能中心2700是用作由電子設(shè)備100支持的功能的中心的UI,而且是顯示與由電子設(shè)備100支持的多個(gè)功能(例如,觀看視頻的功能、聽(tīng)音樂(lè)的功能、和訪問(wèn)互聯(lián)網(wǎng)的功能)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的n。此外,智能中心2700是顯示與電子設(shè)備100的存儲(chǔ)單元130中所存儲(chǔ)的內(nèi)容(例如,照片、音樂(lè)和視頻)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)、與從外部源接收到的內(nèi)容(例如,照片、音樂(lè)和視頻)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)、以及與可連接到外部的應(yīng)用(例如,互聯(lián)網(wǎng)瀏覽器)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的UI。如果通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到“Ginny”以進(jìn)入語(yǔ)音任務(wù)模式,則電子設(shè)備100在顯示屏幕的下部顯示語(yǔ)音⑶I而且進(jìn)入語(yǔ)音任務(wù)模式,如圖28所示。當(dāng)進(jìn)入語(yǔ)音任務(wù)模式吋,電子設(shè)備100將智能中心2700的可運(yùn)行圖標(biāo)的名稱(chēng)加下劃線(underline),從而智能中心2700顯示可通過(guò)用戶語(yǔ)音選擇的可運(yùn)行圖標(biāo)。如圖28所示,如果顯示語(yǔ)音輔助信息而且通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到語(yǔ)音“您的視頻”,則電子設(shè)備100運(yùn)行智能中心2700的“您的視頻”中所包括的運(yùn)動(dòng)圖像,如圖29所示。如果在“您的視頻”中包括ー個(gè)運(yùn)動(dòng)圖像,則該運(yùn)動(dòng)圖像被立即運(yùn)行,如果在“您的視頻”中包括多個(gè)運(yùn)動(dòng)圖像,則顯示“您的視頻”中所包括的運(yùn)動(dòng)圖像的列表。圖30至圖32是根據(jù)示范性實(shí)施例的、解釋使用語(yǔ)音識(shí)別進(jìn)行圖像重現(xiàn)功能和圖像停止功能的視圖。如圖30所示,如果重現(xiàn)圖像(例如,存儲(chǔ)在存儲(chǔ)單元130中的運(yùn)動(dòng)圖像)而且通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到“Ginny”以進(jìn)入語(yǔ)音任務(wù)模式,則電子設(shè)備100進(jìn)入語(yǔ)音任務(wù)模式并且在顯示屏幕的下部顯示語(yǔ)音輔助信息,如圖31所示。在這種狀態(tài)下,如果通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到“暫?!保瑒t電子設(shè)備100暫時(shí)停止重現(xiàn)當(dāng)前圖像,并在顯示屏幕上顯示暫停圖標(biāo),如圖32所示。通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到“回放”,則電子設(shè)備100重現(xiàn)已暫停的圖像,如圖31所示。當(dāng)圖像被重現(xiàn)時(shí)暫停/停止命令可以被顯示在語(yǔ)音輔助信息上,當(dāng)圖像被暫停時(shí)重現(xiàn)命令可以被顯示。如上所述,因?yàn)榘凑胀ㄟ^(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到的用戶語(yǔ)音進(jìn)行控制的語(yǔ)音任務(wù)是具有可說(shuō)出的標(biāo)識(shí)符的任務(wù)或者需要文本輸入的任務(wù),所以用戶可以通過(guò)他/她的語(yǔ)音來(lái)更容易和更方便地控制語(yǔ)音任務(wù)。圖33和圖34是根據(jù)示范性實(shí)施例的、解釋使用動(dòng)作識(shí)別進(jìn)行頻道改變的視圖。如圖33所示,如果電子設(shè)備100進(jìn)入動(dòng)作任務(wù)模式并在顯示屏幕的下部顯示動(dòng)作輔助信息,而且通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到與動(dòng)作項(xiàng)目3313相對(duì)應(yīng)的向右移動(dòng)用戶的手的拍動(dòng)作,則電子設(shè)備100調(diào)諧到當(dāng)前頻道的下ー個(gè)頻道,S卩,從當(dāng)前頻道6増加I的頻道7,如圖34所示。另ー方面,如果如圖34所示顯示頻道7而且識(shí)別到與動(dòng)作項(xiàng)目3313相對(duì)應(yīng)的向左移動(dòng)用戶的手的拍動(dòng)作,則電子設(shè)備100調(diào)諧到前ー個(gè)頻道,即,該頻道從當(dāng)前頻道7減少I(mǎi)的頻道6,如圖33所示。圖35至圖37是根 據(jù)示范性實(shí)施例的、解釋使用動(dòng)作識(shí)別進(jìn)行音量等級(jí)控制的視圖。如圖35所示,如果電子設(shè)備100進(jìn)入動(dòng)作任務(wù)模式并在顯示屏幕的下部顯示動(dòng)作輔助信息,而且通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到與動(dòng)作項(xiàng)目3312相對(duì)應(yīng)的向上移動(dòng)用戶的手的拍動(dòng)作,則電子設(shè)備100顯示音量等級(jí)控制條3600 (其顯示音量等級(jí))并且輸出具有從當(dāng)前音量等級(jí)9增加ー個(gè)等級(jí)的下一個(gè)等級(jí)10的音量,如圖36所示。如果在音量等級(jí)控制條3600已經(jīng)顯示之后的預(yù)定時(shí)間(例如5秒)內(nèi)沒(méi)有識(shí)別到用戶動(dòng)作,則控制単元140可以從顯示屏幕上移除音量等級(jí)控制條3600,并且按照控制后的音量等級(jí)輸出音頻。圖38至圖41是根據(jù)示范性實(shí)施例的、解釋使用用戶的指向動(dòng)作進(jìn)行頻道改變的視圖。如果用戶輸入生成頻道列表3800的命令(例如,遙控器上的頻道列表按鈕)以選擇頻道而且頻道列表3800如圖38所示顯示在顯示屏幕上,而且通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到進(jìn)入動(dòng)作任務(wù)模式的動(dòng)作(例如,搖動(dòng)用戶的手3到4次),則電子設(shè)備100生成光標(biāo)3910并且在顯示屏幕的下部顯示動(dòng)作輔助信息,如圖39所示。如果顯示了動(dòng)作輔助信息而且通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到從當(dāng)前位置向左下方向移動(dòng)手的動(dòng)作以移動(dòng)光標(biāo)3910的動(dòng)作,則電子設(shè)備100按照該動(dòng)作將光標(biāo)2010移動(dòng)到“ 11-1MBC”,如圖40所示。如果通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到與動(dòng)作項(xiàng)目3314相對(duì)應(yīng)的抓動(dòng)作,則電子設(shè)備100調(diào)諧到“ 11-1MBC”并顯示頻道“ 11-1MBC”,如圖41所示。
圖42至圖45是根據(jù)示范性實(shí)施例的、解釋使用用戶的指向動(dòng)作進(jìn)行應(yīng)用運(yùn)行的視圖。如果如圖42所示在顯示屏幕上顯示智能中心,而且通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到進(jìn)入動(dòng)作任務(wù)模式的動(dòng)作(例如,搖動(dòng)用戶的手3到4次),則電子設(shè)備100生成并顯示光標(biāo)4305并且在顯示屏幕的下部顯示動(dòng)作輔助信息4310,如圖43所示。如果通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到從當(dāng)前位置向左下方向移動(dòng)手的動(dòng)作,則電子設(shè)備100按照該動(dòng)作將光標(biāo)4305移動(dòng)到“APP2”,如圖44所示。如果通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到與動(dòng)作項(xiàng)目4311相對(duì)應(yīng)的抓動(dòng)作,則電子設(shè)備100運(yùn)行“應(yīng)用2(APP2) ”,如圖45所示。在這個(gè)時(shí)候,電子設(shè)備100可以顯示指示運(yùn)行所選擇的應(yīng)用的屏幕,而顯示智能中心的屏幕,如圖45所示。然而,這僅僅是示例,電子設(shè)備100可以在智能中心上的、比智能中心小的屏幕上顯示該應(yīng)用的運(yùn)行。圖46至圖48是根據(jù)示范性實(shí)施例的、解釋使用用戶動(dòng)作進(jìn)行在智能中心的應(yīng)用顯示區(qū)域上進(jìn)行導(dǎo)航的視圖。如果如圖46所示在顯示屏幕上顯示智能中心,而且通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到進(jìn)入動(dòng)作任務(wù)模式的搖動(dòng)手3到4次的動(dòng)作,則電子設(shè)備100生成光標(biāo)4710并且在顯示屏幕的下部顯示動(dòng)作輔助信息,如圖47所示。如果光標(biāo)4710位于可導(dǎo)航的區(qū)域(例如,顯示向左和向右移動(dòng)方向鍵4713和4716的區(qū)域),而且通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到從當(dāng)前位置向右移動(dòng)手的拍動(dòng)作,則電子設(shè)備100移動(dòng)應(yīng)用顯示區(qū)域4720,在該區(qū)域中,光標(biāo)4710位于向左的方向,如圖48所示。圖49至圖52是根據(jù)示范性實(shí)施例的、解釋使用動(dòng)作識(shí)別運(yùn)行具有不明確的(indefinite)名稱(chēng)的圖標(biāo)的視圖。如果如圖49所示在顯示屏幕上顯示網(wǎng)頁(yè)屏幕,而且通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到進(jìn)入動(dòng)作任務(wù)模式的搖動(dòng)手3到4次的動(dòng)作,則電子設(shè)備100生成光標(biāo)5005并且在顯示屏幕的下部顯示動(dòng)作輔助信息5010,如圖50所示。如果通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到從當(dāng)前位置在左上方向移動(dòng)手以移動(dòng)光標(biāo)5005的動(dòng)作,則電子設(shè)備100按照該動(dòng)作將光標(biāo)5005移動(dòng)到圖標(biāo)“書(shū)簽”,如圖51所示。如果通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到抓動(dòng)作,則電子設(shè)備100顯示書(shū)簽的運(yùn)行5220,其指示當(dāng)前顯示在顯示屏幕上的網(wǎng)頁(yè)的書(shū)簽,如圖52所示。圖53至圖55是根據(jù)示范性實(shí)施例的、解釋使用動(dòng)作識(shí)別進(jìn)行重現(xiàn)控制任務(wù)的視圖。如果如圖53所示在顯示屏幕上顯示內(nèi)容圖像(例如,存儲(chǔ)在存儲(chǔ)單元130中的運(yùn)動(dòng)圖像或從外部源接收到的運(yùn)動(dòng)圖像),而且通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到進(jìn)入動(dòng)作任務(wù)模式的搖動(dòng)手3到4次的動(dòng)作,則電子設(shè)備100生成重現(xiàn)控制條5410并且在顯示屏幕的下部顯示動(dòng)作輔助信息,如圖54所示。在這個(gè)時(shí)候,如果識(shí)別到動(dòng)作啟動(dòng)命令,則重現(xiàn)控制條5410顯示在顯示屏幕上。如果接收到額外的用戶輸入(例如,遙控器按鈕),則重現(xiàn)控制條5410可以顯示在顯示屏幕上。如果通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到向左方向的拍動(dòng)作,則電子設(shè)備100從當(dāng)前圖像100向后跳過(guò)預(yù)定時(shí)間(例如,10分鐘)并重現(xiàn)圖像。預(yù)定時(shí)間可以通過(guò)配置來(lái)改變。圖56至圖58是根據(jù)示范性實(shí)施例的、解釋使用另ー個(gè)動(dòng)作識(shí)別進(jìn)行重現(xiàn)控制任務(wù)的視圖。如果如圖56所示在顯示屏幕上顯示圖像(例如,存儲(chǔ)在存儲(chǔ)單元130中的運(yùn)動(dòng)圖像或從外部源接收到的運(yùn)動(dòng)圖像),而且通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到進(jìn)入動(dòng)作任務(wù)模式的搖動(dòng)手3到4次的動(dòng)作,則電子設(shè)備100生成重現(xiàn)控制條5710并且在顯示屏幕的下部顯示動(dòng)作輔助信息,如圖57所示。在這個(gè)時(shí)候,如果識(shí)別到動(dòng)作啟動(dòng)命令,則重現(xiàn)控制條5710顯示在顯示屏幕上。如果接收到額外的用戶輸入(例如,遙控器按鈕),則重現(xiàn)控制條5710可以顯示在顯示屏幕上。如果通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到抓動(dòng)作,則電子設(shè)備100選擇指示當(dāng)前重現(xiàn)位置的圖標(biāo)5715,而且如果后來(lái)通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到向左方向的移動(dòng)動(dòng)作,則電子設(shè)備100返回到與該向左方向的移動(dòng)動(dòng)作所對(duì)應(yīng)的預(yù)定時(shí)間ー樣多的位置。圖標(biāo)5715也向后移動(dòng)與該向左方向的移動(dòng)動(dòng)作一祥多的距離。如果通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到釋放抓的動(dòng)作(例如,張開(kāi)手的動(dòng)作),則電子設(shè)備100從圖標(biāo)5715移動(dòng)回到的位置重現(xiàn)圖像,如圖58所示。然而,這僅僅是示例。如果在抓之后識(shí)別到向右方向的移動(dòng)動(dòng)作,則電子設(shè)備100前進(jìn)與該向右方向的移動(dòng)動(dòng)作所對(duì)應(yīng)的預(yù)定時(shí)間。圖標(biāo)5715也向前移動(dòng)與該向右方向的移動(dòng)動(dòng)作ー樣多的距離。如上所述,因?yàn)榘凑胀ㄟ^(guò)動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作進(jìn)行控制的動(dòng)作任務(wù)是其設(shè)置值被分階段改變的任務(wù)或使用光標(biāo)的任務(wù),所以用戶可以更容易和更方便地控制動(dòng)作任務(wù)。圖59和圖60是示出根據(jù)各種示范性實(shí)施例的、用于控制電子設(shè)備的方法的流程圖,該電子設(shè)備通過(guò)將整個(gè)任務(wù)劃分為動(dòng)作任何和語(yǔ)音任務(wù)來(lái)控制整個(gè)任務(wù)。圖59是根據(jù)示范性實(shí)施例的、解釋用于控制電子設(shè)備100的方法的流程圖。電子設(shè)備100識(shí)別用戶語(yǔ)音或用戶動(dòng)作(S5910)。用戶語(yǔ)音通過(guò)麥克風(fēng)輸入并且由語(yǔ)音識(shí)別模塊識(shí)別,用戶動(dòng)作由照相機(jī)拍攝并由動(dòng)作識(shí)別模塊識(shí)別。如果通過(guò)語(yǔ)音識(shí)別模塊或動(dòng)作識(shí)別模塊之一識(shí)別到用戶輸入,則電子設(shè)備100按照用戶輸入執(zhí)行語(yǔ)音任務(wù)或動(dòng)作任務(wù)之ー(S5920)。語(yǔ)音任務(wù)是控制電子設(shè)備100的任務(wù)當(dāng)中的、包括 對(duì)應(yīng)于用戶語(yǔ)音的標(biāo)識(shí)符的任務(wù),而且動(dòng)作任務(wù)是控制電子設(shè)備100的任務(wù)當(dāng)中的、按照用戶動(dòng)作分階段執(zhí)行的任務(wù)。如上所述,用戶可以使用語(yǔ)音和動(dòng)作來(lái)更高效地控制電子設(shè)備100。圖60是根據(jù)示范性實(shí)施例的、解釋用于控制電子設(shè)備的方法的流程圖。電子設(shè)備100通過(guò)語(yǔ)音識(shí)別模塊和動(dòng)作識(shí)別模塊之ー識(shí)別啟動(dòng)命令(S6005)。啟動(dòng)命令可以是通過(guò)語(yǔ)音識(shí)別模塊識(shí)別到的語(yǔ)音啟動(dòng)命令,或者是通過(guò)動(dòng)作識(shí)別模塊識(shí)別到的動(dòng)作啟動(dòng)命令。如果識(shí)別到的啟動(dòng)命令是語(yǔ)首啟動(dòng)命令(S6010-是),則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式(S6015)。語(yǔ)音任務(wù)模式是按照通過(guò)語(yǔ)音識(shí)別模塊識(shí)別到的用戶語(yǔ)音執(zhí)行任務(wù)的模式。如果將模式改變?yōu)檎Z(yǔ)音任務(wù)模式,則電子設(shè)備100生成包括語(yǔ)音項(xiàng)目的語(yǔ)音輔助信息(S6020)。例如,如圖61所示,顯示了包括用于執(zhí)行語(yǔ)音任務(wù)的語(yǔ)音項(xiàng)目的語(yǔ)音輔助信
o在語(yǔ)音任務(wù)模式中,電子設(shè)備100確定是否識(shí)別到用戶語(yǔ)音(S6030)。如果確定識(shí)別到用戶語(yǔ)音(S6030-是),則電子設(shè)備執(zhí)行與識(shí)別到的用戶語(yǔ)音相對(duì)應(yīng)的語(yǔ)音任務(wù)(S6035)。例如,按照以上參照?qǐng)D6至圖32所解釋的方式來(lái)執(zhí)行語(yǔ)音任務(wù)。語(yǔ)音任務(wù)可以包括電子設(shè)備的電源控制、頻道快捷切換、音量等級(jí)設(shè)置、靜音、夕卜部端子改變、文本輸入以及回放/停止功能中的至少ー個(gè)。在語(yǔ)音任務(wù)模式中確定是否識(shí)別到動(dòng)作啟動(dòng)命令(S6040)。如果識(shí)別到動(dòng)作啟動(dòng)命令(S6040-是),則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式(S6045)。例如,如果在語(yǔ)音任務(wù)模式中識(shí)別到動(dòng)作啟動(dòng)命令,則電子設(shè)備100將模式改變?yōu)閯?dòng)作任務(wù)模式,并顯示包括動(dòng)作項(xiàng)目的動(dòng)作輔助信息,如圖62所示。如果沒(méi)有識(shí)別到動(dòng)作啟動(dòng)命令(S6040-否),則電子設(shè)備100保持當(dāng)前任務(wù)模式,即,語(yǔ)音任務(wù)模式(S6070 )。如果最初識(shí)別到的啟動(dòng)命令是動(dòng)作啟動(dòng)命令而不是語(yǔ)音啟動(dòng)命令(S6010-否),則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式(S6045)。動(dòng)作任務(wù)模式是僅由通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作來(lái)控制任務(wù)的模式。如果電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,則電子設(shè)備100生成包括動(dòng)作項(xiàng)目的動(dòng)作輔助信息(S6050)。例如,如圖62所示,顯示了包括用于控制動(dòng)作任務(wù)的動(dòng)作項(xiàng)目的動(dòng)作輔助信息。電子設(shè)備100確定是否識(shí)別到用戶動(dòng)作(S6055 )。如果確定識(shí)別到用戶動(dòng)作(S6055-是),則電子設(shè)備100執(zhí)行與識(shí)別到的用戶動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)(S6060)。例如,按照以上參照?qǐng)D33至圖58所解釋的方式來(lái)執(zhí)行動(dòng)作任務(wù)。動(dòng)作任務(wù)可以包括頻道改變、音量等級(jí)控制、屏幕導(dǎo)航、滑動(dòng)條控制和光標(biāo)指向中的至少ー個(gè)。在動(dòng)作任務(wù)模式中確定是否識(shí)別到語(yǔ)音啟動(dòng)命令(S6065),而且如果識(shí)別到語(yǔ)音啟動(dòng)命令(S6065-是),則電子設(shè)備100將模式改變?yōu)檎Z(yǔ)音任務(wù)模式(S6010)。例如,如果在動(dòng)作任務(wù)模式中確定識(shí)別到語(yǔ)音啟動(dòng)命令,則電子設(shè)備100將模式改變?yōu)檎Z(yǔ)音任務(wù)模式,并顯示包括語(yǔ)音項(xiàng)目的語(yǔ)音輔助信息,如圖60所示。如果沒(méi)有識(shí)別到語(yǔ)音啟動(dòng)命令(S6040-否),則電子設(shè)備100保持當(dāng)前任務(wù)模式,即,動(dòng)作任務(wù)模式(S6070)。如上所述,電子設(shè)備100能夠按照用戶動(dòng)作或用戶語(yǔ)音來(lái)執(zhí)行各種任務(wù),因此能夠提高用戶便利性。在按照識(shí)別到的語(yǔ)音執(zhí)行語(yǔ)音任務(wù)中的至少ー個(gè)的語(yǔ)音任務(wù)模式中,控制單元140可以進(jìn)行控制以顯示用于執(zhí)行語(yǔ)音任務(wù)的語(yǔ)音輔助信息。例如,如果通過(guò)語(yǔ)音識(shí)別模塊識(shí)別到語(yǔ)音啟動(dòng)命令,則控制単元140可以控制以顯示用于執(zhí)行可按照用戶語(yǔ)音控制的語(yǔ)音任務(wù)語(yǔ)音輔助信息。與各種語(yǔ)音任務(wù)相對(duì)應(yīng)的至少ー個(gè)語(yǔ)音項(xiàng)目可以顯示為語(yǔ)音輔助信息。至少ー個(gè)語(yǔ)音項(xiàng)目可以是可說(shuō)出得命令。因此,用戶可以在語(yǔ)音任務(wù)模式中容易地辨認(rèn)出(identify)可識(shí)別的命令。另外,如果說(shuō)出了相應(yīng)命令,則用戶可以容易地識(shí)別哪個(gè)語(yǔ)首任務(wù)將被執(zhí)行。在語(yǔ)音任務(wù)模式中,控制單元140可以識(shí)別出與顯示為語(yǔ)音輔助信息的至少ー個(gè)語(yǔ)音項(xiàng)目當(dāng)中的第一語(yǔ)音項(xiàng)目相對(duì)應(yīng)的第一語(yǔ)音??刂茊卧?40確定關(guān)干與識(shí)別到的第一語(yǔ)音相對(duì)應(yīng)的第一語(yǔ)音項(xiàng)目的附加項(xiàng)目信息是否存在。如果附加項(xiàng)目信息不存在,則控制単元140可以執(zhí)行與第一語(yǔ)音項(xiàng)目相對(duì)應(yīng)的任務(wù)。如果需要改變語(yǔ)音輔助信息,則控制單元140可以控制顯示單元(未示出)顯示改變的語(yǔ)音輔助信息。如果附加項(xiàng)目信息存在,則控制單元140可以進(jìn)行控制以顯示關(guān)干與識(shí)別到的第一語(yǔ)音相對(duì)應(yīng)的第一語(yǔ)音項(xiàng)目的附加項(xiàng)目信息。控制單元140可以識(shí)別出與附加項(xiàng)目信息相對(duì)應(yīng)的第二語(yǔ)音??刂茊卧?40可以執(zhí)行語(yǔ)音任務(wù)當(dāng)中與第一語(yǔ)音項(xiàng)目和第二語(yǔ)音相對(duì)應(yīng)的任務(wù)。在按照識(shí)別到的動(dòng)作執(zhí)行動(dòng)作任務(wù)中的至少ー個(gè)的動(dòng)作任務(wù)模式中,控制單元140可以進(jìn)行控制以顯示用于執(zhí)行動(dòng)作任務(wù)的動(dòng)作輔助信息。例如,如果通過(guò)動(dòng)作識(shí)別模塊識(shí)別到動(dòng)作啟動(dòng)命令,則控制単元140可以進(jìn)行控制以顯示用于執(zhí)行可按照用戶動(dòng)作控制的動(dòng)作任務(wù)的動(dòng)作輔助信息。與各種動(dòng)作任務(wù)相對(duì)應(yīng)的至少ー個(gè)動(dòng)作項(xiàng)目可以顯示為動(dòng)作輔助信息。至少ー個(gè)動(dòng)作項(xiàng)目可以包括指示在動(dòng)作任務(wù)模式中可識(shí)別的動(dòng)作以及與該可識(shí)別的動(dòng)作相對(duì)應(yīng)的任務(wù)的動(dòng)作圖像。因此,用戶能夠在動(dòng)作任務(wù)模式中容易地辨認(rèn)出可識(shí)別的動(dòng)作,并且能夠容易地識(shí)別出根據(jù)用戶執(zhí)行的動(dòng)作將執(zhí)行哪個(gè)動(dòng)作任務(wù)。因此,用戶能夠容易地執(zhí)行動(dòng)作任務(wù)。在動(dòng)作任務(wù)模式中,控制單元140可以識(shí)別與顯示為動(dòng)作輔助信息的至少ー個(gè)動(dòng)作項(xiàng)目當(dāng)中的第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的第一動(dòng)作。控制單元140可以確定關(guān)于與識(shí)別到的第一動(dòng)作相對(duì)應(yīng)的第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息是否存在。如果附加項(xiàng)目信息不存在,則控制単元140可以執(zhí)行與第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的任務(wù)。另外,如果需要改變動(dòng)作輔助信息,則控制單元140可以控制顯示單元(未示出)顯示改變的動(dòng)作輔助信息。如果附加項(xiàng)目信息存在,則控制単元140可以進(jìn)行控制以顯示關(guān)干與識(shí)別到的第一動(dòng)作相對(duì)應(yīng)的第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息。控制單元140可以識(shí)別出與附加項(xiàng)目信息相對(duì)應(yīng)的第二動(dòng)作。控制單元140可以執(zhí)行動(dòng)作任務(wù)當(dāng)中與第一動(dòng)作項(xiàng)目和識(shí)別出的第二動(dòng)作相對(duì)應(yīng)的任務(wù)。語(yǔ)音輔助信息、動(dòng)作輔助信息、關(guān)于語(yǔ)音項(xiàng)目的附加項(xiàng)目信息或關(guān)于動(dòng)作項(xiàng)目的附加項(xiàng)目信息可以顯示在顯示屏幕的相同區(qū)域(下部)上。上述信息可以顯示在預(yù)先設(shè)定的區(qū)域或可動(dòng)態(tài)變化的區(qū)域上。例如,語(yǔ)音輔助信息或動(dòng)作輔助信息可以顯示在顯示屏幕的上部、下部、右部或左部,并且可以根據(jù)屏幕上顯示的圖像動(dòng)態(tài)地變化。語(yǔ)音輔助信息、動(dòng)作輔助信息、關(guān)于語(yǔ)音項(xiàng)目的附加項(xiàng)目信息或關(guān)于動(dòng)作項(xiàng)目的附加項(xiàng)目信息可以與所顯示或重現(xiàn)的圖像、應(yīng)用、0SD、或識(shí)別候選(recognitioncandidate) 一起顯示,或者可以單獨(dú)地顯示。顯示上述信息的區(qū)域可以與顯示圖像、應(yīng)用、0SD、或識(shí)別候選的區(qū)域重疊。語(yǔ)音輔助信息或動(dòng)作輔助信息的至少一部分可以透明或半透明地顯示。透明度可以根據(jù)用戶選擇進(jìn)行調(diào)整。上述語(yǔ)音輔助信息和動(dòng)作輔助信息可以以各種形式提供給用戶。下文中,將參照?qǐng)D61至63詳細(xì)解釋語(yǔ)音輔助信息、關(guān)于語(yǔ)音項(xiàng)目的附加項(xiàng)目信息和動(dòng)作輔助信息。圖61是示出根據(jù)示范性實(shí)施例的、在語(yǔ)音任務(wù)模式中在顯示單元193上顯示的語(yǔ)音輔助信息的視圖。如圖61所示,顯示單元193可以在語(yǔ)音任務(wù)模式中顯示至少ー個(gè)語(yǔ)音項(xiàng)目811、
812、813、814、815、816、817和818作為語(yǔ)音輔助信息。每個(gè)語(yǔ)音項(xiàng)目都可以是可說(shuō)出的命令。此外,指導(dǎo)輔助信息可以包括指示語(yǔ)音任務(wù)模式的模式圖像或文本。語(yǔ)音輔助信息可以包括指導(dǎo)區(qū)域810或模式顯示區(qū)域820,指導(dǎo)區(qū)域810包括至少ー個(gè)語(yǔ)音項(xiàng)目,模式顯示區(qū)域820顯示電子設(shè)備100的所指定的模式(例如,語(yǔ)音任務(wù)模式或動(dòng)作任務(wù)模式)。模式顯示區(qū)域820可以包括指示語(yǔ)音任務(wù)模式和動(dòng)作任務(wù)模式中的所指定的模式的模式圖像或文本中的至少ー個(gè)。另外,指導(dǎo)區(qū)域810和模式顯示區(qū)域820可以如圖61所示區(qū)別地顯示,或者可以不繪制在兩個(gè)區(qū)域之間的邊界的情況下顯示。模式顯示區(qū)域820可以省略。指導(dǎo)區(qū)域810和模式顯示區(qū)域820中每ー個(gè)的位置可以在制造電子設(shè)備100時(shí)設(shè)置或者可以由用戶任意設(shè)置,或者指導(dǎo)區(qū)域810和模式顯示區(qū)域820可以根據(jù)與UI 一起顯示的圖像動(dòng)態(tài)地放置。例如,如果顯示0SD,則指導(dǎo)區(qū)域810和模式顯示區(qū)域820中每ー個(gè)的位置可以改變?yōu)轱@示OSD的區(qū)域以外的某一位置,從而突出顯示OSD。指導(dǎo)區(qū)域810可以在顯示屏幕的下部顯示,而且模式顯示區(qū)域820可以在顯示屏幕的下部中心處顯示。此外,模式顯示區(qū)域820的位置可以根據(jù)配置改變到獨(dú)立于指導(dǎo)區(qū)域810的另ー個(gè)位置,諸如右下部。在語(yǔ)音任務(wù)模式中,指導(dǎo)區(qū)域810可以包括至少ー個(gè)語(yǔ)音項(xiàng)目811、812、813、814、815、816、817和818。例如,至少ー個(gè)語(yǔ)音項(xiàng)目中的每ー個(gè)可以是執(zhí)行語(yǔ)音任務(wù)的命令。指導(dǎo)區(qū)域810中包括的至少ー個(gè)命令可以包括關(guān)閉電源811、頻道812、靜音813、外部輸入814、智能中心815、應(yīng)用816、搜索817或全部818。關(guān)閉電源811是關(guān)閉電子設(shè)備100的命令。頻道812是執(zhí)行頻道快捷切換的命令。靜音813是執(zhí)行靜音的命令。外部輸入814是改變外部輸入的命令。智能中心815是執(zhí)行進(jìn)入智能功能的任務(wù)的命令,智能功能例如是電子設(shè)備100的互聯(lián)網(wǎng)功能、應(yīng)用提供功能和多媒體(例如,運(yùn)動(dòng)圖像、音樂(lè)和照片)提供功能。應(yīng)用816是執(zhí)行搜索電子設(shè)備100的應(yīng)用的任務(wù)的命令。搜索817是執(zhí)行由電子設(shè)備100提供的捜索內(nèi)容、應(yīng)用和網(wǎng)絡(luò)的命令。全部818是顯示所有命令的命令。指導(dǎo)區(qū)域810可以包括“更多”命令來(lái)代替全部818。也就是說(shuō),全部818和“更多”可以是用于顯示與語(yǔ)音任務(wù)相對(duì)應(yīng)的語(yǔ)音項(xiàng)目當(dāng)中的、除了至少ー個(gè)語(yǔ)音項(xiàng)目811、812、813、814、815、816、817和818以外的其他項(xiàng)目的語(yǔ)音項(xiàng)目。此外,如果電子設(shè)備100顯示其他項(xiàng)目,則電子設(shè)備100可以配置為不使用預(yù)先設(shè)定的計(jì)時(shí)器。預(yù)先設(shè)定的計(jì)時(shí)器是在預(yù)先設(shè)定的時(shí)間內(nèi)沒(méi)有識(shí)別到所顯示的語(yǔ)音項(xiàng)目811、812、813、814、815、816、817和818中的至少ー個(gè)的情況下停止語(yǔ)音任務(wù)模式的計(jì)時(shí)器。如果停止語(yǔ)音任務(wù)模式,則語(yǔ)音輔助信息可以消失,而且模式可以改變?yōu)殡娮釉O(shè)備100由通用遙控器控制的模式。另外,如果停止語(yǔ)音任務(wù)模式,則語(yǔ)音任務(wù)的執(zhí)行可能受到限制,直至電子設(shè)備100根據(jù)語(yǔ)音啟動(dòng)命令重新進(jìn)入語(yǔ)音任務(wù)模式為止。此外,如果在屏幕上與語(yǔ)音輔助信息、動(dòng)作輔助信息和附加項(xiàng)目信息一起顯示OSD或識(shí)別候選,則與所指定的模式無(wú)關(guān),用于停止所指定的模式的預(yù)先設(shè)定的計(jì)時(shí)器可能無(wú)法被驅(qū)動(dòng)。此外,指導(dǎo)區(qū)域810可以包括除了上述命令以外的其他命令。顯示為語(yǔ)音輔助信息的至少ー個(gè)語(yǔ)音項(xiàng)目811、812、813、814、815、816、817和818可以根據(jù)當(dāng)前執(zhí)行的功能來(lái)不同地配置。也就是說(shuō),指導(dǎo)區(qū)域810上顯示的至少ー個(gè)命令可以根據(jù)當(dāng)前執(zhí)行的功能來(lái)不同地配置。具體來(lái)說(shuō),與語(yǔ)音任務(wù)相對(duì)應(yīng)的語(yǔ)音項(xiàng)目中的至少ー個(gè)可以根據(jù)與語(yǔ)音輔助信息一起顯示的應(yīng)用、OSD和候選中的至少ー個(gè)來(lái)選擇性地配置。例如,如果電子設(shè)備100當(dāng)前執(zhí)行智能功能,則可以顯示包括用于返回廣播接收功能的命令“返回”的語(yǔ)音輔助信息。識(shí)別候選可以包括具有與識(shí)別到的語(yǔ)音相似的號(hào)碼或文本中的至少ー個(gè)的名稱(chēng)、與識(shí)別到的語(yǔ)音相似的命令、與相似命令相對(duì)應(yīng)的任務(wù)、與識(shí)別到的動(dòng)作相似的動(dòng)作、以及與相似動(dòng)作相對(duì)應(yīng)的任務(wù)中的至少ー個(gè)。例如,與識(shí)別到的語(yǔ)音相似的候選可以在彈出窗口中顯示與識(shí)別到的語(yǔ)音相似的頻道標(biāo)識(shí)符的列表。OSD可以包括電子設(shè)備100的當(dāng)前設(shè)置信息、以及除了識(shí)別候選以外的電子設(shè)備100的設(shè)置菜単。例如,可以顯示當(dāng)前頻道的標(biāo)識(shí)符(頻道號(hào)碼或頻道名稱(chēng))作為0SD,或者可以顯示外部輸入列表或頻道列表作為0SD??刂茊卧?40可以識(shí)別出與顯示為語(yǔ)音輔助信息的至少ー個(gè)語(yǔ)音項(xiàng)目811、812、
813、814、815、816、817和818當(dāng)中的第一語(yǔ)音項(xiàng)目相對(duì)應(yīng)的第一語(yǔ)音??刂茊卧?40可以進(jìn)行控制以顯示關(guān)干與識(shí)別到的第一語(yǔ)音相對(duì)應(yīng)的第一語(yǔ)音項(xiàng)目的附加項(xiàng)目信息。關(guān)于第一語(yǔ)音項(xiàng)目的附加項(xiàng)目信息可以包括關(guān)于第一語(yǔ)音項(xiàng)目的附加命令、指導(dǎo)消息或話語(yǔ)示例(utterance example)。例如,如果通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到作為與指導(dǎo)區(qū)域810上顯示的語(yǔ)音項(xiàng)目812相對(duì)應(yīng)的語(yǔ)音“頻道”,而且與語(yǔ)音項(xiàng)目812相對(duì)應(yīng)的任務(wù)是頻道快捷切換,則顯示単元193可以顯示包括指導(dǎo)消息、話語(yǔ)示例或附加命令(例如,“上一個(gè)”)的附加項(xiàng)目信息,以用于頻道名稱(chēng)、節(jié)目名稱(chēng)和頻道號(hào)碼中的至少ー個(gè)標(biāo)識(shí)符的說(shuō)出(utterance),如圖62所示。這里,“上一個(gè)”可以是再次顯示包括圖61的指導(dǎo)區(qū)域810的UI的命令。附加項(xiàng)目信息可以包括指導(dǎo)區(qū)域830和模式顯示區(qū)域820,指導(dǎo)區(qū)域830包括附加命令、指導(dǎo)消息或話語(yǔ)示例。例如,指導(dǎo)消息可以顯示在指導(dǎo)區(qū)域830的左部,指導(dǎo)消息或話語(yǔ)示例可以顯示在指導(dǎo)區(qū)域830的右部。控制單元140可以識(shí)別與附加項(xiàng)目信息相對(duì)應(yīng)的第二語(yǔ)音。控制單元140可以執(zhí)行語(yǔ)音任務(wù)當(dāng)中與第一語(yǔ)音項(xiàng)目和第二語(yǔ)音相對(duì)應(yīng)的任務(wù)。例如,如果第一語(yǔ)音項(xiàng)目是語(yǔ)音項(xiàng)目812,而且識(shí)別到作為與圖60的附加項(xiàng)目信息相對(duì)應(yīng)的第二語(yǔ)音的“MBC”,則控制單元140可以執(zhí)行頻道快捷切換,以便將當(dāng)前頻道改變?yōu)榕c包括“MBC”的頻道標(biāo)識(shí)符相對(duì)應(yīng)的頻道。也就是說(shuō),關(guān)于第一語(yǔ)音項(xiàng)目的附加項(xiàng)目信息可以是用于指導(dǎo)第二語(yǔ)音的發(fā)出以詢問(wèn)是否執(zhí)行與第一語(yǔ)音項(xiàng)目相對(duì)應(yīng)的任務(wù)或者額外獲取執(zhí)行該任務(wù)所需的信息的信息。圖63是示出根據(jù)示范性實(shí)施例的、在動(dòng)作任務(wù)模式中在電子設(shè)備100的顯示單元193上顯示的動(dòng)作輔助信息的視圖。如圖63所示,顯示單元193可以顯示至少ー個(gè)動(dòng)作項(xiàng)目3311、3312、3313和3314作為動(dòng)作任務(wù)模式中的動(dòng)作輔助信息。至少ー個(gè)動(dòng)作項(xiàng)目中的姆ー個(gè)都可以包括指示在動(dòng)作任務(wù)模式中可識(shí)別的動(dòng)作的動(dòng)作圖像,或指示與可識(shí)別的動(dòng)作(或動(dòng)作圖像)相對(duì)應(yīng)的任務(wù)的文本。動(dòng)作輔助信息可以包括指示動(dòng)作任務(wù)模式的模式圖像或文本。動(dòng)作輔助信息可以包括指導(dǎo)區(qū)域3310或模式顯示區(qū)域3320,指導(dǎo)區(qū)域3310包括至少ー個(gè)動(dòng)作項(xiàng)目,模式顯示區(qū)域3320顯示電子設(shè)備100的模式。模式顯示區(qū)域3320可以包括指示語(yǔ)音任務(wù)模式和動(dòng)作任務(wù)模式中的所指定的模式的模式圖像或文本中的至少ー個(gè)。指導(dǎo)區(qū)域3310和模式顯示區(qū)域3320可以如圖63所示區(qū)別地顯示,或者可以在兩個(gè)區(qū)域之間不繪制邊界地顯示。另外,模式顯示區(qū)域3320可以省略。例如,指導(dǎo)區(qū)域3310可以在顯示屏幕的下部顯示,而且模式顯示區(qū)域3320可以在顯示屏幕的下部的中心顯示。模式顯示區(qū)域3320的位置可以根據(jù)配置進(jìn)行改變(例如,右下部)。在動(dòng)作任務(wù)模式中,指導(dǎo)區(qū)域3310包括至少ー個(gè)動(dòng)作項(xiàng)目3311、3312、3313和3314。例如,至少ー個(gè)動(dòng)作項(xiàng)目中的姆ー個(gè)可以包括動(dòng)作圖像以及指示與該動(dòng)作圖像相對(duì)應(yīng)的任務(wù)的文本。指導(dǎo)區(qū)域3310中包括的至少ー個(gè)動(dòng)作項(xiàng)目可以包括動(dòng)作項(xiàng)目3311、動(dòng)作項(xiàng)目3312、動(dòng)作項(xiàng)目3313和動(dòng)作項(xiàng)目3314,動(dòng)作項(xiàng)目3311指示沿逆時(shí)針?lè)较虻男D(zhuǎn)動(dòng)作對(duì)應(yīng)于返回到先前設(shè)置的“后退”,動(dòng)作項(xiàng)目3312指示沿向上/向下方向的拍動(dòng)作對(duì)應(yīng)于控制音量等級(jí)的“音量向上/向下”,動(dòng)作項(xiàng)目3313指示沿向左/向右方向的拍動(dòng)作對(duì)應(yīng)于執(zhí)行頻道改變的“頻道向上/向下”,而且動(dòng)作項(xiàng)目3314指示抓動(dòng)作對(duì)應(yīng)于重現(xiàn)圖像的“回放”。指導(dǎo)區(qū)域3310可以顯示除了上述動(dòng)作項(xiàng)目以外的其他動(dòng)作項(xiàng)目。上述至少ー個(gè)動(dòng)作項(xiàng)目的每ー個(gè)中所包括的動(dòng)作圖像以及與該動(dòng)作圖像相對(duì)應(yīng)的文本可以根據(jù)可識(shí)別的動(dòng)作與對(duì)應(yīng)于該可識(shí)別動(dòng)作的任務(wù)之間的映射設(shè)置來(lái)改變。例如,指導(dǎo)區(qū)域3310可以包括指示沿向上/向下方向的拍動(dòng)作對(duì)應(yīng)于執(zhí)行頻道改變的頻道向上/向下的動(dòng)作項(xiàng)目、以及指示沿向左/向右方向的拍動(dòng)作對(duì)應(yīng)于控制音量等級(jí)的音量向上/向下的動(dòng)作項(xiàng)目。
顯示為動(dòng)作輔助信息的至少ー個(gè)動(dòng)作項(xiàng)目3311、3312、3313和3314可以根據(jù)當(dāng)前執(zhí)行的功能來(lái)不同地配置。也就是說(shuō),指導(dǎo)區(qū)域3310上顯示的至少ー個(gè)動(dòng)作項(xiàng)目3311、3312,3313和3314可以根據(jù)電子設(shè)備100的當(dāng)前功能來(lái)不同地配置。例如,與動(dòng)作任務(wù)相對(duì)應(yīng)的動(dòng)作項(xiàng)目中的至少ー個(gè)可以根據(jù)與動(dòng)作輔助信息一起顯示的應(yīng)用、OSD和識(shí)別候選中的至少ー個(gè)來(lái)選擇性地配置??刂茊卧?40可以識(shí)別與顯示為動(dòng)作輔助信息的至少ー個(gè)動(dòng)作項(xiàng)目3311、3312、3313和3314當(dāng)中的第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的第一動(dòng)作。如果附加項(xiàng)目信息存在,則控制單元140可以進(jìn)行控制以顯示關(guān)干與識(shí)別到的第一動(dòng)作相對(duì)應(yīng)的第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息。例如,如果識(shí)別到與動(dòng)作項(xiàng)目3314相對(duì)應(yīng)的抓動(dòng)作,則可以顯示附加項(xiàng)目信息,該附加項(xiàng)目信息包括詢問(wèn)是否重現(xiàn)選定的項(xiàng)目或圖像文件的指導(dǎo)消息、或指示沿向左/向右方向的拍動(dòng)作對(duì)應(yīng)于回答是/否的動(dòng)作項(xiàng)目??刂茊卧?40可以識(shí)別與附加項(xiàng)目信息相對(duì)應(yīng)的第二動(dòng)作??刂茊卧?40可以執(zhí)行動(dòng)作任務(wù)當(dāng)中與第一動(dòng)作項(xiàng)目和識(shí)別到的第二動(dòng)作相對(duì)應(yīng)的任務(wù)。例如,如果第一動(dòng)作項(xiàng)目是動(dòng)作項(xiàng)目3314,而且沿向左方向的拍動(dòng)作被識(shí)別為與附加項(xiàng)目信息(該附加項(xiàng)目信息包括詢問(wèn)是否重現(xiàn)指定的圖像文件的指導(dǎo)消息和指示沿向左/向右方向的拍動(dòng)作對(duì)應(yīng)于回答是/否的動(dòng)作項(xiàng)目)相對(duì)應(yīng)的第二動(dòng)作,則重現(xiàn)指定的圖像文件。如上所述,關(guān)于第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息可以是用于指導(dǎo)第二動(dòng)作以詢問(wèn)是否執(zhí)行與第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的任務(wù)或者額外獲取執(zhí)行任務(wù)所需的信息的信息。如果在動(dòng)作識(shí)別時(shí)出現(xiàn)錯(cuò)誤,則可以顯示指示錯(cuò)誤的動(dòng)作輔助信息。例如,動(dòng)作輔助信息可以包括指導(dǎo)信息“姿勢(shì)未被識(shí)別。請(qǐng)重新輸入?!?、或者與指示重新輸入的文本相映射的手掌圖像。此外,動(dòng)作輔助信息可以包括指導(dǎo)消息“現(xiàn)在無(wú)法識(shí)別雙手。”、或者指導(dǎo)消息“只在‘Web瀏覽器’、‘查看照片(View Photo)’、‘谷歌地圖應(yīng)用’中可用”??梢詧?zhí)行識(shí)別雙手,以響應(yīng)于使雙手彼此遠(yuǎn)離或?qū)㈦p手彼此拉近的動(dòng)作,來(lái)執(zhí)行放大屏幕或縮小屏幕的任務(wù)。此外,指示錯(cuò)誤的圖像或文本可以作為動(dòng)作輔助信息的一部分顯示在模式顯示區(qū)域上。下文中,將參照?qǐng)D64至圖66解釋用于按照電子設(shè)備100的語(yǔ)音識(shí)別或動(dòng)作識(shí)別提供反饋的用戶接ロ(UI)。如圖64所示,在語(yǔ)音任務(wù)模式中,可以顯示包括指導(dǎo)區(qū)域810和模式顯示區(qū)域820的語(yǔ)音輔助信息。指導(dǎo)區(qū)域810和模式顯示區(qū)域820可以以使指導(dǎo)區(qū)域810和模式顯示區(qū)域820看起來(lái)像它們從屏幕下端升起一祥的視覺(jué)效果顯示。例如,指導(dǎo)區(qū)域810和模式顯示區(qū)域820可以以動(dòng)畫(huà)形式顯示預(yù)定時(shí)間(例如,3秒)。例如,指導(dǎo)區(qū)域810和模式顯示區(qū)域820的一部分從下端迅速上升,然后緩慢上升。當(dāng)指導(dǎo)區(qū)域810和模式顯示區(qū)域820如圖64所示完全顯示時(shí),上升的動(dòng)畫(huà)結(jié)束。當(dāng)電子設(shè)備100進(jìn)入動(dòng)作任務(wù)模式吋,動(dòng)作輔助信息可以以上述動(dòng)畫(huà)形式顯示。如果所顯示的特定模式的n消失或者如果模式改變?yōu)樘囟J?,則可以輸出除了上述視覺(jué)效果以外的各種視覺(jué)或聽(tīng)覺(jué)效果。如果電子設(shè)備100識(shí)別到與第一語(yǔ)音項(xiàng)目相對(duì)應(yīng)的第一語(yǔ)音,則電子設(shè)備100可以按照第一語(yǔ)音的識(shí)別精度提供與識(shí)別精度的等級(jí)相對(duì)應(yīng)的視覺(jué)反饋和聽(tīng)覺(jué)反饋中的至少ー個(gè)。如果電子設(shè)備100識(shí)別到與第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的第一動(dòng)作,則電子設(shè)備100可以按照第一動(dòng)作的識(shí)別精度提供與識(shí)別精度的等級(jí)相對(duì)應(yīng)的視覺(jué)反饋和聽(tīng)覺(jué)反饋中的至少ー個(gè)。在這里,識(shí)別精度可以指示這樣的等級(jí),基于該等級(jí)確定第一語(yǔ)音(或第一動(dòng)作)是否是電子設(shè)備100可識(shí)別的語(yǔ)音(或動(dòng)作),或者可以指示這樣的等級(jí),基于該等級(jí)辨別識(shí)別到的語(yǔ)音(或動(dòng)作)是否對(duì)應(yīng)于預(yù)先設(shè)置的命令(或者預(yù)先設(shè)置的動(dòng)作)之一。識(shí)別精度可以是根據(jù)辨別出與識(shí)別到的語(yǔ)音或動(dòng)作相對(duì)應(yīng)的任務(wù)所花費(fèi)的時(shí)間而變化的指標(biāo)(index)。例如,如果識(shí)別到作為對(duì)應(yīng)于語(yǔ)音項(xiàng)目815的語(yǔ)音的“智能中心”,則電子設(shè)備100可以通過(guò)推測(cè)地(stochastically)計(jì)算將該語(yǔ)音辨別為指導(dǎo)區(qū)域810中所包括的至少ー個(gè)語(yǔ)音命令811、812、813、814、815、816、817和818之一的能力來(lái)確定識(shí)別精度。電子設(shè)備100可以將識(shí)別精度與預(yù)先設(shè)置的閾值相比較,并且可以根據(jù)識(shí)別精度是高于還是低于預(yù)先設(shè)置的閾值來(lái)不同地顯示視覺(jué)效果。例如,如圖65所示,根據(jù)語(yǔ)音識(shí)別的精度,可以在指示語(yǔ)音識(shí)別模式的模式顯示區(qū)域6520中的圖像的背景部分上顯示沿順時(shí)針?lè)较蛐D(zhuǎn)的動(dòng)畫(huà)。如果識(shí)別精度低于閾值,則動(dòng)畫(huà)的圖像的旋轉(zhuǎn)速度慢,如果識(shí)別精度高于閾值,則圖像的旋轉(zhuǎn)速度快。當(dāng)根據(jù)識(shí)別精度提供上述視覺(jué)反饋時(shí),也可以提供聽(tīng)覺(jué)反饋。在模式顯示區(qū)域820上作為視覺(jué)反饋顯示的動(dòng)畫(huà)將顯示一段時(shí)間,直到識(shí)別到與語(yǔ)音項(xiàng)目相對(duì)應(yīng)的語(yǔ)音之后驅(qū)動(dòng)并顯示圖66的智能中心6600為止,而且動(dòng)畫(huà)可以與識(shí)別精度無(wú)關(guān)。如果電子設(shè)備100識(shí)別到與第一語(yǔ)音項(xiàng)目相對(duì)應(yīng)的第一語(yǔ)音,則電子設(shè)備100可以提供指示第一語(yǔ)音項(xiàng)目以及與第一語(yǔ)音項(xiàng)目相對(duì)應(yīng)的任務(wù)中的至少ー個(gè)的視覺(jué)反饋或聽(tīng)覺(jué)反饋。如果電子設(shè)備100識(shí)別到與第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的第一動(dòng)作,則電子設(shè)備100可以提供指示第一動(dòng)作項(xiàng)目以及與第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的任務(wù)中的至少ー個(gè)的視覺(jué)反饋或聽(tīng)覺(jué)反饋。例如,如果識(shí)別到作為與語(yǔ)音項(xiàng)目815對(duì)應(yīng)的語(yǔ)音的“智能中心”,則“智能中心”可以顯示在指示語(yǔ)音項(xiàng)目815或者對(duì)應(yīng)于語(yǔ)音項(xiàng)目815的任務(wù)的反饋區(qū)域6530中,如圖65所示。視覺(jué)反饋可以在屏幕的預(yù)定位置上顯示,而不限制為反饋區(qū)域6530。另外,聽(tīng)覺(jué)反饋“您說(shuō)的是智能中心?!笨梢耘c顯示在反饋區(qū)域6530中的視覺(jué)反饋一起被輸出。如果識(shí)別到作為與項(xiàng)目813對(duì)應(yīng)的動(dòng)作的向右方向的拍動(dòng)作,則電子設(shè)備100可以在反饋區(qū)域6530上顯示視覺(jué)反饋(例如,“您的操作為頻道向上”),其指示與動(dòng)作項(xiàng)目之一相對(duì)應(yīng)的任務(wù),或者可以進(jìn)行控制以使用電子設(shè)備100的文本到語(yǔ)音(text tospeech, TTS)模塊(未示出)來(lái)輸出聽(tīng)覺(jué)反饋。圖67至圖69是示出根據(jù)各種示范性實(shí)施例的、解釋電子設(shè)備的控制方法的流程圖,該電子設(shè)備提供語(yǔ)音輔助信息和動(dòng)作輔助信息。圖67是根據(jù)示范性實(shí)施例的、解釋電子設(shè)備100的控制方法的流程圖。電子設(shè)備100可以使用語(yǔ)音識(shí)別模塊或動(dòng)作識(shí)別模塊之一識(shí)別用戶輸入(語(yǔ)音或動(dòng)作)(S6710)。用戶語(yǔ)音可以通過(guò)麥克風(fēng)輸入并且可以由語(yǔ)音識(shí)別模塊識(shí)別輸入的語(yǔ)音,而且用戶動(dòng)作可以由照相機(jī)拍攝,而且拍攝的動(dòng)作可以由動(dòng)作識(shí)別模塊識(shí)別。電子設(shè)備100按照接收到的用戶輸入來(lái)執(zhí)行語(yǔ)音任務(wù)或動(dòng)作任務(wù)之ー(S6720)。也就是說(shuō),電子設(shè)備100可以按照語(yǔ)音任務(wù)模式和動(dòng)作任務(wù)模式中的所指定的模式進(jìn)行操作。例如,如果識(shí)別到語(yǔ)音啟動(dòng)命令或動(dòng)作啟動(dòng)命令,則與識(shí)別到的啟動(dòng)命令相對(duì)應(yīng)的模式被指定。語(yǔ)音任務(wù)模式是按照識(shí)別到的語(yǔ)音執(zhí)行第一任務(wù)(即,語(yǔ)音任務(wù))中的至少ー個(gè)的模式,而且動(dòng)作任務(wù)模式是按照識(shí)別到的動(dòng)作執(zhí)行第二任務(wù)(即,動(dòng)作任務(wù))中的至少ー個(gè)的模式。語(yǔ)音任務(wù)指示按照識(shí)別到的語(yǔ)音執(zhí)行的任務(wù),而且動(dòng)作任務(wù)指示按照識(shí)別到的動(dòng)作執(zhí)行的任務(wù)。語(yǔ)音任務(wù)和動(dòng)作任務(wù)可以彼此不同。圖68和圖69是示出根據(jù)示范性實(shí)施例的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100可以辨別出語(yǔ)音任務(wù)模式和動(dòng)作任務(wù)模式中的哪ー個(gè)被指定(S6805)。雖然在本示范性實(shí)施例中只顯示語(yǔ)音任務(wù)模式或動(dòng)作任務(wù)模式,但是可辨別的模式還可以包括電子設(shè)備100由遙控器控制的模式。如果動(dòng)作任務(wù)模式被指定,則電子設(shè)備100進(jìn)入圖69的操作S6910,并根據(jù)本示范性實(shí)施例繼續(xù)電子設(shè)備100的控制操作。如果語(yǔ)音任務(wù)模式被指定,則電子設(shè)備100可以在語(yǔ)音任務(wù)模式中顯示用于執(zhí)行第一任務(wù)的語(yǔ)音輔助信息(S6810),在語(yǔ)音任務(wù)模式中,按照識(shí)別到的語(yǔ)音執(zhí)行第一任務(wù)中的至少ー個(gè)。電子設(shè)備100可以識(shí)別與顯示為語(yǔ)音輔助信息的至少ー個(gè)語(yǔ)音項(xiàng)目當(dāng)中的第一語(yǔ)音項(xiàng)目相對(duì)應(yīng)的第一語(yǔ)音(S6815)。電子設(shè)備100可以確定關(guān)于與識(shí)別到的第一語(yǔ)音相對(duì)應(yīng)的第一語(yǔ)音項(xiàng)目的附加項(xiàng)目信息是否存在(S6820)。如果關(guān)于第一語(yǔ)音項(xiàng)目的附加項(xiàng)目信息不存在,則電子設(shè)備100可以執(zhí)行與第一語(yǔ)音項(xiàng)目相對(duì)應(yīng)的任務(wù)(S6825)。此外,如果需要改變語(yǔ)音輔助信息,則電子設(shè)備100可以顯示改變的語(yǔ)音輔助信息。例如,如果識(shí)別到作為與語(yǔ)音項(xiàng)目813的語(yǔ)音相對(duì)應(yīng)的“靜音”,則電子設(shè)備100可以執(zhí)行靜音,將語(yǔ)音項(xiàng)目813改變?yōu)檎Z(yǔ)音項(xiàng)目2213并顯示改變的語(yǔ)音輔助信息,如圖22所示。如果關(guān)于第一語(yǔ)音項(xiàng)目的附加項(xiàng)目信息存在,則電子設(shè)備100可以顯示關(guān)于與識(shí)別到的第一語(yǔ)音相對(duì)應(yīng)的第一語(yǔ)音項(xiàng)目的附加項(xiàng)目信息(S6830)。例如,如果識(shí)別到作為與該語(yǔ)音項(xiàng)目相對(duì)應(yīng)的語(yǔ)音的“頻道”,則可以顯示包括指導(dǎo)消息或話語(yǔ)示例的附加項(xiàng)目信
o電子設(shè)備100可以識(shí)別與附加項(xiàng)目信息相對(duì)應(yīng)的第二語(yǔ)音(S6835)。電子設(shè)備100可以執(zhí)行第一任務(wù)當(dāng)中與第一語(yǔ)音項(xiàng)目和識(shí)別到的第二語(yǔ)音相對(duì)應(yīng)的任務(wù)(S6840)。例如,如果第一語(yǔ)音項(xiàng)目是語(yǔ)音項(xiàng)目812而且第二語(yǔ)音是“七”,則電子設(shè)備100可以執(zhí)行頻道快捷切換,以便將當(dāng)前頻道改變?yōu)榫哂蓄l道標(biāo)識(shí)符7的頻道。如果動(dòng)作任務(wù)模式被指定,則電子設(shè)備100可以在動(dòng)作任務(wù)模式中顯示用于執(zhí)行第二任務(wù)的動(dòng)作輔助信息(圖69的S6910),在動(dòng)作任務(wù)模式中,按照識(shí)別到的動(dòng)作執(zhí)行第ニ任務(wù)中的至少ー個(gè)。電子設(shè)備100可以識(shí)別與顯示為動(dòng)作輔助信息的至少ー個(gè)動(dòng)作項(xiàng)目當(dāng)中的第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的第一動(dòng)作(S6915)。電子設(shè)備100可以確定關(guān)于與識(shí)別到的第一動(dòng)作相對(duì)應(yīng)的第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息是否存在(S6920)。如果關(guān)于第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息不存在,則電子設(shè)備100可以執(zhí)行與第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的任務(wù)(S6925)。例如,如果識(shí)別到作為與圖33中的動(dòng)作項(xiàng)目3313相對(duì)應(yīng)的動(dòng)作的向右方向的拍動(dòng)作,則電子設(shè)備100可以根據(jù)頻道向上(channel-up)將當(dāng)前頻道(頻道 6)改變?yōu)橄乱粋€(gè)頻道(頻道7),根據(jù)預(yù)先設(shè)置的順序下一個(gè)頻道位于當(dāng)前頻道(頻道6)之后。此外,如果需要改變動(dòng)作輔助信息,則電子設(shè)備100可以顯示改變的動(dòng)作輔助信息。
如果關(guān)于第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息存在,則電子設(shè)備100可以顯示關(guān)于與識(shí)別到的第一動(dòng)作相對(duì)應(yīng)的第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息(S6930)。例如,如果識(shí)別到與動(dòng)作項(xiàng)目相對(duì)應(yīng)的抓動(dòng)作,則可以顯示附加項(xiàng)目信息,該附加項(xiàng)目信息包括詢問(wèn)是否重現(xiàn)選定的項(xiàng)目或圖像文件的指導(dǎo)消息、或指示沿向左/向右方向的拍動(dòng)作對(duì)應(yīng)于回答是/否的動(dòng)作項(xiàng)目。電子設(shè)備100可以識(shí)別與附加項(xiàng)目信息相對(duì)應(yīng)的第二動(dòng)作(S6935)。電子設(shè)備100可以執(zhí)行第二任務(wù)當(dāng)中與第一動(dòng)作項(xiàng)目和識(shí)別到的第二動(dòng)作相對(duì)應(yīng)的任務(wù)(S6940)。例如,如果第一動(dòng)作項(xiàng)目是用于重現(xiàn)圖像的動(dòng)作項(xiàng)目,而且第二動(dòng)作是沿向左方向的拍動(dòng)作,則電子設(shè)備100可以重現(xiàn)指定的圖像文件??刂茊卧?40可以使用UI處理模塊130j來(lái)區(qū)別地顯示可通過(guò)語(yǔ)音識(shí)別控制的內(nèi)容的可運(yùn)行圖標(biāo)以及不可通過(guò)語(yǔ)音識(shí)別控制的內(nèi)容的可運(yùn)行圖標(biāo)??刂茊卧?40可以使用存儲(chǔ)在電子設(shè)備100中的內(nèi)容的首標(biāo)(未示出)或者內(nèi)容中包括的単獨(dú)配置文件(未示出)來(lái)確定語(yǔ)音識(shí)別是否支持該內(nèi)容。如果確定內(nèi)容可通過(guò)語(yǔ)音識(shí)別控制,則控制単元140使用UI處理模塊130j來(lái)將存儲(chǔ)在存儲(chǔ)單元中的附加圖標(biāo)與內(nèi)容的原始可運(yùn)行圖標(biāo)相結(jié)合,并顯示結(jié)合的圖標(biāo)?;陲@示屏幕上顯示的附加圖標(biāo)的存在,用戶可以知道內(nèi)容可通過(guò)語(yǔ)音識(shí)別控制。多個(gè)附加圖標(biāo)可以存儲(chǔ)在存儲(chǔ)單元130中。用戶可以通過(guò)配置將附加圖標(biāo)改變?yōu)榕c原始可運(yùn)行圖標(biāo)相結(jié)合。此外,控制單元140可以使用UI處理模塊130j來(lái)區(qū)別地顯示可通過(guò)語(yǔ)音識(shí)別控制的內(nèi)容的名稱(chēng)以及不可通過(guò)語(yǔ)音識(shí)別控制的內(nèi)容的名稱(chēng),例如,通過(guò)加下劃線并以粗體顯示名稱(chēng)?;诩酉聞澗€并以粗體顯示的可運(yùn)行圖標(biāo)的名稱(chēng),用戶可以知道內(nèi)容可通過(guò)語(yǔ)音識(shí)別控制??刂茊卧?40可以使用UI處理模塊130 j、與不可通過(guò)語(yǔ)音識(shí)別控制的內(nèi)容的可運(yùn)行圖標(biāo)和該可運(yùn)行圖標(biāo)的名稱(chēng)不同地顯示可通過(guò)語(yǔ)音識(shí)別控制的內(nèi)容的可運(yùn)行圖標(biāo)和該可運(yùn)行圖標(biāo)的名稱(chēng)??刂茊卧?40或內(nèi)容可以區(qū)別地顯示在運(yùn)行的內(nèi)容的UI上顯示的工具條的菜單(例如,菜単“下ー個(gè)” “前ー個(gè)”或“打開(kāi)”)當(dāng)中的、可通過(guò)語(yǔ)音識(shí)別控制的菜單和不可通過(guò)語(yǔ)音識(shí)別控制的菜單。下文中,將參照?qǐng)D70至圖79解釋根據(jù)各種示范性實(shí)施例的、與不可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)和該可運(yùn)行圖標(biāo)的名稱(chēng)不同地顯示可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)和該可運(yùn)行圖標(biāo)的名稱(chēng)的方法。參照?qǐng)D70,電子設(shè)備100的控制單元140向音頻輸出單元196和顯示單元193的顯示屏幕7000輸出與從廣播接收單元150接收到的廣播信號(hào)相對(duì)應(yīng)的視頻、音頻和控制數(shù)據(jù)(例如,電子節(jié)目指南(EPG))??刂茊卧?40使用語(yǔ)音輸入?yún)g元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m來(lái)識(shí)別由用戶說(shuō)出的語(yǔ)音啟動(dòng)命令(觸發(fā)語(yǔ)音)??刂茊卧?40按照識(shí)別到的語(yǔ)音啟動(dòng)命令(例如,“ Ginny”)改變?yōu)檎Z(yǔ)音任務(wù)模式,在語(yǔ)音任務(wù)模式中,電子設(shè)備100可通過(guò)語(yǔ)音識(shí)別控制。控制單元140將通過(guò)語(yǔ)音輸入?yún)g元110和語(yǔ)音識(shí)別模塊130k識(shí)別到的語(yǔ)音啟動(dòng)命令與預(yù)存在語(yǔ)音數(shù)據(jù)庫(kù)130m中的語(yǔ)音啟動(dòng)命令相比較。如果根據(jù)比較的結(jié)果該語(yǔ)音被識(shí)別為語(yǔ)音啟動(dòng)命令,則電子設(shè)備100在控制單元140的控制下改變?yōu)檎Z(yǔ)音任務(wù)模式。語(yǔ)音數(shù)據(jù)庫(kù)130m可以存儲(chǔ)與可通過(guò)語(yǔ)音輸入單元110和語(yǔ)音識(shí)別模塊130k識(shí)別的語(yǔ)音相對(duì)應(yīng)的第一命令(例如,與“改變?yōu)檎Z(yǔ)音任務(wù)模式”相對(duì)應(yīng)的命令或者與“頻道改變”相對(duì)應(yīng)的命令)。控制單元140可以執(zhí)行與第一命令相對(duì)應(yīng)的電子設(shè)備100的語(yǔ)音任務(wù)。語(yǔ)音啟動(dòng)命令或預(yù)存在語(yǔ)音數(shù)據(jù)庫(kù)130m中的命令可以通過(guò)配置來(lái)改變(例如,可以添加、改變或刪除)。輸入語(yǔ)音啟動(dòng)命令的識(shí)別可以很容易地被本領(lǐng)域普通技術(shù)人員理解。參照?qǐng)D71,控制單元140在顯示圖像的顯示屏幕400上顯示用于執(zhí)行語(yǔ)音任務(wù)模式的語(yǔ)音輔助信息7110。控制單元140可以與顯示的圖像重疊地顯示語(yǔ)音輔助信息7110。控制單元140可以在顯示屏幕400的下部顯示語(yǔ)音輔助信息7110。語(yǔ)音輔助信息7110可以包括命令/指導(dǎo)顯示區(qū)域7111、模式顯示區(qū)域7120和7120a、以及第一反饋顯示區(qū)域7230(參見(jiàn)圖72)。參照?qǐng)D72,第一反饋顯示區(qū)域7230可以在模式顯示區(qū)域7120的ー側(cè)顯示。第一反饋顯示區(qū)域7230可以包括第一視覺(jué)反饋7230a (參見(jiàn)圖72)??刂茊卧?40向電子設(shè)備100的揚(yáng)聲器161輸出識(shí)別到的第一命令,從而為用戶提供第一聽(tīng)覺(jué)反饋(未示出)。電子設(shè)備100可以提供視覺(jué)反饋和聽(tīng)覺(jué)反饋之一或者提供視覺(jué)反饋和聽(tīng)覺(jué)反饋二者。參照?qǐng)D73,如果識(shí)別到第一命令,則控制単元140顯示與第一命令相對(duì)應(yīng)的內(nèi)容列表(下文中,稱(chēng)為智能中心7300)。智能中心7300是用作由電子設(shè)備100支持的各種功能的中心的UI。智能中心7300是顯示與由電子設(shè)備100支持的各種功能(例如,觀看運(yùn)動(dòng)圖像的功能、聽(tīng)音樂(lè)的功能、訪問(wèn)互聯(lián)網(wǎng)的功能)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的W。此外,智能中心7300是顯示電子設(shè)備100的存儲(chǔ)單元130中所存儲(chǔ)的內(nèi)容(例如,照片、音樂(lè)和運(yùn)動(dòng)圖像)的可運(yùn)行圖標(biāo)、與從外部源接收到的內(nèi)容(例如,照片、音樂(lè)和運(yùn)動(dòng)圖像)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)、以及與可運(yùn)行的應(yīng)用(例如,web瀏覽器)的可運(yùn)行圖標(biāo)的UI。智能中心7300可以包括搜索區(qū)域7310、廣播區(qū)域7320、您的視頻區(qū)域7330、信息顯示區(qū)域7340、應(yīng)用區(qū)域7350、推薦區(qū)域7360和應(yīng)用列表區(qū)域7370當(dāng)中的多個(gè)區(qū)域,搜索區(qū)域7310使用語(yǔ)音(例如,語(yǔ)音任務(wù)模式)或動(dòng)作(例如,動(dòng)作任務(wù)模式)搜索各種內(nèi)容、應(yīng)用或互聯(lián)網(wǎng)信息,廣播區(qū)域7320位于搜索區(qū)域7310的一側(cè)并顯示縮小的(down-sized)廣播圖像,您的視頻區(qū)域7330位于搜索區(qū)域7310的下方并顯示與存儲(chǔ)在存儲(chǔ)單元130中的運(yùn)動(dòng)圖像相對(duì)應(yīng)的可運(yùn)行圖標(biāo),信息顯示區(qū)域7340位于搜索區(qū)域7310的下方并顯示來(lái)自從電子設(shè)備100的制造商的通知或廣告,應(yīng)用區(qū)域7350位于搜索區(qū)域7310的下方并顯示與由電子設(shè)備100的制造商提供的各種免費(fèi)或付費(fèi)服務(wù)相對(duì)應(yīng)的應(yīng)用的可運(yùn)行圖標(biāo),推薦區(qū)域7360位于搜索區(qū)域7310的下方并顯示電子設(shè)備100的制造商所推薦的服務(wù),應(yīng)用列表區(qū)域7370位于搜索區(qū)域7310的下方并顯示與可在電子設(shè)備100中運(yùn)行的應(yīng)用相對(duì)應(yīng)的可運(yùn)行圖標(biāo)。本領(lǐng)域普通技術(shù)人員應(yīng)該理解的是,智能中心7300上顯示的多個(gè)區(qū)域7310至7370可以根據(jù)電子設(shè)備的性能和功能進(jìn)行添加或刪除。智能中心7300可以顯示與語(yǔ)音任務(wù)模式相對(duì)應(yīng)的語(yǔ)音輔助信息7110。此外,智能中心7300可以顯示與動(dòng)作任務(wù)模式相對(duì)應(yīng)的動(dòng)作輔助信息7720。語(yǔ)音輔助信息7110或動(dòng)作輔助信息7720 (見(jiàn)圖77)可以重疊在智能中心7300上。參照?qǐng)D73,智能中心7300顯示與語(yǔ)音任務(wù)模式相對(duì)應(yīng)的語(yǔ)音輔助信息7110。在語(yǔ)音任務(wù)模式中,智能中心7300與不可通過(guò)語(yǔ)音識(shí)別控制的內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)(例如,7372)不同地顯示與可通過(guò)語(yǔ)音識(shí)別控制的內(nèi)容(例如,應(yīng)用和運(yùn)動(dòng)圖像)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)(例如,7371)。與可通過(guò)語(yǔ)音識(shí)別控制的內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)7371可以是與可通過(guò)語(yǔ)音識(shí)別控制的內(nèi)容相對(duì)應(yīng)的原始可運(yùn)行圖標(biāo)7371a和位于原始可運(yùn)行圖標(biāo)7371a —側(cè)的附加圖標(biāo)7371b (靜止圖像、運(yùn)動(dòng)圖像和文本之一)的結(jié)合。附加圖標(biāo)7371b可以與原始可運(yùn)行圖標(biāo)7371a重疊地顯示,或者與原始可運(yùn)行圖標(biāo)7371a分開(kāi)地顯示。根據(jù)語(yǔ)音是否是可識(shí)別的,將附加圖標(biāo)添加到與內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的ー側(cè)。然而,這僅僅是示例。本領(lǐng)域普通技術(shù)人員應(yīng)該理解,根據(jù)語(yǔ)音是否是可識(shí)別的,與內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)可以以各種方式區(qū)別地顯示,例如,通過(guò)改變附加圖標(biāo)7371b的位置或大小。與可通過(guò)語(yǔ)音識(shí)別控制的內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱(chēng)7371c和與不可通過(guò)語(yǔ)音識(shí)別控制的內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱(chēng)7372a可以被不同地顯示(例如,加下劃線以及粗體)。然而,根據(jù)語(yǔ)音是否可識(shí)別通過(guò)為名稱(chēng)加下劃線并插入粗體字體來(lái)區(qū)分與內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱(chēng)僅僅是示例。本領(lǐng)域普通技術(shù)人員應(yīng)該理解,根據(jù)語(yǔ)音是否是可識(shí)別的,可以以各種方式區(qū)別地顯示與內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱(chēng),例如,通過(guò)改變字體或顔色。如果可運(yùn)行圖標(biāo)的名稱(chēng)的字母的數(shù)量大于智能中心7300中定義的字母的數(shù)量(例如,15個(gè)英文本母和8個(gè)韓文本母)(例如,名稱(chēng)7373c),則只可以顯示可運(yùn)行圖標(biāo)的名稱(chēng)的一部分。例如,無(wú)法顯示的可運(yùn)行圖標(biāo)的名稱(chēng)的其余部分可以顯示為省略號(hào)。智能中心7300的語(yǔ)音輔助信息7110上顯示的命令可以改變。如果響應(yīng)于第一命令語(yǔ)音而顯示智能中心7300,則顯示返回到在顯示智能中心7300之前顯示的前一個(gè)圖像的命令(返回7111i)。返回命令可以添加到語(yǔ)音輔助信息7110 (例如,共顯示9個(gè)命令),或可以代替已顯示的命令之一(例如,“全部”命令)(例如,共顯示8個(gè)命令))??刂茊卧?40使用語(yǔ)音輸入?yún)g元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別到由用戶說(shuō)出的第二命令語(yǔ)音(例如,應(yīng)用7371c的名稱(chēng),“令人興奮的電子書(shū)”)??刂茊卧?40將通過(guò)語(yǔ)音輸入?yún)g元110和語(yǔ)音識(shí)別模塊130k識(shí)別到的第二命令語(yǔ)音與預(yù)存在語(yǔ)音數(shù)據(jù)庫(kù)130m中的第二命令語(yǔ)音相比較。如果根據(jù)比較的結(jié)果將該語(yǔ)音識(shí)別為第二命令,則控制単元140在第一反饋顯示區(qū)域7230上顯示與識(shí)別到的第二命令相對(duì)應(yīng)的第三視覺(jué)反饋(例如,“您說(shuō)的是令人興奮的電子書(shū)”(未示出))。第三視覺(jué)反饋(未示出)可以被提供預(yù)定時(shí)間(例如,500毫秒)。該預(yù)定時(shí)間可以通過(guò)配置來(lái)改變??刂茊卧?40向電子設(shè)備100的揚(yáng)聲器161輸出識(shí)別到的第二命令,從而為用戶提供第三聽(tīng)覺(jué)反饋(未示出)。如果根據(jù)比較的結(jié)果未將語(yǔ)音識(shí)別為第二命令,則控制單元140在第一反饋顯示區(qū)域7230上顯示第四視覺(jué)反饋(例如,“請(qǐng)重說(shuō)”(未示出))??刂茊卧?40可以提供第四聽(tīng)覺(jué)反饋(例如,“請(qǐng)重說(shuō)”(未示出))以識(shí)別第二命令語(yǔ)音。如果多個(gè)應(yīng)用的名稱(chēng)對(duì)應(yīng)于識(shí)別到的第二命令,則控制単元140可以在智能中心7300上顯示候選彈出窗ロ 7314,候選彈出窗ロ 7314顯示多個(gè)應(yīng)用的名稱(chēng)。參照?qǐng)D74,如果通過(guò)語(yǔ)音輸入?yún)g元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別到第二命令(例如,包括應(yīng)用的名稱(chēng)的一部分,“令人興奮的”),則控制単元140可以在候選彈出窗ロ 7414上顯示與第二命令相對(duì)應(yīng)的多個(gè)應(yīng)用的列表。例如,候選彈出窗ロ 7414顯示①令人興奮的電子書(shū)7414a②令人興奮的鼓樂(lè)節(jié)7414b。如果在智能中心7300上顯示候選彈出窗ロ 7414,則在智能中心7300的下部顯示的命令/指導(dǎo)顯示區(qū)域7111的命令被改變。例如,命令/指導(dǎo)顯示區(qū)域7111在模式顯示區(qū)域7112的左部顯示“說(shuō)出您希望選擇的項(xiàng)目的號(hào)碼”7111j,并且在右部顯示“示例>l,27111k和返回7111i”。如果通過(guò)語(yǔ)音輸入單元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別到與號(hào)碼(例如,“I”)相對(duì)應(yīng)的語(yǔ)音,則控制單元140在候選彈出窗ロ 7414上選擇①令人興奮的電子書(shū)7414a??刂茊卧?40可以在候選彈出窗ロ 7414上區(qū)別地顯示選中的應(yīng)用的名稱(chēng)與未選中的應(yīng)用的名稱(chēng)。此外,如果識(shí)別到與候選彈出窗ロ 7414上顯示的應(yīng)用的完整名稱(chēng)相對(duì)應(yīng)的語(yǔ)音,則控制単元140可以在候選彈出窗ロ 7414上區(qū)別地顯示①令人興奮的電子書(shū)。參照?qǐng)D75,控制單元140運(yùn)行與通過(guò)語(yǔ)音輸入單元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別到的第二命令(例如,“令人興奮的電子書(shū)”)相對(duì)應(yīng)的應(yīng)用令人興奮的電子書(shū)??刂茊卧?40顯示正在運(yùn)行的令人興奮的電子書(shū)的M7500??刂茊卧?40與智能中心7300重疊地顯示令人興奮的電子書(shū)的UI7500。控制單元140可以通過(guò)利用M7500代替智能中心7300來(lái)以全屏大小顯示令人興奮的電子書(shū)的瓜7500。令人興奮的電子書(shū)的n 7500顯示與存儲(chǔ)在電子設(shè)備100的存儲(chǔ)單元中的多個(gè)電子書(shū)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)7501至7504、以及可運(yùn)行圖標(biāo)的名稱(chēng)7501a至7504a。根據(jù)語(yǔ)音是否是可識(shí)別的,控制單元140可以彼此不同地顯示與多個(gè)電子書(shū)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱(chēng)7501a至7504a。例如,控制單元140與不可通過(guò)語(yǔ)音識(shí)別控制的電子書(shū)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱(chēng)7502a不同地顯示可通過(guò)語(yǔ)音識(shí)別控制的電子書(shū)相對(duì)應(yīng)的熱點(diǎn)圖標(biāo)(hoticon)的名稱(chēng)7501a。此外,控制單元140或應(yīng)用(令人興奮的電子書(shū))可以區(qū)別地顯示令人興奮的電子書(shū)的工具區(qū)域(未示出)上的菜單(例如,菜單“下ー個(gè)” “前ー個(gè)”或“打開(kāi)”(未示出))當(dāng)中的、可通過(guò)語(yǔ)音識(shí)別控制的菜單和不可通過(guò)語(yǔ)音識(shí)別控制的菜単。通過(guò)為名稱(chēng)加下劃線并插入粗體字體來(lái)區(qū)分與可通過(guò)語(yǔ)音識(shí)別控制的電子書(shū)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱(chēng)7501a僅僅是示例。本領(lǐng)域普通技術(shù)人員應(yīng)該理解,根據(jù)語(yǔ)音是否是可識(shí)別的,與電子書(shū)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱(chēng)可以以各種方式區(qū)別地顯示,例如,通過(guò)改變字體或顔色??刂茀g元140可以通過(guò)網(wǎng)絡(luò)接ロ単元180從外部服務(wù)器下載可通過(guò)語(yǔ)音識(shí)別的電子書(shū)。如果通過(guò)語(yǔ)音輸入?yún)g元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別到與可通過(guò)語(yǔ)音識(shí)別控制的電子書(shū)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱(chēng)7501a,則控制単元140運(yùn)行并顯示電子書(shū)7501。用戶可以控制通過(guò)語(yǔ)音識(shí)別控制正在顯示的電子書(shū)(例如,改變頁(yè))??刂茊卧?40使用動(dòng)作輸入單元120、動(dòng)作識(shí)別模塊1301和動(dòng)作數(shù)據(jù)庫(kù)130n識(shí)別到動(dòng)作啟動(dòng)命令7600。參照?qǐng)D76,動(dòng)作啟動(dòng)命令7600是在動(dòng)作輸入單元120的對(duì)面水平搖動(dòng)用戶張開(kāi)的手指3到4次的動(dòng)作??刂茊卧?40根據(jù)識(shí)別到的動(dòng)作啟動(dòng)命令將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,電子設(shè)備100可通過(guò)動(dòng)作識(shí)別控制。控制單元140將通過(guò)動(dòng)作輸入單元120和動(dòng)作識(shí)別模塊1301識(shí)別到的動(dòng)作啟動(dòng)命令與預(yù)存在動(dòng)作數(shù)據(jù)庫(kù)130n中的動(dòng)作啟動(dòng)命令相比較。如果根據(jù)比較的結(jié)果將該動(dòng)作識(shí)別為動(dòng)作啟動(dòng)命令,則電子設(shè)備100被控制單元140從語(yǔ)音任務(wù)模式改變?yōu)閯?dòng)作任務(wù)模式。動(dòng)作數(shù)據(jù)庫(kù)130n可以存儲(chǔ)與可通過(guò)動(dòng)作輸入單元120和動(dòng)作識(shí)別模塊1301識(shí)別的動(dòng)作相對(duì)應(yīng)的第二命令(例如,與“前一個(gè)”相對(duì)應(yīng)的命令或者與“回放”相對(duì)應(yīng)的命令)。控制單元140可以執(zhí)行與第二命令相對(duì)應(yīng)的電子設(shè)備100的動(dòng)作任務(wù)。預(yù)存在動(dòng)作數(shù)據(jù)庫(kù)130n中的動(dòng)作啟動(dòng)命令可以通過(guò)配置來(lái)改變(例如,可以添加、修改或刪除)。
智能中心顯示動(dòng)作輔助信息,而且相同地顯示可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)和不可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)。參照?qǐng)D77,控制單元140在智能中心7300上顯示與動(dòng)作任務(wù)模式相對(duì)應(yīng)的動(dòng)作輔助信息7720和光標(biāo)7725??刂茊卧?40使動(dòng)作輔助信息7720重疊在智能中心7300上??刂茊卧?40在智能中心7300的下部顯示動(dòng)作輔助信息7720。動(dòng)作輔助信息7720可以包括動(dòng)作/指導(dǎo)顯示區(qū)域7721、模式顯示區(qū)域7722和第二反饋顯示區(qū)域(未示出)??刂茊卧?40在智能中心7300上顯示動(dòng)作輔助信息7720,而且相同地顯示可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)和不可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)。參照?qǐng)D74,控制單元140使用語(yǔ)音輸入?yún)g元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別到由用戶說(shuō)出的第三命令語(yǔ)音(例如,應(yīng)用的完整名稱(chēng)“令人興奮的鼓節(jié)”、或該名稱(chēng)的一部分)??刂茊卧?40將通過(guò)語(yǔ)音輸入?yún)g元110和語(yǔ)音識(shí)別模塊130k識(shí)別到的第三命令與預(yù)存在語(yǔ)音數(shù)據(jù)庫(kù)130m中的第三命令相比較。如果根據(jù)比較的結(jié)果將該語(yǔ)音識(shí)別為第三命令,則控制単元140在第一反饋顯示區(qū)域7413上顯示與識(shí)別到的第三命令相對(duì)應(yīng)的第六視覺(jué)反饋(例如,“您說(shuō)的是‘令人興奮的鼓節(jié)(未示出))。第六視覺(jué)反饋(未示出)可以被提供預(yù)定時(shí)間(例如,500毫秒)。如果未識(shí)別到第三命令,則控制単元140在第一反饋顯示區(qū)域7413上顯示第七視覺(jué)反饋(例如,“請(qǐng)重說(shuō)”(未示出))??刂茊卧?40可以提供第六聽(tīng)覺(jué)反饋(例如,“請(qǐng)重說(shuō)”(未示出))以識(shí)別第三命令語(yǔ)音。參照?qǐng)D74,如果多個(gè)應(yīng)用的名稱(chēng)對(duì)應(yīng)于第三命令(例如,包括將被選擇的應(yīng)用的名稱(chēng)的一部分,“令人興奮的”),則控制単元140可以在智能中心7400上顯示候選彈出窗ロ7414,候選彈出窗ロ 7414顯示多個(gè)應(yīng)用的名稱(chēng)。如果通過(guò)語(yǔ)音輸入?yún)g元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別到與號(hào)碼(例如,“ 2”)相對(duì)應(yīng)的語(yǔ)音,則控制単元140在候選彈出窗ロ 7414上選擇②令人興奮的鼓節(jié)7414b。參照?qǐng)D78,控制單元140可以運(yùn)行與通過(guò)語(yǔ)音輸入單元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別到的第三命令(例如,“令人興奮的鼓節(jié)”)相對(duì)應(yīng)的應(yīng)用令人興奮的鼓節(jié)。控制單元140顯示正在運(yùn)行令人興奮的鼓節(jié)的瓜7800??刂茊卧?40在智能中心7300上重疊地顯示令人興奮的鼓節(jié)的瓜7800??刂茊卧?40可以通過(guò)利用瓜7800代替智能中心7300來(lái)以全屏大小顯示令人興奮的鼓節(jié)的瓜7800。通過(guò)用戶語(yǔ)音的識(shí)別或遙控器,可以播放令人興奮的鼓節(jié)的瓜7800上顯示的鼓7801至7809。令人興奮的鼓節(jié)上的鼓7801至7809可以通過(guò)動(dòng)作任務(wù)模式中的動(dòng)作識(shí)別(例如,抓動(dòng)作)來(lái)播放。圖79是示出根據(jù)示范性實(shí)施例的、顯示電子設(shè)備的UI的方法的流程圖。打開(kāi)電子設(shè)備100 (S7901)。例如,如果按下位于電子設(shè)備100上的電源按鈕(未示出)、如果選擇位于遙控器上的電子設(shè)備100的電源鍵(未示出)(例如,按下該鍵)、或者如果通過(guò)電子設(shè)備100的語(yǔ)音輸入?yún)g元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別到用戶語(yǔ)音(例如,“接通電源”),則可以打開(kāi)電子設(shè)備100。輸出廣播(S7902)。例如,電子設(shè)備100輸出與從廣播接收單元150接收到的廣播信號(hào)相對(duì)應(yīng)的圖像,如圖70所示。識(shí)別語(yǔ)音啟動(dòng)命令(S7903)。也就是說(shuō),電子設(shè)備100使用語(yǔ)音輸入單元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別由用戶說(shuō)出的語(yǔ)音啟動(dòng)命令。電子設(shè)備100根據(jù)識(shí)別到的語(yǔ)音啟動(dòng)命令將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,在語(yǔ)音任務(wù)模式中,電子設(shè)備100可通過(guò)語(yǔ)音識(shí)別控制。顯示ー組命令(S7904)。例如,電子設(shè)備100在顯示圖像的顯示屏幕7000上顯示與語(yǔ)音任務(wù)模式相對(duì)應(yīng)的ー組命令7110,如圖71所示。識(shí)別第一命令語(yǔ)音(S7905)。具體來(lái)說(shuō),電子設(shè)備100使用語(yǔ)音輸入單元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別由用戶說(shuō)出的第一命令語(yǔ)音(例如,“智能中心)。如果將該語(yǔ)音識(shí)別為第一命令,則電子設(shè)備100在第一反饋顯示區(qū)域7230上顯示與識(shí)別到的第一命令相對(duì)應(yīng)的第一視覺(jué)反饋,如圖72所示。顯示n(S7906)。例如,如果識(shí)別到第一命令,則電子設(shè)備100顯示與第一命令相對(duì)應(yīng)的智能中心7300,如圖73所示。識(shí)別第二命令語(yǔ)音(S7907)。具體來(lái)說(shuō),電子設(shè)備100使用語(yǔ)音輸入單元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別由用戶說(shuō)出的第二命令語(yǔ)音(例如,應(yīng)用7371c的名稱(chēng),“令人興奮的電子書(shū)”)。如果多個(gè)應(yīng)用的名稱(chēng)對(duì)應(yīng)于識(shí)別到的第二命令,則電子設(shè)備100可以顯示候選彈出窗ロ 7414,候選彈出窗ロ 7414顯示多個(gè)應(yīng)用的名稱(chēng),如圖74所示。運(yùn)行第一應(yīng)用(S7908)。例如,電子設(shè)備100運(yùn)行與第二命令相對(duì)應(yīng)的應(yīng)用,令人興奮的電子書(shū),如圖75所示。識(shí)別動(dòng)作啟動(dòng)命令(觸發(fā)動(dòng)作)(S7909)。具體來(lái)說(shuō),電子設(shè)備100使用動(dòng)作輸入?yún)g元120、動(dòng)作識(shí)別模塊1301和動(dòng)作數(shù)據(jù)庫(kù)130n識(shí)別用戶的動(dòng)作啟動(dòng)命令7600。例如,動(dòng)作啟動(dòng)命令7600是在動(dòng)作輸入單元120的對(duì)面水平搖動(dòng)用戶張開(kāi)的手指3到4次的動(dòng)作,如圖76所示。在智能中心上顯示動(dòng)作項(xiàng)目,而且相同地顯示可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)和不可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)(S7910)。例如,電子設(shè)備100在智能中心7300上顯示與動(dòng)作任務(wù)模式相對(duì)應(yīng)的動(dòng)作輔助信息7720和光標(biāo)7725,如圖77所示。如果在操作S7907中沒(méi)有識(shí)別到第二命令,則執(zhí)行操作S7911。識(shí)別第三命令(S7911)??刂茊卧?40使用語(yǔ)音輸入?yún)g元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別由用戶說(shuō)出的第三命令語(yǔ)音。如果多個(gè)應(yīng)用的名稱(chēng)對(duì)應(yīng)于第三命令,則控制單元140可以在智能中心7400上顯示候選彈出窗ロ 7414,候選彈出窗ロ 7414顯示多個(gè)應(yīng)用的名稱(chēng),如圖74所示。運(yùn)行第三應(yīng)用(S7912)。例如,電子設(shè)備100運(yùn)行與通過(guò)語(yǔ)音輸入單元110、語(yǔ)音識(shí)別模塊130k和語(yǔ)音數(shù)據(jù)庫(kù)130m識(shí)別到的第三命令相對(duì)應(yīng)的應(yīng)用令人興奮的鼓節(jié),如圖78所示。如果在操作S7911中沒(méi)有識(shí)別到第三命令,則操作結(jié)束。控制單元140可以向圖像輸出單元190或顯示單元193提供通過(guò)廣播接收單元150接收到的多個(gè)廣播信號(hào)之一和存儲(chǔ)的內(nèi)容之一。顯示單元193可以顯示接收到ー個(gè)廣播信號(hào)或存儲(chǔ)的內(nèi)容。存儲(chǔ)的內(nèi)容包括永久、暫時(shí)(momentarily)或臨時(shí)(temporarily)存儲(chǔ)在電子設(shè)備100中的所有內(nèi)容。例如,內(nèi)容可以永久存儲(chǔ)在電子設(shè)備100的存儲(chǔ)單元130中,直到接收到用戶的刪除請(qǐng)求為止。此外,如果電子設(shè)備100的存儲(chǔ)單元130的一部分用作緩沖區(qū),則內(nèi)容可以暫時(shí)或臨時(shí)存儲(chǔ)在存儲(chǔ)單元130。具體來(lái)說(shuō),如果在實(shí)時(shí)的基礎(chǔ)上將從外部端子輸入單元160或網(wǎng)絡(luò)接ロ單元180輸入的內(nèi)容提供給圖像輸出單元190或顯示單元193,則控制単元140可以將內(nèi)容暫時(shí)或臨時(shí)存儲(chǔ)在存儲(chǔ)單元130的一部分中,從而內(nèi)容的輸入速度與內(nèi)容的輸出速度基本相等??刂茊卧?40可以使用動(dòng)作識(shí)別模塊1301識(shí)別用戶動(dòng)作,并且可以響應(yīng)于識(shí)別到的用戶動(dòng)作而改變所提供的廣播信號(hào)或內(nèi)容的狀態(tài)。如果控制単元140提供廣播信號(hào),則控制單元140可以響應(yīng)于識(shí)別到的用戶動(dòng)作來(lái)控制廣播信號(hào)的音量等級(jí)或者可以提供多個(gè)廣播信號(hào)當(dāng)中的另ー個(gè)廣播信號(hào)。如果控制単元140提供內(nèi)容,則控制単元140可以響應(yīng)于識(shí)別到的用戶動(dòng)作而改變顯示內(nèi)容的屏幕的至少一部分。例如,如果內(nèi)容(例如,包括多個(gè)頁(yè)面的圖像或包括多個(gè)頁(yè)面的文檔)包括多個(gè)頁(yè)面而且多個(gè)頁(yè)面之ー顯示在屏幕上,則控制単元140可以將顯示多個(gè)頁(yè)面之ー的屏幕改變?yōu)轱@示另ー個(gè)頁(yè)面的屏幕。具體來(lái)說(shuō),響應(yīng)于識(shí)別到的用戶動(dòng)作,控制單元140可以將顯示多個(gè)頁(yè)面之一的屏幕改變?yōu)轱@示所述多個(gè)頁(yè)面當(dāng)中的位于該頁(yè)面的上部、下部、左部或右部的頁(yè)面中ー個(gè)頁(yè)面的屏幕。作為另ー個(gè)示例,如果內(nèi)容(例如,網(wǎng)頁(yè))包括ー個(gè)頁(yè)面,則控制單元140可以將顯示頁(yè)面的一部分的屏幕改變?yōu)轱@示頁(yè)面的另一部分的屏幕。此外,控制單元140可以將顯示所提供的內(nèi)容(例如,圖像或運(yùn)動(dòng)圖像)的屏幕改變?yōu)轱@示不同于該內(nèi)容的內(nèi)容的屏幕??刂茊卧?40可以使用語(yǔ)音識(shí)別模塊130k識(shí)別用戶語(yǔ)音,并且可以按照識(shí)別到的用戶語(yǔ)音提供多個(gè)廣播信號(hào)之一。例如,如果通過(guò)語(yǔ)音識(shí)別模塊130k識(shí)別到頻道標(biāo)識(shí)符,則控制単元140可以使用頻道控制模塊130b提供多個(gè)廣播信號(hào)當(dāng)中具有識(shí)別到的頻道標(biāo)識(shí)符的廣播信號(hào)。在另ー個(gè)示范性實(shí)施例中,控制單元140可以響應(yīng)于使用識(shí)別模塊1301識(shí)別到的用戶動(dòng)作而從多個(gè)廣播信號(hào)當(dāng)中選擇ー個(gè)廣播信號(hào)??刂茊卧?40可以向圖像輸出單元190或顯示單元193提供所選擇的廣播信號(hào)。顯示單元193可以顯示所提供的廣播信號(hào)。接下來(lái),控制單元140可以停止向圖像輸出単元190或顯示單元193提供廣播信號(hào)。例如,控制單元140可以響應(yīng)于通過(guò)動(dòng)作識(shí)別模塊1301、語(yǔ)音識(shí)別模塊130k或遙控器接收到的用戶輸入而停止提供廣播信號(hào)??刂茊卧?40可以提供存儲(chǔ)在電子設(shè)備100中的內(nèi)容。當(dāng)控制單元140向顯示單元193提供存儲(chǔ)的內(nèi)容吋,控制單元140可以重新識(shí)別與選擇多個(gè)廣播信號(hào)之一時(shí)的用戶動(dòng)作具有相同形式的用戶動(dòng)作。相同形式的用戶動(dòng)作包括具有基本相同形式的用戶動(dòng)作。例如,如果多個(gè)用戶動(dòng)作的對(duì)象的形式是相同的、該形式的對(duì)象沿相同方向移動(dòng)、而且該形式的對(duì)象的移動(dòng)速度高于預(yù)定速度,則控制単元140可以將該多個(gè)用戶動(dòng)作識(shí)別為相同形式的用戶動(dòng)作。例如,如果選擇一個(gè)廣播信號(hào)的用戶動(dòng)作和重新識(shí)別的用戶動(dòng)作都是拍動(dòng)作而且拍動(dòng)作沿相同方向移動(dòng),則控制単元140可以將選擇ー個(gè)廣播信號(hào)的用戶動(dòng)作和重新識(shí)別的用戶動(dòng)作識(shí)別為相同形式的用戶動(dòng)作。此外,如果選擇一個(gè)廣播信號(hào)的用戶動(dòng)作是沿向上方向的拍動(dòng)作而且改變顯示已提供的內(nèi)容的屏幕的至少一部分的用戶動(dòng)作也是沿向上方向的拍動(dòng)作,則控制單元140可以將這兩個(gè)動(dòng)作識(shí)別為相同形式的用戶動(dòng)作。接下來(lái),控制單元140可以響應(yīng)于重新識(shí)別的用戶動(dòng)作而改變顯示已提供的內(nèi)容的屏幕的至少一部分。
在另ー個(gè)示范性實(shí)施例中,控制單元140可以向圖像輸出單元190或顯示單元193提供第一圖像數(shù)據(jù)??刂茊卧?40可以向音頻輸出単元196提供第一圖像數(shù)據(jù)的音頻數(shù)據(jù)。例如,第一圖像數(shù)據(jù)可以是廣播信號(hào)的圖像數(shù)據(jù),而且第一圖像數(shù)據(jù)的音頻數(shù)據(jù)可以是廣播信號(hào)的音頻數(shù)據(jù)??刂茊卧?40可以響應(yīng)于識(shí)別到的用戶動(dòng)作而控制音頻數(shù)據(jù)的音量等級(jí)。例如,控制單元140可以控制第一圖像數(shù)據(jù)的音頻數(shù)據(jù)的音量等級(jí)。接下來(lái),控制單元140可以停止提供第一圖像數(shù)據(jù)和第一圖像數(shù)據(jù)的音頻數(shù)據(jù),而且可以提供第二圖像數(shù)據(jù)。例如,第二圖像數(shù)據(jù)可以是存儲(chǔ)在電子設(shè)備100中的內(nèi)容的圖像數(shù)據(jù)。接下來(lái),控制單元140可以重新識(shí)別與已識(shí)別的用于控制音頻數(shù)據(jù)的音量等級(jí)的用戶動(dòng)作具有基本相同的形式的用戶動(dòng)作。控制單元140可以響應(yīng)于重新識(shí)別的用戶動(dòng)作而改變顯示第二圖像數(shù)據(jù)的屏幕的至少一部分。在另ー個(gè)示范性實(shí)施例中,控制單元140可以向圖像輸出單元190或顯示單元193提供分別從多個(gè)源提供的圖像數(shù)據(jù)當(dāng)中的第一圖像數(shù)據(jù)和從單一源提供的多個(gè)圖像數(shù)據(jù)當(dāng)中的第二圖像數(shù)據(jù)之一。顯示單元193顯示第一圖像數(shù)據(jù)或第二圖像數(shù)據(jù)。例如,分別從多個(gè)源提供的圖像數(shù)據(jù)當(dāng)中的第一圖像數(shù)據(jù)可以是通過(guò)多個(gè)頻道接收到的多個(gè)廣播信號(hào)的圖像數(shù)據(jù)當(dāng)中的、通過(guò)廣播接收單元210中包括的調(diào)諧器選定的頻道接收到的廣播信號(hào)的圖像數(shù)據(jù)。例如,從單一源提供的多個(gè)圖像數(shù)據(jù)當(dāng)中的第二圖像數(shù)據(jù)可以是從電子設(shè)備100的存儲(chǔ)單元130、連接到外部端子輸入單元200的外部設(shè)備、或連接到網(wǎng)絡(luò)接ロ單元180的服務(wù)器提供的多個(gè)內(nèi)容當(dāng)中的ー個(gè)內(nèi)容的圖像數(shù)據(jù)。接下來(lái),控制單元140可以通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別用戶動(dòng)作。如果控制単元140提供第一圖像數(shù)據(jù),則控制単元140可以響應(yīng)于識(shí)別到的用戶動(dòng)作而提供從與第一圖像數(shù)據(jù)的源不同的源提供的圖像數(shù)據(jù)。如果控制単元140提供第二圖像數(shù)據(jù),則控制単元140可以提供不同于從單一源提供的多個(gè)圖像數(shù)據(jù)當(dāng)中的第二圖像數(shù)據(jù)的圖像數(shù)據(jù)。在另ー個(gè)示范性實(shí)施例中,控制單元140可以向圖像輸出單元190或顯示單元193提供第一圖像數(shù)據(jù)和第二圖像數(shù)據(jù)之一,該第一圖像數(shù)據(jù)是在向電子設(shè)備100供電時(shí)立即重現(xiàn)的圖像數(shù)據(jù),該第二圖像數(shù)據(jù)在向電子設(shè)備100供電之后電子設(shè)備100進(jìn)入ー個(gè)模式之后重現(xiàn)的圖像數(shù)據(jù)。顯示單元193可以顯示第一圖像數(shù)據(jù)或第二圖像數(shù)據(jù)。例如,如果電子設(shè)備100是TV,則在向電子設(shè)備100供電時(shí)立即重現(xiàn)的第一數(shù)據(jù)圖像可以是在TV打開(kāi)時(shí)立即重現(xiàn)的廣播信號(hào)。例如,如果電子設(shè)備100是TV,則在向電子設(shè)備100供電之后電子設(shè)備100進(jìn)入ー個(gè)模式之后重現(xiàn)的第二圖像數(shù)據(jù)可以是在TV打開(kāi)之后TV按照通過(guò)語(yǔ)音輸入單元110、動(dòng)作輸入?yún)g元120或遙控器的用戶輸入進(jìn)入ー個(gè)模式之后重現(xiàn)的內(nèi)容。接下來(lái),如果提供第一圖像數(shù)據(jù),則控制単元140可以響應(yīng)于通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作而提供在供電時(shí)立即重現(xiàn)的不同的圖像數(shù)據(jù)(例如,不同頻道的廣播信號(hào)的圖像數(shù)據(jù))。如果提供第二圖像數(shù)據(jù),則控制単元140可以響應(yīng)于通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作而提供在電子設(shè)備100進(jìn)入ー個(gè)模式之后重現(xiàn)的不同的圖像數(shù)據(jù)(例如,存儲(chǔ)在存儲(chǔ)單元130中的內(nèi)容的圖像數(shù)據(jù)、或者從外部端子輸入單元160或網(wǎng)絡(luò)接ロ單元180接收到的內(nèi)容的圖像數(shù)據(jù))。在另ー個(gè)示范性實(shí)施例中,控制單元140可以向圖像輸出單元190或顯示單元193提供多個(gè)運(yùn)動(dòng)圖像之一或多個(gè)圖像之一。顯示單元193可以顯示該運(yùn)動(dòng)圖像或該圖像。例如,所述多個(gè)運(yùn)動(dòng)圖像之一可以指示隨時(shí)間變化的圖像作為多個(gè)廣播信號(hào)之一。此外,所述多個(gè)圖像之一可以是多個(gè)存儲(chǔ)的圖像之一。接下來(lái),如果提供運(yùn)動(dòng)圖像,則控制単元140可以響應(yīng)于通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作而提供多個(gè)運(yùn)動(dòng)圖像當(dāng)中的、不同于已提供的運(yùn)動(dòng)圖像的運(yùn)動(dòng)圖像(例如,不同頻道的廣播信號(hào)的廣播信號(hào))。如果提供圖像,則控制單元140可以響應(yīng)于通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作而提供多個(gè)圖像當(dāng)中的、不同于已提供的圖像的圖像。下文中,將參照?qǐng)D80至圖91解釋響應(yīng)于用戶動(dòng)作而改變的屏幕。圖80和圖81是示出根據(jù)各種示范性實(shí)施例的、響應(yīng)于向上方向的用戶動(dòng)作而改變的屏幕的視圖。在圖80中,控制單元140可以識(shí)別作為用戶動(dòng)作的向上方向的拍動(dòng)作。參照?qǐng)D80的8010和8020,如果控制單元140提供廣播信號(hào),則響應(yīng)于向上方向的拍動(dòng)作,控制單元140可以停止向屏幕上提供廣播信號(hào)并可以提供這樣的廣播信號(hào),該廣播信號(hào)的頻道號(hào)碼從停止的廣播信號(hào)的頻道號(hào)碼增加。例如,頻道號(hào)碼為“7”的廣播信號(hào)改變?yōu)轭l道號(hào)碼為“8”的廣播信號(hào)。參照?qǐng)D80的8030和8040,如果控制單元140提供包括多個(gè)頁(yè)面的內(nèi)容,則響應(yīng)于向上方向的拍動(dòng)作,控制單元140可以將顯示多個(gè)頁(yè)面之一的屏幕改變?yōu)轱@示多個(gè)頁(yè)面當(dāng)中的、位于該顯示頁(yè)面下方的頁(yè)面的屏幕。例如,8030中顯示第二頁(yè)面的屏幕可以改變?yōu)?040中顯示第三頁(yè)面的屏幕。在圖81中,控制單元140可以識(shí)別作為用戶動(dòng)作的向上方向的拍動(dòng)作。參照?qǐng)D81的8110和8120,如果控制單元140提供廣播信號(hào),則響應(yīng)于向上方向的拍動(dòng)作,控制單元140可以停止向屏幕上提供廣播信號(hào)并可以提供這樣的廣播信號(hào),該廣播信號(hào)的頻道號(hào)碼從停止的廣播信號(hào)的頻道號(hào)碼增加。參照?qǐng)D81的8130和8140,如果控制単元140提供包括一個(gè)頁(yè)面的內(nèi)容,則響應(yīng)于向上方向的拍動(dòng)作,控制單元140可以將屏幕上的所述ー個(gè)頁(yè)面的一部分改變?yōu)槲挥谒雯`個(gè)頁(yè)面的該部分下方的另一部分。圖82和圖83是示出根據(jù)各種示范性實(shí)施例的、響應(yīng)于向下方向的用戶動(dòng)作而改變的屏幕的示圖。在圖82中,控制單元140可以識(shí)別作為用戶動(dòng)作的向下方向的拍動(dòng)作。參照?qǐng)D82的8210到8220,如果控制單元140提供廣播信號(hào),則響應(yīng)于向下方向的拍動(dòng)作,控制單元140停止向屏幕上提供廣播信號(hào)并可以提供這樣的廣播信號(hào),該廣播信號(hào)的頻道號(hào)碼從停止的廣播信號(hào)的頻道號(hào)碼減小。例如,頻道號(hào)碼為“8”的廣播信號(hào)改變?yōu)轭l道號(hào)碼為“7”的廣播信號(hào)。參照?qǐng)D82的8230和8240,如果控制單元140提供包括多個(gè)頁(yè)面的內(nèi)容,則響應(yīng)于向下方向的拍動(dòng)作,控制單元140可以將顯示多個(gè)頁(yè)面之一的屏幕改變?yōu)轱@示所述多個(gè)頁(yè)面當(dāng)中的、位于該顯示頁(yè)面上方的頁(yè)面的屏幕。例如,8230中顯示第二頁(yè)面的屏幕可以改變?yōu)?240中顯示第一頁(yè)面的屏幕。在圖83中,控制單元140可以識(shí)別作為用戶動(dòng)作的向下方向的拍動(dòng)作。參照?qǐng)D83的8310和8320,如果控制單元140提供廣播信號(hào),則響應(yīng)于向下方向的拍動(dòng)作,控制單元140停止向屏幕上提供廣播信號(hào)并可以提供廣播信號(hào),該廣播信號(hào)的頻道號(hào)碼從停止的廣播信號(hào)的頻道號(hào)碼減小。參照?qǐng)D83的8330和8340,如果控制單元140提供包括一個(gè)頁(yè)面的內(nèi)容,則響應(yīng)于向下方向的拍動(dòng)作,控制單元140可以將屏幕上的所述ー個(gè)頁(yè)面的一部分改變?yōu)槲挥谒雯`個(gè)頁(yè)面的該部分上方的另一部分。圖84至圖87是示出根據(jù)各種示范性實(shí)施例的、響應(yīng)于向左方向的用戶動(dòng)作而改變的屏幕的示圖。在圖84中,控制單元140可以識(shí)別作為用戶動(dòng)作的向左方向的拍動(dòng)作。參照8410和8420,如果控制單元140提供廣播信號(hào),則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以降低正在提供的廣播信號(hào)的音量等級(jí)。例如,廣播信號(hào)的音量等級(jí)可以從“14”降低為“13”。參照8430和8440,如果控制單元140提供包括多個(gè)頁(yè)面的內(nèi)容,則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以將顯示多個(gè)頁(yè)面之一的屏幕改變?yōu)轱@示多個(gè)頁(yè)面當(dāng)中的、位于所述一個(gè)頁(yè)面右部的頁(yè)面的屏幕。例如,8430中顯示第二頁(yè)面的屏幕可以改變?yōu)?440中顯示第三頁(yè)面的屏幕。在圖85中,控制單元140可以識(shí)別作為用戶動(dòng)作的向左方向的拍動(dòng)作。參照?qǐng)D85中的8510和8520,如果控制單元140提供廣播信號(hào),則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以降低正在提供的廣播信號(hào)的音量等級(jí)。參照?qǐng)D85的8530和8540,如果控制単元140提供包括一個(gè)頁(yè)面的內(nèi)容,則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以將顯示所述一個(gè)頁(yè)面的一部分的屏幕改變?yōu)轱@示位于該部分右部的另一部分的屏幕。在圖86中,控制單元140可以識(shí)別作為用戶動(dòng)作的向左方向的拍動(dòng)作。參照?qǐng)D86中的8610和8620,如果控制單元140提供廣播信號(hào),則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以降低正在提供的廣播信號(hào)的音量等級(jí)。參照?qǐng)D86中的8630和8640,響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以將顯示第二內(nèi)容的屏幕改變?yōu)轱@示位于第二內(nèi)容之后的第三內(nèi)容的屏幕。在圖87中,控制單元140可以識(shí)別作為用戶動(dòng)作的向左方向的拍動(dòng)作。參照?qǐng)D87中的8710和8720,如果控制單元140提供廣播信號(hào),則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以降低正在提供的廣播信號(hào)的音量等級(jí)。參照?qǐng)D87中的8730和8740,如果控制單元140分別在屏幕上的第一區(qū)域8731和第二區(qū)域8735上提供至少ー個(gè)內(nèi)容,則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以將內(nèi)容8751從第二區(qū)域8735移除,而且代替地可以在第二區(qū)域8735上顯示不同的內(nèi)容8752。在圖88中,控制單元140可以識(shí)別作為用戶動(dòng)作的向右方向的拍動(dòng)作。參照?qǐng)D88的8810和8820,如果控制單元140提供廣播信號(hào),則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以增加正在提供的廣播信號(hào)的音量等級(jí)。例如,廣播信號(hào)的音量等級(jí)可以從“14”增加為“15”。參照?qǐng)D88的8830到8840,如果控制單元140提供包括多個(gè)頁(yè)面的內(nèi)容,則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以將顯示多個(gè)頁(yè)面之一的屏幕改變?yōu)轱@示多個(gè)頁(yè)面當(dāng)中的、位于該顯示頁(yè)面左部的頁(yè)面的屏幕。例如,8830中顯示第二頁(yè)面的屏幕可以改變?yōu)?840中顯示第一頁(yè)面的屏幕。在圖89中,控制單元140可以識(shí)別作為用戶動(dòng)作的向右方向的拍動(dòng)作。參照?qǐng)D89的8910和8920,如果控制單元140提供廣播信號(hào),則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以增加正在提供的廣播信號(hào)的音量等級(jí)。參照?qǐng)D89的8930和8940,如果控制單元140提供包括一個(gè)頁(yè)面的內(nèi)容,則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以將顯示所述一個(gè)頁(yè)面的一部分的屏幕改變?yōu)轱@示位于該部分左部的另一部分的屏幕。在圖90中,控制單元140可以識(shí)別作為用戶動(dòng)作的向右方向的拍動(dòng)作。參照?qǐng)D90中的9010和9020,如果控制單元140提供廣播信號(hào),則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以增加正在提供的廣播信號(hào)的音量等級(jí)。參照?qǐng)D90中的9030和9040,如果控制單元140提供第二內(nèi)容,則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以將顯示第二內(nèi)容的屏幕改變?yōu)轱@示位于第二內(nèi)容之前的第一內(nèi)容的屏幕。在圖91中,控制單元140可以識(shí)別作為用戶動(dòng)作的向右方向的拍動(dòng)作。參照?qǐng)D91中的9110和9120,如果控制單元140提供廣播信號(hào),則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以增加正在提供的廣播信號(hào)的音量等級(jí)。參照?qǐng)D91中的9130和9140,如果控制單元140分別在屏幕上的第一區(qū)域9131和第二區(qū)域9135上提供至少ー個(gè)內(nèi)容,則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以將內(nèi)容9151從第二區(qū)域9135移除,而且代替地可以在第二區(qū)域9135上顯示不同的內(nèi)容9152。圖92和圖93是示出根據(jù)示范性實(shí)施例的、響應(yīng)于用戶動(dòng)作而改變屏幕的電子設(shè)備的控制方法的流程圖。參照?qǐng)D92,電子設(shè)備100響應(yīng)于識(shí)別到的用戶動(dòng)作而從多個(gè)廣播信號(hào)當(dāng)中選擇ー個(gè)廣播信號(hào)(S9212)。識(shí)別到的用戶動(dòng)作可以是通過(guò)動(dòng)作輸入單元120輸入的,而且可以由動(dòng)作識(shí)別模塊1301識(shí)別。電子設(shè)備100提供所選擇的廣播信號(hào)(S9214)。廣播信號(hào)可以提供給圖像輸出單元190或顯示單元193。然后,在電子設(shè)備100停止提供選定的廣播信號(hào)并提供存儲(chǔ)的內(nèi)容(S9216)的情況下,電子設(shè)備100可以重新識(shí)別與識(shí)別到的用戶動(dòng)作具有基本相同的形式的用戶動(dòng)作(S9218)。存儲(chǔ)的內(nèi)容可以是存儲(chǔ)在存儲(chǔ)單元130中的內(nèi)容、或者是從外部端子輸入單元160或網(wǎng)絡(luò)接ロ 180接收到的內(nèi)容。重新識(shí)別的用戶動(dòng)作可以通過(guò)動(dòng)作輸入單元120輸入,而且可以通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別。響應(yīng)于重新識(shí)別的用戶動(dòng)作,電子設(shè)備100可以改變顯示已提供的內(nèi)容的屏幕的至少一部分(S9220)。參照?qǐng)D93,電子設(shè)備100提供多個(gè)廣播信號(hào)當(dāng)中的一個(gè)廣播信號(hào)以及存儲(chǔ)的內(nèi)容之一(S9312)。電子設(shè)備100通過(guò)動(dòng)作識(shí)別模塊1301識(shí)別用戶動(dòng)作(S9314)。電子設(shè)備100可以響應(yīng)于該用戶動(dòng)作確定所提供的信號(hào)是廣播信號(hào)還是內(nèi)容(S9316)。如果提供的是廣播信號(hào),則電子設(shè)備100可以控制廣播信號(hào)的音量等級(jí)或者提供多個(gè)廣播信號(hào)當(dāng)中的另ー個(gè)廣播信號(hào)(S9318)。如果提供的是內(nèi)容,則電子設(shè)備100改變顯示已提供的內(nèi)容的屏幕的至少一部分(S9320)。如上所述,用戶可以使用用戶動(dòng)作來(lái)更有效且更直觀地控制電子設(shè)備100。控制單元140按照從遙控信號(hào)接收單元170接收到的遙控信號(hào)、通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音、和通過(guò)動(dòng)作輸入單元120輸入的用戶動(dòng)作來(lái)控制電子設(shè)備100。此處記載的遙控器可以是通用遙控器,但是這不應(yīng)該被視為限制。遙控器可以是包括觸摸板的遙控器。具體來(lái)說(shuō),如果在遙控模式(在遙控模式中,按照在遙控信號(hào)接收單元170處接收到的遙控信號(hào)來(lái)控制電子設(shè)備100)中識(shí)別到通過(guò)語(yǔ)音輸入單元110輸入的語(yǔ)音啟動(dòng)命令,則控制単元140將模式改變?yōu)檎Z(yǔ)音任務(wù)模式,以便執(zhí)行由通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音控制的語(yǔ)音任務(wù)。如果模式改變?yōu)檎Z(yǔ)音任務(wù)模式,則控制単元140可以控制顯示單元193顯示指示電子設(shè)備100的模式是語(yǔ)音任務(wù)模式的圖標(biāo)、以及包括用于指導(dǎo)語(yǔ)音任務(wù)的語(yǔ)音項(xiàng)目的語(yǔ)音輔助信息。如果在語(yǔ)音任務(wù)模式中在遙控器上的按鈕當(dāng)中選擇第一按鈕以改變?yōu)檫b控模式,則遙控信號(hào)接收單元170接收與第一按鈕相對(duì)應(yīng)的第一遙控信號(hào)。控制單元140響應(yīng)于第ー遙控信號(hào)而將電子設(shè)備100的模式改變?yōu)檫b控模式,在遙控模式中,電子設(shè)備100通過(guò)遙控器來(lái)控制。第一按鈕可以是將模式改變?yōu)檫b控模式的遙控模式改變按鈕。然而,這僅僅是示例,而且第一按鈕可以是遙控器上的按鈕中的特定按鈕(certain button)。如果第一按鈕是特定按鈕,則當(dāng)接收到與第一按鈕相對(duì)應(yīng)的第一遙控信號(hào)吋,控制單元140將模式改變?yōu)檫b控模式,然后執(zhí)行與第一按鈕相對(duì)應(yīng)的任務(wù)。例如,如果第一按鈕是靜音按鈕,則控制單元140將模式從語(yǔ)音任務(wù)模式改變?yōu)檫b控模式,然后執(zhí)行靜音。如果在語(yǔ)音任務(wù)模式中通過(guò)動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,則控制單元140使用動(dòng)作識(shí)別模塊1301識(shí)別動(dòng)作啟動(dòng)命令。如果識(shí)別到動(dòng)作啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,電子設(shè)備100由通過(guò)動(dòng)作輸入單元120輸入的用戶動(dòng)作來(lái)控制。如果在遙控模式(在遙控模式中,電子設(shè)備100按照在遙控信號(hào)接收單元170處接收到的遙控信號(hào)來(lái)控制)中識(shí)別到通過(guò)動(dòng)作輸入單元120輸入的動(dòng)作啟動(dòng)命令,則控制單元140將模式改變?yōu)閯?dòng)作任務(wù)模式,以便執(zhí)行由通過(guò)動(dòng)作輸入單元120輸入的用戶動(dòng)作控制的動(dòng)作任務(wù)。如果模式改變?yōu)閯?dòng)作任務(wù)模式,則控制単元140可以控制顯示單元193顯示指示電子設(shè)備100的模式是動(dòng)作任務(wù)模式的圖標(biāo)、以及包括用于指導(dǎo)動(dòng)作任務(wù)的動(dòng)作項(xiàng)目的動(dòng)作輔助信息。如果在動(dòng)作任務(wù)模式中在遙控器上的按鈕當(dāng)中選擇第一按鈕以改變?yōu)檫b控模式,則遙控信號(hào)接收單元170接收與第一按鈕相對(duì)應(yīng)的第一遙控信號(hào)??刂茊卧?40響應(yīng)于第ー遙控信號(hào)而將電子設(shè)備100的模式改變?yōu)檫b控模式,在遙控模式中,電子設(shè)備100通過(guò)遙控器控制。第一按鈕可以是將模式改變?yōu)檫b控模式的遙控模式改變按鈕。然而,這僅僅是示例,而且第一按鈕可以是遙控器上的按鈕當(dāng)中的特定按鈕。如果第一按鈕是特定按鈕,則控制單元140當(dāng)接收到與第一按鈕相對(duì)應(yīng)的第一遙控信號(hào)時(shí)將模式改變?yōu)檫b控模式,然后執(zhí)行與第一按鈕相對(duì)應(yīng)的任務(wù)。例如,如果第一按鈕是靜音按鈕,則控制単元140將電子設(shè)備100的模式從動(dòng)作任務(wù)模式改變?yōu)檫b控模式,然后執(zhí)行靜音。如果在動(dòng)作任務(wù)模式中通過(guò)語(yǔ)音輸入單元110輸入語(yǔ)音啟動(dòng)命令,則控制単元140使用語(yǔ)音識(shí)別模塊130k識(shí)別語(yǔ)音啟動(dòng)命令。如果識(shí)別到語(yǔ)音啟動(dòng)命令,則控制単元140可以將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,在語(yǔ)音任務(wù)模式中,電子設(shè)備100由通過(guò)語(yǔ)音輸入?yún)g元HO輸入的用戶語(yǔ)音來(lái)控制。下文中,將參照?qǐng)D94至圖97解釋根據(jù)示范性實(shí)施例的、改變?yōu)檫b控模式、動(dòng)作任務(wù)模式和語(yǔ)音任務(wù)模式的方法。具體來(lái)說(shuō),電子設(shè)備100打開(kāi)之后,控制單元140 —般在遙控模式下操作,在遙控模式中,電子設(shè)備100由遙控信號(hào)控制。在遙控模式中,不顯示単獨(dú)的UI,如圖94所示。然而,這僅僅是示例,而且控制単元140可以在遙控模式中顯示指示遙控模式的UI。如果在遙控模式中通過(guò)語(yǔ)音輸入單元110輸入了語(yǔ)音啟動(dòng)命令,則控制単元140識(shí)別語(yǔ)音啟動(dòng)命令并將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,在語(yǔ)音任務(wù)模式中,電子設(shè)備100按照通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)控制。當(dāng)改變?yōu)檎Z(yǔ)音任務(wù)模式吋,控制單元140可以顯示語(yǔ)音輔助信息,如圖95所示。如果在語(yǔ)音任務(wù)模式中選擇遙控器上的第一按鈕,則控制単元140通過(guò)遙控信號(hào)接收單元170接收與第一按鈕相對(duì)應(yīng)的第一遙控信號(hào),然后將電子設(shè)備100的模式再次改變?yōu)檫b控模式,如圖94所示。遙控器上的第一按鈕可以是遙控模式改變按鈕。然而,這僅僅是示例,而且第一按鈕可以是遙控器上的特定按鈕。如果在語(yǔ)音任務(wù)模式中通過(guò)動(dòng)作輸入單元120輸入了動(dòng)作啟動(dòng)命令,則控制單元140識(shí)別該動(dòng)作啟動(dòng)命令并將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,電子設(shè)備100按照通過(guò)動(dòng)作輸入單元120輸入的用戶動(dòng)作來(lái)控制。當(dāng)改變?yōu)閯?dòng)作任務(wù)模式時(shí),控制単元140可以顯示動(dòng)作輔助信息3310,如圖96所示。如果在遙控模式中通過(guò)動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,則控制單元140識(shí)別動(dòng)作啟動(dòng)命令并將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,電子設(shè)備100按照通過(guò)動(dòng)作輸入單元120輸入的用戶動(dòng)作來(lái)控制。當(dāng)改變?yōu)閯?dòng)作任務(wù)模式吋,控制單元140可以顯示動(dòng)作幫助命令3310,如圖96所示。如果在動(dòng)作任務(wù)模式中選擇遙控器上的第一按鈕,則控制単元140通過(guò)遙控信號(hào)接收單元170接收與第一按鈕相對(duì)應(yīng)的第一遙控信號(hào),并且將電子設(shè)備100的模式再次改變?yōu)檫b控模式,如圖94所示。遙控器上的第一按鈕可以是遙控模式改變按鈕。然而,這僅僅是示例,而且第一按鈕可以是遙控器上的特定按鈕。如果在動(dòng)作任務(wù)模式中通過(guò)語(yǔ)音輸入單元110輸入語(yǔ)音啟動(dòng)命令,則控制単元140識(shí)別語(yǔ)音啟動(dòng)命令并且將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,在語(yǔ)音任務(wù)模式中,電子設(shè)備100按照通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)控制。當(dāng)改變?yōu)檎Z(yǔ)音任務(wù)模式時(shí),控制単元140可以顯示語(yǔ)音輔助信息,如圖95所示。如上所述,電子設(shè)備100可以分別使用遙控信號(hào)、語(yǔ)音啟動(dòng)命令和動(dòng)作啟動(dòng)命令來(lái)改變?yōu)檫b控模式、語(yǔ)音任務(wù)模式和動(dòng)作任務(wù)模式。圖97是根據(jù)示范性實(shí)施例的、解釋改變?yōu)檫b控模式、動(dòng)作任務(wù)模式和語(yǔ)音任務(wù)模式的方法的流程圖。電子設(shè)備100打開(kāi)然后進(jìn)入遙控模式,在遙控模式中電子設(shè)備100由遙控器來(lái)控制(S9710)。電子設(shè)備100保持在遙控模式中(S9710),除非輸入語(yǔ)音啟動(dòng)命令或動(dòng)作啟動(dòng)命令。電子設(shè)備100確定是否輸入了語(yǔ)音啟動(dòng)命令(S9720)。如果輸入了語(yǔ)音啟動(dòng)命令(S9720-是),則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,在語(yǔ)音任務(wù)模式中,電子設(shè)備100按照通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)控制(S9730)。當(dāng)進(jìn)入語(yǔ)音任務(wù)模式吋,電子設(shè)備100可以顯示語(yǔ)音輔助信息,如圖95所示。電子設(shè)備100確定是否輸入了動(dòng)作啟動(dòng)命令(S9740)。如果輸入了動(dòng)作啟動(dòng)命令(S9740-是),則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,電子設(shè)備100按照通過(guò)動(dòng)作輸入單元120輸入的用戶動(dòng)作來(lái)控制(S9750)。如果電子設(shè)備100處于語(yǔ)音任務(wù)模式或動(dòng)作任務(wù)模式中,在控制單元140確定是否返回到遙控模式(S9760)。如上所述,如果識(shí)別到返回遙控模式的啟動(dòng)命令或模式取消命令,則控制単元140可以返回到遙控模式。此外,當(dāng)果電子設(shè)備100處于語(yǔ)音任務(wù)模式吋,如果在預(yù)定時(shí)間(例如5分鐘)內(nèi)沒(méi)有識(shí)別到語(yǔ)音,則控制単元140可以自動(dòng)返回到遙控模式。類(lèi)似地,當(dāng)電子設(shè)備100處于動(dòng)作任務(wù)模式時(shí),如果在預(yù)定時(shí)間(例如5分鐘)內(nèi)沒(méi)有識(shí)別到動(dòng)作,則控制単元140可以自動(dòng)返回到遙控模式。 如圖97所示,電子設(shè)備100以遙控模式(S9710)、語(yǔ)音任務(wù)模式(S9730)和動(dòng)作任務(wù)模式(S9750)進(jìn)行操作。在所有三種模式中,控制單元140確定是否切換到語(yǔ)音任務(wù)模式(S9720-是)、是否切換到動(dòng)作任務(wù)模式(S9740-是)、是否切換到遙控模式(S9760-是)、或者是否保持當(dāng)前模式(S9720-否、S9760-否、S9740-否)。雖然已經(jīng)描述了圖97中的方法,但是這僅僅是示例,而且本公開(kāi)的技術(shù)想法可以應(yīng)用于用于從遙控模式、語(yǔ)音任務(wù)模式和動(dòng)作任務(wù)模式改變和/或改變到遙控模式、語(yǔ)音任務(wù)模式和動(dòng)作任務(wù)模式的任何方法。如上所述,將電子設(shè)備100的模式改變?yōu)檫b控模式、語(yǔ)音任務(wù)模式和動(dòng)作任務(wù)模式,從而用戶可以根據(jù)用戶期望的模式來(lái)控制電子設(shè)備100??刂茊卧?40可以使用外部移動(dòng)設(shè)備通過(guò)語(yǔ)音識(shí)別來(lái)控制電子設(shè)備100。具體來(lái)說(shuō),如果通過(guò)外部移動(dòng)設(shè)備中所包括的麥克風(fēng)輸入用戶語(yǔ)音,則控制単元140通過(guò)語(yǔ)音輸入單元110接收用戶語(yǔ)音的輸入、識(shí)別輸入的用戶語(yǔ)音、并按照識(shí)別到的用戶語(yǔ)音執(zhí)行電子設(shè)備100的語(yǔ)音任務(wù)。移動(dòng)設(shè)備可以是,但不限于,遙控器、移動(dòng)電話、個(gè)人數(shù)字助理(PDA)和筆記本計(jì)算機(jī)。語(yǔ)音輸入?yún)g元110可以是用于從外部移動(dòng)設(shè)備接收用戶語(yǔ)音信號(hào)的通信単元。在外部移動(dòng)設(shè)備中運(yùn)行用于語(yǔ)音識(shí)別的應(yīng)用,而且輸入用戶語(yǔ)音。如果移動(dòng)設(shè)備識(shí)別到用戶語(yǔ)音、生成與該用戶語(yǔ)音相對(duì)應(yīng)的控制信號(hào)、然后將該控制信號(hào)發(fā)送給電子設(shè)備100,則控制単元140可以按照從移動(dòng)設(shè)備輸入的控制信號(hào)來(lái)執(zhí)行電子設(shè)備100的語(yǔ)音任務(wù)。如果在移動(dòng)設(shè)備中運(yùn)行用于語(yǔ)音識(shí)別的應(yīng)用,而且輸入了已輸入到移動(dòng)設(shè)備中包括的麥克風(fēng)的用戶語(yǔ)音,則控制単元140識(shí)別到輸入的用戶語(yǔ)音,并按照該用戶語(yǔ)音執(zhí)行電子設(shè)備100的語(yǔ)首任務(wù)。如果在移動(dòng)設(shè)備中已經(jīng)運(yùn)行用于語(yǔ)音識(shí)別的應(yīng)用之后選擇移動(dòng)設(shè)備所包括的第ー按鈕,則控制単元140通過(guò)通信単元(未示出)接收與第一按鈕相對(duì)應(yīng)的第一信號(hào),并響應(yīng)于第一信號(hào)而將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式。通過(guò)選擇移動(dòng)設(shè)備所包括的第一按鈕而改變到的語(yǔ)音任務(wù)模式是這樣的模式,在該模式中,按照來(lái)自移動(dòng)設(shè)備中所包括的麥克風(fēng)的用戶語(yǔ)音輸入來(lái)執(zhí)行語(yǔ)音任務(wù)。如果選擇移動(dòng)設(shè)備上的第一按鈕和第二按鈕之一,則可以釋放通過(guò)選擇移動(dòng)設(shè)備所包括的第一按鈕而改變到的語(yǔ)音任務(wù)模式。第一按鈕和第二按鈕可以是移動(dòng)設(shè)備中所包括的物理按鈕。然而,這僅僅是示例,而且第一按鈕和第ニ按鈕可以是在已經(jīng)運(yùn)行了用于語(yǔ)音識(shí)別的應(yīng)用之后顯示在移動(dòng)設(shè)備上的n。當(dāng)在語(yǔ)音任務(wù)模式中選擇移動(dòng)設(shè)備上的第二按鈕時(shí),控制単元140可以從移動(dòng)設(shè)備接收用戶語(yǔ)音的輸入。當(dāng)選擇移動(dòng)設(shè)備上的第二按鈕時(shí),控制単元140可以在移動(dòng)設(shè)備上顯示指示能夠輸入用戶語(yǔ)音的n。因此,用戶可以知道,可以通過(guò)移動(dòng)設(shè)備上顯示的n輸入語(yǔ)音。如果將用戶語(yǔ)音輸入到移動(dòng)設(shè)備,則控制単元140不通過(guò)電子設(shè)備100中包括的麥克風(fēng)接收用戶語(yǔ)音。當(dāng)移動(dòng)設(shè)備撥打電話時(shí),可以使用移動(dòng)設(shè)備中包括的麥克風(fēng)。也就是說(shuō),如果移動(dòng)設(shè)備執(zhí)行一般的電話功能,則麥克風(fēng)從用戶接收電話語(yǔ)音的輸入。如果移動(dòng)設(shè)備運(yùn)行用于語(yǔ)音識(shí)別的應(yīng)用,則移動(dòng)設(shè)備可以從用戶接收控制電子設(shè)備100的語(yǔ)音輸入。
圖98是根據(jù)示范性實(shí)施例的、解釋用于使用外部移動(dòng)設(shè)備識(shí)別用戶語(yǔ)音的方法的流程圖。移動(dòng)設(shè)備運(yùn)行用于語(yǔ)音輸入的應(yīng)用(S9810 )。移動(dòng)設(shè)備可以是移動(dòng)電話。在移動(dòng)設(shè)備中已經(jīng)運(yùn)行用于語(yǔ)音輸入的應(yīng)用之后,移動(dòng)設(shè)備通過(guò)移動(dòng)設(shè)備中所包括的麥克風(fēng)接收用戶語(yǔ)音的輸入(S9820)。移動(dòng)設(shè)備中所包括的麥克風(fēng)可以是用于打電話的麥克風(fēng)。電子設(shè)備100從移動(dòng)設(shè)備接收輸入到外部移動(dòng)設(shè)備的用戶語(yǔ)首(9830)。如果從移動(dòng)設(shè)備接收到用戶語(yǔ)音,則電子設(shè)備100使用語(yǔ)音識(shí)別模塊130k識(shí)別用戶語(yǔ)音(S9840)。電子設(shè)備100使用語(yǔ)音數(shù)據(jù)庫(kù)按照識(shí)別到的用戶語(yǔ)音執(zhí)行語(yǔ)音任務(wù)(S9850)。在上面的示范性實(shí)施例中,移動(dòng)設(shè)備接收用戶語(yǔ)音的輸入并且將用戶語(yǔ)音發(fā)送給電子設(shè)備100。然而,這僅僅是示例,而且移動(dòng)設(shè)備可以直接識(shí)別用戶語(yǔ)音,可以生成與用戶語(yǔ)音相對(duì)應(yīng)的控制信號(hào),然后可以將該控制信號(hào)發(fā)送給電子設(shè)備100。如上所述,使用諸如移動(dòng)電話的移動(dòng)設(shè)備執(zhí)行電子設(shè)備100的語(yǔ)音任務(wù),從而用戶能夠使用語(yǔ)音識(shí)別來(lái)更容易地控制該電子設(shè)備。根據(jù)示范性實(shí)施例,根據(jù)是否需要指針(pointer)來(lái)執(zhí)行任務(wù),動(dòng)作任務(wù)模式可以是動(dòng)作模式和指向模式之一。具體來(lái)說(shuō),動(dòng)作模式是這樣的模式,在該模式中,改變電子設(shè)備100的設(shè)置的任務(wù)是按照預(yù)先設(shè) 置的動(dòng)作(例如,沿向上、向下、向左或向右方向的拍動(dòng)作、抓動(dòng)作、或者沿逆時(shí)針?lè)较虻男D(zhuǎn)動(dòng)作)來(lái)控制的。例如,如果在電子設(shè)備100執(zhí)行廣播接收功能時(shí)輸入動(dòng)作啟動(dòng)命令,則控制単元140可以將電子設(shè)備100的模式改變?yōu)閯?dòng)作模式。因此,電子設(shè)備100可以響應(yīng)干與預(yù)先設(shè)置的動(dòng)作相匹配的用戶動(dòng)作而執(zhí)行諸如音量控制或頻道改變的任務(wù)。指向模式是使用指針來(lái)執(zhí)行任務(wù)的模式。例如,如果在電子設(shè)備100顯示包括多個(gè)可選項(xiàng)目的列表(例如,內(nèi)容列表、頻道列表、電子節(jié)目指南或EPG、以及網(wǎng)頁(yè))之一時(shí)輸入動(dòng)作啟動(dòng)命令,則控制單元140可以將電子設(shè)備100的模式改變?yōu)橹赶蚰J?。在指向模式中,控制單?40在顯示屏幕的中心顯示指針。由于動(dòng)作輔助信息的存在,指針可以顯示在顯示屏幕的中心的上部位置。下文中將更詳細(xì)地解釋指向模式。如果在電子設(shè)備100顯示包括多個(gè)用于運(yùn)行應(yīng)用(例如,智能中心)的可運(yùn)行圖標(biāo)的內(nèi)容列表和網(wǎng)頁(yè)之ー時(shí)輸入動(dòng)作啟動(dòng)命令,則控制単元140可以將電子設(shè)備100的模式改變?yōu)橹赶颔蜁@式并且在顯不屏幕的中心顯不指針。在指向模式中,電子設(shè)備100可以在顯示屏幕的下部顯示用于執(zhí)行動(dòng)作任務(wù)的動(dòng)作輔助信息。顯示的動(dòng)作輔助信息可以不同于動(dòng)作模式的動(dòng)作輔助信息。如果在電子設(shè)備100顯示內(nèi)容列表時(shí)通過(guò)動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,則控制單元140可以將電子設(shè)備100的模式改變?yōu)橹赶蚰J?。在指向模式中,如果指針根?jù)輸入到動(dòng)作輸入?yún)g元120的用戶動(dòng)作而位于內(nèi)容列表的第一可運(yùn)行圖標(biāo)處,則控制単元140對(duì)第一可運(yùn)行圖標(biāo)與其他可運(yùn)行圖標(biāo)進(jìn)行區(qū)別顯示。如果在指向模式中輸入結(jié)束內(nèi)容列表的屏幕的命令,則控制単元可以不僅從顯示屏幕移除該內(nèi)容列表而且移除該指針。如果在電子設(shè)備100顯示網(wǎng)頁(yè)時(shí)通過(guò)動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,貝Ij控制単元140可以將電子設(shè)備100的模式改變?yōu)橹赶蚰J?。網(wǎng)頁(yè)可以包括多個(gè)超鏈接。在指向模式中,如果指針根據(jù)通過(guò)動(dòng)作輸入?yún)g元120輸入的用戶動(dòng)作而位于網(wǎng)頁(yè)的第一超鏈接處,則控制単元140對(duì)第一超鏈接與其他超鏈接進(jìn)行不同的顯示。如果指針位于第一超鏈接處而且通過(guò)動(dòng)作輸入單元120輸入第一用戶動(dòng)作(例如,抓動(dòng)作),則控制単元140運(yùn)行第
ー超鏈接。下文中,將參照?qǐng)D99至圖101更加詳細(xì)地解釋指向模式。如果如圖99所示顯示包括用于運(yùn)行應(yīng)用的可運(yùn)行圖標(biāo)的內(nèi)容列表而且通過(guò)動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,則控制単元140可以顯示動(dòng)作輔助信息和指針10010,如圖100所示。指針10010可以顯示在顯示屏幕的中心。如果通過(guò)動(dòng)作輸入單元120輸入沿左下方向的移動(dòng)動(dòng)作以將指針10010放置在可運(yùn)行圖標(biāo)“APP2”處,則控制單元140將指針10010放置在可運(yùn)行圖標(biāo)“APP2”處。如果指針10010位于可運(yùn)行圖標(biāo)“APP2”處,則控制單元140以比其他圖標(biāo)粗黑(thicker)的方式突出顯示可運(yùn)行圖標(biāo)“APP2”和可運(yùn)行圖標(biāo)的名稱(chēng),如圖101所示。如果指針10010位于可運(yùn)行圖標(biāo)“APP2”處而且通過(guò)動(dòng)作輸入單元120輸入第一用戶動(dòng)作(例如,抓動(dòng)作),則控制単元140運(yùn)行可運(yùn)行圖標(biāo)“APP2”,如圖102所示。如果如圖100所示顯示內(nèi)容列表而且用戶輸入內(nèi)容列表釋放命令(例如,沿逆時(shí)針?lè)较虻男D(zhuǎn)動(dòng)作或遙控器的按鈕),則控制単元140從顯示屏幕移除內(nèi)容列表和指針并顯示廣播接收屏幕,如圖103所示。雖然在上面的示范性實(shí)施例中顯示了內(nèi)容列表,但是在顯示包括多個(gè)超鏈接的網(wǎng)頁(yè)時(shí)也可以應(yīng)用本公開(kāi)的技術(shù)想法。圖104是根據(jù)示范性實(shí)施例的、解釋提供指向模式的方法的流程圖。電子設(shè)備100顯不內(nèi)容列表和網(wǎng)頁(yè)之一(S10410)。內(nèi)容列表可以包括多個(gè)用于運(yùn)行應(yīng)用的可運(yùn)行圖標(biāo),而且網(wǎng)頁(yè)可以包括多個(gè)超鏈接。電子設(shè)備100確定是否輸入了動(dòng)作啟動(dòng)命令(S10420)。如果輸入了動(dòng)作啟動(dòng)命令(S10420-是),則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)橹赶蚰J?S10430)。指向模式是執(zhí)行需要指針的任務(wù)(例如,運(yùn)行應(yīng)用和瀏覽網(wǎng)頁(yè))的模式。如果模式改變?yōu)橹赶蚰J剑瑒t電子設(shè)備100在顯示屏幕上顯示指針(S10440)。指針可以顯示在顯示屏幕的中心處。如上所述,將電子設(shè)備100改變?yōu)橹赶蚰J揭詧?zhí)行需要指針的任務(wù),從而用戶能夠更加容易地控制電子設(shè)備100。如果在指向模式中通過(guò)動(dòng)作輸入單元120輸入第一動(dòng)作,則控制單元140在與第一動(dòng)作相對(duì)應(yīng)的方向上移動(dòng)指針,而且如果通過(guò)動(dòng)作輸入?yún)g元120輸入第二動(dòng)作,則控制単元140執(zhí)行與第二動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)。如果當(dāng)指針位于內(nèi)容列表的第一可運(yùn)行圖標(biāo)處或位于網(wǎng)頁(yè)的第一超鏈接處的時(shí)候輸入第二動(dòng)作,則控制単元140可以解除對(duì)指針?biāo)谔幍牡谝豢蛇\(yùn)行圖標(biāo)和第一超鏈接的突出顯示。第二動(dòng)作可以是預(yù)先設(shè)置的、用于執(zhí)行電子設(shè)備100的動(dòng)作模式的動(dòng)作,而且可以是沿向上、向下、向左或向右方向的拍動(dòng)作、抓動(dòng)作以及沿逆時(shí)針?lè)较虻男D(zhuǎn)動(dòng)作之一。
例如,如果第二動(dòng)作是沿向上、向下、向左或向右方向的拍動(dòng)作,則控制單元140可以按照沿向上、向下、向左或向右方向的拍動(dòng)作來(lái)移動(dòng)顯示屏幕。在移動(dòng)屏幕之后,控制単元140可以在之前的位置再次顯示指針。此外,如果第二動(dòng)作可以是抓動(dòng)作,則控制單元140可以運(yùn)行指針?biāo)谔幍牡谝豢蛇\(yùn)行圖標(biāo)。在運(yùn)行第一可運(yùn)行圖標(biāo)之后,控制單元140可以在之前的位置處再次顯示指針。此外,如果第二動(dòng)作可以是沿逆時(shí)針?lè)较虻男D(zhuǎn)動(dòng)作,則控制單元140可以在顯示屏幕上顯示當(dāng)前調(diào)諧的頻道的廣播節(jié)目。也就是說(shuō),控制單元140可以從顯示屏幕上移除內(nèi)容列表或網(wǎng)頁(yè)并提供廣播接收功能。在這個(gè)時(shí)候,由于廣播接收功能不需要指針,因此不顯示指針。雖然在上面的示例中沒(méi)有顯示指針,但是這僅僅是示例。指針可以保持在已經(jīng)顯示指針的位置處。下文中,將參照?qǐng)D105至圖107詳細(xì)解釋在指向模式中輸入預(yù)先設(shè)置的動(dòng)作的情況。如果電子設(shè)備100的模式改變?yōu)橹赶蚰J?,如圖100所示,則控制單元140在顯示屏幕的中心顯示指針10510,如圖105所示。如果在顯示屏幕上顯示指針的狀態(tài)下通過(guò)動(dòng)作輸入單元120輸入向右方向的拍動(dòng)作,則控制單元140從顯示屏幕上移除指針10510并將應(yīng)用顯示區(qū)域10520的屏幕改變?yōu)榱愆`個(gè)應(yīng)用顯示區(qū)域10530的屏幕,如圖106所示。在移動(dòng)應(yīng)用顯示區(qū)域10520之后,控制單元140再次顯示指針10510,如圖107所
/Jn o圖108是根據(jù)示范性實(shí)施例的、解釋在指向模式中輸入預(yù)先設(shè)置的動(dòng)作時(shí)電子設(shè)備100的控制方法的流程圖。電子設(shè)備100顯不內(nèi)容列表和網(wǎng)頁(yè)之一(S10810)。內(nèi)容列表可以包括用于運(yùn)行應(yīng)用的多個(gè)可運(yùn)行圖標(biāo),而且網(wǎng)頁(yè)可以包括多個(gè)超鏈接。電子設(shè)備100確定是否輸入了動(dòng)作啟動(dòng)命令(S10820)。如果輸入了動(dòng)作啟動(dòng)命令(S10820-是),則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)橹赶蚰J?S10830)。指向模式是執(zhí)行需要指針的任務(wù)(例如,運(yùn)行應(yīng)用和瀏覽網(wǎng)頁(yè))的模式。如果模式改變?yōu)橹赶蚰J剑瑒t電子設(shè)備100在顯示屏幕上顯示指針(S10840)。指針可以位于顯示屏幕的中心處。如果在顯示指針的狀態(tài)下通過(guò)動(dòng)作輸入單元120輸入預(yù)先設(shè)置的動(dòng)作(S10850-是),則電子設(shè)備100移除指針并執(zhí)行與預(yù)先設(shè)置的動(dòng)作相對(duì)應(yīng)的動(dòng)作(S10860)。預(yù)先設(shè)置的動(dòng)作是在動(dòng)作模式中預(yù)先設(shè)置的動(dòng)作,而且可以是沿向上、向下、向左或向右方向的拍動(dòng)作、抓動(dòng)作或者沿逆時(shí)針?lè)较虻男D(zhuǎn)動(dòng)作。如上所述對(duì)電子設(shè)備100進(jìn)行控制,使得即使在指向模式中用戶也可以按照預(yù)先設(shè)定的動(dòng)作執(zhí)行任務(wù)??刂茊卧?40可以按照電子設(shè)備100的模式將選定項(xiàng)目與其他項(xiàng)目不同地顯示。具體來(lái)說(shuō),控制単元140控制顯示単元193顯示多個(gè)可選項(xiàng)目。可選項(xiàng)目可以是內(nèi)容列表的可運(yùn)行圖標(biāo)或網(wǎng)頁(yè)的超鏈接。如果通過(guò)語(yǔ)音輸入單元110和動(dòng)作輸入單元120之ー輸入用戶語(yǔ)音和用戶動(dòng)作之一,則控制単元140可以按照用戶輸入從多個(gè)項(xiàng)目當(dāng)中選擇第一項(xiàng)目??刂茊卧?40可以將選定的第一項(xiàng)目與其他項(xiàng)目不同地顯示。例如,控制單元140可以以比其他項(xiàng)目粗黑的方式突出顯不選定的第一項(xiàng)目。如果當(dāng)與其他項(xiàng)目不同地顯示第一項(xiàng)目的時(shí)候第一項(xiàng)目的名稱(chēng)的字符數(shù)超過(guò)預(yù)先設(shè)定的數(shù)量而且電子設(shè)備100的模式是動(dòng)作任務(wù)模式,則控制単元140可以顯示第一項(xiàng)目的完整名稱(chēng)。例如,如圖109所示,顯示了選定的可運(yùn)行圖標(biāo)的完整名稱(chēng)“令人興奮的鼓”??刂茊卧?40可以以滾動(dòng)的方法顯示第一項(xiàng)目的完整名稱(chēng)。在上面的示例中,在動(dòng)作任務(wù)模式中顯示項(xiàng)目的完整名稱(chēng)。然而,這僅僅是示例,而且即使在遙控模式中也可以顯示項(xiàng)目的完整名稱(chēng)。另ー方面,如果第一項(xiàng)目的名稱(chēng)的字符數(shù)超過(guò)預(yù)先設(shè)定的數(shù)量而且電子設(shè)備100的模式是語(yǔ)音任務(wù)模式,則控制単元140可以只顯示第一項(xiàng)目的名稱(chēng)的一部分。第一項(xiàng)目的名稱(chēng)的一部分是固定的。例如,如圖110所示,只顯示了選定的可運(yùn)行圖標(biāo)“令人興奮的鼓”的名稱(chēng)的一部分“令人興奮的”。如果在語(yǔ)音任務(wù)模式中只顯示第一項(xiàng)目的名稱(chēng)的一部分,而且通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音與顯示的名稱(chēng)的部分一致,則控制単元140運(yùn)行第一項(xiàng)目。如果在所顯示的第一項(xiàng)目的名稱(chēng)的一部分中沒(méi)有空格,而且通過(guò)語(yǔ)音輸入單元110輸入與所顯示的第一項(xiàng)目的名稱(chēng)的多個(gè)拼寫(xiě)(spelling)相對(duì)應(yīng)的用戶語(yǔ)音,則控制單元140可以運(yùn)行第一項(xiàng)目。例如,如果已顯示的第一項(xiàng)目的名稱(chēng)是“man”,而且順序輸入語(yǔ)音和“n”,則控制単元140運(yùn)行第一項(xiàng)目。如果電子設(shè)備100的模式是語(yǔ)音任務(wù)模式,而且在所顯示的項(xiàng)目的名稱(chēng)當(dāng)中包括具有與通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音一致的名稱(chēng)的多個(gè)項(xiàng)目,則控制単元140可以顯示包括所述多個(gè)項(xiàng)目的候選組的列表。如果顯示候選組的列表,則控制単元140可以顯示項(xiàng)目的完整名稱(chēng),從而用戶可以清楚地分辨出項(xiàng)目。圖111是根據(jù)示范性實(shí)施例的、解釋按照模式不同地顯示項(xiàng)目的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100顯示多個(gè)可選項(xiàng)目(SI 1110)。該多個(gè)項(xiàng)目可以是用于運(yùn)行應(yīng)用的內(nèi)容列表中所包括的可運(yùn)行圖標(biāo)或網(wǎng)頁(yè)中所包括的超鏈接。電子設(shè)備100通過(guò)語(yǔ)音輸入單元110和動(dòng)作輸入單元120之一接收用戶語(yǔ)音和用戶動(dòng)作之一的輸入(S11120)。電子設(shè)備100按照用戶輸入選擇第一項(xiàng)目(S11130)。例如,在語(yǔ)音任務(wù)模式中,電子設(shè)備100可以按照通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)選擇第一項(xiàng)目,而且在動(dòng)作任務(wù)模式中,電子設(shè)備100可以按照通過(guò)動(dòng)作輸入單元120輸入的用戶動(dòng)作來(lái)選擇第一項(xiàng)目。在遙控任務(wù)模式中,電子設(shè)備100可以按照通過(guò)遙控信號(hào)接收單元170輸入的遙控信號(hào)來(lái)選擇第一項(xiàng)目。如果選擇了第一項(xiàng)目,則電子設(shè)備100可以將選定的第一項(xiàng)目與其他項(xiàng)目不同地顯示(S11140)。例如,電子設(shè)備100可以以比其他項(xiàng)目粗黑的方式突出顯示選定的第一項(xiàng)目。
如果當(dāng)與其他項(xiàng)目不同地顯示第一項(xiàng)目的時(shí)候第一項(xiàng)目的名稱(chēng)的字符數(shù)超過(guò)預(yù)先設(shè)定的數(shù)量而且電子設(shè)備100的模式是動(dòng)作任務(wù)模式(或遙控模式),則電子設(shè)備100可以顯示第一項(xiàng)目的完整名稱(chēng)。例如,如圖109所示,顯示了選定的可運(yùn)行圖標(biāo)的完整名稱(chēng)“令人興奮的鼓”。此外,電子設(shè)備100可以以滾動(dòng)的方法顯示第一項(xiàng)目的完整名稱(chēng)。另ー方面,如果第一項(xiàng)目的名稱(chēng)的字符數(shù)超過(guò)預(yù)先設(shè)定的數(shù)量而且電子設(shè)備100的模式是語(yǔ)音任務(wù)模式,則電子設(shè)備100可以只顯示第一項(xiàng)目的名稱(chēng)的一部分。第一項(xiàng)目的名稱(chēng)的一部分是固定的。例如,如圖110所示,只顯示了可運(yùn)行圖標(biāo)“令人興奮的鼓”的名稱(chēng)的一部分(“令人興奮的”)。如上所述,在語(yǔ)音任務(wù)模式中只顯示項(xiàng)目名稱(chēng)的一部分,從而用戶能夠通過(guò)只說(shuō)出名稱(chēng)的一部分來(lái)運(yùn)行第一項(xiàng)目。在語(yǔ)音任務(wù)模式中,控制單元140顯示包括多個(gè)語(yǔ)音項(xiàng)目的語(yǔ)音輔助信息。語(yǔ)音輔助信息包括指示電子設(shè)備100的模式是語(yǔ)音任務(wù)模式的圖標(biāo),而且指示語(yǔ)音任務(wù)模式的圖標(biāo)可以位于語(yǔ)音輔助信息的中心處。如果顯示語(yǔ)音輔助信息,而且通過(guò)語(yǔ)音輸入單元110輸入與多個(gè)語(yǔ)音項(xiàng)目之一相對(duì)應(yīng)的用戶語(yǔ)音,則控制単元140可以在語(yǔ)音輔助信息的第一區(qū)域上顯示執(zhí)行語(yǔ)音任務(wù)的指導(dǎo)消息,而且在語(yǔ)音輔助信息的第二區(qū)域上顯示語(yǔ)音項(xiàng)目。第一區(qū)域可以是圖標(biāo)左側(cè)的區(qū)域,第二區(qū)域可以是圖標(biāo)右側(cè)的區(qū)域。指導(dǎo)消息的輸出屬性可以不同于語(yǔ)音項(xiàng)目的輸出屬性。輸出屬性可以包括字符的大小、色度、亮度和顔色中的至少ー個(gè)。如果用戶語(yǔ)音是改變頻道的命令,則控制単元140可以在第一區(qū)域上顯示指導(dǎo)頻道改變的指導(dǎo)消息,而且可以在第二區(qū)域上顯示與可說(shuō)出的改變頻道的命令的示例相對(duì)應(yīng)的語(yǔ)音項(xiàng)目以及與取消頻道改變相對(duì)應(yīng)的語(yǔ)音項(xiàng)目。如果用戶語(yǔ)音是關(guān)閉電源的命令,則控制単元140可以在第一區(qū)域上顯示確認(rèn)關(guān)閉電源的指導(dǎo)消息,而且可以在第二區(qū)域上顯示與關(guān)于是否關(guān)閉電源的命令相對(duì)應(yīng)的語(yǔ)音項(xiàng)目。下文中,將參照?qǐng)D112至圖114解釋語(yǔ)音輔助信息的顯示。如果通過(guò)語(yǔ)音輸入?yún)g元110輸入語(yǔ)音啟動(dòng)命令,則控制単元140可以將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,在語(yǔ)音任務(wù)模式中,電子設(shè)備100按照通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)控制??刂茊卧?40如圖112所示顯示語(yǔ)音輔助信息。語(yǔ)音輔助信息可以顯示指示電子設(shè)備100的當(dāng)前模式是語(yǔ)音任務(wù)模式的圖標(biāo)820。語(yǔ)音輔助信息可以在圖標(biāo)820的左側(cè)區(qū)域上顯示關(guān)閉電源語(yǔ)音項(xiàng)目811、頻道語(yǔ)音項(xiàng)目812、靜音語(yǔ)音項(xiàng)目813和外部輸入語(yǔ)音項(xiàng)目814,并且可以在圖標(biāo)820的右側(cè)區(qū)域上顯示智能中心語(yǔ)音項(xiàng)目815、應(yīng)用項(xiàng)目語(yǔ)音項(xiàng)目816、搜索語(yǔ)音項(xiàng)目817和全部語(yǔ)音項(xiàng)目818。如果顯示語(yǔ)音輔助信息,而且通過(guò)語(yǔ)音輸入單元110輸入了與頻道語(yǔ)音項(xiàng)目812相對(duì)應(yīng)的命令“頻道”,則控制単元140如圖113所示改變語(yǔ)音輔助信息??刂茊卧?40在用于執(zhí)行語(yǔ)音任務(wù)的語(yǔ)音輔助信息中的圖標(biāo)820的左側(cè)區(qū)域上顯示具有第一色度的指導(dǎo)消息。例如,如圖113所示,可以在左側(cè)區(qū)域上顯示“請(qǐng)說(shuō)出頻道名稱(chēng)或頻道號(hào)碼”13110。控制單元140在語(yǔ)音輔助信息中的圖標(biāo)820的右側(cè)區(qū)域上顯示具有第二色度的語(yǔ)音項(xiàng)目。語(yǔ)音項(xiàng)目可以是與可說(shuō)出的改變頻道的命令的示例相對(duì)應(yīng)的語(yǔ)音項(xiàng)目以及與取消頻道改變相對(duì)應(yīng)的語(yǔ)音項(xiàng)目(例如,前ー個(gè)語(yǔ)音項(xiàng)目)。例如,如圖113所示,可以在圖標(biāo)820的右側(cè)區(qū)域上顯示“(示例11、MBC、前一個(gè)頻道等)前ー個(gè)” 11320??刂茊卧?40可以進(jìn)行控制以使得圖標(biāo)820的右側(cè)區(qū)域的色度比圖標(biāo)820的左側(cè)區(qū)域的色度深(thick)。如果如圖112所示顯示語(yǔ)音輔助信息,而且通過(guò)語(yǔ)音輸入單元110輸入與關(guān)閉電源語(yǔ)音項(xiàng)目811相對(duì)應(yīng)的命令“關(guān)閉電源”,則控制単元140如圖114所示改變語(yǔ)音輔助信息。控制單元140在用于執(zhí)行語(yǔ)音任務(wù)的語(yǔ)音輔助信息中的圖標(biāo)820的左側(cè)區(qū)域上顯示具有第一色度的指導(dǎo)消息。例如,如圖114所示,可以在圖標(biāo)820的左側(cè)區(qū)域上顯示“您要關(guān)閉電源? ”11410??刂茊卧?40在語(yǔ)音輔助信息中的圖標(biāo)820的右側(cè)區(qū)域上顯示具有第二色度的語(yǔ)音項(xiàng)目。該語(yǔ)音項(xiàng)目可以是與關(guān)于是否關(guān)閉電源的命令相對(duì)應(yīng)的語(yǔ)音項(xiàng)目。例如,如圖114所示,可以在圖標(biāo)820的右側(cè)區(qū)域上顯示“是或否” 11420和11430??刂茊卧?40可以控制以使得圖標(biāo)820的右側(cè)區(qū)域的色度比圖標(biāo)820的左側(cè)區(qū)域的色度深。圖115是根據(jù)示范性實(shí)施例的、解釋顯示語(yǔ)音輔助信息的電子設(shè)備100的控制方法的流程圖。
電子設(shè)備100顯示語(yǔ)音輔助信息(S11510)。語(yǔ)音輔助信息可以包括指示電子設(shè)備100的當(dāng)前模式是語(yǔ)音任務(wù)模式的圖標(biāo)、以及指導(dǎo)語(yǔ)音任務(wù)模式的多個(gè)語(yǔ)音項(xiàng)目。如果通過(guò)語(yǔ)音輸入?yún)g元110輸入與多個(gè)語(yǔ)音項(xiàng)目之一相對(duì)應(yīng)的用戶語(yǔ)音,則電子設(shè)備100在第一區(qū)域上顯示具有第一色度的指導(dǎo)消息,而且在第二區(qū)域上顯示具有第二色度的語(yǔ)音項(xiàng)目(S11520)。第一區(qū)域可以是語(yǔ)音輔助信息中的圖標(biāo)右側(cè)的區(qū)域,第二區(qū)域可以是語(yǔ)音輔助信息中的圖標(biāo)左側(cè)的區(qū)域。第二色度可以比第一色度深。如上所述,以指導(dǎo)消息的色度的色度不同的色度來(lái)顯示可說(shuō)出的語(yǔ)音項(xiàng)目,從而用戶能夠更清楚地知道用戶應(yīng)該說(shuō)出哪個(gè)命令??刂茊卧?40顯示包括多個(gè)指導(dǎo)語(yǔ)音任務(wù)的語(yǔ)音項(xiàng)目的語(yǔ)音輔助信息。如果通過(guò)語(yǔ)音輸入?yún)g元HO輸入的用戶語(yǔ)音包括不屬于與多個(gè)語(yǔ)音項(xiàng)目相對(duì)應(yīng)的命令的、預(yù)先設(shè)定的詞,則控制単元140可以執(zhí)行與該預(yù)先設(shè)定的詞相對(duì)應(yīng)的語(yǔ)音任務(wù)。預(yù)先設(shè)定的詞可以是與遙控器中包括的可運(yùn)行鍵相對(duì)應(yīng)的詞,該遙控器與電子設(shè)備100互鎖(interlock) (S卩,通信)。例如,預(yù)先設(shè)定的詞可以包括生成頻道列表的命令、生成菜單的命令、運(yùn)行社交網(wǎng)絡(luò)的命令、指導(dǎo)節(jié)目時(shí)間表的命令、改變?yōu)?D圖像的命令、和指導(dǎo)廣播的命令中的至少ー個(gè)。預(yù)先設(shè)定的詞可以是與提供任務(wù)的命令相對(duì)應(yīng)的詞,該任務(wù)與由電子設(shè)備100執(zhí)行的功能有夫。例如,如果電子設(shè)備100當(dāng)前執(zhí)行重現(xiàn)運(yùn)動(dòng)圖像的功能,則預(yù)先設(shè)定的詞可以包括重現(xiàn)運(yùn)動(dòng)圖像的命令、暫停運(yùn)動(dòng)圖像的命令、停止運(yùn)動(dòng)圖像的命令、重現(xiàn)前ー個(gè)文件的命令、重現(xiàn)下ー個(gè)文件的命令、向前跳的命令、向后跳的命令中的至少ー個(gè)。也就是說(shuō),與電子設(shè)備100的基本功能相對(duì)應(yīng)的命令預(yù)先存儲(chǔ)在語(yǔ)音數(shù)據(jù)庫(kù)130m中,從而即使在語(yǔ)音輔助信息中沒(méi)有顯示該功能,用戶也能夠通過(guò)語(yǔ)音識(shí)別來(lái)使用電子設(shè)備100的基本功能。下文中,將參照?qǐng)D116和圖117解釋說(shuō)出不屬于語(yǔ)音輔助信息上所顯示的語(yǔ)音項(xiàng)目的命令的情況。
如果通過(guò)語(yǔ)音輸入?yún)g元110輸入了語(yǔ)音啟動(dòng)命令(例如,“Ginny”),則控制単元140將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,在語(yǔ)音任務(wù)模式中,電子設(shè)備100根據(jù)通過(guò)語(yǔ)音輸入單元HO輸入的用戶語(yǔ)音來(lái)控制。如果將模式改變?yōu)檎Z(yǔ)音任務(wù)模式,則控制單元140在顯示屏幕的下部顯示語(yǔ)音輔助信息,如圖116所示。在這個(gè)時(shí)候,在語(yǔ)音輔助信息上顯示指示電子設(shè)備100的當(dāng)前模式是語(yǔ)音任務(wù)模式的圖標(biāo)820。語(yǔ)音輔助信息在圖標(biāo)820的左側(cè)區(qū)域上顯示關(guān)閉電源語(yǔ)音項(xiàng)目811、頻道語(yǔ)音項(xiàng)目812、靜音語(yǔ)音項(xiàng)目813和外部輸入語(yǔ)音項(xiàng)目814,并且在圖標(biāo)820的右側(cè)區(qū)域上顯示智能中心語(yǔ)音項(xiàng)目815、應(yīng)用語(yǔ)音項(xiàng)目816、搜索語(yǔ)音項(xiàng)目817和全部語(yǔ)音項(xiàng)目818。如果顯示語(yǔ)音輔助信息,而且通過(guò)語(yǔ)音輸入單元110輸入了不屬于語(yǔ)音輔助信息的命令“頻道列表”,則控制単元140可以在顯示屏幕的一側(cè)顯示頻道列表11700,如圖117所示。頻道列表11700包括相對(duì)于當(dāng)前調(diào)諧的廣播頻道、落入預(yù)先設(shè)定的號(hào)碼范圍內(nèi)的廣播頻道。例如,如果當(dāng)前調(diào)諧的廣播頻道是“9-1KBS2”,則控制單元140在頻道列表11700中顯示“6-1 SBS,,、“7-1 KBS1”、“9-1 KBS2”、“11_1 MBC”、“13_1 EBS”,如圖 117 所示。用戶可以通過(guò)選擇頻道列表11700中的頻道之一來(lái)改變頻道。因此,即使語(yǔ)音輔助信息沒(méi)有顯示與頻道列表相對(duì)應(yīng)的語(yǔ)音項(xiàng)目,用戶也能夠通過(guò)語(yǔ)音識(shí)別執(zhí)行顯示頻道列表的任務(wù)。圖118是根據(jù)示范性實(shí)施例的、解釋在說(shuō)出不屬于語(yǔ)音輔助信息上所顯示的語(yǔ)音項(xiàng)目的命令的情況下的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100顯示語(yǔ)音輔助信息(S11810)。語(yǔ)音輔助信息可以包括指示電子設(shè)備100的當(dāng)前模式是語(yǔ)音任務(wù)模式的圖標(biāo)、以及多個(gè)指導(dǎo)語(yǔ)音任務(wù)模式的語(yǔ)音項(xiàng)目。電子設(shè)備100接收除了與語(yǔ)音項(xiàng)目相對(duì)應(yīng)的命令以外的命令的輸入(S11820)。除了與語(yǔ)音項(xiàng)目相對(duì)應(yīng)的命令以外的命令可以是與遙控器中包括的可運(yùn)行鍵相對(duì)應(yīng)的詞,該遙控器與電子設(shè)備100通信。例如,該詞可以包括生成頻道列表的命令、生成菜單的命令、運(yùn)行社交網(wǎng)絡(luò)的命令、指導(dǎo)節(jié)目時(shí)間表的命令、改變?yōu)?D圖像的命令、和指導(dǎo)廣播的命令中的至少ー個(gè)。除了與語(yǔ)音項(xiàng)目相對(duì)應(yīng)的命令以外的命令可以是與提供任務(wù)的命令相對(duì)應(yīng)的詞,該任務(wù)與由電子設(shè)備100當(dāng)前執(zhí)行的功能有夫。例如,如果電子設(shè)備100當(dāng)前執(zhí)行重現(xiàn)運(yùn)動(dòng)圖像的功能,則該詞可以包括重現(xiàn)運(yùn)動(dòng)圖像的命令、暫停運(yùn)動(dòng)圖像的命令、停止運(yùn)動(dòng)圖像的命令、重現(xiàn)前ー個(gè)文件的命令、重現(xiàn)下ー個(gè)文件的命令、向前跳的命令、向后跳的命令中的至少ー個(gè)。電子設(shè)備100按照輸入的命令執(zhí)行語(yǔ)音任務(wù)(S11830)。例如,如果輸入生成頻道列表的命令,則電子設(shè)備100生成并顯示頻道列表。如上所述,用戶能夠執(zhí)行與語(yǔ)音輔助信息中沒(méi)有顯示的命令相對(duì)應(yīng)的任務(wù)??刂茊卧?40不僅可以執(zhí)行使用一只手的動(dòng)作任務(wù)模式,而且還可以執(zhí)行使用雙手的動(dòng)作任務(wù)模式。具體來(lái)說(shuō),如果通過(guò)動(dòng)作輸入單元120輸入使用雙手的動(dòng)作啟動(dòng)命令,則控制單元140可以將電子設(shè)備100的模式改變?yōu)槭褂秒p手的動(dòng)作任務(wù)模式,以使用雙手來(lái)執(zhí)行動(dòng)作任務(wù)。
在使用一只手的動(dòng)作任務(wù)模式中,如果輸入使用另ー只手的動(dòng)作啟動(dòng)命令,則控制単元140可以識(shí)別到使用雙手的動(dòng)作啟動(dòng)命令。具體來(lái)說(shuō),如果如圖119所示通過(guò)動(dòng)作輸入單元120輸入的動(dòng)作啟動(dòng)命令(例如,搖動(dòng)ー只手3到4次的動(dòng)作),則控制單元140將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,電子設(shè)備100按照通過(guò)動(dòng)作輸入單元120輸入的用戶動(dòng)作來(lái)控制。如果在該動(dòng)作任務(wù)模式中通過(guò)動(dòng)作輸入單元120輸入使用另ー只手的動(dòng)作啟動(dòng)命令,則控制単元140將電子設(shè)備100的模式改變?yōu)槭褂秒p手的動(dòng)作任務(wù)模式,以使用雙手執(zhí)行動(dòng)作任務(wù)。在另ー個(gè)示范性實(shí)施例中,如果輸入同時(shí)搖動(dòng)雙手多次(例如,3到4次)的搖動(dòng)動(dòng)作,則可以識(shí)別到使用雙手的動(dòng)作啟動(dòng)命令。具體來(lái)說(shuō),如果如圖120所示通過(guò)動(dòng)作輸入單元120輸入同時(shí)搖動(dòng)手多次的搖動(dòng)動(dòng)作,則控制単元140可以將電子設(shè)備100的模式改變?yōu)槭褂秒p手的動(dòng)作任務(wù)模式,以使用雙手來(lái)執(zhí)行動(dòng)作任務(wù)。使用雙手的動(dòng)作任務(wù)可以是放大或縮小顯示屏幕的任務(wù)。具體來(lái)說(shuō),如果運(yùn)行了不可能執(zhí)行使用雙手的動(dòng)作任務(wù)的應(yīng)用,則控制単元140可以輸出不可能執(zhí)行使用雙手的動(dòng)作任務(wù)的消息。例如,如果運(yùn)行了不可能執(zhí)行使用雙手的動(dòng)作任務(wù)的應(yīng)用,則控制単元140可以顯示指示不可能執(zhí)行使用雙手的動(dòng)作任務(wù)的圖標(biāo)。圖121是根據(jù)示范性實(shí)施例的、解釋使用雙手的動(dòng)作任務(wù)模式的流程圖。電子設(shè)備100接收到使用雙手的動(dòng)作啟動(dòng)命令的輸入(S12110)。例如,在使用一只手的動(dòng)作任務(wù)模式中,如果輸入了使用另ー只手的動(dòng)作啟動(dòng)命令,則識(shí)別到正在輸入使用雙手的動(dòng)作啟動(dòng)命令。在另ー個(gè)示范性實(shí)施例中,如果輸入了同時(shí)搖動(dòng)雙手多次(例如,3到4次)的搖動(dòng)動(dòng)作,則可以識(shí)別到使用雙手的動(dòng)作啟動(dòng)命令。如果輸入了使用雙手的動(dòng)作啟動(dòng)命令,電子設(shè)備100將電子設(shè)備100的模式改變?yōu)槭褂秒p手的動(dòng)作任務(wù)模式以執(zhí)行使用雙手的電子設(shè)備的任務(wù)(S12120 )。使用雙手的動(dòng)作任務(wù)可以是放大或縮小顯示屏幕的任務(wù)。如上所述,用戶不僅能夠使用一只手而且能夠使用雙手來(lái)執(zhí)行動(dòng)作任務(wù)。如果通過(guò)動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,按照輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來(lái)執(zhí)行動(dòng)作任務(wù)。在動(dòng)作任務(wù)模式中,只按照輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來(lái)執(zhí)行動(dòng)作任務(wù),直到輸入動(dòng)作啟動(dòng)命令的用戶釋放動(dòng)作任務(wù)模式為止。即使除了輸入該動(dòng)作啟動(dòng)命令的用戶以外的其他用戶輸入了動(dòng)作啟動(dòng)命令,該動(dòng)作任務(wù)模式也將被保持。具體來(lái)說(shuō),如果通過(guò)動(dòng)作輸入單元120輸入了動(dòng)作啟動(dòng)命令,則控制單元140可以使用動(dòng)作識(shí)別模塊1301來(lái)追蹤輸入該動(dòng)作啟動(dòng)命令的用戶的手??刂茊卧?40可以使用用戶手的形狀、顔色和動(dòng)作中的至少ー個(gè)來(lái)追蹤用戶的手。即使通過(guò)動(dòng)作輸入單元120輸入了另ー個(gè)用戶的手的動(dòng)作啟動(dòng)命令,控制單元140也不執(zhí)行另ー個(gè)用戶的手的動(dòng)作任務(wù),而且追蹤最初輸入動(dòng)作啟動(dòng)命令的用戶的手并執(zhí)行動(dòng)作任務(wù)。即使由另ー個(gè)用戶輸入動(dòng)作啟動(dòng)命令,控制單元140也可以按照最初輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作執(zhí)行動(dòng)作任務(wù),直到最初輸入動(dòng)作啟動(dòng)命令的用戶輸入釋放動(dòng)作任務(wù)模式的命令。即使在動(dòng)作任務(wù)模式中輸入動(dòng)作啟動(dòng)命令的用戶的手與其他用戶的手重疊,也可以按照輸入該動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來(lái)執(zhí)行動(dòng)作任務(wù)??商鎿Q地,如果輸入了使用一只手的動(dòng)作啟動(dòng)命令而且輸入了使用除了輸入該動(dòng)作啟動(dòng)命令的用戶以外的其他用戶的ー只手的另ー個(gè)動(dòng)作啟動(dòng)命令,則控制単元140可以將電子設(shè)備100的模式改變?yōu)槭褂秒p手的動(dòng)作任務(wù)模式,以使用雙手執(zhí)行動(dòng)作任務(wù)。使用雙手的動(dòng)作任務(wù)模式可以由最初輸入動(dòng)作啟動(dòng)命令的用戶的ー只手和另ー個(gè)用戶的ー只手來(lái)執(zhí)行。如果通過(guò)動(dòng)作輸入單元120從多個(gè)用戶輸入多個(gè)動(dòng)作啟動(dòng)命令,則控制單元140從多個(gè)動(dòng)作啟動(dòng)命令當(dāng)中確定最初輸入的動(dòng)作啟動(dòng)命令。如果確定了最初輸入的動(dòng)作啟動(dòng)命令,則控制単元140將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,按照最初輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來(lái)執(zhí)行動(dòng)作任務(wù)??梢灾话凑兆畛踺斎雱?dòng)作啟動(dòng)命令的用戶的動(dòng)作來(lái)執(zhí)行動(dòng)作任務(wù),直到最初輸入動(dòng)作啟動(dòng)命令的用戶釋放動(dòng)作任務(wù)模式為止。即使除了最初輸入動(dòng)作啟動(dòng)命令的用戶以外的其他用戶輸入了動(dòng)作啟動(dòng)命令,該動(dòng)作任務(wù)模式也將被保持。圖122是根據(jù)示范性實(shí)施例的、解釋在多個(gè)用戶輸入多個(gè)動(dòng)作啟動(dòng)命令的情況下的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100通過(guò)動(dòng)作輸入單元120從多個(gè)用戶接收到多個(gè)動(dòng)作啟動(dòng)命令(S12210)。動(dòng)作啟動(dòng)命令可以是多次(例如,3到4次)搖動(dòng)用戶的手的搖動(dòng)動(dòng)作。電子設(shè)備100從多個(gè)動(dòng)作啟動(dòng)命令當(dāng)中確定最初輸入的動(dòng)作啟動(dòng)命令(S12220)。具體來(lái)說(shuō),電子設(shè)備100可以使用用于輸入動(dòng)作啟動(dòng)命令的用戶手的形狀、顔色和動(dòng)作來(lái)確定最初輸入的動(dòng)作啟動(dòng)命令。電子設(shè)備100使用最初輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來(lái)執(zhí)行動(dòng)作任務(wù)(S12230)。具體來(lái)說(shuō),如果電子設(shè)備100確定了最初輸入的動(dòng)作啟動(dòng)命令,則電子設(shè)備100可以將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,按照最初輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來(lái)執(zhí)行動(dòng)作任務(wù)。電子設(shè)備100在動(dòng)作任務(wù)模式中使用最初輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來(lái)執(zhí)行動(dòng)作任務(wù)??梢灾话凑兆畛踺斎雱?dòng)作啟動(dòng)命令的用戶的動(dòng)作來(lái)執(zhí)行動(dòng)作任務(wù),直到最初輸入動(dòng)作啟動(dòng)命令的用戶釋放動(dòng)作任務(wù)模式為止。即使除了最初輸入動(dòng)作啟動(dòng)命令的用戶以外的其他用戶輸入了動(dòng)作啟動(dòng)命令,該動(dòng)作任務(wù)模式也可以被保持。如上所述,動(dòng)作任務(wù)按照最初輸入的動(dòng)作啟動(dòng)命令來(lái)執(zhí)行,從而能夠防止其他用戶的動(dòng)作引起的誤操作??刂茊卧?40可以分階段地執(zhí)行語(yǔ)音任務(wù)。具體來(lái)說(shuō),如果通過(guò)語(yǔ)音輸入?yún)g元110輸入用戶的第一語(yǔ)音,則控制単元140可以響應(yīng)于第一語(yǔ)音而在圖像的ー個(gè)區(qū)域上顯示指導(dǎo)至少一個(gè)語(yǔ)音任務(wù)的第一菜単。如果通過(guò)語(yǔ)音輸入?yún)g元110輸入用戶的第二語(yǔ)音,則控制単元140可以執(zhí)行至少ー個(gè)語(yǔ)音任務(wù)當(dāng)中的、與用戶的第二語(yǔ)音相對(duì)應(yīng)的語(yǔ)音任務(wù)。例如,如果通過(guò)語(yǔ)音輸入?yún)g元110輸入改變頻道的命令,則控制単元140可以顯示包括用于指導(dǎo)頻道的改變的信息的第一菜単。如果通過(guò)語(yǔ)音輸入?yún)g元110輸入與頻道標(biāo)識(shí)符(例如,頻道名稱(chēng)、頻道號(hào)碼和節(jié)目名稱(chēng)之一)相對(duì)應(yīng)的用戶語(yǔ)音,則控制単元140可以將當(dāng)前頻道改變?yōu)榕c用戶語(yǔ)音相對(duì)應(yīng)的頻道。如果通過(guò)語(yǔ)音輸入?yún)g元110輸入與節(jié)目名稱(chēng)對(duì)對(duì)應(yīng)的用戶語(yǔ)音,則控制単元140從預(yù)先存儲(chǔ)的節(jié)目指南(EPG)中捜索通過(guò)語(yǔ)音輸入單元110輸入的節(jié)目名稱(chēng),并且將當(dāng)前頻道改變?yōu)椴コ鲚斎氲墓?jié)目名稱(chēng)的頻道或者安排觀看時(shí)間。下文中,將參照?qǐng)D123至圖125解釋分階段執(zhí)行語(yǔ)音識(shí)別的情況。如果通過(guò)語(yǔ)首輸入單兀110輸入語(yǔ)首啟動(dòng)命令,則控制單兀140將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,在語(yǔ)音任務(wù)模式中,電子設(shè)備100按照通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)控制??刂茊卧?40可以顯示包括多個(gè)語(yǔ)音項(xiàng)目的語(yǔ)音輔助信息,如圖123所示。如果顯示語(yǔ)音輔助信息,而且通過(guò)語(yǔ)音輸入單元110輸入了與頻道語(yǔ)音項(xiàng)目812相對(duì)應(yīng)的用戶語(yǔ)音(例如,“頻道”),則控制単元140改變語(yǔ)音輔助信息,并且顯示指導(dǎo)語(yǔ)音任務(wù)的執(zhí)行的第一菜単。例如,控制單元140可以顯示“請(qǐng)說(shuō)出頻道名稱(chēng)或頻道號(hào)碼”12410以指導(dǎo)頻道的改變,如圖124所示。如果通過(guò)語(yǔ)音輸入?yún)g元110輸入與頻道號(hào)碼、頻道名稱(chēng)以及廣播節(jié)目名稱(chēng)之一相對(duì)應(yīng)的用戶語(yǔ)音,則控制単元140將當(dāng)前頻道改變?yōu)榕c用戶語(yǔ)音相對(duì)應(yīng)的頻道。例如,如果通過(guò)語(yǔ)音輸入單元110輸入“7”,則控制単元140通過(guò)調(diào)諧到頻道7來(lái)顯示頻道7,如圖125所示。如上所述,分階段地執(zhí)行語(yǔ)音任務(wù),從而能夠防止誤操作。具體來(lái)說(shuō),如果用戶想要改變頻道,則用戶在選擇一次頻道語(yǔ)音項(xiàng)目之后改變頻道,從而能夠避免改變?yōu)椴黄谕念l道。圖126是根據(jù)示范性實(shí)施例的、解釋分階段地執(zhí)行語(yǔ)音任務(wù)的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100顯示圖像(S12610)。圖像可以包括語(yǔ)音輔助信息。電子設(shè)備100通過(guò)語(yǔ)音輸入單兀110接收第一語(yǔ)音的輸入(S12620)。第一語(yǔ)音可以是與所顯示的語(yǔ)音輔助信息中所包括的多個(gè)語(yǔ)音項(xiàng)目之一相對(duì)應(yīng)的用戶語(yǔ)音。電子設(shè)備100響應(yīng)于輸入的第一語(yǔ)音而顯示指導(dǎo)語(yǔ)音任務(wù)的執(zhí)行的第一菜單(S12630)。電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收第二語(yǔ)音的輸入(S12640)。第二語(yǔ)音是執(zhí)行具體語(yǔ)首任務(wù)的命令。電子設(shè)備100響應(yīng)于輸入的第二語(yǔ)音而執(zhí)行與第二語(yǔ)音相對(duì)應(yīng)的語(yǔ)音任務(wù)(S12650)。例如,如果第二語(yǔ)音是頻道名稱(chēng),則電子設(shè)備100將廣播頻道改變?yōu)榕c第二語(yǔ)音相對(duì)應(yīng)的頻道。如上所述,語(yǔ)音任務(wù)是分階段執(zhí)行的,從而能夠防止誤操作。在按照通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)執(zhí)行語(yǔ)音任務(wù)的語(yǔ)音任務(wù)模式中,控制單元140顯示至少ー個(gè)可運(yùn)行圖標(biāo)和該可運(yùn)行圖標(biāo)的名稱(chēng)。語(yǔ)音輸入?yún)g元110接收用戶語(yǔ)音的輸入。如果在至少ー個(gè)可運(yùn)行圖標(biāo)當(dāng)中存在只顯示可運(yùn)行圖標(biāo)的名稱(chēng)的一部分的第一可運(yùn)行圖標(biāo),而且輸入的用戶語(yǔ)音與第一可運(yùn)行圖標(biāo)的名稱(chēng)的所顯示的部分一致,則控制単元140運(yùn)行第一可運(yùn)行圖標(biāo)。如果輸入的用戶語(yǔ)音與構(gòu)成第一可運(yùn)行圖標(biāo)的名稱(chēng)的所顯示的部分的多個(gè)拼寫(xiě)一致,則控制單元140運(yùn)行第一可運(yùn)行圖標(biāo)。如果在可運(yùn)行圖標(biāo)當(dāng)中存在名稱(chēng)包括特殊字符的第二可運(yùn)行圖標(biāo),而且輸入的用戶語(yǔ)音與不包括第二可運(yùn)行圖標(biāo)的名稱(chēng)中所包括的特殊字符的可說(shuō)出名稱(chēng)一致,則控制單元140可以運(yùn)行第二可運(yùn)行圖標(biāo)。 特殊字符可以是不能由用戶說(shuō)出的符號(hào)。例如,特殊字符可以是,但不限于,問(wèn)號(hào)( )、逗號(hào)(,)和句號(hào)(。)。例如,如果存在具有可運(yùn)行圖標(biāo)的名稱(chēng)“面部識(shí)別,語(yǔ)音識(shí)別”的應(yīng)用,則當(dāng)通過(guò)語(yǔ)音輸入單元110輸入用戶語(yǔ)音“面部識(shí)別,語(yǔ)音識(shí)別”時(shí),控制單元140運(yùn)行該應(yīng)用。在上面的示例中,控制單元140執(zhí)行可運(yùn)行圖標(biāo)。然而,這僅僅是示例,而且在控制單元140執(zhí)行超鏈接的情況下也可以應(yīng)用本公開(kāi)的技術(shù)想法。下文中,將參照?qǐng)D127和圖128解釋根據(jù)示范性實(shí)施例的、顯示運(yùn)行可運(yùn)行圖標(biāo)的名稱(chēng)的一部分的可運(yùn)行圖標(biāo)的方法??刂茊卧?40根據(jù)用戶的特定命令顯示包括用于運(yùn)行應(yīng)用的多個(gè)可運(yùn)行圖標(biāo)的內(nèi)容列表(例如,智能中心)。如果內(nèi)容列表中所包括的多個(gè)可運(yùn)行圖標(biāo)當(dāng)中包括名稱(chēng)的字符數(shù)超過(guò)預(yù)定數(shù)量的可運(yùn)行圖標(biāo),則控制單元140可以只顯示該可運(yùn)行圖標(biāo)的完整名稱(chēng)的一部分。例如,如果內(nèi)容列表中所包括的多個(gè)可運(yùn)行圖標(biāo)當(dāng)中包括名稱(chēng)超過(guò)10個(gè)字符的可運(yùn)行圖標(biāo),則控制單元140可以不顯示該可運(yùn)行圖標(biāo)的完整名稱(chēng)“令人興奮的鼓(ExcitingDrum) ”,而是只顯示“令人興奮的(Exciting) ”,如圖127所示。如果顯示了內(nèi)容列表,而且通過(guò)語(yǔ)音輸入單元110輸入了語(yǔ)音啟動(dòng)命令,則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,在語(yǔ)音任務(wù)模式中,電子設(shè)備100按照通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)控制。如果模式改變?yōu)檎Z(yǔ)音任務(wù)模式,則電子設(shè)備100如圖127所示顯示語(yǔ)音輔助信息。如果顯示了語(yǔ)音輔助信息,而且通過(guò)語(yǔ)音輸入單元110說(shuō)出與名稱(chēng)的所顯示的部分一致的“令人興奮的(Exciting) ”,則控制單元140運(yùn)行“令人興奮的鼓(ExcitingDrum) ”,如圖128所示。此外,如果顯示了語(yǔ)音輔助信息,而且通過(guò)語(yǔ)音輸入單元110輸入了構(gòu)成名稱(chēng)的所顯示的部分的多個(gè)拼寫(xiě)“E”、“X”、“C”、“I”、“T”、“I”、“N”和“G”,則控制單元140運(yùn)行“令人興奮的鼓(Exciting Drum)”,如圖128所示。圖129是根據(jù)示范性實(shí)施例的、解釋運(yùn)行顯示可運(yùn)行圖標(biāo)的名稱(chēng)的一部分的可運(yùn)行圖標(biāo)的方法的流程圖。電子設(shè)備100響應(yīng)于通過(guò)語(yǔ)音輸入單元110輸入的語(yǔ)音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式(S12910)。電子設(shè)備100顯示包括用于運(yùn)行應(yīng)用的多個(gè)可運(yùn)行圖標(biāo)的內(nèi)容列表。具體地,電子設(shè)備100在內(nèi)容列表上顯示可運(yùn)行圖標(biāo),該可運(yùn)行圖標(biāo)顯示可運(yùn)行圖標(biāo)的名稱(chēng)的一部分(S12920)。這是因?yàn)榭蛇\(yùn)行圖標(biāo)的名稱(chēng)的字符數(shù)量超過(guò)預(yù)定數(shù)量,從而不能顯示可運(yùn)行圖標(biāo)的完整名稱(chēng)。電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收用戶語(yǔ)音的輸入(S12930)。電子設(shè)備100確定通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音是否與名稱(chēng)的所顯示的部分一致(S12940)。
如果存在其名稱(chēng)的一部分與通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音一致的可運(yùn)行圖標(biāo)(S12940-是),則電子設(shè)備100運(yùn)行該可運(yùn)行圖標(biāo)(S12950)。在上面的示范性實(shí)施例中,電子設(shè)備100運(yùn)行可運(yùn)行圖標(biāo)。然而,這僅僅是示例,而且在電子設(shè)備100運(yùn)行超鏈接的情況下也可以應(yīng)用本公開(kāi)的技術(shù)想法。如上所述,能夠通過(guò)只說(shuō)出相應(yīng)的可運(yùn)行圖標(biāo)的名稱(chēng)的一部分來(lái)運(yùn)行應(yīng)用或超鏈接。如果在動(dòng)作任務(wù)模式中通過(guò)動(dòng)作輸入單元120輸入第一用戶動(dòng)作和第二用戶動(dòng)作之一,而且如果應(yīng)用運(yùn)行屏幕是可放大或可縮小的,則控制單元140可以通過(guò)響應(yīng)于識(shí)別到的第一用戶動(dòng)作和第二用戶動(dòng)作之一而放大或縮小應(yīng)用運(yùn)行屏幕,來(lái)顯示應(yīng)用運(yùn)行屏眷。具體來(lái)說(shuō),如果在運(yùn)行應(yīng)用時(shí)通過(guò)動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式。如果通過(guò)動(dòng)作輸入單元120輸入了第一用戶動(dòng)作和第二用戶動(dòng)作之一,則控制單元140識(shí)別第一用戶動(dòng)作和第二用戶動(dòng)作之一,而且響應(yīng)于識(shí)別到的動(dòng)作而放大或縮小應(yīng)用運(yùn)行屏幕。第一用戶用作可以是使雙手相互遠(yuǎn)離的動(dòng)作,而且如果識(shí)別到第一用戶動(dòng)作,則控制單元140可以通過(guò)放大應(yīng)用運(yùn)行屏幕來(lái)顯示應(yīng)用運(yùn)行屏幕。第二用戶用作可以是使雙手相互靠近的動(dòng)作,而且如果識(shí)別到第二用戶動(dòng)作,則控制單元140可以通過(guò)縮小應(yīng)用運(yùn)行屏幕來(lái)顯示應(yīng)用運(yùn)行屏幕。如果在動(dòng)作任務(wù)模式中通過(guò)動(dòng)作輸入單元120輸入了第三用戶動(dòng)作,則控制單元140可以識(shí)別第三用戶動(dòng)作,而且通過(guò)響應(yīng)于第三用戶動(dòng)作而移動(dòng)應(yīng)用運(yùn)行屏幕來(lái)顯示應(yīng)用運(yùn)行屏幕。第三用戶動(dòng)作可以是在保持抓動(dòng)作的同時(shí)移動(dòng)一只手的動(dòng)作。應(yīng)用運(yùn)行屏幕在電子設(shè)備100的顯示屏幕之內(nèi)是可移動(dòng)的。下文中,將參照?qǐng)D130至圖133解釋輸入到網(wǎng)頁(yè)的特殊姿勢(shì)。如果顯示了網(wǎng)頁(yè),而且通過(guò)動(dòng)作輸入單元120輸入了動(dòng)作啟動(dòng)命令,則控制單元140可以在網(wǎng)頁(yè)的下部顯示動(dòng)作輔助信息,如圖130所示。此外,如果電子設(shè)備100進(jìn)入動(dòng)作任務(wù)模式,則控制單元140在顯示屏幕的中心處顯示指針13000。如果顯示了動(dòng)作輔助信息,而且通過(guò)動(dòng)作輸入單元120輸入了使用雙手的動(dòng)作啟動(dòng)命令,則控制單元140進(jìn)入使用雙手的動(dòng)作任務(wù)模式。如果在使用雙手的動(dòng)作任務(wù)模式中通過(guò)動(dòng)作輸入單元120輸入了使雙手相互遠(yuǎn)離的動(dòng)作,則控制單元140放大網(wǎng)頁(yè)屏幕,如圖131所示。當(dāng)放大網(wǎng)頁(yè)屏幕時(shí),可以移除指針。如果放大了網(wǎng)頁(yè)屏幕,則控制單元140再次顯示指針13000,如圖132所示。如果顯示了指針13000,而且通過(guò)動(dòng)作輸入單元120輸入了抓一只手并且移動(dòng)抓手的動(dòng)作,則控制單元140可以按照抓一只手并且移動(dòng)抓手的動(dòng)作來(lái)移動(dòng)顯示屏幕。例如,如果通過(guò)動(dòng)作輸入單元120輸入了抓一只手并且沿向右方向移動(dòng)抓手的動(dòng)作,則控制單元140可以沿向右方向來(lái)移動(dòng)顯示屏幕,如圖133所示。如上所述,用戶能夠使用用戶動(dòng)作來(lái)移動(dòng)、放大或縮小電子設(shè)備100的顯示屏幕。圖134是示出根據(jù)示范性實(shí)施例的、在輸入特殊姿勢(shì)的情況下的電子設(shè)備100的控制方法的流程圖。
電子設(shè)備100通過(guò)動(dòng)作輸入單元120接收動(dòng)作啟動(dòng)命令(S13410)。如果輸入了動(dòng)作啟動(dòng)命令,則電子設(shè)備100識(shí)別動(dòng)作啟動(dòng)命令并將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式(S13420)。如果將模式改為動(dòng)作任務(wù)模式,則電子設(shè)備100顯示指針和執(zhí)行動(dòng)作任務(wù)模式的動(dòng)作輔助信息。電子設(shè)備100按照用戶操縱來(lái)運(yùn)行應(yīng)用(S13430)。電子設(shè)備100通過(guò)動(dòng)作輸入單元120接收特殊動(dòng)作的輸入(S13440)。特殊動(dòng)作可以是使用雙手來(lái)放大或縮小顯示屏幕的動(dòng)作或者移動(dòng)抓手來(lái)移動(dòng)顯示屏幕的動(dòng)作。如果輸入了特殊動(dòng)作,則電子設(shè)備100執(zhí)行與特殊動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)(S13450)。例如,如果輸入了將雙手彼此拉近的動(dòng)作,則電子設(shè)備100執(zhí)行縮小顯示屏幕的任務(wù),而且,如果輸入了使雙手相互遠(yuǎn)離的動(dòng)作,則電子設(shè)備100執(zhí)行放大顯示屏幕的任務(wù)。如果輸入了移動(dòng)抓手的動(dòng)作,則電子設(shè)備100沿該動(dòng)作的方向上移動(dòng)顯示屏幕。如上所述,用戶能夠使用用戶動(dòng)作來(lái)移動(dòng)、放大或縮小顯示屏幕??刂茊卧?40可以通過(guò)電子設(shè)備100中包括的語(yǔ)音輸入單元110來(lái)接收語(yǔ)音啟動(dòng)命令,而且也可以通過(guò)與電子設(shè)備100通信的設(shè)備接收語(yǔ)音啟動(dòng)命令。在通過(guò)電子設(shè)備100中包括的語(yǔ)音輸入單元110輸入語(yǔ)音啟動(dòng)命令的情況下獲得的語(yǔ)音識(shí)別被稱(chēng)為長(zhǎng)距離(long-distance)語(yǔ)音識(shí)別。如果執(zhí)行長(zhǎng)距離語(yǔ)音識(shí)別,則可以顯示指示長(zhǎng)距離語(yǔ)音識(shí)別的圖標(biāo)13510,如圖135所示。具體來(lái)說(shuō),如果從電子設(shè)備100中包括的語(yǔ)音輸入單元110輸入語(yǔ)音啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)榈谝徽Z(yǔ)音任務(wù)模式。第一語(yǔ)音任務(wù)模式是按照從電子設(shè)備100中包括的語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)執(zhí)行語(yǔ)音任務(wù)的模式。如果將模式改變?yōu)榈谝徽Z(yǔ)音任務(wù)模式,則控制單元140可以顯示指示長(zhǎng)距離語(yǔ)音識(shí)別的圖標(biāo)13510。如果顯示了指示長(zhǎng)距離語(yǔ)音識(shí)別的圖標(biāo),而且在預(yù)定的時(shí)間內(nèi)沒(méi)有用戶語(yǔ)音輸入到電子設(shè)備100中包括的語(yǔ)音輸入單元110中,則控制單元140釋放第一語(yǔ)音任務(wù)模式并且將電子設(shè)備100的模式改變?yōu)檫b控模式,在遙控模式中,電子設(shè)備100由遙控器控制。在通過(guò)與電子設(shè)備100通信的設(shè)備輸入語(yǔ)音啟動(dòng)命令的情況下獲得的語(yǔ)音識(shí)別被稱(chēng)為短距離(short-distance)語(yǔ)音識(shí)別。如果執(zhí)行短距離語(yǔ)音識(shí)別,則可以顯示指示短距離語(yǔ)音識(shí)別的圖標(biāo)13610,如圖136所示。與電子設(shè)備100通信的設(shè)備可以是,但不限于,遙控器或移動(dòng)電話。該設(shè)備可以通過(guò)有線或無(wú)線連接、通過(guò)網(wǎng)絡(luò)等與電子設(shè)備100通信。該設(shè)備可以通過(guò)配對(duì)過(guò)程與電子設(shè)備100配對(duì)。從與電子設(shè)備100通信的設(shè)備輸入的語(yǔ)首啟動(dòng)命令可以是對(duì)應(yīng)于與電子設(shè)備100通信的該設(shè)備中包括的特定按鈕(語(yǔ)音任務(wù)模式改變按鈕)的信號(hào)以及通過(guò)與電子設(shè)備100通信的該設(shè)備中包括的麥克風(fēng)輸入的特定用戶語(yǔ)音之一。如果從與電子設(shè)備100通信的設(shè)備輸入了語(yǔ)音啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)榈诙Z(yǔ)音任務(wù)模式。第二語(yǔ)音任務(wù)模式是按照通過(guò)與電子設(shè)備100通信的設(shè)備中包括的麥克風(fēng)輸入的用戶語(yǔ)音來(lái)執(zhí)行語(yǔ)音任務(wù)的模式。如果將模式改變?yōu)榈诙Z(yǔ)音任務(wù)模式,則控制單元140可以顯示指示短距離語(yǔ)音識(shí)別的圖標(biāo)13610。如果顯示了指示短距離語(yǔ)音識(shí)別的圖標(biāo),而且在預(yù)定的時(shí)間內(nèi)沒(méi)有用戶語(yǔ)音輸入到與電子設(shè)備100通信的設(shè)備中包括的麥克風(fēng)中,則控制單元140釋放第二語(yǔ)音任務(wù)模式并且將電子設(shè)備100的模式改變?yōu)檫b控模式,在遙控模式中,電子設(shè)備100由遙控器控制。圖137是根據(jù)示范性實(shí)施例的、解釋根據(jù)語(yǔ)音輸入方法來(lái)提供不同圖標(biāo)的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100從電子設(shè)備100中包括的麥克風(fēng)和遙控器中包括的麥克風(fēng)之一接收語(yǔ)首啟動(dòng)命令(S13710)。如果語(yǔ)首啟動(dòng)命令是從電子設(shè)備100中包括的麥克風(fēng)輸入的,則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)殚L(zhǎng)距離語(yǔ)音任務(wù)模式。如果語(yǔ)音啟動(dòng)命令是從遙控器中包括的麥克風(fēng)輸入的,則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)槎叹嚯x語(yǔ)音任務(wù)模式。電子設(shè)備100可以根據(jù)輸入語(yǔ)音啟動(dòng)命令的設(shè)備而不同地顯示圖標(biāo)(S13720)。具體來(lái)說(shuō),如果語(yǔ)音啟動(dòng)命令是從電子設(shè)備100中包括的麥克風(fēng)輸入的,則電子設(shè)備100顯示指示長(zhǎng)距離語(yǔ)音任務(wù)模式的圖標(biāo),而且如果語(yǔ)音啟動(dòng)命令是從遙控器中包括的麥克風(fēng)輸入的,則電子設(shè)備100顯示指示短距離語(yǔ)音任務(wù)模式的圖標(biāo)。如上所述,根據(jù)輸入語(yǔ)音啟動(dòng)命令的設(shè)備來(lái)劃分語(yǔ)音任務(wù)模式,而且根據(jù)語(yǔ)音任務(wù)模式顯示不同的圖標(biāo),從而用戶能夠知道哪個(gè)設(shè)備應(yīng)該用于執(zhí)行語(yǔ)音任務(wù)模式。在執(zhí)行語(yǔ)音識(shí)別之后,控制單元140顯示文本輸入校正菜單(例如,輸入法編輯器(IME))以校正與識(shí)別到的語(yǔ)音相對(duì)應(yīng)的文本,以便更準(zhǔn)確地識(shí)別語(yǔ)音。例如,如果通過(guò)語(yǔ)音輸入單元110輸入了語(yǔ)音啟動(dòng)命令,則控制單元140顯示語(yǔ)音輔助信息以執(zhí)行語(yǔ)音任務(wù),該語(yǔ)音任務(wù)是按照通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)控制的。如果輸入了執(zhí)行需要文本輸入的任務(wù)的第一用戶語(yǔ)音,則控制單元140顯示用于文本輸入的文本輸入窗口。需要文本輸入的任務(wù)可以是,但不限于,網(wǎng)頁(yè)沖浪(surfing)。如果輸入了用于在文本輸入窗口上輸入文本的第二用戶語(yǔ)音,則控制單元140可以在文本輸入窗口上顯示與輸入的第二用戶語(yǔ)音相對(duì)應(yīng)的文本,并且可以顯示文本輸入菜單??刂茊卧?40在識(shí)別用戶語(yǔ)音的同時(shí)顯示前一個(gè)屏幕,而且在識(shí)別到用于在文本輸入窗口上輸入文本的第二用戶語(yǔ)音之后在文本輸入窗口上顯示文本??刂茊卧?40可以顯示文本輸入菜單。如果存在包括輸入到文本輸入窗口的文本的多個(gè)候選搜索詞,則控制單元140通過(guò)將候選搜索詞列表與文本輸入菜單重疊來(lái)顯不候選搜索詞列表。如果完成文本輸入窗口上的文本輸入、或者取消文本輸入窗口上的文本輸入,則控制單元140可以從顯示屏幕移除文本輸入菜單。以下,將參照?qǐng)D138至圖141解釋根據(jù)示范性實(shí)施例的、顯示文本輸入菜單的方法。如果在顯示網(wǎng)頁(yè)時(shí)通過(guò)語(yǔ)音輸入單元110輸入了語(yǔ)音啟動(dòng)命令,則控制單元140顯示語(yǔ)音輔助信息,如圖138所示。如果通過(guò)語(yǔ)音輸入單元110輸入了與“搜索”語(yǔ)音項(xiàng)目相對(duì)應(yīng)的用戶語(yǔ)音(例如,“搜索”),則控制單元110顯示文本輸入窗口 13910。如果輸入了用于在文本輸入窗口 13910上輸入文本的用戶語(yǔ)音(例如,“三星電子”),則控制單元140識(shí)別用戶語(yǔ)音并在文本輸入窗口 13910上顯示識(shí)別到的用戶語(yǔ)音。也就是說(shuō),控制單元140輸入并在文本輸入窗口 13910上顯示“三星電子”,如圖139所示。如果在文本輸入窗口 13910上輸入“三星電子”,則控制單元140在文本輸入窗口的一側(cè)顯示文本輸入菜單13920,如圖140所示。文本輸入菜單是在文本輸入窗口上輸入的文本不正確的情況下對(duì)該文本進(jìn)行校正的菜單。如果存在包括輸入到文本輸入窗口 13910的“三星電子”的多個(gè)候選搜索詞,則控制單元140顯示候選搜索詞列表13930。例如,如果包括“三星電子”的多個(gè)候選搜索詞包括“三星電子”、“三星電子的股價(jià)”和“三星電子的新聞”,則控制單元140顯示候選搜索詞列表13930,如圖141所示。圖142是解釋根據(jù)示范性實(shí)施例的、顯示文本輸入菜單(ME)的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收語(yǔ)音啟動(dòng)命令(S14210)。電子設(shè)備100可以顯示包括多個(gè)可運(yùn)行圖標(biāo)的內(nèi)容列表以及包括多個(gè)超鏈接的網(wǎng)頁(yè)。如果輸入了語(yǔ)音啟動(dòng)命令,則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,并且顯示語(yǔ)音輔助信息以執(zhí)行語(yǔ)音任務(wù)模式(S14220)。電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收用于執(zhí)行搜索的用戶語(yǔ)音的輸入(S14230)。電子設(shè)備100顯不用于執(zhí)行搜索的文本輸入窗口(S14240)。如果顯示了文本輸入窗口,則電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收用于在文本輸入窗口上輸入文本的用戶語(yǔ)音的輸入(S14250)。如果輸入了用于輸入文本的用戶語(yǔ)音,則電子設(shè)備100在文本輸入窗口上輸入與輸入的用戶語(yǔ)音相對(duì)應(yīng)的文本(S14260)。如果在文本輸入窗口上輸入了文本,則電子設(shè)備100顯示文本輸入菜單(S14270)。文本輸入菜單是在語(yǔ)音識(shí)別不清晰的情況下對(duì)在文本輸入窗口上輸入的文本進(jìn)行校正的菜單。因此,如果沒(méi)有完全識(shí)別輸入到語(yǔ)音輸入單元110的用戶語(yǔ)音,則用戶能夠使用文本輸入菜單來(lái)補(bǔ)充語(yǔ)音識(shí)別??刂茊卧?40可以使用外部設(shè)備來(lái)識(shí)別語(yǔ)音。具體來(lái)說(shuō),如果通過(guò)語(yǔ)音輸入單元110輸入了語(yǔ)音啟動(dòng)命令,則控制單元140顯示語(yǔ)音輔助信息以指導(dǎo)語(yǔ)音任務(wù),該語(yǔ)音任務(wù)是按照通過(guò)與電子設(shè)備100通信的設(shè)備(例如,遙控器)輸入的用戶語(yǔ)音來(lái)執(zhí)行的。如果選擇了與電子設(shè)備100通信的外部設(shè)備中包括的第一語(yǔ)音輸入按鈕,則控制單元140在語(yǔ)音輔助信息中顯示用于指導(dǎo)語(yǔ)音搜索的第一指導(dǎo)消息。例如,可以顯示指導(dǎo)消息“請(qǐng)按下語(yǔ)音搜索按鈕,然后輸入語(yǔ)音”。當(dāng)選擇了外部設(shè)備中包括的第二語(yǔ)音輸入按鈕的時(shí)候,控制單元140通過(guò)語(yǔ)音輸入單元110識(shí)別用戶語(yǔ)音。語(yǔ)音輸入單元110接收輸入到外部設(shè)備的麥克風(fēng)的用戶語(yǔ)音,并且將用戶語(yǔ)音發(fā)送到控制單元140。控制單元140在語(yǔ)音輔助信息中顯示第二指導(dǎo)消息,其包括指示用戶語(yǔ)音是通過(guò)語(yǔ)音輸入單元110輸入的信息。例如,可以顯示指導(dǎo)消息“正在識(shí)別用戶語(yǔ)音”??刂茊卧?40可以將識(shí)別到的用戶語(yǔ)音作為文本輸入到文本輸入窗口上??刂茊卧?40可以執(zhí)行與識(shí)別到的用戶語(yǔ)音相對(duì)應(yīng)的語(yǔ)音任務(wù)。
如果釋放了對(duì)第二語(yǔ)音輸入按鈕的選擇,則控制單元140可以在語(yǔ)音輔助信息中顯示第三指導(dǎo)消息,其確認(rèn)用戶語(yǔ)音的輸入是否完成。第三指導(dǎo)消息可以包括詢問(wèn)是否繼續(xù)輸入用戶語(yǔ)音的消息、詢問(wèn)輸入的用戶語(yǔ)音是否完整的消息和詢問(wèn)是否取消輸入的用戶語(yǔ)音的消息。如果在顯示第三指導(dǎo)消息的時(shí)候通過(guò)再次選擇第二語(yǔ)音輸入按鈕而輸入用戶語(yǔ)音,則控制單元140可以連續(xù)地識(shí)別所輸入的用戶語(yǔ)音加上先前識(shí)別到的用戶語(yǔ)音。例如,如果先前識(shí)別到的用戶語(yǔ)音是“三星”而且通過(guò)再次選擇第二語(yǔ)音輸入按鈕而輸入用戶語(yǔ)音“電子”,則控制單元140可以在文本輸入窗口上輸入“三星電子”。第一語(yǔ)音輸入按鈕是語(yǔ)音輸入按鈕,而且第二語(yǔ)音輸入按鈕是語(yǔ)音搜索按鈕。第一語(yǔ)音輸入按鈕和第二語(yǔ)音輸入按鈕可以此不同,或者可以是相同的按鈕。圖143是根據(jù)示范性實(shí)施例的、解釋使用外部設(shè)備來(lái)執(zhí)行語(yǔ)音任務(wù)的方法的流程圖。電子設(shè)備100顯示語(yǔ)音輔助信息以執(zhí)行語(yǔ)音任務(wù)模式(S14310)。外部設(shè)備按照用戶操縱來(lái)選擇語(yǔ)音輸入按鈕(S14320)。如果選擇了語(yǔ)音輸入按鈕,則電子設(shè)備100顯不第一指導(dǎo)消息(S14330)。第一指導(dǎo)消息是語(yǔ)音輔助信息中指導(dǎo)語(yǔ)音搜索的UI。在選擇外部設(shè)備上的語(yǔ)音搜索按鈕的時(shí)候,電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收用戶語(yǔ)音的輸入(S14340)。語(yǔ)音輸入單元110可以是從外部設(shè)備接收用戶語(yǔ)音輸入的通信單元。電子設(shè)備100使用語(yǔ)音識(shí)別模塊130k來(lái)識(shí)別通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音(S14350)。在上面的示范性實(shí)施例中,語(yǔ)音輸入按鈕和語(yǔ)音搜索按鈕可以是相同的按鈕。如上所述,在選擇外部設(shè)備上的語(yǔ)音搜索按鈕的時(shí)候輸入語(yǔ)音,從而能夠防止不期望的語(yǔ)音識(shí)別。如果在顯示屏幕上顯示可說(shuō)出的名稱(chēng),則控制單元140可以提取該名稱(chēng)并且特殊地顯示該名稱(chēng)。如果名稱(chēng)是通過(guò)語(yǔ)音輸入單元Iio輸入的,則控制單元140執(zhí)行與名稱(chēng)相對(duì)應(yīng)的語(yǔ)音任務(wù)。具體來(lái)說(shuō),如果通過(guò)語(yǔ)音輸入單元110輸入語(yǔ)音啟動(dòng)命令,則控制單元140響應(yīng)于輸入的語(yǔ)音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式以執(zhí)行語(yǔ)音任務(wù),并且顯示語(yǔ)音輔助信息以執(zhí)行語(yǔ)音任務(wù)模式??刂茊卧?40從顯示屏幕提取可選項(xiàng)目的文本。顯示屏幕可以顯示內(nèi)容列表,該內(nèi)容列表包括用于運(yùn)行應(yīng)用或網(wǎng)頁(yè)的多個(gè)可運(yùn)行圖標(biāo)??蛇x項(xiàng)目可以是內(nèi)容列表中包括的用于運(yùn)行應(yīng)用的可運(yùn)行圖標(biāo)和網(wǎng)頁(yè)中包括的超鏈接之如果項(xiàng)目名稱(chēng)的文本的字符數(shù)超過(guò)預(yù)定數(shù)量,則控制單元140只從項(xiàng)目名稱(chēng)的完整文本當(dāng)中提取字符數(shù)小于該預(yù)定數(shù)量的文本,并顯示該文本。控制單元140可以將被提取了文本的項(xiàng)目與未被提取文本的其他項(xiàng)目不同地顯
/Jn ο如果通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音與提取的文本一致,則控制單元140運(yùn)行與該文本相對(duì)應(yīng)的項(xiàng)目。
如果通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音與所提取的字符數(shù)小于預(yù)定數(shù)量的文本一致,則控制單元140運(yùn)行與該字符數(shù)小于預(yù)定數(shù)量的文本相對(duì)應(yīng)的項(xiàng)目。下文中,將參照?qǐng)D144和圖145解釋在顯示屏幕上顯示可說(shuō)出的命令的情況??刂茊卧?40響應(yīng)于通過(guò)語(yǔ)音輸入單元110輸入的語(yǔ)音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式。控制單元140在顯示屏幕的下部顯示語(yǔ)音輔助信息。如果通過(guò)語(yǔ)音輸入單元110輸入了 “智能中心”,則控制單元140生成包括用于運(yùn)行應(yīng)用的多個(gè)可運(yùn)行圖標(biāo)的內(nèi)容列表,并顯示該內(nèi)容列表,如圖144所示??刂茊卧?40提取多個(gè)可運(yùn)行圖標(biāo)的名稱(chēng)。如果提取了可運(yùn)行圖標(biāo)的名稱(chēng),則控制單元140為可運(yùn)行圖標(biāo)的名稱(chēng)加下劃線,如圖144所示,如果可運(yùn)行圖標(biāo)(例如,APPlO和APPll)的名稱(chēng)未被提取,則控制單元140不給該可運(yùn)行圖標(biāo)的名稱(chēng)加下劃線。如果可運(yùn)行圖標(biāo)的名稱(chēng)的字符數(shù)超過(guò)預(yù)定數(shù)量,則控制單元140提取可運(yùn)行圖標(biāo)的名稱(chēng)的一部分,并顯示名稱(chēng)的該部分。例如,如果可運(yùn)行圖標(biāo)的名稱(chēng)是“令人興奮的鼓”,則控制單元140提取可運(yùn)行圖標(biāo)的名稱(chēng)的一部分“令人興奮的”,并如圖144所示顯示名稱(chēng)的該部分。為了指示“令人興奮的”是名稱(chēng)的一部分,控制單元140可以在“令人興奮的”之
后顯示“…”。如果顯示了可運(yùn)行圖標(biāo)的已提取的名稱(chēng),并且通過(guò)語(yǔ)音輸入單元110輸入了可運(yùn)行圖標(biāo)的名稱(chēng),則控制單元140運(yùn)行該可運(yùn)行圖標(biāo)。例如,如果通過(guò)語(yǔ)音輸入單元110輸入了 “令人興奮的”,則控制單 元140運(yùn)行應(yīng)用“令人興奮的鼓”,如圖145所示。圖146是根據(jù)示范性實(shí)施例的、解釋在顯示屏幕上顯示可說(shuō)出的命令的情況下執(zhí)行語(yǔ)音任務(wù)的方法的流程圖。電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收語(yǔ)音啟動(dòng)命令(S14610)。電子設(shè)備100響應(yīng)于通過(guò)語(yǔ)音輸入單元110輸入的語(yǔ)音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式(S14620)。電子設(shè)備100在顯示屏幕的下部顯示語(yǔ)音輔助信息以執(zhí)行語(yǔ)音任務(wù)模式(S14630)。電子設(shè)備100提取顯示屏幕中包括的項(xiàng)目的文本(S14640)。該項(xiàng)目可以是內(nèi)容列表中包括的可運(yùn)行圖標(biāo)的名稱(chēng)或網(wǎng)頁(yè)中包括的超鏈接的文本。電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收用戶語(yǔ)音的輸入(S14650)。如果存在其文本與通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音一致的項(xiàng)目,則電子設(shè)備100運(yùn)行相應(yīng)的項(xiàng)目(S14660)。如果只顯示文本的一部分,而且輸入了與文本的該部分一致的用戶語(yǔ)音,則控制單元140可以運(yùn)行相應(yīng)的項(xiàng)目。如上所述,文本的名稱(chēng)被提取并被特殊地顯示,從而用戶能夠更容易地使用語(yǔ)音識(shí)別。在通過(guò)語(yǔ)音輸入單元110輸入用戶語(yǔ)音的時(shí)候,如果只有一個(gè)超鏈接具有所輸入的用戶語(yǔ)音中所包括的文本,則控制單元140可以運(yùn)行與該文本相對(duì)應(yīng)的超鏈接。具體來(lái)說(shuō),如果通過(guò)語(yǔ)音輸入單元110輸入了語(yǔ)音啟動(dòng)命令,則控制單元140響應(yīng)于語(yǔ)音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,在語(yǔ)音任務(wù)模式中,電子設(shè)備100按照通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)控制。
在語(yǔ)音任務(wù)模式中,控制單元140從包括多個(gè)超鏈接的網(wǎng)頁(yè)當(dāng)中提取多個(gè)超鏈接的文本。在提取文本之后,控制單元140可以將所提取的文本與未提取的文本不同地顯示。例如,控制單元140可以為所提取的文本加下劃線、加粗加深地顯示所提取的文本、或聞売地顯不所提取的文本。在通過(guò)語(yǔ)音輸入單元110輸入用戶語(yǔ)音的時(shí)候,如果只有一個(gè)超鏈接具有包括輸入的用戶語(yǔ)音的文本,則控制單元140可以運(yùn)行與該文本相對(duì)應(yīng)的超鏈接。例如,如果通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音是“三星電子”而且從超鏈接提取的文本只是“三星電子”,則執(zhí)行控制單元140運(yùn)行具有文本“三星電子”的超鏈接。在通過(guò)語(yǔ)音輸入單元110輸入用戶語(yǔ)音的時(shí)候,如果只有一個(gè)超鏈接的文本與輸入的用戶語(yǔ)音部分一致而非全部一致,則控制單元140可以運(yùn)行與該文本相對(duì)應(yīng)的超鏈接。在上面的示范性實(shí)施例中,已經(jīng)描述了運(yùn)行網(wǎng)頁(yè)中包括的超鏈接的方法。然而,這僅僅是示例,而且本發(fā)明公開(kāi)的技術(shù)想法可以應(yīng)用于運(yùn)行內(nèi)容列表中包括的用于運(yùn)行應(yīng)用的可運(yùn)行圖標(biāo)的方法。圖147是根據(jù)示范性實(shí)施例的、解釋自動(dòng)語(yǔ)音識(shí)別方法的流程圖。電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收語(yǔ)音啟動(dòng)命令(S14710)。電子設(shè)備100響應(yīng)于通過(guò)語(yǔ)音輸入單元110輸入的語(yǔ)音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式(S14720)。如果電子設(shè)備100的顯示屏幕包括超鏈接,則電子設(shè)備100提取超鏈接的文本(S14730)。電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收用戶語(yǔ)音的輸入。如果在輸入用戶語(yǔ)音的時(shí)候存在一個(gè)包括與輸入的用戶語(yǔ)音一致的文本的超鏈接,則電子設(shè)備100運(yùn)行相應(yīng)的超鏈接(S14740)。與用戶語(yǔ)音一致的文本可以是超鏈接的整個(gè)文本。然而,這僅僅是示例,與用戶語(yǔ)音一致的文本可以是超鏈接的文本的一部分。如上所述,如果只有一個(gè)超鏈接具有與用戶語(yǔ)音一致的文本,則自動(dòng)運(yùn)行相應(yīng)的超鏈接,從而用戶能夠更容易地使用語(yǔ)音識(shí)別來(lái)運(yùn)行超鏈接。如果識(shí)別到輸入的用戶語(yǔ)音,而且存在具有與識(shí)別到的用戶語(yǔ)音一致的文本的多個(gè)超鏈接,則控制單元140顯示候選組列表,其包括具有與識(shí)別到的用戶語(yǔ)音一致的文本的超鏈接。具體來(lái)說(shuō),如果通過(guò)語(yǔ)音輸入單元110輸入語(yǔ)音啟動(dòng)命令,則控制單元140響應(yīng)于語(yǔ)音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,在語(yǔ)音任務(wù)模式中,電子設(shè)備100按照通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)控制。顯示屏幕顯示包括多個(gè)超鏈接的網(wǎng)頁(yè)。控制單元140提取該網(wǎng)頁(yè)中所包括的多個(gè)超鏈接中的包括的文本??刂茊卧?40可以將所提取的文本與未提取的文本不同地顯示。例如,控制單元140可以為所提取的文本加下劃線、加粗加深地顯示所提取的文本、或高亮顯示所提取的文本。如果通過(guò)語(yǔ)音輸入單元110輸入用戶語(yǔ)音,則控制單元140識(shí)別輸入的用戶語(yǔ)音,而且如果存在具有與識(shí)別到的用戶語(yǔ)音一致的文本的多個(gè)超鏈接,則控制單元140顯示候選組列表,其包括具有與識(shí)別到的用戶語(yǔ)音一致的文本的超鏈接。例如,如果輸入到語(yǔ)音輸入單元Iio的用戶語(yǔ)音是“三星電子”,則控制單元140可以生成候選組列表,其包括具有包含“三星電子”的文本的超鏈接。如果通過(guò)語(yǔ)音輸入單元110重新輸入用戶語(yǔ)音,則控制單元140可以識(shí)別重新輸入的用戶語(yǔ)音,并且可以基于重新輸入的用戶語(yǔ)音來(lái)改變候選組列表。例如,如果識(shí)別到“三星電子”而且重新輸入了“股票”,則控制單元140可以將候選組列表改變?yōu)橹话ň哂邪叭请娮庸善薄钡奈谋镜某溄?。如果釋放了語(yǔ)音任務(wù)模式,則控制單元140可以從顯示屏幕移除候選組列表。圖148是根據(jù)示范性實(shí)施例的、解釋用于顯示候選組列表的方法的流程圖。電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收語(yǔ)音啟動(dòng)命令(S14810)。電子設(shè)備100響應(yīng)于通過(guò)語(yǔ)音輸入單元110輸入的語(yǔ)音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式(S14820)。電子設(shè)備100根據(jù)用戶操縱在顯示屏幕上顯示網(wǎng)頁(yè)(S14830)。該網(wǎng)頁(yè)包括多個(gè)超鏈接。電子設(shè)備100提取網(wǎng)頁(yè)中包括的超鏈接的文本(S14840)。電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收用戶語(yǔ)音的輸入(S14850)。電子設(shè)備100確定是否只有一個(gè)超鏈接具有與該用戶語(yǔ)音一致的文本(S14860)。如果只有一個(gè)超鏈接具有與該用戶語(yǔ)音一致的文本(S14860-是),則控制單元140運(yùn)行相應(yīng)的超鏈接(S14870)。
然而,如果存在具有與用戶語(yǔ)音一致的文本的多個(gè)超鏈接(S14860-否),則控制單元140生成包括多個(gè)超鏈接的候選組列表,并顯示該候選組列表(S14880)??刂茊卧?40根據(jù)用戶操縱(例如,將超鏈接的文本作為語(yǔ)音輸入)來(lái)選擇超鏈接(S14890),并運(yùn)行所選擇的超鏈接(S14870)。如上所述,生成候選組列表,從而即使有多個(gè)超鏈接與用戶語(yǔ)音一致,用戶也能夠使用候選組列表來(lái)運(yùn)行期望的超鏈接。如果通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音的等級(jí)低于預(yù)定等級(jí),則控制單元140可以在語(yǔ)音輔助信息的第一區(qū)域上顯示反饋Π,其指示用戶語(yǔ)音是不可識(shí)別的。具體來(lái)說(shuō),如果通過(guò)語(yǔ)音輸入單元110輸入語(yǔ)音啟動(dòng)命令,則控制單元140響應(yīng)于語(yǔ)音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式,在語(yǔ)音任務(wù)模式中,電子設(shè)備100按照通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)控制。在語(yǔ)音任務(wù)模式中,控制單元140顯示指導(dǎo)語(yǔ)音任務(wù)的語(yǔ)音輔助信息,該語(yǔ)音任務(wù)是按照通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音來(lái)執(zhí)行的。語(yǔ)音輔助信息可以在顯示屏幕的下部顯示。語(yǔ)音輸入單元110接收用戶語(yǔ)音的輸入。如果通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音低于預(yù)定音量,則控制單元140在語(yǔ)音輔助信息的第一區(qū)域上顯示反饋UI,其指示用戶語(yǔ)音是不可識(shí)別的。反饋UI可以包括這樣的GUI,其以條(bar)的形式表示預(yù)定音量和通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音的音量。第一區(qū)域可以位于語(yǔ)音輔助信息的下部。此外,控制單元140可以在語(yǔ)音輔助信息中顯示用戶語(yǔ)音應(yīng)該高于預(yù)定音量的消息。例如,可以顯示消息“請(qǐng)?jiān)俅簏c(diǎn)兒聲說(shuō)”。圖149是根據(jù)示范性實(shí)施例的、解釋指導(dǎo)語(yǔ)音識(shí)別錯(cuò)誤的UI的流程圖。電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收語(yǔ)音啟動(dòng)命令(S14910)。電子設(shè)備100響應(yīng)于通過(guò)語(yǔ)音輸入單元110輸入的語(yǔ)音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z(yǔ)音任務(wù)模式(S14920)。電子設(shè)備100在顯示屏幕的下部顯示語(yǔ)音輔助信息以執(zhí)行語(yǔ)音任務(wù)模式(S14930)。電子設(shè)備100通過(guò)語(yǔ)音輸入單元110接收用戶語(yǔ)音的輸入(S14940)。如果通過(guò)語(yǔ)音輸入單元110輸入的用戶語(yǔ)音的等級(jí)低于預(yù)定等級(jí),則電子設(shè)備100顯示反饋n(S14950)。反饋Π可以是這樣的UI,該Π包括由于用戶語(yǔ)音的等級(jí)低于預(yù)定等級(jí)而無(wú)法識(shí)別用戶語(yǔ)音的消息、以及用戶應(yīng)該再大點(diǎn)兒聲說(shuō)話的消息。如上所述,如果用戶語(yǔ)音太小以至于無(wú)法識(shí)別該語(yǔ)音,則電子設(shè)備100通知該語(yǔ)音是不可識(shí)別的,從而用戶能夠容易地意識(shí)到該語(yǔ)音是無(wú)法識(shí)別的,從而能夠容易地解決這個(gè)問(wèn)題。如上所述,用戶能夠通過(guò)用戶語(yǔ)音和用戶動(dòng)作之一更有效且更直觀地控制電子設(shè)備 100。在上面的示范性實(shí)施例中,描述了用戶動(dòng)作(諸如作為動(dòng)作啟動(dòng)命令的用戶動(dòng)作,其被設(shè)置為水平搖動(dòng)一只手3至4次的動(dòng)作)。然而,這些示范性實(shí)施例不應(yīng)該被視為限制,因?yàn)槭痉缎詫?shí)施例能夠由任何用戶動(dòng)作來(lái)實(shí)現(xiàn)。在上面的示范性實(shí)施例中,描述了用戶語(yǔ)音命令。然而,這些示范性實(shí)施例不應(yīng)該被視為限制,因?yàn)槭痉缎詫?shí)施例能夠由任何用戶語(yǔ)音輸入來(lái)實(shí)現(xiàn)。在上面的示范性實(shí)施例中,語(yǔ)音輸入單元110可以由直接接收用戶語(yǔ)音的輸入的麥克風(fēng)來(lái)實(shí)現(xiàn),或者由接收輸入到該麥克風(fēng)的語(yǔ)音信號(hào)的接口來(lái)實(shí)現(xiàn)。同樣,動(dòng)作輸入單元120可以由直接拍攝用戶的照相機(jī)來(lái)實(shí)現(xiàn),或者可以由接收照相機(jī)所拍攝的數(shù)據(jù)的接口來(lái)實(shí)現(xiàn)。以上所述的電子設(shè)備100可以由TV實(shí)現(xiàn)。然而,這不應(yīng)該被視為限制,而且電子設(shè)備100可以由各種設(shè)備實(shí)現(xiàn),諸如機(jī)頂盒、PC、膝上型計(jì)算機(jī)、平板PC、電子相冊(cè)、電子書(shū)、PDA、移動(dòng)電話等。此外,參照?qǐng)D3,各種軟件模塊存儲(chǔ)在存儲(chǔ)單元130中。然而,軟件模塊不一定存儲(chǔ)在一個(gè)存儲(chǔ)單元130中。也就是說(shuō),語(yǔ)音識(shí)別模塊和動(dòng)作識(shí)別模塊可以分別存儲(chǔ)在單獨(dú)的存儲(chǔ)單元中。因此,語(yǔ)音識(shí)別模塊可以從通過(guò)麥克風(fēng)輸入的語(yǔ)音信號(hào)中識(shí)別用戶語(yǔ)音,并且可以將識(shí)別的結(jié)果提供給控制單元140。此外,動(dòng)作識(shí)別模塊可以使用照相機(jī)所拍攝的圖像信號(hào)來(lái)識(shí)別用戶動(dòng)作,并且可以將識(shí)別的結(jié)果提供給控制單元140。此外,語(yǔ)音識(shí)別模塊和動(dòng)作識(shí)別模塊可以分別存儲(chǔ)在單獨(dú)的外部設(shè)備中。例如,包括麥克風(fēng)的語(yǔ)音識(shí)別設(shè)備可以使用語(yǔ)音識(shí)別模塊來(lái)識(shí)別用戶語(yǔ)音,然后可以將識(shí)別的結(jié)果提供給電子設(shè)備100。同樣,包括照相機(jī)的動(dòng)作識(shí)別設(shè)備可以使用動(dòng)作識(shí)別模塊來(lái)識(shí)別用戶動(dòng)作,然后可以將識(shí)別的結(jié)果提供給電子設(shè)備100。執(zhí)行上述控制方法的程序代碼可以存儲(chǔ)在各種類(lèi)型的記錄介質(zhì)中。具體來(lái)說(shuō),該程序代碼可以存儲(chǔ)在終端設(shè)備可讀的各種類(lèi)型的記錄介質(zhì)中,諸如隨機(jī)存取存儲(chǔ)器(RAM)、閃存、只讀存儲(chǔ)器(ROM)、可擦除可編程ROM (EPR0M)、電可擦除可編程ROM (EEPR0M)、寄存器、硬盤(pán)、可移動(dòng)盤(pán)、存儲(chǔ)卡、USB存儲(chǔ)器、⑶-ROM等。上述示范性實(shí)施例和優(yōu)點(diǎn)僅僅是示范性的,并且不應(yīng)被解釋為限制本發(fā)明構(gòu)思。示范性實(shí)施例能夠容易地應(yīng)用到其他類(lèi)型的設(shè)備。此外,對(duì)示范性實(shí)施例的描述旨在說(shuō)明,而不是限制權(quán)利要求的范圍,而且許多替換、修改和變化對(duì)本領(lǐng)域技術(shù)人員而言將是顯而易見(jiàn)的。
權(quán)利要求
1.一種提供電子設(shè)備的用戶界面(UI)的方法,該電子設(shè)備能夠識(shí)別用戶語(yǔ)音命令和用戶動(dòng)作姿勢(shì),該方法包括識(shí)別語(yǔ)音啟動(dòng)命令;響應(yīng)于識(shí)別到的語(yǔ)音啟動(dòng)命令,在所述電子設(shè)備的顯示屏幕上顯示能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的命令集;識(shí)別與所述命令集的第一命令相對(duì)應(yīng)的第一用戶語(yǔ)音命令;以及響應(yīng)于第一用戶語(yǔ)音命令,在所述顯示屏幕上將能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的第一應(yīng)用的第一可運(yùn)行圖標(biāo)與不能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的第二應(yīng)用的第二可運(yùn)行圖標(biāo)不同地顯示。
2.如權(quán)利要求1所述的方法,其中,第一可運(yùn)行圖標(biāo)是第一應(yīng)用的原始可運(yùn)行圖標(biāo)與在所述原始可運(yùn)行圖標(biāo)的一側(cè)顯示的附加圖標(biāo)的結(jié)合。
3.如權(quán)利要求1所述的方法,其中,將第一可運(yùn)行圖標(biāo)的名稱(chēng)與第二可運(yùn)行圖標(biāo)的名稱(chēng)不同地顯示。
4 如權(quán)利要求1所述的方法,還包括如果第一應(yīng)用是通過(guò)語(yǔ)音識(shí)別控制的,則將第一可運(yùn)行圖標(biāo)與第二可運(yùn)行圖標(biāo)不同地顯不O
5.如權(quán)利要求1所述的方法,還包括響應(yīng)于所述語(yǔ)音啟動(dòng)命令,顯示第一反饋。
6.如權(quán)利要求1所述的方法,還包括識(shí)別與第一可運(yùn)行圖標(biāo)的名稱(chēng)相對(duì)應(yīng)的第二用戶語(yǔ)音命令,其中,第一可運(yùn)行圖標(biāo)的名稱(chēng)顯示在第一可運(yùn)行圖標(biāo)的一側(cè)上。
7.如權(quán)利要求6所述的方法,還包括響應(yīng)于第二用戶語(yǔ)音命令,在所述顯示屏幕上顯示第一應(yīng)用。
8.如權(quán)利要求6所述的方法,其中,多個(gè)應(yīng)用對(duì)應(yīng)于第二用戶語(yǔ)音命令,而且所述識(shí)別第二用戶語(yǔ)音命令包括顯示與所述多個(gè)應(yīng)用相對(duì)應(yīng)的應(yīng)用列表。
9.如權(quán)利要求1所述的方法,其中,能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的第三應(yīng)用的第三可運(yùn)行圖標(biāo)顯示在所述Π上,而且第三可運(yùn)行圖標(biāo)的名稱(chēng)顯示在第三可運(yùn)行圖標(biāo)的一側(cè)上,其中,響應(yīng)于第三可運(yùn)行圖標(biāo)名稱(chēng)的長(zhǎng)度大于預(yù)定長(zhǎng)度的確定,只顯示第三可運(yùn)行圖 標(biāo)的名稱(chēng)的一部分。
10.如權(quán)利要求9所述的方法,還包括識(shí)別與第三可運(yùn)行圖標(biāo)的名稱(chēng)的一部分相對(duì)應(yīng)的第三用戶語(yǔ)音命令,以及響應(yīng)于第三用戶語(yǔ)音命令,在所述顯示屏幕上顯示第三應(yīng)用。
11.如權(quán)利要求1所述的方法,其中,所述命令集包括返回命令,其中,響應(yīng)于與所述返回命令相對(duì)應(yīng)的第四命令語(yǔ)音,所述電子設(shè)備返回前一個(gè)屏幕。
12.如權(quán)利要求1所述的方法,還包括通過(guò)所述顯示屏幕和揚(yáng)聲器之一輸出與接收到的廣播信號(hào)相對(duì)應(yīng)的視頻、音頻和控制數(shù)據(jù)之一。
13.如權(quán)利要求1所述的方法,還包括識(shí)別動(dòng)作啟動(dòng)命令;響應(yīng)于所述動(dòng)作啟動(dòng)命令,在所述顯示屏幕上顯示能夠通過(guò)動(dòng)作識(shí)別進(jìn)行控制的動(dòng)作集;以及將第一可運(yùn)行圖標(biāo)與第二可運(yùn)行圖標(biāo)以相同的方式顯示。
14.如權(quán)利要求13所述的方法,還包括響應(yīng)于所述動(dòng)作啟動(dòng)命令,顯示第二反饋。
15.一種能夠識(shí)別用戶語(yǔ)音命令和用戶動(dòng)作姿勢(shì)的電子設(shè)備,該電子設(shè)備包括顯示單元;語(yǔ)音輸入單元,其接收所述用戶語(yǔ)音命令;以及控制器,其控制所述顯示單元和所述語(yǔ)音輸入單元,其中,所述控制器識(shí)別通過(guò)所述語(yǔ)音輸入單元接收到的語(yǔ)音啟動(dòng)命令并在所述顯示單元上顯示能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制述的命令集,其中,所述控制器識(shí)別通過(guò)所述語(yǔ)音輸入單元接收到的第一用戶語(yǔ)音命令,并控制所述顯示單元顯示用戶界面(UI),所述用戶界面包括能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的第一應(yīng)用的第一可運(yùn)行圖標(biāo),其中,所述Π將第一可運(yùn)行圖標(biāo)與不能夠通過(guò)語(yǔ)音識(shí)別進(jìn)行控制的第二應(yīng)用的第二可運(yùn)行圖標(biāo)不同地顯示。
全文摘要
提供了一種電子設(shè)備以及提供該電子設(shè)備的用戶界面(UI)的方法。具體地,提供了在語(yǔ)音任務(wù)模式中將可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)與不可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)不同地顯示的電子設(shè)備以及提供該電子設(shè)備的UI的方法。所公開(kāi)的一些示范性實(shí)施例提供了電子設(shè)備,該電子設(shè)備能夠識(shí)別用戶語(yǔ)音命令和用戶動(dòng)作姿勢(shì),并且在語(yǔ)音任務(wù)模式中將可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)和該可運(yùn)行圖標(biāo)的名稱(chēng)與不可通過(guò)語(yǔ)音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)和該可運(yùn)行圖標(biāo)的名稱(chēng)不同地顯示,以及提供該電子設(shè)備的UI的方法。
文檔編號(hào)G06F3/01GK103034328SQ20121027722
公開(kāi)日2013年4月10日 申請(qǐng)日期2012年8月6日 優(yōu)先權(quán)日2011年8月5日
發(fā)明者金正根, 金裕泰, 俞升東, 韓尚珍, 柳熙涉 申請(qǐng)人:三星電子株式會(huì)社