專利名稱：用于設(shè)備控制的手勢(shì)和語(yǔ)音識(shí)別的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種被配置為提供用于基于手勢(shì)或音頻輸入來(lái)操作電子設(shè)備的用戶界面的信息處理裝置和方法以及程序。
背景技術(shù)：
電子設(shè)備(包括電視機(jī))已被使用位于設(shè)備上的、與預(yù)置功能相關(guān)聯(lián)的按鈕來(lái)控制。另外，遙控器被開(kāi)發(fā)以允許用戶在其位置超出他們夠得著單元上按鈕的物理范圍時(shí)操作該設(shè)備。但是，遙控器的使用經(jīng)常是繁瑣的并且往往不是特別的直觀。此外，遙控器很容易放錯(cuò)地方，需要更換電池，并且提供了病菌在用戶之間傳播的手段。最近，已經(jīng)提出在電子設(shè)備顯示器中使用手勢(shì)來(lái)控制虛擬光標(biāo)和其他對(duì)象。但這些方法的使用遇到了困難。

發(fā)明內(nèi)容
廣義地說(shuō)，本發(fā)明的某些實(shí)施例涉及用戶界面，其中，一個(gè)或多個(gè)手勢(shì)由用戶設(shè)計(jì)并且被映射為或者關(guān)聯(lián)于諸如以TV為例的計(jì)算設(shè)備的一個(gè)或多個(gè)命令或操作。用戶可以選擇與他/她設(shè)計(jì)或創(chuàng)建的每個(gè)手勢(shì)相關(guān)聯(lián)的命令/操作。用戶并不被限制為使用被制造商或第三方預(yù)先編程到系統(tǒng)中的預(yù)置的手勢(shì)，也不被限制為使用預(yù)先與預(yù)置的手勢(shì)相關(guān)聯(lián)的預(yù)置的命令/操作。在可替代的實(shí)施例中，語(yǔ)音命令或其他音頻信號(hào)被用于代替手勢(shì)。在一個(gè)方面，諸如TV的計(jì)算設(shè)備通過(guò)與所述設(shè)備通信的攝像機(jī)來(lái)接收用戶的第一手勢(shì)。用于所述設(shè)備的操作的選擇被輸入到設(shè)備中，其中，所述操作是可供所述用戶選擇的多個(gè)不同的操作中的一個(gè)。所述設(shè)備將所述操作與所述第一手勢(shì)相關(guān)聯(lián)。所述設(shè)備通過(guò)所述攝像機(jī)接收第二手勢(shì)，其中，所述第二手勢(shì)與第一手勢(shì)基本相同。所述設(shè)備響應(yīng)于所述第二手勢(shì)的接收來(lái)執(zhí)行所述操作。在另一個(gè)方面，用戶將用于設(shè)備的第二操作的第二選擇輸入到所述設(shè)備。第二操作是可供用戶進(jìn)行第二選擇的多個(gè)不同操作中的第二個(gè)。接下來(lái)，用戶將預(yù)定時(shí)間段輸入到所述設(shè)備，所述預(yù)定時(shí)間段是可供用戶選擇的多個(gè)時(shí)間段中的一個(gè)。將第一操作與第一手勢(shì)相關(guān)聯(lián)包括將所述第一手勢(shì)與所述第一操作和所述第二操作二者相關(guān)聯(lián)。響應(yīng)于接收所述第二手勢(shì)(與所述第一手勢(shì)基本相同)，所述設(shè)備執(zhí)行第一操作，并在等待了所述預(yù)定時(shí)間段后，自動(dòng)執(zhí)行所述第二操作。在可替代的實(shí)施例中，第一計(jì)算設(shè)備通過(guò)與所述第一設(shè)備通信的第一攝像機(jī)接收第一用戶的第一手勢(shì)。所述用戶將用于第二設(shè)備的操作的選擇輸入到所述第一設(shè)備中，其中所述操作是可供所述用戶選擇的多個(gè)不同的操作中的一個(gè)。所述第一設(shè)備將所述該操作與所述第一手勢(shì)相關(guān)聯(lián)。所述第一設(shè)備將對(duì)應(yīng)于所述第一手勢(shì)和對(duì)應(yīng)于所述第二計(jì)算設(shè)備的所述操作的所述選擇的數(shù)據(jù)發(fā)送到第二設(shè)備。所述第二設(shè)備通過(guò)與所述第二設(shè)備通信的第二攝像機(jī)接收第二手勢(shì)(與所述第一手勢(shì)基本相同)。所述第二設(shè)備響應(yīng)于所述第二手勢(shì)的接收來(lái)執(zhí)行所述操作。在可替代的實(shí)施例中，計(jì)算設(shè)備通過(guò)與所述設(shè)備通信的攝像機(jī)接收第一手勢(shì)。所述設(shè)備通過(guò)所述攝像機(jī)接收第一個(gè)人的面部圖像。所述設(shè)備還通過(guò)所述攝像機(jī)接收第二個(gè)人的面部圖像。所述設(shè)備通過(guò)所述攝像機(jī)接收基本上與所述第一手勢(shì)相同的第二手勢(shì)。所述設(shè)備確定所述第二手勢(shì)是否由所述第一個(gè)人做出并且在確定所述第二手勢(shì)已經(jīng)由所述第一個(gè)人做出的情況下響應(yīng)于所述第二手勢(shì)的接收來(lái)執(zhí)行所述操作。在另一個(gè)方面，如果確定所述第二手勢(shì)已經(jīng)由所述第一個(gè)人之外的某個(gè)人做出，則所述設(shè)備響應(yīng)于所述第二手勢(shì)的接收而避免執(zhí)行所述操作。在另一個(gè)方面中，所述第一個(gè)人將用于所述設(shè)備的操作的選擇輸入到所述設(shè)備，其中，所述操作是可供第一個(gè)人選擇的多個(gè)不同的操作中的一個(gè)。然后所述設(shè)備將所述操作與所述第一手勢(shì)相關(guān)聯(lián)。在可替代的實(shí)施例中，計(jì)算設(shè)備通過(guò)與所述設(shè)備通信的麥克風(fēng)接收由用戶生成的第一音頻信號(hào)。用戶將用于所述設(shè)備的操作的選擇輸入到所述設(shè)備，其中所述操作是可供所述用戶選擇的多個(gè)不同的操作中的一個(gè)。所述設(shè)備將所述操作與所述第一音頻信號(hào)相關(guān)聯(lián)。所述設(shè)備通過(guò)麥克風(fēng)接收與所述第一音頻信號(hào)基本相同的第二音頻信號(hào)。所述設(shè)備響應(yīng)于所述第二音頻信號(hào)的接收來(lái)執(zhí)行所述操作。在另一個(gè)方面中，所述第一音頻信號(hào)是說(shuō)出的詞語(yǔ)、打響指、鼓掌或吹口哨。在又一方面中，用戶將用于所述設(shè)備的第二操作的第二選擇輸入到所述設(shè)備中，其中，所述第二操作是可供所述用戶進(jìn)行第二選擇的多個(gè)不同的操作中的第二個(gè)。所述設(shè)備將所述第一音頻信號(hào)與第一操作相關(guān)聯(lián)進(jìn)一步包括將所述第一音頻信號(hào)與所述第一操作和所述第二操作二者相關(guān)聯(lián)。所述設(shè)備響應(yīng)于所述第二音頻信號(hào)的接收來(lái)執(zhí)行所述第一操作進(jìn)一步包括響應(yīng)于所述第二音頻信號(hào)的接收來(lái)自動(dòng)執(zhí)行所述第一操作和所述第二操作。在一個(gè)可替代的實(shí)施例中，計(jì)算設(shè)備通過(guò)與所述設(shè)備通信的麥克風(fēng)接收由第一個(gè)人生成的第一語(yǔ)音命令。所述設(shè)備將所述第一語(yǔ)音命令與第一個(gè)人相關(guān)聯(lián)。所述第一個(gè)人將用于所述設(shè)備的操作的選擇輸入到所述設(shè)備中，其中所述操作是可供第一個(gè)人選擇的多個(gè)不同的操作中的一個(gè)。然后所述設(shè)備將所述設(shè)備與所述第一語(yǔ)音命令相關(guān)聯(lián)。所述設(shè)備通過(guò)所述麥克風(fēng)接收基本上與所述第一語(yǔ)音命令相同的第二語(yǔ)音命令，由此所述設(shè)備確定所述第二語(yǔ)音命令是否由所述第一個(gè)人生成。如果確定所述第二語(yǔ)音命令是由所述第一個(gè)人生成，則所述設(shè)備響應(yīng)于所述第二語(yǔ)音命令的接收來(lái)執(zhí)行所述操作。另一方面，如果確定所述第二語(yǔ)音命令是由不同于所述第一個(gè)人的另一個(gè)人生成，則所述設(shè)備避免執(zhí)行所述操作。在又一實(shí)施例中，一種設(shè)備包括存儲(chǔ)器、以及耦合到所述存儲(chǔ)器的處理器。所述設(shè)備進(jìn)一步包括耦合到所述處理器的攝像機(jī)或麥克風(fēng)(或兩者)。所述處理器可操作以執(zhí)行任何上述實(shí)施例的步驟。在又一實(shí)施例中，提供了一種非臨時(shí)性的計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。所述存儲(chǔ)介質(zhì)包含指令，當(dāng)由耦合到攝像機(jī)或麥克風(fēng)(或兩者)的處理器執(zhí)行時(shí)，所述指令使所述處理器執(zhí)行任何上述實(shí)施例的步驟。存在本發(fā)明的其它方面。因此，應(yīng)當(dāng)了解，在前的描述僅僅是本發(fā)明的一些實(shí)施例和一些方面的概要。以下將提及其它實(shí)施例和方面。還應(yīng)當(dāng)了解，在不脫離本發(fā)明的精神或范圍的情況下可以對(duì)所公開(kāi)的實(shí)施例進(jìn)行許多改變。因此，之前的概要并不意味著限制本發(fā)明的范圍。相反，本發(fā)明的范圍由所附權(quán)利要求和其等同物來(lái)確定。


結(jié)合附圖，從以下特定實(shí)施例的詳細(xì)描述中，本發(fā)明的上述和/或其他方面以及優(yōu)點(diǎn)將變得顯而易見(jiàn)，并且更容易理解，其中:圖1是本發(fā)明的實(shí)施例可被實(shí)施的示例性操作環(huán)境的簡(jiǎn)化的框圖；圖2是根據(jù)本發(fā)明的實(shí)施例的圖1中的TV的簡(jiǎn)化框圖；圖3是根據(jù)本發(fā)明的實(shí)施例的提供包含了手勢(shì)使用的用戶界面的方法的簡(jiǎn)化流程;圖4是根據(jù)本發(fā)明的可替代的實(shí)施例的提供包含了手勢(shì)的使用的用戶界面的另一個(gè)方法的簡(jiǎn)化流程；圖5是根據(jù)本發(fā)明的另一個(gè)可替代的實(shí)施例的提供包含了手勢(shì)使用的用戶界面的另一個(gè)方法的簡(jiǎn)化流程；以及圖6是根據(jù)本發(fā)明的又一個(gè)可替代的實(shí)施例的提供包含了手勢(shì)使用的用戶界面的另一個(gè)方法的簡(jiǎn)化流程。
具體實(shí)施例方式以下是對(duì)當(dāng)前被構(gòu)思為實(shí)現(xiàn)本發(fā)明的最佳方式的描述。將詳細(xì)提及本發(fā)明的實(shí)施方式，其示例在附圖中示出，其中在全部附圖中相同的參考標(biāo)號(hào)表示相同的元件。應(yīng)當(dāng)理解，可以使用其他實(shí)施方式，并且可以在不偏離本發(fā)明范圍的情況下進(jìn)行結(jié)構(gòu)和操作的改變。本發(fā)明的實(shí)施例涉及到用戶界面，其中，一個(gè)或多個(gè)手勢(shì)由用戶設(shè)計(jì)并且被映射為或者關(guān)聯(lián)于電視或其它設(shè)備的一個(gè)或多個(gè)命令或操作。用戶可以選擇與他/她設(shè)計(jì)或創(chuàng)建的每個(gè)手勢(shì)相關(guān)聯(lián)的命令/操作。用戶不需要采用被預(yù)先編程到系統(tǒng)中的預(yù)置的手勢(shì)，也不需要采用預(yù)先與預(yù)置的手勢(shì)相關(guān)聯(lián)的預(yù)置的命令/操作。在可替代的實(shí)施例中，語(yǔ)音命令或其他音頻信號(hào)由用戶設(shè)計(jì)，并且被映射為或關(guān)聯(lián)于設(shè)備的命令/操作。圖1是本發(fā)明的實(shí)施例可被實(shí)施的示例性操作環(huán)境的簡(jiǎn)化的框圖。諸如以視頻、音頻、數(shù)據(jù)提供者和TV服務(wù)提供者為例的內(nèi)容和服務(wù)提供者為用戶提供了通常被提供給接收設(shè)備的節(jié)目和/或數(shù)據(jù)，所述接收設(shè)備例如是與電視(TV) 104通信的機(jī)頂盒102，或其他具有顯示屏并被配置為接收和顯示節(jié)目的設(shè)備。機(jī)頂盒102進(jìn)而與被配置為從通信衛(wèi)星108接收信號(hào)的衛(wèi)星天線106通信。在可替代的實(shí)施例中，機(jī)頂盒102與提供了節(jié)目或數(shù)據(jù)的其他數(shù)據(jù)源或節(jié)目源通信，例如，以太網(wǎng)門戶網(wǎng)站、電話公司網(wǎng)絡(luò)、電纜頭端、地面天線等。機(jī)頂盒102處理和傳送所選擇的節(jié)目到TV 104和/或一個(gè)或多個(gè)其他TV、演示設(shè)備或存儲(chǔ)設(shè)備。
雖然示出的實(shí)施例中示出了機(jī)頂盒102，但是可替代的實(shí)施例包括任何合適的可用于接收節(jié)目的轉(zhuǎn)換器設(shè)備或電子設(shè)備。這種替代設(shè)備的示例包括電視錄像設(shè)備、電視調(diào)諧器、電視轉(zhuǎn)換器、接收器、衛(wèi)星接收器、有線機(jī)頂盒、有線接收器、媒體播放器、和/或電視接收設(shè)備。在一些實(shí)施例中，遙控器110可操作以控制所述TV 104和其他用戶設(shè)備。雖然示出的實(shí)施例中示出了 TV 104，但是替代的實(shí)施例包括用于呈現(xiàn)內(nèi)容或數(shù)據(jù)的其他設(shè)備，諸如，數(shù)字視頻錄像機(jī)(DVR)、游戲系統(tǒng)、個(gè)人計(jì)算機(jī)、音響系統(tǒng)接收器、致密盤(CD)設(shè)備等。這些設(shè)備中的一些設(shè)備有一個(gè)或多個(gè)揚(yáng)聲器、顯示器、或其它輸出組件以向用戶呈現(xiàn)視頻或音頻內(nèi)容。在一些實(shí)施例中，用于呈現(xiàn)內(nèi)容/數(shù)據(jù)的多個(gè)TV或相關(guān)設(shè)備被設(shè)置在用戶住所112或靠近用戶住所112，并且直接或間接地與機(jī)頂盒102通信。另外，機(jī)頂盒102和TV 104可以被集成到除了具有其它功能之外，還具有上述的機(jī)頂盒102和TV 104的功能的單一設(shè)備中。除了節(jié)目?jī)?nèi)容，電子節(jié)目指南(“EPG”)數(shù)據(jù)或類似這樣的數(shù)據(jù)從節(jié)目數(shù)據(jù)源通過(guò)互聯(lián)網(wǎng)116被提供到用戶住所112。接收機(jī)天線106被設(shè)置在用戶住所112或靠近于用戶住所112，用戶住所包括例如住宅、企業(yè)、或任何可用于接收衛(wèi)星信號(hào)的其他位置。所接收到的衛(wèi)星信號(hào)被傳送到該機(jī)頂盒102，機(jī)頂盒102將所接收的信號(hào)放大和轉(zhuǎn)換成適合于傳送到TV 104或另一用戶設(shè)備(例如DVR 114)的信號(hào)。在可替代的實(shí)施例中，不是DVR 114而是(或除了 DVR 114之外還有)其他設(shè)備可操作以從該機(jī)頂盒102、另一個(gè)終端設(shè)備、或從住所112外部的其他設(shè)備接收信號(hào)。這樣的設(shè)備的示例包括致密盤(CD)記錄器、數(shù)字視頻盤(DVD)錄像機(jī)、其他光學(xué)媒體錄像機(jī)、個(gè)人視頻錄像機(jī)(PVR)、游戲設(shè)備、磁帶記錄機(jī)、RF收發(fā)器、以及個(gè)人計(jì)算機(jī)(PC)。遙控器110作為用戶和機(jī)頂盒102之間的一類接口。遙控器110使用諸如紅外線(IR)、RF、藍(lán)牙等無(wú)線介質(zhì)與機(jī)頂盒102通信。(在可替代的實(shí)施例中，遙控器110直接地并且無(wú)線地與TV 104和DVR 114以及該機(jī)頂盒102通信)。除了與機(jī)頂盒102通信的DVR114之外，其他設(shè)備(未示出)也可以與機(jī)頂盒102通信，例如指點(diǎn)設(shè)備、游戲設(shè)備控制器、鍵盤等。在可替代的實(shí)施例中，機(jī)頂盒102可從天線106之外的、例如從本地廣播RF信號(hào)、通過(guò)使用本地網(wǎng)絡(luò)118 (通過(guò)直播流或其他方式)從互聯(lián)網(wǎng)116、或從其他通信系統(tǒng)的其他源接收內(nèi)容、視頻流和數(shù)據(jù)。用戶住所112包括與互聯(lián)網(wǎng)116通信的其它設(shè)備。它們包括本地網(wǎng)絡(luò)118，其中本地PC 120和TV 104可通信地耦合到本地網(wǎng)絡(luò)118。在可替代的實(shí)施例中，諸如以數(shù)據(jù)存儲(chǔ)設(shè)備、機(jī)頂盒102、游戲系統(tǒng)、聲音系統(tǒng)接收器、互聯(lián)網(wǎng)連接設(shè)備、數(shù)字訂戶環(huán)路(DSL)設(shè)備、無(wú)線局域網(wǎng)、WiF1、全球微波接入互操作性(WiMax)等為例的其他設(shè)備可通信地耦合到本地網(wǎng)絡(luò)118，這樣所有這些設(shè)備可以彼此通信并且與互聯(lián)網(wǎng)116通信。此外，被設(shè)置在住所112外部的遠(yuǎn)程PC 122通過(guò)互聯(lián)網(wǎng)116和本地網(wǎng)絡(luò)118來(lái)與本地PC 120和TV 104通信。因此，本地網(wǎng)絡(luò)118允許這些相互連通的設(shè)備以及機(jī)頂盒102相互通信。包括用戶住所112和其中布置的各種設(shè)備在內(nèi)的操作環(huán)境的以上描述旨在作為本發(fā)明實(shí)施例可被實(shí)施的操作環(huán)境的多個(gè)實(shí)施例之一的非限制性的概述。用戶住所112中的設(shè)備以及內(nèi)部和外部的通信系統(tǒng)可以含有此處沒(méi)有具體描述的其它設(shè)備、系統(tǒng)和媒體。
圖2是根據(jù)本發(fā)明的實(shí)施例的圖1中的TV 104的簡(jiǎn)化框圖。TV 104能夠通過(guò)外部接口 204連接到攝像機(jī)202。然而，在可替代的實(shí)施例中，攝像機(jī)202是集成或嵌入在TV104中的組件。另外，TV 104通過(guò)無(wú)線接口 206無(wú)線連接到遙控器110。中央處理單元(CPU)或處理器208執(zhí)行各單元的中央控制，并通過(guò)系統(tǒng)總線210與它們通信。所述處理器208執(zhí)行暫時(shí)存儲(chǔ)在隨機(jī)存取存儲(chǔ)器(RAM) 212中的一個(gè)或多個(gè)程序。所述程序在其傳送到RAM 212以供使用之前，被進(jìn)一步存儲(chǔ)在非易失性存儲(chǔ)器214中。所述非易失性存儲(chǔ)器(或存儲(chǔ)單元)包括非臨時(shí)性的、計(jì)算機(jī)可讀的存儲(chǔ)介質(zhì)，并且用于存儲(chǔ)相對(duì)大量的數(shù)據(jù)、應(yīng)用等。所述非易失性存儲(chǔ)器可以是一個(gè)或多個(gè)硬盤驅(qū)動(dòng)器、閃存設(shè)備、光盤驅(qū)動(dòng)器等。所述處理器208讀取程序，并根據(jù)所述程序執(zhí)行各種處理和控制各種單元。作為另一種類型的用戶界面，TV 104檢測(cè)一個(gè)或多個(gè)用戶的手(或其他身體部分)的運(yùn)動(dòng)，并且將該運(yùn)動(dòng)或手勢(shì)識(shí)別為用于執(zhí)行操作的命令。特別地，處理器208從攝像機(jī)202接收與放置在攝像機(jī)202之前(例如，在TV 104之前)的物體或人的圖像相對(duì)應(yīng)的數(shù)據(jù)。用戶的一只或兩只手(或其他身體部分)的運(yùn)動(dòng)也被檢測(cè)。然后，處理器208從所檢測(cè)的例如他或她的(一只或兩只)手的運(yùn)動(dòng)中識(shí)別用戶執(zhí)行的手勢(shì)，并根據(jù)這些操作執(zhí)行處理。作為另一個(gè)用戶界面，處理器208還根據(jù)從遙控器110發(fā)送的命令識(shí)別由用戶通過(guò)遙控器110發(fā)起的命令，并根據(jù)該操作執(zhí)行處理。此外，TV 104具有廣播處理功能。當(dāng)用戶命令指示TV 104輸出廣播信號(hào)時(shí)，所述TV 104將外部天線218接收的地面廣播信號(hào)輸入到調(diào)諧器216中。處理器208使調(diào)諧器216通過(guò)由用戶執(zhí)行的操作來(lái)獲得所選擇的信道的廣播信號(hào)，并發(fā)送該信號(hào)到廣播信號(hào)處理單元220。處理器208使廣播信號(hào)處理單元220通過(guò)對(duì)廣播信號(hào)執(zhí)行處理來(lái)從該廣播信號(hào)獲得節(jié)目的視頻數(shù)據(jù)和音頻數(shù)據(jù)。在這些數(shù)據(jù)中，視頻數(shù)據(jù)被從廣播信號(hào)處理單元220發(fā)送到顯示處理單元222，并且音頻數(shù)據(jù)被從所述廣播信號(hào)處理單元220發(fā)送到音頻處理單元224。處理器208進(jìn)一步使顯示處理單元222通過(guò)對(duì)視頻數(shù)據(jù)執(zhí)行顯示處理來(lái)獲得視頻信號(hào)，并發(fā)送該視頻信號(hào)到顯示器226。結(jié)果，節(jié)目的視頻被顯示給用戶。處理器208還使得音頻處理單元224通過(guò)對(duì)音頻數(shù)據(jù)執(zhí)行音頻處理來(lái)獲得音頻信號(hào)，并發(fā)送該音頻信號(hào)到揚(yáng)聲器228。結(jié)果，節(jié)目的音頻被從揚(yáng)聲器228輸出。除了通過(guò)天線218接收地面廣播信號(hào)外，TV 104進(jìn)一步通過(guò)機(jī)頂盒102從衛(wèi)星天線106接收信號(hào)(圖1)。這些信號(hào)被發(fā)送到機(jī)頂盒接口 236，所述機(jī)頂盒接口 236進(jìn)而處理這些信號(hào)并且將它們發(fā)送到總線210，以便以大致類似于上面所描述的方式進(jìn)一步處理。網(wǎng)絡(luò)接口卡(NIC) 230被連接到總線210，并通過(guò)本地網(wǎng)絡(luò)118用作與互聯(lián)網(wǎng)116的接口，這樣處理器208可以向互聯(lián)網(wǎng)和與本地網(wǎng)絡(luò)118通信的其他組件發(fā)送數(shù)據(jù)以及從互聯(lián)網(wǎng)和與本地網(wǎng)絡(luò)118通信的其他組件接收數(shù)據(jù)。此外，麥克風(fēng)232通過(guò)麥克風(fēng)接口 234連接到總線210，從而允許處理器208接收和處理音頻數(shù)據(jù)。攝像機(jī)202通過(guò)TV 104的外部接口 204連接到TV 104，這樣由攝像機(jī)202生成的圖像數(shù)據(jù)可以被發(fā)送到處理器208。根據(jù)一個(gè)實(shí)施例，TV104根據(jù)從攝像機(jī)202發(fā)送的圖像數(shù)據(jù)來(lái)識(shí)別在TV 104前面的一個(gè)或多個(gè)用戶。具體地，TV 104的處理器208執(zhí)行面部檢測(cè)和識(shí)別處理，以及對(duì)由攝像機(jī)202生成的圖像數(shù)據(jù)執(zhí)行用戶的動(dòng)態(tài)手勢(shì)運(yùn)動(dòng)的手勢(shì)識(shí)另IJ。處理器208通過(guò)執(zhí)行該檢測(cè)處理檢測(cè)一個(gè)或多個(gè)用戶的手的運(yùn)動(dòng)以及面部。存在有多種已知的面部檢測(cè)和面部識(shí)別的算法。例如根據(jù)一種算法，從攝像機(jī)圖像中提取皮膚顏色區(qū)域以及該皮膚顏色區(qū)域內(nèi)的特征值(假定為眼睛和嘴巴的部分)，并且根據(jù)這些特征值之間的位置關(guān)系確定皮膚顏色的區(qū)域是否是面部。通過(guò)使用這樣的算法，處理器208從攝像機(jī)圖像中檢測(cè)每一個(gè)被確定為面部的區(qū)域，并且獲得每一個(gè)檢測(cè)到的面部區(qū)域的坐標(biāo)。此外，人類手勢(shì)被檢測(cè)、處理并且與命令或功能相關(guān)聯(lián)。根據(jù)一個(gè)實(shí)施例，由TV104從用戶接收她/他希望創(chuàng)建手勢(shì)并將其分配給一個(gè)或多個(gè)命令或功能的指示。用于發(fā)起創(chuàng)建分配的處理的指示通過(guò)使用一個(gè)或多個(gè)不同類型的輸入(例如，遙控器按鍵、運(yùn)動(dòng)、其他手勢(shì)、觸摸屏等)而被接收。根據(jù)特定的用戶創(chuàng)建的手勢(shì)，用戶移動(dòng)一只或兩只手(或其他身體部分)，這樣攝像機(jī)202捕捉圖像運(yùn)動(dòng)并且為手勢(shì)生成進(jìn)而由TV 104接收的原始運(yùn)動(dòng)數(shù)據(jù)。所記錄的原始運(yùn)動(dòng)數(shù)據(jù)被處理以確定與原始運(yùn)動(dòng)數(shù)據(jù)相關(guān)聯(lián)的一個(gè)或多個(gè)運(yùn)動(dòng)或手勢(shì)。在一些實(shí)施例中，所述運(yùn)動(dòng)在數(shù)據(jù)庫(kù)中被存儲(chǔ)為手勢(shì)。在用戶根據(jù)用戶創(chuàng)建的手勢(shì)移動(dòng)他/她的(一只或兩只)手之后，用于手勢(shì)創(chuàng)建和分配的指示可被接收。例如，用戶可根據(jù)當(dāng)前不能被TV 104識(shí)別的由用戶創(chuàng)建的手勢(shì)來(lái)移動(dòng)他/她的(一只或兩只)手。TV104詢問(wèn)用戶以確定用戶是否希望存儲(chǔ)未識(shí)別的手勢(shì)并將它與特定的命令或功能相關(guān)聯(lián)。如果有肯定的響應(yīng)，手勢(shì)可被用作運(yùn)動(dòng)輸入或命令以備將來(lái)使用。用于手勢(shì)的功能映射信息被從用戶接收，并且例如可以包括用戶希望映射為或關(guān)聯(lián)于用戶創(chuàng)建的手勢(shì)的功能、操作、命令、輸入指令和/或任務(wù)。在一些實(shí)施例中，這樣的功能映射信息可包括與特定手勢(shì)相關(guān)聯(lián)的一系列功能(例如，宏或批命令)。功能映射信息被存儲(chǔ)在另一個(gè)數(shù)據(jù)庫(kù)中。圖1中的本地PC 120和遠(yuǎn)程PC 122的每一個(gè)也可包含大致相似的組件，所述組件被布置為與圖2中的TV 104大致相似的配置。在一些實(shí)施例中，本地PC 120、遠(yuǎn)程PC122和TV 104之間的連接可以是無(wú)線的、或通過(guò)一個(gè)或多個(gè)線纜、或通過(guò)它們的任意組合。在所示的示例中，只有兩個(gè)PC和一個(gè)TV被示出，但本領(lǐng)域中的技術(shù)人員應(yīng)當(dāng)理解，任何數(shù)量的設(shè)備和TV可被連接到本地網(wǎng)絡(luò)118、互聯(lián)網(wǎng)116或其它類型的網(wǎng)絡(luò)。PC120、122提供從一個(gè)設(shè)備傳輸電子消息和其他數(shù)據(jù)到另一個(gè)設(shè)備或者到TV 104的功能，有時(shí)途徑其他消息服務(wù)器或電子設(shè)備。以類似于TV 104的方式，遠(yuǎn)程PC 122包括處理器、只讀存儲(chǔ)器(ROM)、RAM和存儲(chǔ)單元，所有這些都通過(guò)總線耦合或相互連接。處理器被配置為執(zhí)行由存儲(chǔ)在ROM中的、或者從存儲(chǔ)單元加載到RAM中的程序和應(yīng)用所指示的各種處理操作。存儲(chǔ)單元或非易失性存儲(chǔ)器包括非臨時(shí)性的計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，并且用于存儲(chǔ)相對(duì)大量的數(shù)據(jù)、應(yīng)用等。存儲(chǔ)單元可以是一個(gè)或多個(gè)硬盤驅(qū)動(dòng)器、閃存設(shè)備、光學(xué)驅(qū)動(dòng)器等。RAM還按需要存儲(chǔ)處理器執(zhí)行各種應(yīng)用和處理操作所必要的數(shù)據(jù)等。R0M、RAM和/或存儲(chǔ)單元存儲(chǔ)與處理器一起使用的操作軟件和應(yīng)用以使能遠(yuǎn)程PC 122的操作。遠(yuǎn)程PC 122還包括至少一個(gè)輸入設(shè)備，例如鍵盤和鼠標(biāo)、用于接收語(yǔ)音或其他聲音輸入的麥克風(fēng)、用于接收?qǐng)D像的攝像機(jī)、指點(diǎn)設(shè)備、觸摸屏顯示器或遙控?zé)o線輸入單元(如電視遙控型單元)。可替代的實(shí)施例可以包括前述類型的輸入設(shè)備的任何組合，以及其它輸入設(shè)備。因此，遠(yuǎn)程PC 122允許經(jīng)由用戶動(dòng)作的用戶輸入，所述用戶動(dòng)作包括當(dāng)光標(biāo)位于輸出設(shè)備(如基于LCD的顯示單元)的預(yù)先定義的區(qū)域上時(shí)點(diǎn)擊鼠標(biāo)按鈕。(輸出設(shè)備可以進(jìn)一步包括用于提供語(yǔ)音提示和說(shuō)出的詞語(yǔ)、音樂(lè)和系統(tǒng)音調(diào)的揚(yáng)聲器。)其他用于輸入的用戶動(dòng)作可以包括:由用戶生成聲音或手勢(shì)、使用電視型遙控單元進(jìn)行選擇、按壓鍵盤上的鍵、移動(dòng)指點(diǎn)設(shè)備、用指點(diǎn)設(shè)備或用戶的手指在指點(diǎn)設(shè)備顯示器上觸摸、或選擇所顯示的指令。遠(yuǎn)程PC 122的總線進(jìn)一步耦合或連接到輸入設(shè)備、輸出設(shè)備、存儲(chǔ)單元和通信設(shè)備。通信設(shè)備可以是例如調(diào)制解調(diào)器、網(wǎng)絡(luò)接口卡(NIC)、無(wú)線接入卡或適配器、或其他終端適配器。通信設(shè)備經(jīng)由網(wǎng)絡(luò)執(zhí)行通信處理，發(fā)送從所述處理器提供的數(shù)據(jù)，并將從網(wǎng)絡(luò)接收到的數(shù)據(jù)輸出到處理器、RAM、以及存儲(chǔ)單元中。通信設(shè)備還與其它電子設(shè)備傳遞模擬信號(hào)或數(shù)字信號(hào)。遠(yuǎn)程PC 122的總線也根據(jù)需要被連接或耦合到驅(qū)動(dòng)器，所述驅(qū)動(dòng)器上加載了具有包含指令的計(jì)算機(jī)應(yīng)用或從任何這些存儲(chǔ)介質(zhì)讀取的其他數(shù)據(jù)的非臨時(shí)性計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，如例如磁盤，光盤，磁光盤，或半導(dǎo)體存儲(chǔ)器。當(dāng)這些指令和數(shù)據(jù)被處理器執(zhí)行時(shí)，使處理器執(zhí)行多個(gè)方法或功能。本地PC 120包括以與遠(yuǎn)程PC 122大致類似的方式操作的大致類似的組件。此外，圖1的機(jī)頂盒102和DVR 114每一個(gè)都包含了如上所述用于遠(yuǎn)程PC 122和TV 104中的一些組件，這些組件以大致類似的方式操作。雖然圖1和2示出了電視104、遠(yuǎn)程PC 122、本地PC 120和其他設(shè)備的一個(gè)配置，但是可替代的實(shí)施例包括蜂窩電話、所謂的“智能”電話、便攜式數(shù)字助理、平板計(jì)算機(jī)和任何其他類型的計(jì)算機(jī)或處理器驅(qū)動(dòng)的設(shè)備。此外，可替代的實(shí)施例中不需要包含TV，而是包括PC之間相互的直接通信。正如前面所提到的，本發(fā)明的實(shí)施例提供了用戶界面，其中，一個(gè)或多個(gè)手勢(shì)由用戶設(shè)計(jì)并且被映射為或關(guān)聯(lián)于TV或其它設(shè)備的一個(gè)或多個(gè)命令或操作。用戶可以選擇與他/她設(shè)計(jì)或創(chuàng)建的每個(gè)手勢(shì)相關(guān)聯(lián)的命令/操作。用戶不需要采用被預(yù)先編程到系統(tǒng)中的預(yù)置的手勢(shì)，也不需要采用預(yù)先與預(yù)置的手勢(shì)相關(guān)聯(lián)的預(yù)置的命令/操作。圖3示出了一個(gè)這樣的實(shí)施例的簡(jiǎn)化處理流程。該處理開(kāi)始于由TV(或其他計(jì)算設(shè)備)通過(guò)與TV通信的攝像機(jī)接收用戶的第一手勢(shì)(步驟302)。用戶將用于操作的選擇輸入到TV，所述操作是可供選擇的多個(gè)不同操作中的一個(gè)(步驟304)。TV響應(yīng)于選擇的輸入將操作與第一手勢(shì)相關(guān)聯(lián)(步驟306)。TV通過(guò)攝像機(jī)接收第二手勢(shì)，第二手勢(shì)與第一手勢(shì)基本相同(步驟308)?？梢杂蓜?chuàng)建手勢(shì)的用戶或由另一個(gè)用戶執(zhí)行第二手勢(shì)。響應(yīng)于所述第二手勢(shì)的接收，TV執(zhí)行所述操作(步驟310)。由TV執(zhí)行操作可以包括例如啟動(dòng)應(yīng)用，所述應(yīng)用例如是視頻游戲，或指向例如預(yù)選網(wǎng)站(諸如例如Facebook 、YouTube 、或Skype )的互聯(lián)網(wǎng)瀏覽器。其他的操作可以包括顯示用戶可獲得的內(nèi)容的預(yù)選頻道。另外的操作可以包括暫停內(nèi)容的呈現(xiàn)、快進(jìn)所述內(nèi)容的呈現(xiàn)、記錄內(nèi)容和修改所述內(nèi)容的音頻的音量級(jí)別。雖然圖3示出了涉及一個(gè)手勢(shì)及相關(guān)的操作的實(shí)施例，但應(yīng)當(dāng)理解，可替代的實(shí)施例涉及多個(gè)手勢(shì)和操作。例如，根據(jù)一個(gè)實(shí)施例，計(jì)算設(shè)備接收用戶的第一組多個(gè)手勢(shì)。用戶將用于計(jì)算設(shè)備的多個(gè)操作或命令的多個(gè)選擇輸入到所述計(jì)算設(shè)備。所述計(jì)算設(shè)備將多個(gè)操作與所述第一組多個(gè)手勢(shì)相關(guān)聯(lián)，這樣所述多個(gè)操作的每一個(gè)與多個(gè)選擇中的不同的一個(gè)相關(guān)聯(lián)。然后，計(jì)算設(shè)備接收第二組多個(gè)手勢(shì)，其中所述第二組多個(gè)手勢(shì)中的每一個(gè)與第一組多個(gè)手勢(shì)中的相應(yīng)那個(gè)基本相同。所述計(jì)算設(shè)備響應(yīng)于第二組多個(gè)手勢(shì)中的每一相應(yīng)手勢(shì)的接收來(lái)執(zhí)行多個(gè)操作的每一個(gè)，一次執(zhí)行一個(gè)操作。上述的實(shí)施例一般涉及創(chuàng)建用戶定義的手勢(shì)和將它們分配給TV或其他計(jì)算設(shè)備的操作或命令。圖4示出了替代實(shí)施例的簡(jiǎn)化流程，其中單個(gè)手勢(shì)被定義用于執(zhí)行一系列操作，例如，一種宏或批命令操作。因此，基于手勢(shì)的快捷方式類型被創(chuàng)建。該處理開(kāi)始于由TV (或其他計(jì)算設(shè)備)通過(guò)與TV通信的攝像機(jī)接收用戶的第一手勢(shì)(步驟402)。用戶將用于第一操作的第一選擇輸入到TV，所述第一操作是可供選擇的多個(gè)不同操作中的一個(gè)(步驟404)。然后，用戶輸入用于TV的第二操作的第二選擇(步驟406)。所述TV將第一操作和第二操作二者與第一手勢(shì)相關(guān)聯(lián)(步驟408)。TV通過(guò)攝像機(jī)接收第二手勢(shì)，第二手勢(shì)與第一手勢(shì)基本上相同(步驟410)。響應(yīng)于第二手勢(shì)的接收，TV自動(dòng)執(zhí)行第一操作，然后執(zhí)行第二操作，而不需要任何進(jìn)一步的用戶輸入或命令(步驟412)。多個(gè)操作例如可以包括在TV上顯示預(yù)選第一頻道的節(jié)目的第一操作，以及在第一頻道被顯示了預(yù)定時(shí)間段后，顯示預(yù)選第二頻道的節(jié)目的第二操作。因此，例如，用戶可能希望創(chuàng)建被TV識(shí)別為自動(dòng)調(diào)到并顯示第一頻道的命令的特殊手勢(shì)，其中第一頻道是例如專用于新聞內(nèi)容的頻道。所述新聞內(nèi)容頻道被顯示了預(yù)定時(shí)間量(如5分鐘)后，所述TV(無(wú)需接收任何進(jìn)一步的用戶輸入或命令)自動(dòng)改變頻道并顯示第二頻道，所述第二頻道是另一個(gè)用戶喜愛(ài)的頻道。此外，根據(jù)可替代實(shí)施例，用戶可以為在發(fā)起第二 TV操作之前將經(jīng)過(guò)的時(shí)間量選擇并向TV輸入用戶選擇的任何預(yù)定時(shí)間段(并且因此不會(huì)被限制為任何固定的、系統(tǒng)決定的時(shí)間段)。使用多個(gè)操作的另一個(gè)示例包括顯示內(nèi)容項(xiàng)的第一操作，以及當(dāng)它被顯示時(shí)記錄內(nèi)容項(xiàng)的第二操作。因此，例如，響應(yīng)于由用戶創(chuàng)建和定義的特殊手勢(shì)的接收，TV將自動(dòng)調(diào)到和顯示用戶選擇的第一頻道(無(wú)需接收任何進(jìn)一步的用戶輸入或命令)，并當(dāng)被顯示時(shí)開(kāi)始記錄該頻道的內(nèi)容。圖5示出了可替代的實(shí)施例的簡(jiǎn)化流程，其中，手勢(shì)在計(jì)算機(jī)或其他設(shè)備處被定義用于由單獨(dú)的設(shè)備(如TV)執(zhí)行操作動(dòng)作。這樣的實(shí)施例例如在這些情況下是很有用的:本地用戶缺乏創(chuàng)建和定義用于控制他/她的本地設(shè)備的手勢(shì)的技能或期望，但另一個(gè)人可以使用遠(yuǎn)程設(shè)備并且通過(guò)在遠(yuǎn)程設(shè)備處創(chuàng)建和定義手勢(shì)遠(yuǎn)程地協(xié)助本地用戶。該手勢(shì)有關(guān)的信息被發(fā)送到本地設(shè)備以由本地用戶使用。所述處理開(kāi)始于由第一計(jì)算設(shè)備(例如PC)通過(guò)與第一設(shè)備通信的第一攝像機(jī)接收用戶的第一手勢(shì)(步驟502)。接下來(lái)，用戶將用于由第二計(jì)算設(shè)備(例如TV)執(zhí)行的操作或命令的選擇輸入到所述第一設(shè)備，其中，所述操作是可供用戶選擇的多個(gè)不同的操作中的一個(gè)(步驟504)。然后，第一設(shè)備響應(yīng)于所述選擇的輸入來(lái)將所述操作與第一手勢(shì)相關(guān)聯(lián)(步驟506)。接著，與所述第一手勢(shì)相對(duì)應(yīng)且與將由第二計(jì)算設(shè)備執(zhí)行的所分配的操作的選擇相對(duì)應(yīng)的數(shù)據(jù)被從第一設(shè)備發(fā)送到第二設(shè)備(步驟508)。根據(jù)某些實(shí)施例，該數(shù)據(jù)通過(guò)本地網(wǎng)絡(luò)或者經(jīng)由互聯(lián)網(wǎng)或者二者來(lái)發(fā)送。所述第二設(shè)備通過(guò)第二攝像機(jī)接收第二手勢(shì)，第二手勢(shì)與第一手勢(shì)基本相同(步驟510)。第二手勢(shì)可以在所述第二設(shè)備處由在第一設(shè)備處創(chuàng)建了第一手勢(shì)和分配的用戶或由另一個(gè)用戶執(zhí)行。響應(yīng)于所述第二手勢(shì)的接收，第二設(shè)備自動(dòng)執(zhí)行所分配的操作(步驟512)。根據(jù)各種實(shí)施例，第一設(shè)備可以是膝上型計(jì)算機(jī)、臺(tái)式計(jì)算機(jī)、平板計(jì)算機(jī)、手持式設(shè)備、或者TV，并且第二設(shè)備可以是另一臺(tái)膝上型計(jì)算機(jī)、臺(tái)式計(jì)算機(jī)、平板計(jì)算機(jī)、手持式設(shè)備、或者TV。圖6示出了實(shí)施例的簡(jiǎn)化流程，其中，面部識(shí)別被使用，使得只有一個(gè)或多個(gè)特定用戶的手勢(shì)被計(jì)算設(shè)備接受，忽略其他可能存在的人的手勢(shì)。該處理開(kāi)始于TV(或其他計(jì)算設(shè)備)通過(guò)與TV通信的攝像機(jī)接收第一手勢(shì)(步驟602)。第一個(gè)人的面部圖像也由TV通過(guò)攝像機(jī)接收(步驟604)。第二個(gè)人的面部圖像也由TV通過(guò)攝像機(jī)接收(步驟606)。與第一手勢(shì)基本相同的第二手勢(shì)隨后由TV通過(guò)攝像機(jī)接收(步驟608)。使用面部識(shí)別確定第二手勢(shì)是否由第一個(gè)人做出(步驟610)。響應(yīng)于接收到所述第二手勢(shì)，如果確定第二手勢(shì)由第一個(gè)人做出，則所述TV執(zhí)行操作(步驟612)。在另一方面，如果確定第二手勢(shì)是由所述第二個(gè)人做出的(或由第一個(gè)人以外的任何人做出的)，則TV避免執(zhí)行操作(步驟614)。所有的上述實(shí)施例均涉及被計(jì)算設(shè)備接收和識(shí)別為執(zhí)行各種操作或功能的命令的手勢(shì)。然而，在可替代的實(shí)施例中，由用戶生成的語(yǔ)音命令或其他音頻信號(hào)以與上述相類似的方式被用于手勢(shì)。例如，在一個(gè)實(shí)施例中，由用戶生成的第一音頻信號(hào)被計(jì)算設(shè)備通過(guò)與所述計(jì)算設(shè)備通信的麥克風(fēng)接收。用戶將用于所述設(shè)備的操作的選擇輸入到該設(shè)備。響應(yīng)于該選擇的輸入，所述設(shè)備將操作與第一音頻信號(hào)相關(guān)聯(lián)。響應(yīng)于用戶生成的與第一音頻信號(hào)基本相同的第二音頻信號(hào)的接收，所述設(shè)備執(zhí)行操作。所述音頻信號(hào)可以是各種可聽(tīng)見(jiàn)的信號(hào)或噪聲中的任何一個(gè)或組合，包括但不限于，一個(gè)或多個(gè)說(shuō)出的詞語(yǔ)、打響指、鼓掌或吹口哨。在又一個(gè)實(shí)施例中，語(yǔ)音識(shí)別被用來(lái)僅對(duì)一個(gè)或多個(gè)特定用戶的音頻命令做出響應(yīng)，并忽略其他人的音頻命令。例如，在一個(gè)實(shí)施例中，計(jì)算設(shè)備通過(guò)與所述設(shè)備通信的麥克風(fēng)接收由第一個(gè)人生成的第一語(yǔ)音命令。所述設(shè)備將第一語(yǔ)音命令與第一個(gè)人相關(guān)聯(lián)。所述設(shè)備通過(guò)麥克風(fēng)接收與第一語(yǔ)音命令基本相同的第二語(yǔ)音命令。確定第二語(yǔ)音命令是否由第一個(gè)人生成。如果確定第二語(yǔ)音命令由第一個(gè)人生成，則所述設(shè)備執(zhí)行操作。另一方面，如果確定第二話音命令時(shí)由另一人所生成，則所述設(shè)備避免執(zhí)行操作?？商娲膶?shí)施例并不限于只接收手勢(shì)或只接收音頻信號(hào)。而是，某些實(shí)施例包括接收手勢(shì)和音頻信號(hào)的組合，所述手勢(shì)和音頻信號(hào)被計(jì)算設(shè)備識(shí)別為執(zhí)行如這里之前所描述的各種操作或功能的命令。鑒于上述情況，將理解的是，本發(fā)明的實(shí)施例通過(guò)提供以下用戶界面克服了本領(lǐng)域中許多長(zhǎng)期存在的問(wèn)題，所述用戶界面中，一個(gè)或多個(gè)手勢(shì)可由用戶設(shè)計(jì)并被映射為或關(guān)聯(lián)于TV或其它電子設(shè)備的一個(gè)或多個(gè)命令或操作。用戶可以選擇與他/她設(shè)計(jì)或創(chuàng)建的每個(gè)手勢(shì)相關(guān)聯(lián)的命令/操作。用戶不需要采用被預(yù)先編程到系統(tǒng)中的預(yù)置的手勢(shì)，也不需要采用預(yù)先與預(yù)置的手勢(shì)相關(guān)聯(lián)的預(yù)置的命令/操作。在可替代的實(shí)施例中，語(yǔ)音命令或其他可聽(tīng)見(jiàn)的信號(hào)由用戶設(shè)計(jì)并且被映射為或關(guān)聯(lián)于電子設(shè)備的命令/操作。雖然以上描述參考了本發(fā)明的特定實(shí)施例，但是將了解，在不脫離本發(fā)明的精神的情況下可以進(jìn)行許多修改。權(quán)利要求旨在覆蓋這樣的修改，只要這些修改落在本發(fā)明的真實(shí)范圍和精神內(nèi)。因此，當(dāng)前公開(kāi)的實(shí)施例在各個(gè)方面都應(yīng)當(dāng)被視為是說(shuō)明性的而非限制性的，本發(fā)明的范圍由權(quán)利要求而不是由之前的描述來(lái)指示，因此，在權(quán)利要求的等同物的含義和范圍內(nèi)的所有改變都旨在被包含于此。
權(quán)利要求
1.一種用于提供界面的方法，包括: 由計(jì)算設(shè)備通過(guò)與所述計(jì)算設(shè)備通信的攝像機(jī)接收用戶的第一手勢(shì)； 將用于所述計(jì)算設(shè)備的操作的選擇輸入到所述計(jì)算設(shè)備中，其中，所述操作是可供所述用戶選擇的多個(gè)不同的操作中的一個(gè)； 由所述計(jì)算設(shè)備將所述操作與所述第一手勢(shì)相關(guān)聯(lián)； 由所述計(jì)算設(shè)備通過(guò)所述攝像機(jī)接收第二手勢(shì)，其中，所述第二手勢(shì)與所述第一手勢(shì)基本相同；以及 由所述計(jì)算設(shè)備響應(yīng)于所述第二手勢(shì)的接收來(lái)執(zhí)行所述操作。
2.根據(jù)權(quán)利要求1所述的方法，其中，所述操作是由所述計(jì)算設(shè)備開(kāi)始應(yīng)用，所述計(jì)算設(shè)備是電視機(jī)并且其中所述攝像機(jī)被嵌入在所述電視中。
3.根據(jù)權(quán)利要求1所述的方法，其中，所述計(jì)算設(shè)備具有顯示器并且其中所述操作是顯示可提供給所述用戶的內(nèi)容的多個(gè)頻道中的預(yù)選的一個(gè)頻道。
4.根據(jù)權(quán)利要求1所述的方法，其中，所述計(jì)算設(shè)備在顯示器上呈現(xiàn)內(nèi)容，并且其中所述操作是暫停所述內(nèi)容的呈現(xiàn)、快進(jìn)所述內(nèi)容的呈現(xiàn)、記錄所述內(nèi)容和修改所述內(nèi)容的音頻的音量級(jí)別中的一個(gè)。
5.根據(jù)權(quán)利要求1所述的方法，其中，用于所述計(jì)算設(shè)備的所述操作的所述選擇是第一操作的第一選擇 ，所述方法進(jìn)一步包括: 由所述用戶將用于所述計(jì)算設(shè)備的第二操作的第二選擇輸入到所述計(jì)算設(shè)備中，其中，所述第二操作是可供所述用戶進(jìn)行第二選擇的多個(gè)不同的操作中的第二個(gè)， 其中，將所述第一手勢(shì)與所述第一操作相關(guān)聯(lián)包括將所述第一操作和所述第二操作二者與所述第一手勢(shì)相關(guān)聯(lián)，并且 其中，執(zhí)行所述第一操作包括由所述計(jì)算設(shè)備響應(yīng)于所述第二手勢(shì)的接收來(lái)自動(dòng)執(zhí)行所述第一操作和所述第二操作。
6.根據(jù)權(quán)利要求5所述的方法，其中，所述計(jì)算設(shè)備具有顯示器，其中，所述第一操作是在所述顯示器上顯示預(yù)選的第頻道，其中所述第二操作是在所述預(yù)選的第一頻道已被顯示了預(yù)定時(shí)間段之后在所述顯示器上顯示預(yù)選的第二頻道，并且其中所述第一頻道和所述第二頻道的每一個(gè)是可提供給所述用戶的內(nèi)容的多個(gè)頻道中的頻道。
7.根據(jù)權(quán)利要求6所述的方法，進(jìn)一步包括:由所述用戶將所述預(yù)定時(shí)間段輸入到所述計(jì)算設(shè)備，所述預(yù)定時(shí)間段是多個(gè)可供用戶選擇的時(shí)間段中的一個(gè)。
8.根據(jù)權(quán)利要求5所述的方法，其中，所述計(jì)算設(shè)備具有顯示器，其中所述第一操作是在所述顯示器上顯示內(nèi)容項(xiàng)，并且其中所述第二操作是當(dāng)所述內(nèi)容項(xiàng)被顯示時(shí)記錄所述內(nèi)容項(xiàng)。
9.一種用于提供界面的方法，包括: 由第一計(jì)算設(shè)備通過(guò)與所述第一計(jì)算設(shè)備通信的第一攝像機(jī)接收用戶的第一手勢(shì)；由所述用戶將用于第二計(jì)算設(shè)備的操作的選擇輸入到所述第一計(jì)算設(shè)備中，其中所述操作是可供所述用戶選擇的多個(gè)不同的操作中的一個(gè)； 由所述第一計(jì)算設(shè)備將所述操作與所述第一手勢(shì)相關(guān)聯(lián)； 從所述第一計(jì)算設(shè)備向所述第二計(jì)算設(shè)備發(fā)送對(duì)應(yīng)于所述第一手勢(shì)且對(duì)應(yīng)于所述第二計(jì)算設(shè)備的所述操作的所述選擇的數(shù)據(jù)；由所述第二計(jì)算設(shè)備通過(guò)與所述第二計(jì)算設(shè)備通信的第二攝像機(jī)接收第二手勢(shì)，其中所述第二手勢(shì)與所述第一手勢(shì)基本相同；以及 由所述第二計(jì)算設(shè)備響應(yīng)于所述第二手勢(shì)的接收來(lái)執(zhí)行所述操作。
10.根據(jù)權(quán)利要求9所述的方法，其中，所述第一計(jì)算設(shè)備是膝上型計(jì)算機(jī)、臺(tái)式計(jì)算機(jī)、平板計(jì)算機(jī)、手持式設(shè)備中的一個(gè)，并且其中所述第二計(jì)算設(shè)備是電視機(jī)。
11.一種用于提供界面的方法，包括: 由計(jì)算設(shè)備通過(guò)與所述計(jì)算設(shè)備通信的攝像機(jī)接收第一手勢(shì)； 由所述計(jì)算設(shè)備通過(guò)所述攝像機(jī)接收第一個(gè)人的面部圖像； 由所述計(jì)算設(shè)備通過(guò)所述攝像機(jī)接收第二個(gè)人的面部圖像； 由所述計(jì)算設(shè)備通過(guò)所述攝像機(jī)接收與所述第一手勢(shì)基本相同的第二手勢(shì)； 確定所述第二手勢(shì)是否由所述第一個(gè)人做出； 如果確定所述第二手勢(shì)是由所述第一個(gè)人做出的，則由所述計(jì)算設(shè)備響應(yīng)于所述第二手勢(shì)的接收來(lái)執(zhí)行所述操作；以及 如果確定所述第二手勢(shì)是由所述第一個(gè)人之外的人做出的，則避免由所述計(jì)算設(shè)備響應(yīng)于所述第二手勢(shì)的接收來(lái)執(zhí)行所述操作。
12.根據(jù)權(quán)利要求11所述的方法，進(jìn)一步包括: 由所述第一個(gè)人將用于所述計(jì)算設(shè)備的所述操作的選擇輸入到所述計(jì)算設(shè)備，其中，所述操作是可供所述第一個(gè)人選擇的多個(gè)不同的操作中的一個(gè)；以及由所述計(jì)算設(shè)備將所述操作與所述第一手勢(shì)相關(guān)聯(lián)。
13.一種用于提供界面的方法，包括: 由計(jì)算設(shè)備通過(guò)與所述計(jì)算設(shè)備通信的麥克風(fēng)接收由用戶生成的第一音頻信號(hào)；由所述用戶將用于所述計(jì)算設(shè)備的操作的選擇輸入到所述計(jì)算設(shè)備中，其中所述操作式是可供所述用戶選擇的多個(gè)不同的操作中的一個(gè)； 由所述計(jì)算設(shè)備將所述操作與所述第一音頻信號(hào)相關(guān)聯(lián)； 由所述計(jì)算設(shè)備通過(guò)所述麥克風(fēng)接收第二音頻信號(hào)，其中所述第二音頻信號(hào)與所述第一音頻信號(hào)基本相同；以及 由所述計(jì)算設(shè)備響應(yīng)于所述第二音頻信號(hào)的接收來(lái)執(zhí)行所述操作。
14.根據(jù)權(quán)利要求13所述的方法，其中，所述第一音頻信號(hào)是說(shuō)出的詞語(yǔ)、打響指、鼓掌和吹口哨中的一個(gè)。
15.根據(jù)權(quán)利要求13所述的方法，其中，所述操作是由所述計(jì)算設(shè)備開(kāi)始應(yīng)用，所述計(jì)算設(shè)備是電視機(jī)并且其中所述麥克風(fēng)被嵌入在所述電視中。
16.根據(jù)權(quán)利要求13所述的方法，其中，所述計(jì)算設(shè)備具有顯示器并且其中所述操作是顯示可提供給所述用戶的內(nèi)容的多個(gè)頻道中的預(yù)選的一個(gè)頻道。
17.根據(jù)權(quán)利要求13所述的方法，其中，所述計(jì)算設(shè)備在顯示器上呈現(xiàn)內(nèi)容，并且其中所述操作是暫停所述內(nèi)容的呈現(xiàn)、倒回所述內(nèi)容的呈現(xiàn)、快進(jìn)所述內(nèi)容的呈現(xiàn)、記錄所述內(nèi)容和修改所述內(nèi)容的音頻的音量級(jí)別中的一個(gè)。
18.根據(jù)權(quán)利要求13所述的方法，其中，所述用于計(jì)算設(shè)備的操作的選擇是第一操作的第一選擇，所述方法進(jìn)一步包括: 由所述用戶將用于所述計(jì)算設(shè)備的第二操作的第二選擇輸入到所述計(jì)算設(shè)備中，其中，所述第二操作是可供所述用戶進(jìn)行第二選擇的多個(gè)不同的操作中的第二個(gè)， 其中，將所述第一音頻信號(hào)與所述第一操作相關(guān)聯(lián)包括將所述第一音頻信號(hào)與所述第一操作和所述第二操作二者相關(guān)聯(lián)，并且 其中，執(zhí)行所述第一操作包括由所述計(jì)算設(shè)備響應(yīng)于所述第二音頻信號(hào)的接收來(lái)自動(dòng)執(zhí)行所述第一操作和所述第二操作。
19.根據(jù)權(quán)利要求18所述的方法，其中，所述計(jì)算設(shè)備具有顯示器，其中，所述第一操作是在所述顯示器上顯示預(yù)選的第一頻道，其中所述第二操作是在所述預(yù)選的第一頻道已被顯示了預(yù)定時(shí)間段之后在所述顯示器上顯示預(yù)選的第二頻道，并且其中所述第一頻道和所述第二頻道的每一個(gè)是可提供給所述用戶的內(nèi)容的多個(gè)頻道中的頻道。
20.根據(jù)權(quán)利要求19所述的方法，進(jìn)一步包括:由所述用戶將所述預(yù)定時(shí)間段輸入到所述計(jì)算設(shè)備，所述預(yù)定時(shí)間段是多個(gè)可供用戶選擇的時(shí)間段中的一個(gè)。
21.一種用于提供界面的方法，包括: 由計(jì)算設(shè)備通過(guò)與所述計(jì)算設(shè)備通信的麥克風(fēng)接收由第一個(gè)人生成的第一語(yǔ)音命令； 由所述計(jì)算設(shè)備將所述第一語(yǔ)音命令與所述第一個(gè)人相關(guān)聯(lián)； 由所述計(jì)算設(shè)備通過(guò)所述麥克風(fēng)接收與所述第一語(yǔ)音命令基本相同的第二語(yǔ)音命令； 確定所述第二語(yǔ)音命令是否由所述第一個(gè)人生成； 如果確定所述第二語(yǔ)音命令是由所述第一個(gè)人生成，則由所述計(jì)算設(shè)備響應(yīng)于所述第二語(yǔ)音命令的接收來(lái)執(zhí)行所述操作； 如果確定所述第二語(yǔ)音命令是由不同于所述第一個(gè)人的另一個(gè)人生成，則避免由所述計(jì)算設(shè)備響應(yīng)于所述第二語(yǔ)音命令的接收來(lái)執(zhí)行所述操作。
22.根據(jù)權(quán)利要求21所述的方法，進(jìn)一步包括: 由所述第一個(gè)人將用于所述計(jì)算設(shè)備的所述操作的選擇輸入到所述計(jì)算設(shè)備中，其中，所述操作是可供所述第一個(gè)人選擇的多個(gè)不同的操作中的一個(gè)；以及由所述計(jì)算設(shè)備將所述操作與所述第一語(yǔ)音命令相關(guān)聯(lián)。
23.一種由用戶使用的設(shè)備，包括: 存儲(chǔ)器； 攝像機(jī)；以及 處理器，被耦合到所述存儲(chǔ)器和所述攝像機(jī)并且用于執(zhí)行以下步驟，包括: 通過(guò)所述攝像機(jī)接收所述用戶的第一手勢(shì)； 接收所述用戶做出的對(duì)要由所述處理器執(zhí)行的操作的選擇，其中，所述操作是可供所述用戶選擇的多個(gè)不同的操作中的一個(gè)； 將所述操作與所述第一手勢(shì)相關(guān)聯(lián)； 通過(guò)所述攝像機(jī)接收第二手勢(shì)，其中，所述第二手勢(shì)與所述第一手勢(shì)基本相同；并且 響應(yīng)于所述第二手勢(shì)的接收來(lái)執(zhí)行所述操作。
24.根據(jù)權(quán)利要求23所述的設(shè)備，其中，所述操作是由所述處理器開(kāi)始應(yīng)用，所述設(shè)備具有顯示器并且其中所述操作是顯示可提供給所述用戶的內(nèi)容的多個(gè)頻道中的預(yù)選的一個(gè)頻道。
25.根據(jù)權(quán)利要求23所述的設(shè)備，其中，所述設(shè)備具有顯示器并且被配置為在所述顯示器上呈現(xiàn)內(nèi)容，并且其中所述操作是暫停所述內(nèi)容的呈現(xiàn)、快進(jìn)所述內(nèi)容的呈現(xiàn)、記錄所述內(nèi)容和修改所述內(nèi)容的音頻的音量級(jí)別中的一個(gè)。
26.根據(jù)權(quán)利要求23所述的設(shè)備，其中，用于所述對(duì)要由處理器執(zhí)行的操作的選擇是第一操作的第一選擇，并且其中所述處理器進(jìn)一步用于執(zhí)行以下步驟，包括: 從所述用戶接收對(duì)要由所述處理器執(zhí)行的第二操作的第二選擇，其中，所述第二操作是可供所述用戶進(jìn)行所述第二選擇的多個(gè)不同的操作中的第二個(gè)， 其中，將所述第一手勢(shì)與所述第一操作相關(guān)聯(lián)包括將所述第一手勢(shì)與所述第一操作和所述第二操作二者相關(guān)聯(lián)，并且 其中，執(zhí)行所述第一操作包括響應(yīng)于所述第二手勢(shì)的接收來(lái)自動(dòng)執(zhí)行所述第一操作和所述第二操作。
27.根據(jù)權(quán)利要求26所述的設(shè)備，其中，所述設(shè)備具有顯示器，其中，所述第一操作是在所述顯示器上顯示預(yù)選的第一頻道，其中所述第二操作是在所述預(yù)選的第一頻道已被顯示了預(yù)定時(shí)間段之后在所述顯示器上顯示預(yù)選的第二頻道，并且其中所述第一頻道和所述第二頻道的每一個(gè)是可提供給所述用戶的內(nèi)容的多個(gè)頻道中的頻道。
28.根據(jù)權(quán)利要求27所述的設(shè)備，其中，所述處理器進(jìn)一步用于執(zhí)行以下步驟，包括:接收來(lái)自所述用戶的所述預(yù)定時(shí)間段，所述預(yù)定時(shí)間段是可供所述用戶選擇的多個(gè)時(shí)間段中的一個(gè)。
29.根據(jù)權(quán)利要 求26所述的設(shè)備，其中，所述設(shè)備具有顯示器，其中所述第一操作是在所述顯示器上顯示內(nèi)容項(xiàng)，并且其中所述第二操作是當(dāng)所述內(nèi)容項(xiàng)被顯示時(shí)記錄所述內(nèi)容項(xiàng)。
全文摘要
本公開(kāi)涉及用于設(shè)備控制的手勢(shì)和語(yǔ)音識(shí)別。一種用戶界面允許一個(gè)或多個(gè)手勢(shì)由用戶設(shè)計(jì)并且被映射為或者關(guān)聯(lián)于電視或其它設(shè)備的一個(gè)或多個(gè)命令或操作。用戶可以選擇與他/她設(shè)計(jì)或創(chuàng)建的每個(gè)手勢(shì)相關(guān)聯(lián)的命令/操作。用戶不被限制為使用被預(yù)先編程到系統(tǒng)中的預(yù)置的手勢(shì)，也不被限制為使用預(yù)先與預(yù)置的手勢(shì)相關(guān)聯(lián)的預(yù)置的命令/操作。在可替代的實(shí)施例中，語(yǔ)音命令或其他可聽(tīng)見(jiàn)的信號(hào)是由用戶設(shè)計(jì)，并且被映射為或關(guān)聯(lián)于設(shè)備的命令/操作。
文檔編號(hào)H04N21/422GK103137128SQ201210442180
公開(kāi)日2013年6月5日 申請(qǐng)日期2012年11月7日 優(yōu)先權(quán)日2011年11月18日
發(fā)明者松林浩司 申請(qǐng)人:索尼公司