專利名稱:信息處理設(shè)備和信息處理方法
技術(shù)領(lǐng)域:
本公開涉及信息處理設(shè)備和信息處理方法。
背景技術(shù):
近年來,諸如電子設(shè)備等的設(shè)備的功能已經(jīng)變得更復(fù)雜以及在數(shù)量上增加,且用戶必須給用戶的設(shè)備的指令正變得更加多樣和復(fù)雜。如此,許多設(shè)備使用GUI (圖形用戶界面)作為用戶界面,由此可以比在使用利用CUI(字符用戶界面)的設(shè)備的情況下更容易地向設(shè)備給出指令。但是,例如,對(duì)于不習(xí)慣于使用諸如鼠標(biāo)的指向設(shè)備的用戶,GUI不一定是具有良好的可操作性的界面。因此,存在對(duì)用戶可以通過其更直觀地向設(shè)備給出指令的用戶界面的需求。這已導(dǎo)致開發(fā)用戶界面以改善用戶可操作性。日本未審查專利申請(qǐng)公開 No. 2005-31799是用于檢測(cè)用戶的身體的部分或者由用戶操作的物體的形狀和動(dòng)作、并根據(jù)所檢測(cè)的結(jié)果來進(jìn)行處理的技術(shù)的一個(gè)例子。
發(fā)明內(nèi)容
已經(jīng)應(yīng)用了涉及用于改進(jìn)可操作性的用戶界面的現(xiàn)有技術(shù)(此后簡(jiǎn)稱為"現(xiàn)有技術(shù)〃)的信息處理設(shè)備(此后簡(jiǎn)稱為〃根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備〃)通過對(duì)成像圖像(運(yùn)動(dòng)圖像,此后稱為"成像圖像")進(jìn)行圖像處理來檢測(cè)用戶使用手臂、手掌、手指等在空間中的姿勢(shì)動(dòng)作。在已經(jīng)檢測(cè)到用戶的姿勢(shì)動(dòng)作的情況下,根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備進(jìn)行對(duì)應(yīng)于所檢測(cè)的用戶的姿勢(shì)動(dòng)作的處理。因此,根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備的用戶可以以比使用GUI的情況更直觀的方式向根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備提供指令,且因此,使用現(xiàn)有技術(shù)可以改善用戶可操作性。但是,通過現(xiàn)有技術(shù),檢測(cè)在空間上用戶的身體的至少一部分比如胳膊、手掌、手指等的或者由用戶操作的物體的形狀或動(dòng)作,來檢測(cè)用戶的姿勢(shì)動(dòng)作,因此必須對(duì)整個(gè)成像圖像進(jìn)行圖像處理。因此,要檢測(cè)的姿勢(shì)動(dòng)作的類型越多以及姿勢(shì)動(dòng)作越復(fù)雜,要求的進(jìn)行圖像處理的根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備的處理能力越高。現(xiàn)在,即使近年來隨著更高的功能性諸如PC(個(gè)人計(jì)算機(jī))等的信息處理設(shè)備的處理能力已經(jīng)改善,但是將大量計(jì)算資源轉(zhuǎn)移到用戶界面可能導(dǎo)致實(shí)現(xiàn)諸如例如用于控制通信的功能的其他功能的計(jì)算資源不足。此外,在用于實(shí)現(xiàn)其他功能的計(jì)算資源已變得不足的情況下,直到計(jì)算資源的不充足性已經(jīng)解決才執(zhí)行與該功能有關(guān)的處理,因此通過根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備,可能出現(xiàn)其中使得用戶等待不合理的時(shí)間量或不實(shí)現(xiàn)功能的不期望的情況。因此,對(duì)于使用現(xiàn)有技術(shù)的情況,必定不能改進(jìn)用戶可操作性方面的改進(jìn),因?yàn)榭赡茉谔幚碇袪奚脩舯憬菪?。已?jīng)發(fā)現(xiàn)期望提供一種新的且改進(jìn)的信息處理設(shè)備和信息處理方法,從而可以改善用戶可操作性。鑒于以上,提供本設(shè)備和方法。根據(jù)圖示實(shí)施例,通過以下來實(shí)現(xiàn)該設(shè)備和方法檢測(cè)圖像的面部區(qū)域,根據(jù)面部區(qū)域的位置來設(shè)置至少一個(gè)動(dòng)作區(qū)域,為了確定是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作的目的,將對(duì)應(yīng)于至少一個(gè)動(dòng)作區(qū)域的圖像數(shù)據(jù)與檢測(cè)信息相比較,以及當(dāng)確定已經(jīng)進(jìn)行了預(yù)定動(dòng)作時(shí),生成通知。
圖1是圖示根據(jù)本公開的實(shí)施例的信息處理設(shè)備設(shè)置的動(dòng)作區(qū)域的例子的說明圖;圖2是圖示根據(jù)本公開的實(shí)施例的信息處理設(shè)備設(shè)置的動(dòng)作區(qū)域的例子的說明圖;圖3是圖示通過根據(jù)本公開的實(shí)施例的信息處理設(shè)備的動(dòng)作區(qū)域設(shè)置處理的例子的說明圖;圖4是圖示由于進(jìn)行根據(jù)本公開的實(shí)施例的通知處理而向用戶的通知的例子的說明圖;圖5是圖示由于進(jìn)行根據(jù)本公開的實(shí)施例的通知處理而改變成像圖像的例子的說明圖;圖6是圖示由于進(jìn)行根據(jù)本公開的實(shí)施例的通知處理而改變成像圖像的另一例子的說明圖;圖7是圖示由于進(jìn)行根據(jù)本公開的實(shí)施例的通知處理而向用戶的通知的另一例子的說明圖;圖8是圖示由于進(jìn)行根據(jù)本公開的實(shí)施例的通知處理而向用戶的通知的另一例子的說明圖;圖9是圖示根據(jù)本公開的實(shí)施例的信息處理設(shè)備的與可操作性改善方法有關(guān)的處理的例子的流程圖;圖10是圖示根據(jù)本公開的實(shí)施例的信息處理設(shè)備的動(dòng)作確定處理的例子的流程圖;圖11是用于描述通過根據(jù)本公開的實(shí)施例的信息處理設(shè)備使用個(gè)體檢測(cè)信息檢測(cè)已經(jīng)進(jìn)行預(yù)定動(dòng)作的優(yōu)點(diǎn)的說明圖;圖12是用于描述通過根據(jù)本公開的實(shí)施例的信息處理設(shè)備使用個(gè)體檢測(cè)信息檢測(cè)已經(jīng)進(jìn)行預(yù)定動(dòng)作的優(yōu)點(diǎn)的說明圖;圖13是圖示根據(jù)本公開的實(shí)施例的信息處理設(shè)備的與可操作性改善方法有關(guān)的處理的另一例子的流程圖;圖14是圖示根據(jù)本公開的第一實(shí)施例的信息處理設(shè)備的配置的例子的方框圖;圖15是圖示根據(jù)本公開的實(shí)施例的信息處理設(shè)備的硬件配置的例子的說明圖;圖16是圖示根據(jù)本公開的第二實(shí)施例的信息處理設(shè)備的配置的例子的方框圖; 以及圖17是圖示根據(jù)本公開的第三實(shí)施例的信息處理設(shè)備的配置的例子的方框圖。
具體實(shí)施例方式將參考附圖描述本公開的優(yōu)選實(shí)施例。注意,在本說明書和附圖中,用相同附圖標(biāo)記來標(biāo)示具有實(shí)質(zhì)上相同功能配置的組件,且將省略冗余的描述。此外,下面將根據(jù)以下順序來進(jìn)行描述。
1.根據(jù)本公開的實(shí)施例的方法1-1.用于可操作性改善方法的第一處理1-2.用于可操作性改善方法的第二處理2.根據(jù)本公開的實(shí)施例的信息處理設(shè)備3.根據(jù)本公開的實(shí)施例的程序1.根據(jù)本公開的實(shí)施例的方法在描述根據(jù)本公開的實(shí)施例的信息處理設(shè)備(此后,可以稱為"信息處理設(shè)備 100")的配置之前,將描述根據(jù)本公開的實(shí)施例的可操作性改善方法。以下,將通過配置的主要例子進(jìn)行描述,其中已經(jīng)在信息處理設(shè)備100的外部設(shè)備處成像的成像圖像被輸入到信息處理設(shè)備100,且信息處理設(shè)備100處理成像圖像。注意,根據(jù)本公開的實(shí)施例的信息處理設(shè)備100的配置不限于上述,且可以進(jìn)行布置,其中,例如,信息處理設(shè)備100具有成像功能,且已經(jīng)使用該成像功能成像的成像圖像被處理。此外,根據(jù)本公開的實(shí)施例的成像圖像是通過成像而獲得的運(yùn)動(dòng)圖像(在時(shí)間軸上連續(xù)成像的靜態(tài)圖像的組)。此外,以下所述的根據(jù)本公開的實(shí)施例的與可操作性改善方法有關(guān)的處理可以被理解為涉及根據(jù)本公開的實(shí)施例的信息處理方法的處理??刹僮餍愿纳品椒ǖ母攀鋈缟纤?,在檢測(cè)用戶的姿勢(shì)動(dòng)作(此后可以簡(jiǎn)稱為"動(dòng)作")并進(jìn)行對(duì)應(yīng)于檢測(cè)的動(dòng)作的處理的情況下,用戶可以比使用GUI的情況更直觀地向信息處理設(shè)備給出指令。因此,信息處理設(shè)備100通過進(jìn)行成像圖像的圖像處理并進(jìn)行對(duì)應(yīng)于所檢測(cè)的動(dòng)作的處理來檢測(cè)用戶動(dòng)作,由此改善用戶操作?,F(xiàn)在,在像根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備那樣對(duì)整個(gè)成像圖像進(jìn)行圖像處理的情況下,高處理能力是進(jìn)行圖像處理的先決條件。因此,將大量計(jì)算資源轉(zhuǎn)移到用戶界面可能像根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備那樣導(dǎo)致用于實(shí)現(xiàn)其他功能的計(jì)算資源不足。此外,在用于實(shí)現(xiàn)其他功能的計(jì)算資源已經(jīng)變得不足的情況下,可能出現(xiàn)其中使得用戶等待不合理的時(shí)間量或不實(shí)現(xiàn)功能的不期望的情況。因此,通過信息處理設(shè)備100,從成像圖像檢測(cè)包括用戶的面部的區(qū)域(此后稱為"面部區(qū)域"),且在通過檢測(cè)標(biāo)識(shí)的面部區(qū)域(此后可以稱為"標(biāo)識(shí)的面部區(qū)域")附近設(shè)置用于檢測(cè)用戶動(dòng)作的成像圖像中的動(dòng)作區(qū)域。信息處理設(shè)備100在設(shè)置的動(dòng)作區(qū)域中檢測(cè)用戶的預(yù)定動(dòng)作,并進(jìn)行關(guān)于已經(jīng)檢測(cè)到的預(yù)定動(dòng)作的處理?,F(xiàn)在,根據(jù)本公開的實(shí)施例的預(yù)定用戶動(dòng)作是作為確定的對(duì)象的用戶動(dòng)作,其中,在信息處理設(shè)備100處進(jìn)行關(guān)于是否已經(jīng)進(jìn)行了動(dòng)作的確定。信息處理設(shè)備100基于例如成像圖像和稍后描述的參考檢測(cè)信息或個(gè)體確定信息來進(jìn)行上述確定。通過如上所述設(shè)置動(dòng)作區(qū)域,信息處理設(shè)備100可以通過對(duì)作為成像圖像的一部分的區(qū)域進(jìn)行圖像處理,而不是像根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備那樣對(duì)整個(gè)成像圖像進(jìn)行圖像處理,來檢測(cè)用戶動(dòng)作?,F(xiàn)在,通過信息處理設(shè)備100,相比于根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備,涉及用戶界面的計(jì)算負(fù)荷可以顯著降低,因此不擔(dān)心像根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備那樣實(shí)現(xiàn)其他功能的技術(shù)資源不足。此外,信息處理設(shè)備100通過進(jìn)行面部識(shí)別處理從成像圖像中標(biāo)識(shí)面部區(qū)域,該面部識(shí)別處理是在諸如例如蜂窩電話的數(shù)字相機(jī)的不具有很高的處理能力的設(shè)備中實(shí)現(xiàn)的相對(duì)較輕的處理,并且信息處理設(shè)備100在該面部區(qū)域附近設(shè)置動(dòng)作區(qū)域,因此在設(shè)置動(dòng)作區(qū)域時(shí)的計(jì)算負(fù)荷也不大。從而,信息處理設(shè)備100可以防止發(fā)生如上所述像根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備那樣可能發(fā)生的不希望的情況,因此不像根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備那樣犧牲用戶便利性。因此,信息處理設(shè)備100可以改善用戶可操作性。此外,信息處理設(shè)備100進(jìn)行與在面部區(qū)域附近設(shè)置的動(dòng)作區(qū)域中檢測(cè)的預(yù)定動(dòng)作對(duì)應(yīng)的處理,因此,與取整個(gè)成像圖像作為處理的對(duì)象的根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備相比,可以減少由于例如除了與面部區(qū)域?qū)?yīng)的用戶之外的人或物體進(jìn)行的動(dòng)作引起的預(yù)定動(dòng)作的錯(cuò)誤檢測(cè)。從而,與根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備相比,信息處理設(shè)備100可以進(jìn)一步改善用戶可操作性。此外,信息處理設(shè)備100進(jìn)行與預(yù)定動(dòng)作的含義相關(guān)的處理,作為與在面部區(qū)域附近設(shè)置的動(dòng)作區(qū)域中檢測(cè)的預(yù)定動(dòng)作對(duì)應(yīng)的處理。例如,在已經(jīng)檢測(cè)到用戶在面部附近側(cè)向來回移動(dòng)手的動(dòng)作(通常,意味著"再見"或"bye-bye"的動(dòng)作,下文中可以稱為"bye-bye動(dòng)作")作為預(yù)定動(dòng)作的情況下,信息處理設(shè)備100進(jìn)行與所檢測(cè)的動(dòng)作的含義相關(guān)的處理,比如例如關(guān)閉要控制的設(shè)備(信息處理設(shè)備或外部設(shè)備)的電源、使從該設(shè)備輸出的音頻(包括音樂)靜音等的處理。此外,在已經(jīng)檢測(cè)到用戶在動(dòng)作區(qū)域中垂直地來回移動(dòng)手的動(dòng)作作為預(yù)定動(dòng)作的情況下,信息處理設(shè)備100進(jìn)行與檢測(cè)的動(dòng)作的含義相關(guān)的處理,比如例如升高從要控制的設(shè)備輸出的音頻的音量等。如上所述,通過信息處理設(shè)備100進(jìn)行與檢測(cè)的動(dòng)作的含義相關(guān)的處理(考慮到功能可見性(affordance)的處理),用戶將感覺到用戶自身的動(dòng)作和信息處理設(shè)備100進(jìn)行的處理(或信息處理設(shè)備100致使外部設(shè)備進(jìn)行的處理)之間的不一致性的機(jī)會(huì)可以進(jìn)一步減小。從而,信息處理設(shè)備100可以進(jìn)一步改善用戶可操作性。另外,在確定已經(jīng)進(jìn)行預(yù)定動(dòng)作的情況下(在已經(jīng)檢測(cè)到預(yù)定動(dòng)作的情況下),信息處理設(shè)備100可以進(jìn)一步進(jìn)行通知處理,其中,通知用戶已經(jīng)在信息處理設(shè)備100處進(jìn)行了已經(jīng)進(jìn)行預(yù)定動(dòng)作的確定。此外,在進(jìn)行通知處理的情況下,在已經(jīng)確定從已做出的已經(jīng)進(jìn)行預(yù)定動(dòng)作的確定開始已經(jīng)連續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的情況下,信息處理設(shè)備 100進(jìn)行與已經(jīng)確定的預(yù)定動(dòng)作對(duì)應(yīng)的處理。現(xiàn)在,根據(jù)本公開的實(shí)施例的通知處理的例子包括改變?cè)谠撛O(shè)備本身具有的顯示單元的顯示屏幕上顯示的圖像(稍后描述),或改變被提供給顯示單元的照明設(shè)備的點(diǎn)亮狀態(tài),由此視覺上進(jìn)行對(duì)用戶的通知。也就是說,根據(jù)本公開的實(shí)施例的通知處理可以被理解為向用戶的反饋處理。注意,根據(jù)本公開的實(shí)施例的通知處理不限制于上述。例如,信息處理設(shè)備100可以進(jìn)行用于音頻上進(jìn)行對(duì)用戶的通知的處理,比如從該設(shè)備本身具有的音頻輸出設(shè)備(例如,稍后描述的音頻輸出單元)或外部音頻輸出設(shè)備等輸出指示確定了已經(jīng)進(jìn)行了預(yù)定動(dòng)作的音頻,作為通知處理。此外,信息處理設(shè)備100可以經(jīng)由網(wǎng)絡(luò)(或直接地)向外部設(shè)備傳輸處理執(zhí)行命令以通知外部設(shè)備已經(jīng)在信息處理設(shè)備100處確定了已經(jīng)進(jìn)行預(yù)定動(dòng)作,作為通知處理。通過上述,信息處理設(shè)備100可以致使致外部設(shè)備進(jìn)行對(duì)用戶的通知。通過信息處理設(shè)備100進(jìn)行通知處理,可以使得用戶理解用戶進(jìn)行的動(dòng)作已經(jīng)被信息處理設(shè)備100識(shí)別。另外,在確定已經(jīng)持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的情況下,信息處理設(shè)備100進(jìn)行對(duì)應(yīng)于所確定的預(yù)定動(dòng)作的處理,因此,用戶可以通過停止他/她自己的動(dòng)作來取消與在信息處理設(shè)備100處的該動(dòng)作對(duì)應(yīng)的處理的執(zhí)行。因此,在用戶進(jìn)行了預(yù)定動(dòng)作且信息處理設(shè)備100已經(jīng)識(shí)別到此之后用戶期望取消在信息處理設(shè)備100處的與該動(dòng)作對(duì)應(yīng)的處理的執(zhí)行的情況下,或甚至在信息處理設(shè)備100碰巧錯(cuò)誤地檢測(cè)了用戶已經(jīng)進(jìn)行的動(dòng)作的情況下,用戶可以通過他/她自己的動(dòng)作來控制在信息處理設(shè)備100處的對(duì)應(yīng)于該動(dòng)作的處理的執(zhí)行。因此,通過進(jìn)行通知處理且進(jìn)一步選擇性地進(jìn)行與在確定了已經(jīng)持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的情況下確定的預(yù)定動(dòng)作對(duì)應(yīng)的處理,信息處理設(shè)備100可以防止用戶不想要的處理由于錯(cuò)誤檢測(cè)而被執(zhí)行,且因此還可以改善用戶方便性和可操作性。例如,信息處理設(shè)備100通過進(jìn)行諸如上述處理來改善用戶可操作性。更具體地, 例如,信息處理設(shè)備100進(jìn)行1-1.可操作性改善方法的第一處理以及1-2.可操作性改善方法的第二處理,由此改善用戶可操作性。1-1.可操作性改善方法的第一處理首先,將描述根據(jù)本公開的實(shí)施例的可操作性改善方法的第一處理。信息處理設(shè)備100進(jìn)行以下處理(1)到處理(4),由此改善用戶可操作性。(1)面部區(qū)域檢測(cè)處理信息處理設(shè)備100從成像圖像中檢測(cè)用戶(被攝體)的面部,并標(biāo)識(shí)面部區(qū)域。現(xiàn)在,標(biāo)識(shí)面部區(qū)域可以通過檢測(cè)例如用戶的眼睛、鼻子、嘴巴、結(jié)構(gòu)(structure)等的特征點(diǎn)并檢測(cè)面部亮度分布和類似于結(jié)構(gòu)樣式的區(qū)域來進(jìn)行。注意,在根據(jù)本公開的實(shí)施例的信息處理設(shè)備100處的面部區(qū)域檢測(cè)處理不限于以上。例如,信息處理設(shè)備100可以檢測(cè)要處理的當(dāng)前幀和退后的一幀之間的差來檢測(cè)移動(dòng)體,并通過從該移動(dòng)體標(biāo)識(shí)頭部來檢測(cè)面部區(qū)域。此外,與在信息處理設(shè)備100處標(biāo)識(shí)面部區(qū)域有關(guān)的數(shù)據(jù)、比如面部亮度分布和結(jié)構(gòu)樣式(structure pattern)等的數(shù)據(jù)被存儲(chǔ)在信息處理設(shè)備100具有的存儲(chǔ)單元(稍后描述)中。注意,信息處理設(shè)備100可以經(jīng)由例如信息處理設(shè)備100具有的通信單元(稍后描述)與諸如服務(wù)器的外部設(shè)備通信,并從外部設(shè)備獲得與標(biāo)識(shí)面部區(qū)域有關(guān)的數(shù)據(jù)。此外,例如,如圖1所示,信息處理設(shè)備100標(biāo)識(shí)比面部大并包括檢測(cè)的面部的區(qū)域,但是在信息處理設(shè)備100處的面部區(qū)域標(biāo)識(shí)方法不限于以上。例如,信息處理設(shè)備100 可以標(biāo)識(shí)包括檢測(cè)的面部的區(qū)域的最小區(qū)域(例如最緊密地包含檢測(cè)的面部的區(qū)域,比如圖3所示),作為面部區(qū)域。例如,信息處理設(shè)備100如上所述標(biāo)識(shí)面部區(qū)域。現(xiàn)在,信息處理設(shè)備100處理的成像圖像是運(yùn)動(dòng)圖像,可能存在在某幀中標(biāo)識(shí)的面部區(qū)域在成像圖像中的位置在下一幀中改變的情況。從而,信息處理設(shè)備100例如對(duì)每幀進(jìn)行面部區(qū)域檢測(cè)處理。注意,根據(jù)本公開的實(shí)施例進(jìn)行面部區(qū)域檢測(cè)處理的頻率不限于以上,并且例如信息處理設(shè)備100可以每隔預(yù)定幀或每隔預(yù)定時(shí)間進(jìn)行面部區(qū)域檢測(cè)處理。(2)動(dòng)作區(qū)域設(shè)置處理在上述處理(1)(面部區(qū)域檢測(cè)處理)中檢測(cè)到面部區(qū)域時(shí),信息處理設(shè)備100基于面部區(qū)域來在面部區(qū)域附近設(shè)置動(dòng)作區(qū)域。
圖1和2是圖示根據(jù)本公開的實(shí)施例的信息處理設(shè)備100設(shè)置的動(dòng)作區(qū)域的例子的說明圖。圖1和2中的FA表示信息處理設(shè)備100檢測(cè)的用戶的面部區(qū)域,且圖1中的 MAl和MA2和圖2中的MAl到MA4圖示了信息處理設(shè)備100已經(jīng)設(shè)置的動(dòng)作區(qū)域的例子。 此后,面部區(qū)域可以稱為"面部區(qū)域FA",且動(dòng)作區(qū)域可以統(tǒng)稱為"動(dòng)作區(qū)域MA"。現(xiàn)在已經(jīng)為了方便描述例示了圖1和2所示的面部區(qū)域FA和動(dòng)作區(qū)域MA,且例如在要在諸如顯示設(shè)備300的外部設(shè)備的顯示屏幕上或在信息處理設(shè)備100具有的顯示單元(稍后描述) 的顯示屏幕上顯示成像圖像的情況下,面部區(qū)域FA和動(dòng)作區(qū)域MA不需要明確示出(這在以下描述通篇都成立)。不用說,根據(jù)本公開的實(shí)施例的信息處理設(shè)備100可以顯示其中明確示出了面部區(qū)域FA和動(dòng)作區(qū)域MA的成像圖像?,F(xiàn)在,雖然圖1圖示了信息處理設(shè)備100已經(jīng)設(shè)置了圓形動(dòng)作區(qū)域的例子,但是由根據(jù)本公開的實(shí)施例的信息處理設(shè)備100設(shè)置的動(dòng)作區(qū)域MA不限于圖1所示的例子。例如,信息處理設(shè)備100可以設(shè)置各種形狀的動(dòng)作區(qū)域,比如圖2所示的矩形動(dòng)作區(qū)域、橢圓動(dòng)作區(qū)域等。此外,雖然圖1示出了信息處理設(shè)備100已經(jīng)在面部區(qū)域FA的左側(cè)附近和面部區(qū)域FA的右側(cè)附近設(shè)置了動(dòng)作區(qū)域MA的情況,但是根據(jù)本公開的實(shí)施例的信息處理設(shè)備100設(shè)置的動(dòng)作區(qū)域MA不限于上述。例如,信息處理設(shè)備100可以將動(dòng)作區(qū)域MA設(shè)置為在面部區(qū)域FA左側(cè)附近或面部區(qū)域FA右側(cè)附近之一。此外,如圖2所示,例如,信息處理設(shè)備100還可以將一個(gè)或多個(gè)動(dòng)作區(qū)域MA設(shè)置到面部區(qū)域FA以下附近。此外,信息處理設(shè)備100可以將一個(gè)或多個(gè)動(dòng)作區(qū)域MA設(shè)置到面部區(qū)域FA以下附近或面部區(qū)域FA以上附近之一、或面部區(qū)域FA以下附近和面部區(qū)域FA以上附近兩者。不用說,信息處理設(shè)備 100在面部區(qū)域附近設(shè)置的動(dòng)作區(qū)域MA不限于上述。通過設(shè)置諸如圖1和2所示的動(dòng)作區(qū)域MA,信息處理設(shè)備100不檢測(cè)在動(dòng)作區(qū)域 MA之外進(jìn)行的比如圖1中的A所示的動(dòng)作作為預(yù)定動(dòng)作。因此,信息處理設(shè)備100可以比取整個(gè)成像圖像作為處理對(duì)象的現(xiàn)有技術(shù)的信息處理設(shè)備更多地降低錯(cuò)誤地檢測(cè)預(yù)定動(dòng)作的可能性。此外,例如,通過將多個(gè)動(dòng)作區(qū)域MA設(shè)置在面部區(qū)域FA附近,比如圖2所示,信息處理設(shè)備100可以檢測(cè)在多個(gè)動(dòng)作區(qū)域MA的每個(gè)中的預(yù)定動(dòng)作,且例如對(duì)對(duì)應(yīng)于檢測(cè)的預(yù)定動(dòng)作的每個(gè)動(dòng)作區(qū)域MA進(jìn)行處理?,F(xiàn)在,例如,在增加要設(shè)置的動(dòng)作區(qū)域MA的數(shù)量的情況下,如圖2所示,計(jì)算負(fù)荷大于圖1中所示的情況,但是與對(duì)整個(gè)成像圖像進(jìn)行圖像處理的根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備相比,計(jì)算負(fù)荷顯著降低。從而,即使在例如如圖2所示增加要設(shè)置的動(dòng)作區(qū)域的數(shù)量的情況下,也不擔(dān)心像根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備那樣的不足夠的計(jì)算資源,因此在用戶便利性方面沒有變壞。此外,通過如上所述對(duì)于每個(gè)動(dòng)作區(qū)域MA進(jìn)行與預(yù)定動(dòng)作對(duì)應(yīng)的處理,例如即使在用戶已經(jīng)進(jìn)行了相同的預(yù)定動(dòng)作的情況下,信息處理設(shè)備100也可以進(jìn)行對(duì)每個(gè)檢測(cè)的動(dòng)作區(qū)域MA不同的處理。也就是說,信息處理設(shè)備100可以適應(yīng)化對(duì)于一個(gè)預(yù)定動(dòng)作的多個(gè)處理。不用說,在多個(gè)動(dòng)作區(qū)域MA的每個(gè)處檢測(cè)到一個(gè)預(yù)定動(dòng)作的情況下信息處理設(shè)備 100進(jìn)行的處理可以相同。此外,通過如上述對(duì)每個(gè)動(dòng)作區(qū)域MA進(jìn)行對(duì)應(yīng)于預(yù)定動(dòng)作的處理,信息處理設(shè)備 100可以進(jìn)行與檢測(cè)到預(yù)定動(dòng)作的位置(更具體地,檢測(cè)到其的區(qū)域)相聯(lián)系的與檢測(cè)的動(dòng)
9作的含義相關(guān)的處理(考慮到功能可見性的處理)。因此,信息處理設(shè)備100可以進(jìn)一步改善用戶可操作性。動(dòng)作區(qū)域設(shè)置處理的具體例子現(xiàn)在,將更詳細(xì)地描述信息處理設(shè)備100的動(dòng)作區(qū)域設(shè)置處理的例子。圖3是用于描述在根據(jù)本公開的實(shí)施例的信息處理設(shè)備100處的動(dòng)作區(qū)域設(shè)置處理的例子的說明圖。 現(xiàn)在,圖3示出在將動(dòng)作區(qū)域MA設(shè)置到面部區(qū)域FA的左側(cè)附近和右側(cè)附近的情況下的處理的例子,如圖1所示。信息處理設(shè)備100基于所標(biāo)識(shí)的面部區(qū)域FA的寬度(水平方向的長(zhǎng)度)w和高度 (在垂直方向上的長(zhǎng)度)h來設(shè)置動(dòng)作區(qū)域MA?,F(xiàn)在,圖3圖示了其中信息處理設(shè)備100已經(jīng)設(shè)置了寬度2w和高度池的矩形動(dòng)作區(qū)域MAl和MA2的例子。注意,例如,信息處理設(shè)備 100也可以設(shè)置動(dòng)作區(qū)域MA以便為其中2w和池是短軸和長(zhǎng)軸的橢圓形(當(dāng)W = h時(shí)是圓形)。此外,例如,信息處理設(shè)備100設(shè)置動(dòng)作區(qū)域MA以便變得與所標(biāo)識(shí)的面部區(qū)域FA 接觸,如圖3所示,但是,信息處理設(shè)備100的動(dòng)作區(qū)域MA的設(shè)置方法不限于上述。例如, 信息處理設(shè)備100可以將動(dòng)作區(qū)域MA設(shè)置在距離標(biāo)識(shí)的面部區(qū)域FA預(yù)定數(shù)量像素的位置處。也就是說,根據(jù)本公開的實(shí)施例“將動(dòng)作區(qū)域設(shè)置在面部區(qū)域附近”包括與面部區(qū)域FA 接觸地設(shè)置動(dòng)作區(qū)域MA和在靠近面部區(qū)域FA附近的位置處設(shè)置動(dòng)作區(qū)域MA如上所述,例如,信息處理設(shè)備100基于所標(biāo)識(shí)的面部區(qū)域FA的寬度w和高度h 來設(shè)置動(dòng)作區(qū)域MA。注意,根據(jù)本公開的實(shí)施例的信息處理設(shè)備100的動(dòng)作區(qū)域MA的設(shè)置處理不限于上述。例如,信息處理設(shè)備100可以對(duì)成像圖像中的面部區(qū)域FA內(nèi)的圖像進(jìn)行面部識(shí)別處理,以評(píng)估關(guān)于該面部區(qū)域FA的諸如用戶的年齡和性別等的用戶屬性,并基于評(píng)估結(jié)果來調(diào)整動(dòng)作區(qū)域MA的區(qū)域大小和位置。通過如上所述基于評(píng)估結(jié)果來調(diào)整動(dòng)作區(qū)域MA的區(qū)域大小和位置,可以設(shè)置與用戶的年齡和性別對(duì)應(yīng)的動(dòng)作區(qū)域MA,比如設(shè)置圖2中所示的動(dòng)作區(qū)域MA的位置以便例如對(duì)于年紀(jì)大的用戶更低。注意,雖然信息處理設(shè)備100通過從面部區(qū)域FA提取諸如結(jié)構(gòu)、皺紋、松弛皮膚等的屬性信息并分析它來評(píng)估用戶屬性,但是根據(jù)本公開的實(shí)施例的用于評(píng)估用戶屬性的方法不限于上述。例如,信息處理設(shè)備10可以使用能夠評(píng)估對(duì)應(yīng)于面部區(qū)域FA的用戶的諸如年齡和性別等的用戶屬性的可選技術(shù)來評(píng)估用戶屬性。此外,信息處理設(shè)備100可以通過對(duì)面部區(qū)域FA中的圖像進(jìn)行面部識(shí)別處理來提取指示用戶的面部的特征的面部信息,并通過基于提取的面部信息來標(biāo)識(shí)對(duì)應(yīng)于面部區(qū)域 FA的用戶來調(diào)整動(dòng)作區(qū)域MA。更具體地,在已經(jīng)基于面部信息標(biāo)識(shí)了用戶的情況下,信息處理設(shè)備100為所標(biāo)識(shí)的用戶設(shè)置動(dòng)作區(qū)域MA。與為用戶設(shè)置動(dòng)作區(qū)域MA有關(guān)的信息的例子包括其中記錄了面部信息和與動(dòng)作區(qū)域MA的調(diào)整有關(guān)的信息的數(shù)據(jù)庫。此外,與設(shè)置用戶的動(dòng)作區(qū)域MA有關(guān)的信息可以被包括在稍后描述的在個(gè)體檢測(cè)信息中。信息處理設(shè)備100可以通過進(jìn)行例如面部區(qū)域FA的圖像處理來提取用戶的面部特征(例如結(jié)構(gòu)信息、 指示眼睛、鼻子和嘴巴的位置關(guān)系的信息等),來獲得指示已經(jīng)提取的用戶的面部的特征的面部信息。此外,信息處理設(shè)備100例如基于用戶操作獲得諸如動(dòng)作區(qū)域MA的區(qū)域大小的調(diào)整量、動(dòng)作區(qū)域MA的位置調(diào)整量等的與動(dòng)作區(qū)域MA的調(diào)整有關(guān)的信息。注意,與調(diào)整動(dòng)作區(qū)域MA有關(guān)的信息可以包括指示設(shè)置的動(dòng)作區(qū)域MA的數(shù)量的信息。通過如上所述為用戶設(shè)置動(dòng)作區(qū)域MA,可以設(shè)置用戶自己可以調(diào)整的動(dòng)作區(qū)域MA,因此信息處理設(shè)備100還可以增加用戶的自由度,并改善方便性。例如,通過進(jìn)行諸如以上所述的處理,信息處理設(shè)備100基于面部區(qū)域FA在面部區(qū)域FA附近設(shè)置動(dòng)作區(qū)域MA?,F(xiàn)在,如上所述,信息處理設(shè)備100處理的成像圖像是運(yùn)動(dòng)圖像,因此面部區(qū)域在某幀中標(biāo)識(shí)的成像圖像中的位置可能在下一幀中改變。信息處理設(shè)備100在每次通過以上處理(1)標(biāo)識(shí)面部區(qū)域FA時(shí)基于面部區(qū)域FA進(jìn)行動(dòng)作區(qū)域MA的設(shè)置,但是根據(jù)本公開的實(shí)施例的信息處理設(shè)備100的動(dòng)作區(qū)域設(shè)置處理不限于以上所述。 例如,信息處理設(shè)備100可以檢測(cè)當(dāng)前幀中的面部區(qū)域FA關(guān)于先前幀中的面部區(qū)域FA的移動(dòng)量,并在移動(dòng)量等于或小于預(yù)定閾值(或小于閾值)的情況下,設(shè)置在先前幀中設(shè)置的動(dòng)作區(qū)域MA以便與該移動(dòng)量對(duì)應(yīng)地移動(dòng)。不用說,先前幀中的面部區(qū)域FA不限于從當(dāng)前幀退回的一幀(例如,在要每隔預(yù)定幀進(jìn)行處理(1)的情況下,在預(yù)定幀之前的幀是先前幀)。(3)動(dòng)作確定處理在以上處理動(dòng)作區(qū)域設(shè)置處理)中設(shè)置動(dòng)作區(qū)域MA時(shí),信息處理設(shè)備100 基于成像圖像和參考檢測(cè)信息或個(gè)體檢測(cè)信息來確定用戶已經(jīng)在動(dòng)作區(qū)域MA中進(jìn)行預(yù)定動(dòng)作?,F(xiàn)在,根據(jù)本公開的實(shí)施例的參考檢測(cè)信息是用作用戶(檢測(cè)的對(duì)象)的預(yù)定動(dòng)作的檢測(cè)的參考的數(shù)據(jù)。在此,信息處理設(shè)備100通過在信息處理設(shè)備100的制造者制造時(shí)將參考檢測(cè)信息記錄在信息處理設(shè)備100中來預(yù)先存儲(chǔ)參考檢測(cè)信息,但是信息處理設(shè)備100不限于預(yù)先存儲(chǔ)參考檢測(cè)信息的配置。例如,信息處理設(shè)備100可以從外部設(shè)備獲得由諸如服務(wù)器等的外部設(shè)備生成的參考檢測(cè)信息。參考檢測(cè)信息的例子包括數(shù)據(jù)和數(shù)據(jù)庫,在其中預(yù)定動(dòng)作和用于檢測(cè)周期性動(dòng)作的周期性分量信息相關(guān)聯(lián)。此外,根據(jù)本公開的實(shí)施例的周期性分量信息的例子包括在成像圖像中的亮度改變的頻率信息,但根據(jù)本公開的實(shí)施例的周期性分量信息不限于上述。注意,根據(jù)本公開的實(shí)施例的參考檢測(cè)信息不限于上述,且可以是數(shù)據(jù)和數(shù)據(jù)庫,在其中,預(yù)定動(dòng)作和用于區(qū)分不是周期性動(dòng)作的用戶的姿勢(shì)的信息(例如,用于確定用戶的手的形狀是預(yù)定形狀的數(shù)據(jù))相關(guān)聯(lián)。此后,將參考其中參考檢測(cè)信息是預(yù)定動(dòng)作和周期性分量信息對(duì)于每個(gè)預(yù)定動(dòng)作相關(guān)聯(lián)并被記錄的數(shù)據(jù)庫的例子進(jìn)行描述。注意,盡管根據(jù)本公開的實(shí)施例的數(shù)據(jù)庫的例子包括關(guān)系數(shù)據(jù)庫,但根據(jù)本公開的實(shí)施例的數(shù)據(jù)庫不限于上述。此外,根據(jù)本公開的實(shí)施例的個(gè)體檢測(cè)信息是用作對(duì)具體用戶進(jìn)行的預(yù)定動(dòng)作的檢測(cè)的參考的數(shù)據(jù)。例如,通過學(xué)習(xí)單元(稍后描述)生成和更新個(gè)體檢測(cè)信息。注意,根據(jù)本公開的實(shí)施例的個(gè)體檢測(cè)信息可以由諸如服務(wù)器的外部設(shè)備生成,信息處理設(shè)備100 從外部設(shè)備獲得該個(gè)體檢測(cè)信息?,F(xiàn)在,個(gè)體檢測(cè)信息的例子包括預(yù)定動(dòng)作、數(shù)據(jù)和數(shù)據(jù)庫,在該數(shù)據(jù)庫中用于檢測(cè)用戶的周期性動(dòng)作的周期性分量信息和指示用戶的面部特征的面部信息(用于標(biāo)識(shí)用戶的信息)相關(guān)聯(lián)。注意,根據(jù)本公開的實(shí)施例的個(gè)體檢測(cè)信息不限于上述,且可以是數(shù)據(jù)和其中預(yù)定動(dòng)作、用于區(qū)分不是周期性動(dòng)作的用戶姿勢(shì)的信息和面部信息相關(guān)聯(lián)的數(shù)據(jù)庫。此后,將參考其中參考檢測(cè)信息是預(yù)定動(dòng)作、周期性分量信息和面部信息對(duì)于每個(gè)預(yù)定動(dòng)作相關(guān)聯(lián)并被記錄的數(shù)據(jù)庫的例子進(jìn)行描述。(3-1)動(dòng)作確定處理的第一例子
將描述基于參考檢測(cè)信息的處理作為根據(jù)本公開的實(shí)施例的動(dòng)作確定處理的第一例子。信息處理設(shè)備100在基于成像圖像設(shè)置的動(dòng)作區(qū)域MA中檢測(cè)周期性分量。然后, 信息處理設(shè)備100基于在動(dòng)作區(qū)域MA處的檢測(cè)結(jié)果和參考檢測(cè)信息的周期性分量信息來確定是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作?,F(xiàn)在,信息處理設(shè)備100使用例如Fischer的方法等,通過分析動(dòng)作區(qū)域MA內(nèi)的具體點(diǎn)(具體像素)的特性來確定是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作,但根據(jù)本公開的實(shí)施例的確定方法不限于上述。此外,例如,雖然信息處理設(shè)備100使用每預(yù)定時(shí)間的成像圖像或者按預(yù)定數(shù)量幀的增量的成像圖像來檢測(cè)動(dòng)作區(qū)域MA中的周期性分量, 但根據(jù)本公開的實(shí)施例的在動(dòng)作區(qū)域MA中的周期性分量的檢測(cè)方法不限于上述。(3-2)動(dòng)作確定處理的第二例子接下來,將描述選擇性地使用參考檢測(cè)信息或個(gè)體檢測(cè)信息的處理,作為根據(jù)本公開的實(shí)施例的動(dòng)作確定處理的第二例子。信息處理設(shè)備100從由上述處理(1)標(biāo)識(shí)的面部區(qū)域FA提取面部信息。此外,信息處理設(shè)備100基于提取的面部信息和個(gè)體檢測(cè)信息, 來確定是否存在與從個(gè)體檢測(cè)信息提取的面部信息對(duì)應(yīng)的面部信息?,F(xiàn)在,例如,在根據(jù)本公開的實(shí)施例的面部信息是諸如結(jié)構(gòu)信息和指示眼睛、鼻子和嘴巴的位置關(guān)系的信息的多個(gè)信息的組的情況下,信息處理設(shè)備100在個(gè)體檢測(cè)信息中存在與提取的面部信息匹配的面部信息的情況下確定存在與提取的面部信息對(duì)應(yīng)的面部信息。注意,關(guān)于在根據(jù)本公開的實(shí)施例的信息處理設(shè)備100處進(jìn)行的在個(gè)體檢測(cè)信息中是否存在與提取的面部信息對(duì)應(yīng)的面部信息的確定方法不限于以上所述。例如,信息處理設(shè)備100可以在存在與關(guān)于其已經(jīng)提取了預(yù)定數(shù)量或更多組的多個(gè)信息的面部信息匹配的情況下確定存在與提取的面部信息對(duì)應(yīng)的面部信息。在確定了存在對(duì)應(yīng)于提取的面部信息的個(gè)體檢測(cè)信息的情況下,信息處理設(shè)備 100基于動(dòng)作區(qū)域MA中的周期性分量的檢測(cè)結(jié)果和在個(gè)體檢測(cè)信息中包括的周期性分量信息,來確定是否進(jìn)行了與周期性分量信息相關(guān)的預(yù)定動(dòng)作。此外,在不確定存在對(duì)應(yīng)于提取的面部信息的個(gè)體檢測(cè)信息的情況下,信息處理設(shè)備100以與通過上述動(dòng)作確定處理的第一例子相同的方式,基于檢測(cè)結(jié)果和參考檢測(cè)信息的周期性分量信息,來確定是否進(jìn)行了預(yù)定動(dòng)作。例如,如上述,信息處理設(shè)備100基于成像圖像和參考檢測(cè)信息或個(gè)體檢測(cè)信息來確定用戶已經(jīng)在動(dòng)作區(qū)域MA中進(jìn)行了預(yù)定動(dòng)作,例如如上所述。注意,在根據(jù)本公開的實(shí)施例的信息處理設(shè)備100處的動(dòng)作確定處理不限于上述。例如,在使用不是周期性分量的用于區(qū)分用戶的姿勢(shì)的信息來進(jìn)行確定的情況下,信息處理設(shè)備100可以基于動(dòng)作區(qū)域 MA中的用戶的手的形狀是否是參考檢測(cè)信息或個(gè)體檢測(cè)信息中的用于區(qū)分姿勢(shì)的信息中規(guī)定的預(yù)定形狀,來確定用戶已經(jīng)在動(dòng)作區(qū)域MA中進(jìn)行預(yù)定動(dòng)作。此外,在確定已經(jīng)進(jìn)行了預(yù)定動(dòng)作的情況下,信息處理設(shè)備100還可以更新個(gè)體檢測(cè)信息(所謂的學(xué)習(xí))。更具體地,例如,在確定進(jìn)行了預(yù)定動(dòng)作的情況下,信息處理設(shè)備100采用基于成像圖像檢測(cè)的周期性分量信息,作為與確定的預(yù)定動(dòng)作和從成像圖像提取的面部信息對(duì)應(yīng)的個(gè)體檢測(cè)信息中的周期性分量信息。此外,在確定進(jìn)行了預(yù)定動(dòng)作的情況下,信息處理設(shè)備100可以采用表示已經(jīng)檢測(cè)的用戶的手的形狀的信息(S卩,關(guān)節(jié)的位置的信息等),作為在個(gè)體檢測(cè)信息中的用于區(qū)分姿勢(shì)的信息。通過如上述更新個(gè)體檢測(cè)信息,信息處理設(shè)備100可以進(jìn)一步改善從個(gè)體檢測(cè)信息確定其預(yù)定動(dòng)作的具體用戶的預(yù)定動(dòng)作的確定精確度,因此進(jìn)一步降低錯(cuò)誤確定的可能性?,F(xiàn)在,信息處理設(shè)備100例如在每次確定已經(jīng)進(jìn)行了預(yù)定動(dòng)作時(shí)進(jìn)行與個(gè)體檢測(cè)信息的更新有關(guān)的上述處理(與學(xué)習(xí)有關(guān)的處理),但在信息處理設(shè)備100處的處理不限于上述。例如,信息處理設(shè)備100可以基于用戶操作,選擇性地進(jìn)行與更新個(gè)體檢測(cè)信息有關(guān)的處理(與學(xué)習(xí)有關(guān)的處理)。此外,在使用周期性分量信息確定是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作的情況下,例如,信息處理設(shè)備100在每次在動(dòng)作區(qū)域MA中檢測(cè)到周期性分量時(shí)確定是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作, 但根據(jù)本公開的實(shí)施例的確定處理不限于上述。例如,信息處理設(shè)備100可以檢測(cè)在基于每隔預(yù)定時(shí)間的成像圖像或者以預(yù)定數(shù)量幀的增量的成像圖像設(shè)置的動(dòng)作區(qū)域MA中是否存在運(yùn)動(dòng)體,并選擇性地確定在檢測(cè)到運(yùn)動(dòng)體的情況下是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作?,F(xiàn)在,當(dāng)使用周期性分量信息確定是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作時(shí),在動(dòng)作區(qū)域MA中沒有檢測(cè)到運(yùn)動(dòng)體的情況下,用戶還未在動(dòng)作區(qū)域MA中進(jìn)行動(dòng)作的可能性高。從而,如上所述,通過在檢測(cè)到運(yùn)動(dòng)體的情況下選擇性地檢測(cè)是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作,信息處理設(shè)備100可以降低信息處理設(shè)備100上的計(jì)算負(fù)荷,同時(shí)防止對(duì)用戶的預(yù)定動(dòng)作的錯(cuò)過檢測(cè)和錯(cuò)誤檢測(cè)。(4)執(zhí)行處理在以上處理(3)(動(dòng)作確定處理)中確定已經(jīng)進(jìn)行了預(yù)定動(dòng)作時(shí),信息處理設(shè)備 100進(jìn)行與確定的預(yù)定動(dòng)作對(duì)應(yīng)的處理。更具體地,信息處理設(shè)備100存儲(chǔ)例如其中已經(jīng)以相關(guān)聯(lián)的方式記錄了預(yù)定動(dòng)作和要執(zhí)行的處理的處理信息,并基于以上處理(3)的處理結(jié)果和該處理信息進(jìn)行與在以上處理(3)中的確定的預(yù)定動(dòng)作相關(guān)的處理。注意,根據(jù)本公開的實(shí)施例的處理信息不限于以上所述。例如,信息處理設(shè)備100可以存儲(chǔ)其中以相關(guān)聯(lián)的方式記錄了指示動(dòng)作區(qū)域MA 的信息(例如區(qū)域號(hào)等)、預(yù)定動(dòng)作和要執(zhí)行的處理的處理信息。在以上所述的情況下,信息處理設(shè)備100可以進(jìn)行與對(duì)于每個(gè)動(dòng)作區(qū)域MA的預(yù)定動(dòng)作對(duì)應(yīng)的處理,其中關(guān)于該每個(gè)動(dòng)作區(qū)域MA已經(jīng)確定已經(jīng)進(jìn)行了預(yù)定動(dòng)作。此外,根據(jù)本公開的實(shí)施例的處理信息可以是例如對(duì)于每個(gè)預(yù)定動(dòng)作的數(shù)據(jù)或者可以是其中記錄了與多個(gè)預(yù)定動(dòng)作有關(guān)的信息的數(shù)據(jù)庫。此外,盡管信息處理設(shè)備100進(jìn)行的與預(yù)定動(dòng)作對(duì)應(yīng)的處理的例子包括與設(shè)備本是具有的功能有關(guān)的處理,但是與根據(jù)本公開的實(shí)施例的信息處理設(shè)備100進(jìn)行的預(yù)定動(dòng)作對(duì)應(yīng)的處理不限于以上。例如,作為與預(yù)定動(dòng)作對(duì)應(yīng)的處理,信息處理設(shè)備100可以將用于致使外部設(shè)備進(jìn)行與預(yù)定動(dòng)作對(duì)應(yīng)的處理的處理執(zhí)行命令經(jīng)由網(wǎng)絡(luò)(或直接)傳輸?shù)酵獠吭O(shè)備。因此,信息處理設(shè)備100可以致使外部設(shè)備執(zhí)行與用戶的預(yù)定動(dòng)作對(duì)應(yīng)的處理。信息處理設(shè)備100進(jìn)行以上所述的處理(1)(面部區(qū)域檢測(cè)處理)到處理(4)(執(zhí)行處理),作為與可操作性改善方法有關(guān)的第一處理,由此確定用戶進(jìn)行了預(yù)定動(dòng)作,且進(jìn)行對(duì)應(yīng)于確定的預(yù)定動(dòng)作的處理。現(xiàn)在,信息處理設(shè)備100將動(dòng)作區(qū)域MA設(shè)置在基于成像圖像標(biāo)識(shí)的面部區(qū)域FA 附近,在設(shè)置的動(dòng)作區(qū)域MA中檢測(cè)(確定)用戶的預(yù)定動(dòng)作,并進(jìn)行對(duì)應(yīng)于所檢測(cè)的預(yù)定動(dòng)作的處理。通過如上所述設(shè)置動(dòng)作區(qū)域MA,信息處理設(shè)備100可以通過關(guān)于成像圖像的部分區(qū)域進(jìn)行圖像處理,而不是像根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備那樣對(duì)整個(gè)成像圖像進(jìn)行圖像處理,來檢測(cè)用戶的預(yù)定動(dòng)作。因此,與根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備相比,信息處理
13設(shè)備100可以降低與對(duì)用戶的預(yù)定動(dòng)作的檢測(cè)有關(guān)的計(jì)算負(fù)擔(dān),因此,通過信息處理設(shè)備 100,可以防止可能伴隨根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備而發(fā)生的這種不期望的情形的出現(xiàn)。 因此,信息處理設(shè)備100可以防止在使用現(xiàn)有技術(shù)的情況下可能發(fā)生的用戶便利性方面的變差,并且還可以改善用戶可操作性。1-2.可操作性改善方法的第二處理信息處理設(shè)備100可以通過進(jìn)行上述可操作性改善方法的第一處理來改善用戶可操作性。但是,可操作性改善方法的處理不限于上述。例如,如上所述,信息處理設(shè)備100 可以進(jìn)行與在已經(jīng)進(jìn)行了通知處理在此之上確定已持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的情況下確定的預(yù)定動(dòng)作對(duì)應(yīng)的處理。因此,接下來,將描述在進(jìn)行通知處理的情況下的處理作為根據(jù)本公開的實(shí)施例的可操作性改善方法的第二處理。信息處理設(shè)備100進(jìn)行以下處理 (I)到處理(V),由此防止進(jìn)行由于錯(cuò)誤檢測(cè)而導(dǎo)致的用戶不意圖的處理,且進(jìn)一步改善用戶便利性和可操作性。(I)面部區(qū)域檢測(cè)處理以與上述處理(1)(面部區(qū)域檢測(cè)處理)相同的方式,信息處理設(shè)備100從成像圖像中檢測(cè)用戶的面部,且確定面部區(qū)域FA。(II)動(dòng)作區(qū)域設(shè)置處理在上述處理(1)(面部區(qū)域檢測(cè)處理)中檢測(cè)到面部區(qū)域時(shí),信息處理設(shè)備100以與上述處理O)(動(dòng)作區(qū)域設(shè)置處理)相同的方式,基于面部區(qū)域FA將動(dòng)作區(qū)域MA設(shè)置在面部區(qū)域FA附近。(III)動(dòng)作確定處理在上述處理(II)(動(dòng)作區(qū)域檢測(cè)處理)中設(shè)置了動(dòng)作區(qū)域MA時(shí),信息處理設(shè)備 100以與上述處理(3)(動(dòng)作確定處理)相同的方式,基于成像圖像和參考檢測(cè)信息或個(gè)體檢測(cè)信息來確定用戶已在在動(dòng)作區(qū)域MA中進(jìn)行了預(yù)定動(dòng)作。此外,信息處理設(shè)備100中確定從確定已經(jīng)進(jìn)行了預(yù)定動(dòng)作開始是否已經(jīng)持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段?,F(xiàn)在,從已經(jīng)進(jìn)行的確定開始的預(yù)定時(shí)間段的例子包括用于進(jìn)行稍后所述的處理(IV)的時(shí)間,但是根據(jù)本公開的實(shí)施例的從已經(jīng)進(jìn)行的確定開始的預(yù)定時(shí)間段不限于上述。例如,根據(jù)本公開的實(shí)施例的從已經(jīng)進(jìn)行的確定開始的預(yù)定時(shí)間段可以由信息處理設(shè)備100的制造者等任意設(shè)置,比如例如用于進(jìn)行稍后所述的處理(IV)的時(shí)間加上余地(leeway)時(shí)間的時(shí)間。(IV)通知處理在上述處理(III)(動(dòng)作確定處理)中確定在動(dòng)作區(qū)域MA中進(jìn)行了預(yù)定動(dòng)作時(shí), 信息處理設(shè)備100進(jìn)行通知處理。向用戶的通知的具體例子現(xiàn)在,將描述通過已經(jīng)進(jìn)行的根據(jù)本公開的實(shí)施例的通知處理向用戶通知的具體例子。以下,將參考進(jìn)行通知處理用于視覺上通知用戶的情況的例子進(jìn)行描述。圖4是圖示通過進(jìn)行根據(jù)本公開的實(shí)施例的通知處理而向用戶通知的例子的說明圖。在此,圖4圖示了在顯示屏幕上顯示成像圖像(例如,諸如顯示設(shè)備300的外部設(shè)備的或信息處理設(shè)備100具有的顯示單元(稍后描述)的顯示屏幕)并通過改變顯示的成像圖像來進(jìn)行已確定進(jìn)行了預(yù)定動(dòng)作的視覺通知的例子,如圖4中的B所示。也就是說,圖
14圖示了通過改變?cè)陲@示屏幕上顯示的圖像來視覺上通知信息處理設(shè)備100已確定進(jìn)行了預(yù)定動(dòng)作的情況的例子。圖5是圖示通過進(jìn)行根據(jù)本公開的實(shí)施例的通知處理而改變成像圖像的例子的說明圖。圖5圖示由信息處理設(shè)備100在成像圖像的動(dòng)作區(qū)域MA1(關(guān)于其已確定用戶進(jìn)行了預(yù)定動(dòng)作的動(dòng)作區(qū)域)上疊加通知對(duì)象來改變成像圖像的例子。在此,在圖5中,圖示了其中信息處理設(shè)備100將多個(gè)閃光星星疊加在成像圖像上的例子,但根據(jù)本公開的實(shí)施例的通知對(duì)象不限于上述。用戶通過看到在顯示屏幕上顯示的成像圖像的改變可以在視覺上理解信息處理設(shè)備100已確定用戶在動(dòng)作區(qū)域MA中進(jìn)行了預(yù)定動(dòng)作。注意,由于進(jìn)行根據(jù)本公開的實(shí)施例的通知處理而引起的成像圖像中的改變不限于被疊加的圖5所示的通知對(duì)象。圖6是圖示由于進(jìn)行根據(jù)本公開的實(shí)施例的通知處理而改變成像圖像的另一例子的說明圖。如圖6所示,可以通過向與如下動(dòng)作區(qū)域?qū)?yīng)的面部區(qū)域FA進(jìn)行使用圓周遮蔽(round mask)等的高亮處理來改變成像圖像關(guān)于該動(dòng)作區(qū)域, 已經(jīng)確定用戶在成像圖像中進(jìn)行了預(yù)定動(dòng)作。同樣在該情況下,用戶通過看到在顯示屏幕上顯示的成像圖像中的改變,可以在視覺上理解信息處理設(shè)備100已經(jīng)確定用戶在動(dòng)作區(qū)域MA中進(jìn)行了預(yù)定動(dòng)作。例如,信息處理設(shè)備100通過如上所述改變?cè)陲@示屏幕上顯示的成像圖像來在視覺上通知已確定進(jìn)行了預(yù)定動(dòng)作。因此,用戶可以通過停止他/她自己的動(dòng)作,來取消與在信息處理設(shè)備100處的動(dòng)作對(duì)應(yīng)的處理的執(zhí)行,因此,信息處理設(shè)備100可以防止執(zhí)行由于錯(cuò)誤檢測(cè)而導(dǎo)致的用戶不意圖的處理,且可以進(jìn)一步改善用戶便利性和可操作性。注意,通過進(jìn)行根據(jù)本公開的實(shí)施例的通知處理的向用戶的通知不限于如圖4到 6所示的改變?cè)陲@示屏幕上顯示的成像圖像。圖7和8是圖示通過進(jìn)行根據(jù)本公開的實(shí)施例的通知處理對(duì)用戶的通知的其他例子的說明圖。如圖7中的C所指示,信息處理設(shè)備100可以通過將圖標(biāo)疊加在諸如例如圖示內(nèi)容的圖像的在顯示屏幕上顯示的圖像來改變圖像。注意,根據(jù)本公開的實(shí)施例的用于改變?cè)陲@示屏幕上顯示的圖像的方法不局限于圖7所示的疊加圖標(biāo)。例如,信息處理設(shè)備100 可以在顯示屏幕上顯示的圖像上疊加各種對(duì)象,比如顯示從檢測(cè)到用戶的預(yù)定動(dòng)作直到開始對(duì)應(yīng)于預(yù)定動(dòng)作的處理的階段中的時(shí)間的指示符等。此外,信息處理設(shè)備100可以在顯示屏幕上的顯示指示內(nèi)容的圖像的顯示區(qū)域之外顯示諸如圖標(biāo)或指示符的對(duì)象,而不在顯示屏幕上顯示的圖像上疊加對(duì)象。同樣在該情況下,用戶通過看到在顯示屏幕上顯示的成像圖像的改變可以在視覺上理解信息處理設(shè)備100已確定用戶在動(dòng)作區(qū)域MA中進(jìn)行了預(yù)定動(dòng)作。此外,如圖8中的D所指示,可以通過選擇性地點(diǎn)亮(或熄滅)在顯示屏幕的外側(cè)部分上提供的諸如LED(發(fā)光二極管)的發(fā)光設(shè)備來做出已確定進(jìn)行了預(yù)定動(dòng)作的視覺通知。此外,信息處理設(shè)備100可以通過改變從發(fā)光設(shè)備發(fā)出的光的顏色來做出已確定進(jìn)行了預(yù)定動(dòng)作的視覺通知。如上所述,通過信息處理設(shè)備100改變作為諸如顯示設(shè)備300的外部設(shè)備或信息處理設(shè)備100具有的顯示單元(稍后描述)的發(fā)光設(shè)備的點(diǎn)亮狀態(tài),用戶可以在視覺上理解信息處理設(shè)備100已確定用戶在動(dòng)作區(qū)域MA中進(jìn)行了預(yù)定動(dòng)作。例如,如上所述,信息處理設(shè)備100可以通過改變?cè)陲@示屏幕上顯示的圖像或改變發(fā)光設(shè)備的點(diǎn)亮狀態(tài),在視覺上通知已確定進(jìn)行了預(yù)定動(dòng)作。注意,雖然在以上描述中分別例示了改變?cè)陲@示屏幕上顯示的圖像(包括成像圖像)和改變發(fā)光設(shè)備的點(diǎn)亮狀態(tài),但不用說,根據(jù)本公開的實(shí)施例的信息處理設(shè)備100可以通過組合它們來進(jìn)行視覺通知。信息處理設(shè)備100如上所述通過進(jìn)行通知處理來在視覺上通知用戶(或向外部設(shè)備通知)信息處理設(shè)備100已確定用戶在動(dòng)作區(qū)域MA中進(jìn)行了預(yù)定動(dòng)作。此外,在從已確定進(jìn)行了預(yù)定動(dòng)作起的預(yù)定時(shí)間段開始持續(xù)進(jìn)行預(yù)定動(dòng)作的情況下,信息處理設(shè)備100進(jìn)行與稍后描述的處理(V)(執(zhí)行處理)中的預(yù)定動(dòng)作對(duì)應(yīng)的處理。因此,用戶可以通過停止他/她自己的動(dòng)作來取消與在信息處理設(shè)備100處的動(dòng)作對(duì)應(yīng)的處理的執(zhí)行,因此,信息處理設(shè)備100可以防止執(zhí)行由于錯(cuò)誤檢測(cè)而導(dǎo)致的用戶不意圖的處理,且可以進(jìn)一步改善用戶便利性和可操作性。注意,雖然以上例示了信息處理設(shè)備100通過進(jìn)行通知處理來視覺上通知用戶的例子,但是不用說,即使在通過其他方法進(jìn)行通知的情況下、比如信息處理設(shè)備100通過進(jìn)行通知處理在聽覺上進(jìn)行通知的情況下,可以獲得相同的優(yōu)點(diǎn)。(V)執(zhí)行處理在以上處理(III)(動(dòng)作確定處理)中確定自從確定進(jìn)行了預(yù)定動(dòng)作起已持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段時(shí),信息處理設(shè)備100進(jìn)行對(duì)應(yīng)于確定的預(yù)定動(dòng)作的處理?,F(xiàn)在, 信息處理設(shè)備100以與上述處理(執(zhí)行處理)相同的方式進(jìn)行對(duì)應(yīng)于確定的預(yù)定動(dòng)作的處理。作為與可操作性改善方法有關(guān)的第二處理,信息處理設(shè)備100進(jìn)行上述處理(I) (面部區(qū)域檢測(cè)處理)到處理(V)(執(zhí)行處理),由此確定用戶進(jìn)行了預(yù)定動(dòng)作,且進(jìn)行對(duì)應(yīng)于該預(yù)定動(dòng)作的處理?,F(xiàn)在,與可操作性改善方法有關(guān)的第二處理基本上具有與第一可操作性改善方法有關(guān)的第一處理相同的處理。因此,以與進(jìn)行與第一可操作性改善方法有關(guān)的處理相同的方式,通過進(jìn)行與可操作性改善方法有關(guān)的第二處理,信息處理設(shè)備100防止在使用現(xiàn)有技術(shù)的情況下可能發(fā)生的用戶便利性的變差,而且可以提高用戶可操作性的改善。此外,通過與可操作性改善方法有關(guān)的第二處理,信息處理設(shè)備100通過處理 (IV)通知用戶(或向外部設(shè)備通知)信息處理設(shè)備100已確定用戶在動(dòng)作區(qū)域MA中進(jìn)行了預(yù)定動(dòng)作。此外,在從已確定進(jìn)行了預(yù)定動(dòng)作起的預(yù)定時(shí)間段開始持續(xù)進(jìn)行預(yù)定動(dòng)作的情況下,信息處理設(shè)備100在處理(V)(執(zhí)行處理)中進(jìn)行對(duì)應(yīng)于預(yù)定動(dòng)作的處理。因此, 用戶可以通過停止他/她自己的動(dòng)作來取消在信息處理設(shè)備100處的對(duì)應(yīng)于該動(dòng)作的處理的執(zhí)行,因此,用戶可以通過他/她自己的動(dòng)作來控制在信息處理設(shè)備100處的對(duì)應(yīng)于預(yù)定動(dòng)作的處理的執(zhí)行。因此,信息處理設(shè)備100可以防止執(zhí)行由于錯(cuò)誤檢測(cè)而導(dǎo)致的用戶不意圖的處理,且可以進(jìn)一步改善用戶便利性和可操作性。與可操作性改善方法有關(guān)的處理的具體例子接下來,將描述上述根據(jù)本公開的實(shí)施例的用于實(shí)現(xiàn)可操作性改善方法的處理的例子。1-1-1.與可操作性改善方法有關(guān)的第一處理的具體例子圖9是圖示在根據(jù)本公開的實(shí)施例的信息處理設(shè)備處的與可操作性改善方式有關(guān)的處理的例子的流程圖,且圖示對(duì)應(yīng)于與可操作性改變方法一個(gè)的第一處理的處理的例子。以下,將參考在信息處理設(shè)備100基于關(guān)于成像圖像設(shè)置的動(dòng)作區(qū)域MA中的周期性分量來確定用戶進(jìn)行的預(yù)定動(dòng)作的情況下的處理的例子來描述。
信息處理設(shè)備100確定是否進(jìn)行用戶的動(dòng)作檢測(cè)(S100)。現(xiàn)在,在提供了基于用戶操作等選擇性地在例如其中信息處理設(shè)備100進(jìn)行動(dòng)作檢測(cè)的第一處理模式和其中不進(jìn)行動(dòng)作檢測(cè)的第二處理模式之間切換的功能的情況下,在步驟Sioo中的處理等效于確定處理模式是否是第一處理模式。也就是說,在信息處理設(shè)備100不具有用于在第一處理模式和第二處理模式之間切換的功能的情況下,信息處理設(shè)備100不需要進(jìn)行步驟SlOO的處理。在步驟SlOO中沒有確定進(jìn)行用戶的動(dòng)作檢測(cè)的情況下,信息處理設(shè)備100結(jié)束與可操作性改善方法有關(guān)的處理。注意,圖9中的與可操作性改善方法有關(guān)的處理不是一旦結(jié)束就不再次進(jìn)行的類型的處理,而是信息處理設(shè)備100可以周期性地/非周期性地重復(fù)圖9所示的與第一可操作性改善方法一個(gè)的處理,即使該處理暫時(shí)結(jié)束。此外,在步驟SlOO中確定進(jìn)行用戶的動(dòng)作檢測(cè)的情況下,信息處理設(shè)備100基于輸入的成像圖像來進(jìn)行面部檢測(cè),且標(biāo)識(shí)面部區(qū)域FA(S1(^)?,F(xiàn)在,在步驟S102中的處理對(duì)應(yīng)于上述處理(1)(面部區(qū)域檢測(cè)處理)。此外,信息處理設(shè)備100通過檢測(cè)諸如例如用戶的眼睛、鼻子、嘴巴、結(jié)構(gòu)等的特征點(diǎn)并檢測(cè)與面部亮度分布和結(jié)構(gòu)樣式類似的區(qū)域來標(biāo)識(shí)面部區(qū)域FA ;但是,用于標(biāo)識(shí)面部區(qū)域FA的方法不限于上述。此外,在從成像圖像中標(biāo)識(shí)多個(gè)面部區(qū)域FA的情況下,比如在成像圖像中存在多個(gè)用戶的情況下,信息處理設(shè)備100對(duì)于所標(biāo)識(shí)的多個(gè)面部區(qū)域FA的每個(gè)進(jìn)行稍后描述的步驟S104到Sl 12的處理。在進(jìn)行步驟S102的處理后,信息處理設(shè)備100確定是否標(biāo)識(shí)了面部區(qū)域 FA(S104)。在步驟S104中沒有確定標(biāo)識(shí)了面部區(qū)域FA的情況下,信息處理設(shè)備100從步驟SlOO重復(fù)該處理。此外,在步驟S104中確定標(biāo)識(shí)了面部區(qū)域FA的情況下,信息處理設(shè)備100基于面部區(qū)域FA來設(shè)置動(dòng)作區(qū)域MA(S106)?,F(xiàn)在,在步驟S106中的處理對(duì)應(yīng)于上述處理(2)(動(dòng)作區(qū)域設(shè)置處理)。此外,信息處理設(shè)備100將動(dòng)作區(qū)域MA設(shè)置在面部區(qū)域FA附近,如圖 1和2所示,但是,由信息處理設(shè)備100設(shè)置的動(dòng)作區(qū)域MA不限于圖1和2所示的例子。在步驟S106中設(shè)置(或重設(shè))動(dòng)作區(qū)域MA后,信息處理設(shè)備100在設(shè)置的動(dòng)作區(qū)域MA中檢測(cè)預(yù)定動(dòng)作(S108)。然后,信息處理設(shè)備100確定是否在設(shè)置的動(dòng)作區(qū)域MA 內(nèi)檢測(cè)到預(yù)定動(dòng)作(SllO)。在此,在步驟S108和SllO的處理對(duì)應(yīng)于上述處理(3)(動(dòng)作確定處理)。更具體地,在步驟S108中,例如,信息處理設(shè)備100基于在基于成像圖像設(shè)置的動(dòng)作區(qū)域MA中的周期性分量的檢測(cè)結(jié)果和參考檢測(cè)信息的周期性分量信息,檢測(cè)是否進(jìn)行了預(yù)定動(dòng)作(等效于上述動(dòng)作確定處理的第一例子)?,F(xiàn)在,例如,參考檢測(cè)信息被存儲(chǔ)在信息處理設(shè)備100具有的存儲(chǔ)單元(稍后描述)中,信息處理設(shè)備100從該存儲(chǔ)單元中讀出該參考檢測(cè)信息以進(jìn)行上述檢測(cè),但在根據(jù)本公開的實(shí)施例的信息處理設(shè)備100處的處理不限于上述。例如,信息處理設(shè)備100可以與諸如存儲(chǔ)參考檢測(cè)信息的服務(wù)器的外部設(shè)備進(jìn)行通信,并從外部設(shè)備獲得參考檢測(cè)信息,以便使用所獲得的參考檢測(cè)信息來進(jìn)行該檢測(cè)。注意,根據(jù)本公開的實(shí)施例的信息處理設(shè)備100處的步驟S108的處理不限于使用參考檢測(cè)信息的處理。例如,信息處理設(shè)備100可以使用參考檢測(cè)信息或個(gè)體檢測(cè)信息進(jìn)行處理,作為步驟S108的處理,如在上述動(dòng)作確定處理的第二例子中所示。圖10是圖示在根據(jù)本公開的實(shí)施例的信息處理設(shè)備100處的動(dòng)作確定處理的例子的流程圖。在此,圖10圖示等效于上述動(dòng)作確定處理的第二例子的處理的例子。信息處理設(shè)備100從面部區(qū)域FA提取面部信息(S200)。然后,信息處理設(shè)備100 確定在個(gè)體檢測(cè)信息中是否存在對(duì)應(yīng)于提取的面部信息的面部信息(S202)?,F(xiàn)在,例如,個(gè)體檢測(cè)信息被存儲(chǔ)在信息處理設(shè)備100具有的存儲(chǔ)單元(稍后描述)中,信息處理設(shè)備100從該存儲(chǔ)單元中讀出個(gè)體檢測(cè)信息且進(jìn)行上述確定處理,但在根據(jù)本公開的實(shí)施例的信息處理設(shè)備100處的處理不限于上述。例如,信息處理設(shè)備100可以與諸如存儲(chǔ)個(gè)體檢測(cè)信息的服務(wù)器的外部設(shè)備進(jìn)行通信,并從外部設(shè)備獲得個(gè)體檢測(cè)信息,以便使用所獲得的個(gè)體檢測(cè)信息來進(jìn)行該檢測(cè)。此外,信息處理設(shè)備100可以向存儲(chǔ)個(gè)體檢測(cè)信息的外部設(shè)備發(fā)送在步驟S200中提取的面部信息,以便使得該外部設(shè)備進(jìn)行關(guān)于在個(gè)體檢測(cè)信息中是否存在與提取的面部信息對(duì)應(yīng)的面部信息的實(shí)際確定,且從該外部設(shè)備獲得確定結(jié)果。同樣在上述情況下,信息處理設(shè)備100可以基于從外部設(shè)備獲得的確定結(jié)果來進(jìn)行步驟S202的處理。在步驟S202中確定了在個(gè)體檢測(cè)信息中存在與提取的面部信息對(duì)應(yīng)的面部信息的情況下,信息處理設(shè)備100基于在基于成像圖像設(shè)置的動(dòng)作區(qū)域MA中的周期性分量的檢測(cè)結(jié)果和包括與提取的面部信息對(duì)應(yīng)的面部信息的個(gè)體檢測(cè)信息中的周期性分量信息來檢測(cè)已經(jīng)進(jìn)行預(yù)定動(dòng)作。此外,在步驟S202中沒有確定在個(gè)體檢測(cè)信息中存在與提取的面部信息對(duì)應(yīng)的面部信息的情況下,信息處理設(shè)備100基于在基于成像圖像設(shè)置的動(dòng)作區(qū)域MA中的周期性分量的檢測(cè)結(jié)果和參考檢測(cè)信息的周期性分量信息來檢測(cè)已經(jīng)進(jìn)行預(yù)定動(dòng)作。通過進(jìn)行例如圖10所示的處理,信息處理設(shè)備100可以使用參考檢測(cè)信息或個(gè)體檢測(cè)信息來檢測(cè)已經(jīng)進(jìn)行預(yù)定動(dòng)作。此外,通過信息處理設(shè)備100使用個(gè)體檢測(cè)信息檢測(cè)已經(jīng)進(jìn)行預(yù)定動(dòng)作,信息處理設(shè)備100可以防止對(duì)與在個(gè)體檢測(cè)信息中包括的面部信息對(duì)應(yīng)的用戶的預(yù)定動(dòng)作的錯(cuò)誤檢測(cè)或過度檢測(cè)。圖11和12是用于描述根據(jù)本公開的實(shí)施例的信息處理設(shè)備100使用個(gè)體檢測(cè)信息來檢測(cè)進(jìn)行預(yù)定動(dòng)作的優(yōu)點(diǎn)的說明圖。在如圖11所示的成像圖像中存在用戶A和用戶B的情況下,每個(gè)用戶的動(dòng)作區(qū)域 MA的部分或全部可以與另一用戶的動(dòng)作區(qū)域MA重疊。在該情況下,在一個(gè)用戶(在圖11 中的用戶B)已在重疊的動(dòng)作區(qū)域MA中進(jìn)行了再見動(dòng)作的情況下,可能不能夠明確檢測(cè)哪個(gè)用戶進(jìn)行了此動(dòng)作。現(xiàn)在,在使用個(gè)體檢測(cè)信息進(jìn)行確定的情況下,信息處理設(shè)備100可以明確確定已進(jìn)行的動(dòng)作是用戶A的動(dòng)作還是用戶B的動(dòng)作。因此,即使在如圖11所示的成像圖像中存在用戶A和用戶B的情況下,信息處理設(shè)備100也可以通過使用個(gè)體檢測(cè)信息檢測(cè)已經(jīng)進(jìn)行預(yù)定動(dòng)作,來防止對(duì)與在個(gè)體檢測(cè)信息中包括的面部信息對(duì)應(yīng)的用戶的預(yù)定動(dòng)作的錯(cuò)誤檢測(cè)或過度檢測(cè)。此外,通過使用個(gè)體檢測(cè)信息進(jìn)行確定,信息處理設(shè)備100檢測(cè)具有對(duì)用戶唯一的檢測(cè)參考的預(yù)定動(dòng)作,因此,如圖12所示,即使在由不是用戶的對(duì)象在設(shè)置的動(dòng)作區(qū)域 MA內(nèi)進(jìn)行周期性動(dòng)作的情況下,信息處理設(shè)備100也可以比使用參考檢測(cè)信息的情況更好地防止對(duì)用戶的預(yù)定動(dòng)作的錯(cuò)誤檢測(cè)或過度檢測(cè)。再次參考圖9,將描述在根據(jù)本公開的實(shí)施例的信息處理設(shè)備100處的與可操作性改進(jìn)方法有關(guān)的處理的例子。在進(jìn)行步驟S108的處理時(shí),信息處理設(shè)備100確定是否已經(jīng)在設(shè)置的動(dòng)作區(qū)域MA中檢測(cè)到預(yù)定動(dòng)作(SllO)。在步驟SllO中在設(shè)置的動(dòng)作區(qū)域MA 中未檢測(cè)預(yù)定動(dòng)作的情況下,信息處理設(shè)備100從步驟S102重復(fù)該處理。此外,在步驟SllO中確定已經(jīng)在設(shè)置的動(dòng)作區(qū)域MA中檢測(cè)到預(yù)定動(dòng)作的情況下, 信息處理設(shè)備100進(jìn)行與檢測(cè)的動(dòng)作對(duì)應(yīng)的處理(S112)。在此,步驟S112的處理對(duì)應(yīng)于以上處理⑷(執(zhí)行處理)。通過進(jìn)行例如圖9所示的處理,信息處理設(shè)備100可以實(shí)現(xiàn)與第一可操作性改進(jìn)方法有關(guān)的以上所述的處理(1)(面部區(qū)域檢測(cè)處理)到處理(4)(執(zhí)行處理)。從而,信息處理設(shè)備100可以通過進(jìn)行例如圖9所示的處理來改善用戶可操作性。1-2-2.與可操作性改善方法有關(guān)的第二處理的具體例子圖3是圖示在根據(jù)本公開的實(shí)施例的信息處理設(shè)備處的與可操作性改善方法有關(guān)的處理的另一例子的流程圖,且圖示對(duì)應(yīng)于與上述可操作性改變方法有關(guān)的第二處理的處理的例子。以下,將參考在信息處理設(shè)備100基于關(guān)于成像圖像設(shè)置的動(dòng)作區(qū)域MA中的周期性分量來確定用戶進(jìn)行的預(yù)定動(dòng)作的情況下的處理的例子來描述。以與圖9中的步驟SlOO相同的方式,信息處理設(shè)備100確定是否進(jìn)行用戶的動(dòng)作檢測(cè)(S300)。在步驟S300中沒有確定進(jìn)行用戶的動(dòng)作檢測(cè)的情況下,信息處理設(shè)備100結(jié)束與可操作性改善方法有關(guān)的處理。注意,在圖13中的與可操作性改善方法有關(guān)的處理不是一旦結(jié)束就不再次進(jìn)行的類型的處理,而是信息處理設(shè)備100可以周期性地/非周期性地重復(fù)圖13所示的與可操作性改善方法有關(guān)的處理,即使該處理暫時(shí)結(jié)束。此外,在步驟S300中確定進(jìn)行用戶的動(dòng)作檢測(cè)的情況下,以與圖9中的步驟S102 相同的方式,信息處理設(shè)備100基于輸入的成像圖像來進(jìn)行面部檢測(cè),且標(biāo)識(shí)面部區(qū)域 FA(S302)。現(xiàn)在,在步驟S302中的處理對(duì)應(yīng)于上述處理(I)(面部區(qū)域檢測(cè)處理)。此外, 在從成像圖像中標(biāo)識(shí)多個(gè)面部區(qū)域FA的情況下,比如在成像圖像中包括多個(gè)用戶的情況下,信息處理設(shè)備100對(duì)于所標(biāo)識(shí)的多個(gè)面部區(qū)域FA的每個(gè)進(jìn)行稍后描述的步驟S304到 S316的處理。在進(jìn)行步驟S302的處理后,以與圖9中的步驟S204相同的方式,信息處理設(shè)備 100確定是否標(biāo)識(shí)了面部區(qū)域FA (S304)。在步驟S304中沒有確定標(biāo)識(shí)了面部區(qū)域FA的情況下,信息處理設(shè)備100從步驟S300重復(fù)該處理。此外,在步驟S304中確定標(biāo)識(shí)了面部區(qū)域FA的情況下,以與圖9中的步驟S106 相同的方式,信息處理設(shè)備100基于面部區(qū)域FA來設(shè)置動(dòng)作區(qū)域MA(S306)。現(xiàn)在,在步驟 S306中的處理對(duì)應(yīng)于上述處理(II)(動(dòng)作區(qū)域設(shè)置處理)。在步驟S306中設(shè)置(或重設(shè))動(dòng)作區(qū)域MA后,以與圖9中的步驟S108相同的方式,信息處理設(shè)備100在設(shè)置的動(dòng)作區(qū)域MA中檢測(cè)預(yù)定動(dòng)作(S308)。然后,信息處理設(shè)備 100確定是否在設(shè)置的動(dòng)作區(qū)域MA內(nèi)檢測(cè)到預(yù)定動(dòng)作(S310)。在步驟S310中沒有確定在設(shè)置的動(dòng)作區(qū)域MA中檢測(cè)到預(yù)定動(dòng)作的情況下,信息處理設(shè)備100從步驟S302重復(fù)該處理。此外,在步驟S310中確定在設(shè)置的動(dòng)作區(qū)域MA中檢測(cè)到了預(yù)定動(dòng)作的情況下,信
19息處理設(shè)備100通知用戶已經(jīng)檢測(cè)到預(yù)定動(dòng)作(S412)。在此,步驟S312的處理對(duì)應(yīng)于上述處理(IV)(通知處理)。更具體地,例如,如圖4到8所示,信息處理設(shè)備100視覺上通知用戶已經(jīng)確定用戶在動(dòng)作區(qū)域MA中進(jìn)行了預(yù)定動(dòng)作(或使得外部設(shè)備進(jìn)行通知)。注意,信息處理設(shè)備100 還可以通過例如從該設(shè)備自己的音頻輸出設(shè)備(例如,稍后描述的音頻輸出單元)或外部音頻輸出設(shè)備輸出指示已確定用戶進(jìn)行了預(yù)定動(dòng)作的音頻在聽覺上通知用戶(或使得外部設(shè)備進(jìn)行通知)。此外,在步驟S310中確定在設(shè)置的動(dòng)作區(qū)域MA中檢測(cè)到了預(yù)定動(dòng)作的情況下,信息處理設(shè)備100確定是否從確定進(jìn)行了預(yù)定動(dòng)作起已經(jīng)持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段 (S314)。現(xiàn)在,步驟S308、S310和S314的處理等效于上述處理(III)(動(dòng)作確定處理)。注意,雖然圖13示出了在步驟S312的處理之后進(jìn)行步驟S314的處理的例子,但是信息處理設(shè)備可以獨(dú)立地進(jìn)行步驟S413的處理和步驟S312的處理,在步驟S310中在設(shè)置的動(dòng)作區(qū)域MA中已檢測(cè)到的預(yù)定動(dòng)作作為觸發(fā)。在步驟S414中沒有確定已經(jīng)持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的情況下,信息處理設(shè)備100從步驟S300重復(fù)該處理。現(xiàn)在,沒有已經(jīng)持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的情況的例子是由于來自步驟S312中的處理的通知、用戶停止了他/她自己的動(dòng)作的情況。此外,在在步驟S314中確定已經(jīng)持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的情況下,信息處理設(shè)備100以與圖9中的步驟S112相同的方式進(jìn)行對(duì)應(yīng)于所檢測(cè)的動(dòng)作的處理(S316)。 在此,步驟S316的處理對(duì)應(yīng)于上述處理(V)(執(zhí)行處理)。通過進(jìn)行例如圖13所示的處理,信息處理設(shè)備100可以實(shí)現(xiàn)與可操作性改善方法有關(guān)的上述處理(I)(面部區(qū)域檢測(cè)處理)到處理(V)(執(zhí)行處理)。因此,信息處理設(shè)備 100可以通過進(jìn)行例如圖13所示的處理來改善用戶可操作性。例如,通過進(jìn)行圖9和13所示的處理,信息處理設(shè)備100實(shí)現(xiàn)上述根據(jù)本公開的實(shí)施例的可操作性改善方法。不用說,通過根據(jù)本公開的實(shí)施例的信息處理設(shè)備100的與可操作性改善方法有關(guān)的處理不限于圖9和13所示的處理。2.根據(jù)本公開的實(shí)施例的信息處理設(shè)備接下來,將描述根據(jù)本公開的實(shí)施例的信息處理設(shè)備100的配置的例子,該信息處理設(shè)備100能夠進(jìn)行與上述根據(jù)本公開的實(shí)施例的可操作性改進(jìn)方法有關(guān)的處理。以下將參考能夠執(zhí)行上述與可操作性改善方法有關(guān)的第二處理的信息處理設(shè)備 100的例子來描述根據(jù)本公開的實(shí)施例的信息處理設(shè)備100的配置。注意,例如,根據(jù)本公開的實(shí)施例的信息處理設(shè)備100可以通過用沒有稍后描述的通知處理單元的配置或包括通知處理單元但通知處理不起作用的配置,來實(shí)現(xiàn)上述根據(jù)可操作性改善方法的第一處理。此外,根據(jù)本公開的實(shí)施例的信息處理設(shè)備100可以通過具有其中使得稍后描述的通信處理單元基于用戶操作等選擇性地起作用的配置,來選擇性地進(jìn)行根據(jù)可操作性改善方法的第一處理以及根據(jù)可操作性改善方法的第二處理。第一實(shí)施例圖14是圖示根據(jù)本公開的第一實(shí)施例的信息處理設(shè)備100的配置的例子的方框圖?,F(xiàn)在,圖14也示出了在顯示屏幕上進(jìn)行圖像(靜止圖像或運(yùn)動(dòng)圖像)的顯示并通過在顯示屏幕的顯示方向上成像來生成成像圖像的顯示系統(tǒng)200。此外,雖然圖14示出了其中顯示系統(tǒng)200由進(jìn)行顯示的顯示設(shè)備300和進(jìn)行成像的成像裝置400構(gòu)成的例子,但根據(jù)本公開的實(shí)施例的顯示系統(tǒng)200的配置不限于上述。例如,顯示系統(tǒng)200可以是其中顯示設(shè)備300和成像裝置400已經(jīng)被集成的設(shè)備(例如,具有成像功能的顯示設(shè)備)?,F(xiàn)在,通過顯示系統(tǒng)200在顯示屏幕的顯示方向上拍攝圖像生成成像圖像來獲得已經(jīng)對(duì)觀看顯示屏幕的用戶成像的成像圖像。因此,通過信息處理設(shè)備100處理由顯示系統(tǒng)200生成的成像圖像,信息處理設(shè)備100可以容易地進(jìn)行諸如標(biāo)識(shí)面部區(qū)域FA和設(shè)置動(dòng)作區(qū)域MA、檢測(cè)用戶的預(yù)定動(dòng)作、提取面部表達(dá)等的處理。參考圖14,信息處理設(shè)備100具有存儲(chǔ)單元102、通信單元104、檢測(cè)單元108、動(dòng)作區(qū)域設(shè)置單元110、動(dòng)作確定單元112、通知處理單元114和處理單元116。例如,信息處理設(shè)備10還可以具有控制單元(未示出)、R0M(只讀存儲(chǔ)器(未示出))、RAM(隨機(jī)存取存儲(chǔ)器(未示出))等。例如,信息處理設(shè)備100具有由用作數(shù)據(jù)傳輸路徑的總線互連的組件。在此,例如,控制單元(未示出)用于控制整個(gè)信息處理設(shè)備 100。注意,通過信息處理設(shè)備100,例如,處理單元116可以用作控制單元(未示出)。此外R0M(未示出)存儲(chǔ)例如控制單元(未示出)使用的程序和諸如計(jì)算參數(shù)等的用于處理的數(shù)據(jù)。例如,RAM(未示出)暫時(shí)存儲(chǔ)由控制單元(未示出)執(zhí)行的數(shù)據(jù)和程序。信息處理設(shè)備100的硬件配置例子圖15是圖示根據(jù)本公開的實(shí)施例的信息處理設(shè)備100的硬件配置的例子的說明圖。參考圖15,信息處理設(shè)備100包括例如MPU 150、ROM 152、RAM 154、記錄介質(zhì)156、輸入/輸出接口 158、操作輸入設(shè)備160、顯示設(shè)備162、和通信接口 164。此外,例如,信息處理設(shè)備100具有與用作數(shù)據(jù)傳輸路徑的總線166互連的組件。MPU 150是其中集成了用于實(shí)現(xiàn)諸如圖像處理等的各種類型功能的多個(gè)電路的集成電路,并起著控制整個(gè)信息處理設(shè)備100的控制單元(未示出)的作用。此外,MPU 150 用作在信息處理設(shè)備100中的檢測(cè)單元108、動(dòng)作區(qū)域設(shè)置單元110、動(dòng)作確定單元112、通知處理單元114和處理單元116。此外,MPU 150可以用作稍后描述的學(xué)習(xí)單元。ROM 152控制數(shù)據(jù)比如存儲(chǔ)MPU 150使用的程序和計(jì)算參數(shù)等。例如,RAM 1 暫時(shí)存儲(chǔ)要由MPU 150執(zhí)行的程序等。記錄介質(zhì)156起著存儲(chǔ)單元102的作用,并存儲(chǔ)例如諸如參考檢測(cè)信息、個(gè)體檢測(cè)信息、處理信息等的各種數(shù)據(jù)(或數(shù)據(jù)庫)、應(yīng)用等等。記錄介質(zhì)156的例子包括諸如硬盤等的磁性存儲(chǔ)介質(zhì)和諸如EEPR0M(電可擦除可編程只讀存儲(chǔ)器)、閃存、MRAM(磁阻隨機(jī)存取存儲(chǔ)器)、FeRAM(鐵電隨機(jī)存取存儲(chǔ)器)和PRAM(相位改變隨機(jī)存取存儲(chǔ)器)的非易失性存儲(chǔ)器。此外,信息處理設(shè)備100可以具有可從信息處理設(shè)備100拆卸的記錄介質(zhì)156。此外,輸入/輸出接口 158連接例如操作輸入設(shè)備160和顯示設(shè)備162。此外,輸入/輸出接口 158可以用作輸入單元106。操作輸入設(shè)備160用作操作單元(未示出),且顯示設(shè)備162用作顯示單元(稍后描述)?,F(xiàn)在,輸入/輸出接口 158的例子包括USB (通用串行總線)端、DVI (數(shù)字視覺接口)端、HDMI (高清多媒體接口)端、各種電路等。此外, 操作輸入設(shè)備160被提供在例如信息處理設(shè)備100上,并且與信息處理設(shè)備100內(nèi)部的輸入/輸出接口 159連接。操作輸入設(shè)備160的例子包括按鈕、方向鍵、諸如轉(zhuǎn)動(dòng)拔盤的旋轉(zhuǎn)選擇器、其組合等等。此外,例如,顯示設(shè)備162被提供在例如信息處理設(shè)備100上,并且與信息處理設(shè)備100內(nèi)部的輸入/輸出接口 158連接。顯示設(shè)備162的例子包括IXD(液晶
21顯示器)和有機(jī)電致發(fā)光顯示器(也稱為OLED (有機(jī)發(fā)光二極管)顯示器)。不用說,輸入/輸出接口 158可以與用作信息處理設(shè)備100的外部設(shè)備的諸如操作輸入設(shè)備(例如鍵盤、鼠標(biāo))、顯示設(shè)備(例如諸如顯示設(shè)備300的外部顯示設(shè)備)、成像設(shè)備(例如成像裝置 400等)等的外部設(shè)備連接。此外,顯示設(shè)備162可以是能夠顯示用戶操作的設(shè)備,例如比如觸摸屏。信息處理設(shè)備100的通信接口 164起著通信單元104的作用,用于通過無線/電纜經(jīng)由網(wǎng)絡(luò)(或直接)與諸如顯示設(shè)備300或服務(wù)器(未示出)等的外部設(shè)備進(jìn)行通信。 通信接口 164的例子包括通信天線和RF電路(無線通信)、IEEE 802. 15. 1端口和發(fā)送/ 接收電路(無線通信)、IEEE 802. Ilb端口和發(fā)送/接收電路(無線通信)、或LAN端子和發(fā)送/接收電路(電纜通信)等。信息處理設(shè)備100利用例如圖15所示的配置進(jìn)行與根據(jù)本公開的實(shí)施例的可操作性改進(jìn)方法有關(guān)的處理。注意,根據(jù)本公開的實(shí)施例的信息處理設(shè)備100處的硬件配置不限于圖15所示的配置。例如,信息處理設(shè)備100可以具有由DSP(數(shù)字信號(hào)處理器)和放大器(amp)和揚(yáng)聲器等配置的、用作音頻輸出單元(稍后描述)的音頻輸出設(shè)備。在上述情況下,例如,信息處理設(shè)備100可以進(jìn)行音頻靜音和音量調(diào)整,作為對(duì)應(yīng)于用戶的預(yù)定動(dòng)作的處理。此外,信息處理設(shè)備100可以具有例如由鏡頭/成像設(shè)備和信號(hào)處理電路配置的、 用作成像單元(稍后描述)的成像設(shè)備。在上述情況下,信息處理設(shè)備100可以處理其本身已經(jīng)生成的成像圖像。現(xiàn)在,例如,鏡頭/成像設(shè)備由光學(xué)鏡頭和使用多個(gè)諸如CCD(電荷耦合器件)或CMOS(互補(bǔ)金屬氧化物半導(dǎo)體)等的成像設(shè)備的圖像傳感器配置。例如, 信號(hào)處理單元具有AGC (自動(dòng)增益控制)電路或ADC (模擬到數(shù)字轉(zhuǎn)換器),將由成像設(shè)備生成的模擬信號(hào)轉(zhuǎn)換為數(shù)字信號(hào)(圖像數(shù)據(jù)),且進(jìn)行各種類型的信號(hào)處理。信號(hào)處理電路進(jìn)行的信號(hào)處理的例子包括白平衡校正處理、插值處理、顏色校正處理、伽馬校正處理、YCbCr 轉(zhuǎn)換處理、邊緣增強(qiáng)處理、編碼處理等。此外,例如,信息處理設(shè)備100可以是不具有如圖15所示的操作設(shè)備160或顯示設(shè)備162的配置。返回圖14,將描述根據(jù)本公開的實(shí)施例的信息處理設(shè)備100的配置的第一例子。 存儲(chǔ)單元102是信息處理設(shè)備100具有的存儲(chǔ)器?,F(xiàn)在,存儲(chǔ)單元102的例子包括諸如硬盤等的磁性記錄介質(zhì)和諸如閃存等的非易失性存儲(chǔ)器。此外,例如,存儲(chǔ)單元102存儲(chǔ)諸如參考檢測(cè)信息、個(gè)體檢測(cè)信息、處理信息等的各種數(shù)據(jù)(或數(shù)據(jù)庫)、應(yīng)用等。圖14圖示其中在存儲(chǔ)單元102中存儲(chǔ)參考檢測(cè)信息170、 處理信息172和識(shí)別信息174的例子?,F(xiàn)在,根據(jù)本公開的實(shí)施例的識(shí)別信息是從成像圖像檢測(cè)的與用戶有關(guān)的信息。識(shí)別信息的例子包括在成像圖像中包括的用戶的數(shù)量、表示用戶的特征的表達(dá)、指示已經(jīng)評(píng)估的用戶情感的信息、身體移動(dòng)的存在或不存在等,這是由信息處理設(shè)備100分析成像圖像獲得的數(shù)據(jù)。例如,信息處理設(shè)備100具有的通信單元104通過無線/電纜經(jīng)由網(wǎng)絡(luò)(或直接) 與諸如顯示設(shè)備300或服務(wù)器(未示出)等的外部設(shè)備進(jìn)行通信。此外,例如,通信單元 104具有由控制單元(未示出)和處理單元116控制的其通信。通信單元104的例子在此包括通信天線和RF電路、LAN端子和端口以及發(fā)送/接收電路等,但通信單元104不限于上述。例如,通信單元104可以具有可選的配置,以便可經(jīng)由網(wǎng)絡(luò)與外部設(shè)備通信。輸入單元106接收成像裝置400通過成像生成的成像圖像。然后,輸入單元106 將接收的(輸入的)成像圖像交給檢測(cè)單元108?,F(xiàn)在,輸入單元106的例子包括USB端、 DVI端、HDMI端、各種處理電路等,但輸入單元106不限于上述。例如,可以具有可選的配置,以便能夠通過電纜或無線地從外部設(shè)備接收成像圖像。注意,輸入單元106不限于接收成像圖像,并且可以接收例如提供給顯示設(shè)備300 的由距離傳感器等產(chǎn)生的數(shù)據(jù)(例如指示顯示屏幕和用戶之間的距離的距離數(shù)據(jù))。在接收上述數(shù)據(jù)的情況下,輸入單元106將該數(shù)據(jù)交給處理單元116。在上述情況下,信息處理設(shè)備100可以進(jìn)一步基于在稍后描述的處理單元116處交付的距離數(shù)據(jù)等進(jìn)行與預(yù)定動(dòng)作對(duì)應(yīng)的處理。檢測(cè)單元108在上述處理(I)(面部區(qū)域檢測(cè)處理)中具有主導(dǎo)角色。更具體地, 例如,檢測(cè)單元108從成像圖像中檢測(cè)包括用戶的面部的面部區(qū)域FA,并將指示檢測(cè)的(標(biāo)識(shí)的)面部區(qū)域FA和成像圖像的信息交給動(dòng)作區(qū)域設(shè)置單元110。此外,檢測(cè)單元108可以進(jìn)一步檢測(cè)在用動(dòng)作區(qū)域設(shè)置單元110設(shè)置的動(dòng)作區(qū)域 MA中的移動(dòng)體,且通知?jiǎng)幼鞔_定單元112是否檢測(cè)到了移動(dòng)體。在上述情況下,在檢測(cè)到移動(dòng)體的情況下,動(dòng)作確定單元112可以選擇性地進(jìn)行稍后描述的處理。因此,通過信息處理設(shè)備100,可以實(shí)現(xiàn)在信息處理設(shè)備100處的計(jì)算負(fù)荷的降低,且防止不檢測(cè)或錯(cuò)誤檢測(cè)用戶的預(yù)定動(dòng)作。動(dòng)作區(qū)域設(shè)置單元110在上述處理(II)(動(dòng)作區(qū)域設(shè)置處理)中具有主導(dǎo)角色。 更具體地,例如,在檢測(cè)單元108處檢測(cè)到面部區(qū)域FA的情況下,動(dòng)作區(qū)域設(shè)置單元110基于面部區(qū)域FA將動(dòng)作區(qū)域MA設(shè)置在面部區(qū)域FA附近。然后,例如,動(dòng)作區(qū)域設(shè)置單元110 將設(shè)置的動(dòng)作區(qū)域MA的信息交給檢測(cè)單元108和動(dòng)作確定單元112。此外,動(dòng)作區(qū)域設(shè)置單元110將從檢測(cè)單元108交付的成像圖像交給動(dòng)作確定單元112。注意,在該配置是輸入單元106和檢測(cè)單元108將成像圖像交給動(dòng)作確定單元112的情況下,動(dòng)作區(qū)域設(shè)置單元 110不需要將成像圖像交給動(dòng)作確定單元112。此外,動(dòng)作區(qū)域設(shè)置單元110可以從面部區(qū)域FA提取指示用戶的面部的特征的面部信息,且基于該面部信息來重設(shè)基于面部區(qū)域FA設(shè)置的動(dòng)作區(qū)域MA(即,調(diào)整動(dòng)作區(qū)域 MA)。動(dòng)作確定單元112在上述處理(III)(動(dòng)作確定處理)中具有主導(dǎo)角色。更具體地,動(dòng)作確定單元112基于成像圖像和參考檢測(cè)信息170,確定用戶已在動(dòng)作區(qū)域設(shè)置單元 110設(shè)置的動(dòng)作區(qū)域MA中進(jìn)行了預(yù)定動(dòng)作。現(xiàn)在,例如,動(dòng)作區(qū)域設(shè)置單元110在動(dòng)作區(qū)域MA中檢測(cè)周期性分量,并基于在動(dòng)作區(qū)域MA中的周期性分量的檢測(cè)結(jié)果和在參考檢測(cè)信息170中的周期性分量信息來確定已經(jīng)進(jìn)行預(yù)定動(dòng)作,但在動(dòng)作區(qū)域設(shè)置單元110處的處理不限于上述。在確定在動(dòng)作區(qū)域MA內(nèi)檢測(cè)到了預(yù)定動(dòng)作的情況下,然后,動(dòng)作確定單元112將確定結(jié)果交給通知處理單元114?,F(xiàn)在,例如,在已確定在動(dòng)作區(qū)域MA內(nèi)檢測(cè)到了預(yù)定動(dòng)作的情況下,動(dòng)作確定單元112選擇性地將指示已檢測(cè)到預(yù)定動(dòng)作的確定結(jié)果交給通知處理單元114,但在動(dòng)作確定單元112處的處理不限于上述。例如,動(dòng)作確定單元112可以在每次進(jìn)行與確定有關(guān)的處理時(shí)將確定結(jié)果交給通知處理單元114,而不管確定的結(jié)果。在上述情況下,當(dāng)交付的確定結(jié)果指示已在動(dòng)作區(qū)域MA內(nèi)檢測(cè)到預(yù)定動(dòng)作時(shí),通知處理單元 114將選擇性地進(jìn)行稍后描述的處理。此外,在確定已在由動(dòng)作區(qū)域設(shè)置單元110設(shè)置的動(dòng)作區(qū)域MA內(nèi)檢測(cè)到預(yù)定動(dòng)作的情況下,動(dòng)作確定單元112確定是否已經(jīng)從確定已進(jìn)行預(yù)定動(dòng)作起已持續(xù)進(jìn)行預(yù)定動(dòng)作經(jīng)過了預(yù)定時(shí)間段。然后,例如,在確定已持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的情況下,動(dòng)作確定單元112將指示已持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的確定結(jié)果交給處理單元116。雖然未在圖14中所示,但在個(gè)體檢測(cè)信息被存儲(chǔ)在存儲(chǔ)單元102中的情況下,或在與存儲(chǔ)個(gè)體檢測(cè)信息的諸如服務(wù)器的外部設(shè)備合作地進(jìn)行處理的情況下,動(dòng)作確定單元 112可以選擇性地使用參考檢測(cè)信息170或個(gè)體檢測(cè)信息,來確定用戶已在動(dòng)作區(qū)域MA中進(jìn)行了預(yù)定動(dòng)作。此外,在動(dòng)作區(qū)域MA中檢測(cè)到周期性分量且確定進(jìn)行了預(yù)定動(dòng)作的情況下,動(dòng)作確定單元112不需要除了動(dòng)作區(qū)域MA中的以外的檢測(cè)周期性分量。由于上述,信息處理設(shè)備100可以進(jìn)一步降低根據(jù)本公開的實(shí)施例的與可操作性改善方法有關(guān)的處理的負(fù)荷(計(jì)算負(fù)荷)。通知處理單元114在上述處理(IV)(通知處理)中具有主導(dǎo)角色。更具體地,在動(dòng)作確定單元112處已確定進(jìn)行了預(yù)定動(dòng)作的情況下,進(jìn)行通知處理以通知用戶已確定進(jìn)行了預(yù)定動(dòng)作?,F(xiàn)在,例如,通知處理單元114經(jīng)由通信單元104向外部設(shè)備傳輸處理執(zhí)行命令, 用于通知外部設(shè)備已確定進(jìn)行了預(yù)定動(dòng)作,作為通知處理。通過上述,例如,信息處理設(shè)備 100可以致使作為顯示設(shè)備的顯示設(shè)備300等進(jìn)行諸如圖4到8所示的視覺通知或聽覺通知。在通知處理單元114處的通知處理不限于經(jīng)由通信單元104向外部設(shè)備傳輸處理執(zhí)行命令用于通知外部設(shè)備已確定進(jìn)行了預(yù)定動(dòng)作。例如,在信息處理設(shè)備100具有顯示單元(稍后描述)的情況下,該顯示單元可以用于進(jìn)行視覺通知,且在信息處理設(shè)備100具有音頻輸出單元(稍后描述)的情況下,該音頻輸出單元可以用于進(jìn)行聽覺通知。將在稍后描述的第三實(shí)施例中描述上述形式。處理單元116在上述處理(ν)(合作確定處理)中具有主導(dǎo)角色。更具體地,在動(dòng)作確定單元112處已確定已持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的情況下,例如,處理單元116 基于處理信息172進(jìn)行與在動(dòng)作確定單元112處確定的預(yù)定動(dòng)作對(duì)應(yīng)的處理。現(xiàn)在,例如, 預(yù)定動(dòng)作和要執(zhí)行的處理以相關(guān)的方式被記錄在處理信息172中。因此,通過使用其中記錄了與預(yù)定動(dòng)作的含義相關(guān)的處理的處理信息172,信息處理設(shè)備100可以進(jìn)行與檢測(cè)的動(dòng)作的含義相關(guān)的處理(考慮到功能可見性的處理)。此外,處理單元116可以經(jīng)由通信單元104傳輸處理執(zhí)行命令以使得外部設(shè)備進(jìn)行對(duì)應(yīng)于預(yù)定動(dòng)作的處理,作為對(duì)應(yīng)于預(yù)定動(dòng)作的處理。因此,信息處理設(shè)備100可以致使作為外部設(shè)備的外部設(shè)備300等進(jìn)行對(duì)應(yīng)于檢測(cè)的預(yù)定動(dòng)作的處理。此外,例如,處理單元116可以進(jìn)行諸如在存儲(chǔ)單元102中記錄識(shí)別信息、經(jīng)由通信單元104向諸如服務(wù)器(未示出)的外部設(shè)備傳輸在存儲(chǔ)單元102處存儲(chǔ)的識(shí)別信息 174等的處理。通過圖14所示的配置,根據(jù)第一實(shí)施例的信息處理設(shè)備100可以實(shí)現(xiàn)根據(jù)第二可操作性改善方法的上述處理(I)(面部區(qū)域檢測(cè)處理)到處理(ν)(執(zhí)行處理)。因此,例如,通過圖14所示的配置,信息處理設(shè)備100可以防止通信系統(tǒng)1000中的用戶便利性的變差,并改善用戶可操作性。根據(jù)第一實(shí)施例的信號(hào)處理設(shè)備100的修改注意,根據(jù)本公開的第一實(shí)施例的信息處理設(shè)備100的配置不限于圖14所示的配置。例如,根據(jù)第一實(shí)施例的信息處理設(shè)備100還可以具有用于實(shí)現(xiàn)與用戶進(jìn)行的預(yù)定動(dòng)作的含義相關(guān)的處理的設(shè)備,比如音頻輸出設(shè)備等;涉及與通信對(duì)象設(shè)備300的合作處理的設(shè)備;等等。此外,根據(jù)第一實(shí)施例的信息處理設(shè)備100可以被布置為不具有存儲(chǔ)單元 102,而是適當(dāng)時(shí)從外部設(shè)備獲得用于處理的信息、比如參考檢測(cè)信息170和處理信息172, 以便進(jìn)行處理。第二實(shí)施例圖16是圖示根據(jù)本公開的第二實(shí)施例的信息處理設(shè)備的配置的例子的方框圖。 在圖16中,如像圖14那樣,一起示出了顯示系統(tǒng)200。圖16所示的根據(jù)第二實(shí)施例的信息處理設(shè)備100基本上具有與圖14所示的根據(jù)第一實(shí)施例的信息處理設(shè)備100相同的配置,但相比于根據(jù)圖14所示的第一實(shí)施例的信息處理設(shè)備100,根據(jù)第二實(shí)施例的信息處理設(shè)備100進(jìn)一步提供有學(xué)習(xí)單元118。學(xué)習(xí)單元118用于管理個(gè)體檢測(cè)信息。例如,在動(dòng)作確定單元112處確定進(jìn)行了預(yù)定動(dòng)作的情況下,學(xué)習(xí)單元118更新與確定的預(yù)定動(dòng)作和從動(dòng)作區(qū)域設(shè)置單元110提取的面部信息對(duì)應(yīng)的個(gè)體檢測(cè)信息。更具體地,例如,學(xué)習(xí)單元118采取在動(dòng)作確定單元112 處檢測(cè)的周期性分量的信息,作為在與確定的預(yù)定動(dòng)作和由動(dòng)作區(qū)域設(shè)置單元110提取的面部信息對(duì)應(yīng)的個(gè)體檢測(cè)信息中的周期性分量信息。注意,學(xué)習(xí)單元118不限于在動(dòng)作確定單元112處確定進(jìn)行了預(yù)定動(dòng)作的情況下進(jìn)行個(gè)體檢測(cè)信息的更新,并且例如,可以在動(dòng)作確定單元112處確定已持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的情況下進(jìn)行個(gè)體檢測(cè)信息的更新。此外,在檢測(cè)單元108具有在動(dòng)作區(qū)域MA中檢測(cè)周期性分量的功能的情況下,學(xué)習(xí)單元118可以采取從檢測(cè)單元108交付的周期性分量信息,作為在該個(gè)體檢測(cè)信息中的周期性分量信息。現(xiàn)在,在動(dòng)作確定單元112處確定進(jìn)行了預(yù)定動(dòng)作的情況下(或在確定已持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的情況下),學(xué)習(xí)單元118可以自動(dòng)更新個(gè)體檢測(cè)信息,但在學(xué)習(xí)單元118處的處理不限于上述。例如,學(xué)習(xí)單元118可以基于從操作單元(未示出)發(fā)送的對(duì)應(yīng)于用戶操作的操作信號(hào)或從諸如遠(yuǎn)程控制器等的外部操作設(shè)備發(fā)送的外部操作信號(hào), 來選擇性地更新個(gè)體檢測(cè)信息。注意,在學(xué)習(xí)單元118處的個(gè)體檢測(cè)信息的管理不限于上述的更新在個(gè)體檢測(cè)信息中的周期性分量信息。例如,學(xué)習(xí)單元118可以管理對(duì)用戶唯一的信息,比如與調(diào)整動(dòng)作區(qū)域MA的區(qū)域大小和調(diào)整其位置有關(guān)的信息、用于確定用戶的預(yù)定動(dòng)作的時(shí)間段的信息等,作為個(gè)體檢測(cè)信息。此外,例如,學(xué)習(xí)單元118可以通過用于學(xué)習(xí)的用戶界面,根據(jù)用戶操作,基于從操作單元(未示出)發(fā)送的操作信號(hào)來生成或更新個(gè)體檢測(cè)信息,而不管來自動(dòng)作確定單元112的確定結(jié)果。根據(jù)第二實(shí)施例的信息處理設(shè)備100基本上具有與根據(jù)圖14所示的第一實(shí)施例的信息處理設(shè)備100相同的配置。因此,例如,根據(jù)第二實(shí)施例的信息處理設(shè)備100可以以
25與根據(jù)第一實(shí)施例的信息處理設(shè)備100相同的方式,根據(jù)通過圖16所示的配置的可操作性改善方法,實(shí)現(xiàn)上述處理(I)(面部區(qū)域檢測(cè)處理)到處理(ν)(執(zhí)行處理)。因此,例如,根據(jù)第二實(shí)施例的信息處理設(shè)備100可以利用圖16所示的配置來改善用戶可操作性。此外,通過具有學(xué)習(xí)單元118,根據(jù)第二實(shí)施例的信息處理設(shè)備100可以管理根據(jù)用戶的唯一狀況、比如例如年齡、性別、體格特征等的信息,作為個(gè)體檢測(cè)信息?,F(xiàn)在,如參考圖11和12所描述的,信息處理設(shè)備100通過使用個(gè)體檢測(cè)信息檢測(cè)已經(jīng)進(jìn)行預(yù)定動(dòng)作, 來防止對(duì)與在該個(gè)體檢測(cè)信息中包括的面部信息對(duì)應(yīng)的具體用戶的動(dòng)作的錯(cuò)誤檢測(cè)和過度檢測(cè)。因此,由于學(xué)習(xí)單元118管理個(gè)體檢測(cè)信息,因此信息處理設(shè)備100可以在確定對(duì)應(yīng)于個(gè)體檢測(cè)信息的具體用戶的動(dòng)作的情況下改善確定的精度。根據(jù)第二實(shí)施例的信息處理設(shè)備100的修改注意,根據(jù)本公開的第二實(shí)施例的信息處理設(shè)備100的配置不限于圖16所示的配置。例如,根據(jù)第二實(shí)施例的信息處理設(shè)備100還可以具有用于實(shí)現(xiàn)與由用戶進(jìn)行的預(yù)定動(dòng)作的含義相關(guān)的處理的設(shè)備,像根據(jù)第一實(shí)施例的信息處理設(shè)備的修改的情況那樣。此外,根據(jù)第二實(shí)施例的信息處理設(shè)備100可以以與根據(jù)第一實(shí)施例的信息處理設(shè)備100相同的方式適當(dāng)?shù)貜闹T如服務(wù)器的外部設(shè)備獲得用于處理的信息,比如參考檢測(cè)信息170和處理信息172,以便進(jìn)行處理。第三實(shí)施例在上述描述中,已經(jīng)例示了作為根據(jù)第一實(shí)施例的信息處理設(shè)備100和根據(jù)第二實(shí)施例的信息處理設(shè)備100的配置,顯示系統(tǒng)200的成像裝置400 (例如外部設(shè)備)處理生成的成像圖像。但是,根據(jù)本公開的實(shí)施例的信息處理設(shè)備100的配置不限于其中外部設(shè)備處理生成的成像圖像的配置。圖17是圖示根據(jù)本公開的第三實(shí)施例的信息處理設(shè)備100的配置的例子的方框圖。圖17所示的根據(jù)第三實(shí)施例的信息處理設(shè)備100基本上具有與圖14所示的根據(jù)第一實(shí)施例的信息處理設(shè)備100相同的配置,但相比于圖14所示的根據(jù)第一實(shí)施例的信息處理設(shè)備100,根據(jù)第三實(shí)施例的信息處理設(shè)備100進(jìn)一步提供有成像單元120、顯示單元 122和音頻輸出單元124。信息處理設(shè)備100具有的成像單元120通過在顯示單元122上顯示的顯示屏幕的顯示方向上成像來生成成像圖像。成像單元120向檢測(cè)單元108發(fā)送成像圖像。通過成像單元120在顯示屏幕的顯示方向上成像生成成像圖像,獲得成像觀看顯示屏幕的用戶的成像圖像。因此,例如,信息處理設(shè)備100可以容易地進(jìn)行上述(I)(面部區(qū)域檢測(cè)處理)到 (V)(執(zhí)行處理)的處理,比如標(biāo)識(shí)面部區(qū)域FA、設(shè)置動(dòng)作區(qū)域MA、檢測(cè)用戶的預(yù)定動(dòng)作、提取面部表達(dá)等。此外,例如,成像單元120由一個(gè)或兩個(gè)或更多成像設(shè)備配置,該成像設(shè)備由例如鏡頭/成像設(shè)備和信號(hào)處理電路配置,但成像單元120的配置不限于上述。信息處理設(shè)備100具有的顯示單元122在顯示屏幕上顯示各種信息和圖像。在顯示單元122的顯示屏幕上顯示的屏幕的例子包括用于顯示內(nèi)容的內(nèi)容顯示屏幕、用于顯示由成像單元120生成的成像圖像(可以與內(nèi)容疊加)的屏幕、用于允許關(guān)于信息處理設(shè)備 100進(jìn)行期望動(dòng)作的操作屏幕等。
例如,信息處理設(shè)備100具有的音頻輸出單元IM輸出諸如由內(nèi)容指示的音頻或者在信息處理設(shè)備100處的系統(tǒng)音頻的各種音頻。通過具有音頻輸出單元124,信息處理設(shè)備100可以進(jìn)行例如從音頻輸出單元IM輸出的音頻的音頻靜音和音量調(diào)整,作為處理單元116進(jìn)行的對(duì)應(yīng)于用戶的預(yù)定動(dòng)作的處理。此外,音頻輸出單元124的例子包括由DSP和放大器(amp)和揚(yáng)聲器等配置的音頻輸出設(shè)備,但音頻輸出單元124的配置不限于上述。根據(jù)本公開的第三實(shí)施例的信息處理設(shè)備100基本上具有與圖14所示的根據(jù)第一實(shí)施例的信息處理設(shè)備100相同的配置。因此,根據(jù)第三實(shí)施例的信息處理設(shè)備100可以以與根據(jù)第一實(shí)施例的信息處理設(shè)備100相同的方式,利用圖17所示的配置實(shí)現(xiàn)與第二可操作性改善方法有關(guān)的上述處理(I)(面部區(qū)域檢測(cè)處理)到處理(ν)(執(zhí)行處理)。因此,例如,根據(jù)第三實(shí)施例的信息處理設(shè)備100可以利用圖17所示的配置來改善用戶可操作性。根據(jù)第三實(shí)施例的信息處理設(shè)備100的修改根據(jù)本公開的第三實(shí)施例的信息處理設(shè)備100的配置不限于圖17所示的配置。 例如,根據(jù)第三實(shí)施例的信息處理設(shè)備100可以以與根據(jù)第二實(shí)施例的信息處理設(shè)備100 相同的方式,具有學(xué)習(xí)單元118。此外,根據(jù)第三實(shí)施例的信息處理設(shè)備100可是例如不具有音頻輸出單元124的配置,或還可以具有實(shí)現(xiàn)與用戶的預(yù)定動(dòng)作的含義相關(guān)的處理的設(shè)備。另外,根據(jù)第三實(shí)施例的信息處理設(shè)備100可以是以與根據(jù)第一實(shí)施例的信息處理設(shè)備100的修改相同的方式在適當(dāng)時(shí)從諸如服務(wù)器的外部設(shè)備獲得諸如參考檢測(cè)信息170和處理信息172的用于處理的信息并進(jìn)行處理的配置。如上所述,例如,根據(jù)本公開的實(shí)施例的信息處理設(shè)備100進(jìn)行上述處理(1)(面部區(qū)域檢測(cè)處理)到處理(執(zhí)行處理)、或上述處理(I)(面部區(qū)域檢測(cè)處理)到處理 (V)(執(zhí)行處理),由此確定用戶進(jìn)行了預(yù)定動(dòng)作,且進(jìn)行對(duì)應(yīng)于確定的預(yù)定動(dòng)作的處理。現(xiàn)在,信息處理設(shè)備100將動(dòng)作區(qū)域MA設(shè)置在基于成像圖像標(biāo)識(shí)的面部區(qū)域FA附近,在設(shè)置的動(dòng)作區(qū)域MA中檢測(cè)(確定)用戶的預(yù)定動(dòng)作,并進(jìn)行對(duì)應(yīng)于所檢測(cè)的預(yù)定動(dòng)作的處理。 通過以此方式設(shè)置動(dòng)作區(qū)域MA,信息處理設(shè)備100可以通過對(duì)成像圖像中的一部分區(qū)域進(jìn)行圖像處理,而不是像根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備那樣對(duì)整個(gè)成像圖像進(jìn)行圖像處理, 來檢測(cè)用戶的動(dòng)作。因此,相比于根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備,信息處理設(shè)備100可以減小與用戶的預(yù)定動(dòng)作的檢測(cè)有關(guān)的計(jì)算負(fù)擔(dān),因此,通過信息處理設(shè)備100,可以防止發(fā)生可能通過上述根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備發(fā)生的不期望的情況。因此,信息處理設(shè)備100 可以防止可能在使用現(xiàn)有技術(shù)的情況下發(fā)生的用戶便利性的變差,并且還可以改善用戶可操作性。此外,信息處理設(shè)備100進(jìn)行與在面部區(qū)域FA附近設(shè)置的在動(dòng)作區(qū)域MA中檢測(cè)的預(yù)定動(dòng)作對(duì)應(yīng)的處理,因此,相比于拍攝整個(gè)成像圖像和處理的對(duì)象的根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備,可以降低例如由除了與面部區(qū)域FA對(duì)應(yīng)的用戶以外的人或物體進(jìn)行的預(yù)定動(dòng)作的錯(cuò)誤檢測(cè)。因此,相比于根據(jù)現(xiàn)有技術(shù)的信息處理設(shè)備,信息處理設(shè)備100可以進(jìn)一步改善用戶可操作性。信息處理設(shè)備100進(jìn)行與預(yù)定動(dòng)作的含義相關(guān)的處理,作為對(duì)應(yīng)于在面部區(qū)域FA 附近設(shè)置的動(dòng)作區(qū)域MA處檢測(cè)的預(yù)定動(dòng)作的處理。如上所述,由于信息處理設(shè)備100進(jìn)行
27與所檢測(cè)的動(dòng)作的含義相關(guān)的處理(考慮到功能可見性的處理),因此用戶將感覺到在用戶自己的動(dòng)作和信息處理設(shè)備100進(jìn)行的處理(或信息處理設(shè)備100使得外部設(shè)備進(jìn)行的處理)之間的不一致性的機(jī)會(huì)將進(jìn)一步減小。因此,信息處理設(shè)備100可以進(jìn)一步改善用戶可操作性。另外,在確定已經(jīng)進(jìn)行了預(yù)定操作的情況下(在已經(jīng)檢測(cè)到預(yù)定動(dòng)作的情況下), 信息處理設(shè)備100可以進(jìn)一步進(jìn)行通知處理,其中,通知用戶已經(jīng)在信息處理設(shè)備100處確定已經(jīng)進(jìn)行了預(yù)定動(dòng)作。此外,在進(jìn)行通知處理的情況下,在確定了從已確定進(jìn)行了預(yù)定動(dòng)作起已經(jīng)持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的情況下,信息處理設(shè)備100進(jìn)行與已經(jīng)確定的預(yù)定動(dòng)作對(duì)應(yīng)的處理?,F(xiàn)在,通過信息處理設(shè)備100進(jìn)行通知處理,可以使得用戶理解用戶進(jìn)行的動(dòng)作已經(jīng)被信息處理設(shè)備100識(shí)別,因此用戶可以通過停止他/她自己的動(dòng)作來取消在信息處理設(shè)備100處的對(duì)應(yīng)于該動(dòng)作的處理的執(zhí)行。因此,例如,在用戶進(jìn)行了預(yù)定動(dòng)作且信息處理設(shè)備100已經(jīng)識(shí)別到此之后用戶期望取消在信息處理設(shè)備100處的對(duì)應(yīng)于該動(dòng)作的處理的執(zhí)行的情況下,或甚至在信息處理設(shè)備100恰巧錯(cuò)誤地檢測(cè)用戶進(jìn)行的動(dòng)作的情況下,用戶可以通過他/她自己的動(dòng)作來控制對(duì)應(yīng)于該動(dòng)作的在信息處理設(shè)備100處的處理的執(zhí)行。因此,通過進(jìn)行通知處理且進(jìn)一步選擇性地進(jìn)行與在確定了已經(jīng)持續(xù)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段的情況下確定的預(yù)定動(dòng)作對(duì)應(yīng)的處理,信息處理設(shè)備100可以防止用戶不意圖的處理由于錯(cuò)誤檢測(cè)而被執(zhí)行,且因此可以進(jìn)一步改善用戶便利性和可操作性。雖然以信息處理設(shè)備100作為本公開的實(shí)施例進(jìn)行了描述,但本公開的實(shí)施例不限于該形式。本公開的實(shí)施例可以應(yīng)用于各種設(shè)備,比如例如諸如PC和服務(wù)器的計(jì)算機(jī)、 諸如電視接收機(jī)和標(biāo)志設(shè)備的顯示設(shè)備、諸如蜂窩電話的便攜式通信設(shè)備、視頻/音頻播放器(或視頻/音頻記錄器-播放器)、游戲設(shè)備等。此外,雖然以顯示系統(tǒng)200作為本公開的實(shí)施例進(jìn)行了描述,但本公開的實(shí)施例不限于該形式。本公開的實(shí)施例可以應(yīng)用于能夠顯示和成像的各種設(shè)備,比如例如諸如PC 的計(jì)算機(jī)、諸如電視接收機(jī)和標(biāo)志設(shè)備的顯示設(shè)備、諸如蜂窩電話的便攜式通信設(shè)備等。注意,根據(jù)本公開的實(shí)施例的顯示系統(tǒng)200可以是進(jìn)行顯示的設(shè)備和進(jìn)行成像的設(shè)備的組
I=I O3.根據(jù)本公開的實(shí)施例的程序可以通過用于使得計(jì)算機(jī)起著根據(jù)本公開的實(shí)施例的信息處理設(shè)備的作用的程序(用于實(shí)現(xiàn)例如上述處理(1)(面部區(qū)域檢測(cè)處理)到處理(執(zhí)行處理)的程序、或用于實(shí)現(xiàn)上述處理(I)(面部區(qū)域檢測(cè)處理)到處理(V)(執(zhí)行處理)的程序)來改善用戶可操作性。已經(jīng)參考附圖詳細(xì)地說明了本發(fā)明的優(yōu)選實(shí)施例,但不用說,本公開不局限于這些例子。對(duì)本領(lǐng)域技術(shù)人員將顯而易見的是,可以在權(quán)利要求的范圍內(nèi)進(jìn)行各種替換和修改,這自然被本公開的技術(shù)范圍所包括。例如,在圖14、16和17中,示出了其中根據(jù)本公開的第一到第三實(shí)施例的信息處理設(shè)備100(包括修改)分別具有檢測(cè)單元108、動(dòng)作區(qū)域設(shè)置單元110、動(dòng)作確定單元112、 通知處理單元114和處理單元116的例子,但根據(jù)本公開的實(shí)施例的信息處理設(shè)備的配置不限于上述。例如,根據(jù)本公開的實(shí)施例的信息處理設(shè)備可以具有被形成為單個(gè)組件(例如,用單個(gè)處理電路實(shí)現(xiàn))的檢測(cè)單元108、動(dòng)作區(qū)域設(shè)置單元110、動(dòng)作確定單元112、通知處理單元114和處理單元116。此外,信息處理設(shè)備可以具有集成的可選組件,比如例如被形成為單個(gè)組件(例如,用單個(gè)圖像處理電路實(shí)現(xiàn)的圖像處理單元)的檢測(cè)單元108和動(dòng)作區(qū)域設(shè)置單元110等。另外,例如,信息處理設(shè)備可以分別具有用于進(jìn)行識(shí)別信息的記錄的信息存儲(chǔ)單元(未示出)。此外,雖然在以上描述中,已經(jīng)例示了用于使得計(jì)算機(jī)起著提供的根據(jù)本公開的實(shí)施例的信息處理設(shè)備的作用的程序(計(jì)算機(jī)程序),但是本公開的實(shí)施例還可以提供其中存儲(chǔ)了上述程序的存儲(chǔ)介質(zhì)。上述配置是本公開的實(shí)施例的例子的例示,且自然屬于本公開的技術(shù)范圍。本公開包含涉及在2010年9月7日在日本專利局提交的日本優(yōu)先權(quán)專利申請(qǐng)JP 2010-20(^64中公開的主題,其全部?jī)?nèi)容被引用附于此。本領(lǐng)域技術(shù)人員應(yīng)該理解,可以取決于設(shè)計(jì)需求或其他因素,進(jìn)行各種修改、組合、子組合和變更,只要它們處于所附權(quán)利要求或其等效物的范圍內(nèi)。
權(quán)利要求
1.一種處理設(shè)備,包括存儲(chǔ)器,用于存儲(chǔ)檢測(cè)信息;以及至少一個(gè)處理器,用于檢測(cè)圖像的面部區(qū)域,根據(jù)面部區(qū)域的位置來設(shè)置至少一個(gè)動(dòng)作區(qū)域,為了確定是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作的目的,將與該至少一個(gè)動(dòng)作區(qū)域?qū)?yīng)的圖像數(shù)據(jù)與檢測(cè)信息相比較,并當(dāng)確定已經(jīng)進(jìn)行了預(yù)定動(dòng)作時(shí),生成通知。
2.根據(jù)權(quán)利要求1所述的處理設(shè)備,其中,當(dāng)確定已經(jīng)進(jìn)行預(yù)定動(dòng)作達(dá)預(yù)定時(shí)間段時(shí), 所述處理器進(jìn)行對(duì)應(yīng)于所述預(yù)定動(dòng)作的處理。
3.根據(jù)權(quán)利要求1所述的處理設(shè)備,其中,所述通知是視覺通知。
4.根據(jù)權(quán)利要求3所述的處理設(shè)備,其中,所述通知包括在顯示屏幕上顯示圖像。
5.根據(jù)權(quán)利要求4所述的處理設(shè)備,其中,所述通知包括在至少一個(gè)動(dòng)作區(qū)域上疊加通知對(duì)象。
6.根據(jù)權(quán)利要求4所述的處理設(shè)備,其中,所述通知包括遮蔽圖像的一部分。
7.根據(jù)權(quán)利要求3所述的處理設(shè)備,其中,所述通知包括在顯示屏幕上顯示的另一圖像上顯示圖標(biāo)。
8.根據(jù)權(quán)利要求3所述的處理設(shè)備,其中,所述通知包括改變?cè)陲@示屏幕的外側(cè)部分上提供的發(fā)光設(shè)備的狀態(tài)。
9.根據(jù)權(quán)利要求1所述的處理設(shè)備,其中,所述通知是音頻通知。
10.根據(jù)權(quán)利要求1所述的處理設(shè)備,其中,所述預(yù)定動(dòng)作對(duì)應(yīng)于圖像的周期性分量。
11.根據(jù)權(quán)利要求10所述的處理設(shè)備,其中,將與該至少一個(gè)動(dòng)作區(qū)域?qū)?yīng)的圖像數(shù)據(jù)與檢測(cè)信息相比較包括檢測(cè)周期性分量是否出現(xiàn)在該至少一個(gè)動(dòng)作區(qū)域中,并檢測(cè)該檢測(cè)信息是否將周期性分量與預(yù)定動(dòng)作相關(guān)聯(lián)。
12.根據(jù)權(quán)利要求1所述的處理設(shè)備,其中,為了確定是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作的目的將與該至少一個(gè)動(dòng)作區(qū)域?qū)?yīng)的圖像數(shù)據(jù)與檢測(cè)信息相比較包括從面部區(qū)域提取面部信息,且確定是否存在與該面部信息對(duì)應(yīng)的個(gè)體檢測(cè)信息,且當(dāng)存在與該面部信息對(duì)應(yīng)的個(gè)體檢測(cè)信息時(shí),為了確定是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作的目的,將與該至少一個(gè)動(dòng)作區(qū)域?qū)?yīng)的圖像數(shù)據(jù)與該個(gè)體檢測(cè)信息性相比較。
13.根據(jù)權(quán)利要求12所述的處理設(shè)備,其中,存在個(gè)體檢測(cè)信息,且所述個(gè)體檢測(cè)信息包括圖像的一個(gè)或多個(gè)周期性分量。
14.根據(jù)權(quán)利要求12所述的處理設(shè)備,其中,存在個(gè)體檢測(cè)信息,且所述至少一個(gè)處理器響應(yīng)于檢測(cè)到預(yù)定動(dòng)作來更新該個(gè)體檢測(cè)信息。
15.根據(jù)權(quán)利要求1所述的處理設(shè)備,其中,確定是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作包括檢測(cè)在至少一個(gè)動(dòng)作區(qū)域中是否存在運(yùn)動(dòng)體。
16.根據(jù)權(quán)利要求1所述的處理設(shè)備,其中,所述至少一個(gè)動(dòng)作區(qū)域是矩形的,且基于所述面部區(qū)域的高度和寬度來確定所述至少一個(gè)動(dòng)作區(qū)域的尺寸。
17.根據(jù)權(quán)利要求1所述的處理設(shè)備,其中,根據(jù)面部區(qū)域的位置來設(shè)置至少一個(gè)動(dòng)作區(qū)域包括從面部區(qū)域提取面部信息,確定是否與提取的面部信息對(duì)應(yīng)的用戶,且當(dāng)存在對(duì)應(yīng)的用戶時(shí),基于該對(duì)應(yīng)的用戶來設(shè)置該至少一個(gè)動(dòng)作區(qū)域的至少一個(gè)特征。
18.根據(jù)權(quán)利要求1所述的處理設(shè)備,其中,所述設(shè)備不檢測(cè)在所述至少一個(gè)動(dòng)作區(qū)域之外發(fā)生的預(yù)定動(dòng)作。
19.一種處理方法,包括 檢測(cè)圖像的面部區(qū)域;根據(jù)面部區(qū)域的位置來設(shè)置至少一個(gè)動(dòng)作區(qū)域;為了確定是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作的目的,將與該至少一個(gè)動(dòng)作區(qū)域?qū)?yīng)的圖像數(shù)據(jù)與檢測(cè)信息相比較;以及當(dāng)確定已經(jīng)進(jìn)行了預(yù)定動(dòng)作時(shí),生成通知。
20.一種存儲(chǔ)用于實(shí)現(xiàn)處理方法的計(jì)算機(jī)可讀程序的非暫時(shí)計(jì)算機(jī)可讀介質(zhì),所述處理方法包括檢測(cè)圖像的面部區(qū)域;根據(jù)面部區(qū)域的位置來設(shè)置至少一個(gè)動(dòng)作區(qū)域;為了確定是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作的目的,將與該至少一個(gè)動(dòng)作區(qū)域?qū)?yīng)的圖像數(shù)據(jù)與檢測(cè)信息相比較;以及當(dāng)確定已經(jīng)進(jìn)行了預(yù)定動(dòng)作時(shí),生成通知。
全文摘要
提供處理設(shè)備和方法。根據(jù)例示實(shí)施例,通過以下來實(shí)現(xiàn)所述設(shè)備和方法檢測(cè)圖像的面部區(qū)域,根據(jù)面部區(qū)域的位置來設(shè)置至少一個(gè)動(dòng)作區(qū)域,為了確定是否已經(jīng)進(jìn)行了預(yù)定動(dòng)作的目的,將與該至少一個(gè)動(dòng)作區(qū)域?qū)?yīng)的圖像數(shù)據(jù)與檢測(cè)信息相比較,以及當(dāng)確定已經(jīng)進(jìn)行了預(yù)定動(dòng)作時(shí),生成通知。
文檔編號(hào)G06F3/048GK102402383SQ20111025441
公開日2012年4月4日 申請(qǐng)日期2011年8月31日 優(yōu)先權(quán)日2010年9月7日
發(fā)明者近藤真生, 阪井佑介, 鶴見辰吾 申請(qǐng)人:索尼公司