基于面部識(shí)別來(lái)控制終端操作的設(shè)備和方法
【專(zhuān)利摘要】提供一種基于面部識(shí)別來(lái)控制終端操作的設(shè)備和方法。所述設(shè)備包括:圖像采集單元,用于在操作控制單元的控制下采集用戶(hù)的面部圖像;圖像識(shí)別單元,用于從由圖像采集單元采集的面部圖像中識(shí)別出面部特征;以及操作控制單元,用于控制圖像采集單元來(lái)采集用戶(hù)的面部圖像,并基于由圖像識(shí)別單元識(shí)別出的不同面部特征來(lái)控制終端以不同方式執(zhí)行操作。
【專(zhuān)利說(shuō)明】基于面部識(shí)別來(lái)控制終端操作的設(shè)備和方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及控制終端操作的技術(shù),尤其涉及一種基于用戶(hù)的不同面部特征來(lái)控制終端以不同方式執(zhí)行操作的設(shè)備和方法。
【背景技術(shù)】
[0002]隨著信息技術(shù)的發(fā)展,諸如移動(dòng)電話(huà)、平板電腦、多媒體播放器的各種終端成為人們生活中的必需品,這使得人們會(huì)非常頻繁地使用這些終端。相應(yīng)地,在許多不方便直接操作終端的情況下,用戶(hù)便難以通過(guò)有效的方式對(duì)終端執(zhí)行相應(yīng)的操作。
[0003]為了解決這一問(wèn)題,現(xiàn)有技術(shù)中采用了聲音識(shí)別、手勢(shì)識(shí)別等輔助手段來(lái)控制終端的操作。然而,聲音識(shí)別對(duì)背景噪聲的要求較高,不適用于比較嘈雜的環(huán)境。另一方面,盡管手勢(shì)識(shí)別能夠幫助執(zhí)行諸如接聽(tīng)呼叫等操作,但是在很多不便直接操作終端的情況下,用戶(hù)的雙手可能被完全占用,以致無(wú)法做出可被識(shí)別的手勢(shì)。而且,現(xiàn)有技術(shù)中對(duì)聲音或圖像的識(shí)別精度均受到一定的限制,因此,很可能出現(xiàn)無(wú)法正確識(shí)別用戶(hù)意圖的情況,導(dǎo)致未能執(zhí)行相應(yīng)操作或錯(cuò)誤地執(zhí)行了其它操作。
[0004]因此,需要一種在用戶(hù)不便用手操作終端的情況下,能夠有效地控制終端執(zhí)行相應(yīng)操作的技術(shù)方案。
【發(fā)明內(nèi)容】
[0005]本發(fā)明的目的在于提供一種能夠在不方便直接操作終端的情況下,基于面部識(shí)別來(lái)有效地控制終端以不同方式執(zhí)行期望的操作的設(shè)備和方法。
[0006]根據(jù)本發(fā)明的一方面,提供一種基于面部識(shí)別來(lái)控制終端操作的設(shè)備,所述設(shè)備包括:圖像采集單元,用于在操作控制單元的控制下采集用戶(hù)的面部圖像;圖像識(shí)別單元,用于從由圖像采集單元采集的面部圖像中識(shí)別出面部特征;以及操作控制單元,用于控制圖像采集單元來(lái)采集用戶(hù)的面部圖像,并基于由圖像識(shí)別單元識(shí)別出的不同面部特征來(lái)控制終端以不同方式執(zhí)行操作。
[0007]所述操作可包括終端針對(duì)呼叫執(zhí)行的操作。
[0008]所述設(shè)備可還包括:輸出單元,用于在操作控制單元的控制下輸出用于提醒用戶(hù)所述圖像采集單元即將采集用戶(hù)的面部圖像的提示信號(hào),其中,所述提示信號(hào)為以下項(xiàng)中的至少一個(gè):提示音頻、提示視頻、提示圖像、提示文本。
[0009]當(dāng)終端接收到來(lái)話(huà)呼叫時(shí),操作控制單元可控制圖像采集單元開(kāi)始在預(yù)定時(shí)間段期間采集用戶(hù)的面部圖像,或控制圖像采集單元在預(yù)定時(shí)間段之后開(kāi)始采集用戶(hù)的面部圖像,當(dāng)圖像識(shí)別單元從所述面部圖像中識(shí)別出的面部特征指示應(yīng)答所述來(lái)話(huà)呼叫時(shí),操作控制單元控制終端以不同的接聽(tīng)方式應(yīng)答所述來(lái)話(huà)呼叫,當(dāng)圖像采集單元持續(xù)采集不到用戶(hù)的面部圖像或圖像識(shí)別單元從所述面部圖像中識(shí)別出的面部特征指示拒絕所述來(lái)話(huà)呼叫時(shí),操作控制單元控制終端拒絕所述來(lái)話(huà)呼叫。
[0010]當(dāng)終端接收到來(lái)話(huà)呼叫時(shí),操作控制單元可首先控制輸出單元輸出提示信號(hào),并控制圖像采集單元在所述提示信號(hào)被輸出預(yù)定時(shí)間之后開(kāi)始采集用戶(hù)的面部圖像,當(dāng)圖像識(shí)別單元從所述面部圖像中識(shí)別出的面部特征指示應(yīng)答所述來(lái)話(huà)呼叫時(shí),操作控制單元根據(jù)所述面部特征來(lái)控制終端以不同的接聽(tīng)方式應(yīng)答所述來(lái)話(huà)呼叫。
[0011]指示應(yīng)答所述來(lái)話(huà)呼叫的面部特征可包括預(yù)先設(shè)置的應(yīng)答面部區(qū)域或應(yīng)答面部動(dòng)作,其中,所述應(yīng)答面部區(qū)域或應(yīng)答面部動(dòng)作被設(shè)置為具有鮮明的特點(diǎn),從而防止對(duì)面部特征的誤判。
[0012]所述應(yīng)答面部區(qū)域可指帶有耳朵的側(cè)臉或嘴巴張開(kāi)的正臉,所述應(yīng)答面部動(dòng)作是指點(diǎn)頭或嘴巴張開(kāi)。
[0013]當(dāng)指示應(yīng)答所述來(lái)話(huà)呼叫的面部特征是帶有耳朵的側(cè)臉時(shí),操作控制單元可控制終端以普通方式應(yīng)答所述來(lái)話(huà)呼叫;當(dāng)指示應(yīng)答所述來(lái)話(huà)呼叫的面部特征是嘴巴張開(kāi)的正臉時(shí),操作控制單元可控制終端以免提方式或視頻通話(huà)方式應(yīng)答所述來(lái)話(huà)呼叫。
[0014]在所述來(lái)話(huà)呼叫的通話(huà)期間,操作控制單元可根據(jù)用戶(hù)與終端之間的距離變化來(lái)相應(yīng)地調(diào)整終端的音量,其中,由圖像識(shí)別單元識(shí)別出的面部特征來(lái)確定用戶(hù)與終端之間的距離變化。
[0015]在所述來(lái)話(huà)呼叫的通話(huà)期間,操作控制單元可控制圖像采集單元周期性地采集用戶(hù)的面部圖像,并且圖像識(shí)別單元從所述面部圖像中識(shí)別面部特征,其中,當(dāng)圖像識(shí)別單元從所述面部圖像中識(shí)別出的面部特征指示不同于當(dāng)前的接聽(tīng)方式時(shí),操作控制單元根據(jù)所述面部特征來(lái)切換終端的接聽(tīng)方式,當(dāng)圖像采集單元持續(xù)采集不到用戶(hù)的面部圖像或圖像識(shí)別單元從所述面部圖像中識(shí)別出的面部特征指示結(jié)束所述來(lái)話(huà)呼叫時(shí),操作控制單元控制終端結(jié)束所述來(lái)話(huà)呼叫。
[0016]指示結(jié)束所述來(lái)話(huà)呼叫的面部特征可包括預(yù)先設(shè)置的結(jié)束面部區(qū)域或結(jié)束面部動(dòng)作,其中,所述結(jié)束面部區(qū)域或結(jié)束面部動(dòng)作被設(shè)置為具有鮮明的特點(diǎn),從而防止對(duì)面部特征的誤判。
[0017]所述結(jié)束面部區(qū)域可指后腦,所述結(jié)束面部動(dòng)作可指搖頭。
[0018]在所述來(lái)話(huà)呼叫的通話(huà)期間,操作控制單元可在到達(dá)計(jì)費(fèi)時(shí)間單位之前的預(yù)定時(shí)間控制輸出單元輸出提示信號(hào),并隨后控制圖像采集單元采集用戶(hù)的面部圖像,從而使用戶(hù)能夠在計(jì)費(fèi)時(shí)間單位到達(dá)之前指示結(jié)束所述來(lái)話(huà)呼叫。
[0019]根據(jù)本發(fā)明的另一方面,提供一種基于面部識(shí)別來(lái)控制終端操作的方法,所述方法包括:采集用戶(hù)的面部圖像;從采集的面部圖像中識(shí)別出面部特征;以及基于識(shí)別出的不同面部特征來(lái)控制終端以不同方式執(zhí)行操作。
[0020]所述方法可還包括:在采集用戶(hù)的面部圖像之前,輸出用于提醒用戶(hù)所述圖像采集單元即將采集用戶(hù)的面部圖像的提示信號(hào),其中,所述提示信號(hào)為以下項(xiàng)中的至少一個(gè):提示音頻、提示視頻、提示文本。
[0021]根據(jù)本發(fā)明的基于面部識(shí)別來(lái)控制終端操作的設(shè)備和方法,可在不方便直接用手操作終端的情況下,通過(guò)識(shí)別出的不同面部特征來(lái)控制終端以不同方式執(zhí)行操作,在此基礎(chǔ)上,還可提高基于面部識(shí)別來(lái)控制終端進(jìn)行操作的準(zhǔn)確性和便利性。
【專(zhuān)利附圖】
【附圖說(shuō)明】
[0022]通過(guò)下面結(jié)合附圖進(jìn)行的對(duì)實(shí)施例的描述,本發(fā)明的上述和/或其它目的和優(yōu)點(diǎn)將會(huì)變得更加清楚,其中:
[0023]圖1是示出根據(jù)本發(fā)明示例性實(shí)施例的基于面部識(shí)別來(lái)控制終端操作的設(shè)備的框圖;
[0024]圖2是示出根據(jù)本發(fā)明示例性實(shí)施例的基于面部識(shí)別來(lái)控制終端操作的方法的流程圖;
[0025]圖3是示出根據(jù)本發(fā)明另一示例性實(shí)施例的在接收到來(lái)話(huà)呼叫時(shí)采集面部圖像的方法的流程圖;
[0026]圖4是示出根據(jù)本發(fā)明另一示例性實(shí)施例的基于面部識(shí)別來(lái)應(yīng)答來(lái)話(huà)呼叫的方法的流程圖;
[0027]圖5是示出根據(jù)本發(fā)明另一示例性實(shí)施例的基于面部識(shí)別來(lái)控制終端音量的方法的流程圖;以及
[0028]圖6是示出根據(jù)本發(fā)明另一示例性實(shí)施例的基于面部識(shí)別來(lái)結(jié)束來(lái)話(huà)呼叫的方法的流程圖。
【具體實(shí)施方式】
[0029]現(xiàn)將詳細(xì)參照本發(fā)明的實(shí)施例,所述實(shí)施例的示例在附圖中示出,其中,相同的標(biāo)號(hào)始終指的是相同的部件。以下將通過(guò)參照附圖來(lái)說(shuō)明所述實(shí)施例,以便解釋本發(fā)明。
[0030]圖1是示出根據(jù)本發(fā)明示例性實(shí)施例的基于面部識(shí)別來(lái)控制終端操作的設(shè)備的框圖,所述基于面部識(shí)別來(lái)控制終端操作的設(shè)備包括圖像采集單元10、圖像識(shí)別單元20和操作控制單元30。
[0031]圖像采集單元10用于在操作控制單元30的控制下采集用戶(hù)的面部圖像。作為示例,圖像采集單元10可以是攝像頭,該攝像頭可采集各種格式的用戶(hù)面部圖像,例如,黑白圖像、彩色圖像或深度圖像等。這里,圖像采集單元10可采集靜止圖像或運(yùn)動(dòng)圖像。
[0032]圖像識(shí)別單元20用于從由圖像采集單元10采集的面部圖像中識(shí)別出面部特征。這里,圖像識(shí)別單元20可采用任何圖像識(shí)別技術(shù)來(lái)識(shí)別出面部特征,而且任何易于識(shí)別的面部特征均可被應(yīng)用于本發(fā)明以解決相應(yīng)的技術(shù)問(wèn)題。
[0033]作為優(yōu)選方式,圖像識(shí)別單元20可識(shí)別出特定面部區(qū)域或面部動(dòng)作來(lái)作為面部特征。為了實(shí)現(xiàn)良好的識(shí)別效果,作為示例,圖像識(shí)別單元20可識(shí)別出諸如帶有耳朵的側(cè)臉或嘴巴張開(kāi)的正臉等,也可識(shí)別出諸如點(diǎn)頭或搖頭等動(dòng)作。
[0034]操作控制單元30用于控制圖像采集單元10來(lái)采集用戶(hù)的面部圖像,并基于由圖像識(shí)別單元20識(shí)別出的不同面部特征來(lái)控制終端以不同方式執(zhí)行操作。具體說(shuō)來(lái),由于圖像采集單元10的采集操作受控于操作控制單元30,因此可有效地控制采集圖像的時(shí)機(jī),而不需要圖像采集單元10始終處于工作狀態(tài)。此外,操作控制單元30基于由圖像識(shí)別單元20識(shí)別出的不同面部特征來(lái)控制終端以不同方式執(zhí)行操作。這里,識(shí)別出的面部特征可被用于確定終端執(zhí)行操作的特定方式,作為示例,這種不同面部特征與執(zhí)行操作的不同方式之間的對(duì)應(yīng)關(guān)系可在終端出廠時(shí)被設(shè)置,也可由用戶(hù)根據(jù)自己的需要來(lái)進(jìn)行設(shè)置?;蛘?,可通過(guò)相應(yīng)的訓(xùn)練過(guò)程來(lái)得到面部特征與操作方式之間的對(duì)應(yīng)關(guān)系。因此,不僅是特定面部區(qū)域或面部動(dòng)作可對(duì)應(yīng)于終端執(zhí)行操作的特定方式,而且面部動(dòng)作的組合或面部區(qū)域的變換也可被設(shè)置為對(duì)應(yīng)于終端執(zhí)行操作的特定方式。[0035]此外,作為附加的優(yōu)選方式,所述基于面部識(shí)別來(lái)控制終端操作的設(shè)備還可包括輸出單元40,用于在操作控制單元30的控制下輸出用于提醒用戶(hù)所述圖像采集單元10即將采集用戶(hù)的面部圖像的提示信號(hào),其中,所述提示信號(hào)為提示音頻、提示視頻、提示圖像或提示文本。作為優(yōu)選方式,所述提示信號(hào)可以是上述信號(hào)之間的任意組合。由于輸出單元40會(huì)在圖像采集單元10實(shí)際開(kāi)始采集用戶(hù)的面部圖像之前向用戶(hù)輸出提示信號(hào),因此,可提醒用戶(hù)調(diào)整好相應(yīng)的面部動(dòng)作,從而進(jìn)一步提高面部識(shí)別的準(zhǔn)確性和有效性。
[0036]以下將結(jié)合圖2來(lái)描述根據(jù)本發(fā)明示例性實(shí)施例的基于面部識(shí)別來(lái)控制終端操作的方法。如圖2所示,在步驟S100,由圖像采集單元10采集用戶(hù)的面部圖像。作為示例,圖像采集單元10可在步驟SlOO采集各種格式的用戶(hù)面部圖像,例如,黑白圖像、彩色圖像或深度圖像等。此外,圖像采集單元10在步驟SlOO采集的圖像不僅可以是靜止圖像,還可以是運(yùn)動(dòng)圖像。
[0037]接著,在步驟S200,由圖像識(shí)別單元20從由圖像采集單元10采集的面部圖像中識(shí)別出面部特征。作為示例,圖像識(shí)別單元20可在步驟S200采用任何圖像識(shí)別技術(shù)來(lái)識(shí)別出面部特征。并且,圖像識(shí)別單元20可在步驟S200識(shí)別出特定面部區(qū)域或面部動(dòng)作來(lái)作為面部特征。例如,圖像識(shí)別單元20在步驟S200識(shí)別出的面部特征可包括諸如帶有耳朵的側(cè)臉或嘴巴張開(kāi)的正臉等,也可包括諸如點(diǎn)頭或搖頭等動(dòng)作。
[0038]在操作S300,由操作控制單元30基于由圖像識(shí)別單元20識(shí)別出的不同面部特征來(lái)控制終端以不同方式執(zhí)行操作。這里,識(shí)別出的面部特征可被用于確定終端執(zhí)行操作的特定方式,作為示例,這種不同面部特征與執(zhí)行操作的不同方式之間的對(duì)應(yīng)關(guān)系可在終端出廠時(shí)被設(shè)置,也可由用戶(hù)根據(jù)自己的需要來(lái)進(jìn)行設(shè)置?;蛘?,可通過(guò)相應(yīng)的訓(xùn)練過(guò)程來(lái)得到面部特征與操作方式之間的對(duì)應(yīng)關(guān)系。因此,操作控制單元30在步驟S300不僅可基于特定面部區(qū)域或面部動(dòng)作來(lái)控制終端執(zhí)行操作的特定方式,而且可基于面部動(dòng)作的組合或面部區(qū)域的變換來(lái)控制終端執(zhí)行操作的特定方式。
[0039]作為優(yōu)選方式,圖2所示的方法還在步驟SlOO之前由輸出單元40輸出提示信號(hào),以提醒用戶(hù)所述圖像采集單元10即將采集用戶(hù)的面部圖像。通過(guò)這一方式,可提醒用戶(hù)調(diào)整好相應(yīng)的面部動(dòng)作,從而進(jìn)一步提高面部識(shí)別的準(zhǔn)確性和有效性。
[0040]本領(lǐng)域技術(shù)人員應(yīng)理解:可將結(jié)合圖2描述的方法應(yīng)用于各種不同的終端操作情況,并針對(duì)相應(yīng)的情況來(lái)設(shè)置附加的處理步驟,以進(jìn)一步提高控制終端進(jìn)行操作的有效性。
[0041]作為示例,圖1所示的設(shè)備可被應(yīng)用于控制終端以不同方式針對(duì)來(lái)話(huà)呼叫執(zhí)行操作。在這種情況下,當(dāng)終端接收到來(lái)話(huà)呼叫時(shí),操作控制單元30可控制圖像采集單元10開(kāi)始在預(yù)定時(shí)間段期間采集用戶(hù)的面部圖像,或控制圖像采集單元10在預(yù)定時(shí)間段之后開(kāi)始采集用戶(hù)的面部圖像,當(dāng)圖像識(shí)別單元20從所述面部圖像中識(shí)別出的面部特征指示應(yīng)答所述來(lái)話(huà)呼叫時(shí),操作控制單元30控制終端以不同的接聽(tīng)方式應(yīng)答所述來(lái)話(huà)呼叫,當(dāng)圖像采集單元10 —直采集不到用戶(hù)的面部圖像或圖像識(shí)別單元10從所述面部圖像中識(shí)別出的面部特征指示拒絕所述來(lái)話(huà)呼叫時(shí),操作控制單元30控制終端拒絕所述來(lái)話(huà)呼叫。
[0042]根據(jù)本發(fā)明的示例性實(shí)施例,在所述來(lái)話(huà)呼叫的通話(huà)期間,操作控制單元30可控制圖像采集單元10周期性地采集用戶(hù)的面部圖像,并且圖像識(shí)別單元20從所述面部圖像中識(shí)別面部特征,其中,當(dāng)圖像識(shí)別單元20從所述面部圖像中識(shí)別出的面部特征指示不同于當(dāng)前的接聽(tīng)方式時(shí),操作控制單元30根據(jù)所述面部特征來(lái)切換終端的接聽(tīng)方式,當(dāng)圖像采集單元20持續(xù)采集不到用戶(hù)的面部圖像或圖像識(shí)別單元20從所述面部圖像中識(shí)別出的面部特征指示結(jié)束所述來(lái)話(huà)呼叫時(shí),操作控制單元30控制終端結(jié)束所述來(lái)話(huà)呼叫。
[0043]以下將結(jié)合圖3到圖6來(lái)描述根據(jù)本發(fā)明各個(gè)示例性實(shí)施例的基于面部識(shí)別來(lái)控制終端針對(duì)來(lái)話(huà)呼叫執(zhí)行操作的方法。
[0044]圖3是示出根據(jù)本發(fā)明另一示例性實(shí)施例的在接收到來(lái)話(huà)呼叫時(shí)采集面部圖像的方法的流程圖。參照?qǐng)D3所示的方法,在步驟S10,終端接收到來(lái)話(huà)呼叫。然后,在步驟S20,操作控制單元30首先控制輸出單元40輸出提示信號(hào),以提醒用戶(hù)所述圖像采集單元10即將采集用戶(hù)的面部圖像。作為示例,所述提示信號(hào)為提示音頻、提示視頻、提示圖像或提示文本。作為優(yōu)選方式,所述提示信號(hào)可以是上述信號(hào)之間的任意組合。例如,輸出單元40可輸出單一頻率的聲音、帶有旋律的音樂(lè)或提醒用戶(hù)進(jìn)行相應(yīng)動(dòng)作的說(shuō)明性語(yǔ)句(例如,“請(qǐng)張開(kāi)嘴巴以接聽(tīng)呼叫”、“請(qǐng)將耳朵貼近以接聽(tīng)呼叫”)等?;蛘?,輸出單元40可在輸出上述說(shuō)明性語(yǔ)句的同時(shí)還輸出相關(guān)的示例圖(如,張開(kāi)的嘴巴或貼近的耳朵等)。在輸出單元40輸出提示信號(hào)之后,操作控制單元30在步驟S30判斷預(yù)定時(shí)間是否過(guò)去,這里的預(yù)定時(shí)間可被設(shè)置為用戶(hù)準(zhǔn)備好進(jìn)行面部采集的時(shí)間。當(dāng)所述預(yù)定時(shí)間過(guò)去之后,在步驟S100,操作控制單元30才控制圖像采集單元10開(kāi)始采集用戶(hù)的面部圖像。
[0045]可以看出,由于操作控制單元30對(duì)輸出單元40和圖像采集單元10的上述控制流程,使得在終端接收到來(lái)話(huà)呼叫之后,用戶(hù)可被及時(shí)提醒即將開(kāi)始面部采集,從而圖像采集單元10的采集結(jié)果更為準(zhǔn)確。此外,還能夠有效地控制圖像采集單元10的工作時(shí)間,有利于延長(zhǎng)圖像采集單元10的使用壽命。
[0046]圖4是示出根據(jù)本發(fā)明另一示例性實(shí)施例的基于面部識(shí)別來(lái)應(yīng)答來(lái)話(huà)呼叫的方法的流程圖。參照?qǐng)D4所示的方法,在步驟S200,由圖像識(shí)別單元20從由圖像采集單元10采集的面部圖像中識(shí)別出不同的面部特征。這里,如果圖像采集單元10在預(yù)定的采集時(shí)限內(nèi)一直采集不到用戶(hù)的面部圖像,則操作控制單元30控制終端拒絕所述來(lái)話(huà)呼叫。
[0047]如果圖像采集單元10在預(yù)定的采集實(shí)現(xiàn)內(nèi)采集到用戶(hù)的面部圖像,則在步驟S210,操作單元30確定由圖像識(shí)別單元20識(shí)別出的面部特征是否指示應(yīng)答所述來(lái)話(huà)呼叫。
[0048]當(dāng)圖像識(shí)別單元20從所述面部圖像中識(shí)別出的面部特征指示應(yīng)答所述來(lái)話(huà)呼叫時(shí),操作控制單元30在步驟S230根據(jù)所述面部特征來(lái)控制終端以不同的接聽(tīng)方式應(yīng)答所述來(lái)話(huà)呼叫。指示應(yīng)答所述來(lái)話(huà)呼叫的面部特征包括預(yù)先設(shè)置的應(yīng)答面部區(qū)域或應(yīng)答面部動(dòng)作,其中,所述應(yīng)答面部區(qū)域(例如,帶有耳朵的側(cè)臉或嘴巴張開(kāi)的正臉)或應(yīng)答面部動(dòng)作(例如,點(diǎn)頭或嘴巴張開(kāi))被設(shè)置為具有鮮明的特點(diǎn),從而防止對(duì)面部特征的誤判。
[0049]另外,當(dāng)圖像識(shí)別單元20在步驟S210識(shí)別出指示拒絕所述來(lái)話(huà)呼叫的面部特征時(shí),在步驟S220,操作控制單元30控制終端拒絕所述來(lái)話(huà)呼叫。
[0050]作為優(yōu)選方式,在操作S230,操作控制單元30可根據(jù)指示應(yīng)答所述來(lái)話(huà)呼叫的具體面部特征來(lái)控制終端以不同的方式應(yīng)答所述來(lái)話(huà)呼叫。例如,當(dāng)指示應(yīng)答所述來(lái)話(huà)呼叫的面部特征是帶有耳朵的側(cè)臉時(shí),操作控制單元30控制終端以普通方式應(yīng)答所述來(lái)話(huà)呼口L當(dāng)指示應(yīng)答所述來(lái)話(huà)呼叫的面部特征是嘴巴張開(kāi)的正臉時(shí),操作控制單元30控制終端以免提方式或視頻通話(huà)方式應(yīng)答所述來(lái)話(huà)呼叫,從而更方便用戶(hù)接聽(tīng)電話(huà)。針對(duì)視頻通話(huà)方式,可將嘴巴閉合設(shè)置為拒絕來(lái)話(huà)呼叫的面部特征。
[0051]作為優(yōu)選方式,在所述來(lái)話(huà)呼叫的通話(huà)期間,操作控制單元30控制圖像采集單元10周期性地采集用戶(hù)的面部圖像,并且圖像識(shí)別單元20從所述面部圖像中識(shí)別面部特征,其中,當(dāng)圖像識(shí)別單元20從所述面部圖像中識(shí)別出的面部特征指示不同于當(dāng)前的接聽(tīng)方式時(shí),操作控制單元30根據(jù)所述面部特征來(lái)切換終端的接聽(tīng)方式。例如,當(dāng)有不相關(guān)的人靠近時(shí),用戶(hù)可將耳朵靠近圖像采集單元10,以期望將當(dāng)前的通話(huà)方式從視頻通話(huà)方式或免提方式改變?yōu)槠胀ǚ绞?,從而很好地保護(hù)隱私。另外,也可在電量不足的時(shí)候?qū)⒁曨l通話(huà)方式切換為普通方式,從而很好地節(jié)省功耗。
[0052]圖5是示出根據(jù)本發(fā)明另一示例性實(shí)施例的基于面部識(shí)別來(lái)控制終端音量的方法的流程圖。參照?qǐng)D5所示的方法,在所述來(lái)話(huà)呼叫的通話(huà)期間,操作控制單元30可控制圖像采集單元10持續(xù)采集用戶(hù)的面部圖像或周期性地采集用戶(hù)的面部圖像。然后,在步驟S200,由圖像識(shí)別單元20從由圖像采集單元10采集的面部圖像中識(shí)別出面部特征。接下來(lái),在操作S240,操作控制單元30基于由圖像識(shí)別單元20識(shí)別出的面部特征來(lái)確定用戶(hù)與終端之間的距離變化,并在步驟S250到S270根據(jù)確定的距離變化來(lái)相應(yīng)地調(diào)整終端的音量。具體說(shuō)來(lái),當(dāng)用戶(hù)與終端之間的距離變遠(yuǎn)時(shí),操作控制單元30可增加終端的音量。當(dāng)用戶(hù)與終端之間的距離保持不變時(shí),操作控制單元30可保持終端的音量。當(dāng)用戶(hù)與終端之間的距離變近時(shí),操作控制單元30可減小終端的音量。應(yīng)理解:操作控制單元30可按照完全相反的方式來(lái)根據(jù)距離變化來(lái)調(diào)整音量,即,當(dāng)距離變遠(yuǎn)時(shí)減小終端的音量,而當(dāng)距離變近時(shí)增加終端的音量。上述方式能夠?qū)崿F(xiàn)呼叫操作的音量靈活控制,便于在人多嘈雜的情況下很好地完成通話(huà)。
[0053]圖6是示出根據(jù)本發(fā)明另一示例性實(shí)施例的基于面部識(shí)別來(lái)結(jié)束來(lái)話(huà)呼叫的方法的流程圖。根據(jù)本發(fā)明的該示例性實(shí)施例,用戶(hù)可方便地主動(dòng)結(jié)束來(lái)話(huà)呼叫。具體說(shuō)來(lái),在所述來(lái)話(huà)呼叫的通話(huà)期間,操作控制單元30可在步驟S15針對(duì)預(yù)定時(shí)間進(jìn)行計(jì)時(shí)操作,并在計(jì)時(shí)操作結(jié)束之后,在步驟S20控制輸出單元40輸出相應(yīng)的提示信號(hào)。這里,作為優(yōu)選方式,所述預(yù)定時(shí)間相應(yīng)于計(jì)費(fèi)時(shí)間單位,從而操作控制單元30可在每個(gè)計(jì)費(fèi)時(shí)間單位到期之前通過(guò)控制輸出單元40輸出提示信號(hào)來(lái)提醒用戶(hù)圖像采集單元20即將開(kāi)始采集用戶(hù)的面部圖像(或在每個(gè)計(jì)費(fèi)時(shí)間單位到期之前預(yù)留出一定時(shí)間來(lái)輸出提示信號(hào),以便于用戶(hù)準(zhǔn)備好作出面部表情),這樣,如果用戶(hù)想要結(jié)束來(lái)話(huà)呼叫,則可以做出相應(yīng)的面部動(dòng)作或離開(kāi)終端,從而在相應(yīng)的計(jì)費(fèi)時(shí)間單位之內(nèi)結(jié)束來(lái)話(huà)呼叫。接著,在步驟S100,操作控制單元30控制圖像采集單元10采集用戶(hù)的面部圖像,這里,當(dāng)圖像采集單元20持續(xù)采集不到用戶(hù)的面部圖像時(shí),操作控制單元30控制終端結(jié)束所述來(lái)話(huà)呼叫。
[0054]在步驟S200,由圖像識(shí)別單元20從由圖像采集單元10采集的面部圖像中識(shí)別出面部特征。接下來(lái),在步驟S280,操作單元30確定由圖像識(shí)別單元20識(shí)別出的面部特征是否指示結(jié)束所述來(lái)話(huà)呼叫。指示結(jié)束所述來(lái)話(huà)呼叫的面部特征可包括預(yù)先設(shè)置的結(jié)束面部區(qū)域或結(jié)束面部動(dòng)作,其中,所述結(jié)束面部區(qū)域(例如,后腦)或結(jié)束面部動(dòng)作(例如,搖頭)被設(shè)置為具有鮮明的特點(diǎn),從而防止對(duì)面部特征的誤判。當(dāng)在步驟S280確定識(shí)別出的面部特征并未指示結(jié)束所述來(lái)話(huà)呼叫時(shí),處理返回步驟S15以重新開(kāi)始下一周期的計(jì)時(shí)操作。否則,當(dāng)在步驟S280確定識(shí)別出的面部特征指示結(jié)束所述來(lái)話(huà)呼叫時(shí),在步驟S290,操作控制單元30控制終端結(jié)束所述來(lái)話(huà)呼叫。
[0055]應(yīng)注意,在圖6所示的示例性實(shí)施例中,可省略步驟S20,從而在不輸出提示信號(hào)的情況下按照預(yù)定周期來(lái)采集面部圖像?;蛘?,還可進(jìn)一步將步驟S15也省略,從而圖像采集單元10被控制為持續(xù)采集用戶(hù)的面部圖像。此外,如果所述來(lái)話(huà)呼叫終止(例如,對(duì)方掛斷電話(huà)或者其它原因通話(huà)終止),則操作控制單元30可進(jìn)行控制,以停止圖像采集單元10和圖像識(shí)別單元20的操作。
[0056]根據(jù)本發(fā)明的基于面部識(shí)別來(lái)控制終端操作的設(shè)備和方法,可在不方便直接用手操作終端的情況下,通過(guò)不同的面部識(shí)別來(lái)控制終端以不同方式執(zhí)行操作,在此基礎(chǔ)上,還可提高基于面部識(shí)別來(lái)控制終端進(jìn)行操作的準(zhǔn)確性和便利性。
[0057]本發(fā)明的以上各個(gè)實(shí)施例僅僅是示例性的,而本發(fā)明并不受限于此。本領(lǐng)域技術(shù)人員應(yīng)該理解:在不脫離本發(fā)明的原理和精神的情況下,可對(duì)這些實(shí)施例進(jìn)行改變,其中,本發(fā)明的范圍在權(quán)利要求及其等同物中限定。
【權(quán)利要求】
1.一種基于面部識(shí)別來(lái)控制終端操作的設(shè)備,所述設(shè)備包括: 圖像采集單元,用于在操作控制單元的控制下采集用戶(hù)的面部圖像; 圖像識(shí)別單元,用于從由圖像采集單元采集的面部圖像中識(shí)別出面部特征;以及 操作控制單元,用于控制圖像采集單元來(lái)采集用戶(hù)的面部圖像,并基于由圖像識(shí)別單元識(shí)別出的不同面部特征來(lái)控制終端以不同方式執(zhí)行操作。
2.如權(quán)利要求1所述的設(shè)備,其中,所述操作包括終端針對(duì)呼叫執(zhí)行的操作。
3.如權(quán)利要求2所述的設(shè)備,還包括: 輸出單元,用于在操作控制單元的控制下輸出用于提醒用戶(hù)所述圖像采集單元即將采集用戶(hù)的面部圖像的提示信號(hào),其中,所述提示信號(hào)為以下項(xiàng)中的至少一個(gè):提示音頻、提示視頻、提示圖像、提示文本。
4.如權(quán)利要求2所述的設(shè)備,其中,當(dāng)終端接收到來(lái)話(huà)呼叫時(shí),操作控制單元控制圖像采集單元開(kāi)始在預(yù)定時(shí)間段期間采集用戶(hù)的面部圖像,或控制圖像采集單元在預(yù)定時(shí)間段之后開(kāi)始采集用戶(hù)的面部圖像,當(dāng)圖像識(shí)別單元從所述面部圖像中識(shí)別出的面部特征指示應(yīng)答所述來(lái)話(huà)呼叫時(shí),操作控制單元控制終端以不同的接聽(tīng)方式應(yīng)答所述來(lái)話(huà)呼叫,當(dāng)圖像采集單元持續(xù)采集不到用戶(hù)的面部圖像或圖像識(shí)別單元從所述面部圖像中識(shí)別出的面部特征指示拒絕所述來(lái)話(huà)呼叫時(shí),操作控制單元控制終端拒絕所述來(lái)話(huà)呼叫。
5.如權(quán)利要求3所述的設(shè)備,其中,當(dāng)終端接收到來(lái)話(huà)呼叫時(shí),操作控制單元首先控制輸出單元輸出提示信號(hào),并控制圖像采集單元在所述提示信號(hào)被輸出預(yù)定時(shí)間之后開(kāi)始采集用戶(hù)的面部圖像,當(dāng)圖像識(shí)別單元從所述面部圖像中識(shí)別出的面部特征指示應(yīng)答所述來(lái)話(huà)呼叫時(shí),操作控制單元根據(jù)所述面部特征來(lái)控制終端以不同的接聽(tīng)方式應(yīng)答所述來(lái)話(huà)呼口 H。
6.如權(quán)利要求4或5所述的設(shè)備,其中,指示應(yīng)答所述來(lái)話(huà)呼叫的面部特征包括預(yù)先設(shè)置的應(yīng)答面部區(qū)域或應(yīng)答面部動(dòng)作,其中,所述應(yīng)答面部區(qū)域或應(yīng)答面部動(dòng)作被設(shè)置為具有鮮明的特點(diǎn),從而防止對(duì)面部特征的誤判。
7.如權(quán)利要求6所述的設(shè)備,其中,所述應(yīng)答面部區(qū)域是指帶有耳朵的側(cè)臉或嘴巴張開(kāi)的正臉,所述應(yīng)答面部動(dòng)作是指點(diǎn)頭或嘴巴張開(kāi)。
8.如權(quán)利要求5所述的設(shè)備,其中,當(dāng)指示應(yīng)答所述來(lái)話(huà)呼叫的面部特征是帶有耳朵的側(cè)臉時(shí),操作控制單元控制終端以普通方式應(yīng)答所述來(lái)話(huà)呼叫;當(dāng)指示應(yīng)答所述來(lái)話(huà)呼叫的面部特征是嘴巴張開(kāi)的正臉時(shí),操作控制單元控制終端以免提方式或視頻通話(huà)方式應(yīng)答所述來(lái)話(huà)呼叫。
9.如權(quán)利要求8所述的設(shè)備,其中,在所述來(lái)話(huà)呼叫的通話(huà)期間,操作控制單元根據(jù)用戶(hù)與終端之間的距離變化來(lái)相應(yīng)地調(diào)整終端的音量,其中,由圖像識(shí)別單元識(shí)別出的面部特征來(lái)確定用戶(hù)與終端之間的距離變化。
10.如權(quán)利要求8所述的設(shè)備,其中,在所述來(lái)話(huà)呼叫的通話(huà)期間,操作控制單元控制圖像采集單元周期性地采集用戶(hù)的面部圖像,并且圖像識(shí)別單元從所述面部圖像中識(shí)別面部特征,其中,當(dāng)圖像識(shí)別單元從所述面部圖像中識(shí)別出的面部特征指示不同于當(dāng)前的接聽(tīng)方式時(shí),操作控制單元根據(jù)所述面部特征來(lái)切換終端的接聽(tīng)方式,當(dāng)圖像采集單元持續(xù)采集不到用戶(hù)的面部圖像或圖像識(shí)別單元從所述面部圖像中識(shí)別出的面部特征指示結(jié)束所述來(lái)話(huà)呼叫時(shí),操作控制單元控制終端結(jié)束所述來(lái)話(huà)呼叫。
11.如權(quán)利要求10所述的設(shè)備,其中,指示結(jié)束所述來(lái)話(huà)呼叫的面部特征包括預(yù)先設(shè)置的結(jié)束面部區(qū)域或結(jié)束面部動(dòng)作,其中,所述結(jié)束面部區(qū)域或結(jié)束面部動(dòng)作被設(shè)置為具有鮮明的特點(diǎn),從而防止對(duì)面部特征的誤判。
12.如權(quán)利要求11所述的設(shè)備,其中,所述結(jié)束面部區(qū)域是指后腦,所述結(jié)束面部動(dòng)作是指搖頭。
13.如權(quán)利要求10所述的設(shè)備,其中,在所述來(lái)話(huà)呼叫的通話(huà)期間,操作控制單元在到達(dá)計(jì)費(fèi)時(shí)間單位之前的預(yù)定時(shí)間控制輸出單元輸出提示信號(hào),并隨后控制圖像采集單元采集用戶(hù)的面部圖像,從而使用戶(hù)能夠在計(jì)費(fèi)時(shí)間單位到達(dá)之前指示結(jié)束所述來(lái)話(huà)呼叫。
14.一種基于面部識(shí)別來(lái)控制終端操作的方法,所述方法包括: 采集用戶(hù)的面部圖像; 從采集的面部圖像中識(shí)別出面部特征;以及 基于識(shí)別出的不同面部特征來(lái)控制終端以不同方式執(zhí)行操作。
15.如權(quán)利要求14所述的方法,還包括: 在采集用戶(hù) 的面部圖像之前,輸出用于提醒用戶(hù)所述圖像采集單元即將采集用戶(hù)的面部圖像的提示信號(hào),其中,所述提示信號(hào)為以下項(xiàng)中的至少一個(gè):提示音頻、提示視頻、提示文本。
【文檔編號(hào)】G06F3/01GK103576839SQ201210256718
【公開(kāi)日】2014年2月12日 申請(qǐng)日期:2012年7月24日 優(yōu)先權(quán)日:2012年7月24日
【發(fā)明者】朱瑞敏 申請(qǐng)人:廣州三星通信技術(shù)研究有限公司, 三星電子株式會(huì)社