14包括一個(gè)或多個(gè)傳感器,用于為裝置800提供各個(gè)方面的狀態(tài)評(píng)估。例如,傳感器組件814可以檢測(cè)到裝置800的打開/關(guān)閉狀態(tài),組件的相對(duì)定位,例如所述組件為裝置800的顯示器和小鍵盤,傳感器組件814還可以檢測(cè)裝置800或裝置800—個(gè)組件的位置改變,用戶與裝置800接觸的存在或不存在,裝置800方位或加速/減速和裝置800的溫度變化。傳感器組件814可以包括接近傳感器,被配置用來在沒有任何的物理接觸時(shí)檢測(cè)附近物體的存在。傳感器組件814還可以包括光傳感器,如CMOS或C⑶圖像傳感器,用于在成像應(yīng)用中使用。在一些實(shí)施例中,該傳感器組件814還可以包括加速度傳感器,陀螺儀傳感器,磁傳感器,壓力傳感器,微波傳感器或溫度傳感器。
[0132]通信組件816被配置為便于裝置800和其他設(shè)備之間有線或無線方式的通信。裝置800可以接入基于通信標(biāo)準(zhǔn)的無線網(wǎng)絡(luò),如WiFi,2G或3G,或它們的組合。在一個(gè)示例性實(shí)施例中,通信組件816經(jīng)由廣播信道接收來自外部廣播管理系統(tǒng)的廣播信號(hào)或廣播相關(guān)信息。在一個(gè)示例性實(shí)施例中,所述通信組件816還包括近場(chǎng)通信(NFC)模塊,以促進(jìn)短程通信。例如,在NFC模塊可基于射頻識(shí)別(RFID)技術(shù),紅外數(shù)據(jù)協(xié)會(huì)(IrDA)技術(shù),超寬帶(UWB)技術(shù),藍(lán)牙(BT)技術(shù)和其他技術(shù)來實(shí)現(xiàn)。
[0133]在示例性實(shí)施例中,裝置800可以被一個(gè)或多個(gè)應(yīng)用專用集成電路(ASIC)、數(shù)字信號(hào)處理器(DSP)、數(shù)字信號(hào)處理設(shè)備(DSPD)、可編程邏輯器件(PLD)、現(xiàn)場(chǎng)可編程門陣列(FPGA)、控制器、微控制器、微處理器或其他電子元件實(shí)現(xiàn),用于執(zhí)行上述方法。
[0134]在示例性實(shí)施例中,還提供了一種包括指令的非臨時(shí)性計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),例如包括指令的存儲(chǔ)器804,上述指令可由裝置800的處理器820執(zhí)行以完成上述方法。例如,所述非臨時(shí)性計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)可以是R0M、隨機(jī)存取存儲(chǔ)器(RAM)、CD-R0M、磁帶、軟盤和光數(shù)據(jù)存儲(chǔ)設(shè)備等。
[0135]—種非臨時(shí)性計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),當(dāng)所述存儲(chǔ)介質(zhì)中的指令由終端的處理器執(zhí)行時(shí),使得終端能夠執(zhí)行一種人臉圖像處理方法,所述方法包括:
[0136]獲取預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置;其中,所述預(yù)設(shè)幀圖像在當(dāng)前幀圖像之前,與所述當(dāng)前幀圖像間隔預(yù)設(shè)幀數(shù)。
[0137]在當(dāng)前幀圖像中對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置進(jìn)行跟蹤。
[0138]當(dāng)對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置跟蹤成功,獲得人臉關(guān)鍵點(diǎn)在當(dāng)前幀圖像的跟蹤位置,將所述跟蹤位置作為當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置。
[0139]對(duì)當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置進(jìn)行迭代求解,獲得當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)位置。
[0140]本領(lǐng)域技術(shù)人員在考慮說明書及實(shí)踐這里公開的發(fā)明后,將容易想到本公開的其它實(shí)施方案。本公開旨在涵蓋本公開的任何變型、用途或者適應(yīng)性變化,這些變型、用途或者適應(yīng)性變化遵循本公開的一般性原理并包括本公開未公開的本技術(shù)領(lǐng)域中的公知常識(shí)或慣用技術(shù)手段。說明書和實(shí)施例僅被視為示例性的,本公開的真正范圍和精神由下面的權(quán)利要求指出。
[0141]應(yīng)當(dāng)理解的是,本公開并不局限于上面已經(jīng)描述并在附圖中示出的精確結(jié)構(gòu),并且可以在不脫離其范圍進(jìn)行各種修改和改變。本公開的范圍僅由所附的權(quán)利要求來限制。
[0142]以上所述僅為本公開的較佳實(shí)施例而已,并不用以限制本公開,凡在本公開的精神和原則之內(nèi),所做的任何修改、等同替換、改進(jìn)等,均應(yīng)包含在本公開保護(hù)的范圍之內(nèi)。
【主權(quán)項(xiàng)】
1.一種人臉圖像處理方法,其特征在于,所述方法包括: 獲取預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置;其中,所述預(yù)設(shè)幀圖像在當(dāng)前幀圖像之前,與所述當(dāng)前幀圖像間隔預(yù)設(shè)幀數(shù); 在當(dāng)前幀圖像中對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置進(jìn)行跟蹤; 當(dāng)對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置跟蹤成功時(shí),獲得人臉關(guān)鍵點(diǎn)在當(dāng)前幀圖像的跟蹤位置,將所述跟蹤位置作為當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置; 對(duì)當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置進(jìn)行迭代求解,獲得當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)位置。2.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述獲取預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置,包括: 當(dāng)所述預(yù)設(shè)幀圖像為人臉初始幀圖像時(shí),利用平均位置求解法求解所述預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置; 其中,所述平均位置求解法包括: 對(duì)圖像進(jìn)行人臉檢測(cè),獲得圖像中的人臉區(qū)域; 獲取預(yù)設(shè)訓(xùn)練集中的人臉關(guān)鍵點(diǎn)平均位置; 以所述人臉關(guān)鍵點(diǎn)平均位置為所述人臉區(qū)域的人臉關(guān)鍵點(diǎn)的初始化位置進(jìn)行迭代求解,得到所述圖像的人臉關(guān)鍵點(diǎn)位置。3.根據(jù)權(quán)利要求2所述的方法,其特征在于,所述方法還包括: 當(dāng)對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置跟蹤失敗時(shí),利用所述平均位置求解法求解所述當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置。4.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述在當(dāng)前幀圖像中對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置進(jìn)行跟蹤,包括: 在當(dāng)前幀圖像中利用預(yù)設(shè)的特征點(diǎn)跟蹤算法對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置進(jìn)行跟蹤,所述特征點(diǎn)跟蹤算法包括基于光流的特征點(diǎn)跟蹤算法。5.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述對(duì)當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置進(jìn)行迭代求解,包括: 利用預(yù)設(shè)的監(jiān)督的梯度下降算法對(duì)所述當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置進(jìn)行迭代求解。6.一種人臉圖像處理裝置,其特征在于,所述裝置包括: 第一位置獲取模塊,被配置為獲取預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置;其中,所述預(yù)設(shè)幀圖像在當(dāng)前幀圖像之前,與當(dāng)前幀圖像間隔預(yù)設(shè)幀數(shù); 跟蹤模塊,被配置為在當(dāng)前幀圖像中對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置進(jìn)行跟蹤; 第一初始化位置確定模塊,被配置為當(dāng)對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置跟蹤成功時(shí),獲得人臉關(guān)鍵點(diǎn)在當(dāng)前幀圖像的跟蹤位置,將所述跟蹤位置作為當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置; 迭代求解模塊,被配置為對(duì)當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置進(jìn)行迭代求解,獲得當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)位置。7.根據(jù)權(quán)利要求6所述的裝置,其特征在于,所述裝置還包括: 平均位置求解模塊,被配置為對(duì)圖像進(jìn)行人臉檢測(cè),獲得圖像中的人臉區(qū)域;獲取預(yù)設(shè)訓(xùn)練集中的人臉關(guān)鍵點(diǎn)平均位置;以所述人臉關(guān)鍵點(diǎn)平均位置為所述人臉區(qū)域的人臉關(guān)鍵點(diǎn)的初始化位置進(jìn)行迭代求解,得到所述圖像的人臉關(guān)鍵點(diǎn)位置; 第二位置獲取模塊,被配置為當(dāng)所述預(yù)設(shè)幀圖像為人臉初始幀圖像時(shí),利用所述平均位置求解模塊求解所述預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置。8.根據(jù)權(quán)利要求7所述的裝置,其特征在于,所述裝置還包括: 第二初始化位置確定模塊,被配置為當(dāng)對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置跟蹤失敗時(shí),利用所述平均位置求解模塊求解所述當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置。9.根據(jù)權(quán)利要求6所述的裝置,其特征在于,所述跟蹤模塊,包括: 跟蹤子模塊,被配置為利用預(yù)設(shè)的特征點(diǎn)跟蹤算法對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置進(jìn)行跟蹤,所述特征點(diǎn)跟蹤算法包括基于光流的特征點(diǎn)跟蹤算法。10.根據(jù)權(quán)利要求6所述的裝置,其特征在于,所述迭代求解模塊,包括: 迭代求解子模塊,被配置為利用預(yù)設(shè)的監(jiān)督的梯度下降算法對(duì)所述當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置進(jìn)行迭代求解。11.一種人臉圖像處理裝置,其特征在于,包括: 處理器; 用于存儲(chǔ)處理器可執(zhí)行指令的存儲(chǔ)器; 其中,所述處理器被配置為: 獲取預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置;其中,所述預(yù)設(shè)幀圖像在當(dāng)前幀圖像之前,與所述當(dāng)前幀圖像間隔預(yù)設(shè)幀數(shù); 在當(dāng)前幀圖像中對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置進(jìn)行跟蹤; 當(dāng)對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置跟蹤成功,獲得人臉關(guān)鍵點(diǎn)在當(dāng)前幀圖像的跟蹤位置,將所述跟蹤位置作為當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置; 對(duì)當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置進(jìn)行迭代求解,獲得當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)位置。
【專利摘要】本公開是關(guān)于人臉圖像處理方法和裝置,該方法包括:獲取預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置;其中,所述預(yù)設(shè)幀圖像在當(dāng)前幀圖像之前,與當(dāng)前幀圖像間隔預(yù)設(shè)幀數(shù);在當(dāng)前幀圖像中對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置進(jìn)行跟蹤;當(dāng)對(duì)預(yù)設(shè)幀圖像的人臉關(guān)鍵點(diǎn)位置跟蹤成功,獲得人臉關(guān)鍵點(diǎn)在當(dāng)前幀圖像的跟蹤位置,將所述跟蹤位置作為當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置;對(duì)當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)的初始化位置進(jìn)行迭代求解,獲得當(dāng)前幀圖像的人臉關(guān)鍵點(diǎn)位置。本公開迭代求解的次數(shù)較少,迭代求解速度快,能提高人臉關(guān)鍵點(diǎn)定位的效率。
【IPC分類】G06K9/00
【公開號(hào)】CN105469056
【申請(qǐng)?zhí)枴緾N201510846644
【發(fā)明人】楊松, 張濤, 王百超
【申請(qǐng)人】小米科技有限責(zé)任公司
【公開日】2016年4月6日
【申請(qǐng)日】2015年11月26日