亚洲成年人黄色一级片,日本香港三级亚洲三级,黄色成人小视频,国产青草视频,国产一区二区久久精品,91在线免费公开视频,成年轻人网站色直接看

一種基于雙特征融合的微表情識(shí)別方法及系統(tǒng)

文檔序號(hào):40392816發(fā)布日期:2024-12-20 12:16閱讀:來源:國知局

技術(shù)特征:

1.一種基于雙特征融合的微表情識(shí)別方法,其特征在于,包括以下步驟:

2.根據(jù)權(quán)利要求1所述的一種基于雙特征融合的微表情識(shí)別方法,其特征在于,所述微表情數(shù)據(jù)包括表情發(fā)生幀和峰值幀。

3.根據(jù)權(quán)利要求1所述的一種基于雙特征融合的微表情識(shí)別方法,其特征在于,步驟s1中,用于訓(xùn)練的微表情數(shù)據(jù)包括一段完整的包含n-1幀的微表情視頻,定義為,有效的微表情數(shù)據(jù)為:,其中為視頻的第一幀,為表情的發(fā)生幀,為表情峰值幀,為視頻的最后一幀。

4.根據(jù)權(quán)利要求1所述的一種基于雙特征融合的微表情識(shí)別方法,其特征在于,步驟s2中,所述微表情圖像特征提取器包含多個(gè)單層殘差卷積操作,將有效的微表情數(shù)據(jù)作為特征提取器的輸入獲取單幀特征用于后續(xù)的特征學(xué)習(xí);其中為表情的發(fā)生幀、為表情峰值幀;

5.根據(jù)權(quán)利要求1所述的一種基于雙特征融合的微表情識(shí)別方法,其特征在于,步驟s3中,獲取表情發(fā)生幀特征與峰值幀特征之間的梯度特征,具體為:

6.根據(jù)權(quán)利要求1所述的一種基于雙特征融合的微表情識(shí)別方法,其特征在于,步驟s4中,獲取表情發(fā)生幀與峰值幀之間的運(yùn)動(dòng)特征,具體為:

7.根據(jù)權(quán)利要求6所述的一種基于雙特征融合的微表情識(shí)別方法,其特征在于,步驟s41中,利用特征提取器獲得的圖像原始特征從不同的角度補(bǔ)充整體特征。

8.根據(jù)權(quán)利要求1所述的一種基于雙特征融合的微表情識(shí)別方法,其特征在于,步驟s5中,獲取以可學(xué)習(xí)參數(shù)加權(quán)融合后的梯度特征和運(yùn)動(dòng)特征,作為完整的微表情特征,計(jì)算公式為:

9.根據(jù)權(quán)利要求1所述的一種基于雙特征融合的微表情識(shí)別方法,其特征在于,步驟s5中,聯(lián)合目標(biāo)損失函數(shù)包括梯度特征的標(biāo)準(zhǔn)交叉熵?fù)p失、運(yùn)動(dòng)特征的標(biāo)準(zhǔn)交叉熵?fù)p失和正交性約束損失,其中梯度特征的標(biāo)準(zhǔn)交叉熵?fù)p失、運(yùn)動(dòng)特征的標(biāo)準(zhǔn)交叉熵?fù)p失分別對(duì)應(yīng)兩個(gè)結(jié)構(gòu)相同但不共享權(quán)重的分類器的分類;

10.實(shí)現(xiàn)權(quán)利要求1~9任一項(xiàng)所述的一種基于雙特征融合的微表情識(shí)別方法的系統(tǒng),其特征在于,包括:


技術(shù)總結(jié)
本發(fā)明公開的一種基于雙特征融合的微表情識(shí)別方法及系統(tǒng),包括獲取用于訓(xùn)練的微表情數(shù)據(jù);使用微表情圖像特征提取器獲取微表情單幀特征;計(jì)算表情發(fā)生幀特征與峰值幀特征之間的梯度特征;計(jì)算表情發(fā)生幀與峰值幀之間的運(yùn)動(dòng)特征;獲取加權(quán)融合后的梯度特征和運(yùn)動(dòng)特征,作為完整的微表情特征;使用分類器將完整的微表情特征輸入分類器中以預(yù)測(cè)所屬類別。本發(fā)明考慮了兩種互補(bǔ)的特征,使用梯度特征學(xué)習(xí)模塊計(jì)算微表情梯度特征,使用運(yùn)動(dòng)特征學(xué)習(xí)模塊計(jì)算微表情運(yùn)動(dòng)特征。結(jié)合可學(xué)習(xí)的融合系數(shù)獲得完整的特征。最后將特征輸入分類器進(jìn)行情感識(shí)別。

技術(shù)研發(fā)人員:許施婷,張通,陳俊龍
受保護(hù)的技術(shù)使用者:華南理工大學(xué)
技術(shù)研發(fā)日:
技術(shù)公布日:2024/12/19
當(dāng)前第2頁1 2 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
1