1.一種面向智能機器人的多模態(tài)情感交互方法,其特征在于,所述方法包括:
接收多模態(tài)交互輸入信息并進行解析,以獲取用戶輸入的意圖參量和用戶情緒參量;
結合所述意圖參量和所述情緒參量生成對應于多模態(tài)交互輸入信息的文本回復信息,并結合所述文本回復信息、上下文交互數(shù)據(jù)及用戶情緒參量生成語音情感參量;
根據(jù)所述回復文本信息及語音情感參量合成語音信息并進行輸出。
2.如權利要求1所述的面向智能機器人的多模態(tài)情感交互方法,其特征在于,所述語音情感參量包括,
所述回復文本信息的語義參量、句式參量、當前交互的情緒參量以及對當前用戶的情感參量。
3.如權利要求2所述的面向智能機器人的多模態(tài)情感交互方法,其特征在于,所述方法包括:
結合用戶情緒參量來生成當前交互的情緒參量;
基于上下文交互數(shù)據(jù)來生成對當前用戶的情感參量;
通過獲取所述回復文本信息的重點詞匯生成所述回復文本信息的語義參量。
4.如權利要求3所述的面向智能機器人的多模態(tài)情感交互方法,其特征在于,所述方法包括:
在接收多模態(tài)交互輸入信息并進行解析的步驟中,通過采用情感詞典、情感歸類、機器學習的情感計算方式來生成用戶輸入的情緒參量。
5.一種面向智能機器人的多模態(tài)情感數(shù)據(jù)交互裝置,其特征在于,所述裝置包括:
接收解析單元,其用以接收多模態(tài)交互輸入信息并進行解析,以獲取用戶輸入的意圖參量和情緒參量;
文本回復生成單元,其用以結合所述意圖參量和所述情緒參量生成對應于多模態(tài)交互輸入信息的文本回復信息,并結合所述文本回復信息、上下文交互數(shù)據(jù)及用戶情緒參量生成語音情感參量;
情感輸出合成單元,其用以根據(jù)所述回復文本信息及語音情感參量合成語音信息并進行輸出。
6.如權利要求5所述的面向智能機器人的多模態(tài)情感數(shù)據(jù)交互裝置,其特征在于,在情感輸出合成單元中,所述語音情感參量包括,
所述回復文本信息的語義參量、句式參量、當前交互的情緒參量以及對當前用戶的情感參量。
7.如權利要求6所述的面向智能機器人的多模態(tài)情感數(shù)據(jù)交互裝置,其特征在于,在所述裝置的文本回復生成單元中,還包括以下單元:
用以結合用戶情緒參量來生成當前交互的情緒參量的單元;
用以基于上下文交互數(shù)據(jù)來生成對當前用戶的情感參量的單元;
用以通過獲取所述回復文本信息的重點詞匯生成所述回復文本信息的語義參量的單元。
8.如權利要求7所述的面向智能機器人的多模態(tài)情感數(shù)據(jù)交互裝置,其特征在于,在所述裝置的接收解析單元中,當接收多模態(tài)交互輸入信息并進行解析時,通過采用情感詞典、情感歸類、機器學習的情感計算方式來生成用戶輸入的情緒參量。