1.一種應(yīng)用于智能機(jī)器人的物體識(shí)別方法,所述智能機(jī)器人安裝有機(jī)器人操作系統(tǒng),該方法包括:
獲取并解析多模態(tài)輸入數(shù)據(jù),所述多模態(tài)輸入數(shù)據(jù)包括待識(shí)別物體的信息;
從解析結(jié)果中獲取與物體識(shí)別關(guān)聯(lián)的指示多模態(tài)信息,以生成物體識(shí)別指令,其中所述指示多模態(tài)信息為指示待識(shí)別物體的輪廓或區(qū)域的信息;
響應(yīng)該物體識(shí)別指令對(duì)目標(biāo)對(duì)象進(jìn)行識(shí)別,獲取與識(shí)別結(jié)果關(guān)聯(lián)的反饋輸出數(shù)據(jù)并進(jìn)行多模態(tài)輸出。
2.根據(jù)權(quán)利要求1所述的物體識(shí)別方法,其特征在于,
所述指示多模態(tài)信息包括表示圈定待識(shí)別物體輪廓或區(qū)域的標(biāo)示框、指示待識(shí)別物體輪廓或區(qū)域的自定義標(biāo)示物和預(yù)定動(dòng)作的任一信息。
3.根據(jù)權(quán)利要求1或2所述的物體識(shí)別方法,其特征在于,
所述與識(shí)別結(jié)果關(guān)聯(lián)的反饋輸出數(shù)據(jù)包括與識(shí)別出的物體相關(guān)的知識(shí)性數(shù)據(jù)、娛樂性數(shù)據(jù)、歷史記錄數(shù)據(jù)中的至少之一。
4.根據(jù)權(quán)利要求1~3中任一項(xiàng)所述的物體識(shí)別方法,其特征在于,該方法還包括:
在物體識(shí)別失敗時(shí),輸出詢問物體名稱及所需反饋的信息,根據(jù)獲取的反饋信息創(chuàng)建與該物體相關(guān)的反饋輸出數(shù)據(jù)。
5.根據(jù)權(quán)利要求3所述的物體識(shí)別方法,其特征在于,
若存在多個(gè)與識(shí)別結(jié)果關(guān)聯(lián)的反饋輸出數(shù)據(jù),則根據(jù)用戶選擇的反饋輸出數(shù)據(jù)進(jìn)行多模態(tài)輸出。
6.一種應(yīng)用于智能機(jī)器人的物體識(shí)別裝置,所述智能機(jī)器人安裝有機(jī)器人操作系統(tǒng),該裝置包括:
多模態(tài)數(shù)據(jù)解析模塊,其獲取并解析多模態(tài)輸入數(shù)據(jù),所述多模態(tài)輸入數(shù)據(jù)包括待識(shí)別物體的信息;
指示信息獲取模塊,其從解析結(jié)果中獲取與物體識(shí)別關(guān)聯(lián)的指示多模態(tài)信息,以生成物體識(shí)別指令,其中,所述指示多模態(tài)信息為指示待識(shí)別物體的輪廓或區(qū)域的信息;
多模態(tài)輸出模塊,其響應(yīng)該物體識(shí)別指令對(duì)目標(biāo)對(duì)象進(jìn)行識(shí)別,獲取與識(shí)別結(jié)果關(guān)聯(lián)的反饋輸出數(shù)據(jù)并進(jìn)行多模態(tài)輸出。
7.根據(jù)權(quán)利要求6所述的物體識(shí)別裝置,其特征在于,
所述指示多模態(tài)信息包括表示圈定待識(shí)別物體輪廓或區(qū)域的標(biāo)示框、指示待識(shí)別物體輪廓或區(qū)域的自定義標(biāo)示物和預(yù)定動(dòng)作的任一信息。
8.根據(jù)權(quán)利要求6或7所述的物體識(shí)別裝置,其特征在于,
所述與識(shí)別結(jié)果關(guān)聯(lián)的反饋輸出數(shù)據(jù)包括與識(shí)別出的物體相關(guān)的知識(shí)性數(shù)據(jù)、娛樂性數(shù)據(jù)、歷史記錄數(shù)據(jù)中的至少之一。
9.根據(jù)權(quán)利要求6~8中任一項(xiàng)所述的物體識(shí)別裝置,其特征在于,該裝置還包括:
反饋輸出數(shù)據(jù)創(chuàng)建模塊,其在物體識(shí)別失敗時(shí),輸出詢問物體名稱及所需反饋的信息,根據(jù)獲取的反饋信息創(chuàng)建與該物體相關(guān)的反饋輸出數(shù)據(jù)。
10.根據(jù)權(quán)利要求8所述的物體識(shí)別裝置,其特征在于,
所述多模態(tài)輸出模塊,其進(jìn)一步在存在多個(gè)與識(shí)別結(jié)果關(guān)聯(lián)的反饋輸出數(shù)據(jù)時(shí),則根據(jù)用戶選擇的反饋輸出數(shù)據(jù)進(jìn)行多模態(tài)輸出。