本申請(qǐng)涉及機(jī)器人技術(shù)領(lǐng)域,尤其涉及一種看護(hù)機(jī)器人的數(shù)據(jù)處理方法及裝置。
背景技術(shù):
隨著數(shù)字化和人工智能技術(shù)的發(fā)展,傳統(tǒng)的兒童看護(hù)和培訓(xùn)的工作已經(jīng)部分、或者全部被電子智能設(shè)備所替代,其中,一種較好的電子智能設(shè)備的產(chǎn)品形態(tài)是兒童看護(hù)機(jī)器人。傳統(tǒng)的兒童看護(hù)和培訓(xùn)的主要內(nèi)容實(shí)際上就是看護(hù)者和被看護(hù)人之間的有效互動(dòng)。一方面,看護(hù)人根據(jù)被看護(hù)人的情感狀態(tài)選擇合適的交流方式和內(nèi)容。例如,一位富有教學(xué)經(jīng)驗(yàn)的人類(lèi)老師教一個(gè)學(xué)生稍顯復(fù)雜的數(shù)學(xué)問(wèn)題時(shí),可以根據(jù)學(xué)生的面部表情,說(shuō)話的音調(diào),身體姿態(tài)和運(yùn)動(dòng)特征等判斷出學(xué)生的情感狀態(tài),選擇適合該學(xué)生的高效率的教學(xué)方式。當(dāng)老師觀察到學(xué)生沮喪的表情時(shí),可以降低語(yǔ)速,采用學(xué)生更熟悉的內(nèi)容,或者采取不同的互動(dòng)模式,以減輕學(xué)生的疲勞感和挫折感,提高教學(xué)和互動(dòng)效率。另一方面,經(jīng)過(guò)幼教經(jīng)驗(yàn)證明,大部分的兒童更愿意和稍微年長(zhǎng)的小伙伴一起互動(dòng)和交流,以便保持足夠的學(xué)習(xí)興趣和熱情。
現(xiàn)有技術(shù)中的兒童看護(hù)機(jī)器人計(jì)算出交互對(duì)象的情感狀態(tài)后,適配出合適的交互方式和內(nèi)容,具體的,兒童看護(hù)機(jī)器人與人類(lèi)對(duì)象交互時(shí),通過(guò)一個(gè)或多個(gè)傳感器采集到的人類(lèi)對(duì)象的生理數(shù)據(jù),并監(jiān)測(cè)在特定環(huán)境中用戶的情緒反應(yīng),根據(jù)用戶的情緒反應(yīng)識(shí)別用戶的情感狀態(tài),根據(jù)用戶的情感狀態(tài)調(diào)整機(jī)器人的交互技能,通過(guò)語(yǔ)言和非語(yǔ)言第二交互手段來(lái)進(jìn)行響應(yīng),來(lái)實(shí)現(xiàn)交流、表演、培訓(xùn)、通知和娛樂(lè)等目的。
綜上,實(shí)際情況中,兒童愿意和稍微年長(zhǎng)的小伙伴一起互動(dòng)和交流,而現(xiàn)有技術(shù)中,兒童看護(hù)機(jī)器人只能通過(guò)計(jì)算出的交互對(duì)象的情感狀態(tài)適配出合適的交互方式和內(nèi)容,不能模擬出與兒童交互時(shí)的知識(shí)和交流技更優(yōu)秀的交互對(duì)象,不能扮演一個(gè)年長(zhǎng)的“哥哥”或者“姐姐”的角色,不能讓兒童保持足夠的學(xué)習(xí)興趣和熱情。
技術(shù)實(shí)現(xiàn)要素:
本申請(qǐng)?zhí)峁┮环N看護(hù)機(jī)器人的數(shù)據(jù)處理方法及裝置,用以解決現(xiàn)有技術(shù)中看護(hù)機(jī)器人只能通過(guò)計(jì)算交互對(duì)象的情感狀態(tài),在設(shè)定的交互方式中進(jìn)行選擇,不能為交互對(duì)象提供更合適的交互方式的問(wèn)題。
第一方面,本申請(qǐng)?zhí)峁┝艘环N看護(hù)機(jī)器人的數(shù)據(jù)處理方法,所述方法包括:
模型引擎接收到目標(biāo)對(duì)象的數(shù)據(jù),生成目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣,其中,所述數(shù)據(jù)中包括所述目標(biāo)對(duì)象的能力參數(shù),所述能力參數(shù)包括實(shí)測(cè)能力參數(shù)以及所述目標(biāo)對(duì)象對(duì)應(yīng)的統(tǒng)計(jì)能力參數(shù),生成的所述目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣中包括所述能力參數(shù),以及根據(jù)所述能力參數(shù)計(jì)算出的能力參數(shù)調(diào)整值和綜合能力參數(shù)其中,所述實(shí)測(cè)能力參數(shù)是通過(guò)傳感器獲取的目標(biāo)對(duì)象的自然社交場(chǎng)景下的數(shù)據(jù),所述統(tǒng)計(jì)能力參數(shù)是第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu)提供的;根據(jù)調(diào)整公式系數(shù)或者根據(jù)標(biāo)準(zhǔn)的成長(zhǎng)模型能力參數(shù)矩陣對(duì)所述成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù)調(diào)整值進(jìn)行調(diào)整,確定出調(diào)整后的所述能力參數(shù)調(diào)整值,其中,所述公式為根據(jù)所述能力參數(shù)計(jì)算出的綜合能力參數(shù)和能力參數(shù)調(diào)整值所使用的;所述模型引擎判斷調(diào)整后的所述能力參數(shù)調(diào)整值是否超過(guò)預(yù)設(shè)閾值;若所述調(diào)整后的能力參數(shù)調(diào)整值在所述預(yù)設(shè)閾值范圍內(nèi),所述模型引擎將調(diào)整后的所述能力參數(shù)調(diào)整值發(fā)送給機(jī)器學(xué)習(xí)引擎,其中,所述機(jī)器學(xué)習(xí)引擎根據(jù)所述能力參數(shù)調(diào)整值為人工智能模塊提供與所述目標(biāo)對(duì)象交互時(shí)所需要的能力參數(shù)。
本發(fā)明實(shí)施例中,將傳感器采集到目標(biāo)對(duì)象在自然社交場(chǎng)景下的實(shí)測(cè)能力參數(shù)以及第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu)提供的統(tǒng)計(jì)能力參數(shù),生成目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣,根據(jù)調(diào)整公式系數(shù)或者標(biāo)準(zhǔn)的成長(zhǎng)模型能力參數(shù)矩陣中的參數(shù)對(duì)對(duì)所述成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù)調(diào)整值進(jìn)行調(diào)整,調(diào)整后根據(jù)能力參數(shù)調(diào)整值確定出的綜合能力參數(shù)值不低于目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣中的根據(jù)實(shí)測(cè)能力參數(shù)確定出的綜合能力參數(shù)值,將調(diào)整后的能力參數(shù)調(diào)整值發(fā)送給機(jī)器學(xué)習(xí)引擎為人工智能模塊提供與所述目標(biāo)對(duì)象交互時(shí)所需要的能力參數(shù),即看護(hù)機(jī)器人使用修改后的能力參數(shù)調(diào)整值所表現(xiàn)出來(lái)的能力稍高于目標(biāo)對(duì)象的能力,使目標(biāo)對(duì)象保持足夠的學(xué)習(xí)興趣和與看護(hù)機(jī)器人交互的熱情。
在一種可能的設(shè)計(jì)中,所述模型引擎接收到目標(biāo)對(duì)象的能力參數(shù),將接收到的所述能力參數(shù)進(jìn)行計(jì)算,確定出能力參數(shù)調(diào)整值和綜合能力參數(shù),將所述能力參數(shù)、所述能力參數(shù)調(diào)整值以及所述綜合能力參數(shù)添加到設(shè)定的能力參數(shù)矩陣模板中,生成目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣。
在一種可能的設(shè)計(jì)中,所述模型引擎對(duì)所述成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù)調(diào)整值進(jìn)行調(diào)整,確定出調(diào)整后的所述能力參數(shù)調(diào)整值之后,該方法還包括:
所述模型引擎根據(jù)接收到的人為調(diào)整能力參數(shù)的指令,對(duì)所述成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù)進(jìn)行調(diào)整,根據(jù)調(diào)整后的能力參數(shù),確定出調(diào)整后的所述能力參數(shù)調(diào)整值。
本發(fā)明實(shí)施例中,通過(guò)接收用戶發(fā)出的的人為調(diào)整能力參數(shù)的指令,人為對(duì)成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù),可以側(cè)重培養(yǎng)目標(biāo)對(duì)象的任一方面的能力,為目標(biāo)對(duì)象提供更適合的交互方式。
在一種可能的設(shè)計(jì)中,所述調(diào)整后的能力參數(shù)調(diào)整值的加權(quán)平均值大于或等于調(diào)整前的所述實(shí)測(cè)能力參數(shù)的加權(quán)平均值。
本發(fā)明實(shí)施例中,陪護(hù)機(jī)器人采用調(diào)整后的能力參數(shù)調(diào)整值,可以使其能力高于或等同于目標(biāo)對(duì)象,達(dá)到陪護(hù)的目的。
第二方面,本申請(qǐng)?zhí)峁┝艘环N模型引擎,包括:
模型生成模塊,用于接收到目標(biāo)對(duì)象的數(shù)據(jù),生成目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣,其中,所述數(shù)據(jù)中包括所述目標(biāo)對(duì)象的能力參數(shù),所述能力參數(shù)包括實(shí)測(cè)能力參數(shù)以及所述目標(biāo)對(duì)象對(duì)應(yīng)的統(tǒng)計(jì)能力參數(shù),生成的所述目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣中包括所述能力參數(shù),以及根據(jù)所述能力參數(shù)計(jì)算出的能力參數(shù)調(diào)整值和綜合能力參數(shù);模型修正模塊,用于根據(jù)調(diào)整公式系數(shù)或者根據(jù)標(biāo)準(zhǔn)的成長(zhǎng)模型能力參數(shù)矩陣對(duì)所述成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù)調(diào)整值進(jìn)行調(diào)整,確定出調(diào)整后的所述能力參數(shù)調(diào)整值,其中,所述公式為根據(jù)所述能力參數(shù)計(jì)算出的綜合能力參數(shù)和能力參數(shù)調(diào)整值所使用的;所述模型修正模塊還用于,判斷調(diào)整后的所述能力參數(shù)調(diào)整值是否超過(guò)預(yù)設(shè)閾值;若所述調(diào)整后的能力參數(shù)調(diào)整值在所述預(yù)設(shè)閾值范圍內(nèi),所述模型引擎將調(diào)整后的所述能力參數(shù)調(diào)整值發(fā)送給機(jī)器學(xué)習(xí)引擎,其中,所述機(jī)器學(xué)習(xí)引擎根據(jù)所述能力參數(shù)調(diào)整值為人工智能模塊提供與所述目標(biāo)對(duì)象交互時(shí)所需要的能力參數(shù)。
在一種可能的設(shè)計(jì)中,接收到目標(biāo)對(duì)象的能力參數(shù),將接收到的所述能力參數(shù)進(jìn)行計(jì)算,確定出能力參數(shù)調(diào)整值和綜合能力參數(shù),將所述能力參數(shù)、所述能力參數(shù)調(diào)整值以及所述綜合能力參數(shù)添加到設(shè)定的能力參數(shù)矩陣模板中,生成目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣。
在一種可能的設(shè)計(jì)中,所述模型修正模塊還用于:
根據(jù)接收到的人為調(diào)整能力參數(shù)的指令,對(duì)所述成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù)進(jìn)行調(diào)整,根據(jù)調(diào)整后的能力參數(shù),確定出調(diào)整后的所述能力參數(shù)調(diào)整值。
在一種可能的設(shè)計(jì)中,所述調(diào)整后的能力參數(shù)調(diào)整值的加權(quán)平均值大于或等于調(diào)整前的所述實(shí)測(cè)能力參數(shù)的加權(quán)平均值。
第三方面,本申請(qǐng)?zhí)峁┝艘环N模型引擎,該模型引擎包括:
存儲(chǔ)器,用于存儲(chǔ)程序指令;
處理器,用于調(diào)用所述存儲(chǔ)器中存儲(chǔ)的程序指令,通過(guò)通信接口接收到目標(biāo)對(duì)象的數(shù)據(jù),生成目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣,其中,所述數(shù)據(jù)中包括所述目標(biāo)對(duì)象的能力參數(shù),所述能力參數(shù)包括實(shí)測(cè)能力參數(shù)以及所述目標(biāo)對(duì)象對(duì)應(yīng)的統(tǒng)計(jì)能力參數(shù),生成的所述目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣中包括所述能力參數(shù),以及根據(jù)所述能力參數(shù)計(jì)算出的能力參數(shù)調(diào)整值和綜合能力參數(shù);所述處理器根據(jù)調(diào)整公式系數(shù)或者根據(jù)標(biāo)準(zhǔn)的成長(zhǎng)模型能力參數(shù)矩陣對(duì)所述成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù)調(diào)整值進(jìn)行調(diào)整,確定出調(diào)整后的所述能力參數(shù)調(diào)整值,其中,所述公式為根據(jù)所述能力參數(shù)計(jì)算出的綜合能力參數(shù)和能力參數(shù)調(diào)整值所使用的;所述處理器判斷調(diào)整后的所述能力參數(shù)調(diào)整值是否超過(guò)預(yù)設(shè)閾值;若所述調(diào)整后的能力參數(shù)調(diào)整值在所述預(yù)設(shè)閾值范圍內(nèi),所述處理器將調(diào)整后的所述能力參數(shù)調(diào)整值發(fā)送給機(jī)器學(xué)習(xí)引擎,其中,所述機(jī)器學(xué)習(xí)引擎根據(jù)所述能力參數(shù)調(diào)整值為人工智能模塊提供與所述目標(biāo)對(duì)象交互時(shí)所需要的能力參數(shù)。
在一種可能的設(shè)計(jì)中,所述處理器具體用于:
通過(guò)通信接口接收到目標(biāo)對(duì)象的能力參數(shù),將接收到的所述能力參數(shù)進(jìn)行計(jì)算,確定出能力參數(shù)調(diào)整值和綜合能力參數(shù),將所述能力參數(shù)、所述能力參數(shù)調(diào)整值以及所述綜合能力參數(shù)添加到設(shè)定的能力參數(shù)矩陣模板中,生成目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣。
在一種可能的設(shè)計(jì)中,所述處理器還用于:
根據(jù)接收到的人為調(diào)整能力參數(shù)的指令,對(duì)所述成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù)進(jìn)行調(diào)整,根據(jù)調(diào)整后的能力參數(shù),確定出調(diào)整后的所述能力參數(shù)調(diào)整值。
第四方面,本申請(qǐng)還提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),用于存儲(chǔ)為執(zhí)行上述第一方面、第一方面的任意一種設(shè)計(jì)的功能所用的計(jì)算機(jī)軟件指令,其包含用于執(zhí)行上述第一方面、第一方面的任意一種設(shè)計(jì)的方法所設(shè)計(jì)的程序。
附圖說(shuō)明
圖1為本申請(qǐng)?zhí)峁┑囊环N兒童看護(hù)機(jī)器人及使用環(huán)境的系統(tǒng)結(jié)構(gòu)圖;
圖2為本申請(qǐng)?zhí)峁┑囊环N兒童看護(hù)機(jī)器人產(chǎn)品形態(tài)示意圖;
圖3為本申請(qǐng)?zhí)峁┑囊环N兒童看護(hù)機(jī)器人的處理及運(yùn)算模塊硬件結(jié)構(gòu)示意圖;
圖4為本申請(qǐng)?zhí)峁┑囊环N看護(hù)機(jī)器人的數(shù)據(jù)處理方法流程圖;
圖5為本申請(qǐng)?zhí)峁┑囊环N能力評(píng)估結(jié)果示意圖;
圖6為本申請(qǐng)?zhí)峁┑囊环N成長(zhǎng)模型能力參數(shù)矩陣;
圖7為本申請(qǐng)?zhí)峁┑囊环N雷達(dá)圖;
圖8為本申請(qǐng)?zhí)峁┑囊环N看護(hù)機(jī)器人的軟件模塊基本架構(gòu)示意圖;
圖9為本申請(qǐng)?zhí)峁┑囊环N看護(hù)機(jī)器人的語(yǔ)言模塊結(jié)構(gòu)示意圖;
圖10為本申請(qǐng)?zhí)峁┑囊环N看護(hù)機(jī)器人的視覺(jué)模塊結(jié)構(gòu)示意圖;
圖11為本申請(qǐng)?zhí)峁┑囊环N看護(hù)機(jī)器人的表情和情緒模塊結(jié)構(gòu)示意圖
圖12為本申請(qǐng)?zhí)峁┑囊环N模型引擎示意圖;
圖13為本申請(qǐng)?zhí)峁┑牧硪环N模型引擎示意圖;
圖14為本申請(qǐng)?zhí)峁┑囊环N模型引擎的硬件結(jié)構(gòu)示意圖。
具體實(shí)施方式
為了使本申請(qǐng)的目的、技術(shù)方案和優(yōu)點(diǎn)更加清楚,下面將結(jié)合附圖對(duì)本申請(qǐng)作進(jìn)一步地詳細(xì)描述。
本申請(qǐng)?zhí)峁┮环N看護(hù)機(jī)器人的數(shù)據(jù)處理方法及模型引擎,用以解決現(xiàn)有技術(shù)中存在的看護(hù)機(jī)器人只能通過(guò)計(jì)算交互對(duì)象的情感狀態(tài),在設(shè)定的交互方式中進(jìn)行選擇,不能為交互對(duì)象提供更合適的交互方式的問(wèn)題。其中,方法和裝置是基于同一發(fā)明構(gòu)思的,由于方法及裝置解決問(wèn)題的原理相似,因此裝置與方法的實(shí)施可以相互參見(jiàn),重復(fù)之處不再贅述。
本申請(qǐng)可以應(yīng)用于兒童看護(hù)機(jī)器人及使用環(huán)境的系統(tǒng),該系統(tǒng)架構(gòu)如圖1所示,兒童看護(hù)機(jī)器人的使用環(huán)境適用于小區(qū)、街道、行政區(qū)、省、國(guó)家、跨國(guó)以及全球等任何場(chǎng)景,該包括以下單元:家庭或者兒童看護(hù)機(jī)構(gòu)101,所述家庭或者兒童看護(hù)機(jī)構(gòu)101包括兒童看護(hù)機(jī)器人102及至少一名被看護(hù)的兒童103,室內(nèi)的至少一個(gè)無(wú)線接入網(wǎng)絡(luò)104;被看護(hù)對(duì)象的法定監(jiān)護(hù)人106以及其隨身攜帶的智能終端105;室外無(wú)線接入網(wǎng)絡(luò)107給智能終端105提供遠(yuǎn)程的無(wú)線網(wǎng)絡(luò)接入服務(wù);給兒童看護(hù)業(yè)務(wù)提供專業(yè)數(shù)據(jù)服務(wù)的兒童看護(hù)服務(wù)機(jī)構(gòu)108,包括兒童成長(zhǎng)云服務(wù)器109、兒童成長(zhǎng)模型庫(kù)110和兒童看護(hù)知識(shí)庫(kù)111;還包括社會(huì)公共服務(wù)機(jī)構(gòu)112,給兒童看護(hù)服務(wù)提供政府公共數(shù)據(jù)支持,包括但不限于天氣預(yù)報(bào)、醫(yī)療服務(wù)機(jī)構(gòu)名單、疫情信息、緊急通知等,包括社會(huì)公共服務(wù)云服務(wù)器113、社會(huì)公共服務(wù)云數(shù)據(jù)庫(kù)114;至少一個(gè)第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu)115,給兒童看護(hù)業(yè)務(wù)提供細(xì)分的專業(yè)化的網(wǎng)絡(luò)云數(shù)據(jù)服務(wù),比如即時(shí)通信、兒童看護(hù)業(yè)務(wù)社交應(yīng)用、網(wǎng)上音視頻服務(wù)、網(wǎng)絡(luò)購(gòu)物、付款和物流跟蹤、社區(qū)和醫(yī)療機(jī)構(gòu)評(píng)價(jià)和投票等,包括第三方網(wǎng)絡(luò)服務(wù)的運(yùn)服務(wù)器116、第三方網(wǎng)絡(luò)服務(wù)云數(shù)據(jù)庫(kù)117;該使用環(huán)境的系統(tǒng)架構(gòu)還包括網(wǎng)絡(luò)運(yùn)營(yíng)商提供網(wǎng)絡(luò)服務(wù)的互聯(lián)網(wǎng)118。
另外,需要理解的是,在本申請(qǐng)的描述中,“第一”、“第二”等詞匯,僅用于區(qū)分描述的目的,而不能理解為指示或暗示相對(duì)重要性,也不能理解為指示或暗示順序。
本發(fā)明實(shí)施例中,將傳感器采集到目標(biāo)對(duì)象在自然社交場(chǎng)景下的實(shí)測(cè)能力參數(shù)以及第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu)提供的統(tǒng)計(jì)能力參數(shù),生成目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣,根據(jù)調(diào)整公式系數(shù)或者標(biāo)準(zhǔn)的成長(zhǎng)模型能力參數(shù)矩陣中的參數(shù)對(duì)對(duì)所述成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù)調(diào)整值進(jìn)行調(diào)整,調(diào)整后根據(jù)能力參數(shù)調(diào)整值確定出的綜合能力參數(shù)值不低于目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣中的根據(jù)實(shí)測(cè)能力參數(shù)確定出的綜合能力參數(shù)值,將調(diào)整后的能力參數(shù)調(diào)整值發(fā)送給機(jī)器學(xué)習(xí)引擎為人工智能模塊提供與所述目標(biāo)對(duì)象交互時(shí)所需要的能力參數(shù),即看護(hù)機(jī)器人使用修改后的能力參數(shù)調(diào)整值所表現(xiàn)出來(lái)的能力稍高于目標(biāo)對(duì)象的能力,使目標(biāo)對(duì)象保持足夠的學(xué)習(xí)興趣和與看護(hù)機(jī)器人交互的熱情。
本發(fā)明實(shí)施例中,圖1中兒童看護(hù)機(jī)器人102的產(chǎn)品形態(tài)可以如圖2所示,包括:觸摸顯示屏201,用于向被看護(hù)對(duì)象展示圖形、或圖像信息,并接收用戶的觸摸控制信號(hào);麥克風(fēng)陣列及傳感器組202,用于檢測(cè)被看護(hù)對(duì)象的聲音、表情、以及行為等特征;開(kāi)始/暫停/緊急按鈕203,提供被看護(hù)對(duì)象簡(jiǎn)單的操作指令并響應(yīng)緊急情況下用戶的中斷指令;處理及運(yùn)算模塊204根據(jù)麥克風(fēng)陣列及傳感器組202輸入的用戶狀態(tài)信號(hào)、開(kāi)始/暫停/緊急按鈕203的用戶操作指令、來(lái)自網(wǎng)絡(luò)的被看護(hù)對(duì)象的監(jiān)護(hù)人請(qǐng)求信息、來(lái)自網(wǎng)絡(luò)的兒童看護(hù)服務(wù)機(jī)構(gòu)的服務(wù)指令、第三方網(wǎng)絡(luò)云服務(wù)數(shù)據(jù)等,計(jì)算并輸出兒童看護(hù)機(jī)器人的控制指令,兒童看護(hù)機(jī)器人根據(jù)所述控制指令輸出聲音、圖形、圖像、肢體動(dòng)作以及移動(dòng)方向等,兒童看護(hù)機(jī)器人還包括履帶/輪式移動(dòng)機(jī)械裝置205、機(jī)械手臂206,揚(yáng)聲器模塊207用于向被看護(hù)對(duì)象提供聲音輸出信號(hào)。
本發(fā)明實(shí)施例中的兒童看護(hù)機(jī)器人通過(guò)觸摸顯示屏201、履帶/輪式移動(dòng)機(jī)械裝置205、機(jī)械手臂206以及揚(yáng)聲器模塊207與被看護(hù)對(duì)象及其被看護(hù)對(duì)象的監(jiān)護(hù)人構(gòu)建社交、情感和人際聯(lián)系和互動(dòng),兒童看護(hù)機(jī)器人對(duì)其被看護(hù)對(duì)象可以執(zhí)行多種功能,促進(jìn)并參與用戶之間的有意義的社交活動(dòng),所述社交活動(dòng)包括但不限于對(duì)被看護(hù)對(duì)象提供有效的陪伴和交流、技能培訓(xùn)、消息傳遞和提醒,及其他更復(fù)雜的服務(wù),還包括攝影和錄音、歌唱伴奏、游戲參與共享家庭故事和知識(shí)等,所述兒童看護(hù)機(jī)器人的功能還包括在觸摸顯示屏201中提供一個(gè)人性化界面,例如在觸摸顯示屏上顯示圖形、卡通、寵物和父母、長(zhǎng)輩的形象;結(jié)合當(dāng)時(shí)的場(chǎng)景,通過(guò)履帶/輪式移動(dòng)機(jī)械裝置205進(jìn)行移動(dòng)、通過(guò)機(jī)械手臂206完成肢體動(dòng)作,以及通過(guò)展示彩色的光等,提升交流的效率,改善與被看護(hù)對(duì)象的伙伴關(guān)系。
本發(fā)明實(shí)施例中的兒童看護(hù)機(jī)器人的核心部件為處理及運(yùn)算模塊204,所述處理及運(yùn)算模塊204硬件結(jié)構(gòu)如圖3所示,包括主板310和其他周邊的功能部件。傳感器組301、按鈕302分別與主板310的i/o模塊連接,麥克風(fēng)陣列303與主板310的音視頻編解碼模塊連接,主板310的觸摸顯示控制器接收觸摸顯示屏304的觸控輸入并提供顯示驅(qū)動(dòng)信號(hào),電機(jī)伺服控制器則根據(jù)程序指令驅(qū)動(dòng)電機(jī)及編碼器307,電機(jī)及編碼器307驅(qū)動(dòng)履帶/輪式移動(dòng)機(jī)械裝置和機(jī)械手臂,形成看護(hù)機(jī)器人的移動(dòng)和肢體語(yǔ)言,聲音則由音頻編解碼模塊輸出經(jīng)功率放大器推動(dòng)揚(yáng)聲器308得到。主板310上還包括處理器及存儲(chǔ)器,存儲(chǔ)器存儲(chǔ)所述看護(hù)機(jī)器人的算法和執(zhí)行程序及其配置文件,還存儲(chǔ)看護(hù)機(jī)器人執(zhí)行看護(hù)工作時(shí)所需的音視頻和圖像文件等,還存儲(chǔ)程序運(yùn)行時(shí)的一些臨時(shí)文件。主板310的通信模塊提供看護(hù)機(jī)器人與外部網(wǎng)絡(luò)的通信功能,優(yōu)選的,近程通信時(shí)使用藍(lán)牙或wifi模塊。主板310還包括電源管理模塊,通過(guò)連接的電源系統(tǒng)305實(shí)現(xiàn)設(shè)備的電池充放電和節(jié)能管理。無(wú)線接收和發(fā)射天線裝置306與主板310相連接。
下面結(jié)合附圖對(duì)本申請(qǐng)?zhí)峁┑目醋o(hù)機(jī)器人的數(shù)據(jù)處理方法進(jìn)行具體說(shuō)明。
參見(jiàn)圖4,為本申請(qǐng)?zhí)峁┑脑摲椒òǎ?/p>
s401,模型引擎接收到目標(biāo)對(duì)象的數(shù)據(jù),生成目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣,其中,所述數(shù)據(jù)中包括所述目標(biāo)對(duì)象的能力參數(shù),所述能力參數(shù)包括實(shí)測(cè)能力參數(shù)以及所述目標(biāo)對(duì)象對(duì)應(yīng)的統(tǒng)計(jì)能力參數(shù),生成的所述目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣中包括所述能力參數(shù),以及根據(jù)所述能力參數(shù)計(jì)算出的能力參數(shù)調(diào)整值和綜合能力參數(shù)。
具體的,所述實(shí)測(cè)能力參數(shù)可以是通過(guò)傳感器獲取的目標(biāo)對(duì)象的自然社交場(chǎng)景下獲取的,也可以是所述目標(biāo)對(duì)象預(yù)先進(jìn)行能力測(cè)評(píng)確定的,所述統(tǒng)計(jì)能力參數(shù)是第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu)提供的,是根據(jù)所述目標(biāo)對(duì)象相應(yīng)的年齡段的對(duì)象所統(tǒng)計(jì)出的。
可選的,所述成長(zhǎng)模型能力參數(shù)矩陣也可以是從人工智能模塊獲取的。
舉例說(shuō)明,所述目標(biāo)對(duì)象可以為被看護(hù)對(duì)象,所述數(shù)據(jù)可以為被看護(hù)對(duì)象的聲音,表情,動(dòng)作等,所述第三方專業(yè)服務(wù)機(jī)構(gòu)對(duì)被看護(hù)對(duì)象的能力進(jìn)行評(píng)估,包括表達(dá)能力、思維能力、觀察能力、注意能力、記憶能力、想像能力、以及運(yùn)動(dòng)能力,所有的能力評(píng)估的參數(shù)以能力年齡的方式來(lái)顯示。例如,第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu)可以采用希-內(nèi)學(xué)習(xí)能力測(cè)試法(hiskey-nebraskatestoflearningaptitude,h-ntla)標(biāo)準(zhǔn),或者國(guó)家康復(fù)中心制定的測(cè)試模型,開(kāi)展兒童學(xué)習(xí)能力評(píng)估,輸出學(xué)習(xí)能力評(píng)估結(jié)果,學(xué)習(xí)能力評(píng)估可以定期開(kāi)展例如,一個(gè)季度或者半年,測(cè)試對(duì)象主要是3~8歲兒童,通常采用穿珠,聯(lián)想,擺方木,記顏色,辯認(rèn)圖,短記憶力,折紙,聯(lián)想等多個(gè)科目測(cè)試方法,對(duì)兒童的綜合學(xué)習(xí)能力進(jìn)行量化,輸出和分析結(jié)果及建議報(bào)告,并提供長(zhǎng)期的可持續(xù)的能力訓(xùn)練和測(cè)試服務(wù)。一個(gè)具體的報(bào)告樣例如圖5所示,橫軸為科目,縱軸為年齡,被測(cè)試者的年齡:6.5歲,包括多個(gè)測(cè)試科目501,科目測(cè)試得分502,被測(cè)試者年齡504、根據(jù)科目測(cè)試結(jié)果和該年齡下平均測(cè)試得分?jǐn)M合得到的智力年齡503。該測(cè)試者的優(yōu)勢(shì)科目為:穿珠、記顏色、辨認(rèn)圖、聯(lián)想、折紙、擺方木、完成圖;劣勢(shì)科目為:短記憶,該測(cè)試者的智力年齡相當(dāng)于7.4歲,根據(jù)圖5中得出的分析結(jié)果和建議為,該測(cè)試者的能力高于平均統(tǒng)計(jì)值,注意能力均衡發(fā)展,保持語(yǔ)言能力優(yōu)勢(shì)。另一個(gè)測(cè)試者生成的成長(zhǎng)模型能力參數(shù)矩陣如圖6所示,被看護(hù)對(duì)象用戶名字是dolores,一位5歲的女孩,能力年齡是將該能力實(shí)際測(cè)試分值,換算為該能力項(xiàng)目統(tǒng)計(jì)典型平均值對(duì)應(yīng)的年齡值,例如,dolores的運(yùn)動(dòng)能力610的測(cè)試分?jǐn)?shù)為123.4,相當(dāng)于6歲的兒童的平均運(yùn)動(dòng)能力得分值,因此該項(xiàng)實(shí)測(cè)能力602為6.0,成長(zhǎng)模型能力參數(shù)矩陣601中的每個(gè)能力測(cè)試項(xiàng)還包括:該年齡下社會(huì)統(tǒng)計(jì)最大值604和最小值605,統(tǒng)計(jì)能力603,調(diào)整值606,調(diào)整幅度607,備注608,其中,99.6%概率以上的兒童的單項(xiàng)能力測(cè)試數(shù)據(jù)都會(huì)落在最大值和最小值之間,成長(zhǎng)模型能力參數(shù)矩陣601還可以包括注意能力609,運(yùn)動(dòng)能力610,備注內(nèi)容611、612、以及綜合能力613,該綜合能力613根據(jù)實(shí)測(cè)能力602的各項(xiàng)分?jǐn)?shù)的求算術(shù)平均值得到,也可以根據(jù)實(shí)測(cè)能力602的各項(xiàng)分?jǐn)?shù)加權(quán)求和得到,權(quán)重系數(shù)可以根據(jù)人工智能模塊學(xué)習(xí)和訓(xùn)練所需的各能力參數(shù)的權(quán)重分配得到,也可以是用戶調(diào)整和分配人工智能模塊學(xué)習(xí)和訓(xùn)練所需的各能力參數(shù)的權(quán)重比例。綜合能力值的計(jì)算公式1如下:
t=w1×c1+w2×c2+w3×c3+w4×c4+…wn×cn(公式1)
其中,t綜合能力值,wn第n項(xiàng)能力參數(shù)權(quán)重系數(shù),cn第n項(xiàng)能力測(cè)試值。
s402,所述模型引擎根據(jù)調(diào)整公式系數(shù)或者根據(jù)標(biāo)準(zhǔn)的成長(zhǎng)模型能力參數(shù)矩陣對(duì)所述成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù)調(diào)整值進(jìn)行調(diào)整,確定出調(diào)整后的所述能力參數(shù)調(diào)整值,其中,所述公式為根據(jù)所述能力參數(shù)計(jì)算出的綜合能力參數(shù)和能力參數(shù)調(diào)整值所使用的。
舉例說(shuō)明,被看護(hù)對(duì)象的合法監(jiān)護(hù)人在社交活動(dòng)中為dolores找到了一個(gè)學(xué)習(xí)的榜樣,這個(gè)榜樣是一個(gè)年齡與dolores稍長(zhǎng)的女孩susan,她在某些能力表現(xiàn)上明顯優(yōu)于dolores。susan的合法監(jiān)護(hù)人同意將她的成長(zhǎng)能力參數(shù)矩陣分享給dolores的合法監(jiān)護(hù)人,dolores的合法監(jiān)護(hù)人通過(guò)手機(jī)app或短距通信等方式獲得了susan的成長(zhǎng)能力參數(shù)矩陣,該成長(zhǎng)能力參數(shù)矩陣數(shù)據(jù)可能需要轉(zhuǎn)換格式,以確保該成長(zhǎng)能力參數(shù)矩陣與圖6相同,可選的,dolores的的合法監(jiān)護(hù)人也可以對(duì)獲取的susan的能成長(zhǎng)能力參數(shù)矩陣進(jìn)行局部調(diào)整,以選擇更合適dolores的成長(zhǎng)能力參數(shù)矩陣。
s403,所述模型引擎判斷調(diào)整后的所述能力參數(shù)調(diào)整值是否超過(guò)預(yù)設(shè)閾值。
可選的,若所述調(diào)整后的能力參數(shù)超過(guò)預(yù)設(shè)閾值,則重新執(zhí)行步驟s402。
s404,若所述調(diào)整后的能力參數(shù)調(diào)整值在所述預(yù)設(shè)閾值范圍內(nèi),所述模型引擎將調(diào)整后的所述能力參數(shù)調(diào)整值發(fā)送給機(jī)器學(xué)習(xí)引擎,其中,所述機(jī)器學(xué)習(xí)引擎根據(jù)所述能力參數(shù)調(diào)整值為人工智能模塊提供與所述目標(biāo)對(duì)象交互時(shí)所需要的能力參數(shù)。
本發(fā)明實(shí)施例中,調(diào)整后的目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù)調(diào)整值,用于提供給看護(hù)機(jī)器人的機(jī)器學(xué)習(xí)引擎,通過(guò)神經(jīng)網(wǎng)絡(luò),機(jī)器學(xué)習(xí)模型等的作用,為看護(hù)機(jī)器人的人工智能模塊提供關(guān)于如何有效和交互對(duì)象互動(dòng)的特征參數(shù),并發(fā)送到?jīng)Q策和執(zhí)行器,并進(jìn)一步通過(guò)執(zhí)行裝置實(shí)施看護(hù)機(jī)器人的各種互動(dòng)內(nèi)容,包括機(jī)械位置移動(dòng)、模擬顯示表情、燈光效果、音樂(lè)播放、文字、圖案或者用戶能適應(yīng)的語(yǔ)速、語(yǔ)音、語(yǔ)調(diào)和交談內(nèi)容,還包括為被看護(hù)對(duì)象提供語(yǔ)音交流、培訓(xùn)、提醒、攝影,建立/維護(hù)/分享家庭故事和知識(shí)、游戲、音樂(lè)協(xié)商、甚至健身鍛煉等內(nèi)容,并提供建立親密的朋友關(guān)系,通過(guò)豐富的互動(dòng)和應(yīng)用與兒童用戶建立類(lèi)似人類(lèi)的伙伴的親密關(guān)系??蛇x的,機(jī)器學(xué)習(xí)引擎也可以部分在云端實(shí)現(xiàn),比如由第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu)提供,通過(guò)各種基于云特性的訓(xùn)練系統(tǒng)持續(xù)學(xué)習(xí)和改進(jìn)算法實(shí)現(xiàn)成長(zhǎng)模型能力參數(shù)矩陣的及時(shí)更新,而另一部分在本地進(jìn)行,例如人工智能模塊,以確保看護(hù)機(jī)器人能在脫離網(wǎng)絡(luò)的時(shí)候能可靠運(yùn)行,看護(hù)機(jī)器人也可以根據(jù)是否網(wǎng)絡(luò)在線的情況,選擇合適的機(jī)器學(xué)習(xí)模式。舉例說(shuō)明,模型引擎根據(jù)被測(cè)對(duì)象的實(shí)測(cè)能力值、統(tǒng)計(jì)能力值、最大值和最小值,計(jì)算出一個(gè)能力調(diào)整值,該能力調(diào)整值將替代實(shí)測(cè)能力值,參與人工智能模塊的下一個(gè)周期的學(xué)習(xí)和訓(xùn)練過(guò)程中,確保在下一個(gè)周期的的機(jī)器學(xué)習(xí)和訓(xùn)練中,看護(hù)機(jī)器人能以略高于當(dāng)前被陪護(hù)的兒童的綜合能力,與被看護(hù)對(duì)象進(jìn)行交互。具體的,能力調(diào)整算法的一種計(jì)算方式如下:
cadj=k×c
∑cmin≥∑cadj≥∑cmax
其中:cadj為能力調(diào)整值;k為能力成長(zhǎng)系數(shù),范圍在1.00~1.50之間;c為單項(xiàng)測(cè)試實(shí)測(cè)能力值;∑cadj綜合能力值;∑cmin綜合能力值社會(huì)統(tǒng)計(jì)值下限;∑cmax綜合能力值社會(huì)統(tǒng)計(jì)值上限。
步驟s104之后,所述模型引擎根據(jù)接收到的人為調(diào)整能力參數(shù)的指令,對(duì)所述成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù)進(jìn)行調(diào)整,根據(jù)調(diào)整后的能力參數(shù),確定出調(diào)整后的所述能力參數(shù)調(diào)整值,可選的,若所述調(diào)整后的能力參數(shù)超過(guò)預(yù)設(shè)閾值,則重新執(zhí)行上述步驟。
舉例說(shuō)明,被看護(hù)對(duì)象的合法監(jiān)護(hù)人可以通過(guò)移動(dòng)智能終端對(duì)被看護(hù)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣進(jìn)行人為調(diào)整,在移動(dòng)智能終端的應(yīng)用程序的用戶界面上出現(xiàn)如圖7所示的示意圖,將表達(dá)能力、思維能力、觀察能力、注意能力、記憶能力、想像能力以及運(yùn)動(dòng)能力用雷達(dá)圖展示給用戶。用戶通過(guò)滑動(dòng)手勢(shì)704將調(diào)整值能力參數(shù)702進(jìn)行調(diào)整,調(diào)整后的調(diào)整值能力參數(shù)不會(huì)超過(guò)統(tǒng)計(jì)最大值703和統(tǒng)計(jì)最小值705的范圍。在進(jìn)行調(diào)整值能力參數(shù)調(diào)整時(shí),可以適當(dāng)降低偏高的能力項(xiàng)的能力值,以保持各項(xiàng)能力均衡發(fā)展,也可以保證調(diào)整后的被看護(hù)對(duì)象的綜合能力不低于當(dāng)前的實(shí)測(cè)綜合能力701??蛇x的,用戶也可以對(duì)能力參數(shù)的邊界閾值進(jìn)行自定義,而不受統(tǒng)計(jì)值的影響。
本發(fā)明實(shí)施例中,一種看護(hù)機(jī)器人的軟件模塊基本架構(gòu)可以如圖8所示,包括:傳感器模塊801,所述傳感器模塊801具體包括用于人臉及表情識(shí)別的攝像頭陣列802,位置及動(dòng)作識(shí)別的加速度傳感器803、用于室內(nèi)/室外定位的位置傳感器804、開(kāi)始/暫停/緊急按鈕805、用于用戶和環(huán)境聲音接收的麥克風(fēng)陣列806、接收用戶觸控指令的觸摸顯示屏807;人工智能模塊821,具體包括語(yǔ)言模塊822、視覺(jué)模塊823、表情/情緒模塊824和內(nèi)容聚合模塊825。人工智能模塊821根據(jù)來(lái)自經(jīng)過(guò)信號(hào)處理811處理過(guò)的各類(lèi)傳感器獲取的豐富的環(huán)境感知信號(hào),以及來(lái)自模型引擎881的提供的機(jī)器學(xué)習(xí)模型參數(shù)即成長(zhǎng)模型能力參數(shù)矩陣,輸出經(jīng)過(guò)機(jī)器學(xué)習(xí)獲得的看護(hù)機(jī)器人的控制信號(hào),由決策/執(zhí)行器841控制執(zhí)行裝置861實(shí)施看護(hù)機(jī)器人的各種互動(dòng)內(nèi)容,包括但不限于通過(guò)機(jī)械移動(dòng)裝置862實(shí)現(xiàn)的機(jī)械位置移動(dòng)、通過(guò)圖形圖像863實(shí)現(xiàn)的模擬顯示表情,展示文字、圖案,通過(guò)燈光864實(shí)現(xiàn)的燈光效果,通過(guò)音樂(lè)866實(shí)現(xiàn)的音樂(lè)播放、或者通過(guò)語(yǔ)音865實(shí)現(xiàn)的使被看護(hù)對(duì)象能適應(yīng)的語(yǔ)速、語(yǔ)音、語(yǔ)調(diào)和交談內(nèi)容,通過(guò)豐富的互動(dòng)和應(yīng)用與被看護(hù)對(duì)象建立類(lèi)似人類(lèi)伙伴的親密關(guān)系,其中,模型引擎881包括用戶成長(zhǎng)模型模塊882以及模型修正模塊883。人工智能模塊821另一部分?jǐn)?shù)據(jù)來(lái)源是來(lái)自本地存儲(chǔ)器834和云端的存儲(chǔ)器831的數(shù)據(jù),具體的,所述另一部分?jǐn)?shù)據(jù)的其中一部分是人工智能模塊821的已獲得的機(jī)器學(xué)習(xí)成果,另一部分可以是來(lái)自第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu)830提供被看護(hù)對(duì)象的能力測(cè)試數(shù)據(jù),或者來(lái)自移動(dòng)智能終端891的傳送的其他數(shù)據(jù),其中,云端的存儲(chǔ)器831的數(shù)據(jù)通過(guò)通信模塊890發(fā)送到本地存儲(chǔ)器834,如關(guān)于成長(zhǎng)模型能力參數(shù)矩陣的偏好設(shè)置871,所述第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu)830還包括云計(jì)算832。
本發(fā)明實(shí)施例中,看護(hù)機(jī)器人的語(yǔ)言模塊是看護(hù)機(jī)器人的“耳朵和嘴巴”,具體模塊結(jié)構(gòu)如圖9中的900所示,包括:語(yǔ)音識(shí)別,聲源定位、語(yǔ)義糾錯(cuò)、語(yǔ)義分析、內(nèi)容管理、語(yǔ)音合成、說(shuō)話人識(shí)別、語(yǔ)音喚醒、情緒識(shí)別和語(yǔ)音模型等子功能模塊。語(yǔ)言模塊的輸入信號(hào)是由麥克風(fēng)陣列采集的周?chē)h(huán)境的聲音信號(hào),再經(jīng)過(guò)語(yǔ)音信號(hào)處理模塊處理后的信號(hào),其中,在大多數(shù)的情況下,麥克風(fēng)陣列必須要做到在嘈雜環(huán)境中準(zhǔn)確識(shí)別出被陪護(hù)對(duì)象、其他相關(guān)人員及環(huán)境中其他聲源的的位置或者方位,區(qū)別出是環(huán)境的背景噪聲還是人們說(shuō)話的聲音,并準(zhǔn)確地識(shí)別出說(shuō)話的內(nèi)容,麥克風(fēng)陣列可以是多個(gè)微電子機(jī)械系統(tǒng)(micro-electro-mechanicalsystem,mems)麥克風(fēng)的陣列,安裝在兒童陪護(hù)機(jī)器人某些部件的表面,也可以是單個(gè)的全向麥克風(fēng)或者單向麥克風(fēng)的組合,安裝的位置可以是比如頭部、頸部、背部甚至機(jī)械手臂和履帶/輪式移動(dòng)機(jī)械裝置的表面。一種可選的實(shí)現(xiàn)方式中,語(yǔ)言模塊采用自然語(yǔ)言處理算法,將語(yǔ)音信號(hào)轉(zhuǎn)換成文本,并且根據(jù)合適的語(yǔ)言規(guī)則進(jìn)行語(yǔ)義糾錯(cuò)和語(yǔ)義分析處理,進(jìn)一步轉(zhuǎn)換成可以處理的文字記錄,該文字記錄再進(jìn)一步解析以理解交互對(duì)象的意圖,自然語(yǔ)言處理算法中的文字記錄格式可以采用例如擴(kuò)充巴科斯范式(backus-naurform,bnf)標(biāo)記、java語(yǔ)言語(yǔ)法格式(javaspeechgrammarformat,jsgf)或話音識(shí)別語(yǔ)法格式(speechrecognitiongrammarformat,srgf)等,當(dāng)收集到很多交互對(duì)象的用戶話音數(shù)據(jù)后,可以通過(guò)機(jī)器學(xué)習(xí)引擎910引入統(tǒng)計(jì)算法,進(jìn)一步提高語(yǔ)音識(shí)別的準(zhǔn)確度,并刷新交互對(duì)象的語(yǔ)音模型。語(yǔ)言模塊900中具備的說(shuō)話人識(shí)別模塊,可以對(duì)交互對(duì)象的說(shuō)話人身份進(jìn)行識(shí)別,區(qū)分出是被陪護(hù)對(duì)象還是其監(jiān)護(hù)人,或者是提供輔助的教師甚至是保姆;內(nèi)容管理模塊根據(jù)說(shuō)話人身份、第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu)的云存儲(chǔ)和云計(jì)算提供的用戶數(shù)據(jù)和交互內(nèi)容包,輸出語(yǔ)音交互的內(nèi)容信息,由決策&執(zhí)行器發(fā)出指令,在看護(hù)機(jī)器人的用戶交互界面,以聲音、文字、圖像和燈光等方式輸出;語(yǔ)音模型模塊,可以根據(jù)交互對(duì)象的語(yǔ)音信息擬合出對(duì)象的語(yǔ)音模型,用來(lái)量化測(cè)評(píng)語(yǔ)音對(duì)象的語(yǔ)音特點(diǎn),該模型也可以來(lái)自第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu),例如提供兒童專業(yè)教育服務(wù)的商業(yè)機(jī)構(gòu)的專業(yè)測(cè)試結(jié)果,機(jī)器學(xué)習(xí)引擎910給語(yǔ)音模塊900提供機(jī)器學(xué)習(xí)模型,用于進(jìn)一步訓(xùn)練和提高語(yǔ)音的機(jī)器識(shí)別效率和準(zhǔn)確度,提高語(yǔ)音交互的內(nèi)容質(zhì)量。另外,圖9中的語(yǔ)音信號(hào)處理模塊采用的聲音波束形成算法去除在特定方向之外的聲音,獲取該特定方位的聲音信號(hào),該聲音波束形成算法也可以同時(shí)允許看護(hù)機(jī)器人周?chē)鄠€(gè)方位的聲音輸入,語(yǔ)音信號(hào)處理模塊也可以包括語(yǔ)音/非語(yǔ)音檢測(cè)算法,用于識(shí)別聲音源的屬性是人還是其他音源,語(yǔ)音信號(hào)處理模塊還可以包括環(huán)境噪聲抑制算法,比如可配置成由全向麥克風(fēng)采集環(huán)境噪聲信號(hào),或者由安裝在履帶/輪式移動(dòng)機(jī)械裝置的表面采集的機(jī)械裝置運(yùn)行的噪聲,或者是來(lái)自看護(hù)機(jī)器人周邊各個(gè)方位的強(qiáng)度接近的環(huán)境噪聲等,環(huán)境噪聲抑制算法在聲音合成處理時(shí)減去這些環(huán)境噪聲信號(hào),提高有用信號(hào)的強(qiáng)度。在另一些可行的實(shí)施例中,聲音的波束方向信息還可以與視覺(jué)模塊捕獲的的圖像結(jié)合,計(jì)算識(shí)別發(fā)出聲音的對(duì)象的屬性是被陪護(hù)對(duì)象,還是其他人或者其他環(huán)境聲源。視覺(jué)模塊可以結(jié)合履帶/輪式移動(dòng)機(jī)械裝置的拖動(dòng),將機(jī)器人的視覺(jué)方位朝向聲源的方位,提高聲音的識(shí)別效率。
本發(fā)明實(shí)施例中,看護(hù)機(jī)器人的視覺(jué)模塊是看護(hù)機(jī)器人的“眼睛”,具體結(jié)構(gòu)如圖10中的1000所示,包括:定位和地圖構(gòu)建(simultaneouslocalizationandmapping,slam)、眼動(dòng)跟蹤、人臉識(shí)別、圖像分割、圖像檢索、圖像分類(lèi)和視覺(jué)模型等子功能模塊。視覺(jué)模塊的輸入的信號(hào)是經(jīng)過(guò)圖像信號(hào)處理的攝像頭陣列采集到的視頻或者圖像信號(hào),攝像頭陣列可以是一組具有多個(gè)相機(jī)(camera)的傳感器,具體為,具備圖像深度檢測(cè)能力的雙攝像頭模組,其中一個(gè)彩色攝像頭獲取對(duì)象的平面彩色圖像信息,另一個(gè)紅外的攝像頭同時(shí)獲取目標(biāo)的深度信息,該攝像頭陣列可檢測(cè)目標(biāo)的輪廓、表面狀態(tài)、運(yùn)動(dòng)狀態(tài)和顏色。攝像頭陣列可配置成獲取被感測(cè)目標(biāo)的環(huán)境中被看護(hù)對(duì)象的情感狀態(tài),例如,視覺(jué)模塊可設(shè)置為附近環(huán)境中是否有人存在,并獲取該對(duì)象的面部表情,并采用情感識(shí)別算法預(yù)測(cè)該對(duì)象當(dāng)前的情感狀態(tài)。當(dāng)被陪護(hù)對(duì)象發(fā)出短暫的“ah…”的聲音時(shí),看護(hù)機(jī)器人的麥克風(fēng)陣列及傳感器組接收到該聲音來(lái)自周?chē)h(huán)境的某個(gè)方位并達(dá)到了一定的強(qiáng)度,看護(hù)機(jī)器人被從休眠狀態(tài)中激活,語(yǔ)言模塊計(jì)算出聲源的方位,發(fā)出驅(qū)動(dòng)信號(hào),由決策/執(zhí)行模塊驅(qū)動(dòng)履帶/輪式移動(dòng)機(jī)械裝置將攝像頭轉(zhuǎn)向該聲源的方位,開(kāi)啟視覺(jué)模塊獲取該方位的平面彩色圖像,探測(cè)目標(biāo)的深度,啟動(dòng)人臉識(shí)別、圖像分割模塊截取目標(biāo)的臉部表情圖像,由圖像檢索模塊在存儲(chǔ)器中搜索該視覺(jué)范圍內(nèi)有沒(méi)有匹配的已注冊(cè)的人臉圖像,若匹配到已注冊(cè)的人臉圖像,則進(jìn)一步獲取被看護(hù)對(duì)象的臉部表情圖像,并和被看護(hù)對(duì)象的聲音信號(hào)一起發(fā)送到語(yǔ)言模塊中的情緒識(shí)別模塊判斷對(duì)象的情緒狀態(tài),識(shí)別出被看護(hù)對(duì)象是喜悅、生氣、輕視、厭惡、害怕、悲傷、困惑、受挫或驚訝等某一種情緒,并輸出一個(gè)情感狀態(tài)參數(shù)矩陣,若圖像檢索模塊沒(méi)有匹配到已注冊(cè)的人臉圖像,則機(jī)器人切換到休眠狀態(tài)。視覺(jué)模塊的人臉識(shí)別模塊可以實(shí)現(xiàn)主動(dòng)的人體跟蹤,具體的,視覺(jué)模塊中的圖像分類(lèi)模塊可以識(shí)別出人體對(duì)象的面部,結(jié)合來(lái)自攝像頭陣列獲取的帶深度的目標(biāo)人體圖像和其他傳感器的識(shí)別信號(hào),例如紅外距離傳感器、無(wú)線射頻識(shí)別(radio-frequencyidentification,rfid)檢測(cè)傳感器等,結(jié)合目標(biāo)圖像的深度信息,將被看護(hù)對(duì)象的面部、頭部、軀干、手臂等部位從圖像背景中分離出來(lái),從而獲取識(shí)別被看護(hù)對(duì)象人體的面部部位、人體的骨架、身體姿勢(shì)等,并可以根據(jù)捕獲的人體目標(biāo)實(shí)現(xiàn)目標(biāo)跟蹤、運(yùn)動(dòng)軌跡的預(yù)測(cè)??蛇x的,攝像頭陣列也可以用于跟蹤被看護(hù)對(duì)象的手部動(dòng)作,采用手勢(shì)識(shí)別算法實(shí)現(xiàn)目標(biāo)手勢(shì)的跟蹤和手勢(shì)指令識(shí)別。視覺(jué)模塊具備的眼動(dòng)跟蹤模塊,通過(guò)人體對(duì)象眼部圖像的捕捉用戶的視線和關(guān)注焦點(diǎn),根據(jù)用戶眼睛關(guān)注焦點(diǎn)的轉(zhuǎn)移,焦點(diǎn)停留的時(shí)間,閉眼的動(dòng)作和持續(xù)時(shí)間,以及眨眼的頻率等,預(yù)測(cè)用戶當(dāng)前的興趣關(guān)注點(diǎn)??蛇x的,視覺(jué)模塊包括的定位和地圖構(gòu)建功能模塊,在看護(hù)機(jī)器人與被看護(hù)對(duì)象的互動(dòng)場(chǎng)景中,通過(guò)對(duì)被看護(hù)對(duì)象的動(dòng)態(tài)跟蹤,看護(hù)環(huán)境下的參照物和障礙物的識(shí)別情況,構(gòu)建出當(dāng)前場(chǎng)景下的看護(hù)機(jī)器人所處的室內(nèi)/室外地圖,并同步確定看護(hù)機(jī)器人在當(dāng)前地圖中的位置,規(guī)劃出看護(hù)機(jī)器人下一步的運(yùn)動(dòng)路線。具體的,可以利用混合當(dāng)前統(tǒng)計(jì)模型的交互式多模型(interactingmultiplemodel,imm)方法來(lái)預(yù)測(cè)隨機(jī)目標(biāo)的軌跡,并采用最近鄰數(shù)據(jù)關(guān)聯(lián)方法將動(dòng)態(tài)隨機(jī)目標(biāo)關(guān)聯(lián)到地圖中,構(gòu)建的地圖由靜態(tài)特征點(diǎn)和隨機(jī)目標(biāo)的軌跡組成。當(dāng)在場(chǎng)景中可能存在多個(gè)交互對(duì)象的情形下,定位和地圖構(gòu)建模塊可以記憶進(jìn)入該交互場(chǎng)景的多個(gè)交互對(duì)象的序列數(shù)據(jù),某個(gè)時(shí)間間隔之后,看護(hù)機(jī)器人能夠轉(zhuǎn)動(dòng)身體使得攝像頭陣列掃描之前記憶的多個(gè)交互對(duì)象的位置,以刷新記憶中的交互對(duì)象的序列數(shù)據(jù),形成新的交互對(duì)象的序列數(shù)據(jù)。例如,該特征也可以采用語(yǔ)音交互的方式來(lái)提高交互對(duì)象的序列數(shù)據(jù)的準(zhǔn)確性,比如看護(hù)機(jī)器人可以說(shuō):“小寶,你好”,然后根據(jù)交互的對(duì)象的響應(yīng)的語(yǔ)音表情、或身體姿勢(shì)的識(shí)別,確認(rèn)該交互對(duì)象是否是“小寶”,刷新記憶中的“小寶”的序列數(shù)據(jù)。
本發(fā)明實(shí)施例中,看護(hù)機(jī)器人的表情和情緒模塊是看護(hù)機(jī)器人的“臉”,具體結(jié)構(gòu)如圖11的1100所示,包括:表情識(shí)別、情感表達(dá)、情感閾值、情感模型子功能模塊??醋o(hù)機(jī)器人與被看護(hù)對(duì)象互動(dòng)時(shí),表情/情緒模塊用于實(shí)現(xiàn)情感識(shí)別和情感表達(dá)功能。情感識(shí)別的主要內(nèi)容包括心理社交感知、心理社交學(xué)習(xí)兩個(gè)方面。心理社交感知的外部信號(hào)可由傳感器模組來(lái)獲取,包括看護(hù)機(jī)器人與被看護(hù)對(duì)象互動(dòng)時(shí)獲取的自然社交場(chǎng)面的線索的集成機(jī)器感知,例如,語(yǔ)音語(yǔ)調(diào)、交談?wù)Z義、面部表情、眼睛關(guān)注點(diǎn)、身體姿勢(shì)和運(yùn)動(dòng)軌跡、觸摸手勢(shì)等。心理社交學(xué)習(xí)包括機(jī)器學(xué)習(xí)的算法,根據(jù)傳感器模組獲取的自然社交場(chǎng)面的多類(lèi)數(shù)據(jù)來(lái)分析被看護(hù)對(duì)象的身份、活動(dòng)模式、偏好和興趣,例如記錄被看護(hù)對(duì)象的的語(yǔ)音樣本并且利用語(yǔ)音識(shí)別模塊來(lái)檢測(cè)被看護(hù)對(duì)象的身份,然后可以根據(jù)被看護(hù)對(duì)象的身份從網(wǎng)絡(luò)獲取第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu)、教育機(jī)構(gòu)、或社交應(yīng)用等授權(quán)的更多的個(gè)人信息,并在情感模塊中完成對(duì)象的情感模型的建立或更新。表情識(shí)別模塊通過(guò)攝像頭陣列實(shí)時(shí)捕獲被看護(hù)對(duì)象的面部表情,將捕獲的面部表情轉(zhuǎn)化為表情參數(shù)矩陣,和存儲(chǔ)在本地存儲(chǔ)或者云存儲(chǔ)中的已有的被看護(hù)對(duì)象的人臉表情圖像樣本訓(xùn)練集的參數(shù)矩陣進(jìn)行數(shù)字特征的比較,若與人臉表情圖像樣本訓(xùn)練集的參數(shù)矩陣中的數(shù)字特征相似度很高或者匹配,則判斷該被看護(hù)對(duì)象此時(shí)的面部表情就是該樣本訓(xùn)練集中定義的面部表情。具體的,若待識(shí)別面部表情的參數(shù)矩陣數(shù)字特征為a,而樣本訓(xùn)練集存儲(chǔ)的表情圖像的數(shù)字特征為b,若a和b的差異小于某設(shè)定的閾值,則認(rèn)為捕獲的面部表情和存儲(chǔ)的表情圖像匹配,若a和b的差異大于或等于某設(shè)定的閾值,則將待識(shí)別的面部表情a添入到樣本訓(xùn)練集的另一組人臉表情圖像b’中,不斷重復(fù)上述步驟,直至匹配到與待識(shí)別的面部表情a匹配的唯一一組人臉表情圖像,完成表情識(shí)別過(guò)程。若無(wú)法在樣本訓(xùn)練集中找到與待識(shí)別人臉表情圖像匹配的唯一一組人臉表情圖像時(shí),則執(zhí)行樣本訓(xùn)練,上述樣本訓(xùn)練具體的過(guò)程是將設(shè)定的閾值調(diào)大,重復(fù)匹配步驟,直至找到與待識(shí)別的面部表情a匹配的唯一一組人臉表情圖像,如果在樣本訓(xùn)練集中找到與待識(shí)別人臉表情圖像匹配的至少二組人臉表情圖像時(shí),則將設(shè)定的閾值調(diào)小,重復(fù)上述匹配步驟,直至匹配到與待識(shí)別的面部表情a匹配的唯一一組人臉表情圖像,匹配過(guò)程結(jié)束。情感表達(dá)模塊根據(jù)被看護(hù)對(duì)象的情感模型所對(duì)應(yīng)的情感屬性,情感模型可以根據(jù)表情識(shí)別通過(guò)機(jī)器學(xué)習(xí)獲得。看護(hù)機(jī)器人通過(guò)被看護(hù)對(duì)象的人臉表情識(shí)別得知被看護(hù)對(duì)象處于正向情緒,例如微笑、平靜、滿意等,則選擇被看護(hù)對(duì)象能接受的表達(dá)內(nèi)容和表達(dá)方式,例如,輸出新的對(duì)話和新知識(shí)。但看護(hù)機(jī)器人判斷被看護(hù)對(duì)象的表情處于負(fù)向情緒,里如,疲憊、遲鈍、困惑等,則對(duì)當(dāng)前的互動(dòng)交流模式進(jìn)行調(diào)整,例如適當(dāng)?shù)赝nD,降低語(yǔ)音的速率,輸出激勵(lì)的語(yǔ)言、模擬笑臉,或者切換為緩慢的音樂(lè)背景等,使被看護(hù)對(duì)象保持一個(gè)相對(duì)穩(wěn)定的情緒狀態(tài),避免負(fù)面情緒蔓延??蛇x的,也可以對(duì)同一內(nèi)容采用不同表述形式,例如將文字變換為彩色圖形等。由于需要表達(dá)的內(nèi)容方式有多種,可以采用機(jī)器學(xué)習(xí)的方式,采用多個(gè)序列的學(xué)習(xí)模型,根據(jù)內(nèi)容對(duì)象的內(nèi)容和交互對(duì)象的智慧類(lèi)型,以及用戶偏好的表述模式不斷優(yōu)化表述方式的轉(zhuǎn)換方式,達(dá)到高效交互的目的。在實(shí)際的實(shí)施過(guò)程中,對(duì)于每個(gè)需要交互的內(nèi)容可以使用多種形式的交互界面設(shè)計(jì),例如交互可以設(shè)置為一次只有一個(gè)輸入的單步模式,或同時(shí)輸入語(yǔ)音、觸摸控制和圖像信息的同步模式,輸出也可以采用輸出自然語(yǔ)言、音效或者音樂(lè)、位置移動(dòng)、顯示文本/圖形/圖像/視頻、燈光效果的多媒體方式輸出。情感閾值模塊在識(shí)別和預(yù)測(cè)被看護(hù)對(duì)象的情感狀態(tài)過(guò)程中,隨時(shí)監(jiān)控被看護(hù)對(duì)象的情感閾值,以維持有效地可持續(xù)的溝通狀態(tài)。情感閾值指的是在被看護(hù)對(duì)象在各種與環(huán)境互動(dòng)的過(guò)程中,在外界環(huán)境刺激下發(fā)生情感崩潰之前的一個(gè)情感臨界值。例如,被看護(hù)對(duì)象在互動(dòng)過(guò)程中情緒已經(jīng)出現(xiàn)波動(dòng),再繼續(xù)持續(xù)當(dāng)前的互動(dòng)模式時(shí),被看護(hù)對(duì)象的情緒就會(huì)崩潰,可能發(fā)怒、大哭、大鬧等,也可能是被看護(hù)對(duì)象已經(jīng)開(kāi)始忍受環(huán)境的強(qiáng)烈刺激,如果再不調(diào)整互動(dòng)策略時(shí),被看護(hù)對(duì)象的心理將會(huì)受到很大傷害,上述臨界狀態(tài)的情感狀態(tài)就是的情感閾值。當(dāng)情感閾值設(shè)置過(guò)高,例如,在兒童課堂教育場(chǎng)景中,如果有孩子頻繁請(qǐng)求回答提問(wèn),但是由于看護(hù)機(jī)器人設(shè)置的情感閾值過(guò)高,沒(méi)有提醒知道指導(dǎo)老師及時(shí)給予該學(xué)生表現(xiàn)的機(jī)會(huì),可能會(huì)影響學(xué)生的積極性,影響長(zhǎng)期的教學(xué)效果。當(dāng)把情感閾值設(shè)得過(guò)低,又有可能在教學(xué)的過(guò)程中產(chǎn)生過(guò)多的無(wú)效消息提醒,最終導(dǎo)致系統(tǒng)效率太低不可用。為解決上述問(wèn)題,看護(hù)機(jī)器人互動(dòng)的過(guò)程中情感閾值實(shí)現(xiàn)動(dòng)態(tài)智能化調(diào)整,采用機(jī)器學(xué)習(xí)中的強(qiáng)化學(xué)習(xí)方法來(lái)獲得更適應(yīng)于當(dāng)前會(huì)話和互動(dòng)場(chǎng)景下合適的環(huán)境情感閾值,例如采用q-learning算法,該算法主要的學(xué)習(xí)目標(biāo)是在不確定的會(huì)話場(chǎng)景及環(huán)境下根據(jù)評(píng)價(jià)函數(shù)來(lái)選擇一個(gè)最優(yōu)情感閾值π,使得在學(xué)習(xí)時(shí)間內(nèi)獲得的累計(jì)折扣回報(bào)最大。當(dāng)互動(dòng)過(guò)程當(dāng)情感參數(shù)接近或者超過(guò)閾值π時(shí),看護(hù)機(jī)器人主動(dòng)調(diào)整交流和互動(dòng)策略,或者通過(guò)聲音、圖形、文字或者燈光提醒操作者或監(jiān)護(hù)人調(diào)整交流和互動(dòng)策略。情感模型模塊根據(jù)傳感器模塊捕獲的被看護(hù)對(duì)象的面部表情、語(yǔ)音語(yǔ)調(diào)、身體姿勢(shì)、運(yùn)動(dòng)狀態(tài)、室內(nèi)/室外的位置、生物信號(hào)等實(shí)時(shí)信息,輸出和匹配當(dāng)前用戶的的情感模型。其中,情感模型參數(shù)的一種常見(jiàn)量化方式是輸出對(duì)象的情感狀態(tài)參數(shù)矩陣。情感表達(dá)的內(nèi)容由內(nèi)容聚合模塊來(lái)實(shí)現(xiàn),內(nèi)容聚合模塊根據(jù)被看護(hù)對(duì)象的情感模型的的情感狀態(tài)參數(shù)矩陣,匹配出與被看護(hù)對(duì)象互動(dòng)過(guò)程中的策略和需執(zhí)行的交互任務(wù)和活動(dòng)內(nèi)容清單,該清單包括但不限于機(jī)械位置移動(dòng)、模擬顯示表情、燈光效果、音樂(lè)播放、文字、圖案、適當(dāng)?shù)恼Z(yǔ)速、語(yǔ)音、語(yǔ)調(diào)和交談內(nèi)容等多種交互形式,并形成控制指令,由決策&執(zhí)行器驅(qū)動(dòng)執(zhí)行裝置,由相應(yīng)的硬件功能模塊完成交互任務(wù)。
基于與方法實(shí)施例同樣的發(fā)明構(gòu)思,本申請(qǐng)還提供了一種模型引擎,如圖12所示,包括:
模型生成模塊1201,用于接收到目標(biāo)對(duì)象的數(shù)據(jù),生成目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣,其中,所述數(shù)據(jù)中包括所述目標(biāo)對(duì)象的能力參數(shù),所述能力參數(shù)包括實(shí)測(cè)能力參數(shù)以及所述目標(biāo)對(duì)象對(duì)應(yīng)的統(tǒng)計(jì)能力參數(shù),生成的所述目標(biāo)對(duì)象的成長(zhǎng)模型能力參數(shù)矩陣中包括所述能力參數(shù),以及根據(jù)所述能力參數(shù)計(jì)算出的能力參數(shù)調(diào)整值和綜合能力參數(shù)。
模型修正模塊1202,用于根據(jù)調(diào)整公式系數(shù)或者根據(jù)標(biāo)準(zhǔn)的成長(zhǎng)模型能力參數(shù)矩陣對(duì)所述成長(zhǎng)模型能力參數(shù)矩陣中的能力參數(shù)調(diào)整值進(jìn)行調(diào)整,確定出調(diào)整后的所述能力參數(shù)調(diào)整值,其中,所述公式為根據(jù)所述能力參數(shù)計(jì)算出的綜合能力參數(shù)和能力參數(shù)調(diào)整值所使用的。
所述模型修正模塊1202還用于,判斷調(diào)整后的所述能力參數(shù)調(diào)整值是否超過(guò)預(yù)設(shè)閾值;
若所述調(diào)整后的能力參數(shù)調(diào)整值在所述預(yù)設(shè)閾值范圍內(nèi),所述模型引擎將調(diào)整后的所述能力參數(shù)調(diào)整值發(fā)送給機(jī)器學(xué)習(xí)引擎,其中,所述機(jī)器學(xué)習(xí)引擎根據(jù)所述能力參數(shù)調(diào)整值為人工智能模塊提供與所述目標(biāo)對(duì)象交互時(shí)所需要的能力參數(shù)。
在一種可選的實(shí)施例中,模型引擎為兒童陪護(hù)機(jī)器人的人工智能模塊提供機(jī)器學(xué)習(xí)和訓(xùn)練的的模型,以實(shí)現(xiàn)效用的最大化。具體結(jié)構(gòu)如圖13所示,看護(hù)機(jī)器人的人工智能模塊根據(jù)傳感器模塊獲取的交互對(duì)象實(shí)時(shí)的自然社交場(chǎng)面的數(shù)據(jù),經(jīng)過(guò)人工智能模塊進(jìn)行訓(xùn)練和學(xué)習(xí),得到被看護(hù)對(duì)象的環(huán)境數(shù)據(jù)1301,其中,訓(xùn)練和學(xué)習(xí)的值模板包含但不限于語(yǔ)言模塊、視覺(jué)模塊、表情/情緒模塊,被看護(hù)對(duì)象的環(huán)境數(shù)至少包括語(yǔ)音、視覺(jué)模型、情感的機(jī)器感知數(shù)據(jù),還包括至少一家第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu)提供的第三方能力評(píng)估報(bào)告提供的測(cè)試數(shù)據(jù)1302;具體的,環(huán)境數(shù)據(jù)1301和測(cè)試數(shù)據(jù)1302是格式不完全相同,例如環(huán)境數(shù)據(jù)1301的格式是參數(shù)矩陣,測(cè)試數(shù)據(jù)1302的格式是固定格式的word文檔,環(huán)境數(shù)據(jù)和測(cè)試數(shù)據(jù)經(jīng)過(guò)數(shù)據(jù)格式轉(zhuǎn)化1303的處理,輸入到智能引擎1304進(jìn)行機(jī)器學(xué)習(xí)和訓(xùn)練,得到包含多個(gè)類(lèi)別的用戶特征的用戶成長(zhǎng)模型1305,用戶成長(zhǎng)模型1305可以采用成長(zhǎng)模型能力參數(shù)矩陣來(lái)體現(xiàn),其中,圖13中還包括模型修正模塊1306、機(jī)器學(xué)習(xí)引擎1307、人工智能模塊1308、決策和執(zhí)行器1309、第三方成長(zhǎng)模型1310以及用戶偏好設(shè)置1311。
本發(fā)明實(shí)施例中,通過(guò)自適應(yīng)適配和機(jī)器學(xué)習(xí)更好地匹配用戶的特征和需求,不斷優(yōu)化特定情形下和被看護(hù)對(duì)象的情感交流方式;獲取來(lái)自多個(gè)信息源的信息,包括用戶偏好設(shè)置、傳感器模塊、其他移動(dòng)智能裝置的信息、gps信號(hào)、來(lái)自互聯(lián)網(wǎng)的第三方網(wǎng)絡(luò)云服務(wù)機(jī)構(gòu)的數(shù)據(jù)等,通過(guò)機(jī)器學(xué)習(xí)等方式不斷獲取和識(shí)別被看護(hù)的使用環(huán)境,適配和改進(jìn)看護(hù)機(jī)器人的服務(wù)方式和內(nèi)容。
本申請(qǐng)實(shí)施例中對(duì)模塊的劃分是示意性的,僅僅為一種邏輯功能劃分,實(shí)際實(shí)現(xiàn)時(shí)可以有另外的劃分方式,另外,在本申請(qǐng)各個(gè)實(shí)施例中的各功能模塊可以集成在一個(gè)處理器中,也可以是單獨(dú)物理存在,也可以兩個(gè)或兩個(gè)以上模塊集成在一個(gè)模塊中。上述集成的模塊既可以采用硬件的形式實(shí)現(xiàn),也可以采用軟件功能模塊的形式實(shí)現(xiàn)。
其中,集成的模塊既可以采用硬件的形式實(shí)現(xiàn)時(shí),如圖14所示,模型引擎可以包括處理器1402。上述模塊對(duì)應(yīng)的實(shí)體的硬件可以為處理器1402。處理器1402,可以是一個(gè)中央處理模塊(英文:centralprocessingunit,簡(jiǎn)稱cpu),或者為數(shù)字處理模塊等等。模型引擎還可以包括通信接口1401,處理器1402通過(guò)通信接口1401接收數(shù)據(jù)。該裝置還包括:存儲(chǔ)器1403,用于存儲(chǔ)處理器1402執(zhí)行的程序。存儲(chǔ)器1403可以是非易失性存儲(chǔ)器,比如硬盤(pán)(英文:harddiskdrive,縮寫(xiě):hdd)或固態(tài)硬盤(pán)(英文:solid-statedrive,縮寫(xiě):ssd)等,還可以是易失性存儲(chǔ)器(英文:volatilememory),例如隨機(jī)存取存儲(chǔ)器(英文:random-accessmemory,縮寫(xiě):ram)。存儲(chǔ)器1403是能夠用于攜帶或存儲(chǔ)具有指令或數(shù)據(jù)結(jié)構(gòu)形式的期望的程序代碼并能夠由計(jì)算機(jī)存取的任何其他介質(zhì),但不限于此。
處理器1402用于執(zhí)行存儲(chǔ)器1403存儲(chǔ)的程序代碼,具體用于執(zhí)行圖4所示實(shí)施例所述的方法??梢詤⒁?jiàn)圖4所示實(shí)施例所述的方法,本申請(qǐng)?jiān)诖瞬辉儋樖觥?/p>
本申請(qǐng)實(shí)施例中不限定上述通信接口1401、處理器1402以及存儲(chǔ)器1403之間的具體連接介質(zhì)。本申請(qǐng)實(shí)施例在圖14中以存儲(chǔ)器1403、處理器1402以及通信接口1401之間通過(guò)總線1404連接,總線在圖14中以粗線表示,其它部件之間的連接方式,僅是進(jìn)行示意性說(shuō)明,并不引以為限。所述總線可以分為地址總線、數(shù)據(jù)總線、控制總線等。為便于表示,圖14中僅用一條粗線表示,但并不表示僅有一根總線或一種類(lèi)型的總線。
本發(fā)明實(shí)施例還提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),用于存儲(chǔ)為執(zhí)行上述處理器所需執(zhí)行的計(jì)算機(jī)軟件指令,其包含用于執(zhí)行上述處理器所需執(zhí)行的程序。
本領(lǐng)域內(nèi)的技術(shù)人員應(yīng)明白,本申請(qǐng)的實(shí)施例可提供為方法、系統(tǒng)、或計(jì)算機(jī)程序產(chǎn)品。因此,本申請(qǐng)可采用完全硬件實(shí)施例、完全軟件實(shí)施例、或結(jié)合軟件和硬件方面的實(shí)施例的形式。而且,本申請(qǐng)可采用在一個(gè)或多個(gè)其中包含有計(jì)算機(jī)可用程序代碼的計(jì)算機(jī)可用存儲(chǔ)介質(zhì)(包括但不限于磁盤(pán)存儲(chǔ)器、cd-rom、光學(xué)存儲(chǔ)器等)上實(shí)施的計(jì)算機(jī)程序產(chǎn)品的形式。
本申請(qǐng)是參照根據(jù)本申請(qǐng)的方法、設(shè)備(系統(tǒng))、和計(jì)算機(jī)程序產(chǎn)品的流程圖和/或方框圖來(lái)描述的。應(yīng)理解可由計(jì)算機(jī)程序指令實(shí)現(xiàn)流程圖和/或方框圖中的每一流程和/或方框、以及流程圖和/或方框圖中的流程和/或方框的結(jié)合??商峁┻@些計(jì)算機(jī)程序指令到通用計(jì)算機(jī)、專用計(jì)算機(jī)、嵌入式處理機(jī)或其他可編程數(shù)據(jù)處理設(shè)備的處理器以產(chǎn)生一個(gè)機(jī)器,使得通過(guò)計(jì)算機(jī)或其他可編程數(shù)據(jù)處理設(shè)備的處理器執(zhí)行的指令產(chǎn)生用于實(shí)現(xiàn)在流程圖一個(gè)流程或多個(gè)流程和/或方框圖一個(gè)方框或多個(gè)方框中指定的功能的裝置。
這些計(jì)算機(jī)程序指令也可存儲(chǔ)在能引導(dǎo)計(jì)算機(jī)或其他可編程數(shù)據(jù)處理設(shè)備以特定方式工作的計(jì)算機(jī)可讀存儲(chǔ)器中,使得存儲(chǔ)在該計(jì)算機(jī)可讀存儲(chǔ)器中的指令產(chǎn)生包括指令裝置的制造品,該指令裝置實(shí)現(xiàn)在流程圖一個(gè)流程或多個(gè)流程和/或方框圖一個(gè)方框或多個(gè)方框中指定的功能。
這些計(jì)算機(jī)程序指令也可裝載到計(jì)算機(jī)或其他可編程數(shù)據(jù)處理設(shè)備上,使得在計(jì)算機(jī)或其他可編程設(shè)備上執(zhí)行一系列操作步驟以產(chǎn)生計(jì)算機(jī)實(shí)現(xiàn)的處理,從而在計(jì)算機(jī)或其他可編程設(shè)備上執(zhí)行的指令提供用于實(shí)現(xiàn)在流程圖一個(gè)流程或多個(gè)流程和/或方框圖一個(gè)方框或多個(gè)方框中指定的功能的步驟。
顯然,本領(lǐng)域的技術(shù)人員可以對(duì)本申請(qǐng)進(jìn)行各種改動(dòng)和變型而不脫離本申請(qǐng)的精神和范圍。這樣,倘若本申請(qǐng)的這些修改和變型屬于本申請(qǐng)權(quán)利要求及其等同技術(shù)的范圍之內(nèi),則本申請(qǐng)也意圖包含這些改動(dòng)和變型在內(nèi)。