基于排序?qū)W習(xí)的自動(dòng)問(wèn)答裝置及方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及自動(dòng)問(wèn)答領(lǐng)域，具體地，涉及一種基于排序?qū)W習(xí)的自動(dòng)問(wèn)答裝置及方法。
【背景技術(shù)】
[0002]自動(dòng)問(wèn)答是一種能夠自動(dòng)回答問(wèn)題的機(jī)制。通用的自動(dòng)問(wèn)答機(jī)制，首先根據(jù)用戶查詢從問(wèn)答庫(kù)中篩選出若干候選問(wèn)答對(duì)，然后計(jì)算所述用戶查詢與每個(gè)候選問(wèn)答對(duì)之間的各種特征參數(shù)，然后利用這些特征參數(shù)、以及每種特征參數(shù)的特征權(quán)值來(lái)得出所述用戶查詢與各個(gè)候選問(wèn)答對(duì)之間的相似度，最后，根據(jù)所得出的相似度來(lái)對(duì)這些候選問(wèn)答對(duì)進(jìn)行排序。
[0003]然而，在現(xiàn)有的自動(dòng)問(wèn)答機(jī)制中，上面提到的特征權(quán)值，一般由開發(fā)人員根據(jù)經(jīng)驗(yàn)或先驗(yàn)知識(shí)進(jìn)行設(shè)定。一旦增加了某項(xiàng)特征參數(shù)，就需要開發(fā)人員重新手動(dòng)調(diào)整每項(xiàng)特征參數(shù)的特征權(quán)值，這就大大增加開發(fā)人員的維護(hù)工作量，并且不利于特征擴(kuò)展。另外，隨著問(wèn)答庫(kù)的更新，可能造成特征分布發(fā)生改變，必須調(diào)整原有特征權(quán)值才能較好的擬合用戶意圖。如果完全由人工調(diào)整完成，則開發(fā)人員維護(hù)壓力大，維護(hù)成本高，且實(shí)時(shí)性不好。

【發(fā)明內(nèi)容】

[0004]本發(fā)明的目的是提供一種基于排序?qū)W習(xí)的自動(dòng)問(wèn)答裝置及方法，該裝置及方法能夠利用機(jī)器學(xué)習(xí)方法，自動(dòng)構(gòu)建問(wèn)答排序模型，從而實(shí)現(xiàn)特征權(quán)值的自動(dòng)計(jì)算。
[0005]為了實(shí)現(xiàn)上述目的，本發(fā)明提供一種基于排序?qū)W習(xí)的自動(dòng)問(wèn)答方法，該方法包括:步驟a:構(gòu)建問(wèn)答庫(kù)，該問(wèn)答庫(kù)包括多個(gè)預(yù)設(shè)查詢和與每個(gè)預(yù)設(shè)查詢一一對(duì)應(yīng)的問(wèn)答集；步驟b:根據(jù)所述問(wèn)答庫(kù)中包括的所述預(yù)設(shè)查詢和所述問(wèn)答集，為每個(gè)預(yù)設(shè)查詢構(gòu)建訓(xùn)練樣本，并對(duì)所述訓(xùn)練樣本進(jìn)行正負(fù)例標(biāo)注；步驟c:根據(jù)每個(gè)預(yù)設(shè)查詢的訓(xùn)練樣本、以及每個(gè)預(yù)設(shè)查詢的訓(xùn)練樣本的正負(fù)例標(biāo)注，為每個(gè)預(yù)設(shè)查詢構(gòu)建排序訓(xùn)練數(shù)據(jù)；步驟d:利用所構(gòu)建的所有排序訓(xùn)練數(shù)據(jù)進(jìn)行排序?qū)W習(xí)，得出針對(duì)所述問(wèn)答庫(kù)的問(wèn)答排序模型；步驟e:接收用戶查詢，并根據(jù)所述用戶查詢從所述問(wèn)答庫(kù)中篩選與所述用戶查詢有關(guān)的候選問(wèn)答集；以及步驟f:利用所述問(wèn)答排序模型對(duì)所述候選問(wèn)答集進(jìn)行排序。
[0006]優(yōu)選地，在所述步驟b中，通過(guò)以下方式為每個(gè)預(yù)設(shè)查詢構(gòu)建訓(xùn)練樣本，并對(duì)所述訓(xùn)練樣本進(jìn)行正負(fù)例標(biāo)注:針對(duì)每個(gè)預(yù)設(shè)查詢，將該預(yù)設(shè)查詢與和其對(duì)應(yīng)的問(wèn)答集構(gòu)建為針對(duì)該預(yù)設(shè)查詢的訓(xùn)練樣本，并將該訓(xùn)練樣本標(biāo)注為正例；針對(duì)每個(gè)預(yù)設(shè)查詢，從所述問(wèn)答庫(kù)中確定與該預(yù)設(shè)查詢有關(guān)的候選問(wèn)答集，該候選問(wèn)答集包括與該預(yù)設(shè)查詢相對(duì)應(yīng)的問(wèn)答集和若干其他問(wèn)答集，將該預(yù)設(shè)查詢與所述若干其他問(wèn)答集一一構(gòu)建為針對(duì)該預(yù)設(shè)查詢的訓(xùn)練樣本，并將該訓(xùn)練樣本標(biāo)注為負(fù)例。
[0007]優(yōu)選地，在所述步驟c中，通過(guò)以下方式為每個(gè)預(yù)設(shè)查詢構(gòu)建排序訓(xùn)練數(shù)據(jù):針對(duì)每個(gè)預(yù)設(shè)查詢，確定針對(duì)該預(yù)設(shè)查詢的訓(xùn)練樣本的特征參數(shù)集，并根據(jù)所確定出的特征參數(shù)集、以及所述訓(xùn)練樣本的正負(fù)例標(biāo)注，構(gòu)建針對(duì)該預(yù)設(shè)查詢的排序訓(xùn)練數(shù)據(jù)。
[0008]優(yōu)選地，所述特征參數(shù)集包括相關(guān)性特征參數(shù)子集和重要性特征參數(shù)子集；所述問(wèn)答庫(kù)中的每個(gè)問(wèn)答集包括標(biāo)準(zhǔn)問(wèn)題、標(biāo)準(zhǔn)答案、擴(kuò)展問(wèn)題及擴(kuò)展答案；以及通過(guò)以下方式確定所述特征參數(shù)集:針對(duì)每個(gè)訓(xùn)練樣本，分別計(jì)算該訓(xùn)練樣本中的預(yù)設(shè)查詢與問(wèn)答集、以及與該問(wèn)答集中的所述標(biāo)準(zhǔn)問(wèn)題、所述標(biāo)準(zhǔn)答案、所述擴(kuò)展問(wèn)題、所述擴(kuò)展答案之間的同種相關(guān)性特征參數(shù)，并將所計(jì)算出的同種相關(guān)性特征參數(shù)進(jìn)行組合，得出該訓(xùn)練樣本的相關(guān)性特征參數(shù)子集；獲取該訓(xùn)練樣本中的問(wèn)答集的重要性特征參數(shù)，并將所獲取的重要性特征參數(shù)進(jìn)行組合，得出該訓(xùn)練樣本的重要性特征參數(shù)子集；以及將所述相關(guān)性特征參數(shù)子集和所述重要性特征子集進(jìn)行組合，得出該訓(xùn)練樣本的所述特征參數(shù)集。
[0009]優(yōu)選地，在所述步驟f中，通過(guò)以下方式對(duì)所述候選問(wèn)答集進(jìn)行排序:確定所述用戶查詢與篩選出的每個(gè)候選問(wèn)答集之間的特征參數(shù)集；將所述特征參數(shù)集輸入至所述問(wèn)答排序模型，以利用所述問(wèn)答排序模型對(duì)所述每個(gè)候選問(wèn)答集進(jìn)行排序。
[0010]優(yōu)選地，所述特征參數(shù)集包括相關(guān)性特征參數(shù)子集和重要性特征參數(shù)子集；所述問(wèn)答庫(kù)中的每個(gè)問(wèn)答集包括標(biāo)準(zhǔn)問(wèn)題、標(biāo)準(zhǔn)答案、擴(kuò)展問(wèn)題及擴(kuò)展答案；以及通過(guò)以下方式確定所述特征參數(shù)集:針對(duì)每個(gè)候選問(wèn)答集，分別計(jì)算所述用戶查詢與該候選問(wèn)答集、以及與該候選問(wèn)答集中的所述標(biāo)準(zhǔn)問(wèn)題、所述標(biāo)準(zhǔn)答案、所述擴(kuò)展問(wèn)題、所述擴(kuò)展答案之間的同種相關(guān)性特征參數(shù)，并將所計(jì)算出的同種相關(guān)性特征參數(shù)進(jìn)行組合，得出所述用戶查詢與該候選問(wèn)答集的相關(guān)性特征參數(shù)子集；獲取該候選問(wèn)答集的重要性特征參數(shù)，并將所獲取的重要性特征參數(shù)進(jìn)行組合，得出所述用戶查詢與該候選問(wèn)答集的重要性特征參數(shù)子集；以及將所述相關(guān)性特征參數(shù)子集和所述重要性特征子集進(jìn)行組合，得出所述用戶查詢與該候選問(wèn)答集的所述特征參數(shù)集。
[0011 ] 優(yōu)選地，針對(duì)不同領(lǐng)域，利用所述步驟a?所述步驟d為每個(gè)領(lǐng)域構(gòu)建一問(wèn)答庫(kù)以及針對(duì)該問(wèn)答庫(kù)的問(wèn)答排序模型；以及所述方法還包括:步驟g:接收來(lái)自用戶的領(lǐng)域選擇信息，并根據(jù)該領(lǐng)域選擇信息確定與用戶選擇的領(lǐng)域?qū)?yīng)的問(wèn)答庫(kù)；在所述步驟e中，接收所述用戶查詢，并根據(jù)所述用戶查詢從與所述用戶選擇的領(lǐng)域?qū)?yīng)的問(wèn)答庫(kù)中篩選與所述用戶查詢有關(guān)的候選問(wèn)答集；以及在所述步驟f中，利用針對(duì)與所述用戶選擇的領(lǐng)域?qū)?yīng)的問(wèn)答庫(kù)的問(wèn)答排序模型對(duì)與所述用戶查詢有關(guān)的所述候選問(wèn)答集進(jìn)行排序。
[0012]本發(fā)明還提供一種基于排序?qū)W習(xí)的自動(dòng)問(wèn)答裝置，該裝置包括:建庫(kù)端，該建庫(kù)端包括:問(wèn)答庫(kù)構(gòu)建模塊，用于構(gòu)建問(wèn)答庫(kù)，該問(wèn)答庫(kù)包括多個(gè)預(yù)設(shè)查詢和與每個(gè)預(yù)設(shè)查詢一一對(duì)應(yīng)的問(wèn)答集；訓(xùn)練樣本構(gòu)建模塊，用于根據(jù)所述問(wèn)答庫(kù)中包括的所述預(yù)設(shè)查詢和所述問(wèn)答集，為每個(gè)預(yù)設(shè)查詢構(gòu)建訓(xùn)練樣本，并對(duì)所述訓(xùn)練樣本進(jìn)行正負(fù)例標(biāo)注；排序訓(xùn)練數(shù)據(jù)構(gòu)建模塊，用于根據(jù)每個(gè)預(yù)設(shè)查詢的訓(xùn)練樣本、以及每個(gè)預(yù)設(shè)查詢的訓(xùn)練樣本的正負(fù)例標(biāo)注，為每個(gè)預(yù)設(shè)查詢構(gòu)建排序訓(xùn)練數(shù)據(jù)；問(wèn)答排序模型構(gòu)建模塊，用于利用所構(gòu)建的所有排序訓(xùn)練數(shù)據(jù)進(jìn)行排序?qū)W習(xí)，得出針對(duì)所述問(wèn)答庫(kù)的問(wèn)答排序模型；檢索端，該檢索端包括:檢索模塊，用于接收用戶查詢，并根據(jù)所述用戶查詢從所述問(wèn)答庫(kù)中篩選與所述用戶查詢有關(guān)的候選問(wèn)答集；以及排序模塊，用于利用所述問(wèn)答排序模型對(duì)所述候選問(wèn)答集進(jìn)行排序。
[0013]優(yōu)選地，所述訓(xùn)練樣本構(gòu)建模塊通過(guò)以下方式為每個(gè)預(yù)設(shè)查詢構(gòu)建訓(xùn)練樣本，并對(duì)所述訓(xùn)練樣本進(jìn)行正負(fù)例標(biāo)注:針對(duì)每個(gè)預(yù)設(shè)查詢，將該預(yù)設(shè)查詢與和其對(duì)應(yīng)的問(wèn)答集構(gòu)建為針對(duì)該預(yù)設(shè)查詢的訓(xùn)練樣本，并將該訓(xùn)練樣本標(biāo)注為正例；針對(duì)每個(gè)預(yù)設(shè)查詢，從所述問(wèn)答庫(kù)中確定與該預(yù)設(shè)查詢有關(guān)的候選問(wèn)答集，該候選問(wèn)答集包括與該預(yù)設(shè)查詢相對(duì)應(yīng)的問(wèn)答集和若干其他問(wèn)答集，將該預(yù)設(shè)查詢與所述若干其他問(wèn)答集一一構(gòu)建為針對(duì)該預(yù)設(shè)查詢的訓(xùn)練樣本，并將該訓(xùn)練樣本標(biāo)注為負(fù)例。
[0014]優(yōu)選地，該裝置還包括第一特征計(jì)算模塊；以及所述排序訓(xùn)練數(shù)據(jù)構(gòu)建模塊通過(guò)以下方式為每個(gè)預(yù)設(shè)查詢構(gòu)建排序訓(xùn)練數(shù)據(jù):針對(duì)每個(gè)預(yù)設(shè)查詢，調(diào)用所述第一特征計(jì)算模塊確定針對(duì)該預(yù)設(shè)查詢的訓(xùn)練樣本的特征參數(shù)集，并根據(jù)所確定出的特征參數(shù)集、以及所述訓(xùn)練樣本的正負(fù)例標(biāo)注，構(gòu)建針對(duì)該預(yù)設(shè)查詢的排序訓(xùn)練數(shù)據(jù)。
[0015]優(yōu)選地，所述特征參數(shù)集包括相關(guān)性特征參數(shù)子集和重要性特征參數(shù)子集；所述問(wèn)答庫(kù)中的每個(gè)問(wèn)答集包括標(biāo)準(zhǔn)問(wèn)題、標(biāo)準(zhǔn)答案、擴(kuò)展問(wèn)題及擴(kuò)展答案；以及所述第一特征計(jì)算模塊通過(guò)以下方式確定所述特征參數(shù)集:針對(duì)每個(gè)訓(xùn)練樣本，分別計(jì)算該訓(xùn)練樣本中的預(yù)設(shè)查詢與問(wèn)答集、以及與該問(wèn)答集中的所述標(biāo)準(zhǔn)問(wèn)題、所述標(biāo)準(zhǔn)答案、所述擴(kuò)展問(wèn)題、所述擴(kuò)展答案之間的同種相關(guān)性特征參數(shù)，并將所計(jì)算出的同種相關(guān)性特征參數(shù)進(jìn)行組合，得出該訓(xùn)練樣本的相關(guān)性特征參數(shù)子集；獲取該訓(xùn)練樣本中的問(wèn)答集的重要性特征參數(shù)，并將所獲取的重要性特征參數(shù)進(jìn)行組合，得出該訓(xùn)練樣本的重要性特征參數(shù)子集；以及將所述相關(guān)性特征參數(shù)子集和所述重要性特征子集進(jìn)行組合，得出該訓(xùn)練樣本的所述特征參數(shù)集。
[0016]優(yōu)選地，該裝置還包括第二特征計(jì)算模塊；以及所述排序模塊通過(guò)以下方式對(duì)所述候選問(wèn)答集進(jìn)行排序:調(diào)用所述第二特征計(jì)算模塊確定所述用戶查詢與篩選出的每個(gè)候選問(wèn)答集之間的特征參數(shù)集；將所述特征參數(shù)集輸入至所述問(wèn)答排序模型，以利用所述問(wèn)答排序模型對(duì)所述每個(gè)候選問(wèn)答集進(jìn)行排序。
[0017]優(yōu)選地，所述特征參數(shù)集包括相關(guān)性特征參數(shù)子集和重要性特征參數(shù)子集；所述問(wèn)答庫(kù)中的每個(gè)問(wèn)答集包括標(biāo)準(zhǔn)問(wèn)題、標(biāo)準(zhǔn)答案、擴(kuò)展問(wèn)題及擴(kuò)展答案；以及所述第二特征計(jì)算模塊通過(guò)以下方式確定所述特征參數(shù)集:針對(duì)每個(gè)候選問(wèn)答集，分別計(jì)算所述用戶查詢與該候選問(wèn)答集、以及與該候選問(wèn)答集中的所述標(biāo)準(zhǔn)問(wèn)題、所述標(biāo)準(zhǔn)答案、所述擴(kuò)展問(wèn)題、所述擴(kuò)展答案之間的同種相關(guān)性特征參數(shù)，并將所計(jì)算出的同種相關(guān)性特征參數(shù)進(jìn)行組合，得出所述用戶查詢與該候選問(wèn)答集的相關(guān)性特征參數(shù)子集；獲取該候選問(wèn)答集的重要性特征參數(shù)，并將所獲取的重要性特征參數(shù)進(jìn)行組合，得出所述用戶查詢與該候選問(wèn)答集的重要性特征參