專利名稱：用于確定用戶對搜索結(jié)果滿意度的方法、裝置和設(shè)備的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及計算機技術(shù)領(lǐng)域，尤其涉及用于確定用戶對搜索結(jié)果滿意度的方法、裝置和設(shè)備。
背景技術(shù)：
現(xiàn)有技術(shù)中，主要采用專家評估的方式，確定用戶對搜索結(jié)果的滿意度。然而，專家評估方式因受到人力和時間成本耗費巨大、評估數(shù)量有限的影響，難以對搜索引擎效果進(jìn)行大量、全面的評估，評估結(jié)果也易受到專家主觀經(jīng)驗因素的干擾。

發(fā)明內(nèi)容
本發(fā)明的目的是提供用于確定用戶對搜索結(jié)果滿意度的方法、裝置和設(shè)備。根據(jù)本發(fā)明的一個方面，提供一種計算機實現(xiàn)的用于確定用戶對搜索結(jié)果的滿意度的方法，其中，該方法包括以下步驟:a獲取用戶對基于搜索序列所得的搜索結(jié)果的點擊量信息；b根據(jù)所述點擊量信息與所述搜索序列的預(yù)定點擊量特征信息，確定兩者之間的符合程度；c根據(jù)所述符合程度，確定用戶對所述搜索結(jié)果的滿意度。根據(jù)本發(fā)明的另一個方面，還提供了一種用于確定用戶對搜索結(jié)果的滿意度的確定裝置，其中，該確定裝置包括:第一獲取裝置，用于獲取用戶對基于搜索序列所得的搜索結(jié)果的點擊量信息；符合度確定裝置，用于跟據(jù)所述點擊量信息與所述搜索序列的預(yù)定點擊量特征信息，確定兩者之間的符合程度；滿意度確定裝置，用于根據(jù)所述符合程度，確定用戶對所述搜索結(jié)果的滿意度。根據(jù)本發(fā)明的再一個方面，還提供一種計算機設(shè)備，其中，該計算機設(shè)備包括前述確定裝置。與現(xiàn)有技術(shù)相比，本發(fā)明具有以下優(yōu)點:1)能夠根據(jù)搜索序列的點擊量信息與其預(yù)定點擊量特征信息的相符程度，確定用戶對搜索序列的搜索結(jié)果的滿意度，極大提高了滿意度評估的效率和準(zhǔn)確性；2)能夠結(jié)合點擊量信息與預(yù)定點擊量特征信息之間的符合程度以及用戶對搜索結(jié)果的其他行為相關(guān)信息，確定用戶對搜索結(jié)果的滿意度，進(jìn)一步提高了計算機設(shè)備獲得的滿意度的準(zhǔn)確度；3)當(dāng)搜索結(jié)果中包含直接呈現(xiàn)的資源信息時，還能根據(jù)所確定的滿意度，判斷直接呈現(xiàn)的資源信息是否較好地符合用戶需求，并當(dāng)判斷其未能較好地符合用戶需求時，將直接呈現(xiàn)的資源信息下線。


通過閱讀參照以下附圖所作的對非限制性實施例所作的詳細(xì)描述，本發(fā)明的其它特征、目的和優(yōu)點將會變得更明顯:
圖1為本發(fā)明一個方面的用于確定用戶對搜索結(jié)果的滿意度的方法流程圖；圖2為本發(fā)明一個優(yōu)選實施例的用于確定用戶對搜索結(jié)果的滿意度的方法流程圖；圖3為本發(fā)明一個方面的用于確定用戶對搜索結(jié)果的滿意度的確定裝置的結(jié)構(gòu)示意圖；圖4為本發(fā)明一個優(yōu)選實施例的用于確定用戶對搜索結(jié)果的滿意度的確定裝置的結(jié)構(gòu)示意圖。附圖中相同或相似的附圖標(biāo)記代表相同或相似的部件。
具體實施例方式下面結(jié)合附圖對本發(fā)明作進(jìn)一步詳細(xì)描述。圖1示意出了本發(fā)明一個方面的一種計算機實現(xiàn)的用于確定用戶對搜索結(jié)果的滿意度的方法流程圖。本發(fā)明的方法包括步驟S1、步驟S2以及步驟S3。其中，該計算機包括網(wǎng)絡(luò)設(shè)備，根據(jù)本發(fā)明的方法可通過網(wǎng)絡(luò)設(shè)備中的確定裝置來實現(xiàn)，例如，通過網(wǎng)絡(luò)設(shè)備中諸如應(yīng)用模塊、操作系統(tǒng)、處理控制器等來實現(xiàn)。所述網(wǎng)絡(luò)設(shè)備可單獨實現(xiàn)本發(fā)明，或者，接入網(wǎng)絡(luò)并通過與網(wǎng)絡(luò)中的其他網(wǎng)絡(luò)設(shè)備或用戶設(shè)備的交互操作來實現(xiàn)本發(fā)明。其中，所述網(wǎng)絡(luò)設(shè)備包括但不限于單個網(wǎng)絡(luò)服務(wù)器、多個網(wǎng)絡(luò)服務(wù)器組成的服務(wù)器組或基于云計算(Cloud Computing)的由大量計算機或網(wǎng)絡(luò)服務(wù)器構(gòu)成的云,其中，云計算是分布式計算的一種，由一群松散耦合的計算機集組成的一個超級虛擬計算機；所述用戶設(shè)備包括但不限于電腦、智能手機、PDA等。其中，所述網(wǎng)絡(luò)設(shè)備或用戶設(shè)備所處的網(wǎng)絡(luò)包括但不限于互聯(lián)網(wǎng)、廣域網(wǎng)、城域網(wǎng)、局域網(wǎng)、VPN網(wǎng)絡(luò)等。需要說明的是，所述用戶設(shè)備及網(wǎng)絡(luò)設(shè)備僅為舉例，其他現(xiàn)有的或今后可能出現(xiàn)的用戶設(shè)備、網(wǎng)絡(luò)設(shè)備或網(wǎng)絡(luò)如可適用于本發(fā)明，也應(yīng)包含在本發(fā)明保護范圍以內(nèi)，并以引用方式包含于此。在步驟SI中，確定裝置獲取用戶對基于搜索序列所得的搜索結(jié)果的點擊量信息。其中，搜索結(jié)果包括但不限于以下至少一類信息:1)資源信息本身，如在搜索頁面中直接呈現(xiàn)的資源信息等；2)指向資源信息的資源鏈接及其描述信息，如在網(wǎng)頁搜索引擎中進(jìn)行搜索所得的網(wǎng)頁鏈接以及該網(wǎng)頁的標(biāo)題、摘要等。其中，所述點擊量信息包括但不限于以下至少一項:1)單個用戶對基于搜索序列所得的搜索結(jié)果的平均點擊量，例如，平均一個用戶對基于輸入序列“新浪微博”所得的搜索結(jié)果的點擊次數(shù)為1.239次；2)點擊搜索結(jié)果的用戶數(shù)量以及對該搜索結(jié)果的點擊量，例如，2467個用戶對基于輸入序列“新浪微博”所得的搜索結(jié)果的點擊次數(shù)共3057次。具體地，確定裝置獲取點擊量信息的方式包括但不限于:1)確定裝置在本地的點擊量信息庫中對該輸入序列進(jìn)行查詢，以獲得基于該輸入序列所得的搜索結(jié)果點擊量信息；2)確定裝置向網(wǎng)絡(luò)中的其他設(shè)備發(fā)送該輸入序列，以獲得其他設(shè)備反饋的基于該輸入序列所得搜索結(jié)果的點擊量信息。接著，在步驟S2中，確定裝置根據(jù)所述點擊量信息與所述搜索序列的預(yù)定點擊量特征信息，確定兩者之間的符合程度。其中，所述符合程度可以數(shù)值或等級來表示。其中，預(yù)定點擊量特征信息包括能夠反映輸入序列的點擊量的特征的信息。優(yōu)選地，預(yù)定點擊量特征信息包括但不限于以下任一項:1)預(yù)定點擊量范圍，例如，單個用戶對搜索結(jié)果的平均點擊量范圍為1.102至2.148等，又例如，1000個用戶對搜索結(jié)果的點擊量范圍為1102至2148等；2)預(yù)定點擊次數(shù)，例如，單個用戶對搜索結(jié)果的平均點擊次數(shù)為1.624次等，又例如，1000個用戶對搜索結(jié)果的平均點擊次數(shù)為1624次等。其中，確定裝置獲取預(yù)定點擊量特征信息的方式包括但不限于:1)確定裝置在本地的預(yù)定點擊量特征信息庫中對該輸入序列進(jìn)行查詢，以獲得該輸入序列的預(yù)定點擊量特征信息；2)確定裝置向網(wǎng)絡(luò)中的其他設(shè)備發(fā)送該輸入序列，以獲得其他設(shè)備反饋的該輸入序列的預(yù)定點擊量特征信息。其中，搜索序列的預(yù)定點擊量特征信息可由人工確定；或者，由計算機設(shè)備通過對搜索序列進(jìn)行諸如語義分析、歷史點擊記錄分析等確定。具體地，確定裝置確定預(yù)定點擊量信息與預(yù)定點擊量特征信息之間的符合程度的方式包括但不限于:I)當(dāng)預(yù)定點擊量特征信息包括預(yù)定點擊量范圍時，確定裝置判斷所述點擊量信息是否屬于所述預(yù)定點擊量范圍；并當(dāng)判斷所述點擊量信息屬于所述預(yù)定點擊量范圍時，確定所述符合程度為最高。具體地，當(dāng)點擊量信息為平均點擊量，預(yù)定點擊量范圍為平均點擊量范圍時，確定裝置直接通過判斷平均點擊量是否位于平均點擊量范圍中，來判斷點擊量信息是否屬于預(yù)定點擊量范圍；當(dāng)點擊量信息為點擊搜索結(jié)果的用戶數(shù)量以及對該搜索結(jié)果的點擊量，和/或，預(yù)定點擊量范圍為多個用戶對搜索結(jié)果的點擊量范圍時，確定裝置對其求取平均，以通過判斷平均后的點擊量信息是否位于平均后的點擊量范圍中，來判斷點擊量信息是否屬于預(yù)定點擊量范圍。例如，確定裝置在步驟SI中獲得的輸入序列“新浪微博”的平均點擊次數(shù)為1.239次，且確定裝置預(yù)獲得的“新浪微博”的平均點擊量范圍為1.102至2.148次，則確定裝置判斷1.102 < 1.239 < 2.148，并確定輸入序列“新浪微博”的點擊量信息與其預(yù)定點擊量范圍之間的符合程度為最高。又例如，確定裝置在步驟SI中獲得的輸入序列“新浪微博”的點擊量信息包括:2467個用戶對基于輸入序列“新浪微博”所得的搜索結(jié)果的點擊次數(shù)共3057次，且確定裝置預(yù)獲得的“新浪微博”的點擊量范圍信息包括:1000個用戶對搜索結(jié)果的點擊量范圍為1102至2148 ;則確定裝置對點擊量以及點擊量范圍分別求取平均，獲得平均點擊次數(shù)為1.239次，平均點擊量范圍為1.102至2.148次，則確定裝置判斷1.102 < 1.239 < 2.148，并確定輸入序列“新浪微博”的點擊量信息與其預(yù)定點擊量范圍之間的符合程度為最高。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何當(dāng)預(yù)定點擊量特征信息包括預(yù)定點擊量范圍時，判斷所述點擊量信息是否屬于所述預(yù)定點擊量范圍，并當(dāng)判斷所述點擊量信息屬于所述預(yù)定點擊量范圍時，確定所述符合程度為最高的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。優(yōu)選地，當(dāng)判斷點擊量信息不屬于預(yù)定點擊量范圍時，確定裝置確定符合程度為最低；或者，確定裝置確定點擊量信息與預(yù)定點擊量范圍之間的偏離程度，以將該偏離程度作為兩者之間的符合程度。具體地，當(dāng)點擊量信息為平均點擊量，預(yù)定點擊量范圍為平均點擊量范圍時，確定裝置直接根據(jù)點擊量信息與預(yù)定點擊量范圍中的數(shù)值之間的最小差值，獲得點擊量信息與預(yù)定點擊量范圍之間的偏離程度；當(dāng)點擊量信息為點擊搜索結(jié)果的用戶數(shù)量以及對該搜索結(jié)果的點擊量，和/或，預(yù)定點擊量范圍為多個用戶對搜索結(jié)果的點擊量范圍時，確定裝置求取步驟S21中獲得的平均點擊量與平均點擊量范圍中的數(shù)值之間的最小差值，以獲得點擊量信息與預(yù)定點擊量范圍之間的偏尚程度。例如，確定裝置在步驟SI中獲得的輸入序列“新浪微博”的平均點擊次數(shù)為2.239次，且確定裝置預(yù)獲得的“新浪微博”的平均點擊量范圍為1.102至2.148次，則確定裝置基于2.239 > 2.148判斷點擊量信息不屬于預(yù)定點擊量范圍，并獲得2.239-2.148 = 0.091以及2.239-1.102 = 1.137，并判斷0.091 < 1.137，則確定裝置確定點擊量信息與預(yù)定點擊量范圍之間的偏尚程度為0.091,并將該偏尚程度作為點擊量信息與預(yù)定點擊量范圍之間的符合程度。又例如，確定裝置在步驟SI中獲得的輸入序列“新浪微博”的點擊量信息包括:2467個用戶對基于輸入序列“新浪微博”所得的搜索結(jié)果的點擊次數(shù)共5524次，且確定裝置預(yù)獲得的“新浪微博”的點擊量范圍信息包括:1000個用戶對搜索結(jié)果的點擊量范圍為1102至2148 ;則確定裝置對點擊量以及點擊量范圍分別求取平均，獲得平均點擊次數(shù)為2.239次，平均點擊量范圍為1.102至2.148次，則確定裝置基于2.239 > 2.148判斷點擊量信息不屬于預(yù)定點擊量范圍，并獲得2.239-2.148 = 0.091以及2.239-1.102 = 1.137，并判斷0.091 < 1.137，則確定裝置將0.091的倒數(shù)10.989作為點擊量信息與預(yù)定點擊量范圍之間的偏離程度，并將該偏離程度作為點擊量信息與預(yù)定點擊量范圍之間的符合程度。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何當(dāng)判斷點擊量信息不屬于預(yù)定點擊量范圍時，確定點擊量信息與預(yù)定點擊量范圍之間的偏離程度，以將該偏離程度作為兩者之間的符合程度的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。2)當(dāng)預(yù)定點擊量特征信息包括預(yù)定點擊次數(shù)時，確定裝置確定預(yù)定點次數(shù)與預(yù)定點擊量范圍之間的偏離程度，以將該偏離程度作為兩者之間的符合程度。其中，確定裝置確定預(yù)定點次數(shù)與預(yù)定點擊量范圍之間的偏離程度，以將該偏離程度作為兩者之間的符合程度的方式，與前述實現(xiàn)方式I)中確定裝置確定點擊量信息與預(yù)定點擊量范圍之間的偏離程度，以將該偏離程度作為兩者之間的符合程度的方式相同或相似，在此不再贅述。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何根據(jù)所述點擊量信息與所述搜索序列的預(yù)定點擊量特征信息，確定兩者之間的符合程度的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。接著，在步驟S3中，確定裝置根據(jù)步驟S2中獲得的符合程度，確定用戶對搜索結(jié)果的滿意度。其中，確定裝置能夠通過多種方式確定滿意度。例如，當(dāng)滿意度以等級方式表示時，確定裝置根據(jù)符合程度與滿意度之間的預(yù)定映射關(guān)系，如A級符合程度對應(yīng)第一級滿意度、滿意度值在I至2之間的符合程度對應(yīng)第二級滿意度等；又例如，當(dāng)滿意度以數(shù)值方式表示時，確定裝置根據(jù)預(yù)定公式計算獲得滿意度，如根據(jù)預(yù)定公式:滿意度=(100-符合程度)/100，獲得滿意度等。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何根據(jù)符合程度，確定用戶對搜索結(jié)果的滿意度的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。作為本發(fā)明的優(yōu)選方案之一，搜索結(jié)果包含在搜索頁面中直接呈現(xiàn)的資源信息，本發(fā)明的方法還包括下述步驟S4以及S5。其中，該在搜索頁面中直接呈現(xiàn)的資源信息包括但不限于:1)直接呈現(xiàn)在搜索頁面中的、包含諸如圖像和/或音視頻等信息的多媒體資訊；2)直接呈現(xiàn)在搜索頁面中的應(yīng)用等。例如，當(dāng)用戶搜索“天氣預(yù)報”時，直接呈現(xiàn)在搜索頁面中的、包含圖像信息的、未來3天的天氣預(yù)報等；又例如，當(dāng)用戶搜索“憤怒的小鳥攻略”時，直接呈現(xiàn)在搜索頁面中的、可供用戶進(jìn)行諸如點擊、翻頁等操作，以使用戶獲得所需關(guān)卡的攻略的應(yīng)用等。在步驟S4中，確定裝置判斷步驟S3中獲得的滿意度是否低于第一預(yù)定閾值或第一預(yù)定等級。例如，確定裝置在步驟S3中獲得的滿意度為0.21，第一預(yù)定閾值為0.4，則確定裝置判斷滿意度低于第一預(yù)定閾值等。在步驟S5中，當(dāng)判斷所述滿意度低于第一預(yù)定閾值或第一預(yù)定等級時，確定裝置確定所述搜索序列的搜索結(jié)果中不再包含所述直接呈現(xiàn)的資源信息。具體地，當(dāng)判斷滿意度低于第一預(yù)定閾值或第一預(yù)定等級時，確定裝置將直接呈現(xiàn)的資源信息從該搜索序列的搜索結(jié)果索引或列表中刪除，以使用戶在該刪除操作之后搜索該搜索序列時，搜索結(jié)果中不再包含該直接呈現(xiàn)的搜索結(jié)果。例如，搜索序列“天氣預(yù)報”的第二排序位置包含直接呈現(xiàn)用戶IP所在城市未來3天的天氣預(yù)報資訊，步驟S4中，確定裝置獲得搜索序列“天氣預(yù)報”的搜索結(jié)果的滿意度低于第一預(yù)定等級，則確定裝置將該直接呈現(xiàn)在第二排序位置的天氣預(yù)報資訊從搜索序列“天氣預(yù)報”的索引中刪除，以使“天氣預(yù)報”的搜索結(jié)果中不再包含該直接呈現(xiàn)的天氣預(yù)報資訊。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何當(dāng)判斷所述滿意度低于第一預(yù)定閾值或第一預(yù)定等級時，確定所述搜索序列的搜索結(jié)果中不再包含所述直接呈現(xiàn)的資源信息的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。受用戶搜索意圖、搜索結(jié)果呈現(xiàn)方式等因素的影響，對于特定的搜索序列，在其搜索結(jié)果能夠較好地滿足用戶需求的情況下，其搜索結(jié)果的點擊情況往往會呈現(xiàn)特定的點擊量特征。例如，對于一類搜索序列，其搜索結(jié)果中包含直接在搜索頁面呈現(xiàn)的資源信息，且該資源信息應(yīng)無需用戶進(jìn)行進(jìn)一步點擊操作(如搜索序列“天氣預(yù)報”的搜索結(jié)果中包含以圖像形式直接呈現(xiàn)在搜索頁面中的未來3天的天氣預(yù)報資訊)，則當(dāng)該類搜索序列的搜索結(jié)果點擊情況呈現(xiàn)無點擊特征或極少量點擊特征(如平均點擊量少于I等)時，可以確定該類搜索序列的搜索結(jié)果較好地滿足了用戶需求；又例如，對于另一類搜索序列，大多數(shù)用戶在對其進(jìn)行搜索時，希望獲得的是一些特定結(jié)果(如搜索序列“新浪微博”等，用戶往往希望獲得新浪微博的鏈接)，則當(dāng)該類搜索序列的搜索結(jié)果點擊情況呈現(xiàn)集中點擊特征時(如平均點擊量在1-3或1-2之間等)，可以確定該類搜索序列的搜索結(jié)果較好地滿足了用戶需求；再例如，對于再一類搜索序列，大多數(shù)用戶在對其進(jìn)行搜索時，希望綜合多個搜索結(jié)果來獲得綜合信息(如搜索序列“ 15萬買什么車好”，用戶多數(shù)會點擊多個鏈接)，則當(dāng)該類搜索序列的搜索結(jié)果點擊情況呈現(xiàn)分散點擊特征時(如平均點擊量在3個以上等)，可以確定該類搜索序列的搜索結(jié)果較好地滿足了用戶需求。本發(fā)明的方法，能夠根據(jù)搜索序列的點擊量信息與其預(yù)定點擊量特征信息的相符程度，確定用戶對搜索序列的搜索結(jié)果的滿意度，極大提高了滿意度評估的效率和準(zhǔn)確性。進(jìn)一步地，當(dāng)搜索結(jié)果中包含直接呈現(xiàn)的資源信息時，還能根據(jù)所確定的滿意度，判斷直接呈現(xiàn)的資源信息是否較好地符合用戶需求，并當(dāng)判斷其未能較好地符合用戶需求時，將直接呈現(xiàn)的資源信息下線。圖2為本發(fā)明一個優(yōu)選實施例的用于確定用戶對搜索結(jié)果的滿意度的方法流程圖。本實施例的方法包括步驟S1、步驟S2、步驟S6以及步驟S3 ;其中，步驟S3進(jìn)一步包括步驟S31。步驟SI和步驟S2已在參照圖1所示實施例中予以詳述，在此不再贅述。在步驟S6中，確定裝置獲取用戶對基于搜索序列所得的搜索結(jié)果的其他行為相關(guān)信息。其中，所述其他行為相關(guān)信息包括除用戶對搜索結(jié)果的點擊量信息以外的、與該用戶對搜索結(jié)果執(zhí)行的行為相關(guān)的信息。優(yōu)選地，搜索結(jié)果中包括至少一項資源鏈接，所述其他行為相關(guān)信息包括以下至少一項行為相關(guān)信息:I)用戶所點擊的各個資源鏈接中每個資源鏈接的點擊次數(shù)。例如，多個用戶對搜索結(jié)果中的3個資源鏈接A、B、C的點擊總次數(shù)分別為239次、420次以及90次。2)用戶在各個點擊的資源鏈接所指向的資源信息上的停留時間。其中，用戶在資源信息上的停留時間可通過以下方式確定:a)將用戶點擊指向該資源信息的資源鏈接至點擊另一資源鏈接、關(guān)閉當(dāng)前頁面或跳轉(zhuǎn)至其他頁面之間的時間間隔作為停留時間山)將用戶點擊資源鏈接至用戶關(guān)閉該資源鏈接所指向的資源頁面之間的時間間隔作為停留時間，其中，可通過嵌入瀏覽器中的腳本來獲得用戶關(guān)閉資源鏈接所指向的資源頁面的時間。3)用戶所點擊的各個排序位置的資源鏈接中每個排序位置的點擊次數(shù)。例如，用戶點擊第一位、第二位、第三位、第四位以及第五位的排序位置的資源鏈接的次數(shù)分別為8983次、7563次、9834次、2934次以及209次。4)用戶點擊各個排序位置的資源鏈接的順序信息。其中，該順序信息包括但不限于:a)用戶第N次(NS I)點擊一個排序位置的資源鏈接的次數(shù)占該排序位置的資源鏈接的總點擊次數(shù)的比例，如用戶在點擊搜索結(jié)果的過程中，執(zhí)行第I次點擊操作時，點擊排序第一位的資源鏈接的次數(shù)占該排序第一位的資源鏈接的總點擊次數(shù)的比例為45.3%等；b)用戶逆序點擊各個排序位置的資源鏈接的逆序程度，其中，逆序點擊表示先點擊排序在后的資源鏈接，再點擊排序在前的資源鏈接。其中，該逆序程度可通過用戶逆序點擊的次數(shù)以及逆序點擊的資源鏈接在搜索結(jié)果中的排序來確定；如兩個相鄰點擊操作為逆序點擊的次數(shù)越多、逆序程度越高，逆序點擊的資源鏈接在搜索結(jié)果中的排序越靠后，逆序程度越高等。具體地，確定裝置獲取其他行為相關(guān)信息的方式包括但不限于:1)確定裝置在本地的其他行為相關(guān)信息庫中對該輸入序列進(jìn)行查詢，以獲得基于該輸入序列所得的搜索結(jié)果的其他行為相關(guān)信息；2)確定裝置向網(wǎng)絡(luò)中的其他設(shè)備發(fā)送該輸入序列，以獲得其他設(shè)備反饋的基于該輸入序列所得的搜索結(jié)果的其他行為相關(guān)信息。需要說明的是，步驟SI和步驟S2，與步驟S6之間并無先后順序。在步驟S31中，確定裝置根據(jù)步驟S2中所得的符合程度，并結(jié)合步驟S6中所得的其他行為相關(guān)信息，確定用戶對所述搜索結(jié)果的滿意度。具體地，確定裝置根據(jù)符合程度，并結(jié)合其他行為相關(guān)信息，確定滿意度地方式包括但不限于:I)確定裝置根據(jù)符合程度確定初始滿意度，并根據(jù)其他行為相關(guān)信息來調(diào)整初始滿意度。其中，確定裝置根據(jù)符合程度確定初始滿意度的方式，與參照圖1所示實施例的步驟S3中，確定裝置根據(jù)符合程度確定用戶對搜索結(jié)果的滿意度的方式相同或相似，在此不再贅述。例如，確定裝置在步驟S6中獲得用戶對搜索結(jié)果的平均逆序點擊次數(shù)為1.532次，并根據(jù)步驟S2中所得的符合程度確定初始滿意度為8.341，則確定裝置根據(jù)滿意度=初始滿意度-平均逆序點擊次數(shù)，獲得滿意度=8.341-1.532 = 6.809。2)確定裝置根據(jù)與所述其他行為相關(guān)信息中的各項行為相關(guān)信息分別相應(yīng)的預(yù)定行為評估規(guī)則，獲得所述其他行為相關(guān)信息中每項行為相關(guān)信息的評估信息；并根據(jù)所述符合程度，結(jié)合所述評估信息，確定用戶對所述搜索結(jié)果的滿意度。其中，所述預(yù)定行為評估規(guī)則包括用于確定如何基于與其相應(yīng)的其他行為相關(guān)信息來獲得評估信息的規(guī)則。其中，評估信息可以評估等級或評估值表示。例如，確定裝置在步驟S6中獲得的其他行為相關(guān)信息包括:i)用戶在資源信息上的平均停留時間為36.4秒；以及ii)用戶點擊第一位、第二位以及第三位的排序位置的資源鏈接的次數(shù)分別為8983次、7563次、9834次。則確定裝置根據(jù)與其他行為相關(guān)信息i相應(yīng)的預(yù)定行為評估規(guī)則“當(dāng)平均停留時間在30-40秒之間時，評估值為4”，確定其他行為相關(guān)信息i的評估值為4 ;并根據(jù)與其他行為相關(guān)信息ii相應(yīng)的預(yù)定行為評估規(guī)則“評估值=10*{ Σ [(l/j)*(Cj/Call)]}, Cj為第j位排序位置的點擊次數(shù)、Call為該搜索結(jié)果的總點擊次數(shù)”，確定其他行為相關(guān)信息ii的評估值=10*[(1/1)*(8983/26380)+ (1/2)*(7563/26380) + (1/3) * (9834/26380) ] = 10* (0.3405+0.1433+0.1243) = 6.081。接著，確定裝置求取步驟S2中所得的符合程度10、行為相關(guān)信息i的評估值4以及評委相關(guān)信息ii的評估值6.081的平均值，并將獲得的平均值6.694作為用戶對搜索結(jié)果的滿意度。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何根據(jù)符合程度，并結(jié)合其他行為相關(guān)信息，確定用戶對所述搜索結(jié)果的滿意度的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。作為本實施例的優(yōu)選方案之一，其他行為相關(guān)信息中包括用戶所點擊的各個資源鏈接中每個資源鏈接的點擊次數(shù)，本實施例的方法還包括步驟S7:確定裝置根據(jù)其他行為相關(guān)信息中每個資源鏈接的點擊次數(shù)，調(diào)整所述搜索結(jié)果中資源鏈接的排序。具體地，資源鏈接的點擊次數(shù)越高，確定裝置將該資源鏈接的排序向前調(diào)整的可能性越高；資源鏈接的點擊次數(shù)越低，確定裝置將該資源鏈接的排序向后調(diào)整的可能性越聞。優(yōu)選地，當(dāng)預(yù)定點擊量特征信息屬于集中點擊特征信息時，所述步驟S7進(jìn)一步包括以下步驟S71以及步驟S72。其中，確定裝置能夠根據(jù)預(yù)定點擊量特征信息的預(yù)定屬性，或者，能夠根據(jù)預(yù)定點擊量特征信息是否具有集中單擊特征，如平均點擊量或平均點擊量范圍在1-3之間等，判斷預(yù)定點擊量特征信息是否屬于集中點擊特征信息。在步驟S71中，確定裝置根據(jù)各個資源鏈接的點擊次數(shù)，由所述用戶所點擊的各個資源鏈接中選擇用戶集中點擊的一個或多個資源鏈接。具體地，確定裝置選擇點擊次數(shù)最高的M個資源鏈接，M為預(yù)定值；或者，確定裝置選擇點擊次數(shù)占搜索結(jié)果總點擊次數(shù)比例高于預(yù)定比例閾值的一個或多個資源鏈接。例如，確定裝置選擇點擊次數(shù)最高的I個資源鏈接；或者，確定裝置選擇點擊次數(shù)占搜索結(jié)果總點擊次數(shù)比例高于40%的一個或多個資源鏈接等。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何根據(jù)各個資源鏈接的點擊次數(shù)，由所述用戶所點擊的各個資源鏈接中選擇用戶集中點擊的一個或多個資源鏈接的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。接著，在步驟S72中，確定裝置將該一個或多個資源鏈接的排序調(diào)整至指定位置。例如，確定裝置將選擇的I個資源鏈接的排序調(diào)整至第一位；又例如，確定裝置將選擇的2個資源鏈接中點擊次數(shù)較高的資源鏈接的排序調(diào)整至第一位，并將另一資源鏈接的排序調(diào)整至第二位等。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何將選擇的一個或多個資源鏈接的排序調(diào)整至指定位置的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。本優(yōu)選方案能夠識別出用戶希望獲得特定搜索結(jié)果的搜索序列，并根據(jù)用戶對該類搜索序列的搜索結(jié)果的點擊情況，從搜索結(jié)果中識別出用戶希望獲得的特定資源鏈接，并將識別出得資源鏈接置于排序靠前的指定位置。優(yōu)選地，本實施例的方法還包括以下步驟:確定裝置判斷所述滿意度是否低于第二預(yù)定閾值或第二預(yù)定等級，并當(dāng)判斷所述滿意度低于第二預(yù)定閾值或第二預(yù)定等級時，執(zhí)行所述步驟S7。本實施例的方法，能夠結(jié)合點擊量信息與預(yù)定點擊量特征信息之間的符合程度以及用戶對搜索結(jié)果的其他行為相關(guān)信息，確定用戶對搜索結(jié)果的滿意度，進(jìn)一步提高了計算機設(shè)備獲得的滿意度的準(zhǔn)確度。圖3為本發(fā)明一個方面的用于確定用戶對搜索結(jié)果的滿意度的確定裝置的結(jié)構(gòu)示意圖。本發(fā)明的確定裝置包括第一獲取裝置1、符合度確定裝置2以及滿意度確定裝置3。第一獲取裝置I獲取用戶對基于搜索序列所得的搜索結(jié)果的點擊量信息。其中，搜索結(jié)果包括但不限于以下至少一類信息:1)資源信息本身，如在搜索頁面中直接呈現(xiàn)的資源信息等；2)指向資源信息的資源鏈接及其描述信息，如在網(wǎng)頁搜索引擎中進(jìn)行搜索所得的網(wǎng)頁鏈接以及該網(wǎng)頁的標(biāo)題、摘要等。其中，所述點擊量信息包括但不限于以下至少一項:1)單個用戶對基于搜索序列所得的搜索結(jié)果的平均點擊量，例如，平均一個用戶對基于輸入序列“新浪微博”所得的搜索結(jié)果的點擊次數(shù)為1.239次；2)點擊搜索結(jié)果的用戶數(shù)量以及對該搜索結(jié)果的點擊量，例如，2467個用戶對基于輸入序列“新浪微博”所得的搜索結(jié)果的點擊次數(shù)共3057次。具體地，第一獲取裝置I獲取點擊量信息的方式包括但不限于:1)第一獲取裝置I在本地的點擊量信息庫中對該輸入序列進(jìn)行查詢，以獲得基于該輸入序列所得的搜索結(jié)果點擊量信息；2)第一獲取裝置I向網(wǎng)絡(luò)中的其他設(shè)備發(fā)送該輸入序列，以獲得其他設(shè)備反饋的基于該輸入序列所得搜索結(jié)果的點擊量信息。接著，符合度確定裝置2根據(jù)所述點擊量信息與所述搜索序列的預(yù)定點擊量特征信息，確定兩者之間的符合程度。其中，所述符合程度可以數(shù)值或等級來表示。其中，預(yù)定點擊量特征信息包括能夠反映輸入序列的點擊量的特征的信息。優(yōu)選地，預(yù)定點擊量特征信息包括但不限于以下任一項:1)預(yù)定點擊量范圍，例如，單個用戶對搜索結(jié)果的平均點擊量范圍為1.102至2.148等，又例如，1000個用戶對搜索結(jié)果的點擊量范圍為1102至2148等；2)預(yù)定點擊次數(shù)，例如，單個用戶對搜索結(jié)果的平均點擊次數(shù)為1.624次等，又例如，1000個用戶對搜索結(jié)果的平均點擊次數(shù)為1624次等。其中，符合度確定裝置2獲取預(yù)定點擊量特征信息的方式包括但不限于:1)符合度確定裝置2在本地的預(yù)定點擊量特征信息庫中對該輸入序列進(jìn)行查詢，以獲得該輸入序列的預(yù)定點擊量特征信息；2)符合度確定裝置2向網(wǎng)絡(luò)中的其他設(shè)備發(fā)送該輸入序列，以獲得其他設(shè)備反饋的該輸入序列的預(yù)定點擊量特征信息。其中，搜索序列的預(yù)定點擊量特征信息可由人工確定；或者，由計算機設(shè)備通過對搜索序列進(jìn)行諸如語義分析、歷史點擊記錄分析等確定。具體地，符合度確定裝置2確定預(yù)定點擊量信息與預(yù)定點擊量特征信息之間的符合程度的方式包括但不限于:I)其中，當(dāng)預(yù)定點擊量特征信息包括預(yù)定點擊量范圍時，符合度確定裝置2根據(jù)其包含的第一判斷裝置(圖未示)以及第一子確定裝置(圖未示)，確定符合程度。其中，第一判斷裝置判斷所述點擊量信息是否屬于所述預(yù)定點擊量范圍；當(dāng)判斷所述點擊量信息屬于所述預(yù)定點擊量范圍時，第一子確定裝置確定所述符合程度為最高。具體地，當(dāng)點擊量信息為平均點擊量，預(yù)定點擊量范圍為平均點擊量范圍時，第一判斷裝置直接通過判斷平均點擊量是否位于平均點擊量范圍中，來判斷點擊量信息是否屬于預(yù)定點擊量范圍；當(dāng)點擊量信息為點擊搜索結(jié)果的用戶數(shù)量以及對該搜索結(jié)果的點擊量，和/或，預(yù)定點擊量范圍為多個用戶對搜索結(jié)果的點擊量范圍時，第一判斷裝置對其求取平均，以通過判斷平均后的點擊量信息是否位于平均后的點擊量范圍中，來判斷點擊量信息是否屬于預(yù)定點擊量范圍。例如，第一獲取裝置I獲得的輸入序列“新浪微博”的平均點擊次數(shù)為1.239次，且確定裝置預(yù)獲得的“新浪微博”的平均點擊量范圍為1.102至2.148次，則第一判斷裝置判斷1.102 < 1.239 < 2.148，則第一子確定裝置確定輸入序列“新浪微博”的點擊量信息與其預(yù)定點擊量范圍之間的符合程度為最高。又例如，第一獲取裝置I獲得的輸入序列“新浪微博”的點擊量信息包括:2467個用戶對基于輸入序列“新浪微博”所得的搜索結(jié)果的點擊次數(shù)共3057次，且確定裝置預(yù)獲得的“新浪微博”的點擊量范圍信息包括:1000個用戶對搜索結(jié)果的點擊量范圍為1102至2148 ;則第一判斷裝置對點擊量以及點擊量范圍分別求取平均，獲得平均點擊次數(shù)為1.239次，平均點擊量范圍為1.102至2.148次，則第一判斷裝置判斷1.102 < 1.239< 2.148，則第一子確定裝置確定輸入序列“新浪微博”的點擊量信息與其預(yù)定點擊量范圍之間的符合程度為最高。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何當(dāng)預(yù)定點擊量特征信息包括預(yù)定點擊量范圍時，判斷所述點擊量信息是否屬于所述預(yù)定點擊量范圍，并當(dāng)判斷所述點擊量信息屬于所述預(yù)定點擊量范圍時，確定所述符合程度為最高的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。優(yōu)選地，當(dāng)判斷點擊量信息不屬于預(yù)定點擊量范圍時，符合度確定裝置2確定符合程度為最低；或者，符合度確定裝置2進(jìn)一步包括偏離度確定裝置(圖未示)，該偏離度確定裝置確定點擊量信息與預(yù)定點擊量范圍之間的偏離程度，以將該偏離程度作為兩者之間的符合程度。具體地,當(dāng)點擊量信息為平均點擊量,預(yù)定點擊量范圍為平均點擊量范圍時,偏離度確定裝置直接根據(jù)點擊量信息與預(yù)定點擊量范圍中的數(shù)值之間的最小差值，獲得點擊量信息與預(yù)定點擊量范圍之間的偏離程度；當(dāng)點擊量信息為點擊搜索結(jié)果的用戶數(shù)量以及對該搜索結(jié)果的點擊量，和/或，預(yù)定點擊量范圍為多個用戶對搜索結(jié)果的點擊量范圍時，偏離度確定裝置求取第一判斷裝置獲得的平均點擊量與平均點擊量范圍中的數(shù)值之間的最小差值，以獲得點擊量信息與預(yù)定點擊量范圍之間的偏離程度。例如，第一獲取裝置I獲得的輸入序列“新浪微博”的平均點擊次數(shù)為2.239次，且確定裝置預(yù)獲得的“新浪微博”的平均點擊量范圍為1.102至2.148次，則第一判斷裝置基于2.239 > 2.148判斷點擊量信息不屬于預(yù)定點擊量范圍；接著，偏離度確定裝置獲得2.239-2.148 = 0.091 以及 2.239-1.102 = 1.137，并判斷 0.091 < 1.137，則確定裝置確定點擊量信息與預(yù)定點擊量范圍之間的偏尚程度為0.091,并將該偏尚程度作為點擊量信息與預(yù)定點擊量范圍之間的符合程度。又例如，第一獲取裝置I獲得的輸入序列“新浪微博”的點擊量信息包括:2467個用戶對基于輸入序列“新浪微博”所得的搜索結(jié)果的點擊次數(shù)共5524次，且確定裝置預(yù)獲得的“新浪微博”的點擊量范圍信息包括:1000個用戶對搜索結(jié)果的點擊量范圍為1102至2148 ;則第一判斷裝置對點擊量以及點擊量范圍分別求取平均，獲得平均點擊次數(shù)為2.239次，平均點擊量范圍為1.102至2.148次，并基于2.239 > 2.148判斷點擊量信息不屬于預(yù)定點擊量范圍；接著，偏離度確定裝置獲得2.239-2.148 = 0.091以及2.239-1.102=1.137，并判斷0.091 < 1.137，則偏離度確定裝置將0.091的倒數(shù)10.989作為點擊量信息與預(yù)定點擊量范圍之間的偏離程度，并將該偏離程度作為點擊量信息與預(yù)定點擊量范圍之間的符合程度。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何當(dāng)判斷點擊量信息不屬于預(yù)定點擊量范圍時，確定點擊量信息與預(yù)定點擊量范圍之間的偏離程度，以將該偏離程度作為兩者之間的符合程度的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。2)當(dāng)預(yù)定點擊量特征信息包括預(yù)定點擊次數(shù)時，符合度確定裝置2確定預(yù)定點次數(shù)與預(yù)定點擊量范圍之間的偏離程度，以將該偏離程度作為兩者之間的符合程度。其中，符合度確定裝置2確定預(yù)定點次數(shù)與預(yù)定點擊量范圍之間的偏離程度，以將該偏離程度作為兩者之間的符合程度的方式，與前述實現(xiàn)方式I)中偏離度確定裝置確定點擊量信息與預(yù)定點擊量范圍之間的偏離程度，以將該偏離程度作為兩者之間的符合程度的方式相同或相似，在此不再贅述。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何根據(jù)所述點擊量信息與所述搜索序列的預(yù)定點擊量特征信息，確定兩者之間的符合程度的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。接著，滿意度確定裝置3根據(jù)符合度確定裝置2獲得的符合程度，確定用戶對搜索結(jié)果的滿意度。其中，滿意度確定裝置3能夠通過多種方式確定滿意度。例如，當(dāng)滿意度以等級方式表示時，滿意度確定裝置3根據(jù)符合程度與滿意度之間的預(yù)定映射關(guān)系，如A級符合程度對應(yīng)第一級滿意度、滿意度值在I至2之間的符合程度對應(yīng)第二級滿意度等；又例如，當(dāng)滿意度以數(shù)值方式表示時，滿意度確定裝置3根據(jù)預(yù)定公式計算獲得滿意度，如根據(jù)預(yù)定公式:滿意度=(100-符合程度)/100，獲得滿意度等。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何根據(jù)符合程度，確定用戶對搜索結(jié)果的滿意度的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。作為本發(fā)明的優(yōu)選方案之一，搜索結(jié)果包含在搜索頁面中直接呈現(xiàn)的資源信息，本發(fā)明的確定裝置還包括第二判斷裝置(圖未示)以及呈現(xiàn)確定裝置(圖未示)。其中，該在搜索頁面中直接呈現(xiàn)的資源信息包括但不限于:1)直接呈現(xiàn)在搜索頁面中的、包含諸如圖像和/或音視頻等信息的多媒體資訊；2)直接呈現(xiàn)在搜索頁面中的應(yīng)用等。例如，當(dāng)用戶搜索“天氣預(yù)報”時，直接呈現(xiàn)在搜索頁面中的、包含圖像信息的、未來3天的天氣預(yù)報等；又例如，當(dāng)用戶搜索“憤怒的小鳥攻略”時，直接呈現(xiàn)在搜索頁面中的、可供用戶進(jìn)行諸如點擊、翻頁等操作，以使用戶獲得所需關(guān)卡的攻略的應(yīng)用等。第二判斷裝置判斷滿意度確定裝置3獲得的滿意度是否低于第一預(yù)定閾值或第一預(yù)定等級。例如，滿意度確定裝置3獲得的滿意度為0.21，第一預(yù)定閾值為0.4，則第二判斷裝置判斷滿意度低于第一預(yù)定閾值等。當(dāng)判斷所述滿意度低于第一預(yù)定閾值或第一預(yù)定等級時，呈現(xiàn)確定裝置確定所述搜索序列的搜索結(jié)果中不再包含所述直接呈現(xiàn)的資源信息。具體地，當(dāng)判斷滿意度低于第一預(yù)定閾值或第一預(yù)定等級時，呈現(xiàn)確定裝置將直接呈現(xiàn)的資源信息從該搜索序列的搜索結(jié)果索引或列表中刪除，以使用戶在該刪除操作之后搜索該搜索序列時，搜索結(jié)果中不再包含該直接呈現(xiàn)的搜索結(jié)果。例如，搜索序列“天氣預(yù)報”的第二排序位置包含直接呈現(xiàn)用戶IP所在城市未來3天的天氣預(yù)報資訊，第二判斷裝置判斷搜索序列“天氣預(yù)報”的搜索結(jié)果的滿意度低于第一預(yù)定等級，則呈現(xiàn)確定裝置將該直接呈現(xiàn)在第二排序位置的天氣預(yù)報資訊從搜索序列“天氣預(yù)報”的索引中刪除，以使“天氣預(yù)報”的搜索結(jié)果中不再包含該直接呈現(xiàn)的天氣預(yù)報資τΗ ο需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何當(dāng)判斷所述滿意度低于第一預(yù)定閾值或第一預(yù)定等級時，確定所述搜索序列的搜索結(jié)果中不再包含所述直接呈現(xiàn)的資源信息的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。本發(fā)明的確定裝置，能夠根據(jù)搜索序列的點擊量信息與其預(yù)定點擊量特征信息的相符程度，確定用戶對搜索序列的搜索結(jié)果的滿意度，極大提高了滿意度評估的效率和準(zhǔn)確性。進(jìn)一步地，當(dāng)搜索結(jié)果中包含直接呈現(xiàn)的資源信息時，還能根據(jù)所確定的滿意度，判斷直接呈現(xiàn)的資源信息是否較好地符合用戶需求，并當(dāng)判斷其未能較好地符合用戶需求時，將直接呈現(xiàn)的資源信息下線。圖4為本發(fā)明一個優(yōu)選實施例的用于確定用戶對搜索結(jié)果的滿意度的確定裝置的結(jié)構(gòu)示意圖。本實施例的確定裝置包括第一獲取裝置1、符合度確定裝置2、第二獲取裝置6以及包含于滿意度確定裝置3中的第二子確定裝置31。第一獲取裝置I以及符合度確定裝置2已在參照圖3所示實施例中予以詳述，在此不再贅述。第二獲取裝置6獲取用戶對基于搜索序列所得的搜索結(jié)果的其他行為相關(guān)信息。其中，所述其他行為相關(guān)信息包括除用戶對搜索結(jié)果的點擊量信息以外的、與該用戶對搜索結(jié)果執(zhí)行的行為相關(guān)的信息。優(yōu)選地，搜索結(jié)果中包括至少一項資源鏈接，所述其他行為相關(guān)信息包括以下至少一項行為相關(guān)信息:I)用戶所點擊的各個資源鏈接中每個資源鏈接的點擊次數(shù)。例如，多個用戶對搜索結(jié)果中的3個資源鏈接A、B、C的點擊總次數(shù)分別為239次、420次以及90次。2)用戶在各個點擊的資源鏈接所指向的資源信息上的停留時間。其中，用戶在資源信息上的停留時間可通過以下方式確定:a)將用戶點擊指向該資源信息的資源鏈接至點擊另一資源鏈接、關(guān)閉當(dāng)前頁面或跳轉(zhuǎn)至其他頁面之間的時間間隔作為停留時間山)將用戶點擊資源鏈接至用戶關(guān)閉該資源鏈接所指向的資源頁面之間的時間間隔作為停留時間，其中，可通過嵌入瀏覽器中的腳本來獲得用戶關(guān)閉資源鏈接所指向的資源頁面的時間。3)用戶所點擊的各個排序位置的資源鏈接中每個排序位置的點擊次數(shù)。例如，用戶點擊第一位、第二位、第三位、第四位以及第五位的排序位置的資源鏈接的次數(shù)分別為8983次、7563次、9834次、2934次以及209次。4)用戶點擊各個排序位置的資源鏈接的順序信息。其中，該順序信息包括但不限于:a)用戶第N次(NS I)點擊一個排序位置的資源鏈接的次數(shù)占該排序位置的資源鏈接的總點擊次數(shù)的比例，如用戶在點擊搜索結(jié)果的過程中，執(zhí)行第I次點擊操作時，點擊排序第一位的資源鏈接的次數(shù)占該排序第一位的資源鏈接的總點擊次數(shù)的比例為45.3%等；b)用戶逆序點擊各個排序位置的資源鏈接的逆序程度，其中，逆序點擊表示先點擊排序在后的資源鏈接，再點擊排序在前的資源鏈接。其中，該逆序程度可通過用戶逆序點擊的次數(shù)以及逆序點擊的資源鏈接在搜索結(jié)果中的排序來確定；如兩個相鄰點擊操作為逆序點擊的次數(shù)越多、逆序程度越高，逆序點擊的資源鏈接在搜索結(jié)果中的排序越靠后，逆序程度越高等。具體地，第二獲取裝置6獲取其他行為相關(guān)信息的方式包括但不限于:1)第二獲取裝置6在本地的其他行為相關(guān)信息庫中對該輸入序列進(jìn)行查詢，以獲得基于該輸入序列所得的搜索結(jié)果的其他行為相關(guān)信息；2)第二獲取裝置6向網(wǎng)絡(luò)中的其他設(shè)備發(fā)送該輸入序列，以獲得其他設(shè)備反饋的基于該輸入序列所得的搜索結(jié)果的其他行為相關(guān)信息。需要說明的是，第一獲取裝置I和符合度確定裝置S2，與第二獲取裝置6執(zhí)行的操作之間并無先后順序。第二子確定裝置31根據(jù)符合度確定裝置2確定的符合程度，并結(jié)合第二獲取裝置6獲得的其他行為相關(guān)信息，確定用戶對所述搜索結(jié)果的滿意度。具體地，第二子確定裝置31根據(jù)符合程度，并結(jié)合其他行為相關(guān)信息，確定滿意度地方式包括但不限于:I)第二子確定裝置31根據(jù)符合程度確定初始滿意度，并根據(jù)其他行為相關(guān)信息來調(diào)整初始滿意度。其中，第二子確定裝置31根據(jù)符合程度確定初始滿意度的方式，與參照圖3所示實施例中的滿意度確定裝置3根據(jù)符合程度確定用戶對搜索結(jié)果的滿意度的方式相同或相似，在此不再贅述。例如，第二獲取裝置6獲得用戶對搜索結(jié)果的平均逆序點擊次數(shù)為1.532次，第二子確定裝置31根據(jù)符合度確定裝置2獲得的符合程度確定初始滿意度為8.341，則第二子確定裝置31根據(jù)滿意度=初始滿意度-平均逆序點擊次數(shù)，獲得滿意度=8.341-1.532 =6.809。2)第二子確定裝置31進(jìn)一步包括評估確定裝置(圖未示)以及第三子確定裝置(圖未示)；其中，評估確定裝置根據(jù)與所述其他行為相關(guān)信息中的各項行為相關(guān)信息分別相應(yīng)的預(yù)定行為評估規(guī)則，獲得所述其他行為相關(guān)信息中每項行為相關(guān)信息的評估信息；第三子確定裝置根據(jù)所述符合程度，結(jié)合所述評估信息，確定用戶對所述搜索結(jié)果的滿意度。其中，所述預(yù)定行為評估規(guī)則包括用于確定如何基于與其相應(yīng)的其他行為相關(guān)信息來獲得評估信息的規(guī)則。其中，評估信息可以評估等級或評估值表示。例如，第二獲取裝置6獲得的其他行為相關(guān)信息包括:i)用戶在資源信息上的平均停留時間為36.4秒；以及ii)用戶點擊第一位、第二位以及第三位的排序位置的資源鏈接的次數(shù)分別為8983次、7563次、9834次。則評估確定裝置根據(jù)與其他行為相關(guān)信息i相應(yīng)的預(yù)定行為評估規(guī)則“當(dāng)平均停留時間在30-40秒之間時，評估值為4”，確定其他行為相關(guān)信息i的評估值為4 ;第三子確定裝置根據(jù)與其他行為相關(guān)信息ii相應(yīng)的預(yù)定行為評估規(guī)則“評估值=10*{ Σ [(l/j)*(Cj/Call)]}, Cj為第j位排序位置的點擊次數(shù)、Call為該搜索結(jié)果的總點擊次數(shù)”，確定其他行為相關(guān)信息ii的評估值=10*[(1/1)*(8983/26380)+ (1/2) *(7563/26380)+ (1/3) *(9834/26380)] = 10* (0.3405+0.1433+0.1243) = 6.081。接著，第三子確定裝置求取符合度確定裝置2獲得的符合程度10、評估確定裝置獲得的行為相關(guān)信息i的評估值4以及評委相關(guān)信息ii的評估值6.081的平均值，并將獲得的平均值
6.694作為用戶對搜索結(jié)果的滿意度。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何根據(jù)符合程度，并結(jié)合其他行為相關(guān)信息，確定用戶對所述搜索結(jié)果的滿意度的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。作為本實施例的優(yōu)選方案之一，其他行為相關(guān)信息中包括用戶所點擊的各個資源鏈接中每個資源鏈接的點擊次數(shù)，本實施例的確定裝置還包括調(diào)整裝置(圖未示)，該調(diào)整裝置根據(jù)其他行為相關(guān)信息中每個資源鏈接的點擊次數(shù)，調(diào)整所述搜索結(jié)果中資源鏈接的排序。
具體地，資源鏈接的點擊次數(shù)越高，調(diào)整裝置將該資源鏈接的排序向前調(diào)整的可能性越高；資源鏈接的點擊次數(shù)越低，調(diào)整裝置將該資源鏈接的排序向后調(diào)整的可能性越聞。優(yōu)選地，當(dāng)預(yù)定點擊量特征信息屬于集中點擊特征信息時，調(diào)整裝置進(jìn)一步包括選擇裝置(圖未示)以及子調(diào)整裝置(圖未示)。其中，確定裝置能夠根據(jù)預(yù)定點擊量特征信息的預(yù)定屬性，或者，能夠根據(jù)預(yù)定點擊量特征信息是否具有集中單擊特征，如平均點擊量或平均點擊量范圍在1-3之間等，判斷預(yù)定點擊量特征信息是否屬于集中點擊特征信肩、O選擇裝置根據(jù)各個資源鏈接的點擊次數(shù)，由所述用戶所點擊的各個資源鏈接中選擇用戶集中點擊的一個或多個資源鏈接。具體地，選擇裝置選擇點擊次數(shù)最高的M個資源鏈接，M為預(yù)定值；或者，選擇裝置選擇點擊次數(shù)占搜索結(jié)果總點擊次數(shù)比例高于預(yù)定比例閾值的一個或多個資源鏈接。例如，選擇裝置選擇點擊次數(shù)最高的I個資源鏈接；或者，選擇裝置選擇點擊次數(shù)占搜索結(jié)果總點擊次數(shù)比例高于40%的一個或多個資源鏈接等。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何根據(jù)各個資源鏈接的點擊次數(shù)，由所述用戶所點擊的各個資源鏈接中選擇用戶集中點擊的一個或多個資源鏈接的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。接著，子調(diào)整裝置將該一個或多個資源鏈接的排序調(diào)整至指定位置。例如，子調(diào)整裝置將選擇裝置選擇的I個資源鏈接的排序調(diào)整至第一位；又例如，子調(diào)整裝置將選擇裝置選擇的2個資源鏈接中點擊次數(shù)較高的資源鏈接的排序調(diào)整至第一位，并將另一資源鏈接的排序調(diào)整至第二位等。需要說明的是，上述舉例僅為更好地說明本發(fā)明的技術(shù)方案，而非對本發(fā)明的限制，本領(lǐng)域技術(shù)人員應(yīng)該理解，任何將選擇的一個或多個資源鏈接的排序調(diào)整至指定位置的實現(xiàn)方式，均應(yīng)包含在本發(fā)明的范圍內(nèi)。本優(yōu)選方案能夠識別出用戶希望獲得特定搜索結(jié)果的搜索序列，并根據(jù)用戶對該類搜索序列的搜索結(jié)果的點擊情況，從搜索結(jié)果中識別出用戶希望獲得的特定資源鏈接，并將識別出得資源鏈接置于排序靠前的指定位置。優(yōu)選地，本實施例的確定裝置還包括第三判斷裝置(圖未示)以及執(zhí)行裝置(圖未示)。第三判斷裝置判斷所述滿意度是否低于第二預(yù)定閾值或第二預(yù)定等級，當(dāng)判斷所述滿意度低于第二預(yù)定閾值或第二預(yù)定等級時，執(zhí)行裝置觸發(fā)調(diào)整裝置執(zhí)行操作。本實施例的方法，能夠結(jié)合點擊量信息與預(yù)定點擊量特征信息之間的符合程度以及用戶對搜索結(jié)果的其他行為相關(guān)信息，確定用戶對搜索結(jié)果的滿意度，進(jìn)一步提高了計算機設(shè)備獲得的滿意度的準(zhǔn)確度。對于本領(lǐng)域技術(shù)人員而言，顯然本發(fā)明不限于上述示范性實施例的細(xì)節(jié)，而且在不背離本發(fā)明的精神或基本特征的情況下，能夠以其他的具體形式實現(xiàn)本發(fā)明。因此，無論從哪一點來看，均應(yīng)將實施例看作是示范性的，而且是非限制性的，本發(fā)明的范圍由所附權(quán)利要求而不是上述說明限定，因此旨在將落在權(quán)利要求的等同要件的含義和范圍內(nèi)的所有變化涵括在本發(fā)明內(nèi)。不應(yīng)將權(quán)利要求中的任何附圖標(biāo)記視為限制所涉及的權(quán)利要求。此夕卜，顯然“包括” 一詞不排除其他單元或步驟，單數(shù)不排除復(fù)數(shù)。系統(tǒng)權(quán)利要求中陳述的多個單元或裝置也可以由一個單元或裝置通過軟件或者硬件來實現(xiàn)。第一，第二等詞語用來表示名稱，而并不表示任何特定的順序。
權(quán)利要求
1.一種計算機實現(xiàn)的用于確定用戶對搜索結(jié)果的滿意度的方法，其中，該方法包括以下步驟: a獲取用戶對基于搜索序列所得的搜索結(jié)果的點擊量信息； b根據(jù)所述點擊量信息與所述搜索序列的預(yù)定點擊量特征信息，確定兩者之間的符合程度； c根據(jù)所述符合程度，確定用戶對所述搜索結(jié)果的滿意度。
2.根據(jù)權(quán)利要求1所述的方法，其中，所述預(yù)定點擊量特征信息包括預(yù)定點擊量范圍，其中，所述步驟b包括以下步驟: -判斷所述點擊量信息是否屬于所述預(yù)定點擊量范圍； -當(dāng)判斷所述點擊量信息屬于所述預(yù)定點擊量范圍時，確定所述符合程度為最高。
3.根據(jù)權(quán)利要求2所述的方法，其中，所述符合程度包括所述點擊量信息與所述預(yù)定點擊量范圍之間的偏離程度，其中，所述步驟b還包括以下步驟: -當(dāng)判斷所述點擊量信息 不屬于所述預(yù)定點擊量范圍時，確定所述點擊量信息與所述預(yù)定點擊量范圍之間的偏離程度。
4.根據(jù)權(quán)利要求1至3中任一項所述的方法，其中，所述搜索結(jié)果包含在搜索頁面中直接呈現(xiàn)的資源信息，其中，該方法還包括以下步驟: -判斷所述滿意度是否低于第一預(yù)定閾值或第一預(yù)定等級； -當(dāng)判斷所述滿意度低于第一預(yù)定閾值或第一預(yù)定等級時，確定所述搜索序列的搜索結(jié)果中不再包含所述直接呈現(xiàn)的資源信息。
5.根據(jù)權(quán)利要求1至4中任一項所述的方法，其中，該方法還包括以下步驟: -獲取用戶對基于搜索序列所得的搜索結(jié)果的其他行為相關(guān)信息； 其中，所述步驟c包括以下步驟: Cl根據(jù)所述符合程度，并結(jié)合所述其他行為相關(guān)信息，確定用戶對所述搜索結(jié)果的滿意度。
6.根據(jù)權(quán)利要求5所述的方法，其中，所述搜索結(jié)果包括至少一項資源鏈接，所述其他行為相關(guān)信息包括以下至少一項行為相關(guān)信息: -用戶所點擊的各個資源鏈接中每個資源鏈接的點擊次數(shù)； -用戶在各個點擊的資源鏈接所指向的資源信息上的停留時間； -用戶所點擊的各個排序位置的資源鏈接中每個排序位置的點擊次數(shù)； -用戶點擊各個排序位置的資源鏈接的順序信息。
7.根據(jù)權(quán)利要求6所述的方法，其中，所述步驟Cl包括以下步驟: -根據(jù)與所述其他行為相關(guān)信息中的各項行為相關(guān)信息分別相應(yīng)的預(yù)定行為評估規(guī)貝U，獲得所述其他行為相關(guān)信息中每項行為相關(guān)信息的評估信息； -根據(jù)所述符合程度，并結(jié)合所述評估信息，確定用戶對所述搜索結(jié)果的滿意度。
8.根據(jù)權(quán)利要求6或7所述的方法，其中，所述其他行為相關(guān)信息包括所述每個資源鏈接的點擊次數(shù)，其中，該方法還包括以下步驟: i根據(jù)所述每個資源鏈接的點擊次數(shù)，調(diào)整所述搜索結(jié)果中資源鏈接的排序。
9.根據(jù)權(quán)利要求8所述的方法，其中，該方法還包括以下步驟: -判斷所述滿意度是否低于第二預(yù)定閾值或第二預(yù)定等級；-當(dāng)判斷所述滿意度低于第二預(yù)定閾值或第二預(yù)定等級時，執(zhí)行所述步驟i。
10.根據(jù)權(quán)利要求8或9所述的方法，其中，預(yù)定點擊量特征信息屬于集中點擊特征信息，所述步驟i包括以下步驟: -根據(jù)所述點擊次數(shù)，由所述用戶所點擊的各個資源鏈接中選擇用戶集中點擊的一個或多個資源鏈接； -將該一個或多個資源鏈接的排序調(diào)整至指定位置。
11.一種用于確定用戶對搜索結(jié)果的滿意度的確定裝置，其中，該確定裝置包括: 第一獲取裝置，用于獲取用戶對基于搜索序列所得的搜索結(jié)果的點擊量信息； 符合度確定裝置，用于跟據(jù)所述點擊量信息與所述搜索序列的預(yù)定點擊量特征信息，確定兩者之間的符合程度； 滿意度確定裝置，用于根據(jù)所述符合程度，確定用戶對所述搜索結(jié)果的滿意度。
12.根據(jù)權(quán)利要求11所述的確定裝置，其中，所述預(yù)定點擊量特征信息包括預(yù)定點擊量范圍，其中，所述符合度確定裝置包括: 第一判斷裝置，用于判斷所述點擊量信息是否屬于所述預(yù)定點擊量范圍； 第一子確定裝置，用于當(dāng)判斷所述點擊量信息屬于所述預(yù)定點擊量范圍時，確定所述符合程度為最高。
13.根據(jù)權(quán)利要求12所述的確定裝置，其中，所述符合程度包括所述點擊量信息與所述預(yù)定點擊量范圍之間的偏離程度，其中，所述符合度確定裝置還包括: 偏離度確定裝置，用于 當(dāng)判斷所述點擊量信息不屬于所述預(yù)定點擊量范圍時，確定所述點擊量信息與所述預(yù)定點擊量范圍之間的偏離程度。
14.根據(jù)權(quán)利要求11至13中任一項所述的確定裝置，其中，所述搜索結(jié)果包含在搜索頁面中直接呈現(xiàn)的資源信息，其中，該確定裝置還包括: 第二判斷裝置，用于判斷所述滿意度是否低于第一預(yù)定閾值或第一預(yù)定等級； 呈現(xiàn)裝置，用于當(dāng)判斷所述滿意度低于第一預(yù)定閾值或第一預(yù)定等級時，確定所述搜索序列的搜索結(jié)果中不再包含所述直接呈現(xiàn)的資源信息。
15.根據(jù)權(quán)利要求11至14中任一項所述的確定裝置，其中，該確定裝置還包括: 第二獲取裝置，用于獲取用戶對基于搜索序列所得的搜索結(jié)果的其他行為相關(guān)信息； 其中，所述滿意度確定裝置包括: 第二子確定裝置，用于根據(jù)所述符合程度，并結(jié)合所述其他行為相關(guān)信息，確定用戶對所述搜索結(jié)果的滿意度。
16.根據(jù)權(quán)利要求15所述的確定裝置，其中，所述搜索結(jié)果包括至少一項資源鏈接，所述其他行為相關(guān)信息包括以下至少一項行為相關(guān)信息: -用戶所點擊的各個資源鏈接中每個資源鏈接的點擊次數(shù)； -用戶在各個點擊的資源鏈接所指向的資源信息上的停留時間； -用戶所點擊的各個排序位置的資源鏈接中每個排序位置的點擊次數(shù)； -用戶點擊各個排序位置的資源鏈接的順序信息。
17.根據(jù)權(quán)利要求16所述的確定裝置，其中，所述第二子確定裝置包括: 評估裝置，用于根據(jù)與所述其他行為相關(guān)信息中的各項行為相關(guān)信息分別相應(yīng)的預(yù)定行為評估規(guī)則，獲得所述其他行為相關(guān)信息中每項行為相關(guān)信息的評估信息；第三子確定裝置，用于根據(jù)所述符合程度，并結(jié)合所述評估信息，確定用戶對所述搜索結(jié)果的滿意度。
18.根據(jù)權(quán)利要求16或17所述的確定裝置，其中，所述其他行為相關(guān)信息包括所述每個資源鏈接的點擊次數(shù)，其中，該確定裝置還包括: 調(diào)整裝置，用于根據(jù)所述每個資源鏈接的點擊次數(shù)，調(diào)整所述搜索結(jié)果中資源鏈接的排序。
19.根據(jù)權(quán)利要求18所述的確定裝置，其中，該確定裝置還包括: 第三判斷裝置，用于判斷所述滿意度是否低于第二預(yù)定閾值或第二預(yù)定等級； 執(zhí)行裝置，用于當(dāng)判斷所述滿意度低于第二預(yù)定閾值或第二預(yù)定等級時，觸發(fā)所述調(diào)整裝置執(zhí)行操作。
20.根據(jù)權(quán)利要求18或19所述的確定裝置，其中，預(yù)定點擊量特征信息屬于集中點擊特征信息，所述調(diào)整裝置包括: 選擇裝置，用于根據(jù)所述點擊次數(shù)，由所述用戶所點擊的各個資源鏈接中選擇用戶集中點擊的一個或多個資源鏈接； 子調(diào)整裝置，用于將該一個或多個資源鏈接的排序調(diào)整至指定位置。
21.一種計算機設(shè)備，其中，該計算機設(shè)備包括如權(quán)利要求11至20中至少一項所述的確定裝置。
全文摘要
本發(fā)明提供了確定用戶對搜索結(jié)果滿意度的方法、裝置和設(shè)備。本發(fā)明的方案獲取用戶對基于搜索序列所得的搜索結(jié)果的點擊量信息；根據(jù)所述點擊量信息與所述搜索序列的預(yù)定點擊量特征信息，確定兩者之間的符合程度；并據(jù)所述符合程度，確定用戶對所述搜索結(jié)果的滿意度。與現(xiàn)有技術(shù)相比，本發(fā)明具有以下優(yōu)點能夠根據(jù)搜索序列的點擊量信息與其預(yù)定點擊量特征信息的相符程度，確定用戶對搜索序列的搜索結(jié)果的滿意度，極大提高了滿意度評估的效率和準(zhǔn)確性。
文檔編號G06F17/30GK103186604SQ20111045549
公開日2013年7月3日 申請日期2011年12月30日 優(yōu)先權(quán)日2011年12月30日
發(fā)明者榮蓉, 何海濤 申請人:北京百度網(wǎng)訊科技有限公司