網(wǎng)頁數(shù)據(jù)的處理方法和裝置制造方法
【專利摘要】本發(fā)明公開了一種網(wǎng)頁數(shù)據(jù)的處理方法和裝置。其中，網(wǎng)頁數(shù)據(jù)的處理方法包括：采集網(wǎng)頁數(shù)據(jù)；采用預(yù)設(shè)過濾條件過濾采集到的網(wǎng)頁數(shù)據(jù)；以及將過濾后的網(wǎng)頁數(shù)據(jù)分發(fā)至多個處理節(jié)點。通過本發(fā)明，解決了現(xiàn)有技術(shù)中處理微博網(wǎng)頁數(shù)據(jù)的效率較低的問題，進而達到了優(yōu)化處理方式、提高工作效率的效果。
【專利說明】網(wǎng)頁數(shù)據(jù)的處理方法和裝置
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及數(shù)據(jù)處理領(lǐng)域，具體而言，涉及一種網(wǎng)頁數(shù)據(jù)的處理方法和裝置。
【背景技術(shù)】
[0002]隨著社會信息化進程的不斷加快，微博這種網(wǎng)頁數(shù)據(jù)，作為新型社交媒體以其內(nèi)容簡短精煉、信息傳播速度快等特點吸引了廣泛的用戶群體。越來越多的用戶喜歡在微博上評價其使用的產(chǎn)品，向商家進行各種咨詢，而大量微博信息的存在卻使得商家很難在第一時間內(nèi)捕捉到用戶的問題進行響應(yīng)，引來用戶的極大抱怨。傳統(tǒng)的人工客戶服務(wù)模式，采用人工登錄微博平臺，甄選回復(fù)用戶的信息，由于存在以下缺點，已經(jīng)無法適應(yīng)新媒體的發(fā)展:
[0003](I)微博數(shù)據(jù)信息量龐大，其中有些信息是沒有價值的，不需要客服進行直接的回復(fù)，目前這部分信息不能予以有效的識別，人工排查這些無效信息需要占用大量的時間，造成工作效率的降低。
[0004](2)很多情況下不同用戶會咨詢相同或類似的問題，目前客服人員需要針對這些問題進行重復(fù)的回答，降低了工作效率。
[0005](3)客服的工作情況無法進行有效的跟蹤，不知道哪條信息是誰回復(fù)的，一個用戶咨詢的問題后續(xù)往往會被多個客服回復(fù)，而每個客服的回復(fù)方式都會有所差異，這樣顯然不會讓用戶滿意。
[0006](4)無法統(tǒng)計每個客服的工作量，不知道每個客服每天能處理多少信息，處理每條信息的時間間隔是多少，不利于今后個人績效的評定以及員工工作積極性的提高。
[0007]針對相關(guān)技術(shù)中處理微博網(wǎng)頁數(shù)據(jù)的效率較低的問題，目前尚未提出有效的解決方案。

【發(fā)明內(nèi)容】

[0008]本發(fā)明的主要目的在于提供一種網(wǎng)頁數(shù)據(jù)的處理方法和裝置，以解決現(xiàn)有技術(shù)中處理微博網(wǎng)頁數(shù)據(jù)的效率較低的問題。
[0009]根據(jù)本發(fā)明的一個方面，提供了 一種網(wǎng)頁數(shù)據(jù)的處理方法。
[0010]根據(jù)本發(fā)明的網(wǎng)頁數(shù)據(jù)的處理方法包括:采集網(wǎng)頁數(shù)據(jù)；采用預(yù)設(shè)過濾條件過濾采集到的網(wǎng)頁數(shù)據(jù)；以及將過濾后的網(wǎng)頁數(shù)據(jù)分發(fā)至多個處理節(jié)點。
[0011]進一步地，采集到的網(wǎng)頁數(shù)據(jù)包括多條數(shù)據(jù)，采用預(yù)設(shè)過濾條件過濾采集到的網(wǎng)頁數(shù)據(jù)包括:判斷第一數(shù)據(jù)是否滿足預(yù)設(shè)過濾條件，其中，第一數(shù)據(jù)為多條數(shù)據(jù)中的任一條數(shù)據(jù)；以及在判斷第一數(shù)據(jù)滿足預(yù)設(shè)過濾條件的情況下，刪除第一數(shù)據(jù)。
[0012]進一步地，判斷第一數(shù)據(jù)是否滿足預(yù)設(shè)過濾條件包括:獲取第一數(shù)據(jù)中目標字符的比重；以及判斷目標字符的比重是否達到預(yù)設(shè)比重，其中，在判斷出目標字符的比重達到預(yù)設(shè)比重的情況下，確定第一數(shù)據(jù)滿足預(yù)設(shè)過濾條件。
[0013]進一步地，判斷第一數(shù)據(jù)是否滿足預(yù)設(shè)過濾條件包括:獲取第一數(shù)據(jù)的直接來源數(shù)據(jù)；以及判斷第一數(shù)據(jù)與直接來源數(shù)據(jù)是否相同，其中，在判斷出第一數(shù)據(jù)與直接來源數(shù)據(jù)相同的情況下，確定第一數(shù)據(jù)滿足預(yù)設(shè)過濾條件。
[0014]進一步地，判斷第一數(shù)據(jù)是否滿足預(yù)設(shè)過濾條件包括:獲取第一數(shù)據(jù)的字符數(shù)量；以及判斷字符數(shù)量是否小于預(yù)設(shè)值，其中，在判斷出字符數(shù)量小于預(yù)設(shè)值的情況下，確定第一數(shù)據(jù)滿足預(yù)設(shè)過濾條件。
[0015]進一步地，將過濾后的網(wǎng)頁數(shù)據(jù)分發(fā)至多個處理節(jié)點包括:獲取過濾后的網(wǎng)頁數(shù)據(jù)的數(shù)量、處理節(jié)點的數(shù)量和每個處理節(jié)點未處理的網(wǎng)頁數(shù)據(jù)的數(shù)量；以及按照過濾后的網(wǎng)頁數(shù)據(jù)的數(shù)量和每個處理節(jié)點未處理的網(wǎng)頁數(shù)據(jù)數(shù)量，將過濾后的網(wǎng)頁數(shù)據(jù)分發(fā)至多個處理節(jié)點。
[0016]進一步地，處理節(jié)點的數(shù)量為η，η為2以上的自然數(shù)，按照過濾后的網(wǎng)頁數(shù)據(jù)的數(shù)量和每個處理節(jié)點未處理的網(wǎng)頁數(shù)據(jù)數(shù)量，將過濾后的網(wǎng)頁數(shù)據(jù)分發(fā)至多個處理節(jié)點包
括:按照公
【權(quán)利要求】
1.一種網(wǎng)頁數(shù)據(jù)的處理方法，其特征在于，包括: 采集網(wǎng)頁數(shù)據(jù)； 采用預(yù)設(shè)過濾條件過濾采集到的所述網(wǎng)頁數(shù)據(jù)；以及 將過濾后的所述網(wǎng)頁數(shù)據(jù)分發(fā)至多個處理節(jié)點。
2.根據(jù)權(quán)利要求1所述的處理方法，其特征在于，采集到的所述網(wǎng)頁數(shù)據(jù)包括多條數(shù)據(jù)，采用預(yù)設(shè)過濾條件過濾采集到的所述網(wǎng)頁數(shù)據(jù)包括: 判斷第一數(shù)據(jù)是否滿足所述預(yù)設(shè)過濾條件，其中，所述第一數(shù)據(jù)為所述多條數(shù)據(jù)中的任一條數(shù)據(jù)；以及 在判斷所述第一數(shù)據(jù)滿足所述預(yù)設(shè)過濾條件的情況下，刪除所述第一數(shù)據(jù)。
3.根據(jù)權(quán)利要求2所述的處理方法，其特征在于，判斷第一數(shù)據(jù)是否滿足所述預(yù)設(shè)過濾條件包括: 獲取所述第一數(shù)據(jù)中目標字符的比重；以及 判斷所述目標字符的比重是否達到預(yù)設(shè)比重， 其中，在判斷出所述目標字符的比重達到所述預(yù)設(shè)比重的情況下，確定所述第一數(shù)據(jù)滿足所述預(yù)設(shè)過濾條件。
4.根據(jù)權(quán)利要求2所`述的處理方法，其特征在于，判斷第一數(shù)據(jù)是否滿足所述預(yù)設(shè)過濾條件包括: 獲取所述第一數(shù)據(jù)的直接來源數(shù)據(jù)；以及 判斷所述第一數(shù)據(jù)與所述直接來源數(shù)據(jù)是否相同， 其中，在判斷出所述第一數(shù)據(jù)與所述直接來源數(shù)據(jù)相同的情況下，確定所述第一數(shù)據(jù)滿足所述預(yù)設(shè)過濾條件。
5.根據(jù)權(quán)利要求2所述的處理方法，其特征在于，判斷第一數(shù)據(jù)是否滿足所述預(yù)設(shè)過濾條件包括: 獲取所述第一數(shù)據(jù)的字符數(shù)量；以及 判斷所述字符數(shù)量是否小于預(yù)設(shè)值， 其中，在判斷出所述字符數(shù)量小于所述預(yù)設(shè)值的情況下，確定所述第一數(shù)據(jù)滿足所述預(yù)設(shè)過濾條件。
6.根據(jù)權(quán)利要求1所述的處理方法，其特征在于，將過濾后的所述網(wǎng)頁數(shù)據(jù)分發(fā)至多個處理節(jié)點包括: 獲取過濾后的所述網(wǎng)頁數(shù)據(jù)的數(shù)量、所述處理節(jié)點的數(shù)量和每個所述處理節(jié)點未處理的所述網(wǎng)頁數(shù)據(jù)的數(shù)量；以及 按照過濾后的所述網(wǎng)頁數(shù)據(jù)的數(shù)量和每個所述處理節(jié)點未處理的所述網(wǎng)頁數(shù)據(jù)數(shù)量，將過濾后的所述網(wǎng)頁數(shù)據(jù)分發(fā)至多個所述處理節(jié)點。
7.根據(jù)權(quán)利要求6所述的處理方法，其特征在于，所述處理節(jié)點的數(shù)量為η，η為2以上的自然數(shù)，按照過濾后的所述網(wǎng)頁數(shù)據(jù)的數(shù)量和每個所述處理節(jié)點未處理的所述網(wǎng)頁數(shù)據(jù)數(shù)量，將過濾后的所述網(wǎng)頁數(shù)據(jù)分發(fā)至多個所述處理節(jié)點包括:


η
TN+ Y N 按照公Scw _ ti 1 Y確定分發(fā)至處理節(jié)點i的數(shù)量CNi,其中，i依次取I至
η1n, TN為過濾后的所述網(wǎng)頁數(shù)據(jù)的數(shù)量，Ni為所述處理節(jié)點i未處理的所述網(wǎng)頁數(shù)據(jù)的數(shù)量；以及 每分發(fā)一條過濾后的所述網(wǎng)頁數(shù)據(jù)至所述處理節(jié)點i，將CNi減1，直至CNi=O,或每分發(fā)一條過濾后的所述網(wǎng)頁數(shù)據(jù)至所述處理節(jié)點1，將隊加1，直至Ni=CNitl
8.根據(jù)權(quán)利要求7所述的處理方法，其特征在于，采用以下方式分發(fā)過濾后的所述網(wǎng)頁數(shù)據(jù)至所述處理節(jié)點1: 獲取過濾后的網(wǎng)頁數(shù)據(jù)的用戶標識Ti ； 獲取所述處理節(jié)點i處理過的所述網(wǎng)頁數(shù)據(jù)的用戶標識； 判斷第一用戶標識是否為第二用戶標識中的任一用戶標識，其中，所述第一用戶標識為所述網(wǎng)頁數(shù)據(jù)的用戶標識Ti，所述第二用戶標識為所述處理節(jié)點i處理過的所述網(wǎng)頁數(shù)據(jù)的用戶標識；以及 在判斷出所述第一用戶標識為所述第二用戶標識中的任一用戶標識的情況下，分發(fā)用戶標識為Ti的所述網(wǎng)頁數(shù)據(jù)至所述處理節(jié)點i。
9.根據(jù)權(quán)利要求1所述的處理方法，其特征在于，在將過濾后的所述網(wǎng)頁數(shù)據(jù)分發(fā)至多個處理節(jié)點之后，所述處理方法還包括: 統(tǒng)計每個所述處理節(jié)點所處理的所述網(wǎng)頁數(shù)據(jù)。
10.一種網(wǎng)頁數(shù)據(jù)的處理裝置，其特征在于，包括:` 采集單元，用于采集網(wǎng)頁數(shù)據(jù)； 過濾單元，用于采用預(yù)設(shè)過濾條件過濾采集到的所述網(wǎng)頁數(shù)據(jù)；以及 分發(fā)單元，用于將過濾后的所述網(wǎng)頁數(shù)據(jù)分發(fā)至多個處理節(jié)點。
11.根據(jù)權(quán)利要求10所述的處理裝置，其特征在于，采集到的所述網(wǎng)頁數(shù)據(jù)包括多條數(shù)據(jù)，所述過濾單元包括: 第一判斷模塊，用于判斷第一數(shù)據(jù)是否滿足所述預(yù)設(shè)過濾條件，其中，所述第一數(shù)據(jù)為所述多條數(shù)據(jù)中的任一條數(shù)據(jù)；以及 刪除模塊，用于在判斷所述第一數(shù)據(jù)滿足所述預(yù)設(shè)過濾條件的情況下，刪除所述第一數(shù)據(jù)。
12.根據(jù)權(quán)利要求11所述的處理裝置，其特征在于，所述第一判斷模塊包括: 第一獲取子模塊，用于獲取所述第一數(shù)據(jù)中目標字符的比重；以及 第一判斷子模塊，用于判斷所述目標字符的比重是否達到預(yù)設(shè)比重， 其中，在判斷出所述目標字符的比重達到所述預(yù)設(shè)比重的情況下，確定所述第一數(shù)據(jù)滿足所述預(yù)設(shè)過濾條件。
13.根據(jù)權(quán)利要求11所述的處理裝置，其特征在于，所述第一判斷模塊包括: 第二獲取子模塊，用于獲取所述第一數(shù)據(jù)的直接來源數(shù)據(jù)；以及 第二判斷子模塊，用于判斷所述第一數(shù)據(jù)與所述直接來源數(shù)據(jù)是否相同， 其中，在判斷出所述第一數(shù)據(jù)與所述直接來源數(shù)據(jù)相同的情況下，確定所述第一數(shù)據(jù)滿足所述預(yù)設(shè)過濾條件。
14.根據(jù)權(quán)利要求11所述的處理裝置，其特征在于，所述第一判斷模塊包括: 第三獲取子模塊，用于獲取所述第一數(shù)據(jù)的字符數(shù)量；以及 第三判斷子模塊，用于判斷所述字符數(shù)量是否小于預(yù)設(shè)值，其中，在判斷出所述字符數(shù)量小于所述預(yù)設(shè)值的情況下，確定所述第一數(shù)據(jù)滿足所述預(yù)設(shè)過濾條件。
15.根據(jù)權(quán)利要求10所述的處理裝置，其特征在于，所述分發(fā)單元包括: 第一獲取模塊，用于獲取過濾后的所述網(wǎng)頁數(shù)據(jù)的數(shù)量、所述處理節(jié)點的數(shù)量和每個所述處理節(jié)點未處理的所述網(wǎng)頁數(shù)據(jù)的數(shù)量；以及 分發(fā)模塊，用于按照過濾后的所述網(wǎng)頁數(shù)據(jù)的數(shù)量和每個所述處理節(jié)點未處理的所述網(wǎng)頁數(shù)據(jù)數(shù)量，將過濾后的所述網(wǎng)頁數(shù)據(jù)分發(fā)至多個所述處理節(jié)點。
16.根據(jù)權(quán)利要求15所述的處理裝置，其特征在于，所述處理節(jié)點的數(shù)量為η，η為2以上的自然數(shù)，所述分發(fā)模塊包括:


確定子模塊，用于按照公式
17.根據(jù)權(quán)利要求16所述的處理裝置，其特征在于，所述處理裝置還包括:` 第二獲取模塊，用于獲取過濾后的網(wǎng)頁數(shù)據(jù)的用戶標識Ti ； 第三獲取模塊，用于獲取所述處理節(jié)點i處理過的所述網(wǎng)頁數(shù)據(jù)的用戶標識； 第二判斷模塊，用于判斷第一用戶標識是否為第二用戶標識中的任一用戶標識，其中，所述第一用戶標識為所述網(wǎng)頁數(shù)據(jù)的用戶標識Ti，所述第二用戶標識為所述處理節(jié)點i處理過的所述網(wǎng)頁數(shù)據(jù)的用戶標識；以及 所述分發(fā)模塊還用于在判斷出所述第一用戶標識為所述第二用戶標識中的任一用戶標識的情況下，分發(fā)用戶標識為Ti的所述網(wǎng)頁數(shù)據(jù)至所述處理節(jié)點i。
18.根據(jù)權(quán)利要求10所述的處理裝置，其特征在于，所述處理裝置還包括: 統(tǒng)計單元，用于統(tǒng)計每個所述處理節(jié)點所處理的所述網(wǎng)頁數(shù)據(jù)。
【文檔編號】G06F17/30GK103678700SQ201310741778
【公開日】2014年3月26日 申請日期:2013年12月27日 優(yōu)先權(quán)日:2013年12月27日
【發(fā)明者】朱少龍, 高立琦 申請人:納容眾慧（北京）科技有限公司