本發(fā)明是一種基于大數(shù)據(jù)采集與分析的刷單評價(jià)行為處理方法，屬于數(shù)據(jù)處理技術(shù)領(lǐng)域。
背景技術(shù)：
詢價(jià)等訂單信息的有效性直接影響最終的銷售效果，如何保證線索信息的有效性，防止刷單等行為是下單流程中需要實(shí)現(xiàn)的一個(gè)重要模塊，越接近買家購物行為的刷單越不容易被系統(tǒng)識別。在大數(shù)據(jù)基礎(chǔ)上開發(fā)的刷單檢測系統(tǒng)唯一沒辦法判定為刷單的就是真實(shí)訂單。所以刷單技術(shù)的更新總是圍繞著如何模仿真實(shí)買家購物行為進(jìn)展。市面上流行的刷單方法包含刷單路徑分布、七天螺旋刷單規(guī)律、刷單流程主要控制瀏覽時(shí)長、瀏覽整個(gè)頁面、賬號檢查等。更具體的刷單方法包括:IP防止作弊、Netclean防止作弊、點(diǎn)擊比率、來源統(tǒng)計(jì)、唯一參數(shù)、點(diǎn)擊時(shí)間順差和鼠標(biāo)值。
傳統(tǒng)的刷單數(shù)據(jù)處理流程類似于工廠中生產(chǎn)線上的工人們那樣組織工作者。每個(gè)工作者只負(fù)責(zé)作業(yè)中的部分工作。當(dāng)完成了自己的這部分工作時(shí)工作者會將作業(yè)轉(zhuǎn)發(fā)給下一個(gè)工作者。但當(dāng)前面的生產(chǎn)者出現(xiàn)問題是后面的生產(chǎn)者則無法執(zhí)行相應(yīng)的工作。如果出現(xiàn)較長的數(shù)據(jù)庫查詢等情況時(shí)則需要等待全部函數(shù)檢查完畢。
而現(xiàn)有實(shí)際情況是，訂單數(shù)據(jù)的實(shí)時(shí)處理量比較大，傳統(tǒng)的刷單數(shù)據(jù)處理服務(wù)存在：處理訂單數(shù)據(jù)慢，效率低且可用性差的問題。
技術(shù)實(shí)現(xiàn)要素：
針對現(xiàn)有技術(shù)存在的不足，本發(fā)明目的是提供一種基于大數(shù)據(jù)采集與分析的刷單評價(jià)行為處理方法，以解決上述背景技術(shù)中提出的問題。
為了實(shí)現(xiàn)上述目的，本發(fā)明是通過如下的技術(shù)方案來實(shí)現(xiàn)：一種基于大數(shù)據(jù)采集與分析的刷單評價(jià)行為處理方法，包括以下步驟：
步驟1，數(shù)據(jù)采集與分析，通過多個(gè)小型的數(shù)據(jù)庫實(shí)時(shí)的采集用戶的評價(jià)行為信息，集合一個(gè)用戶的所有評價(jià)行為信息，將一個(gè)用戶的所有評價(jià)行為信息發(fā)送至一個(gè)大的數(shù)據(jù)庫中，提取用戶的評價(jià)行為特征，設(shè)定一評價(jià)閥值，將用戶的評價(jià)行為特征與評價(jià)閥值進(jìn)行對比，對用戶的評價(jià)行為進(jìn)行劃分；
步驟2,提取用戶所評價(jià)商品的購物信息，通過多個(gè)小型的數(shù)據(jù)庫的采集用戶所評價(jià)商品的購物信息，將這些信息發(fā)送至一個(gè)大的數(shù)據(jù)庫中，提取用戶的購物行為特征，進(jìn)行判斷；
步驟3，處理，根據(jù)判斷結(jié)果，對用戶以及店鋪進(jìn)行處理。
進(jìn)一步地，在步驟1中，用戶的評價(jià)行為特征指用戶對于一件商品評價(jià)的字?jǐn)?shù)、用戶對于一件商品評價(jià)的內(nèi)容、用戶對于一件商品評價(jià)的次數(shù)、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的字?jǐn)?shù)、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的次數(shù)以及用戶對于一件商品評價(jià)的時(shí)間；
所述評價(jià)閥值指用戶對于一件商品評價(jià)的字?jǐn)?shù)、用戶對于一件商品評價(jià)的內(nèi)容、用戶對于一件商品評價(jià)內(nèi)容的關(guān)鍵詞衍生詞、用戶對于一件商品評價(jià)的次數(shù)、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的字?jǐn)?shù)、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的次數(shù)以及用戶對于一件商品評價(jià)的時(shí)間；
用戶的評價(jià)行為特征為A，評價(jià)閥值為B，采用所設(shè)置的評價(jià)閥值對用戶的評價(jià)行為特征進(jìn)行匹配，若A>=B，將該用戶的評價(jià)行為作為疑似刷單行為，并進(jìn)行下一步，若A<B,將該用戶的評價(jià)行為作為非刷單行為并刪除。
進(jìn)一步地，在步驟2中，判斷的依據(jù)為：
靜默轉(zhuǎn)化率，提取用戶購買商品所在類目的靜默轉(zhuǎn)化率，將這個(gè)商品所在類目的靜默轉(zhuǎn)化率與購物平臺的相應(yīng)類目綜合靜默轉(zhuǎn)化率進(jìn)行對比；
店鋪停留時(shí)間，提取用戶購買商品時(shí)在商品頁面停留的時(shí)間，根據(jù)商品的價(jià)值提取購物平臺中相等價(jià)值下商品頁面平均停留的時(shí)間，將用戶購買商品時(shí)在商品頁面停留的時(shí)間，與平均停留時(shí)間對比；
購物時(shí)間，提取用戶購買商品時(shí)的購物時(shí)間，同時(shí)提取此商品所在類目的集中購物時(shí)間，將用戶購買商品時(shí)的購物時(shí)間，與集中購物時(shí)間進(jìn)行對比；
收藏占比，提取用戶購買商品所在店鋪的收藏占比，將這個(gè)商品所在店鋪的收藏占比與購物平臺的相應(yīng)類目綜合收藏占比進(jìn)行對比；
評價(jià)內(nèi)容，根據(jù)用戶對于一件商品評價(jià)的字?jǐn)?shù)、對于一件商品評價(jià)的次數(shù)、在一個(gè)時(shí)間段對于一件商品評價(jià)的字?jǐn)?shù)、在一個(gè)時(shí)間段對于一件商品評價(jià)的次數(shù)以及一件商品評價(jià)的時(shí)間進(jìn)行判斷；
無線端占比，提取用戶購買商品所在店鋪的無線端占比，將這個(gè)商品所在店鋪的無線端占比與購物平臺的相應(yīng)類目綜合無線端占比進(jìn)行對比。
本發(fā)明的有益效果：本發(fā)明的一種基于大數(shù)據(jù)采集與分析的刷單評價(jià)行為處理方法，通過大數(shù)據(jù)抓取用戶的評價(jià)，并對用戶的購物行為進(jìn)行判斷，有效的查出用戶和店鋪的刷單行為，從而建立運(yùn)行平穩(wěn)、安全高效的網(wǎng)絡(luò)購物運(yùn)行新機(jī)制，構(gòu)建以人為本、惠及全民的民生服務(wù)新體系，開啟大眾創(chuàng)業(yè)、萬眾創(chuàng)新的創(chuàng)新驅(qū)動新格局，培育高端智能、新興繁榮的產(chǎn)業(yè)發(fā)展新生態(tài)。
具體實(shí)施方式
為使本發(fā)明實(shí)現(xiàn)的技術(shù)手段、創(chuàng)作特征、達(dá)成目的與功效易于明白了解，下面結(jié)合具體實(shí)施方式，進(jìn)一步闡述本發(fā)明。
本發(fā)明提供一種技術(shù)方案：一種基于大數(shù)據(jù)采集與分析的刷單評價(jià)行為處理方法，包括以下步驟：
步驟1，數(shù)據(jù)采集與分析，通過多個(gè)小型的數(shù)據(jù)庫實(shí)時(shí)的采集用戶的評價(jià)行為信息，集合一個(gè)用戶的所有評價(jià)行為信息，將一個(gè)用戶的所有評價(jià)行為信息發(fā)送至一個(gè)大的數(shù)據(jù)庫中，提取用戶的評價(jià)行為特征，設(shè)定一評價(jià)閥值，將用戶的評價(jià)行為特征與評價(jià)閥值進(jìn)行對比，對用戶的評價(jià)行為進(jìn)行劃分；
步驟2,提取用戶所評價(jià)商品的購物信息，通過多個(gè)小型的數(shù)據(jù)庫的采集用戶所評價(jià)商品的購物信息，將這些信息發(fā)送至一個(gè)大的數(shù)據(jù)庫中，提取用戶的購物行為特征，進(jìn)行判斷；
步驟3，處理，根據(jù)判斷結(jié)果，對用戶以及店鋪進(jìn)行處理。
在步驟1中，用戶的評價(jià)行為特征指用戶對于一件商品評價(jià)的字?jǐn)?shù)、用戶對于一件商品評價(jià)的內(nèi)容、用戶對于一件商品評價(jià)的次數(shù)、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的字?jǐn)?shù)、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的次數(shù)以及用戶對于一件商品評價(jià)的時(shí)間；
評價(jià)閥值指用戶對于一件商品評價(jià)的字?jǐn)?shù)、用戶對于一件商品評價(jià)的內(nèi)容、用戶對于一件商品評價(jià)內(nèi)容的關(guān)鍵詞衍生詞、用戶對于一件商品評價(jià)的次數(shù)、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的字?jǐn)?shù)、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的次數(shù)以及用戶對于一件商品評價(jià)的時(shí)間；
用戶的評價(jià)行為特征為A，評價(jià)閥值為B，采用所設(shè)置的評價(jià)閥值對用戶的評價(jià)行為特征進(jìn)行匹配，若A>=B，將該用戶的評價(jià)行為作為疑似刷單行為，并進(jìn)行下一步，若A<B,將該用戶的評價(jià)行為作為非刷單行為并刪除。
在步驟2中，判斷的依據(jù)為：
靜默轉(zhuǎn)化率，提取用戶購買商品所在類目的靜默轉(zhuǎn)化率，將這個(gè)商品所在類目的靜默轉(zhuǎn)化率與購物平臺的相應(yīng)類目綜合靜默轉(zhuǎn)化率進(jìn)行對比；
店鋪停留時(shí)間，提取用戶購買商品時(shí)在商品頁面停留的時(shí)間，根據(jù)商品的價(jià)值提取購物平臺中相等價(jià)值下商品頁面平均停留的時(shí)間，將用戶購買商品時(shí)在商品頁面停留的時(shí)間，與平均停留時(shí)間對比；
購物時(shí)間，提取用戶購買商品時(shí)的購物時(shí)間，同時(shí)提取此商品所在類目的集中購物時(shí)間，將用戶購買商品時(shí)的購物時(shí)間，與集中購物時(shí)間進(jìn)行對比；
收藏占比，提取用戶購買商品所在店鋪的收藏占比，將這個(gè)商品所在店鋪的收藏占比與購物平臺的相應(yīng)類目綜合收藏占比進(jìn)行對比；
評價(jià)內(nèi)容，根據(jù)用戶對于一件商品評價(jià)的字?jǐn)?shù)、對于一件商品評價(jià)的次數(shù)、在一個(gè)時(shí)間段對于一件商品評價(jià)的字?jǐn)?shù)、在一個(gè)時(shí)間段對于一件商品評價(jià)的次數(shù)以及一件商品評價(jià)的時(shí)間進(jìn)行判斷；
無線端占比，提取用戶購買商品所在店鋪的無線端占比，將這個(gè)商品所在店鋪的無線端占比與購物平臺的相應(yīng)類目綜合無線端占比進(jìn)行對比。
做為本發(fā)明的一個(gè)實(shí)施例：包括以下步驟：
步驟1，數(shù)據(jù)采集與分析，通過多個(gè)小型的數(shù)據(jù)庫實(shí)時(shí)的采集用戶的評價(jià)行為信息，集合一個(gè)用戶的所有評價(jià)行為信息，將一個(gè)用戶的所有評價(jià)行為信息發(fā)送至一個(gè)大的數(shù)據(jù)庫中，提取用戶的評價(jià)行為特征，設(shè)定一評價(jià)閥值，將用戶的評價(jià)行為特征與評價(jià)閥值進(jìn)行對比，對用戶的評價(jià)行為進(jìn)行劃分。
用戶的評價(jià)行為特征指用戶對于一件商品評價(jià)的字?jǐn)?shù)、用戶對于一件商品評價(jià)的內(nèi)容、用戶對于一件商品評價(jià)的次數(shù)、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的字?jǐn)?shù)、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的次數(shù)以及用戶對于一件商品評價(jià)的時(shí)間；
評價(jià)閥值指用戶對于一件商品評價(jià)的字?jǐn)?shù)、用戶對于一件商品評價(jià)的內(nèi)容、用戶對于一件商品評價(jià)內(nèi)容的關(guān)鍵詞衍生詞、用戶對于一件商品評價(jià)的次數(shù)、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的字?jǐn)?shù)、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的次數(shù)以及用戶對于一件商品評價(jià)的時(shí)間；
用戶的評價(jià)行為特征為A，評價(jià)閥值為B，即在用戶評價(jià)行為中，用戶對于一件商品評價(jià)的字?jǐn)?shù)為A、用戶對于一件商品評價(jià)的內(nèi)容為A、用戶對于一件商品評價(jià)的次數(shù)為A、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的字?jǐn)?shù)為A、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的次數(shù)為A以及用戶對于一件商品評價(jià)的時(shí)間為A；在評價(jià)閥值中，用戶對于一件商品評價(jià)的字?jǐn)?shù)為B、用戶對于一件商品評價(jià)的內(nèi)容為B、用戶對于一件商品評價(jià)的次數(shù)為B、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的字?jǐn)?shù)為B、用戶在一個(gè)時(shí)間段對于一件商品評價(jià)的次數(shù)為B以及用戶對于一件商品評價(jià)的時(shí)間為B；采用所設(shè)置的評價(jià)閥值對用戶的評價(jià)行為特征進(jìn)行匹配，若A>=B，將該用戶的評價(jià)行為作為疑似刷單行為，并進(jìn)行下一步，若A<B,將該用戶的評價(jià)行為作為非刷單行為并刪除。
步驟2,提取用戶所評價(jià)商品的購物信息，通過多個(gè)小型的數(shù)據(jù)庫的采集用戶所評價(jià)商品的購物信息，將這些信息發(fā)送至一個(gè)大的數(shù)據(jù)庫中，提取用戶的購物行為特征，進(jìn)行判斷；
判斷的依據(jù)為：
靜默轉(zhuǎn)化率，提取用戶購買商品所在類目的靜默轉(zhuǎn)化率，將這個(gè)商品所在類目的靜默轉(zhuǎn)化率與購物平臺的相應(yīng)類目綜合靜默轉(zhuǎn)化率進(jìn)行對比，一般標(biāo)準(zhǔn)化的產(chǎn)品、大眾商品、價(jià)值比較低的商品以及重復(fù)購買的商品，這些東西的靜默轉(zhuǎn)化率是比較高的。相反，不是標(biāo)準(zhǔn)化的產(chǎn)品的東西，價(jià)值比較高的東西靜默轉(zhuǎn)化率就比較低，根據(jù)靜默轉(zhuǎn)化率判斷用戶和店鋪是否存在刷單行為；
店鋪停留時(shí)間，提取用戶購買商品時(shí)在商品頁面停留的時(shí)間，根據(jù)商品的價(jià)值提取購物平臺中相等價(jià)值下商品頁面平均停留的時(shí)間，將用戶購買商品時(shí)在商品頁面停留的時(shí)間，與平均停留時(shí)間對比，一件商品的價(jià)值越高，購買商品時(shí)在商品頁面停留的時(shí)間便越長，如果用戶購買商品時(shí)在商品頁面停留的時(shí)間過短，便可能存在刷單行為；
購物時(shí)間，提取用戶購買商品時(shí)的購物時(shí)間，同時(shí)提取此商品所在類目的集中購物時(shí)間，將用戶購買商品時(shí)的購物時(shí)間，與集中購物時(shí)間進(jìn)行對比，每個(gè)商品所對應(yīng)的購物時(shí)間是不同的，有的商品在23點(diǎn)到0點(diǎn)是最多的，如果不再這個(gè)時(shí)間段，這個(gè)商品賣出了很多，便可能存在刷單行為；
收藏占比，提取用戶購買商品所在店鋪的收藏占比，將這個(gè)商品所在店鋪的收藏占比與購物平臺的相應(yīng)類目綜合收藏占比進(jìn)行對比；
評價(jià)內(nèi)容，根據(jù)用戶對于一件商品評價(jià)的字?jǐn)?shù)、對于一件商品評價(jià)的次數(shù)、在一個(gè)時(shí)間段對于一件商品評價(jià)的字?jǐn)?shù)、在一個(gè)時(shí)間段對于一件商品評價(jià)的次數(shù)以及一件商品評價(jià)的時(shí)間進(jìn)行判斷，如果用戶對于每一筆訂單都有評價(jià)，并且評價(jià)都很長，尤其是一些很簡單，價(jià)值很低的商品，便可能存在刷單行為；
無線端占比，提取用戶購買商品所在店鋪的無線端占比，將這個(gè)商品所在店鋪的無線端占比與購物平臺的相應(yīng)類目綜合無線端占比進(jìn)行對比，判斷是否存在刷單行為。
步驟3，處理，根據(jù)判斷結(jié)果和購物平臺的相關(guān)規(guī)則，對用戶以及店鋪進(jìn)行處理。
本發(fā)明通過大數(shù)據(jù)抓取用戶的評價(jià)，并對用戶的購物行為進(jìn)行判斷，有效的查出用戶和店鋪的刷單行為，從而建立運(yùn)行平穩(wěn)、安全高效的網(wǎng)絡(luò)購物運(yùn)行新機(jī)制，構(gòu)建以人為本、惠及全民的民生服務(wù)新體系，開啟大眾創(chuàng)業(yè)、萬眾創(chuàng)新的創(chuàng)新驅(qū)動新格局，培育高端智能、新興繁榮的產(chǎn)業(yè)發(fā)展新生態(tài)。
以上顯示和描述了本發(fā)明的基本原理和主要特征和本發(fā)明的優(yōu)點(diǎn),對于本領(lǐng)域技術(shù)人員而言，顯然本發(fā)明不限于上述示范性實(shí)施例的細(xì)節(jié)，而且在不背離本發(fā)明的精神或基本特征的情況下，能夠以其他的具體形式實(shí)現(xiàn)本發(fā)明。因此，無論從哪一點(diǎn)來看，均應(yīng)將實(shí)施例看作是示范性的，而且是非限制性的，本發(fā)明的范圍由所附權(quán)利要求而不是上述說明限定，因此旨在將落在權(quán)利要求的等同要件的含義和范圍內(nèi)的所有變化囊括在本發(fā)明內(nèi)。不應(yīng)將權(quán)利要求中的任何附圖標(biāo)記視為限制所涉及的權(quán)利要求。
此外，應(yīng)當(dāng)理解，雖然本說明書按照實(shí)施方式加以描述，但并非每個(gè)實(shí)施方式僅包含一個(gè)獨(dú)立的技術(shù)方案，說明書的這種敘述方式僅僅是為清楚起見，本領(lǐng)域技術(shù)人員應(yīng)當(dāng)將說明書作為一個(gè)整體，各實(shí)施例中的技術(shù)方案也可以經(jīng)適當(dāng)組合，形成本領(lǐng)域技術(shù)人員可以理解的其他實(shí)施方式。