亚洲成年人黄色一级片,日本香港三级亚洲三级,黄色成人小视频,国产青草视频,国产一区二区久久精品,91在线免费公开视频,成年轻人网站色直接看

一種不合規(guī)數(shù)據(jù)的修復方法、數(shù)據(jù)處理設備及存儲介質(zhì)與流程

文檔序號:11386335閱讀:296來源:國知局
本發(fā)明涉及電子
技術領域
:,尤其涉及一種不合規(guī)數(shù)據(jù)的修復方法、數(shù)據(jù)處理設備及存儲介質(zhì)。
背景技術
::在數(shù)據(jù)統(tǒng)計分析領域中需要大量的基礎數(shù)據(jù),目前,可以在移動終端中安裝sdk(softwaredevelopmentkit,軟件開發(fā)工具包),將sdk作為數(shù)據(jù)采集端來采集數(shù)據(jù),對sdk采集的數(shù)據(jù)進行數(shù)據(jù)處理之后,可以進行統(tǒng)計分析。在數(shù)據(jù)處理階段,需要對數(shù)據(jù)進行合法性校驗。合法性校驗是指判斷數(shù)據(jù)是否符合預設條件,例如:判斷數(shù)據(jù)采集端采集的數(shù)據(jù)是否為預設時間段內(nèi)產(chǎn)生的數(shù)據(jù);對于符合預設條件的數(shù)據(jù),認定為是合規(guī)數(shù)據(jù),對于不符合預設條件的數(shù)據(jù),認定為是不合規(guī)數(shù)據(jù)。對于校驗通過的合規(guī)數(shù)據(jù)可以進行后續(xù)的數(shù)據(jù)處理,對于校驗未通過的不合規(guī)數(shù)據(jù)則舍棄。然而,對于合法性校驗未通過的不合規(guī)數(shù)據(jù),有時只是因為數(shù)據(jù)采集端埋點錯誤導致的某一個或某幾個字段錯誤或者缺失造成的,而這些字段的值在當前場景下是可知的。在現(xiàn)有技術中,因埋點錯誤被認定為不合規(guī)數(shù)據(jù)的數(shù)據(jù)不能被回收利用,這部分不合規(guī)數(shù)據(jù)往往會為后續(xù)的數(shù)據(jù)處理帶來以下問題:(1)數(shù)據(jù)被大量廢棄。由于數(shù)據(jù)采集端通常是移動終端中安裝的sdk,某一版本的sdk一旦發(fā)布,即便發(fā)現(xiàn)埋點錯誤,也難以回收因埋點錯誤造成的不合規(guī)數(shù)據(jù),即使后續(xù)修復該埋點錯誤的問題,也無法挽救已經(jīng)發(fā)布的sdk已經(jīng)造成的問題。(2)持續(xù)影響統(tǒng)計結果。由于問題(1)的原因,將進一步導致數(shù)據(jù)統(tǒng)計的計算結果不準確,而這往往是持續(xù)性的,如果無法修復這部分因埋點錯誤造成的不合規(guī)數(shù)據(jù),將對計算結果產(chǎn)生巨大的消極影響。技術實現(xiàn)要素:本發(fā)明的主要目的在于提出一種不合規(guī)數(shù)據(jù)的修復方法、數(shù)據(jù)處理設備及存儲介質(zhì),旨在解決現(xiàn)有技術中,因埋點錯誤造成的不合規(guī)數(shù)據(jù)不能被有效回收利用的問題。為實現(xiàn)上述發(fā)明目的,本發(fā)明采用下述的技術方案:本發(fā)明提供了一種不合規(guī)數(shù)據(jù)的修復方法,所述方法包括:接收數(shù)據(jù)采集端采集的數(shù)據(jù);根據(jù)所述數(shù)據(jù)中的不合規(guī)數(shù)據(jù),判斷所述采集端是否埋點錯誤;如果埋點錯誤,則設置數(shù)據(jù)修復規(guī)則;根據(jù)所述數(shù)據(jù)修復規(guī)則,修復所述數(shù)據(jù)中的不合規(guī)數(shù)據(jù)??蛇x地,在所述接收數(shù)據(jù)采集端采集的數(shù)據(jù)之后,所述方法還包括:對數(shù)據(jù)采集端根據(jù)預設的埋點字段采集的數(shù)據(jù)進行合法性校驗;將合法性校驗未通過的數(shù)據(jù)作為不合規(guī)數(shù)據(jù)并存儲,將合法性校驗通過的數(shù)據(jù)作為合規(guī)數(shù)據(jù)并存儲??蛇x地,所述設置數(shù)據(jù)修復規(guī)則,包括:通過分析所述不合規(guī)數(shù)據(jù),確定待修復字段;所述待修復字段包括:所述埋點字段中的缺失字段和/或錯誤字段;根據(jù)所述待修復字段,設置數(shù)據(jù)修復規(guī)則??蛇x地,所述根據(jù)所述數(shù)據(jù)修復規(guī)則,修復所述數(shù)據(jù)中的不合規(guī)數(shù)據(jù),包括:根據(jù)所述數(shù)據(jù)修復規(guī)則,將埋點錯誤造成的不合規(guī)數(shù)據(jù)修復為合規(guī)數(shù)據(jù),并將修復出的合規(guī)數(shù)據(jù)與其他合規(guī)數(shù)據(jù)一同存儲??蛇x地,所述根據(jù)所述數(shù)據(jù)修復規(guī)則,修復所述數(shù)據(jù)中的不合規(guī)數(shù)據(jù),包括:對已經(jīng)存儲的不合規(guī)數(shù)據(jù)進行分類;獲取屬于預設分類的不合規(guī)數(shù)據(jù);根據(jù)所述數(shù)據(jù)修復規(guī)則,將埋點錯誤造成的不合規(guī)數(shù)據(jù)修復為合規(guī)數(shù)據(jù),并將修復出的合規(guī)數(shù)據(jù)與其他合規(guī)數(shù)據(jù)一同存儲。本發(fā)明提供了一種數(shù)據(jù)處理設備,所述數(shù)據(jù)處理設備包括處理器、存儲器;所述處理器用于執(zhí)行存儲器中存儲的不合規(guī)數(shù)據(jù)的修復程序,以實現(xiàn)以下步驟:接收數(shù)據(jù)采集端采集的數(shù)據(jù);根據(jù)所述數(shù)據(jù)中的不合規(guī)數(shù)據(jù),判斷所述采集端是否埋點錯誤;如果埋點錯誤,則設置數(shù)據(jù)修復規(guī)則;根據(jù)所述數(shù)據(jù)修復規(guī)則,修復所述數(shù)據(jù)中的不合規(guī)數(shù)據(jù)??蛇x地,在所述接收數(shù)據(jù)采集端采集的數(shù)據(jù)之后,所述處理器還用于執(zhí)行存儲器中存儲的不合規(guī)數(shù)據(jù)的修復程序,以實現(xiàn)以下步驟:對數(shù)據(jù)采集端根據(jù)預設的埋點字段采集的數(shù)據(jù)進行合法性校驗;將合法性校驗未通過的數(shù)據(jù)作為不合規(guī)數(shù)據(jù)并存儲,將合法性校驗通過的數(shù)據(jù)作為合規(guī)數(shù)據(jù)并存儲。可選地,所述處理器還用于執(zhí)行存儲器中存儲的不合規(guī)數(shù)據(jù)的修復程序,以實現(xiàn)以下步驟:通過分析所述不合規(guī)數(shù)據(jù),確定待修復字段;所述待修復字段包括:所述埋點字段中的缺失字段和/或錯誤字段;根據(jù)所述待修復字段,設置數(shù)據(jù)修復規(guī)則??蛇x地,所述處理器還用于執(zhí)行存儲器中存儲的不合規(guī)數(shù)據(jù)的修復程序,以實現(xiàn)以下步驟:根據(jù)所述數(shù)據(jù)修復規(guī)則,將埋點錯誤造成的不合規(guī)數(shù)據(jù)修復為合規(guī)數(shù)據(jù),并將修復出的合規(guī)數(shù)據(jù)與其他合規(guī)數(shù)據(jù)一同存儲。本發(fā)明提供了一種存儲介質(zhì),所述存儲介質(zhì)存儲有一個或者多個程序,所述一個或者多個程序可被一個或者多個處理器執(zhí)行,以實現(xiàn)上述的不合規(guī)數(shù)據(jù)的修復方法。本發(fā)明所提出的不合規(guī)數(shù)據(jù)的修復方法、數(shù)據(jù)處理設備及存儲介質(zhì)具有如下有益效果:本發(fā)明在移動終端中設置數(shù)據(jù)采集端,該數(shù)據(jù)采集端根據(jù)預設的埋點字段采集數(shù)據(jù);該數(shù)據(jù)采集端通過移動終端將采集的數(shù)據(jù)上報數(shù)據(jù)處理設備;數(shù)據(jù)處理設備對數(shù)據(jù)采集端采集的數(shù)據(jù)進行合法性校驗,篩選出數(shù)據(jù)中的不合規(guī)數(shù)據(jù)和合規(guī)數(shù)據(jù);如果發(fā)現(xiàn)不合規(guī)數(shù)據(jù)是因為數(shù)據(jù)采集端埋點錯誤導致的,則設置數(shù)據(jù)修復規(guī)則,利用數(shù)據(jù)修復規(guī)則對不合格數(shù)據(jù)進行自動修復,有效回收已經(jīng)得到修復的不合規(guī)數(shù)據(jù),將已經(jīng)得到修復的不合規(guī)數(shù)據(jù)作為合規(guī)數(shù)據(jù)進行存儲,作為數(shù)據(jù)處理和數(shù)據(jù)分析的基礎數(shù)據(jù),使不合規(guī)數(shù)據(jù)得到有效利用。附圖說明圖1為實現(xiàn)本發(fā)明各個實施例一可選的移動終端的硬件結構示意圖;圖2為如圖1所示的移動終端的無線通信系統(tǒng)示意圖;圖3為根據(jù)本發(fā)明第一實施例的不合規(guī)數(shù)據(jù)的修復方法的流程圖;圖4為根據(jù)本發(fā)明第二實施例的不合規(guī)數(shù)據(jù)的修復方法的具體流程圖;圖5為根據(jù)本發(fā)明第三實施例的數(shù)據(jù)處理設備的結構圖。本發(fā)明目的的實現(xiàn)、功能特點及優(yōu)點將結合實施例,參照附圖做進一步說明。具體實施方式應當理解,此處所描述的具體實施例僅僅用以解釋本發(fā)明,并不用于限定本發(fā)明。在后續(xù)的描述中,使用用于表示元件的諸如“模塊”、“部件”或“單元”的后綴僅為了有利于本發(fā)明的說明,其本身沒有特定的意義。因此,“模塊”、“部件”或“單元”可以混合地使用。終端可以以各種形式來實施。例如,本發(fā)明中描述的終端可以包括諸如手機、平板電腦、筆記本電腦、掌上電腦、個人數(shù)字助理(personaldigitalassistant,pda)、便捷式媒體播放器(portablemediaplayer,pmp)、導航裝置、可穿戴設備、智能手環(huán)、計步器等移動終端,以及諸如數(shù)字tv、臺式計算機等固定終端。后續(xù)描述中將以移動終端為例進行說明,本領域技術人員將理解的是,除了特別用于移動目的的元件之外,根據(jù)本發(fā)明的實施方式的構造也能夠應用于固定類型的終端。請參閱圖1,其為實現(xiàn)本發(fā)明各個實施例的一種移動終端的硬件結構示意圖,該移動終端100可以包括:rf(radiofrequency,射頻)單元101、wifi模塊102、音頻輸出單元103、a/v(音頻/視頻)輸入單元104、傳感器105、顯示單元106、用戶輸入單元107、接口單元108、存儲器109、處理器110、以及電源111等部件。本領域技術人員可以理解,圖1中示出的移動終端結構并不構成對移動終端的限定,移動終端可以包括比圖示更多或更少的部件,或者組合某些部件,或者不同的部件布置。下面結合圖1對移動終端的各個部件進行具體的介紹:射頻單元101可用于收發(fā)信息或通話過程中,信號的接收和發(fā)送,具體的,將基站的下行信息接收后,給處理器110處理;另外,將上行的數(shù)據(jù)發(fā)送給基站。通常,射頻單元101包括但不限于天線、至少一個放大器、收發(fā)信機、耦合器、低噪聲放大器、雙工器等。此外,射頻單元101還可以通過無線通信與網(wǎng)絡和其他設備通信。上述無線通信可以使用任一通信標準或協(xié)議,包括但不限于gsm(globalsystemofmobilecommunication,全球移動通訊系統(tǒng))、gprs(generalpacketradioservice,通用分組無線服務)、cdma2000(codedivisionmultipleaccess2000,碼分多址2000)、wcdma(widebandcodedivisionmultipleaccess,寬帶碼分多址)、td-scdma(timedivision-synchronouscodedivisionmultipleaccess,時分同步碼分多址)、fdd-lte(frequencydivisionduplexing-longtermevolution,頻分雙工長期演進)和tdd-lte(timedivisionduplexing-longtermevolution,分時雙工長期演進)等。wifi屬于短距離無線傳輸技術,移動終端通過wifi模塊102可以幫助用戶收發(fā)電子郵件、瀏覽網(wǎng)頁和訪問流式媒體等,它為用戶提供了無線的寬帶互聯(lián)網(wǎng)訪問。雖然圖1示出了wifi模塊102,但是可以理解的是,其并不屬于移動終端的必須構成,完全可以根據(jù)需要在不改變發(fā)明的本質(zhì)的范圍內(nèi)而省略。音頻輸出單元103可以在移動終端100處于呼叫信號接收模式、通話模式、記錄模式、語音識別模式、廣播接收模式等等模式下時,將射頻單元101或wifi模塊102接收的或者在存儲器109中存儲的音頻數(shù)據(jù)轉(zhuǎn)換成音頻信號并且輸出為聲音。而且,音頻輸出單元103還可以提供與移動終端100執(zhí)行的特定功能相關的音頻輸出(例如,呼叫信號接收聲音、消息接收聲音等等)。音頻輸出單元103可以包括揚聲器、蜂鳴器等等。a/v輸入單元104用于接收音頻或視頻信號。a/v輸入單元104可以包括圖形處理器(graphicsprocessingunit,gpu)1041和麥克風1042,圖形處理器1041對在視頻捕獲模式或圖像捕獲模式中由圖像捕獲裝置(如攝像頭)獲得的靜態(tài)圖片或視頻的圖像數(shù)據(jù)進行處理。處理后的圖像幀可以顯示在顯示單元106上。經(jīng)圖形處理器1041處理后的圖像幀可以存儲在存儲器109(或其它存儲介質(zhì))中或者經(jīng)由射頻單元101或wifi模塊102進行發(fā)送。麥克風1042可以在電話通話模式、記錄模式、語音識別模式等等運行模式中經(jīng)由麥克風1042接收聲音(音頻數(shù)據(jù)),并且能夠?qū)⑦@樣的聲音處理為音頻數(shù)據(jù)。處理后的音頻(語音)數(shù)據(jù)可以在電話通話模式的情況下轉(zhuǎn)換為可經(jīng)由射頻單元101發(fā)送到移動通信基站的格式輸出。麥克風1042可以實施各種類型的噪聲消除(或抑制)算法以消除(或抑制)在接收和發(fā)送音頻信號的過程中產(chǎn)生的噪聲或者干擾。移動終端100還包括至少一種傳感器105,比如光傳感器、運動傳感器以及其他傳感器。具體地,光傳感器包括環(huán)境光傳感器及接近傳感器,其中,環(huán)境光傳感器可根據(jù)環(huán)境光線的明暗來調(diào)節(jié)顯示面板1061的亮度,接近傳感器可在移動終端100移動到耳邊時,關閉顯示面板1061和/或背光。作為運動傳感器的一種,加速計傳感器可檢測各個方向上(一般為三軸)加速度的大小,靜止時可檢測出重力的大小及方向,可用于識別手機姿態(tài)的應用(比如橫豎屏切換、相關游戲、磁力計姿態(tài)校準)、振動識別相關功能(比如計步器、敲擊)等;至于手機還可配置的指紋傳感器、壓力傳感器、虹膜傳感器、分子傳感器、陀螺儀、氣壓計、濕度計、溫度計、紅外線傳感器等其他傳感器,在此不再贅述。顯示單元106用于顯示由用戶輸入的信息或提供給用戶的信息。顯示單元106可包括顯示面板1061,可以采用液晶顯示器(liquidcrystaldisplay,lcd)、有機發(fā)光二極管(organiclight-emittingdiode,oled)等形式來配置顯示面板1061。用戶輸入單元107可用于接收輸入的數(shù)字或字符信息,以及產(chǎn)生與移動終端的用戶設置以及功能控制有關的鍵信號輸入。具體地,用戶輸入單元107可包括觸控面板1071以及其他輸入設備1072。觸控面板1071,也稱為觸摸屏,可收集用戶在其上或附近的觸摸操作(比如用戶使用手指、觸筆等任何適合的物體或附件在觸控面板1071上或在觸控面板1071附近的操作),并根據(jù)預先設定的程式驅(qū)動相應的連接裝置。觸控面板1071可包括觸摸檢測裝置和觸摸控制器兩個部分。其中,觸摸檢測裝置檢測用戶的觸摸方位,并檢測觸摸操作帶來的信號,將信號傳送給觸摸控制器;觸摸控制器從觸摸檢測裝置上接收觸摸信息,并將它轉(zhuǎn)換成觸點坐標,再送給處理器110,并能接收處理器110發(fā)來的命令并加以執(zhí)行。此外,可以采用電阻式、電容式、紅外線以及表面聲波等多種類型實現(xiàn)觸控面板1071。除了觸控面板1071,用戶輸入單元107還可以包括其他輸入設備1072。具體地,其他輸入設備1072可以包括但不限于物理鍵盤、功能鍵(比如音量控制按鍵、開關按鍵等)、軌跡球、鼠標、操作桿等中的一種或多種,具體此處不做限定。進一步的,觸控面板1071可覆蓋顯示面板1061,當觸控面板1071檢測到在其上或附近的觸摸操作后,傳送給處理器110以確定觸摸事件的類型,隨后處理器110根據(jù)觸摸事件的類型在顯示面板1061上提供相應的視覺輸出。雖然在圖1中,觸控面板1071與顯示面板1061是作為兩個獨立的部件來實現(xiàn)移動終端的輸入和輸出功能,但是在某些實施例中,可以將觸控面板1071與顯示面板1061集成而實現(xiàn)移動終端的輸入和輸出功能,具體此處不做限定。接口單元108用作至少一個外部裝置與移動終端100連接可以通過的接口。例如,外部裝置可以包括有線或無線頭戴式耳機端口、外部電源(或電池充電器)端口、有線或無線數(shù)據(jù)端口、存儲卡端口、用于連接具有識別模塊的裝置的端口、音頻輸入/輸出(i/o)端口、視頻i/o端口、耳機端口等等。接口單元108可以用于接收來自外部裝置的輸入(例如,數(shù)據(jù)信息、電力等等)并且將接收到的輸入傳輸?shù)揭苿咏K端100內(nèi)的一個或多個元件或者可以用于在移動終端100和外部裝置之間傳輸數(shù)據(jù)。存儲器109可用于存儲軟件程序以及各種數(shù)據(jù)。存儲器109可主要包括存儲程序區(qū)和存儲數(shù)據(jù)區(qū),其中,存儲程序區(qū)可存儲操作系統(tǒng)、至少一個功能所需的應用程序(比如聲音播放功能、圖像播放功能等)等;存儲數(shù)據(jù)區(qū)可存儲根據(jù)手機的使用所創(chuàng)建的數(shù)據(jù)(比如音頻數(shù)據(jù)、電話本等)等。此外,存儲器109可以包括高速隨機存取存儲器,還可以包括非易失性存儲器,例如至少一個磁盤存儲器件、閃存器件、或其他易失性固態(tài)存儲器件。處理器110是移動終端的控制中心,利用各種接口和線路連接整個移動終端的各個部分,通過運行或執(zhí)行存儲在存儲器109內(nèi)的軟件程序和/或模塊,以及調(diào)用存儲在存儲器109內(nèi)的數(shù)據(jù),執(zhí)行移動終端的各種功能和處理數(shù)據(jù),從而對移動終端進行整體監(jiān)控。處理器110可包括一個或多個處理單元;優(yōu)選的,處理器110可集成應用處理器和調(diào)制解調(diào)處理器,其中,應用處理器主要處理操作系統(tǒng)、用戶界面和應用程序等,調(diào)制解調(diào)處理器主要處理無線通信??梢岳斫獾氖?,上述調(diào)制解調(diào)處理器也可以不集成到處理器110中。移動終端100還可以包括給各個部件供電的電源111(比如電池),優(yōu)選的,電源111可以通過電源管理系統(tǒng)與處理器110邏輯相連,從而通過電源管理系統(tǒng)實現(xiàn)管理充電、放電、以及功耗管理等功能。盡管圖1未示出,移動終端100還可以包括藍牙模塊等,在此不再贅述。為了便于理解本發(fā)明實施例,下面對本發(fā)明的移動終端所基于的通信網(wǎng)絡系統(tǒng)進行描述。請參閱圖2,圖2為本發(fā)明實施例提供的一種通信網(wǎng)絡系統(tǒng)架構圖,該通信網(wǎng)絡系統(tǒng)為通用移動通信技術的lte系統(tǒng),該lte系統(tǒng)包括依次通訊連接的ue(userequipment,用戶設備)201,e-utran(evolvedumtsterrestrialradioaccessnetwork,演進式umts陸地無線接入網(wǎng))202,epc(evolvedpacketcore,演進式分組核心網(wǎng))203和運營商的ip業(yè)務204。具體地,ue201可以是上述終端100,此處不再贅述。e-utran202包括enodeb2021和其它enodeb2022等。其中,enodeb2021可以通過回程(backhaul)(例如x2接口)與其它enodeb2022連接,enodeb2021連接到epc203,enodeb2021可以提供ue201到epc203的接入。epc203可以包括mme(mobilitymanagemententity,移動性管理實體)2031,hss(homesubscriberserver,歸屬用戶服務器)2032,其它mme2033,sgw(servinggateway,服務網(wǎng)關)2034,pgw(pdngateway,分組數(shù)據(jù)網(wǎng)絡網(wǎng)關)2035和pcrf(policyandchargingrulesfunction,政策和資費功能實體)2036等。其中,mme2031是處理ue201和epc203之間信令的控制節(jié)點,提供承載和連接管理。hss2032用于提供一些寄存器來管理諸如歸屬位置寄存器(圖中未示)之類的功能,并且保存有一些有關服務特征、數(shù)據(jù)速率等用戶專用的信息。所有用戶數(shù)據(jù)都可以通過sgw2034進行發(fā)送,pgw2035可以提供ue201的ip地址分配以及其它功能,pcrf2036是業(yè)務數(shù)據(jù)流和ip承載資源的策略與計費控制策略決策點,它為策略與計費執(zhí)行功能單元(圖中未示)選擇及提供可用的策略和計費控制決策。ip業(yè)務204可以包括因特網(wǎng)、內(nèi)聯(lián)網(wǎng)、ims(ipmultimediasubsystem,ip多媒體子系統(tǒng))或其它ip業(yè)務等。雖然上述以lte系統(tǒng)為例進行了介紹,但本領域技術人員應當知曉,本發(fā)明不僅僅適用于lte系統(tǒng),也可以適用于其他無線通信系統(tǒng),例如gsm、cdma2000、wcdma、td-scdma以及未來新的網(wǎng)絡系統(tǒng)等,此處不做限定。基于上述移動終端硬件結構以及通信網(wǎng)絡系統(tǒng),提出本發(fā)明的不合規(guī)數(shù)據(jù)的修復方法、數(shù)據(jù)處理設備及存儲介質(zhì)。本發(fā)明的主要思想在于,在移動終端中設置數(shù)據(jù)采集端,該數(shù)據(jù)采集端根據(jù)預設的埋點字段采集數(shù)據(jù);該數(shù)據(jù)采集端通過移動終端將采集的數(shù)據(jù)上報數(shù)據(jù)處理設備;數(shù)據(jù)處理設備對數(shù)據(jù)采集端采集的數(shù)據(jù)進行合法性校驗,篩選出數(shù)據(jù)中的不合規(guī)數(shù)據(jù)和合規(guī)數(shù)據(jù),對合規(guī)數(shù)據(jù)進行正常的存儲、計算流程處理以及數(shù)據(jù)分析,將不合規(guī)數(shù)據(jù)存儲于不合規(guī)數(shù)據(jù)表中;如果發(fā)現(xiàn)不合格數(shù)據(jù)表中存儲的不合規(guī)數(shù)據(jù)是因為數(shù)據(jù)采集端埋點錯誤導致的,則設置數(shù)據(jù)修復規(guī)則,利用數(shù)據(jù)修復規(guī)則對不合格數(shù)據(jù)表中的不合規(guī)數(shù)據(jù)進行自動修復,有效回收得到修復的不合規(guī)數(shù)據(jù),將得到修復的不合規(guī)數(shù)據(jù)可以作為合規(guī)數(shù)據(jù)使用,作為數(shù)據(jù)處理和數(shù)據(jù)分析的基礎數(shù)據(jù),使不合規(guī)數(shù)據(jù)得到有效利用。以下結合附圖以及實施例,對本發(fā)明進行進一步詳細說明。本領域技術人員應當理解的是,此處所描述的具體實施例僅僅用以解釋本發(fā)明,并不限定本發(fā)明。實施例一本發(fā)明實施例一,提供一種不合規(guī)數(shù)據(jù)的修復方法。本實施例的執(zhí)行主體為數(shù)據(jù)處理設備,數(shù)據(jù)處理設備例如是服務器。圖3為根據(jù)本發(fā)明第一實施例的不合規(guī)數(shù)據(jù)的修復方法的流程圖。步驟s310,接收數(shù)據(jù)采集端采集的數(shù)據(jù)。在本實施例中,數(shù)據(jù)采集端可以是設置在移動終端中的sdk。sdk可以嵌入到移動終端的產(chǎn)品中。sdk埋點可以追蹤和記錄移動終端中產(chǎn)生的數(shù)據(jù),如追蹤和記錄移動終端中某產(chǎn)品的用戶行為數(shù)據(jù)。為了采集豐富的基礎數(shù)據(jù)以便用于數(shù)據(jù)處理和數(shù)據(jù)分析,可以設置多個埋點字段,sdk在移動終端側(cè)可以根據(jù)設置的埋點字段來采集包含埋點字段的數(shù)據(jù)并上報。例如:希望獲得瀏覽相關的數(shù)據(jù),可以將sdk嵌入到移動終端的瀏覽器中,埋點字段為瀏覽器標識、瀏覽器版本號、登陸次數(shù)、訪問時長、激活率、瀏覽路徑、頁面停留時間等。在本實施例中,可以接收數(shù)據(jù)采集端批量采集的數(shù)據(jù)。在本實施例中,對數(shù)據(jù)采集端根據(jù)預設的埋點字段采集的數(shù)據(jù)進行合法性校驗;將合法性校驗未通過的數(shù)據(jù)作為不合規(guī)數(shù)據(jù)并存儲,將合法性校驗通過的數(shù)據(jù)作為合規(guī)數(shù)據(jù)并存儲。進一步地,可以根據(jù)預設的合規(guī)條件對數(shù)據(jù)采集端采集的數(shù)據(jù)進行合法性校驗;合規(guī)條件例如是:數(shù)據(jù)產(chǎn)生的時間、數(shù)據(jù)的來源、數(shù)據(jù)的格式等。步驟s320,根據(jù)所述數(shù)據(jù)中的不合規(guī)數(shù)據(jù),判斷所述數(shù)據(jù)采集端是否埋點錯誤;如果是,則執(zhí)行步驟s330;如果否,則結束流程。在本實施例中,埋點錯誤是指:在設置的埋點字段中缺失某一個或多個字段,或者埋點字段設置錯誤。其中,缺失的埋點字段可以被稱作缺失字段,設置錯誤的埋點字段可以被稱作錯誤字段。例如:在進行頁面埋點時,沒有將瀏覽器版本號設置為埋點字段,而事實上應當將瀏覽器版本號設置為埋點字段,這樣sdk采集的數(shù)據(jù)中將缺失瀏覽器版本號這一數(shù)據(jù),這時可以判定sdk埋點錯誤,如果在對數(shù)據(jù)進行合法性校驗時,校驗瀏覽器版本號是否正確時,將因數(shù)據(jù)缺失瀏覽器版本號而被認為是不合規(guī)數(shù)據(jù)。又如:在進行頁面埋點時,將時間戳設置為埋點字段,這樣sdk采集的數(shù)據(jù)中包含時間戳這一字段,sdk采集的時間戳為10位的時間戳,而數(shù)據(jù)處理設備在進行合法性校驗時,僅將精確到毫秒的13位的時間戳作為合規(guī)數(shù)據(jù),而10位的時間戳則作為不合規(guī)數(shù)據(jù),這時采集的10位的時間戳認為是埋點錯誤造成的不合規(guī)數(shù)據(jù)。步驟s330,設置數(shù)據(jù)修復規(guī)則。在本實施例中,數(shù)據(jù)修復規(guī)則用于修復不合規(guī)數(shù)據(jù)中的缺失字段和/或錯誤字段,使修復后的不合規(guī)數(shù)據(jù)通過合法性校驗,成為合規(guī)數(shù)據(jù)。在本實施例中,可以通過分析所述不合規(guī)數(shù)據(jù),確定待修復字段;所述待修復字段包括:所述埋點字段中的缺失字段和/或錯誤字段;根據(jù)所述待修復字段,設置數(shù)據(jù)修復規(guī)則。進一步地,在確定埋點字段中的缺失字段和錯誤字段之后,可以通過正則表達式來設置數(shù)據(jù)修復規(guī)則。步驟s340,根據(jù)所述數(shù)據(jù)修復規(guī)則,修復所述數(shù)據(jù)中的不合規(guī)數(shù)據(jù)。根據(jù)所述數(shù)據(jù)修復規(guī)則,將埋點錯誤造成的不合規(guī)數(shù)據(jù)修復為合規(guī)數(shù)據(jù),并將修復出的合規(guī)數(shù)據(jù)與其他合規(guī)數(shù)據(jù)一同存儲。進一步地,根據(jù)所述數(shù)據(jù)修復規(guī)則,對埋點錯誤造成的不合規(guī)數(shù)據(jù)進行修復,之后將對得到修復的不合規(guī)數(shù)據(jù)重新進行合法性校驗,確定得到修復的不合規(guī)數(shù)據(jù)是否通過合法性校驗,如果通過合法性校驗,則認為是合規(guī)數(shù)據(jù)(修復出的合規(guī)數(shù)據(jù)),如果未通過合法性校驗,則依舊認為是不合規(guī)數(shù)據(jù)。例如:在進行頁面埋點時,沒有將瀏覽器版本號設置為埋點字段,事實上瀏覽器版本號是已知的,如瀏覽器版本號為v1.0,這樣可以獲取不合規(guī)數(shù)據(jù),在每個不合規(guī)數(shù)據(jù)的末尾或者開頭添加一個字段,記錄瀏覽器版本號v1.0,這樣不合規(guī)數(shù)據(jù)就可以通過合法性校驗,成為合規(guī)數(shù)據(jù)。又如:在進行頁面埋點時,將時間戳設置為埋點字段,sdk采集的時間戳為10位的時間戳,而數(shù)據(jù)處理設備在進行合法性校驗時,僅將精確到毫秒的13位的時間戳作為合規(guī)數(shù)據(jù),這樣可以獲取不合規(guī)數(shù)據(jù),篩選出包含時間戳的數(shù)據(jù),并在只有10位時間戳末尾增加3位0,使10位的時間戳變?yōu)?3位的時間戳,使不合規(guī)數(shù)據(jù)通過合法性校驗,成為合規(guī)數(shù)據(jù)。數(shù)據(jù)采集關注采集的數(shù)據(jù)是否豐富,采集的數(shù)據(jù)是否準確,因為這些因素都直接影響數(shù)據(jù)處理、數(shù)據(jù)分析的準確性。本實施例在對數(shù)據(jù)采集端采集的數(shù)據(jù)進行合法性校驗之后,對不合規(guī)數(shù)據(jù)進行分析,判斷位于移動終端的數(shù)據(jù)采集端是否發(fā)生了埋點錯誤的問題,如果發(fā)生了埋點錯誤的問題,分析出錯誤所在并設置數(shù)據(jù)修復規(guī)則,利用該數(shù)據(jù)修復規(guī)則自動地、批量地修復不合規(guī)數(shù)據(jù),及時有效地回收利用因埋點錯誤造成的不合規(guī)數(shù)據(jù),糾正埋點錯誤引發(fā)的一系列問題,增加合規(guī)數(shù)據(jù)的數(shù)據(jù)量,使基礎數(shù)據(jù)更加豐富,回收不合規(guī)數(shù)據(jù),提高數(shù)據(jù)采集的準確性,提升最終數(shù)據(jù)分析的精準度。實施例二下面給出一種較為具體的實施例,來進一步地描述本發(fā)明的不合規(guī)數(shù)據(jù)的修復方法。本實施例的執(zhí)行主體為數(shù)據(jù)處理設備。如圖4所示,為根據(jù)本發(fā)明第二實施例的不合規(guī)數(shù)據(jù)的修復方法的具體流程圖。步驟s410,接收數(shù)據(jù)采集端根據(jù)預設的埋點字段采集的數(shù)據(jù)。數(shù)據(jù)采集端在移動終端側(cè)進行埋點,以便采集移動終端側(cè)的數(shù)據(jù)。埋點字段可以根據(jù)數(shù)據(jù)采集的需求進行設置。如果需要采集與訂單相關的數(shù)據(jù),那么埋點字段例如是:商品名稱、價格、品類、店鋪等信息。如果需要采集與流量監(jiān)測相關數(shù)據(jù),那么埋點字段例如是:訪問路徑、頁面停留時長、跳轉(zhuǎn)率、轉(zhuǎn)化率等等。步驟s420,對數(shù)據(jù)采集端采集的數(shù)據(jù)進行合法性校驗。在本實施例中,對數(shù)據(jù)采集端采集的批量數(shù)據(jù)進行合法性校驗。具體而言,對數(shù)據(jù)采集端采集的批量數(shù)據(jù)通過校驗層進行合法性校驗,以便篩選出批量數(shù)據(jù)中的合法性校驗通過的數(shù)據(jù)(合規(guī)數(shù)據(jù))和合法性校驗未通過的數(shù)據(jù)(不合規(guī)數(shù)據(jù))。其中,合法性校驗可以校驗數(shù)據(jù)的采集時間、數(shù)據(jù)的格式、數(shù)據(jù)的來源、數(shù)據(jù)的版本號等是否符合預設的合規(guī)條件。例如:合規(guī)條件為數(shù)據(jù)采集端當天采集的數(shù)據(jù),數(shù)據(jù)的來源為使用瀏覽器產(chǎn)生的數(shù)據(jù),數(shù)據(jù)的格式為時間戳為精確到毫秒的13位時間戳,數(shù)據(jù)的版本號為v1.0;符合所述合規(guī)條件的數(shù)據(jù)校驗通過,認為是合規(guī)數(shù)據(jù),不符合所述合規(guī)條件的數(shù)據(jù)校驗不通過,認為是不合規(guī)數(shù)據(jù)。步驟s430,將合法性校驗未通過的數(shù)據(jù)作為不合規(guī)數(shù)據(jù)并存儲,將合法性校驗通過的數(shù)據(jù)作為合規(guī)數(shù)據(jù)并存儲。在本實施例中,在數(shù)據(jù)采集端采集的批量數(shù)據(jù)中,通過合法性校驗的方式,過濾出不合規(guī)數(shù)據(jù)和合規(guī)數(shù)據(jù)并分開存儲。在本實施例中,可以將合規(guī)數(shù)據(jù)作為數(shù)據(jù)處理和數(shù)據(jù)分析的基礎數(shù)據(jù),進行正常的存儲、處理和分析流程??梢灾v合規(guī)數(shù)據(jù)直接傳輸?shù)教幚韺舆M行正常的數(shù)據(jù)處理操作。在本實施例中,可以對合法性校驗未通過的不合規(guī)數(shù)據(jù)進行集中化存儲。進一步地,可以將預設時間段內(nèi)的不合規(guī)數(shù)據(jù)存儲到不合規(guī)數(shù)據(jù)表中,該不合規(guī)數(shù)據(jù)表可以使trash表。例如:可以將數(shù)據(jù)采集端每天采集的不合規(guī)數(shù)據(jù)分別存儲到不同的trash(垃圾)表中,這樣每天對應一個trash表,可以方便對預設時間段內(nèi)的不合規(guī)數(shù)據(jù)進行批量處理。步驟s440,在存在埋點錯誤的情況下,通過分析所述不合規(guī)數(shù)據(jù),確定待修復字段;所述待修復字段包括:所述埋點字段中的缺失字段和/或錯誤字段??梢詫㈩A設時間段內(nèi)的已經(jīng)存儲的不合規(guī)數(shù)據(jù)提供給管理人員,由管理人員負責對不合規(guī)數(shù)據(jù)進行分析,判斷在移動終端側(cè)的數(shù)據(jù)采集端是否存在埋點錯誤的問題,如果該數(shù)據(jù)采集端存在埋點錯誤的問題,則確定埋點字段中的缺失字段和/或錯誤字段。進一步地,為了管理人員可以更加直觀的看到不合規(guī)數(shù)據(jù),可以將存儲有不合規(guī)數(shù)據(jù)的trash表提供給管理人員,供管理人員進行分析。管理人員可以在trash表中進行內(nèi)容篩選,當其中出現(xiàn)因數(shù)據(jù)采集端埋點錯誤導致的數(shù)據(jù)異常時,可以根據(jù)異常數(shù)據(jù)來確定待修復字段。例如:在trash表中出現(xiàn)了格式為10位的時間戳,而合法性校驗只認為13位的時間戳才是合規(guī)數(shù)據(jù),這時可以認為trash表中出現(xiàn)的10位的時間戳為待修復字段(錯誤字段)。又如:在trash表中出現(xiàn)的不合規(guī)數(shù)據(jù)都沒有版本號,這意味著在埋點時,版本號沒有被設置成埋點字段,然而trash表中的這些不合規(guī)數(shù)據(jù)的版本號是已知的,那么這些不合規(guī)數(shù)據(jù)的版本號為待修復字段(缺失字段)。步驟s450,根據(jù)所述待修復字段,設置數(shù)據(jù)修復規(guī)則。待管理人員根據(jù)對不合規(guī)數(shù)據(jù)的分析,確定在移動終端側(cè)的數(shù)據(jù)采集端埋點錯誤的原因,根據(jù)在移動終端側(cè)的數(shù)據(jù)采集端埋點錯誤的原因,設置用于修復因該埋點錯誤被判定為不合規(guī)數(shù)據(jù)的數(shù)據(jù)修復規(guī)則。在具體應用時,該數(shù)據(jù)修復規(guī)則可以采用正則表達式的方式進行設置。這樣,當不合規(guī)數(shù)據(jù)出現(xiàn)某個重要字段的缺失,而該缺失字段又是管理人員所知道的,就可以通過正則表達式找出所有符合條件的不合規(guī)數(shù)據(jù),在對這些不合規(guī)數(shù)據(jù)進行修復,如:在不合規(guī)數(shù)據(jù)中增加該缺失字段,使這些不合規(guī)數(shù)據(jù)得到修復。例如:針對trash表中出現(xiàn)的格式為10位的時間戳,數(shù)據(jù)修復規(guī)則可以設置為在每個10位的時間戳的某位補充3個0,使10位的時間戳變成13位的時間戳,這樣可以使修復后的不合規(guī)數(shù)據(jù)通過合法性校驗。又如:針對在trash表中出現(xiàn)的沒有版本號不合規(guī)數(shù)據(jù),在不合規(guī)數(shù)據(jù)的版本號已知的情況下,數(shù)據(jù)修復規(guī)則可以設置為在不合規(guī)數(shù)據(jù)中添加版本號,這樣可以使修復后的不合規(guī)數(shù)據(jù)通過合法性校驗。步驟s460,根據(jù)所述數(shù)據(jù)修復規(guī)則,將埋點錯誤造成的不合規(guī)數(shù)據(jù)修復為合規(guī)數(shù)據(jù),并將修復出的合規(guī)數(shù)據(jù)與其他合規(guī)數(shù)據(jù)一同存儲。獲取預設時間段內(nèi)的trash表,該trash表中存儲有批量的不合規(guī)數(shù)據(jù);根據(jù)所述數(shù)據(jù)修復規(guī)則,對trash表中由于埋點錯誤造成的不合規(guī)數(shù)據(jù)批量修復為合規(guī)數(shù)據(jù),并將修復出的合規(guī)數(shù)據(jù)與其他合規(guī)數(shù)據(jù)一同存儲。為了便于后續(xù)處理,可以對不合規(guī)數(shù)據(jù)進行分類處理。例如:對已經(jīng)存儲的不合規(guī)數(shù)據(jù)進行分類;獲取屬于預設分類的不合規(guī)數(shù)據(jù);根據(jù)所述數(shù)據(jù)修復規(guī)則,將埋點錯誤造成的不合規(guī)數(shù)據(jù)修復為合規(guī)數(shù)據(jù),并將修復出的合規(guī)數(shù)據(jù)與其他合規(guī)數(shù)據(jù)一同存儲。進一步地,將每天的trash表中不合規(guī)數(shù)據(jù)按一定條件進行分類,并分別生成對應的匯總報表;將匯總報表發(fā)送給對應的管理人員;對應的管理人員對匯總報表中的內(nèi)容進行篩選,當其中出現(xiàn)因數(shù)據(jù)采集端埋點錯誤導致的數(shù)據(jù)異常時,管理人員可以設置數(shù)據(jù)修復規(guī)則。例如:按照瀏覽器標識、瀏覽器版本號、數(shù)據(jù)的來源進行分類,分別形成相同瀏覽器標識的不合規(guī)數(shù)據(jù)的匯總報表,相同瀏覽器版本號的不合規(guī)數(shù)據(jù)的匯總報表,相同數(shù)據(jù)來源的不合規(guī)數(shù)據(jù)的匯總報表,不同的管理人員分別對不同的匯總報表進行分析,如果發(fā)現(xiàn)埋點錯誤導致的數(shù)據(jù)異常,則根據(jù)異常數(shù)據(jù)的特征,分別設置數(shù)據(jù)修復規(guī)則,以便修復不同匯總報表中的不合規(guī)數(shù)據(jù)。在本實施例中,數(shù)據(jù)修復規(guī)則可以進行持久化存儲,當有不合規(guī)數(shù)據(jù)被寫入trash表后,數(shù)據(jù)處理設備就執(zhí)行數(shù)據(jù)修復程序,嘗試匹配所有數(shù)據(jù)修復規(guī)則,以達到自動修復不合規(guī)數(shù)據(jù)的目的,得到修復的不合規(guī)數(shù)據(jù)可以直接被傳輸?shù)綌?shù)據(jù)處理層,進行正常數(shù)據(jù)的處理操作,也可以先和合規(guī)數(shù)據(jù)一同存儲,然后與合規(guī)數(shù)據(jù)一同被傳輸?shù)綌?shù)據(jù)處理層進行正常的數(shù)據(jù)處理操作。本實施例可以應用在數(shù)據(jù)采集領域中,將用于數(shù)據(jù)采集的sdk集成在移動終端的應用程序中,由于埋點錯誤導致某些批次的數(shù)據(jù)出現(xiàn)異常時,這部分不合規(guī)數(shù)據(jù)將被寫入trash表,如格式錯誤,type字段是數(shù)據(jù)統(tǒng)計的必須埋點字段,而某個版本的sdk因為埋點問題缺失了該字段,導致發(fā)布出去的該版本的sdk采集的數(shù)據(jù)都缺失該字段,此時就可以通過本實施例的方法在不合規(guī)數(shù)據(jù)中補充該缺失字段。本實施例通過分析埋點錯誤的原因所在,設置數(shù)據(jù)修復規(guī)則,利用該數(shù)據(jù)修復規(guī)則自動地、批量地修復不合規(guī)數(shù)據(jù),及時有效地回收利用因埋點錯誤造成的不合規(guī)數(shù)據(jù),糾正埋點錯誤引發(fā)的一系列問題,增加合規(guī)數(shù)據(jù)的數(shù)據(jù)量,使基礎數(shù)據(jù)更加豐富,回收不合規(guī)數(shù)據(jù),提高數(shù)據(jù)采集的準確性,提升最終數(shù)據(jù)分析的精準度。實施例三本發(fā)明提供了一種數(shù)據(jù)處理設備。如圖5所示,為根據(jù)本發(fā)明第三實施例的數(shù)據(jù)處理設備的結構圖。所述數(shù)據(jù)處理設備500可以是與移動終端連接的服務器。所述數(shù)據(jù)處理設備500包括處理器510、存儲器520;所述處理器510用于執(zhí)行存儲器520中存儲的不合規(guī)數(shù)據(jù)的修復程序,以實現(xiàn)以下步驟:接收數(shù)據(jù)采集端采集的數(shù)據(jù);根據(jù)所述數(shù)據(jù)中的不合規(guī)數(shù)據(jù),判斷所述采集端是否埋點錯誤;如果埋點錯誤,則設置數(shù)據(jù)修復規(guī)則;根據(jù)所述數(shù)據(jù)修復規(guī)則,修復所述數(shù)據(jù)中的不合規(guī)數(shù)據(jù)??蛇x地,在所述接收數(shù)據(jù)采集端采集的數(shù)據(jù)之后,所述處理器510還用于執(zhí)行存儲器520中存儲的不合規(guī)數(shù)據(jù)的修復程序,以實現(xiàn)以下步驟:對數(shù)據(jù)采集端根據(jù)預設的埋點字段采集的數(shù)據(jù)進行合法性校驗;將合法性校驗未通過的數(shù)據(jù)作為不合規(guī)數(shù)據(jù)并存儲,將合法性校驗通過的數(shù)據(jù)作為合規(guī)數(shù)據(jù)并存儲??蛇x地,所述處理器510還用于執(zhí)行存儲器520中存儲的不合規(guī)數(shù)據(jù)的修復程序,以實現(xiàn)以下步驟:通過分析所述不合規(guī)數(shù)據(jù),確定待修復字段;所述待修復字段包括:所述埋點字段中的缺失字段和/或錯誤字段;根據(jù)所述待修復字段,設置數(shù)據(jù)修復規(guī)則??蛇x地,所述處理器510還用于執(zhí)行存儲器520中存儲的不合規(guī)數(shù)據(jù)的修復程序,以實現(xiàn)以下步驟:根據(jù)所述數(shù)據(jù)修復規(guī)則,將埋點錯誤造成的不合規(guī)數(shù)據(jù)修復為合規(guī)數(shù)據(jù),并將修復出的合規(guī)數(shù)據(jù)與其他合規(guī)數(shù)據(jù)一同存儲??蛇x地,所述處理器510還用于執(zhí)行存儲器520中存儲的不合規(guī)數(shù)據(jù)的修復程序,以實現(xiàn)以下步驟:對已經(jīng)存儲的不合規(guī)數(shù)據(jù)進行分類;獲取屬于預設分類的不合規(guī)數(shù)據(jù);根據(jù)所述數(shù)據(jù)修復規(guī)則,將埋點錯誤造成的不合規(guī)數(shù)據(jù)修復為合規(guī)數(shù)據(jù),并將修復出的合規(guī)數(shù)據(jù)與其他合規(guī)數(shù)據(jù)一同存儲。本實施例在對數(shù)據(jù)采集端采集的數(shù)據(jù)進行合法性校驗之后,對不合規(guī)數(shù)據(jù)進行分析,判斷位于移動終端的數(shù)據(jù)采集端是否發(fā)生了埋點錯誤的問題,如果發(fā)生了埋點錯誤的問題,分析出錯誤所在并設置數(shù)據(jù)修復規(guī)則,利用該數(shù)據(jù)修復規(guī)則自動地、批量地修復不合規(guī)數(shù)據(jù),及時有效地回收利用因埋點錯誤造成的不合規(guī)數(shù)據(jù),糾正埋點錯誤引發(fā)的一系列問題,增加合規(guī)數(shù)據(jù)的數(shù)據(jù)量,使基礎數(shù)據(jù)更加豐富,回收不合規(guī)數(shù)據(jù),提高數(shù)據(jù)采集的準確性,提升最終數(shù)據(jù)分析的精準度。實施例四本發(fā)明實施例還提供了一種存儲介質(zhì)。這里的存儲介質(zhì)存儲有一個或者多個程序。其中,存儲介質(zhì)可以包括易失性存儲器,例如隨機存取存儲器;存儲器也可以包括非易失性存儲器,例如只讀存儲器、快閃存儲器、硬盤或固態(tài)硬盤;存儲器還可以包括上述種類的存儲器的組合。當存儲介質(zhì)中一個或者多個程序可被一個或者多個處理器執(zhí)行,以實現(xiàn)以下步驟:接收數(shù)據(jù)采集端采集的數(shù)據(jù);根據(jù)所述數(shù)據(jù)中的不合規(guī)數(shù)據(jù),判斷所述采集端是否埋點錯誤;如果埋點錯誤,則設置數(shù)據(jù)修復規(guī)則;根據(jù)所述數(shù)據(jù)修復規(guī)則,修復所述數(shù)據(jù)中的不合規(guī)數(shù)據(jù)??蛇x地,在所述接收數(shù)據(jù)采集端采集的數(shù)據(jù)之后,所述處理器還用于執(zhí)行存儲器中存儲的不合規(guī)數(shù)據(jù)的修復程序,以實現(xiàn)以下步驟:對數(shù)據(jù)采集端根據(jù)預設的埋點字段采集的數(shù)據(jù)進行合法性校驗;將合法性校驗未通過的數(shù)據(jù)作為不合規(guī)數(shù)據(jù)并存儲,將合法性校驗通過的數(shù)據(jù)作為合規(guī)數(shù)據(jù)并存儲??蛇x地,所述處理器還用于執(zhí)行存儲器中存儲的不合規(guī)數(shù)據(jù)的修復程序,以實現(xiàn)以下步驟:通過分析所述不合規(guī)數(shù)據(jù),確定待修復字段;所述待修復字段包括:所述埋點字段中的缺失字段和/或錯誤字段;根據(jù)所述待修復字段,設置數(shù)據(jù)修復規(guī)則??蛇x地,所述處理器還用于執(zhí)行存儲器中存儲的不合規(guī)數(shù)據(jù)的修復程序,以實現(xiàn)以下步驟:根據(jù)所述數(shù)據(jù)修復規(guī)則,將埋點錯誤造成的不合規(guī)數(shù)據(jù)修復為合規(guī)數(shù)據(jù),并將修復出的合規(guī)數(shù)據(jù)與其他合規(guī)數(shù)據(jù)一同存儲??蛇x地,所述處理器還用于執(zhí)行存儲器中存儲的不合規(guī)數(shù)據(jù)的修復程序,以實現(xiàn)以下步驟:對已經(jīng)存儲的不合規(guī)數(shù)據(jù)進行分類;獲取屬于預設分類的不合規(guī)數(shù)據(jù);根據(jù)所述數(shù)據(jù)修復規(guī)則,將埋點錯誤造成的不合規(guī)數(shù)據(jù)修復為合規(guī)數(shù)據(jù),并將修復出的合規(guī)數(shù)據(jù)與其他合規(guī)數(shù)據(jù)一同存儲。本實施例在對數(shù)據(jù)采集端采集的數(shù)據(jù)進行合法性校驗之后,對不合規(guī)數(shù)據(jù)進行分析,判斷位于移動終端的數(shù)據(jù)采集端是否發(fā)生了埋點錯誤的問題,如果發(fā)生了埋點錯誤的問題,分析出錯誤所在并設置數(shù)據(jù)修復規(guī)則,利用該數(shù)據(jù)修復規(guī)則自動地、批量地修復不合規(guī)數(shù)據(jù),及時有效地回收利用因埋點錯誤造成的不合規(guī)數(shù)據(jù),糾正埋點錯誤引發(fā)的一系列問題,增加合規(guī)數(shù)據(jù)的數(shù)據(jù)量,使基礎數(shù)據(jù)更加豐富,回收不合規(guī)數(shù)據(jù),提高數(shù)據(jù)采集的準確性,提升最終數(shù)據(jù)分析的精準度。需要說明的是,在本文中,術語“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含,從而使得包括一系列要素的過程、方法、物品或者裝置不僅包括那些要素,而且還包括沒有明確列出的其他要素,或者是還包括為這種過程、方法、物品或者裝置所固有的要素。在沒有更多限制的情況下,由語句“包括一個……”限定的要素,并不排除在包括該要素的過程、方法、物品或者裝置中還存在另外的相同要素。上述本發(fā)明實施例序號僅僅為了描述,不代表實施例的優(yōu)劣。通過以上的實施方式的描述,本領域的技術人員可以清楚地了解到上述實施例方法可借助軟件加必需的通用硬件平臺的方式來實現(xiàn),當然也可以通過硬件,但很多情況下前者是更佳的實施方式。基于這樣的理解,本發(fā)明的技術方案本質(zhì)上或者說對現(xiàn)有技術做出貢獻的部分可以以軟件產(chǎn)品的形式體現(xiàn)出來,該計算機軟件產(chǎn)品存儲在一個存儲介質(zhì)(如rom/ram、磁碟、光盤)中,包括若干指令用以使得一臺終端設備(可以是手機,計算機,服務器,空調(diào)器,或者網(wǎng)絡設備等)執(zhí)行本發(fā)明各個實施例的方法。以上僅為本發(fā)明的優(yōu)選實施例,并非因此限制本發(fā)明的專利范圍,凡是利用本發(fā)明說明書及附圖內(nèi)容所作的等效結構或等效流程變換,或直接或間接運用在其他相關的
技術領域
:,均同理包括在本發(fā)明的專利保護范圍內(nèi)。當前第1頁12當前第1頁12
當前第1頁1 2 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1