本發(fā)明涉及移動通信
技術領域:
:,尤其涉及一種數(shù)據(jù)同步處理方法、移動終端以及計算機可讀存儲介質(zhì)。
背景技術:
::隨著互聯(lián)網(wǎng)的發(fā)展和終端的普及,終端的用戶群越來越大,同時也對軟件提出了更多智能,人性化的需求。在現(xiàn)有的技術中,其實終端,雖然被用戶作為一個游戲機或電視機,還可能是一個學習機,還可能成為小寶寶的樂園等等,給我們的生活帶來更多的樂趣。隨著通訊產(chǎn)品的更新?lián)Q代,移動終端(例如手機、個人數(shù)字化助理pda等)已成為人們必備的通訊工具。各種方便人們生活的功能都能在移動終端上實現(xiàn),例如手機電視、gps、移動支付等等,都需要移動終端接入到互聯(lián)網(wǎng)才能實現(xiàn)。隨著電子產(chǎn)業(yè)的快速發(fā)展,移動終端智能化程度越來越高。移動終端研發(fā)公司也越來越注重智能化,人性化設計。在此移動終端快速發(fā)展的背景下,終端的便捷操作和人性化設計成為移動終端不可忽視的一部分。全渠道數(shù)據(jù)中心項目每天同步各業(yè)務系統(tǒng)產(chǎn)生的數(shù)據(jù),采用的方式大致分為三種:第一、業(yè)務系統(tǒng)提供數(shù)據(jù)庫連接,數(shù)據(jù)中心通過維護的id讀取數(shù)據(jù)并同步到數(shù)據(jù)中心,比如,第一次id設置為0,本次讀取了100條數(shù)據(jù),下次讀取id大于100的數(shù)據(jù),同步新增的數(shù)據(jù);第二、業(yè)務系統(tǒng)提供數(shù)據(jù)庫連接,數(shù)據(jù)中心全量讀取數(shù)據(jù)、然后刪除數(shù)據(jù)中心舊數(shù)據(jù),再全部同步新數(shù)據(jù);第三、業(yè)務系統(tǒng)提供接口,通過傳遞時間戳的方式給業(yè)務接口,業(yè)務系統(tǒng)返回大于當前時間戳的增量數(shù)據(jù)。這三種方式都存在一定的問題,第一種,根據(jù)id自增的特性只能同步數(shù)據(jù)庫的新增數(shù)據(jù),修改和刪除以前的數(shù)據(jù),即id小于數(shù)據(jù)中心維護的取值時,數(shù)據(jù)中心無從知曉;第二種,全量同步適合少量業(yè)務數(shù)據(jù),大量數(shù)據(jù)全量同步相當耗時;第三種,業(yè)務系統(tǒng)在數(shù)據(jù)上標記變更的時間戳,新增、修改的數(shù)據(jù)可以根據(jù)時間戳同步,刪除要做特殊處理,直接刪除數(shù)據(jù),時間戳也沒了,接口無法感知,因此要做標記刪除,這需要一定的開發(fā)、維護工作,考慮到很多業(yè)務系統(tǒng)都是老系統(tǒng),只有維護工作,還有相當多的操作直接在數(shù)據(jù)庫中完成,時間戳并沒有更新,同步的數(shù)據(jù)總有部分缺失。針對相關技術中數(shù)據(jù)同步存在只能同步數(shù)據(jù)庫的新增數(shù)據(jù)、大量數(shù)據(jù)全量同步相當耗時或者做標記刪除需要一定的開發(fā)維護工作的問題,目前尚未提出解決方案。技術實現(xiàn)要素:本發(fā)明的主要目的在于提出一種數(shù)據(jù)同步處理方法、移動終端以及計算機可讀存儲介質(zhì),旨在解決相關技術中數(shù)據(jù)同步存在只能同步數(shù)據(jù)庫的新增數(shù)據(jù)、大量數(shù)據(jù)全量同步相當耗時或者做標記刪除需要一定的開發(fā)維護工作的問題。為實現(xiàn)上述目的,本發(fā)明實施例提出一種數(shù)據(jù)同步處理方法,包括:從業(yè)務數(shù)據(jù)庫中獲取日志文件,其中,所述日志文件記錄了所述業(yè)務數(shù)據(jù)庫中全部的數(shù)據(jù)變更;解析所述日志文件得到所述日志文件的數(shù)據(jù);將所述日志文件的數(shù)據(jù)存放到消息隊列中;監(jiān)聽所述消息隊列,獲取發(fā)生變更的數(shù)據(jù),將所述發(fā)生變更的數(shù)據(jù)同步到數(shù)據(jù)中心。優(yōu)選地,從所述業(yè)務數(shù)據(jù)庫中獲取日志文件包括:獲取上一次從所述業(yè)務數(shù)據(jù)庫讀取日志文件的位置信息;與所述業(yè)務數(shù)據(jù)庫建立連接,向所述業(yè)務數(shù)據(jù)庫發(fā)送從所述位置信息獲取日志文件數(shù)據(jù)的指令;接收所述業(yè)務數(shù)據(jù)庫根據(jù)所述指令返回的日志文件。優(yōu)選地,解析所述日志文件得到所述日志文件的數(shù)據(jù)包括:通過日志文件協(xié)議對所述日志文件進行解析得到所述日志文件的數(shù)據(jù)。優(yōu)選地,將所述數(shù)據(jù)存放到消息隊列中包括:將解析得到的所述日志文件的數(shù)據(jù)存儲到消息隊列中,根據(jù)上一次從所述業(yè)務數(shù)據(jù)庫讀取日志文件的位置信息定時記錄所述日志文件的位置信息。優(yōu)選地,在將所述數(shù)據(jù)存放到消息隊列中之前,所述方法還包括:對解析得到的數(shù)據(jù)進行以下處理:過濾、分發(fā)、歸并、加工。優(yōu)選地,監(jiān)聽所述消息隊列,獲取發(fā)生變更的數(shù)據(jù),將所述發(fā)生變更的數(shù)據(jù)同步到數(shù)據(jù)中心包括:從所述消息隊列中讀取發(fā)生變更的一條或多條數(shù)據(jù),其中,所述一條或多條數(shù)據(jù)包含:唯一標識和數(shù)據(jù)對象;回滾上次讀取的數(shù)據(jù),基于讀取的數(shù)據(jù)的唯一標識提交到所述數(shù)據(jù)中心;在確認數(shù)據(jù)讀取成功之后,通知所述消息隊列刪除回滾的數(shù)據(jù),并標記本次讀取數(shù)據(jù)的位置。根據(jù)本發(fā)明實施例的另一方面,還提供了一種移動終端,所述移動終端包括處理器、存儲器及通信總線;所述通信總線用于實現(xiàn)處理器和存儲器之間的連接通信;所述處理器用于執(zhí)行存儲器中存儲的數(shù)據(jù)同步處理程序,以實現(xiàn)以下步驟:從業(yè)務數(shù)據(jù)庫中獲取日志文件,其中,所述日志文件記錄了所述業(yè)務數(shù)據(jù)庫中全部的數(shù)據(jù)變更;解析所述日志文件得到所述日志文件的數(shù)據(jù);將所述日志文件的數(shù)據(jù)存放到消息隊列中;監(jiān)聽所述消息隊列,獲取發(fā)生變更的數(shù)據(jù),將所述發(fā)生變更的數(shù)據(jù)同步到數(shù)據(jù)中心。優(yōu)選地,所述處理器還用于執(zhí)行數(shù)據(jù)同步處理程序,以實現(xiàn)以下步驟:獲取上一次從所述業(yè)務數(shù)據(jù)庫讀取日志文件的位置信息;與所述業(yè)務數(shù)據(jù)庫建立連接,向所述業(yè)務數(shù)據(jù)庫發(fā)送從所述位置信息獲取日志文件數(shù)據(jù)的指令;接收所述業(yè)務數(shù)據(jù)庫根據(jù)所述指令返回的日志文件。優(yōu)選地,所述處理器還用于執(zhí)行數(shù)據(jù)同步處理程序,以實現(xiàn)以下步驟:通過日志文件協(xié)議對所述日志文件進行解析得到所述日志文件的數(shù)據(jù)。優(yōu)選地,所述處理器還用于執(zhí)行數(shù)據(jù)同步處理程序,以實現(xiàn)以下步驟:將解析得到的所述日志文件的數(shù)據(jù)存儲到消息隊列中,根據(jù)上一次從所述業(yè)務數(shù)據(jù)庫讀取日志文件的位置信息定時記錄所述日志文件的位置信息。優(yōu)選地,所述處理器還用于執(zhí)行數(shù)據(jù)同步處理程序,以實現(xiàn)以下步驟:在將所述數(shù)據(jù)存放到消息隊列中之前,對解析得到的數(shù)據(jù)進行以下處理:過濾、分發(fā)、歸并、加工。優(yōu)選地,所述處理器還用于執(zhí)行數(shù)據(jù)同步處理程序,以實現(xiàn)以下步驟:從所述消息隊列中讀取發(fā)生變更的一條或多條數(shù)據(jù),其中,所述一條或多條數(shù)據(jù)包含:唯一標識和數(shù)據(jù)對象;回滾上次讀取的數(shù)據(jù),基于讀取的數(shù)據(jù)的唯一標識提交到所述數(shù)據(jù)中心;在確認數(shù)據(jù)讀取成功之后,通知所述消息隊列刪除回滾的數(shù)據(jù),并標記本次讀取數(shù)據(jù)的位置。根據(jù)本發(fā)明實施例的另一方面,還提供了一種計算機可讀存儲介質(zhì),所述計算機可讀存儲介質(zhì)存儲有一個或者多個程序,所述一個或者多個程序可被一個或者多個處理器執(zhí)行,以實現(xiàn)上述數(shù)據(jù)同步處理方法的步驟。通過本發(fā)明,從業(yè)務數(shù)據(jù)庫中獲取日志文件,其中,所述日志文件記錄了所述業(yè)務數(shù)據(jù)庫中全部的數(shù)據(jù)變更;解析所述日志文件得到所述日志文件的數(shù)據(jù);將所述日志文件的數(shù)據(jù)存放到消息隊列中;監(jiān)聽所述消息隊列,獲取發(fā)生變更的數(shù)據(jù),將所述發(fā)生變更的數(shù)據(jù)同步到數(shù)據(jù)中心,解決了相關技術中數(shù)據(jù)同步存在只能同步數(shù)據(jù)庫的新增數(shù)據(jù)、大量數(shù)據(jù)全量同步相當耗時或者做標記刪除需要一定的開發(fā)維護工作的問題,通過日志文件的方式,避免了數(shù)據(jù)遺漏,采用監(jiān)聽數(shù)據(jù)變更,保證變更的數(shù)據(jù)實時同步,提高了用戶體驗。附圖說明圖1為實現(xiàn)本發(fā)明各個實施例一可選的移動終端的硬件結(jié)構(gòu)示意圖;圖2為如圖1所示的移動終端的無線通信系統(tǒng)示意圖;圖3是根據(jù)本發(fā)明實施例的數(shù)據(jù)同步處理方法的流程圖;圖4是根據(jù)本發(fā)明實施例的業(yè)務數(shù)據(jù)庫與數(shù)據(jù)中心的架構(gòu)圖;圖5是業(yè)務數(shù)據(jù)庫與數(shù)據(jù)中心之間數(shù)據(jù)同步的流程圖;圖6是根據(jù)本發(fā)明實施例的數(shù)據(jù)同步的移動終端的框圖。本發(fā)明目的的實現(xiàn)、功能特點及優(yōu)點將結(jié)合實施例,參照附圖做進一步說明。具體實施方式應當理解,此處所描述的具體實施例僅僅用以解釋本發(fā)明,并不用于限定本發(fā)明。在后續(xù)的描述中,使用用于表示元件的諸如“模塊”、“部件”或“單元”的后綴僅為了有利于本發(fā)明的說明,其本身沒有特定的意義。因此,“模塊”、“部件”或“單元”可以混合地使用。終端可以以各種形式來實施。例如,本發(fā)明中描述的終端可以包括諸如手機、平板電腦、筆記本電腦、掌上電腦、個人數(shù)字助理(personaldigitalassistant,pda)、便捷式媒體播放器(portablemediaplayer,pmp)、導航裝置、可穿戴設備、智能手環(huán)、計步器等移動終端,以及諸如數(shù)字tv、臺式計算機等固定終端。后續(xù)描述中將以移動終端為例進行說明,本領域技術人員將理解的是,除了特別用于移動目的的元件之外,根據(jù)本發(fā)明的實施方式的構(gòu)造也能夠應用于固定類型的終端。請參閱圖1,其為實現(xiàn)本發(fā)明各個實施例的一種移動終端的硬件結(jié)構(gòu)示意圖,該移動終端100可以包括:rf(radiofrequency,射頻)單元101、wifi模塊102、音頻輸出單元103、a/v(音頻/視頻)輸入單元104、傳感器105、顯示單元106、用戶輸入單元107、接口單元108、存儲器109、處理器110、以及電源111等部件。本領域技術人員可以理解,圖1中示出的移動終端結(jié)構(gòu)并不構(gòu)成對移動終端的限定,移動終端可以包括比圖示更多或更少的部件,或者組合某些部件,或者不同的部件布置。下面結(jié)合圖1對移動終端的各個部件進行具體的介紹:射頻單元101可用于收發(fā)信息或通話過程中,信號的接收和發(fā)送,具體的,將基站的下行信息接收后,給處理器110處理;另外,將上行的數(shù)據(jù)發(fā)送給基站。通常,射頻單元101包括但不限于天線、至少一個放大器、收發(fā)信機、耦合器、低噪聲放大器、雙工器等。此外,射頻單元101還可以通過無線通信與網(wǎng)絡和其他設備通信。上述無線通信可以使用任一通信標準或協(xié)議,包括但不限于gsm(globalsystemofmobilecommunication,全球移動通訊系統(tǒng))、gprs(generalpacketradioservice,通用分組無線服務)、cdma2000(codedivisionmultipleaccess2000,碼分多址2000)、wcdma(widebandcodedivisionmultipleaccess,寬帶碼分多址)、td-scdma(timedivision-synchronouscodedivisionmultipleaccess,時分同步碼分多址)、fdd-lte(frequencydivisionduplexing-longtermevolution,頻分雙工長期演進)和tdd-lte(timedivisionduplexing-longtermevolution,分時雙工長期演進)等。wifi屬于短距離無線傳輸技術,移動終端通過wifi模塊102可以幫助用戶收發(fā)電子郵件、瀏覽網(wǎng)頁和訪問流式媒體等,它為用戶提供了無線的寬帶互聯(lián)網(wǎng)訪問。雖然圖1示出了wifi模塊102,但是可以理解的是,其并不屬于移動終端的必須構(gòu)成,完全可以根據(jù)需要在不改變發(fā)明的本質(zhì)的范圍內(nèi)而省略。音頻輸出單元103可以在移動終端100處于呼叫信號接收模式、通話模式、記錄模式、語音識別模式、廣播接收模式等等模式下時,將射頻單元101或wifi模塊102接收的或者在存儲器109中存儲的音頻數(shù)據(jù)轉(zhuǎn)換成音頻信號并且輸出為聲音。而且,音頻輸出單元103還可以提供與移動終端100執(zhí)行的特定功能相關的音頻輸出(例如,呼叫信號接收聲音、消息接收聲音等等)。音頻輸出單元103可以包括揚聲器、蜂鳴器等等。a/v輸入單元104用于接收音頻或視頻信號。a/v輸入單元104可以包括圖形處理器(graphicsprocessingunit,gpu)1041和麥克風1042,圖形處理器1041對在視頻捕獲模式或圖像捕獲模式中由圖像捕獲裝置(如攝像頭)獲得的靜態(tài)圖片或視頻的圖像數(shù)據(jù)進行處理。處理后的圖像幀可以顯示在顯示單元106上。經(jīng)圖形處理器1041處理后的圖像幀可以存儲在存儲器109(或其它存儲介質(zhì))中或者經(jīng)由射頻單元101或wifi模塊102進行發(fā)送。麥克風1042可以在電話通話模式、記錄模式、語音識別模式等等運行模式中經(jīng)由麥克風1042接收聲音(音頻數(shù)據(jù)),并且能夠?qū)⑦@樣的聲音處理為音頻數(shù)據(jù)。處理后的音頻(語音)數(shù)據(jù)可以在電話通話模式的情況下轉(zhuǎn)換為可經(jīng)由射頻單元101發(fā)送到移動通信基站的格式輸出。麥克風1042可以實施各種類型的噪聲消除(或抑制)算法以消除(或抑制)在接收和發(fā)送音頻信號的過程中產(chǎn)生的噪聲或者干擾。移動終端100還包括至少一種傳感器105,比如光傳感器、運動傳感器以及其他傳感器。具體地,光傳感器包括環(huán)境光傳感器及接近傳感器,其中,環(huán)境光傳感器可根據(jù)環(huán)境光線的明暗來調(diào)節(jié)顯示面板1061的亮度,接近傳感器可在移動終端100移動到耳邊時,關閉顯示面板1061和/或背光。作為運動傳感器的一種,加速計傳感器可檢測各個方向上(一般為三軸)加速度的大小,靜止時可檢測出重力的大小及方向,可用于識別手機姿態(tài)的應用(比如橫豎屏切換、相關游戲、磁力計姿態(tài)校準)、振動識別相關功能(比如計步器、敲擊)等;至于手機還可配置的指紋傳感器、壓力傳感器、虹膜傳感器、分子傳感器、陀螺儀、氣壓計、濕度計、溫度計、紅外線傳感器等其他傳感器,在此不再贅述。顯示單元106用于顯示由用戶輸入的信息或提供給用戶的信息。顯示單元106可包括顯示面板1061,可以采用液晶顯示器(liquidcrystaldisplay,lcd)、有機發(fā)光二極管(organiclight-emittingdiode,oled)等形式來配置顯示面板1061。用戶輸入單元107可用于接收輸入的數(shù)字或字符信息,以及產(chǎn)生與移動終端的用戶設置以及功能控制有關的鍵信號輸入。具體地,用戶輸入單元107可包括觸控面板1071以及其他輸入設備1072。觸控面板1071,也稱為觸摸屏,可收集用戶在其上或附近的觸摸操作(比如用戶使用手指、觸筆等任何適合的物體或附件在觸控面板1071上或在觸控面板1071附近的操作),并根據(jù)預先設定的程式驅(qū)動相應的連接裝置。觸控面板1071可包括觸摸檢測裝置和觸摸控制器兩個部分。其中,觸摸檢測裝置檢測用戶的觸摸方位,并檢測觸摸操作帶來的信號,將信號傳送給觸摸控制器;觸摸控制器從觸摸檢測裝置上接收觸摸信息,并將它轉(zhuǎn)換成觸點坐標,再送給處理器110,并能接收處理器110發(fā)來的命令并加以執(zhí)行。此外,可以采用電阻式、電容式、紅外線以及表面聲波等多種類型實現(xiàn)觸控面板1071。除了觸控面板1071,用戶輸入單元107還可以包括其他輸入設備1072。具體地,其他輸入設備1072可以包括但不限于物理鍵盤、功能鍵(比如音量控制按鍵、開關按鍵等)、軌跡球、鼠標、操作桿等中的一種或多種,具體此處不做限定。進一步的,觸控面板1071可覆蓋顯示面板1061,當觸控面板1071檢測到在其上或附近的觸摸操作后,傳送給處理器110以確定觸摸事件的類型,隨后處理器110根據(jù)觸摸事件的類型在顯示面板1061上提供相應的視覺輸出。雖然在圖1中,觸控面板1071與顯示面板1061是作為兩個獨立的部件來實現(xiàn)移動終端的輸入和輸出功能,但是在某些實施例中,可以將觸控面板1071與顯示面板1061集成而實現(xiàn)移動終端的輸入和輸出功能,具體此處不做限定。接口單元108用作至少一個外部裝置與移動終端100連接可以通過的接口。例如,外部裝置可以包括有線或無線頭戴式耳機端口、外部電源(或電池充電器)端口、有線或無線數(shù)據(jù)端口、存儲卡端口、用于連接具有識別模塊的裝置的端口、音頻輸入/輸出(i/o)端口、視頻i/o端口、耳機端口等等。接口單元108可以用于接收來自外部裝置的輸入(例如,數(shù)據(jù)信息、電力等等)并且將接收到的輸入傳輸?shù)揭苿咏K端100內(nèi)的一個或多個元件或者可以用于在移動終端100和外部裝置之間傳輸數(shù)據(jù)。存儲器109可用于存儲軟件程序以及各種數(shù)據(jù)。存儲器109可主要包括存儲程序區(qū)和存儲數(shù)據(jù)區(qū),其中,存儲程序區(qū)可存儲操作系統(tǒng)、至少一個功能所需的應用程序(比如聲音播放功能、圖像播放功能等)等;存儲數(shù)據(jù)區(qū)可存儲根據(jù)手機的使用所創(chuàng)建的數(shù)據(jù)(比如音頻數(shù)據(jù)、電話本等)等。此外,存儲器109可以包括高速隨機存取存儲器,還可以包括非易失性存儲器,例如至少一個磁盤存儲器件、閃存器件、或其他易失性固態(tài)存儲器件。處理器110是移動終端的控制中心,利用各種接口和線路連接整個移動終端的各個部分,通過運行或執(zhí)行存儲在存儲器109內(nèi)的軟件程序和/或模塊,以及調(diào)用存儲在存儲器109內(nèi)的數(shù)據(jù),執(zhí)行移動終端的各種功能和處理數(shù)據(jù),從而對移動終端進行整體監(jiān)測。處理器110可包括一個或多個處理單元;優(yōu)選的,處理器110可集成應用處理器和調(diào)制解調(diào)處理器,其中,應用處理器主要處理操作系統(tǒng)、用戶界面和應用程序等,調(diào)制解調(diào)處理器主要處理無線通信??梢岳斫獾氖牵鲜稣{(diào)制解調(diào)處理器也可以不集成到處理器110中。移動終端100還可以包括給各個部件供電的電源111(比如電池),優(yōu)選的,電源111可以通過電源管理系統(tǒng)與處理器110邏輯相連,從而通過電源管理系統(tǒng)實現(xiàn)管理充電、放電、以及功耗管理等功能。盡管圖1未示出,移動終端100還可以包括藍牙模塊等,在此不再贅述。為了便于理解本發(fā)明實施例,下面對本發(fā)明的移動終端所基于的通信網(wǎng)絡系統(tǒng)進行描述。請參閱圖2,圖2為本發(fā)明實施例提供的一種通信網(wǎng)絡系統(tǒng)架構(gòu)圖,該通信網(wǎng)絡系統(tǒng)為通用移動通信技術的lte系統(tǒng),該lte系統(tǒng)包括依次通訊連接的ue(userequipment,用戶設備)201,e-utran(evolvedumtsterrestrialradioaccessnetwork,演進式umts陸地無線接入網(wǎng))202,epc(evolvedpacketcore,演進式分組核心網(wǎng))203和運營商的ip業(yè)務204。具體地,ue201可以是上述終端100,此處不再贅述。e-utran202包括enodeb2021和其它enodeb2022等。其中,enodeb2021可以通過回程(backhaul)(例如x2接口)與其它enodeb2022連接,enodeb2021連接到epc203,enodeb2021可以提供ue201到epc203的接入。epc203可以包括mme(mobilitymanagemententity,移動性管理實體)2031,hss(homesubscriberserver,歸屬用戶服務器)2032,其它mme2033,sgw(servinggateway,服務網(wǎng)關)2034,pgw(pdngateway,分組數(shù)據(jù)網(wǎng)絡網(wǎng)關)2035和pcrf(policyandchargingrulesfunction,政策和資費功能實體)2036等。其中,mme2031是處理ue201和epc203之間信令的控制節(jié)點,提供承載和連接管理。hss2032用于提供一些寄存器來管理諸如歸屬位置寄存器(圖中未示)之類的功能,并且保存有一些有關服務特征、數(shù)據(jù)速率等用戶專用的信息。所有用戶數(shù)據(jù)都可以通過sgw2034進行發(fā)送,pgw2035可以提供ue201的ip地址分配以及其它功能,pcrf2036是業(yè)務數(shù)據(jù)流和ip承載資源的策略與計費控制策略決策點,它為策略與計費執(zhí)行功能單元(圖中未示)選擇及提供可用的策略和計費控制決策。ip業(yè)務204可以包括因特網(wǎng)、內(nèi)聯(lián)網(wǎng)、ims(ipmultimediasubsystem,ip多媒體子系統(tǒng))或其它ip業(yè)務等。雖然上述以lte系統(tǒng)為例進行了介紹,但本領域技術人員應當知曉,本發(fā)明不僅僅適用于lte系統(tǒng),也可以適用于其他無線通信系統(tǒng),例如gsm、cdma2000、wcdma、td-scdma以及未來新的網(wǎng)絡系統(tǒng)等,此處不做限定?;谏鲜鲆苿咏K端硬件結(jié)構(gòu)以及通信網(wǎng)絡系統(tǒng),提出本發(fā)明方法各個實施例。實施例1基于上述的移動終端,本發(fā)明實施例提供了一種數(shù)據(jù)同步處理方法,圖3是根據(jù)本發(fā)明實施例的數(shù)據(jù)同步處理方法的流程圖一,如圖3所示,該方法包括以下步驟:步驟s301,從業(yè)務數(shù)據(jù)庫中獲取日志文件,其中,所述日志文件記錄了所述業(yè)務數(shù)據(jù)庫中全部的數(shù)據(jù)變更;步驟s302,解析所述日志文件得到所述日志文件的數(shù)據(jù);步驟s303,將所述日志文件的數(shù)據(jù)存放到消息隊列中;步驟s304,監(jiān)聽所述消息隊列,獲取發(fā)生變更的數(shù)據(jù),將所述發(fā)生變更的數(shù)據(jù)同步到數(shù)據(jù)中心。通過上述步驟,從業(yè)務數(shù)據(jù)庫中獲取日志文件,其中,所述日志文件記錄了所述業(yè)務數(shù)據(jù)庫中全部的數(shù)據(jù)變更;解析所述日志文件得到所述日志文件的數(shù)據(jù);將所述日志文件的數(shù)據(jù)存放到消息隊列中;監(jiān)聽所述消息隊列,獲取發(fā)生變更的數(shù)據(jù),將所述發(fā)生變更的數(shù)據(jù)同步到數(shù)據(jù)中心,解決了相關技術中數(shù)據(jù)同步存在只能同步數(shù)據(jù)庫的新增數(shù)據(jù)、大量數(shù)據(jù)全量同步相當耗時或者做標記刪除需要一定的開發(fā)維護工作的問題,通過日志文件的方式,避免了數(shù)據(jù)遺漏,采用監(jiān)聽數(shù)據(jù)變更,保證變更的數(shù)據(jù)實時同步,提高了用戶體驗。本發(fā)明實施例中,從所述業(yè)務數(shù)據(jù)庫中獲取日志文件可以包括:獲取上一次從所述業(yè)務數(shù)據(jù)庫讀取日志文件的位置信息,如果第一次啟動,則獲取初始位置或者當前日志文件的位點;與所述業(yè)務數(shù)據(jù)庫建立連接,向所述業(yè)務數(shù)據(jù)庫發(fā)送從所述位置信息獲取日志文件數(shù)據(jù)的指令;接收所述業(yè)務數(shù)據(jù)庫根據(jù)所述指令返回的日志文件。在根據(jù)接收到的指令獲取日志文件時,從上一次讀取日志文件的位置信息開始獲取日志文件,保證不遺漏掉日志文件。本發(fā)明實施例中,解析所述日志文件得到所述日志文件的數(shù)據(jù)可以包括:通過日志文件協(xié)議對所述日志文件進行解析,得到所述日志文件的數(shù)據(jù)??梢栽诮馕龅倪^程中,補充一些特定的信息,比如字段名稱、數(shù)據(jù)類型、逐漸信息等。為了便于之后通過位置信息讀取緩存到消息隊列中的日志文件,將解析得到的所述日志文件的數(shù)據(jù)存儲到消息隊列中,根據(jù)上一次從所述業(yè)務數(shù)據(jù)庫讀取日志文件的位置信息定時記錄所述日志文件的位置信息。在將所述數(shù)據(jù)存放到消息隊列中之前,所述方法還包括:通過鏈接器對解析得到的數(shù)據(jù)進行以下處理:過濾、分發(fā)、歸并、加工。其中,數(shù)據(jù)過濾,根據(jù)通配符過濾模式,過濾表名、字段等符合需要的信息;數(shù)據(jù)分發(fā),解決1:n問題,即一個業(yè)務數(shù)據(jù)庫,對應數(shù)據(jù)中心多個目標變更的位置;數(shù)據(jù)歸并,解決n:1問題,即多個業(yè)務數(shù)據(jù)庫的信息,合并到數(shù)據(jù)中心;數(shù)據(jù)加工,在進入下一個模塊存儲的一些額外處理(標注類型、長度、默認值)描述字段類型。本發(fā)明實施例中,從所述消息隊列中讀取發(fā)生變更的一條或多條數(shù)據(jù),其中,所述一條或多條數(shù)據(jù)包含:唯一標識和數(shù)據(jù)對象;回滾上次讀取的數(shù)據(jù),基于讀取的數(shù)據(jù)的唯一標識提交到所述數(shù)據(jù)中心;回滾數(shù)據(jù),是一種異常保護機制,回滾上次讀取的數(shù)據(jù),基于獲取的batchid進行提交,在確認數(shù)據(jù)讀取成功之后,通知所述消息隊列刪除回滾的數(shù)據(jù),并標記本次讀取數(shù)據(jù)的位置。圖4是根據(jù)本發(fā)明實施例的業(yè)務數(shù)據(jù)庫與數(shù)據(jù)中心的架構(gòu)圖,如圖4所示,數(shù)據(jù)中心與多個業(yè)務數(shù)據(jù)庫連接,可以實現(xiàn)將多個業(yè)務數(shù)據(jù)庫中的數(shù)據(jù)同步到數(shù)據(jù)中心。基于關系型數(shù)據(jù)庫mysql的主備復制實現(xiàn),模擬關系型數(shù)據(jù)庫的slave交互協(xié)議,接收master主數(shù)據(jù)庫的日志文件,解析日志文件:其中,mysql是一個開放源碼的小型關聯(lián)式數(shù)據(jù)庫管理系統(tǒng),開發(fā)者為瑞典mysqlab公司。目前mysql被廣泛地應用在internet上的中小型網(wǎng)站中。由于其體積小、速度快、總體擁有成本低,尤其是開放源碼這一特點,許多中小型網(wǎng)站為了降低網(wǎng)站總體擁有成本而選擇了mysql作為網(wǎng)站數(shù)據(jù)庫。與其他的大型數(shù)據(jù)庫例如oracle、db2、sqlserver等相比,mysql自有它的不足之處,如規(guī)模小、功能有限(mysqlcluster的功能和效率都相對比較差)等,但是這絲毫也沒有減少它受歡迎的程度。對于一般的個人使用者和中小型企業(yè)來說,mysql提供的功能已經(jīng)綽綽有余,而且由于mysql是開放源碼軟件,因此可以大大降低總體擁有成本。目前internet上流行的網(wǎng)站構(gòu)架方式是lamp(linux+apache+mysql+php/perl/python)和lnmp(linux+nginx+mysql+php/perl/python),即使用linux作為操作系統(tǒng),apache和nginx作為web服務器,mysql作為數(shù)據(jù)庫,php/perl/python作為服務器端腳本解釋器?;跀?shù)據(jù)的日志文件,因此需要開啟數(shù)據(jù)的日志文件寫入功能,并配置日志文件的模型為行類型,數(shù)據(jù)基于行存儲、查詢,行由列組成,每列就是一個字段,一組字段組成行,日志文件行類型對應數(shù)據(jù)的行類型,即以數(shù)據(jù)行為單位記錄。本發(fā)明實施例分四個步驟,分別是數(shù)據(jù)源接入、鏈接器、數(shù)據(jù)存儲和增量訂閱。圖5是業(yè)務數(shù)據(jù)庫與數(shù)據(jù)中心之間數(shù)據(jù)同步的流程圖,如圖5所示,包括以下步驟:步驟s501,數(shù)據(jù)源接入,模擬slave協(xié)議和master進行交互,協(xié)議解析,從業(yè)務數(shù)據(jù)庫獲取日志文件并解析,大致可以分為以下幾個步驟:獲取上一次業(yè)務數(shù)據(jù)庫讀取成功的位置(如果第一次啟動,則獲取初始位置或者當前日志文件的位點);與業(yè)務數(shù)據(jù)庫建立連接,發(fā)送獲取日志文件數(shù)據(jù)指令;業(yè)務數(shù)據(jù)庫開始推送業(yè)務數(shù)據(jù)庫日志數(shù)據(jù);接收到的日志文件通過日志文件協(xié)議進行解析,補充一些特定的信息,比如字段名稱、數(shù)據(jù)類型、逐漸信息等;傳送給下一個模塊鏈接器進行數(shù)據(jù)存儲,這是一個阻塞操作,阻塞表示當前數(shù)據(jù)存儲完成才能繼續(xù)下一次存儲,因為日志文件有時間先后,先產(chǎn)生的日志必須先處理,比如有一行數(shù)據(jù),先新增、再刪除,就產(chǎn)生新增、刪除日志,如果不阻塞,先處理刪除日志,就找不到這一行數(shù)據(jù),直到存儲成功;存儲成功后,定時記錄日志文件位置。步驟s502,通過鏈接器進行數(shù)據(jù)過濾、加工、分發(fā)的工作。日志文件記錄的是業(yè)務數(shù)據(jù)庫全部的數(shù)據(jù)變更,必須把變更的數(shù)據(jù)再對應到數(shù)據(jù)中心的數(shù)據(jù)庫,大致分為以下幾個步驟:數(shù)據(jù)過濾,根據(jù)通配符過濾模式,過濾表名、字段等符合需要的信息;數(shù)據(jù)分發(fā),解決1:n問題,即一個業(yè)務數(shù)據(jù)庫,對應數(shù)據(jù)中心多個目標變更的位置;數(shù)據(jù)歸并,解決n:1問題,即多個業(yè)務數(shù)據(jù)庫的信息,合并到數(shù)據(jù)中心;數(shù)據(jù)加工,在進入下一個模塊存儲的一些額外處理,標注類型、長度、默認值)描述字段類型,數(shù)據(jù)類型的轉(zhuǎn)換,以一行數(shù)據(jù)為例,由多列過程,每列表示一個字段,字段由名稱、數(shù)據(jù)類型、長度、默認值、是否主鍵、取值等描述,然后轉(zhuǎn)換成java的數(shù)據(jù)結(jié)構(gòu)。步驟s503,數(shù)據(jù)存儲。經(jīng)過鏈接器處理的數(shù)據(jù),存放到消息隊列中進行存儲。步驟s504,增量訂閱。監(jiān)聽消息隊列,獲取數(shù)據(jù)變更,并同步到數(shù)據(jù)中心,通過以下三個操作:讀取數(shù)據(jù),允許制定批處理的大小batchsize,一次可以獲取多條數(shù)據(jù),每次返回的數(shù)據(jù)包含內(nèi)容為:第一、批處理的batchid唯一標識,第二、具體的數(shù)據(jù)對象;回滾數(shù)據(jù),異常保護機制,異常保護用于回滾操作,一旦異常觸發(fā),表示數(shù)據(jù)提交失敗,再異常中回滾數(shù)據(jù),回滾上次讀取的數(shù)據(jù),基于獲取的batchid進行提交;確認提交,確認已經(jīng)消費成功,消費成功指數(shù)據(jù)讀取成功,這里采用經(jīng)典的生產(chǎn)者-消費者,消費者負責讀取生產(chǎn)者的數(shù)據(jù),通知刪除數(shù)據(jù),提交batchid,一次批量讀取數(shù)據(jù)成功后,必須通知生產(chǎn)者下一次讀取的標記,batchid記錄讀取位置。本發(fā)明實施例解決了數(shù)據(jù)庫同步增量數(shù)據(jù)的問題,從日志文件出發(fā),接入業(yè)務服務器、鏈接器過濾數(shù)據(jù)、存儲數(shù)據(jù),最后增量訂閱到數(shù)據(jù)中心,避免遺漏修改和刪除的數(shù)據(jù)無法同步,提高數(shù)據(jù)同步的效率。本發(fā)明實施例還提供了一種數(shù)據(jù)庫同步方法,該方法包括以下步驟:步驟1、監(jiān)聽業(yè)務數(shù)據(jù)庫的日志,捕獲所述業(yè)務數(shù)據(jù)庫的數(shù)據(jù)變化信息。具體地,對業(yè)務數(shù)據(jù)庫的日志進行監(jiān)聽,在業(yè)務數(shù)據(jù)庫的日志發(fā)生變化時,捕獲到該業(yè)務數(shù)據(jù)庫的數(shù)據(jù)變化信息。例如,業(yè)務數(shù)據(jù)庫可以為結(jié)構(gòu)化查詢語句(structuredquerylanguage,簡稱sql)數(shù)據(jù)庫,相應的,數(shù)據(jù)變化信息可以為sql數(shù)據(jù)變化語句。步驟2、確定待同步的數(shù)據(jù)中心的類型。實際應用中,可與多個業(yè)務數(shù)據(jù)庫進行連接,在獲取到數(shù)據(jù)變化信息后,可以確定待同步的數(shù)據(jù)中心的類型。本實施例中,數(shù)據(jù)中心的類型包括:業(yè)務數(shù)據(jù)庫的完全備份數(shù)據(jù)庫、業(yè)務數(shù)據(jù)庫的部分備份數(shù)據(jù)庫、用于存儲數(shù)據(jù)變化信息的文件數(shù)據(jù)庫、與業(yè)務數(shù)據(jù)庫異構(gòu)的數(shù)據(jù)庫,本實施例中,業(yè)務數(shù)據(jù)庫為關系型數(shù)據(jù)庫,而與業(yè)務數(shù)據(jù)庫異構(gòu)的數(shù)據(jù)庫為內(nèi)存型數(shù)據(jù)庫。為了便于表達和區(qū)分不同類型的數(shù)據(jù)庫,本實施例中將業(yè)務數(shù)據(jù)庫的完全備份數(shù)據(jù)庫稱為第一數(shù)據(jù)庫、業(yè)務數(shù)據(jù)庫的部分備份數(shù)據(jù)庫稱為第二數(shù)據(jù)庫、內(nèi)存型數(shù)據(jù)庫稱為第三數(shù)據(jù)庫以及將用于存儲數(shù)據(jù)變化信息的文件數(shù)據(jù)庫稱為第四數(shù)據(jù)庫。步驟3、獲取與數(shù)據(jù)中心的類型對應的同步規(guī)則。本實施例中,預先存儲各類型數(shù)據(jù)中心對應的同步規(guī)則。在確定出數(shù)據(jù)中心的類型后,根據(jù)數(shù)據(jù)中心的類型,獲取與各類型數(shù)據(jù)中心相應的同步規(guī)則。具體地,預先存儲數(shù)據(jù)中心的類型標識與同步規(guī)則標識之間的映射關系,當確定出數(shù)據(jù)中心的類型后,根據(jù)待同步的數(shù)據(jù)中心的類型標識查詢上述映射關系,可以獲取到與數(shù)據(jù)中心對應的同步規(guī)則標識,根據(jù)數(shù)據(jù)中心對應的同步規(guī)則標識,得到與數(shù)據(jù)中心對應的同步規(guī)則。步驟4、根據(jù)所述數(shù)據(jù)變化信息和數(shù)據(jù)中心對應的同步規(guī)則,將數(shù)據(jù)中心與所述業(yè)務數(shù)據(jù)庫進行數(shù)據(jù)同步。具體地,如果待同步的數(shù)據(jù)中心的類型為第一數(shù)據(jù)庫,即第一數(shù)據(jù)庫為業(yè)務數(shù)據(jù)庫的完全備份的數(shù)據(jù)庫時,則獲取到的與第一數(shù)據(jù)庫對應的同步規(guī)則為:根據(jù)獲取到的數(shù)據(jù)變化信息,將業(yè)務數(shù)據(jù)庫中所有數(shù)據(jù)變化同步到該第一數(shù)據(jù)庫中。如果待同步的數(shù)據(jù)中心的類型為第二數(shù)據(jù)庫,即第二數(shù)據(jù)庫為業(yè)務數(shù)據(jù)庫的部分備份,則獲取到的與第二數(shù)據(jù)庫對應的同步規(guī)則為:從數(shù)據(jù)變化信息中獲取與第二數(shù)據(jù)庫對應的第一數(shù)據(jù)變化信息,將第一數(shù)據(jù)變化信息對應的數(shù)據(jù)變化同步到第二數(shù)據(jù)庫中。如果待同步的數(shù)據(jù)中心的類型為第三數(shù)據(jù)庫,其中,業(yè)務數(shù)據(jù)庫為關系型數(shù)據(jù)庫,該第三數(shù)據(jù)庫為內(nèi)存型數(shù)據(jù)庫,則獲取到的與第三數(shù)據(jù)庫對應的同步規(guī)則中包括預設的業(yè)務數(shù)據(jù)庫中數(shù)據(jù)表與第三數(shù)據(jù)庫中數(shù)據(jù)表之間的映射關系,獲取與業(yè)務數(shù)據(jù)庫中數(shù)據(jù)表相關的第二數(shù)據(jù)變化信息,根據(jù)所述第二數(shù)據(jù)變化信息以及該映射關系,將第二數(shù)據(jù)變化信息對應的數(shù)據(jù)變化同步到第三數(shù)據(jù)庫中。如果待同步的數(shù)據(jù)中心的類型為第四數(shù)據(jù)庫,即第四數(shù)據(jù)庫為用于存儲數(shù)據(jù)變化信息的文件型數(shù)據(jù)庫,則獲取到的與第四數(shù)據(jù)庫對應的同步規(guī)則為:將數(shù)據(jù)變化信息存儲到該第四數(shù)據(jù)庫中。相應地,當數(shù)據(jù)中心為第一數(shù)據(jù)庫時,根據(jù)該數(shù)據(jù)變化信息和第一數(shù)據(jù)庫對應的同步規(guī)則,將業(yè)務數(shù)據(jù)庫中所有數(shù)據(jù)變化同步到該第一數(shù)據(jù)庫中。相應地,當數(shù)據(jù)中心為第二數(shù)據(jù)庫時,從數(shù)據(jù)變化信息中獲取該第二數(shù)據(jù)庫對應的第一數(shù)據(jù)變化信息,然后將第一數(shù)據(jù)變化信息對應的數(shù)據(jù)變化同步到第二數(shù)據(jù)庫中。例如,第二數(shù)據(jù)庫為業(yè)務數(shù)據(jù)庫中某一個子集的備份數(shù)據(jù)庫,則從數(shù)據(jù)變化信息中獲取該子集的數(shù)據(jù)變化信息即第一數(shù)據(jù)變化信息,然后根據(jù)該第一數(shù)據(jù)變化信息將該子集的數(shù)據(jù)變化同步到第二數(shù)據(jù)庫中,這樣就能夠保證第二數(shù)據(jù)庫與業(yè)務數(shù)據(jù)庫中該子集的同步。相應地,當數(shù)據(jù)中心為第三數(shù)據(jù)庫時,查詢第三數(shù)據(jù)庫對應的同步規(guī)則中業(yè)務數(shù)據(jù)庫中數(shù)據(jù)表與第三數(shù)據(jù)庫中數(shù)據(jù)表之間的映射關系,基于映射關系中業(yè)務數(shù)據(jù)庫中數(shù)據(jù)表,獲取與業(yè)務數(shù)據(jù)庫中數(shù)據(jù)表相關的第二數(shù)據(jù)變化信息,根據(jù)該第二數(shù)據(jù)變化信息和上述映射關系,將第二數(shù)據(jù)變化信息對應的數(shù)據(jù)變化同步到第三數(shù)據(jù)庫中的數(shù)據(jù)表中。本實施例實現(xiàn)了關系型數(shù)據(jù)庫與內(nèi)存型數(shù)據(jù)庫的同步。相應地,當數(shù)據(jù)中心為第四數(shù)據(jù)庫時,將數(shù)據(jù)變化信息同步到第四數(shù)據(jù)庫中。進一步地,還可以在業(yè)務數(shù)據(jù)庫與數(shù)據(jù)中心進行同步過程中,監(jiān)測是否發(fā)生數(shù)據(jù)同步中斷,例如,數(shù)據(jù)中心因為硬件或網(wǎng)絡故障導致數(shù)據(jù)同步無法進行,就會造成數(shù)據(jù)同步的中斷。在監(jiān)測到所述數(shù)據(jù)同步中斷時,記錄所述數(shù)據(jù)同步中斷發(fā)生的中斷點,以保證在所述數(shù)據(jù)同步中斷恢復后,將所述中斷點后的數(shù)據(jù)變化同步到所述數(shù)據(jù)中心中。進一步地,在獲取到數(shù)據(jù)變化信息后,還可以對數(shù)據(jù)變化信息進行預處理,例如,當數(shù)據(jù)變化信息為sql數(shù)據(jù)變化語句時,對該sql數(shù)據(jù)變化語句進行解析,得到數(shù)據(jù)變化信息。還可以獲取到每個數(shù)據(jù)變化信息的關鍵字,然后根據(jù)關鍵字對數(shù)據(jù)變化信息進行過濾,以降低待同步的數(shù)據(jù)量。本實施例中,設置一個用于對數(shù)據(jù)變化信息進行過濾的列表,該列表中存儲有用于過濾的關鍵字,當監(jiān)聽到的數(shù)據(jù)變化信息中包括的關鍵字為該列表中關鍵字時,將該數(shù)據(jù)變化信息過濾掉,這樣待同步的數(shù)據(jù)變化信息就可以得到精簡,從而減少了待同步的數(shù)據(jù)的數(shù)據(jù)量,降低資源浪費,提高數(shù)據(jù)庫之間的同步效率。其中上述列表可以由管理人員根據(jù)實際需求進行靈活設置。而且可以采用消息隊列機制,將數(shù)據(jù)變化信息發(fā)送到消息對列中,基于消息隊列對所有數(shù)據(jù)變化信息,實現(xiàn)數(shù)據(jù)庫之間的數(shù)據(jù)同步??蛇x地,還可以對數(shù)據(jù)變化信息進行緩存,以避免數(shù)據(jù)變化信息的丟失。本實施例提供的數(shù)據(jù)庫同步方法,監(jiān)聽業(yè)務數(shù)據(jù)庫的日志,捕獲業(yè)務數(shù)據(jù)庫的數(shù)據(jù)變化信息,確定待同步的數(shù)據(jù)中心的類型,根據(jù)數(shù)據(jù)中心的類型,獲取與數(shù)據(jù)中心的類型對應的同步規(guī)則,根據(jù)數(shù)據(jù)變化信息和數(shù)據(jù)中心對應的同步規(guī)則,將數(shù)據(jù)中心與業(yè)務數(shù)據(jù)庫進行數(shù)據(jù)同步。本實施例中為不同類型的數(shù)據(jù)中心建立不同的同步規(guī)則,在獲取到業(yè)務數(shù)據(jù)庫的數(shù)據(jù)變化信息后,基于數(shù)據(jù)中心對應的同步規(guī)則,將數(shù)據(jù)中心與業(yè)務數(shù)據(jù)庫進行數(shù)據(jù)同步,不需要多次采集業(yè)務數(shù)據(jù)庫的數(shù)據(jù)變化信息,降低了資源浪費,并且提高了數(shù)據(jù)庫之間的同步效率。實施例2根據(jù)本發(fā)明實施例的另一方面,還提供了一種移動終端,圖6是根據(jù)本發(fā)明實施例的數(shù)據(jù)同步的移動終端的框圖,如圖6所示,所述移動終端包括處理器、存儲器及通信總線;所述通信總線用于實現(xiàn)處理器和存儲器之間的連接通信;所述處理器用于執(zhí)行存儲器中存儲的數(shù)據(jù)同步處理程序,以實現(xiàn)以下步驟:從業(yè)務數(shù)據(jù)庫中獲取日志文件,其中,所述日志文件記錄了所述業(yè)務數(shù)據(jù)庫中全部的數(shù)據(jù)變更;解析所述日志文件得到所述日志文件的數(shù)據(jù);將所述日志文件的數(shù)據(jù)存放到消息隊列中;監(jiān)聽所述消息隊列,獲取發(fā)生變更的數(shù)據(jù),將所述發(fā)生變更的數(shù)據(jù)同步到數(shù)據(jù)中心。優(yōu)選地,所述處理器還用于執(zhí)行數(shù)據(jù)同步處理程序,以實現(xiàn)以下步驟:獲取上一次從所述業(yè)務數(shù)據(jù)庫讀取日志文件的位置信息;與所述業(yè)務數(shù)據(jù)庫建立連接,向所述業(yè)務數(shù)據(jù)庫發(fā)送從所述位置信息獲取日志文件數(shù)據(jù)的指令;接收所述業(yè)務數(shù)據(jù)庫根據(jù)所述指令返回的日志文件。優(yōu)選地,所述處理器還用于執(zhí)行數(shù)據(jù)同步處理程序,以實現(xiàn)以下步驟:通過日志文件協(xié)議對所述日志文件進行解析得到所述日志文件的數(shù)據(jù)。優(yōu)選地,所述處理器還用于執(zhí)行數(shù)據(jù)同步處理程序,以實現(xiàn)以下步驟:將解析得到的所述日志文件的數(shù)據(jù)存儲到消息隊列中,根據(jù)上一次從所述業(yè)務數(shù)據(jù)庫讀取日志文件的位置信息定時記錄所述日志文件的位置信息。優(yōu)選地,所述處理器還用于執(zhí)行數(shù)據(jù)同步處理程序,以實現(xiàn)以下步驟:在將所述數(shù)據(jù)存放到消息隊列中之前,對解析得到的數(shù)據(jù)進行以下處理:過濾、分發(fā)、歸并、加工。優(yōu)選地,所述處理器還用于執(zhí)行數(shù)據(jù)同步處理程序,以實現(xiàn)以下步驟:從所述消息隊列中讀取發(fā)生變更的一條或多條數(shù)據(jù),其中,所述一條或多條數(shù)據(jù)包含:唯一標識和數(shù)據(jù)對象;回滾上次讀取的數(shù)據(jù),基于讀取的數(shù)據(jù)的唯一標識提交到所述數(shù)據(jù)中心;在確認數(shù)據(jù)讀取成功之后,通知所述消息隊列刪除回滾的數(shù)據(jù),并標記本次讀取數(shù)據(jù)的位置。實施例3根據(jù)本發(fā)明實施例的另一方面,還提供了一種計算機可讀存儲介質(zhì),所述計算機可讀存儲介質(zhì)存儲有一個或者多個程序,所述一個或者多個程序可被一個或者多個處理器執(zhí)行,以實現(xiàn)上述數(shù)據(jù)同步處理方法的步驟。本發(fā)明實施例,從業(yè)務數(shù)據(jù)庫中獲取日志文件,其中,所述日志文件記錄了所述業(yè)務數(shù)據(jù)庫中全部的數(shù)據(jù)變更;解析所述日志文件得到所述日志文件的數(shù)據(jù);將所述日志文件的數(shù)據(jù)存放到消息隊列中;監(jiān)聽所述消息隊列,獲取發(fā)生變更的數(shù)據(jù),將所述發(fā)生變更的數(shù)據(jù)同步到數(shù)據(jù)中心,解決了相關技術中數(shù)據(jù)同步存在只能同步數(shù)據(jù)庫的新增數(shù)據(jù)、大量數(shù)據(jù)全量同步相當耗時或者做標記刪除需要一定的開發(fā)維護工作的問題,通過日志文件的方式,避免了數(shù)據(jù)遺漏,采用監(jiān)聽數(shù)據(jù)變更,保證變更的數(shù)據(jù)實時同步,提高了用戶體驗。需要說明的是,在本文中,術語“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含,從而使得包括一系列要素的過程、方法、物品或者裝置不僅包括那些要素,而且還包括沒有明確列出的其他要素,或者是還包括為這種過程、方法、物品或者裝置所固有的要素。在沒有更多限制的情況下,由語句“包括一個……”限定的要素,并不排除在包括該要素的過程、方法、物品或者裝置中還存在另外的相同要素。上述本發(fā)明實施例序號僅僅為了描述,不代表實施例的優(yōu)劣。通過以上的實施方式的描述,本領域的技術人員可以清楚地了解到上述實施例方法可借助軟件加必需的通用硬件平臺的方式來實現(xiàn),當然也可以通過硬件,但很多情況下前者是更佳的實施方式。基于這樣的理解,本發(fā)明的技術方案本質(zhì)上或者說對現(xiàn)有技術做出貢獻的部分可以以軟件產(chǎn)品的形式體現(xiàn)出來,該計算機軟件產(chǎn)品存儲在一個存儲介質(zhì)(如rom/ram、磁碟、光盤)中,包括若干指令用以使得一臺終端(可以是手機,計算機,服務器,空調(diào)器,或者網(wǎng)絡設備等)執(zhí)行本發(fā)明各個實施例所述的方法。上面結(jié)合附圖對本發(fā)明的實施例進行了描述,但是本發(fā)明并不局限于上述的具體實施方式,上述的具體實施方式僅僅是示意性的,而不是限制性的,本領域的普通技術人員在本發(fā)明的啟示下,在不脫離本發(fā)明宗旨和權(quán)利要求所保護的范圍情況下,還可做出很多形式,這些均屬于本發(fā)明的保護之內(nèi)。當前第1頁12當前第1頁12