本發(fā)明涉及大數(shù)據(jù)領(lǐng)域，具體而言，涉及一種大數(shù)據(jù)數(shù)據(jù)治理方法和裝置。

背景技術(shù)：

隨著網(wǎng)絡(luò)信息化時(shí)代的日益普遍，互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、云計(jì)算的飛速發(fā)展以及各種類型的移動(dòng)智能終端應(yīng)用普及，互聯(lián)網(wǎng)的邊界和應(yīng)用范圍得到了極大地拓展，互聯(lián)網(wǎng)(搜索、社交、電商)、移動(dòng)互聯(lián)(微博、微信、翼聊)、物聯(lián)網(wǎng)(傳感器、智慧地球)、電信行業(yè)(通話、上網(wǎng)、短信)等都在瘋狂地產(chǎn)生著數(shù)據(jù)，促使當(dāng)前人類社會(huì)的數(shù)據(jù)增長(zhǎng)比以往任何一個(gè)時(shí)期都要快。據(jù)有關(guān)公司統(tǒng)計(jì)，在2006年，個(gè)人用戶數(shù)據(jù)量剛剛邁進(jìn)tb時(shí)代，全球一共新產(chǎn)生了約180eb的數(shù)據(jù)，到了2010年年底，全球數(shù)據(jù)量已經(jīng)達(dá)到了1.14zb。預(yù)計(jì)到2020年，全球電子設(shè)備存儲(chǔ)的數(shù)據(jù)量將會(huì)達(dá)到35zb，這個(gè)數(shù)據(jù)量是2006年全球電子數(shù)據(jù)存儲(chǔ)量的20多萬倍，這其中企業(yè)數(shù)據(jù)正在以55％的速度逐年增長(zhǎng)。隨著數(shù)據(jù)量越來越大、數(shù)據(jù)變化速度越來越快、數(shù)據(jù)類型越來越復(fù)雜、數(shù)據(jù)特性的逐步演變和發(fā)展，基于海量信息數(shù)據(jù)處理需求等諸多因素，誕生了一個(gè)全新的概念——大數(shù)據(jù)。

大數(shù)據(jù)(bigdata)，或稱巨量資料，指的是所涉及的數(shù)據(jù)量規(guī)模龐大到無法通過目前主流軟件工具，在可以容忍的時(shí)間內(nèi)對(duì)其進(jìn)行抓取、管理、處理的數(shù)據(jù)集合。它的數(shù)據(jù)規(guī)模和轉(zhuǎn)輸速度要求都很高，一般單個(gè)數(shù)據(jù)集在10tb左右，其結(jié)構(gòu)不適合原本的數(shù)據(jù)庫(kù)系統(tǒng)。大數(shù)據(jù)同過去的海量數(shù)據(jù)有所區(qū)別，其基本特征可以用4個(gè)v來總結(jié)：volume、variety、value和velocity即數(shù)據(jù)規(guī)模大、種類繁多、價(jià)值密度低、處理速度快。具體表現(xiàn)為：1)數(shù)據(jù)規(guī)模大，數(shù)據(jù)量從tb級(jí)別躍升到pb級(jí)別。2)數(shù)據(jù)類型繁多，現(xiàn)在的數(shù)據(jù)不僅是文本形式，更多的是視頻、音頻、圖片、地理位置信息多類型的數(shù)據(jù)。3)價(jià)值密度低，價(jià)值密度高低與數(shù)據(jù)總量成反比。以網(wǎng)絡(luò)視頻為例，1小時(shí)的視頻，可能其中只有一分鐘甚至幾秒鐘的數(shù)據(jù)有價(jià)值。4)處理速度快，數(shù)據(jù)處理遵循“1秒定律”，可以從各類型數(shù)據(jù)中快速獲得高價(jià)值信息，這是大數(shù)據(jù)區(qū)分于傳統(tǒng)數(shù)據(jù)挖掘最顯著的特征。

針對(duì)上述大數(shù)據(jù)的4個(gè)基本特征，現(xiàn)有技術(shù)中還沒有一種有效的針對(duì)大數(shù)據(jù)的數(shù)據(jù)治理方法。

針對(duì)上述現(xiàn)有技術(shù)中還沒有有效的大數(shù)據(jù)的數(shù)據(jù)治理方法的問題，目前尚未提出有效的解決方案。

技術(shù)實(shí)現(xiàn)要素：

本發(fā)明實(shí)施例提供了一種大數(shù)據(jù)數(shù)據(jù)治理方法和裝置，以至少解決現(xiàn)有技術(shù)中還沒有有效的大數(shù)據(jù)的數(shù)據(jù)治理方法的技術(shù)問題。

根據(jù)本發(fā)明實(shí)施例的一個(gè)方面，提供了一種大數(shù)據(jù)數(shù)據(jù)治理方法，包括：定義元數(shù)據(jù)；導(dǎo)入元數(shù)據(jù)；對(duì)元數(shù)據(jù)進(jìn)行治理和分析，得到分析結(jié)果；至少根據(jù)分析結(jié)果得到元數(shù)據(jù)圖譜。

根據(jù)本發(fā)明實(shí)施例的另一方面，還提供了一種大數(shù)據(jù)數(shù)據(jù)治理裝置，包括：定義模塊，用于定義元數(shù)據(jù)；導(dǎo)入模塊，用于導(dǎo)入元數(shù)據(jù)；治理分析模塊，用于對(duì)元數(shù)據(jù)進(jìn)行治理和分析，得到分析結(jié)果；圖譜生成模塊，用于至少根據(jù)分析結(jié)果得到元數(shù)據(jù)圖譜。

在本發(fā)明實(shí)施例中，通過定義元數(shù)據(jù)，導(dǎo)入元數(shù)據(jù)，對(duì)元數(shù)據(jù)進(jìn)行治理和分析，得到分析結(jié)果，至少根據(jù)分析結(jié)果得到元數(shù)據(jù)圖譜，達(dá)到了治理大數(shù)據(jù)的目的，從而實(shí)現(xiàn)了高效集成和治理多而復(fù)雜的大數(shù)據(jù)的技術(shù)效果，進(jìn)而解決了現(xiàn)有技術(shù)中還沒有有效的大數(shù)據(jù)的數(shù)據(jù)治理方法的技術(shù)問題。

附圖說明

此處所說明的附圖用來提供對(duì)本發(fā)明的進(jìn)一步理解，構(gòu)成本申請(qǐng)的一部分，本發(fā)明的示意性實(shí)施例及其說明用于解釋本發(fā)明，并不構(gòu)成對(duì)本發(fā)明的不當(dāng)限定。在附圖中：

圖1是根據(jù)本發(fā)明實(shí)施例的一種大數(shù)據(jù)數(shù)據(jù)治理方法的示意圖；

圖1a是根據(jù)本發(fā)明實(shí)施例的一種可選的大數(shù)據(jù)數(shù)據(jù)治理方法的示意圖；

圖1b是根據(jù)本發(fā)明實(shí)施例的一種可選的大數(shù)據(jù)數(shù)據(jù)治理方法的示意圖；

圖1c是根據(jù)本發(fā)明實(shí)施例的一種可選的大數(shù)據(jù)數(shù)據(jù)治理方法的示意圖；

圖1d是根據(jù)本發(fā)明實(shí)施例的一種可選的大數(shù)據(jù)數(shù)據(jù)治理方法的示意圖；

圖1e是根據(jù)本發(fā)明實(shí)施例的一種可選的大數(shù)據(jù)數(shù)據(jù)治理方法的示意圖；以及

圖2是根據(jù)本發(fā)明實(shí)施例的一種大數(shù)據(jù)數(shù)據(jù)治理裝置的示意圖。

具體實(shí)施方式

為了使本技術(shù)領(lǐng)域的人員更好地理解本發(fā)明方案，下面將結(jié)合本發(fā)明實(shí)施例中的附圖，對(duì)本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實(shí)施例僅僅是本發(fā)明一部分的實(shí)施例，而不是全部的實(shí)施例。基于本發(fā)明中的實(shí)施例，本領(lǐng)域普通技術(shù)人員在沒有做出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例，都應(yīng)當(dāng)屬于本發(fā)明保護(hù)的范圍。

需要說明的是，本發(fā)明的說明書和權(quán)利要求書及上述附圖中的術(shù)語(yǔ)“第一”、“第二”等是用于區(qū)別類似的對(duì)象，而不必用于描述特定的順序或先后次序。應(yīng)該理解這樣使用的數(shù)據(jù)在適當(dāng)情況下可以互換，以便這里描述的本發(fā)明的實(shí)施例能夠以除了在這里圖示或描述的那些以外的順序?qū)嵤４送?，術(shù)語(yǔ)“包括”和“具有”以及他們的任何變形，意圖在于覆蓋不排他的包含，例如，包含了一系列步驟或單元的過程、方法、系統(tǒng)、產(chǎn)品或設(shè)備不必限于清楚地列出的那些步驟或單元，而是可包括沒有清楚地列出的或?qū)τ谶@些過程、方法、產(chǎn)品或設(shè)備固有的其它步驟或單元。

實(shí)施例1

根據(jù)本發(fā)明實(shí)施例，提供了一種大數(shù)據(jù)數(shù)據(jù)治理方法的方法實(shí)施例，需要說明的是，在附圖的流程圖示出的步驟可以在諸如一組計(jì)算機(jī)可執(zhí)行指令的計(jì)算機(jī)系統(tǒng)中執(zhí)行，并且，雖然在流程圖中示出了邏輯順序，但是在某些情況下，可以以不同于此處的順序執(zhí)行所示出或描述的步驟。

圖1是根據(jù)本發(fā)明實(shí)施例的大數(shù)據(jù)數(shù)據(jù)治理方法，如圖1所示，該方法包括如下步驟：

步驟s102，定義元數(shù)據(jù)。

可選的，可以使用九連環(huán)數(shù)據(jù)治理平臺(tái)來定義元數(shù)據(jù)，具體的，九連環(huán)數(shù)據(jù)治理平臺(tái)的元數(shù)據(jù)定義接口支持并遵循cwm(公共倉(cāng)庫(kù)元模型)規(guī)范標(biāo)準(zhǔn)，可以作為企業(yè)級(jí)元數(shù)據(jù)管理平臺(tái)，同時(shí)提供內(nèi)置數(shù)據(jù)字典、代碼管理等技術(shù)元數(shù)據(jù)和指標(biāo)、業(yè)務(wù)規(guī)則等業(yè)務(wù)元數(shù)據(jù)以及過程元數(shù)據(jù)，為企業(yè)提供端到端的元數(shù)據(jù)服務(wù)，符合企業(yè)數(shù)據(jù)倉(cāng)庫(kù)環(huán)境的各類元數(shù)據(jù)管理模型。元模型可由用戶自定義擴(kuò)展，按需定制，以滿足客戶化元數(shù)據(jù)的需求，兼具規(guī)范性、靈活性和多樣性，針對(duì)元模型的操作包括元模型查詢、元模型增加、元模型修改、元模型刪除、添加關(guān)系、權(quán)限設(shè)置等，其中，元模型為元數(shù)據(jù)的模型。

步驟s104，導(dǎo)入元數(shù)據(jù)。

步驟s106，對(duì)元數(shù)據(jù)進(jìn)行治理和分析，得到分析結(jié)果。

步驟s108，至少根據(jù)分析結(jié)果得到元數(shù)據(jù)圖譜。

在本發(fā)明實(shí)施例中，通過定義元數(shù)據(jù)，導(dǎo)入元數(shù)據(jù)，對(duì)元數(shù)據(jù)進(jìn)行治理和分析，得到分析結(jié)果，至少根據(jù)分析結(jié)果得到元數(shù)據(jù)圖譜，達(dá)到了治理大數(shù)據(jù)的目的，從而實(shí)現(xiàn)了高校集成和治理多而復(fù)雜的大數(shù)據(jù)的技術(shù)效果，進(jìn)而解決了現(xiàn)有技術(shù)中還沒有有效的大數(shù)據(jù)的數(shù)據(jù)治理方法的技術(shù)問題。

在一種可選的實(shí)施例中，步驟s102中定義元數(shù)據(jù)，至少包括：定義元數(shù)據(jù)的數(shù)據(jù)源、質(zhì)量維度、檢核類別、數(shù)據(jù)質(zhì)量衡量標(biāo)準(zhǔn)、檢核方法、檢核方法審核。

具體的，定義元數(shù)據(jù)的數(shù)據(jù)源也就是對(duì)數(shù)據(jù)源進(jìn)行配置，可選的，可以獲取數(shù)據(jù)源連接的必要參數(shù)，比如數(shù)據(jù)庫(kù)驅(qū)動(dòng)名稱、連接url、數(shù)據(jù)庫(kù)連接用戶名和密碼等，在具體應(yīng)用中，只有獲取目標(biāo)系統(tǒng)的數(shù)據(jù)源連接，才能在目標(biāo)系統(tǒng)中執(zhí)行檢核腳本。

具體的，本實(shí)施例中可以通過對(duì)不同業(yè)務(wù)規(guī)則的收集、分類、抽象和概括，來定義多種質(zhì)量維度。質(zhì)量維度反映了數(shù)據(jù)質(zhì)量不同的規(guī)格標(biāo)準(zhǔn)，也體現(xiàn)了高層次的指標(biāo)度量的特點(diǎn)。

具體的，本實(shí)施例中可以在質(zhì)量維度的基礎(chǔ)上根據(jù)各業(yè)務(wù)規(guī)則的具體特點(diǎn)細(xì)化出檢核類別，其中，檢核類別可以為多種，檢核類別從實(shí)施的角度對(duì)各質(zhì)量維度進(jìn)行更小粒度的劃分，并直接對(duì)度量規(guī)則的提出進(jìn)行指導(dǎo)性的定義和說明，使得數(shù)據(jù)質(zhì)量問題更具有條理性和層次感，并可以直接體現(xiàn)出問題數(shù)據(jù)的特征。

具體的，數(shù)據(jù)質(zhì)量衡量標(biāo)準(zhǔn)也可以稱為度量規(guī)則，度量規(guī)則是由業(yè)務(wù)人員根據(jù)各檢核類別對(duì)不同的業(yè)務(wù)實(shí)體提出的數(shù)據(jù)質(zhì)量的衡量標(biāo)準(zhǔn)。它是各檢核類別在不同業(yè)務(wù)實(shí)體上的具體體現(xiàn)。針對(duì)不同的業(yè)務(wù)實(shí)體依據(jù)檢核類別定義出度量規(guī)則，每一個(gè)度量規(guī)則都是從業(yè)務(wù)實(shí)體的角度上對(duì)質(zhì)量問題進(jìn)行簡(jiǎn)單的描述，都包含一個(gè)或多個(gè)信息項(xiàng)，這些信息項(xiàng)就是每一個(gè)業(yè)務(wù)實(shí)體具體所要檢核的對(duì)象，在每一個(gè)度量規(guī)則的基礎(chǔ)上根據(jù)不同的信息項(xiàng)可以定義出具體的檢核方法。

具體的，檢核方法是度量規(guī)則在不同信息項(xiàng)上的落地實(shí)施，也是檢核任務(wù)執(zhí)行的主體。根據(jù)度量規(guī)則中不同的信息項(xiàng)定義出不同的檢核方法，每一個(gè)檢核方法根據(jù)其檢核對(duì)象定義各自的檢核腳本以及相關(guān)的屬性信息，其中，檢核方法中的檢核腳本就是執(zhí)行檢核操作時(shí)所實(shí)際執(zhí)行的腳本，它反映了質(zhì)量問題的檢核邏輯，根據(jù)檢核類別的不同，其復(fù)雜度也不同?？蛇x的，可以使用檢核腳本生成引擎來依據(jù)制定的檢核方法文檔數(shù)據(jù)自動(dòng)生成可執(zhí)行的腳步，其中可自動(dòng)生成可執(zhí)行的腳步的檢核包括非法值檢核、空值檢核、碼值檢核、主鍵重復(fù)檢核、主外鍵檢核、業(yè)務(wù)約束檢核等。

具體的，為了方便檢核腳本的定義，可以預(yù)設(shè)腳本配置模板，在填寫好腳本配置模板后，便可生成檢核方法各自的檢核腳本?？蛇x的，可以預(yù)設(shè)腳本配置模板對(duì)應(yīng)的界面/頁(yè)面，在頁(yè)面上導(dǎo)入腳本配置模板后便可自動(dòng)生成檢核方法，在對(duì)檢核方法的正確性進(jìn)行校驗(yàn)后，對(duì)于配置錯(cuò)誤的腳本會(huì)予以標(biāo)識(shí)，并可在界面中查詢錯(cuò)誤信息。

可選的，除了上述定義元數(shù)據(jù)的數(shù)據(jù)源、質(zhì)量維度、檢核類別、數(shù)據(jù)質(zhì)量衡量標(biāo)準(zhǔn)、檢核方法、檢核方法審核之外，還包括其他一些參數(shù)配置、結(jié)果明細(xì)頁(yè)面顯示配置等，其中，參數(shù)配置中包括一些預(yù)設(shè)的參數(shù)類型以及用戶自定義參數(shù)配置，用戶可在參數(shù)配置中維護(hù)(新增或修改)不同的參數(shù)類型。

可選的，可以通過對(duì)企業(yè)中多個(gè)案例的總結(jié)，形成完整的企業(yè)級(jí)規(guī)范與實(shí)施方法論，并形成度量規(guī)則、檢核方法等的模板，按模板向?qū)б龑?dǎo)用戶將數(shù)據(jù)質(zhì)量檢核需求落實(shí)成技術(shù)化的度量規(guī)則和檢核方法，降低配置成本，提高實(shí)施效率。

在一種可選的實(shí)施例中，如圖1a所示，元數(shù)據(jù)可以來源于下述服務(wù)或應(yīng)用：數(shù)據(jù)、副本、etl(數(shù)據(jù)倉(cāng)庫(kù)技術(shù)，extract-transform-load的簡(jiǎn)寫)、緩沖、倉(cāng)庫(kù)、集市、服務(wù)、應(yīng)用等，從而形成數(shù)據(jù)元數(shù)據(jù)、副本元數(shù)據(jù)、etl元數(shù)據(jù)、緩沖元數(shù)據(jù)、倉(cāng)庫(kù)元數(shù)據(jù)、集市元數(shù)據(jù)、服務(wù)元數(shù)據(jù)、應(yīng)用元數(shù)據(jù)等，并形成分布式共享中央元數(shù)據(jù)，存儲(chǔ)在多個(gè)中央存儲(chǔ)中。

在一種可選的實(shí)施例中，導(dǎo)入元數(shù)據(jù)，包括：根據(jù)預(yù)設(shè)模板導(dǎo)入元數(shù)據(jù)。

具體的，預(yù)設(shè)模板主要為自動(dòng)和手動(dòng)導(dǎo)入元數(shù)據(jù)時(shí)使用，在技術(shù)人員需要導(dǎo)入/導(dǎo)出元數(shù)據(jù)時(shí)，提供導(dǎo)入數(shù)據(jù)的格式。

可選的，在獲取元數(shù)據(jù)時(shí)，可以通過其他軟件工具，例如mysql、sqlserver、oracle、db2等，自動(dòng)或手動(dòng)獲取元數(shù)據(jù)。

在一種可選的實(shí)施例中，預(yù)設(shè)模板為excel格式的文件，根據(jù)預(yù)設(shè)模板導(dǎo)入元數(shù)據(jù)，包括：將元模型中每個(gè)類型的元數(shù)據(jù)以及元數(shù)據(jù)之間的依賴關(guān)系導(dǎo)入預(yù)設(shè)模板的不同工作表中，其中，元模型為用于描述元數(shù)據(jù)的模型，至少包括元數(shù)據(jù)的類型。

具體的，預(yù)設(shè)模板主要用于采集元數(shù)據(jù)，適用于元數(shù)據(jù)的導(dǎo)入導(dǎo)出，預(yù)設(shè)模板可以采用excel作為文件的格式，對(duì)于一般類型的預(yù)設(shè)模板，元模型中的每個(gè)類的元數(shù)據(jù)對(duì)應(yīng)一個(gè)excel中的sheet工作表，其中，元模型中包括至少一種元數(shù)據(jù)類型；元數(shù)據(jù)之間的組合關(guān)系通過被組合的元數(shù)據(jù)路徑體現(xiàn)，元數(shù)據(jù)之間的依賴關(guān)系可以用專門的sheet存放，用戶可按需要靈活定制excel中的名字、sheet中列于元模型的對(duì)應(yīng)關(guān)系，為了便于使用，可以按類型屬性的數(shù)據(jù)類型在excel中增加數(shù)據(jù)有效性驗(yàn)證。

在一種可選的實(shí)施例中，在導(dǎo)入元數(shù)據(jù)之前，需要根據(jù)元數(shù)據(jù)的映射關(guān)系對(duì)相同的元數(shù)據(jù)進(jìn)行合并。

具體的，為解決在企業(yè)bi建設(shè)中存在的不同層之間的多個(gè)元數(shù)據(jù)，但描述的是同一個(gè)元數(shù)據(jù)的現(xiàn)象，也包括在設(shè)計(jì)和實(shí)現(xiàn)之間存在的多個(gè)元數(shù)據(jù)，但描述的是同一元數(shù)據(jù)的現(xiàn)象，本發(fā)明提供了兩種解決方法，其一是通過提出引入元數(shù)據(jù)映射管理的概念，其主要思路是通過配置元數(shù)據(jù)之間的映射關(guān)系，在有映射關(guān)系的元數(shù)據(jù)目錄下，如果元數(shù)據(jù)的代碼相同則認(rèn)為是同一元數(shù)據(jù)，元數(shù)據(jù)映射功能需要建立模型映射，再建立元數(shù)據(jù)映射，模型映射的目的是為了使不同工具但本質(zhì)上相同的元數(shù)據(jù)建立映射關(guān)系。其二自動(dòng)建立元數(shù)據(jù)間的映射，采集適配器在采集元數(shù)據(jù)采集的時(shí)候自動(dòng)建立起元數(shù)據(jù)間的映射關(guān)系。

在一種可選的實(shí)施例中，在導(dǎo)入元數(shù)據(jù)之后，還包括對(duì)元數(shù)據(jù)進(jìn)行檢核。

具體的，對(duì)元數(shù)據(jù)進(jìn)行檢核是通過執(zhí)行檢核方法生成相應(yīng)的檢核結(jié)果問題數(shù)據(jù)文件，其中，檢核結(jié)果問題數(shù)據(jù)能夠反映出用戶所關(guān)心的數(shù)據(jù)質(zhì)量問題。

可選的，對(duì)元數(shù)據(jù)進(jìn)行檢核主要包括檢核任務(wù)生成、檢核任務(wù)執(zhí)行和檢核結(jié)果文件生成三部分。

具體的，檢核任務(wù)生成中，在上游系統(tǒng)批處理作業(yè)結(jié)束之后會(huì)觸發(fā)執(zhí)行檢核任務(wù)生成程序，并生成相應(yīng)的檢核任務(wù)列表，發(fā)現(xiàn)有待執(zhí)行的檢核任務(wù)并且當(dāng)前沒有正在執(zhí)行的檢核任務(wù)便會(huì)啟動(dòng)檢核任務(wù)，檢核任務(wù)開始后立即將此任務(wù)的狀態(tài)更改為“正在執(zhí)行”，在執(zhí)行檢核過程中發(fā)現(xiàn)錯(cuò)誤，即可將此檢核方法對(duì)應(yīng)的檢核任務(wù)狀態(tài)置為“執(zhí)行出錯(cuò)”，對(duì)于成功檢核完成的任務(wù)，將其置為“檢核完成”。

具體的，檢核任務(wù)執(zhí)行可以采用多線程執(zhí)行方式，一個(gè)檢核任務(wù)通常包含很多檢核方法，為了提高檢核的效率，可以采用多線程方式來提高并發(fā)處理能力，具體為根據(jù)此次檢核任務(wù)的檢核方法數(shù)目來決定此次檢核任務(wù)分配的線程數(shù)，同時(shí)為了避免造成過大的檢核壓力，可以預(yù)配置一個(gè)最大線程數(shù)。檢核方法會(huì)被分配給多個(gè)檢核線程(線程數(shù)目由此次執(zhí)行的檢核方法數(shù)目決定，并擁有一個(gè)最大線程數(shù))，這些檢核線程會(huì)同時(shí)啟動(dòng)，并且同時(shí)啟動(dòng)一個(gè)伴隨線程，其中，伴隨線程用于記錄這些檢核方法的執(zhí)行結(jié)果日志。

具體的，檢核結(jié)果文件生成中，在檢核任務(wù)執(zhí)行過程中，依次執(zhí)行各個(gè)檢核方法，檢核方法的執(zhí)行實(shí)際上就是其檢核腳本的執(zhí)行。這些檢核方法如果有查詢出的數(shù)據(jù)便會(huì)在receive目錄中生成其對(duì)應(yīng)的檢核結(jié)果文件(dat文件)，并同時(shí)生成一個(gè)同名的xml文件，作為結(jié)果文件到達(dá)的就緒標(biāo)識(shí)，所有上述文件會(huì)存放在receive目錄中的以此次任務(wù)的檢核日期為名稱的文件夾中。

在一種可選的實(shí)施例中，對(duì)元數(shù)據(jù)進(jìn)行治理至少包括：對(duì)元數(shù)據(jù)進(jìn)行維護(hù)、查詢、導(dǎo)出、版本管理、變更管理以及檢核結(jié)果采集。

具體的，元數(shù)據(jù)維護(hù)中，主要維護(hù)元數(shù)據(jù)基本信息、屬性、被依賴關(guān)系、依賴關(guān)系、組合關(guān)系的查詢修改和刪除操作，元數(shù)據(jù)維護(hù)是最基本的管理手段之一，技術(shù)人員和業(yè)務(wù)人員可以使用該功能查看元數(shù)據(jù)的基本信息。元數(shù)據(jù)查詢中，可以根據(jù)搜索條件，查詢符合數(shù)據(jù)訪問權(quán)限的元數(shù)據(jù)。元數(shù)據(jù)導(dǎo)出中，主要指元數(shù)據(jù)和分析結(jié)果的數(shù)據(jù)導(dǎo)出功能，對(duì)元數(shù)據(jù)樹上需要導(dǎo)出的元數(shù)據(jù)可以全部導(dǎo)出為excel文件，對(duì)影響分析、血統(tǒng)分析、etl映射分析等分析結(jié)果可以支持?jǐn)?shù)據(jù)導(dǎo)出和圖片導(dǎo)出。元數(shù)據(jù)版本管理中，主要是對(duì)元數(shù)據(jù)的生命周期管理，包括對(duì)元數(shù)據(jù)的發(fā)布、刪除和狀態(tài)變更等都有嚴(yán)格的管理流程，并提供了版本管理功能，以確保元數(shù)據(jù)的質(zhì)量，保證元數(shù)據(jù)的權(quán)威性和可靠性。元數(shù)據(jù)變更管理中，用戶可以自行訂閱關(guān)注的元數(shù)據(jù)，當(dāng)這些元數(shù)據(jù)發(fā)生變更后，可以以用戶指定的形式通知用戶變更的發(fā)生，用戶可根據(jù)指引，進(jìn)一步查詢到該變更的具體內(nèi)容及相關(guān)的影響分析，其中，變更可以不在第一時(shí)間通知用戶，可以預(yù)設(shè)檢查周期，在檢查周期內(nèi)如果元數(shù)據(jù)發(fā)生變更，則通知用戶。檢核結(jié)果采集中，可以預(yù)設(shè)采集程序，在采集程序使用quartz作業(yè)的方式進(jìn)行輪詢采集的情況下，由于每次需要采集的文件數(shù)量不同，所包含的數(shù)據(jù)量也不同，再加之其他因素的可能性干擾，所以每一次作業(yè)所使用的時(shí)間不會(huì)相同，這樣就會(huì)使得每一次作業(yè)啟動(dòng)時(shí)上一次作業(yè)未必已經(jīng)結(jié)束，為了避免不同作業(yè)批次之間的資源爭(zhēng)用問題，可以采用單作業(yè)執(zhí)行的方式，如果作業(yè)啟動(dòng)時(shí)上一次作業(yè)還沒有結(jié)束，則本次作業(yè)自動(dòng)結(jié)束，直到上次作業(yè)結(jié)束才啟動(dòng)下一次作業(yè)，檢核結(jié)果采集中可以將檢核結(jié)果文件采集入庫(kù)，并在采集過程中對(duì)這些檢核結(jié)果數(shù)據(jù)進(jìn)行簡(jiǎn)單的匯總操作，并將這些明細(xì)數(shù)據(jù)和匯總數(shù)據(jù)分別存入結(jié)果明細(xì)表和匯總表，此過程中如果發(fā)生了異常則對(duì)數(shù)據(jù)庫(kù)表進(jìn)行回滾操作，以避免出現(xiàn)不完整的數(shù)據(jù)，然后將此文件移至error目錄，每一個(gè)結(jié)果文件在采集入庫(kù)后都將被刪除，在所有的結(jié)果文件采集結(jié)束后，判斷當(dāng)前文件夾下是否還有未采集的結(jié)果文件，如果沒有便刪除當(dāng)前文件夾；如果仍然存在結(jié)果文件，比如因就緒文件未到達(dá)而沒有采集的文件，則保留當(dāng)前文件夾中的所有文件，等待下次采集時(shí)間點(diǎn)的到達(dá)。

可選的，對(duì)元數(shù)據(jù)進(jìn)行治理還包括生成跨工具和應(yīng)用的企業(yè)級(jí)的元數(shù)據(jù)統(tǒng)一視圖，為清晰定義和分析跟蹤業(yè)務(wù)運(yùn)作歷史數(shù)據(jù)提供實(shí)際可行的解決方案。

可選的，對(duì)元數(shù)據(jù)進(jìn)行治理時(shí)可以提前生成按照業(yè)務(wù)線的企業(yè)數(shù)據(jù)流圖，業(yè)務(wù)人員可以個(gè)性化該企業(yè)數(shù)據(jù)流圖，主要體現(xiàn)其中一個(gè)或多個(gè)業(yè)務(wù)線，方便業(yè)務(wù)人員理解。

在一種可選的實(shí)施例中，如圖1b所示，數(shù)據(jù)治理中的業(yè)務(wù)線包括erp(企業(yè)資源計(jì)劃，enterpriseresourceplanning的簡(jiǎn)稱)、crm(客戶關(guān)系管理，customerrelationshipmanagement的簡(jiǎn)稱)、scm(供應(yīng)鏈管理，supplychainmanagement的簡(jiǎn)稱)、bpm(業(yè)務(wù)流程管理，bpm-businessprocessmanagement的簡(jiǎn)稱)、archive(歸檔)、mdm(移動(dòng)設(shè)備管理，mobiledevicemanagement的簡(jiǎn)稱)、etl(extract-transform-load)、ba(商業(yè)分析，businessanalytics的簡(jiǎn)稱)、v&d(可視化與控制臺(tái)，visualization&dashboards的簡(jiǎn)稱)等。

在一種可選的實(shí)施例中，對(duì)元數(shù)據(jù)進(jìn)行分析，至少包括：采用血統(tǒng)分析、詳細(xì)分析、匯總分析、概覽分析、影響分析、詳細(xì)分析、匯總分析、概覽分析的方式對(duì)元數(shù)據(jù)進(jìn)行分析。

具體的，針對(duì)血統(tǒng)分析，血統(tǒng)分析是建立在企業(yè)整體元數(shù)據(jù)整合的基礎(chǔ)上，提供了跨it系統(tǒng)、跨bi工具的元數(shù)據(jù)分析，能夠了解數(shù)據(jù)流動(dòng)變化的來源和目的，實(shí)現(xiàn)以數(shù)據(jù)流向?yàn)橹骶€的血緣追溯。血統(tǒng)分析的作用主要表現(xiàn)為以下幾個(gè)方面，提升報(bào)表信息的可信度，為企業(yè)數(shù)據(jù)的合規(guī)性提供驗(yàn)證手段，幫助業(yè)務(wù)部門與it支撐部門實(shí)現(xiàn)信息共享、提升協(xié)調(diào)工作效率等。

具體的，針對(duì)影響分析，為了實(shí)現(xiàn)正確、及時(shí)的分析功能，可以將企業(yè)元數(shù)據(jù)進(jìn)行整合，改變?cè)懈鱥t系統(tǒng)、bi工具集數(shù)據(jù)模型等元數(shù)據(jù)間各自隔離、互補(bǔ)關(guān)聯(lián)的現(xiàn)狀，有效地將各部分的局部表述統(tǒng)一為整體，歸并重復(fù)表述，并對(duì)沖突表述進(jìn)行甄別并提供進(jìn)一步處理，在此基礎(chǔ)上影響分析提供基于數(shù)據(jù)流影響分析功能。用戶分析能迅速了解分析對(duì)象的下游數(shù)據(jù)信息，快速識(shí)別元數(shù)據(jù)的價(jià)值，掌握元數(shù)據(jù)變更可能造成的影響，以便更有效的評(píng)估變化帶來的風(fēng)險(xiǎn)，從而幫助用戶有高效準(zhǔn)確的對(duì)數(shù)據(jù)資產(chǎn)進(jìn)行清理、維護(hù)與使用。

可選的，針對(duì)血統(tǒng)分析和影響分析，可以提供詳細(xì)分析、概覽分析和匯總分析三種粒度的分析，實(shí)現(xiàn)數(shù)據(jù)的細(xì)粒度展現(xiàn)到粗粒度展現(xiàn)的切換，為用戶提供多視角的分析結(jié)果展現(xiàn)。

具體的，分析結(jié)果可以以分析表的形式存儲(chǔ)，分析表元數(shù)據(jù)與其他元數(shù)據(jù)的關(guān)系出現(xiàn)次數(shù)(如：表與etl程序、表與olap、表與指標(biāo)等)決定了分析表的重要程度，出現(xiàn)次數(shù)越多的分析表重要程度越高，分析表可以用于展現(xiàn)表的依賴程度，在這些表需要變動(dòng)時(shí)，也可以查詢它的影響范圍，方便技術(shù)人員使用。

在一種可選的實(shí)施例中，在整個(gè)數(shù)據(jù)的計(jì)算分析過程中，可以記錄下計(jì)算的原始數(shù)據(jù)、計(jì)算的結(jié)果數(shù)據(jù)，如圖1c所示，原始數(shù)據(jù)在經(jīng)過數(shù)據(jù)加載程序和數(shù)據(jù)清洗數(shù)據(jù)后，記錄計(jì)算的結(jié)果數(shù)據(jù)；在整個(gè)數(shù)據(jù)的計(jì)算分析過程中，也可以計(jì)算分析單元的元數(shù)據(jù)、以及各個(gè)角色之間的關(guān)系的元數(shù)據(jù)，形成數(shù)據(jù)的血脈關(guān)系，為元數(shù)據(jù)分析提供基礎(chǔ)數(shù)據(jù)的準(zhǔn)備，如圖1d所示，可以計(jì)算分析源數(shù)據(jù)表sample_07和源數(shù)據(jù)表sample_08之間的關(guān)系，形成結(jié)果數(shù)據(jù)表sample_09。

在一種可選的實(shí)施例中，至少根據(jù)分析結(jié)果得到元數(shù)據(jù)圖譜中，元數(shù)據(jù)圖譜可以具體指數(shù)據(jù)地圖。

具體的，由于企業(yè)內(nèi)的元數(shù)據(jù)種類繁多、形式各異，對(duì)元數(shù)據(jù)進(jìn)行集中和管理中，如何提供便捷的使用方式，成為發(fā)揮企業(yè)信息資產(chǎn)價(jià)值的關(guān)鍵。前文中提到的用戶數(shù)據(jù)視圖、元數(shù)據(jù)查詢等功能為面向元數(shù)據(jù)細(xì)節(jié)信息的使用需求，更適用于具體的人員、部門基于元數(shù)據(jù)開展相關(guān)工作，但是對(duì)于企業(yè)管理人員等高層，由于關(guān)注范圍更加廣泛，大量的細(xì)節(jié)信息不能有效的滿足該類用戶的需要，而企業(yè)的數(shù)據(jù)地圖用于宏觀層面以及組織信息，能夠以用戶視角對(duì)企業(yè)信息進(jìn)行歸并、整理，展現(xiàn)企業(yè)的宏觀信息并有效挖掘企業(yè)信息的潛在價(jià)值。如圖1e所示，圖1e為一種數(shù)據(jù)地圖的示例。

在一種可選的實(shí)施例中，在得到元數(shù)據(jù)圖譜后，可以根據(jù)元數(shù)據(jù)圖譜進(jìn)行問題數(shù)據(jù)分析，具體包括針對(duì)檢核對(duì)象問題數(shù)據(jù)的監(jiān)控檢索、對(duì)問題數(shù)據(jù)數(shù)量變化的趨勢(shì)分析、對(duì)問題數(shù)據(jù)不同檢核類別的數(shù)據(jù)分布分析以及對(duì)問題數(shù)據(jù)的整體分析功能，并且可以生成數(shù)據(jù)質(zhì)量報(bào)告，啟動(dòng)問題治理流程。

具體的，問題數(shù)據(jù)檢索中，可根據(jù)不同條件進(jìn)行組合檢索，還可對(duì)查詢結(jié)果(包括匯總數(shù)據(jù)和明細(xì)數(shù)據(jù))進(jìn)行自定義排序以及根據(jù)問題率對(duì)結(jié)果數(shù)據(jù)進(jìn)行篩選，在查看結(jié)果明細(xì)數(shù)據(jù)時(shí)，用戶可自定義定制自己的明細(xì)數(shù)據(jù)顯示列。在趨勢(shì)分析中，用戶可選擇一段時(shí)間內(nèi)的同一個(gè)檢核方法所檢核出的問題數(shù)據(jù)量的變化趨勢(shì)圖，以更直觀的方式查看數(shù)據(jù)質(zhì)量問題的變化以及對(duì)質(zhì)量問題的治理結(jié)果。數(shù)據(jù)質(zhì)量報(bào)告中，具體可以包括數(shù)據(jù)問題分析報(bào)告、度量規(guī)則和檢核方法分析報(bào)告等，也可以包括其他可定制化開發(fā)數(shù)據(jù)報(bào)告，數(shù)據(jù)質(zhì)量報(bào)告提供了一個(gè)集中展示數(shù)據(jù)質(zhì)量狀況的窗口，數(shù)據(jù)質(zhì)量管理人員召集相關(guān)人員對(duì)數(shù)據(jù)質(zhì)量報(bào)告進(jìn)行分析討論，以總結(jié)經(jīng)驗(yàn)、沉淀知識(shí)和改進(jìn)方法，不斷提高各數(shù)據(jù)平臺(tái)數(shù)據(jù)質(zhì)量問題的處理能力，其中，數(shù)據(jù)質(zhì)量報(bào)告支持圖形化展現(xiàn)，并可支持鉆取到明細(xì)頁(yè)面，打通鏈路，支持實(shí)時(shí)導(dǎo)出即見即所得。

在一種可選的實(shí)施例中，方法基于九連環(huán)大數(shù)據(jù)平臺(tái)實(shí)現(xiàn)。

具體的，本發(fā)明的大數(shù)據(jù)數(shù)據(jù)治理方法可以基于九連環(huán)大數(shù)據(jù)平臺(tái)實(shí)現(xiàn)，提供具體的九連環(huán)融合平臺(tái)數(shù)據(jù)治理服務(wù)。

通過上述所有的實(shí)施例，本發(fā)明提供了一種在大數(shù)據(jù)場(chǎng)景下的可伸縮、可擴(kuò)展、全配置、支持動(dòng)態(tài)數(shù)據(jù)探查與多維數(shù)據(jù)接入、能夠自動(dòng)化分析血緣關(guān)系與影響力的大數(shù)據(jù)數(shù)據(jù)治理方法，可以應(yīng)用到治理以及服務(wù)多而復(fù)雜的各個(gè)子系統(tǒng)中，能夠解決各個(gè)子系統(tǒng)之間參差不齊的依賴關(guān)系，高效的集成與治理數(shù)據(jù)生態(tài)，具體的，通過接入行業(yè)的各類數(shù)據(jù)，并全面共享元數(shù)據(jù)，提供了統(tǒng)一的數(shù)據(jù)字典，通過數(shù)據(jù)管理系統(tǒng)建立了數(shù)據(jù)標(biāo)準(zhǔn)和技術(shù)數(shù)據(jù)的映射，輔助數(shù)據(jù)標(biāo)準(zhǔn)的落地執(zhí)行，通過數(shù)據(jù)治理平臺(tái)構(gòu)建數(shù)據(jù)流視圖，提供了數(shù)據(jù)的血統(tǒng)、影響分析，輔助系統(tǒng)的開發(fā)運(yùn)維和集中的管理與審計(jì)，提高采集的自動(dòng)化程度，確保數(shù)據(jù)獲取的及時(shí)性和準(zhǔn)確性。

實(shí)施例2

根據(jù)本發(fā)明實(shí)施例，提供了一種大數(shù)據(jù)數(shù)據(jù)治理裝置的產(chǎn)品實(shí)施例，圖2是根據(jù)本發(fā)明實(shí)施例的大數(shù)據(jù)數(shù)據(jù)治理裝置，如圖2所示，該裝置包括定義模塊、導(dǎo)入模塊、治理分析模塊和圖譜生成模塊。其中，定義模塊，用于定義元數(shù)據(jù)；導(dǎo)入模塊，用于導(dǎo)入元數(shù)據(jù)；治理分析模塊，用于對(duì)元數(shù)據(jù)進(jìn)行治理和分析，得到分析結(jié)果；圖譜生成模塊，用于至少根據(jù)分析結(jié)果得到元數(shù)據(jù)圖譜。

在本發(fā)明實(shí)施例中，通過定義模塊定義元數(shù)據(jù)，并由導(dǎo)入模塊導(dǎo)入元數(shù)據(jù)，由治理分析模塊對(duì)元數(shù)據(jù)進(jìn)行治理和分析，得到分析結(jié)果，最后由圖譜生成模塊至少根據(jù)分析結(jié)果得到元數(shù)據(jù)圖譜，達(dá)到了治理大數(shù)據(jù)的目的，從而實(shí)現(xiàn)了高校集成和治理多而復(fù)雜的大數(shù)據(jù)的技術(shù)效果，進(jìn)而解決了現(xiàn)有技術(shù)中還沒有有效的大數(shù)據(jù)的數(shù)據(jù)治理方法的技術(shù)問題。

此處需要說明的是，上述定義模塊、導(dǎo)入模塊、治理分析模塊和圖譜生成模塊對(duì)應(yīng)于實(shí)施例1中的步驟s102至步驟s108，上述模塊與對(duì)應(yīng)的步驟所實(shí)現(xiàn)的示例和應(yīng)用場(chǎng)景相同，但不限于上述實(shí)施例1所公開的內(nèi)容。需要說明的是，上述模塊作為裝置的一部分可以在諸如一組計(jì)算機(jī)可執(zhí)行指令的計(jì)算機(jī)系統(tǒng)中執(zhí)行。

在一種可選的實(shí)施例中，定義模塊定義元數(shù)據(jù)，至少包括：定義元數(shù)據(jù)的數(shù)據(jù)源、質(zhì)量維度、檢核類別、數(shù)據(jù)質(zhì)量衡量標(biāo)準(zhǔn)、檢核方法、檢核方法審核。

在一種可選的實(shí)施例中，導(dǎo)入模塊導(dǎo)入元數(shù)據(jù)，包括：根據(jù)預(yù)設(shè)模板導(dǎo)入元數(shù)據(jù)。

在一種可選的實(shí)施例中，預(yù)設(shè)模板為excel格式的文件，導(dǎo)入模塊根據(jù)預(yù)設(shè)模板導(dǎo)入元數(shù)據(jù)，包括：將元模型中每個(gè)類型的元數(shù)據(jù)以及元數(shù)據(jù)之間的依賴關(guān)系導(dǎo)入預(yù)設(shè)模板的不同工作表中，其中，元模型為用于描述元數(shù)據(jù)的模型，至少包括元數(shù)據(jù)的類型。

在一種可選的實(shí)施例中，治理分析模塊對(duì)元數(shù)據(jù)進(jìn)行治理至少包括：對(duì)元數(shù)據(jù)進(jìn)行維護(hù)、查詢、導(dǎo)出、版本管理、變更管理以及檢核結(jié)果采集。

在一種可選的實(shí)施例中，治理分析模塊對(duì)元數(shù)據(jù)進(jìn)行分析，至少包括：采用血統(tǒng)分析、詳細(xì)分析、匯總分析、概覽分析、影響分析、詳細(xì)分析、匯總分析、概覽分析的方式對(duì)元數(shù)據(jù)進(jìn)行分析。

在一種可選的實(shí)施例中，方法基于九連環(huán)大數(shù)據(jù)平臺(tái)實(shí)現(xiàn)。

此處需要說明的是，大數(shù)據(jù)數(shù)據(jù)治理裝置的其他技術(shù)特征可以參照上述大數(shù)據(jù)數(shù)據(jù)治理方法，此處不再贅述。

實(shí)施例3

根據(jù)本發(fā)明實(shí)施例，提供了一種存儲(chǔ)介質(zhì)的產(chǎn)品實(shí)施例，該存儲(chǔ)介質(zhì)包括存儲(chǔ)的程序，其中，在程序運(yùn)行時(shí)控制存儲(chǔ)介質(zhì)所在設(shè)備執(zhí)行大數(shù)據(jù)數(shù)據(jù)治理方法。

實(shí)施例4

根據(jù)本發(fā)明實(shí)施例，提供了一種處理器的產(chǎn)品實(shí)施例，該處理器用于運(yùn)行程序，其中，程序運(yùn)行時(shí)執(zhí)行大數(shù)據(jù)數(shù)據(jù)治理方法。

實(shí)施例5

根據(jù)本發(fā)明實(shí)施例，提供了一種終端的產(chǎn)品實(shí)施例，該終端包括定義模塊、導(dǎo)入模塊、治理分析模塊、圖譜生成模塊和處理器，其中，定義模塊，用于定義元數(shù)據(jù)；

導(dǎo)入模塊，用于導(dǎo)入元數(shù)據(jù)；治理分析模塊，用于對(duì)元數(shù)據(jù)進(jìn)行治理和分析，得到分析結(jié)果；圖譜生成模塊，用于至少根據(jù)分析結(jié)果得到元數(shù)據(jù)圖譜；處理器，處理器運(yùn)行程序，其中，程序運(yùn)行時(shí)對(duì)于從定義模塊、導(dǎo)入模塊、治理分析模塊和圖譜生成模塊輸出的數(shù)據(jù)執(zhí)行如下處理步驟：第一步驟，定義元數(shù)據(jù)；第二步驟，導(dǎo)入元數(shù)據(jù)；第三步驟，對(duì)元數(shù)據(jù)進(jìn)行治理和分析，得到分析結(jié)果；以及第四步驟，至少根據(jù)分析結(jié)果得到元數(shù)據(jù)圖譜。

實(shí)施例6

根據(jù)本發(fā)明實(shí)施例，提供了一種終端的產(chǎn)品實(shí)施例，該終端包括定義模塊、導(dǎo)入模塊、治理分析模塊、圖譜生成模塊和存儲(chǔ)介質(zhì)，其中，定義模塊，用于定義元數(shù)據(jù)；導(dǎo)入模塊，用于導(dǎo)入元數(shù)據(jù)；治理分析模塊，用于對(duì)元數(shù)據(jù)進(jìn)行治理和分析，得到分析結(jié)果；圖譜生成模塊，用于至少根據(jù)分析結(jié)果得到元數(shù)據(jù)圖譜；存儲(chǔ)介質(zhì)，用于存儲(chǔ)程序，其中，程序在運(yùn)行時(shí)對(duì)于從定義模塊、導(dǎo)入模塊、治理分析模塊和圖譜生成模塊輸出的數(shù)據(jù)執(zhí)行如下處理步驟：第一步驟，定義元數(shù)據(jù)；第二步驟，導(dǎo)入元數(shù)據(jù)；第三步驟，對(duì)元數(shù)據(jù)進(jìn)行治理和分析，得到分析結(jié)果；以及第四步驟，至少根據(jù)分析結(jié)果得到元數(shù)據(jù)圖譜。

上述本發(fā)明實(shí)施例序號(hào)僅僅為了描述，不代表實(shí)施例的優(yōu)劣。

在本發(fā)明的上述實(shí)施例中，對(duì)各個(gè)實(shí)施例的描述都各有側(cè)重，某個(gè)實(shí)施例中沒有詳述的部分，可以參見其他實(shí)施例的相關(guān)描述。

在本申請(qǐng)所提供的幾個(gè)實(shí)施例中，應(yīng)該理解到，所揭露的技術(shù)內(nèi)容，可通過其它的方式實(shí)現(xiàn)。其中，以上所描述的裝置實(shí)施例僅僅是示意性的，例如所述單元的劃分，可以為一種邏輯功能劃分，實(shí)際實(shí)現(xiàn)時(shí)可以有另外的劃分方式，例如多個(gè)單元或組件可以結(jié)合或者可以集成到另一個(gè)系統(tǒng)，或一些特征可以忽略，或不執(zhí)行。另一點(diǎn)，所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過一些接口，單元或模塊的間接耦合或通信連接，可以是電性或其它的形式。

所述作為分離部件說明的單元可以是或者也可以不是物理上分開的，作為單元顯示的部件可以是或者也可以不是物理單元，即可以位于一個(gè)地方，或者也可以分布到多個(gè)單元上。可以根據(jù)實(shí)際的需要選擇其中的部分或者全部單元來實(shí)現(xiàn)本實(shí)施例方案的目的。

另外，在本發(fā)明各個(gè)實(shí)施例中的各功能單元可以集成在一個(gè)處理單元中，也可以是各個(gè)單元單獨(dú)物理存在，也可以兩個(gè)或兩個(gè)以上單元集成在一個(gè)單元中。上述集成的單元既可以采用硬件的形式實(shí)現(xiàn)，也可以采用軟件功能單元的形式實(shí)現(xiàn)。

所述集成的單元如果以軟件功能單元的形式實(shí)現(xiàn)并作為獨(dú)立的產(chǎn)品銷售或使用時(shí)，可以存儲(chǔ)在一個(gè)計(jì)算機(jī)可讀取存儲(chǔ)介質(zhì)中?；谶@樣的理解，本發(fā)明的技術(shù)方案本質(zhì)上或者說對(duì)現(xiàn)有技術(shù)做出貢獻(xiàn)的部分或者該技術(shù)方案的全部或部分可以以軟件產(chǎn)品的形式體現(xiàn)出來，該計(jì)算機(jī)軟件產(chǎn)品存儲(chǔ)在一個(gè)存儲(chǔ)介質(zhì)中，包括若干指令用以使得一臺(tái)計(jì)算機(jī)設(shè)備(可為個(gè)人計(jì)算機(jī)、服務(wù)器或者網(wǎng)絡(luò)設(shè)備等)執(zhí)行本發(fā)明各個(gè)實(shí)施例所述方法的全部或部分步驟。而前述的存儲(chǔ)介質(zhì)包括：u盤、只讀存儲(chǔ)器(rom，read-onlymemory)、隨機(jī)存取存儲(chǔ)器(ram，randomaccessmemory)、移動(dòng)硬盤、磁碟或者光盤等各種可以存儲(chǔ)程序代碼的介質(zhì)。

以上所述僅是本發(fā)明的優(yōu)選實(shí)施方式，應(yīng)當(dāng)指出，對(duì)于本技術(shù)領(lǐng)域的普通技術(shù)人員來說，在不脫離本發(fā)明原理的前提下，還可以做出若干改進(jìn)和潤(rùn)飾，這些改進(jìn)和潤(rùn)飾也應(yīng)視為本發(fā)明的保護(hù)范圍。