一種應(yīng)用于boss系統(tǒng)的數(shù)據(jù)重刪方法及系統(tǒng)的制作方法
【專利摘要】本發(fā)明涉及一種應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重刪方法及系統(tǒng)，所述方法包括：步驟1，將BOSS系統(tǒng)產(chǎn)生的業(yè)務(wù)文件載入預(yù)設(shè)的重刪機制，并在該重刪機制中基于文件重刪方式或內(nèi)存重刪方式處理載入的業(yè)務(wù)文件，生成重刪數(shù)據(jù)文件；步驟2，采用定長方式或滑塊方式將重刪數(shù)據(jù)文件劃分為若干個數(shù)據(jù)塊；步驟3，對每個劃分好的數(shù)據(jù)塊進(jìn)行哈希運算，產(chǎn)生相應(yīng)的哈希值；步驟4，選定或新增一個數(shù)據(jù)塊，并將其對應(yīng)的哈希值與其他所有數(shù)據(jù)塊對應(yīng)的哈希值進(jìn)行比較，若出現(xiàn)相同的哈希值，則刪除該數(shù)據(jù)塊，否則存儲該數(shù)據(jù)塊。本發(fā)明將重刪機制引入BOSS系統(tǒng)，大大降低了BOSS系統(tǒng)的存儲空間使用率和需要月備的數(shù)據(jù)量。
【專利說明】一種應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重刪方法及系統(tǒng)

【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及BOSS系統(tǒng)領(lǐng)域，特別是涉及一種應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重刪方法及 系統(tǒng)。

【背景技術(shù)】
[0002] 隨著運營商業(yè)務(wù)的迅速發(fā)展，業(yè)務(wù)支撐壓力越來越大，其中業(yè)務(wù)數(shù)據(jù)的存儲在時 間空間上均面臨較大壓力，主要體現(xiàn)在空間越來越緊張，月備時間越來越長，如果長此以 往，將會產(chǎn)生添加存儲也不能解決的問題。
[0003] 造成存儲空間緊張，月備時間冗長的主要原因如下：
[0004] 1)模塊間冗余數(shù)據(jù)巨大
[0005] 如預(yù)處理入口、出口、錯單、剔重，各環(huán)節(jié)間計費關(guān)鍵要素重復(fù)頻率極高。
[0006] 2)模塊內(nèi)冗余數(shù)據(jù)巨大
[0007] -個環(huán)節(jié)內(nèi)的某些字段只能有幾個取值范圍，字段重復(fù)頻率極高。
[0008] 3)歷史話單有一定的保存周期，占用較大存儲空間
[0009] 可知boss系統(tǒng)存儲的主要問題有兩點：一是歷史話單不能輕易刪除；二是歷史話 單重復(fù)率極高。
[0010] 針對上述問題，本發(fā)明提出了一種應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重刪方法及系統(tǒng)。


【發(fā)明內(nèi)容】

[0011] 本發(fā)明所要解決的技術(shù)問題是提供一種應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重刪方法及系 統(tǒng)，用于解決BOSS系統(tǒng)中冗余數(shù)據(jù)多、存儲空間使用率低的技術(shù)問題。
[0012] 本發(fā)明解決上述技術(shù)問題的技術(shù)方案如下：一種應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重刪方 法，包括：
[0013] 步驟1，將BOSS系統(tǒng)產(chǎn)生的業(yè)務(wù)文件載入預(yù)設(shè)的重刪機制，并在該重刪機制中基 于文件級重刪方式或內(nèi)存級重刪方式處理載入的業(yè)務(wù)文件，生成重刪數(shù)據(jù)文件；
[0014] 步驟2,采用定長方式或滑塊方式將重刪數(shù)據(jù)文件劃分為若干個數(shù)據(jù)塊；
[0015] 步驟3,對每個劃分好的數(shù)據(jù)塊進(jìn)行哈希運算，產(chǎn)生相應(yīng)的哈希值；
[0016] 步驟4,選定或新增一個數(shù)據(jù)塊，并將其對應(yīng)的哈希值與其他所有數(shù)據(jù)塊對應(yīng)的哈 希值進(jìn)行比較，若出現(xiàn)相同的哈希值，則刪除該數(shù)據(jù)塊，否則存儲該數(shù)據(jù)塊。
[0017] 對應(yīng)地，本發(fā)明的技術(shù)方案還包括一種應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重刪系統(tǒng)，包括：
[0018] 預(yù)處理模塊，其用于將BOSS系統(tǒng)產(chǎn)生的業(yè)務(wù)文件載入預(yù)設(shè)的重刪機制，并在該重 刪機制中基于文件級重刪方式或內(nèi)存級重刪方式處理載入的業(yè)務(wù)文件，生成重刪數(shù)據(jù)文 件；
[0019] 分塊模塊，其用于采用定長方式或滑塊方式將預(yù)處理后的重刪數(shù)據(jù)文件劃分為若 干個數(shù)據(jù)塊；
[0020] 運算模塊，其用于對每個劃分好的數(shù)據(jù)塊進(jìn)行哈希運算，產(chǎn)生相應(yīng)的哈希值；
[0021] 重刪判斷模塊，其用于選定或新增一個數(shù)據(jù)塊，并將其對應(yīng)的哈希值與其他所有 數(shù)據(jù)塊對應(yīng)的哈希值進(jìn)行比較，若出現(xiàn)相同的哈希值，則刪除該數(shù)據(jù)塊，否則存儲該數(shù)據(jù) 塊。
[0022] 本發(fā)明的有益效果是：本發(fā)明采用文件級重刪方式和內(nèi)存級重刪方式將重刪機制 引入BOSS系統(tǒng)，大大降低了 BOSS系統(tǒng)的存儲空間使用率，同時需要月備的數(shù)據(jù)量也將大大 降低，即縮短了月備時間，可以給運營商在存儲硬件投入上減低很大一筆開支。

【專利附圖】

【附圖說明】
[0023] 圖1為本發(fā)明所述應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重刪方法的流程示意圖；
[0024] 圖2為本發(fā)明所述應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重刪系統(tǒng)的結(jié)構(gòu)示意圖；
[0025] 圖3為實施例中采用文件級重刪方式對重刪數(shù)據(jù)文件進(jìn)行預(yù)處理的示意圖；
[0026] 圖4為實施例中采用內(nèi)存級重刪方式對重刪數(shù)據(jù)文件進(jìn)行預(yù)處理的示意圖；
[0027] 圖5為實施例中重刪算法設(shè)計思路示意圖；
[0028] 圖6為實施例中采用定長方式分塊的示意圖；
[0029] 圖7為實施例中采用滑塊方式分塊的示意圖；
[0030] 圖8為實施例中重刪機制的存儲結(jié)構(gòu)示意圖；
[0031] 圖9為實施例中重刪數(shù)據(jù)池的數(shù)據(jù)結(jié)構(gòu)示意圖；
[0032] 圖10為實施例中進(jìn)行數(shù)據(jù)重刪的效果示意圖。

【具體實施方式】
[0033] 以下結(jié)合附圖對本發(fā)明的原理和特征進(jìn)行描述，所舉實例只用于解釋本發(fā)明，并 非用于限定本發(fā)明的范圍。
[0034] 如圖1所示，本實施例給出了一種應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重刪方法，包括：
[0035] 步驟1，將BOSS系統(tǒng)產(chǎn)生的業(yè)務(wù)文件載入預(yù)設(shè)的重刪機制，并在該重刪機制中基 于文件級重刪方式或內(nèi)存級重刪方式處理載入的業(yè)務(wù)文件，生成重刪數(shù)據(jù)文件；
[0036] 步驟2,采用定長方式或滑塊方式將重刪數(shù)據(jù)文件劃分為若干個數(shù)據(jù)塊；
[0037] 步驟3,對每個劃分好的數(shù)據(jù)塊進(jìn)行哈希運算，產(chǎn)生相應(yīng)的哈希值；
[0038] 步驟4,選定或新增一個數(shù)據(jù)塊，并將其對應(yīng)的哈希值與其他所有數(shù)據(jù)塊對應(yīng)的哈 希值進(jìn)行比較，若出現(xiàn)相同的哈希值，則刪除該數(shù)據(jù)塊，否則存儲該數(shù)據(jù)塊；
[0039] 步驟5,存儲數(shù)據(jù)塊時，將數(shù)據(jù)塊存儲至重刪機制管理的重刪數(shù)據(jù)池中，當(dāng)新增有 數(shù)據(jù)塊時，調(diào)用重刪數(shù)據(jù)池中所有數(shù)據(jù)塊的哈希值與新增的數(shù)據(jù)塊的哈希值進(jìn)行比較。
[0040] 如圖2所示，對應(yīng)上述步驟，本實施例還給出了相應(yīng)的應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重 刪系統(tǒng)，包括以下模塊：
[0041] 預(yù)處理模塊，其用于將BOSS系統(tǒng)產(chǎn)生的業(yè)務(wù)文件載入預(yù)設(shè)的重刪機制，并在該重 刪機制中基于文件級重刪方式或內(nèi)存級重刪方式處理載入的業(yè)務(wù)文件，生成重刪數(shù)據(jù)文 件；
[0042] 分塊模塊，其用于采用定長方式或滑塊方式將預(yù)處理后的重刪數(shù)據(jù)文件劃分為若 干個數(shù)據(jù)塊；
[0043] 運算模塊，其用于對每個劃分好的數(shù)據(jù)塊進(jìn)行哈希運算，產(chǎn)生相應(yīng)的哈希值；
[0044] 重刪判斷模塊，其用于選定或新增一個數(shù)據(jù)塊，并將其對應(yīng)的哈希值與其他所有 數(shù)據(jù)塊對應(yīng)的哈希值進(jìn)行比較，若出現(xiàn)相同的哈希值，則刪除該數(shù)據(jù)塊，否則存儲該數(shù)據(jù) 塊；
[0045] 存儲配置模塊，其用于存儲數(shù)據(jù)塊時，將數(shù)據(jù)塊存儲至重刪機制管理的重刪數(shù)據(jù) 池中，當(dāng)新增有數(shù)據(jù)塊時，調(diào)用重刪數(shù)據(jù)池中所有數(shù)據(jù)塊的哈希值與新增的數(shù)據(jù)塊的哈希 值進(jìn)行比較。
[0046] 基于上述的應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重刪方法及系統(tǒng)的基本技術(shù)方案，其具體的 實施過程如下所述。
[0047] 一、業(yè)務(wù)文件的載入
[0048] 本實施例的技術(shù)方案應(yīng)用于BOSS系統(tǒng)，即是使用相應(yīng)的重刪機制將BOSS系統(tǒng)生 成的原始業(yè)務(wù)文件（包括話單文件和錯單文件等）按相應(yīng)的規(guī)則分隔、編碼、存儲，實現(xiàn)數(shù) 據(jù)重刪。具體地，即是將BOSS系統(tǒng)產(chǎn)生的業(yè)務(wù)載入預(yù)設(shè)的重刪機制中，將業(yè)務(wù)文件作為重 刪機制的入口文件進(jìn)行重刪，以便生成重刪數(shù)據(jù)文件。
[0049] 二、業(yè)務(wù)文件的重刪預(yù)處理
[0050] 本實施例采用基于文件級重刪方式或內(nèi)存級重刪方式對業(yè)務(wù)文件進(jìn)行預(yù)處理。
[0051] 1)文件級重刪方式
[0052] 如圖3所示，基于文件級重刪方式處理載入的業(yè)務(wù)文件具體包括：在BOSS系統(tǒng)產(chǎn) 生的業(yè)務(wù)文件落地后，再將落地的業(yè)務(wù)文件載入至預(yù)設(shè)的重刪機制中，經(jīng)重刪機制處理生 成重刪數(shù)據(jù)文件。BOSS系統(tǒng)的各子系統(tǒng)產(chǎn)生的業(yè)務(wù)文件都會對應(yīng)產(chǎn)生落地文件，如預(yù)處理 和剔重子系統(tǒng)產(chǎn)生的落地話單和落地錯單都作為重刪機制的入口文件，由重刪機制對這 些文件進(jìn)行重刪，生成重刪數(shù)據(jù)文件。
[0053] 可知，文件級重刪方式是在BOSS系統(tǒng)產(chǎn)生落地文件后對進(jìn)行重刪，再濾除落地文 件，只保留重刪后的元數(shù)據(jù)，對重刪前文件的管理則由重刪機制實現(xiàn)。文件重刪方式屬于 離線重刪方式，對BOSS系統(tǒng)的業(yè)務(wù)處理模塊影響極小，但中間過程使用了存儲空間。
[0054] 2)內(nèi)存級重刪方式
[0055] 如圖4所示，基于內(nèi)存級重刪方式處理載入的業(yè)務(wù)文件具體包括：在BOSS系統(tǒng)的 業(yè)務(wù)處理模塊中嵌入重刪接口，在BOSS系統(tǒng)產(chǎn)生的業(yè)務(wù)文件落地前，通過該重刪接口調(diào)用 重刪機制處理業(yè)務(wù)文件，生成重刪數(shù)據(jù)文件。
[0056] 不同于文件級重刪，采用內(nèi)存級重刪方式，即在話單等業(yè)務(wù)文件落地之前進(jìn)行重 刪，話單文件和錯單文件在落地時已經(jīng)過重刪，再以元數(shù)據(jù)文件方式存在。該方式實現(xiàn)了在 線重刪，最后落地文件將以元數(shù)據(jù)方式存放，在重刪過程中未使用存儲空間，但是該方式 對性能要求較高，會對現(xiàn)有業(yè)務(wù)處理模塊造成沖擊。
[0057] 三、重刪數(shù)據(jù)文件的預(yù)處理
[0058] 本實施例主要采用定長方式或滑塊方式將預(yù)處理后的重刪數(shù)據(jù)文件劃分為若干 個數(shù)據(jù)塊。
[0059] 1)定長方式
[0060] 采用定長方式將預(yù)處理后的重刪數(shù)據(jù)文件劃分為若干個數(shù)據(jù)塊具體包括：事先定 義好每個數(shù)據(jù)塊的大小，將入口文件按定義好的大小進(jìn)行劃分。
[0061] 2)滑塊方式
[0062] 采用滑塊方式將預(yù)處理后的重刪數(shù)據(jù)文件劃分為若干個數(shù)據(jù)塊具體包括：根據(jù)指 紋算法和滑動窗口把入口文件進(jìn)行固定大小的分塊，且每一個數(shù)據(jù)塊的大小和滑動窗口大 小一樣，并且數(shù)據(jù)塊的起點和終點分別就是滑動窗口的起點和終點。
[0063] 四、重刪算法設(shè)計
[0064] 基于劃分好的數(shù)據(jù)塊，如圖5所示，本實施例的重刪算法設(shè)計思路為：利用哈希算 法將數(shù)據(jù)塊與現(xiàn)有已存儲的數(shù)據(jù)塊進(jìn)行比較，得出存儲鍵值key，如果該數(shù)據(jù)塊是重復(fù)數(shù) 據(jù)，則文件元數(shù)據(jù)只需記錄鍵值key，如果是新數(shù)據(jù)塊，元數(shù)據(jù)記錄鍵值key的同時，還 要將數(shù)據(jù)塊落地到物理存儲（重刪數(shù)據(jù)池），供下次鍵值的計算。
[0065] 如圖6所示，對于采用定長方式劃分的數(shù)據(jù)塊，按上述重刪算法設(shè)計思路，具體的 重刪過程為：使用MD5算法對每個劃分好的數(shù)據(jù)塊進(jìn)行哈希計算得到一個指紋值key ;把得 到的key值與現(xiàn)有的key值進(jìn)行對比，假如找到匹配的值，說明是重復(fù)數(shù)據(jù)，則刪除此key 值代表的數(shù)據(jù)塊，并且存儲指向該數(shù)據(jù)塊的指針，否則說明是新數(shù)據(jù)塊，直接存儲。
[0066] 如圖7所示，對于采用滑塊方式劃分的數(shù)據(jù)塊，按上述重刪算法設(shè)計思路，具體的 重刪過程為：采用MD5哈希算法把得到的數(shù)據(jù)塊進(jìn)行哈希映射，得到哈希值，并與現(xiàn)有的哈 希值逐一比較；如果找到相同的哈希值，就刪除掉此數(shù)據(jù)塊，否則就存儲該數(shù)據(jù)塊，并且添 加其哈希值到哈希表中?；瑝K算法有一個特點就是：因為每一個塊都是根據(jù)滑動窗口的位 置劃分的，所以會留下一些數(shù)據(jù)碎片。
[0067] 五、數(shù)據(jù)塊存儲
[0068] 如圖8所示，所述重刪機制設(shè)有大小可調(diào)配的多個重刪數(shù)據(jù)池，且每個重刪數(shù)據(jù) 池中均設(shè)有一個獨立的數(shù)據(jù)重刪區(qū)，且每個重刪數(shù)據(jù)池的數(shù)據(jù)重刪區(qū)中存儲的數(shù)據(jù)塊均不 相同。
[0069] 如圖9所示，示意了重刪數(shù)據(jù)池的數(shù)據(jù)結(jié)構(gòu)組織，其中重刪池頭數(shù)據(jù)中記錄了：
[0070] 1)重刪池的ID ;
[0071] 2)重刪數(shù)據(jù)區(qū)唯一數(shù)據(jù)塊（每塊由一個hashkey表示）個數(shù)；
[0072] 3)每個唯一數(shù)據(jù)塊長度；
[0073] 4)重刪池共重刪文件數(shù)；
[0074] 5)重刪池是否壓縮；
[0075] 6)重刪池各部分偏移位置；
[0076] 該數(shù)據(jù)結(jié)構(gòu)組織中最重要的就是唯一數(shù)據(jù)區(qū)和文件數(shù)據(jù)區(qū)，唯一數(shù)據(jù)區(qū)相當(dāng)于數(shù) 據(jù)庫，文件數(shù)據(jù)區(qū)相當(dāng)于還原函數(shù)。文件數(shù)據(jù)區(qū)結(jié)構(gòu)為：
[0077] 1)文件全路徑；
[0078] 2)文件屬性；
[0079] 3)文件被重刪后的塊數(shù)；
[0080] 4)每個重刪塊的還原h(huán)ashkey。
[0081] 根據(jù)上述實施過程，如圖10所示，原始數(shù)據(jù)最后得到的只是"AB⑶E"，再加上一些 控制元數(shù)據(jù)及可將數(shù)據(jù)組織管理，大大降低了存儲空間。
[0082] 以上所述僅為本發(fā)明的較佳實施例，并不用以限制本發(fā)明，凡在本發(fā)明的精神和 原則之內(nèi)，所作的任何修改、等同替換、改進(jìn)等，均應(yīng)包含在本發(fā)明的保護(hù)范圍之內(nèi)。
【權(quán)利要求】
1. 一種應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重刪方法，其特征在于，包括： 步驟1，將BOSS系統(tǒng)產(chǎn)生的業(yè)務(wù)文件載入預(yù)設(shè)的重刪機制，并在該重刪機制中基于文 件重刪方式或內(nèi)存重刪方式處理載入的業(yè)務(wù)文件，生成重刪數(shù)據(jù)文件； 步驟2,采用定長方式或滑塊方式將重刪數(shù)據(jù)文件劃分為若干個數(shù)據(jù)塊； 步驟3,對每個劃分好的數(shù)據(jù)塊進(jìn)行哈希運算，產(chǎn)生相應(yīng)的哈希值； 步驟4,選定或新增一個數(shù)據(jù)塊，并將其對應(yīng)的哈希值與其他所有數(shù)據(jù)塊對應(yīng)的哈希值 進(jìn)行比較，若出現(xiàn)相同的哈希值，則刪除該數(shù)據(jù)塊，否則存儲該數(shù)據(jù)塊。
2. 根據(jù)權(quán)利要求1所述的數(shù)據(jù)重刪方法，其特征在于，所述步驟1中基于文件級重刪方 式處理載入的業(yè)務(wù)文件具體包括：在BOSS系統(tǒng)產(chǎn)生的業(yè)務(wù)文件落地后，再將落地的業(yè)務(wù)文 件載入至預(yù)設(shè)的重刪機制中，經(jīng)重刪機制處理生成重刪數(shù)據(jù)文件。
3. 根據(jù)權(quán)利要求1所述的數(shù)據(jù)重刪方法，其特征在于，所述步驟1中基于內(nèi)存級重刪 方式處理載入的業(yè)務(wù)文件具體包括：在BOSS系統(tǒng)的業(yè)務(wù)處理模塊中嵌入重刪接口，在BOSS 系統(tǒng)產(chǎn)生的業(yè)務(wù)文件落地前，通過該重刪接口調(diào)用重刪機制處理業(yè)務(wù)文件，生成重刪數(shù)據(jù) 文件。
4. 根據(jù)權(quán)利要求1所述的數(shù)據(jù)重刪方法，其特征在于，所述步驟2中采用定長方式將預(yù) 處理后的重刪數(shù)據(jù)文件劃分為若干個數(shù)據(jù)塊具體包括：事先定義好每個數(shù)據(jù)塊的大小，將 入口文件按定義好的大小進(jìn)行劃分。
5. 根據(jù)權(quán)利要求1所述的數(shù)據(jù)重刪方法，其特征在于，所述步驟2中采用滑塊方式將預(yù) 處理后的重刪數(shù)據(jù)文件劃分為若干個數(shù)據(jù)塊具體包括：根據(jù)指紋算法和滑動窗口把入口文 件進(jìn)行固定大小的分塊，且每一個數(shù)據(jù)塊的大小和滑動窗口大小一樣，并且數(shù)據(jù)塊的起點 和終點分別就是滑動窗口的起點和終點。
6. 根據(jù)權(quán)利要求1至5中任一所述的數(shù)據(jù)重刪方法，其特征在于，還包括步驟5 :存儲 數(shù)據(jù)塊時，將數(shù)據(jù)塊存儲至重刪機制管理的重刪數(shù)據(jù)池中，當(dāng)新增有數(shù)據(jù)塊時，調(diào)用重刪數(shù) 據(jù)池中所有數(shù)據(jù)塊的哈希值與新增的數(shù)據(jù)塊的哈希值進(jìn)行比較。
7. 根據(jù)權(quán)利要求6所述的數(shù)據(jù)重刪方法，其特征在于，所述重刪機制設(shè)有大小可調(diào)配 的多個重刪數(shù)據(jù)池，且每個重刪數(shù)據(jù)池中均設(shè)有一個獨立的數(shù)據(jù)重刪區(qū)，且每個重刪數(shù)據(jù) 池的數(shù)據(jù)重刪區(qū)中存儲的數(shù)據(jù)塊均不相同。
8. -種應(yīng)用于BOSS系統(tǒng)的數(shù)據(jù)重刪系統(tǒng)，其特征在于，包括： 預(yù)處理模塊，其用于將BOSS系統(tǒng)產(chǎn)生的業(yè)務(wù)文件載入預(yù)設(shè)的重刪機制，并在該重刪機 制中基于文件級重刪方式或內(nèi)存級重刪方式處理載入的業(yè)務(wù)文件，生成重刪數(shù)據(jù)文件； 分塊模塊，其用于采用定長方式或滑塊方式將預(yù)處理后的重刪數(shù)據(jù)文件劃分為若干個 數(shù)據(jù)塊； 運算模塊，其用于對每個劃分好的數(shù)據(jù)塊進(jìn)行哈希運算，產(chǎn)生相應(yīng)的哈希值； 重刪判斷模塊，其用于選定或新增一個數(shù)據(jù)塊，并將其對應(yīng)的哈希值與其他所有數(shù)據(jù) 塊對應(yīng)的哈希值進(jìn)行比較，若出現(xiàn)相同的哈希值，則刪除該數(shù)據(jù)塊，否則存儲該數(shù)據(jù)塊。
9. 根據(jù)權(quán)利要求8所述的數(shù)據(jù)重刪系統(tǒng)，其特征在于，還包括存儲配置模塊，其用于存 儲數(shù)據(jù)塊時，將數(shù)據(jù)塊存儲至重刪機制管理的重刪數(shù)據(jù)池中，當(dāng)新增有數(shù)據(jù)塊時，調(diào)用重刪 數(shù)據(jù)池中所有數(shù)據(jù)塊的哈希值與新增的數(shù)據(jù)塊的哈希值進(jìn)行比較。
10. 根據(jù)權(quán)利要求9所述的數(shù)據(jù)重刪系統(tǒng)，其特征在于，所述重刪機制設(shè)有大小可調(diào)配
【文檔編號】G06F11/14GK104123347SQ201410317516
【公開日】2014年10月29日 申請日期:2014年7月4日 優(yōu)先權(quán)日:2014年7月4日
【發(fā)明者】朱云章 申請人:北京思特奇信息技術(shù)股份有限公司