亚洲成年人黄色一级片,日本香港三级亚洲三级,黄色成人小视频,国产青草视频,国产一区二区久久精品,91在线免费公开视频,成年轻人网站色直接看

一種重復(fù)數(shù)據(jù)刪除方法和設(shè)備與流程

文檔序號:11964685閱讀:來源:國知局
一種重復(fù)數(shù)據(jù)刪除方法和設(shè)備與流程

技術(shù)特征:
1.一種重復(fù)數(shù)據(jù)刪除方法,其特征在于,包括:根據(jù)待存儲文件的文件類型出現(xiàn)的次數(shù)與設(shè)定的閾值比較的結(jié)果,識別所述待存儲文件的分類;或者,根據(jù)待存儲文件的文件類型在常用文件數(shù)據(jù)庫中查找的結(jié)果,識別所述待存儲文件的分類;其中,所述文件的分類包括常用文件和非常用文件;根據(jù)文件的分類確定所述待存儲文件使用的重復(fù)數(shù)據(jù)刪除規(guī)則,具體包括:當(dāng)所述待存儲文件為常用文件時,所述待存儲文件使用的重復(fù)數(shù)據(jù)刪除規(guī)則為數(shù)據(jù)塊級重復(fù)數(shù)據(jù)刪除;當(dāng)所述待存儲文件為非常用文件時,所述待存儲文件使用的重復(fù)數(shù)據(jù)刪除規(guī)則為文件級重復(fù)數(shù)據(jù)刪除;根據(jù)確定的重復(fù)數(shù)據(jù)刪除規(guī)則,對所述待存儲文件進(jìn)行重復(fù)數(shù)據(jù)刪除。2.如權(quán)利要求1所述的方法,其特征在于,所述根據(jù)待存儲文件的文件類型出現(xiàn)的次數(shù)與設(shè)定的閾值比較的結(jié)果,識別所述待存儲文件的分類,具體包括:獲取所述待存儲文件的文件類型的出現(xiàn)次數(shù),并判斷所述文件類型的出現(xiàn)次數(shù)是否大于閾值,當(dāng)所述文件類型的出現(xiàn)次數(shù)大于所述閾值時,確定所述待存儲文件為常用文件,當(dāng)獲取的所述待存儲文件的文件類型的出現(xiàn)次數(shù)不大于所述閾值時,確定所述待存儲文件為非常用文件;或者,所述根據(jù)待存儲文件的文件類型在常用文件數(shù)據(jù)庫中查找的結(jié)果,識別所述待存儲文件的分類,具體包括:在查找常用文件數(shù)據(jù)庫中查找所述待存儲文件的文件類型,當(dāng)在常用文件數(shù)據(jù)庫中查找到所述待存儲文件的文件類型時,確定所述待存儲文件為常用文件,當(dāng)在常用文件數(shù)據(jù)庫中沒有查找到所述待存儲文件的文件類型時,確定待存儲文件為非常用文件。3.如權(quán)利要求1所述的方法,其特征在于,所述根據(jù)確定的重復(fù)數(shù)據(jù)刪除規(guī)則,對所述待存儲文件進(jìn)行重復(fù)數(shù)據(jù)刪除,具體包括:根據(jù)所述數(shù)據(jù)塊級重復(fù)數(shù)據(jù)刪除規(guī)則,將所述待存儲文件劃分成多個數(shù)據(jù)塊,計算每一個數(shù)據(jù)塊的指紋信息;將所述每一個數(shù)據(jù)塊的指紋信息與存儲的指紋信息進(jìn)行比較;當(dāng)一個數(shù)據(jù)塊的指紋信息與已存儲的指紋信息相同時,存儲所述數(shù)據(jù)塊與已存儲的與所述數(shù)據(jù)塊的指紋信息相同的指紋信息之間的引用信息,并丟棄所述數(shù)據(jù)塊;當(dāng)一個數(shù)據(jù)塊的指紋信息與存儲的指紋信息不相同時,存儲所述數(shù)據(jù)塊和計算得到的所述數(shù)據(jù)塊的指紋信息。4.如權(quán)利要求1所述的方法,其特征在于,所述根據(jù)確定的重復(fù)數(shù)據(jù)刪除規(guī)則,對所述待存儲文件進(jìn)行重復(fù)數(shù)據(jù)刪除,具體包括:根據(jù)所述文件級重復(fù)數(shù)據(jù)刪除規(guī)則,從所述待存儲文件中選擇至少部分文件數(shù)據(jù),計算出所述至少部分文件數(shù)據(jù)的指紋信息;將計算得到的所述至少部分文件數(shù)據(jù)的指紋信息與存儲的指紋信息進(jìn)行比較;當(dāng)計算得到的所述至少部分文件數(shù)據(jù)的指紋信息與已存儲的指紋信息相同時,存儲所述待存儲文件與已存儲的與所述至少部分文件數(shù)據(jù)的指紋信息相同的指紋信息之間的引用信息,并丟棄所述待存儲文件;當(dāng)計算得到的指紋信息與已存儲的指紋信息不相同時,存儲所述待存儲文件和計算得到的所述至少部分文件數(shù)據(jù)的指紋信息。5.一種重復(fù)數(shù)據(jù)刪除設(shè)備,其特征在于,包括:識別模塊,用于根據(jù)待存儲文件的文件類型出現(xiàn)的次數(shù)與設(shè)定的閾值比較的結(jié)果,識別所述待存儲文件的分類;或者,用于根據(jù)待存儲文件的文件類型在常用文件數(shù)據(jù)庫中查找的結(jié)果,識別所述待存儲文件的分類;其中,所述文件的分類包括常用文件和非常用文件;刪除規(guī)則確定模塊,用于根據(jù)文件的分類確定所述待存儲文件使用的重復(fù)數(shù)據(jù)刪除規(guī)則,具體用于:當(dāng)所述待存儲文件為常用文件時,所述待存儲文件使用的重復(fù)數(shù)據(jù)刪除規(guī)則為數(shù)據(jù)塊級重復(fù)數(shù)據(jù)刪除;當(dāng)所述待存儲文件為非常用文件時,所述待存儲文件使用的重復(fù)數(shù)據(jù)刪除規(guī)則為文件級重復(fù)數(shù)據(jù)刪除;刪除模塊,用于根據(jù)確定的重復(fù)數(shù)據(jù)刪除規(guī)則,對所述待存儲文件進(jìn)行重復(fù)數(shù)據(jù)刪除。6.如權(quán)利要求5所述的設(shè)備,其特征在于,所述識別模塊根據(jù)待存儲文件的文件類型出現(xiàn)的次數(shù)與設(shè)定的閾值比較的結(jié)果,識別所述待存儲文件的分類時,具體用于:獲取所述待存儲文件的文件類型的出現(xiàn)次數(shù),并判斷所述文件類型的出現(xiàn)次數(shù)是否大于閾值,當(dāng)所述文件類型的出現(xiàn)次數(shù)大于所述閾值時,將所述待存儲文件確定為常用文件,當(dāng)獲取的所述待存儲文件的文件類型的出現(xiàn)次數(shù)不大于所述閾值時,將所述待存儲文件確定為非常用文件;或者,所述識別模塊根據(jù)待存儲文件的文件類型在常用文件數(shù)據(jù)庫中查找的結(jié)果,識別所述待存儲文件的分類時,具體用于:在查找常用文件數(shù)據(jù)庫中查找所述待存儲文件的文件類型,當(dāng)在常用文件數(shù)據(jù)庫中查找到所述待存儲文件的文件類型時,將所述待存儲文件確定為常用文件,當(dāng)在常用文件數(shù)據(jù)庫中沒有查找到所述待存儲文件的文件類型時,確定待存儲文件為非常用文件。7.如權(quán)利要求5所述的設(shè)備,其特征在于,所述刪除模塊,具體用于根據(jù)所述數(shù)據(jù)塊級重復(fù)數(shù)據(jù)刪除規(guī)則,將所述待存儲文件劃分成多個數(shù)據(jù)塊,計算每一個數(shù)據(jù)塊的指紋信息;將所述每一個數(shù)據(jù)塊的指紋信息與存儲的指紋信息進(jìn)行比較;當(dāng)一個數(shù)據(jù)塊的指紋信息與已存儲的指紋信息相同時,存儲所述數(shù)據(jù)塊與已存儲的與所述數(shù)據(jù)塊的指紋信息相同的指紋信息之間的引用信息,并丟棄所述數(shù)據(jù)塊;當(dāng)一個數(shù)據(jù)塊的指紋信息與存儲的指紋信息不相同時,存儲所述數(shù)據(jù)塊和計算得到的所述數(shù)據(jù)塊的指紋信息。8.如權(quán)利要求5所述的設(shè)備,其特征在于,所述刪除模塊,具體用于根據(jù)所述文件級重復(fù)數(shù)據(jù)刪除規(guī)則,從所述待存儲文件中選擇至少部分文件數(shù)據(jù),計算出所述至少部分文件數(shù)據(jù)的指紋信息;將計算得到的所述至少部分文件數(shù)據(jù)的指紋信息與存儲的指紋信息進(jìn)行比較;當(dāng)計算得到的所述至少部分文件數(shù)據(jù)的指紋信息與已存儲的指紋信息相同時,存儲所述待存儲文件與已存儲的與所述至少部分文件數(shù)據(jù)的指紋信息相同的指紋信息之間的引用信息,并丟棄所述待存儲文件;當(dāng)計算得到的指紋信息與已存儲的指紋信息不相同時,存儲所述待存儲文件和計算得到的所述至少部分文件數(shù)據(jù)的指紋信息。9.一種重復(fù)數(shù)據(jù)刪除設(shè)備,其特征在于,包括:輸入監(jiān)控器,用于根據(jù)待存儲文件的文件類型出現(xiàn)的次數(shù)與設(shè)定的閾值比較的結(jié)果,識別所述待存儲文件的分類;或者,用于根據(jù)待存儲文件的文件類型在常用文件數(shù)據(jù)庫中查找的結(jié)果,識別所述待存儲文件的分類;其中,所述文件的分類包括常用文件和非常用文件;處理器,用于根據(jù)文件的分類確定所述待存儲文件使用的重復(fù)數(shù)據(jù)刪除規(guī)則,根據(jù)確定的重復(fù)數(shù)據(jù)刪除規(guī)則,對所述待存儲文件進(jìn)行重復(fù)數(shù)據(jù)刪除;其中,所述處理器在根據(jù)文件的分類確定所述待存儲文件使用的重復(fù)數(shù)據(jù)刪除規(guī)則時,具體用于:當(dāng)所述待存儲文件為常用文件時,所述待存儲文件使用的重復(fù)數(shù)據(jù)刪除規(guī)則為數(shù)據(jù)塊級重復(fù)數(shù)據(jù)刪除;當(dāng)所述待存儲文件為非常用文件時,所述待存儲文件使用的重復(fù)數(shù)據(jù)刪除規(guī)則為文件級重復(fù)數(shù)據(jù)刪除。10.如權(quán)利要求9所述的設(shè)備,其特征在于,所述輸入監(jiān)控器根據(jù)待存儲文件的文件類型出現(xiàn)的次數(shù)與設(shè)定的閾值比較的結(jié)果,識別所述待存儲文件的分類時,具體用于:獲取所述待存儲文件的文件類型的出現(xiàn)次數(shù),并判斷所述文件類型的出現(xiàn)次數(shù)是否大于閾值,當(dāng)所述文件類型的出現(xiàn)次數(shù)大于所述閾值時,將所述待存儲文件確定為常用文件,當(dāng)獲取的所述待存儲文件的文件類型的出現(xiàn)次數(shù)不大于所述閾值時,將所述待存儲文件確定為非常用文件;或者,所述輸入監(jiān)控器根據(jù)待存儲文件的文件類型在常用文件數(shù)據(jù)庫中查找的結(jié)果,識別所述待存儲文件的分類時,具體用于:在查找常用文件數(shù)據(jù)庫中查找所述待存儲文件的文件類型,當(dāng)在常用文件數(shù)據(jù)庫中查找到所述待存儲文件的文件類型時,將所述待存儲文件確定為常用文件,當(dāng)在常用文件數(shù)據(jù)庫中沒有查找到所述待存儲文件的文件類型時,確定待存儲文件為非常用文件。11.如權(quán)利要求9所述的設(shè)備,其特征在于,所述處理器在根據(jù)確定的重復(fù)數(shù)據(jù)刪除規(guī)則,對所述待存儲文件進(jìn)行重復(fù)數(shù)據(jù)刪除時,具體用于:根據(jù)所述數(shù)據(jù)塊級重復(fù)數(shù)據(jù)刪除規(guī)則,將所述待存儲文件劃分成多個數(shù)據(jù)塊,計算每一個數(shù)據(jù)塊的指紋信息;將所述每一個數(shù)據(jù)塊的指紋信息與存儲的指紋信息進(jìn)行比較;當(dāng)一個數(shù)據(jù)塊的指紋信息與已存儲的指紋信息相同時,存儲所述數(shù)據(jù)塊與已存儲的與所述數(shù)據(jù)塊的指紋信息相同的指紋信息之間的引用信息,并丟棄所述數(shù)據(jù)塊;當(dāng)一個數(shù)據(jù)塊的指紋信息與存儲的指紋信息不相同時,存儲所述數(shù)據(jù)塊和計算得到的所述數(shù)據(jù)塊的指紋信息。12.如權(quán)利要求9所述的設(shè)備,其特征在于,所述處理器在根據(jù)確定的重復(fù)數(shù)據(jù)刪除規(guī)則,對所述待存儲文件進(jìn)行重復(fù)數(shù)據(jù)刪除時,具體用于:根據(jù)所述文件級重復(fù)數(shù)據(jù)刪除規(guī)則,從所述待存儲文件中選擇至少部分文件數(shù)據(jù),計算出所述至少部分文件數(shù)據(jù)的指紋信息;將計算得到的所述至少部分文件數(shù)據(jù)的指紋信息與存儲的指紋信息進(jìn)行比較;當(dāng)計算得到的所述至少部分文件數(shù)據(jù)的指紋信息與已存儲的指紋信息相同時,存儲所述待存儲文件與已存儲的與所述至少部分文件數(shù)據(jù)的指紋信息相同的指紋信息之間的引用信息,并丟棄所述待存儲文件;當(dāng)計算得到的指紋信息與已存儲的指紋信息不相同時,存儲所述待存儲文件和計算得到的所述至少部分文件數(shù)據(jù)的指紋信息。
當(dāng)前第2頁1 2 3 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1