一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法、裝置及系統(tǒng)的制作方法
【專利摘要】本發(fā)明公開了一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法，包括：S10：判斷包含有重復(fù)數(shù)據(jù)的數(shù)據(jù)存儲對象的類型為文件數(shù)據(jù)還是塊數(shù)據(jù)，如果是文件數(shù)據(jù)則進(jìn)入步驟S11，如果是塊數(shù)據(jù)則進(jìn)入步驟S12；S11：確定所述數(shù)據(jù)存儲對象按照文件級去重方式進(jìn)行去重；S12：確定所述數(shù)據(jù)存儲對象按照塊數(shù)據(jù)級去重方式進(jìn)行去重。該方法根據(jù)數(shù)據(jù)存儲對象的類型確定相應(yīng)的去重方式，能夠提高存儲系統(tǒng)去重效率和存儲資源池的整體利用率。此外，本發(fā)明還公開一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重裝置及云存儲系統(tǒng)，效果如上所述。
【專利說明】
一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法、裝置及系統(tǒng)
技術(shù)領(lǐng)域
[0001]本發(fā)明涉及計算機(jī)技術(shù)領(lǐng)域，特別是涉及一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法、 裝置及系統(tǒng)?！颈尘凹夹g(shù)】
[0002]當(dāng)前，云計算逐漸被行業(yè)認(rèn)可，云存儲系統(tǒng)已經(jīng)逐漸在社會生產(chǎn)和生活領(lǐng)域中起到越來越重要的作用。云存儲系統(tǒng)中存在著大量的重復(fù)數(shù)據(jù)，這些重復(fù)數(shù)據(jù)的存在大大影響了數(shù)據(jù)存儲、訪問的效率，并造成了資源的大量浪費。待存儲數(shù)據(jù)需要重復(fù)數(shù)據(jù)的去重工作，對于待存儲數(shù)據(jù)要實現(xiàn)重復(fù)數(shù)據(jù)的去重，一方面可以有效的節(jié)省用戶的存儲空間，可以間接節(jié)省服務(wù)商的硬件采購成本、人力能耗和機(jī)房的使用空間等;另一個方面，重復(fù)數(shù)據(jù)去重通過互聯(lián)網(wǎng)并不傳輸或存儲多份相同數(shù)據(jù)，這樣就有效減少對存儲空間和網(wǎng)絡(luò)帶寬的占用，進(jìn)而提高訪問和檢索效率。在具體實施中，重復(fù)數(shù)據(jù)的去重方式有多種，合適的去重方式不僅提高了存儲資源池的利用率還提高了存儲效率。
[0003]因此，如何對重復(fù)數(shù)據(jù)進(jìn)行去重，以提高存儲資源池的利用率和存儲效率是本領(lǐng)域技術(shù)人員亟待解決的問題。
【發(fā)明內(nèi)容】
[0004]本發(fā)明的目的是提供一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法、裝置及系統(tǒng)，用于提高存儲資源池的利用率和存儲效率。
[0005]為解決上述技術(shù)問題，本發(fā)明提供一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法，包括:
[0006]S10:判斷包含有重復(fù)數(shù)據(jù)的數(shù)據(jù)存儲對象的類型為文件數(shù)據(jù)還是塊數(shù)據(jù)，如果是文件數(shù)據(jù)則進(jìn)入步驟SI 1，如果是塊數(shù)據(jù)則進(jìn)入步驟S12;
[0007]S11:確定所述數(shù)據(jù)存儲對象按照文件級去重方式進(jìn)行去重；
[0008]S12:確定所述數(shù)據(jù)存儲對象按照塊數(shù)據(jù)級去重方式進(jìn)行去重。
[0009]優(yōu)選地，在步驟S11之后還包括:
[0010]將所述數(shù)據(jù)存儲對象發(fā)送至存儲資源池中的文件存儲設(shè)備中以對所述數(shù)據(jù)存儲對象進(jìn)行去重和存儲。
[0011]優(yōu)選地，所述文件存儲設(shè)備包括NAS網(wǎng)絡(luò)存儲設(shè)備。[〇〇12] 優(yōu)選地，在步驟S12之后還包括:
[0013]將所述數(shù)據(jù)存儲對象發(fā)送至存儲資源池中的塊存儲設(shè)備中以對所述數(shù)據(jù)存儲對象進(jìn)行去重和存儲。
[0014]優(yōu)選地，所述塊存儲設(shè)備包括SAN存儲設(shè)備。
[0015]優(yōu)選地，在步驟SI 1或步驟S12之后還包括:
[0016]將所述數(shù)據(jù)存儲對象發(fā)送至存儲資源池中的對象存儲設(shè)備中以對所述數(shù)據(jù)存儲對象進(jìn)行去重和存儲。
[0017]優(yōu)選地，所述對象存儲設(shè)備包括Ceph對象存儲設(shè)備。
[0018]優(yōu)選地，在步驟S10之前還包括:
[0019]獲取存儲請求；
[0020]接收所述存儲請求對應(yīng)的待存儲數(shù)據(jù)；[0021 ]判斷所述待存儲數(shù)據(jù)是否包含有所述重復(fù)數(shù)據(jù)，如果是，則確定所述待存儲數(shù)據(jù)為所述數(shù)據(jù)存儲對象。[〇〇22] 一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重裝置，包括:
[0023]數(shù)據(jù)存儲對象類型判斷模塊，用于判斷包含有重復(fù)數(shù)據(jù)的數(shù)據(jù)存儲對象的類型為文件數(shù)據(jù)還是塊數(shù)據(jù)；
[0024]去重方式選擇模塊，用于在所述數(shù)據(jù)存儲對象類型判斷模塊判斷出所述數(shù)據(jù)存儲對象的類型為文件數(shù)據(jù)時，確定所述數(shù)據(jù)存儲對象按照文件級去重方式進(jìn)行去重，或者，用于在所述數(shù)據(jù)存儲對象類型判斷模塊判斷出所述數(shù)據(jù)存儲對象的類型為塊數(shù)據(jù)時，確定所述數(shù)據(jù)存儲對象按照塊數(shù)據(jù)級去重方式進(jìn)行去重。[〇〇25] 一種云存儲系統(tǒng)，包括所述的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重裝置。[〇〇26]本發(fā)明所提供的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法、裝置及系統(tǒng)，當(dāng)接收到數(shù)據(jù)存儲對象后，首先判斷數(shù)據(jù)存儲對象的類型為文件數(shù)據(jù)還是塊數(shù)據(jù)，如果是文件數(shù)據(jù)則確定數(shù)據(jù)存儲對象按照文件級去重方式進(jìn)行去重;如果判斷數(shù)據(jù)存儲對象的類型為塊數(shù)據(jù)入則確定數(shù)據(jù)存儲對象按照塊數(shù)據(jù)級去重方式進(jìn)行去重。該方法根據(jù)數(shù)據(jù)存儲對象的類型確定相應(yīng)的去重方式，能夠提高存儲系統(tǒng)去重效率和存儲資源池的整體利用率?！靖綀D說明】
[0027]為了更清楚地說明本發(fā)明實施例，下面將對實施例中所需要使用的附圖做簡單的介紹，顯而易見地，下面描述中的附圖僅僅是本發(fā)明的一些實施例，對于本領(lǐng)域普通技術(shù)人員來講，在不付出創(chuàng)造性勞動的前提下，還可以根據(jù)這些附圖獲得其他的附圖。
[0028]圖1為本發(fā)明提供的一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法的流程圖；
[0029]圖2為本發(fā)明提供的一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重裝置的結(jié)構(gòu)圖；
[0030]圖3為本發(fā)明提供的一種云存儲系統(tǒng)的結(jié)構(gòu)圖?！揪唧w實施方式】
[0031]下面將結(jié)合本發(fā)明實施例中的附圖，對本發(fā)明實施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實施例僅僅是本發(fā)明一部分實施例，而不是全部實施例?；诒景l(fā)明中的實施例，本領(lǐng)域普通技術(shù)人員在沒有做出創(chuàng)造性勞動前提下，所獲得的所有其他實施例，都屬于本發(fā)明保護(hù)范圍。
[0032]本發(fā)明的核心是提供一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法及裝置。
[0033]為了使本技術(shù)領(lǐng)域的人員更好地理解本發(fā)明方案，下面結(jié)合附圖和【具體實施方式】對本發(fā)明作進(jìn)一步的詳細(xì)說明。[〇〇34]圖1為本發(fā)明提供的一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法的流程圖。云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法包括:
[0035]S10:判斷包含有重復(fù)數(shù)據(jù)的數(shù)據(jù)存儲對象的類型為文件數(shù)據(jù)還是塊數(shù)據(jù)，如果是文件數(shù)據(jù)則進(jìn)入步驟SI 1，如果是塊數(shù)據(jù)則進(jìn)入步驟S12;
[0036]SI 1:確定數(shù)據(jù)存儲對象按照文件級去重方式進(jìn)行去重；
[0037]S12:確定數(shù)據(jù)存儲對象按照塊數(shù)據(jù)級去重方式進(jìn)行去重。
[0038]在具體實施中，數(shù)據(jù)存儲對象的類型可以分為文件數(shù)據(jù)類型和塊數(shù)據(jù)類型，文件數(shù)據(jù)類型和塊數(shù)據(jù)類型的去重方式不同。如果數(shù)據(jù)存儲對象為文件數(shù)據(jù)類型，采用塊數(shù)據(jù)級去重方式的話，則降低存儲系統(tǒng)去重效率和存儲資源池的整體利用率;相同的，如果數(shù)據(jù)存儲對象為塊數(shù)據(jù)類型，采用文件級去重方式的話，則降低存儲系統(tǒng)去重效率和存儲資源池的整體利用率。
[0039]本發(fā)明中的文件級去重方式指的是:如果發(fā)現(xiàn)兩個相同的文件，其中之一就會被指向另一個文件的指針?biāo)〈?。該方式只是簡單地將多份訪問請求鏈接到同一份數(shù)據(jù)，不會影響數(shù)據(jù)的讀取性能，而且用戶打開文件時，也不需要進(jìn)行解壓縮或者數(shù)據(jù)重組。
[0040]本發(fā)明中的塊數(shù)據(jù)級去重方式指的是:將所有的數(shù)據(jù)存儲對象分解成數(shù)據(jù)塊，然后通過散列算法，為每個塊創(chuàng)建一個哈希值，并與其他所有數(shù)據(jù)塊的哈希值進(jìn)行比對，如果兩個不同數(shù)據(jù)塊的哈希值完全一致，其中的一個塊就會被刪除，并用指向另一個塊的指針來代替。該方式有著較高的壓縮率，去重粒度更細(xì)，能夠更好的提高數(shù)據(jù)去重的效率。[〇〇41]本實施例提供的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法，當(dāng)接收到數(shù)據(jù)存儲對象后，首先判斷數(shù)據(jù)存儲對象的類型為文件數(shù)據(jù)還是塊數(shù)據(jù)，如果是文件數(shù)據(jù)則確定數(shù)據(jù)存儲對象按照文件級去重方式進(jìn)行去重;如果判斷數(shù)據(jù)存儲對象的類型為塊數(shù)據(jù)入則確定數(shù)據(jù)存儲對象按照塊數(shù)據(jù)級去重方式進(jìn)行去重。該方法根據(jù)數(shù)據(jù)存儲對象的類型確定相應(yīng)的去重方式，能夠提高存儲系統(tǒng)去重效率和存儲資源池的整體利用率。
[0042]作為一種有優(yōu)選地實施方式，在上述實施例的基礎(chǔ)上，在步驟S11之后還包括:
[0043]將數(shù)據(jù)存儲對象發(fā)送至存儲資源池中的文件存儲設(shè)備中以對數(shù)據(jù)存儲對象進(jìn)行去重和存儲。
[0044]在確定了數(shù)據(jù)存儲對象為文件數(shù)據(jù)后，則將數(shù)據(jù)存儲對象按照文件級去重方式進(jìn)行去重。存儲資源池中有多種存儲設(shè)備，例如，可以是NAS網(wǎng)絡(luò)存儲設(shè)備。
[0045]作為一種有優(yōu)選地實施方式，在上述實施例的基礎(chǔ)上，在步驟S12之后還包括:
[0046]將數(shù)據(jù)存儲對象發(fā)送至存儲資源池中的塊存儲設(shè)備中以對數(shù)據(jù)存儲對象進(jìn)行去重和存儲。
[0047]在確定了數(shù)據(jù)存儲對象為塊數(shù)據(jù)后，則將數(shù)據(jù)存儲對象按照數(shù)據(jù)級去重方式進(jìn)行去重。存儲資源池中有多種存儲設(shè)備，例如，可以是SAN存儲設(shè)備。
[0048]作為一種有優(yōu)選地實施方式，在上述實施例的基礎(chǔ)上，在步驟S11或步驟S12之后還包括:
[0049]將數(shù)據(jù)存儲對象發(fā)送至存儲資源池中的對象存儲設(shè)備中以對數(shù)據(jù)存儲對象進(jìn)行去重和存儲。
[0050]在具體實施中，當(dāng)確定了數(shù)據(jù)存儲對象的去重方式后，無論是按照文件級去重方式還是數(shù)據(jù)級去重方式都可以將數(shù)據(jù)存儲對象發(fā)送至對象存儲設(shè)置中，以完成去重和存儲。對象存儲設(shè)備包括Ceph對象存儲設(shè)備。
[0051]作為一種有優(yōu)選地實施方式，在上述實施例的基礎(chǔ)上，在步驟S10之前還包括: [〇〇52]獲取存儲請求；
[0053]接收存儲請求對應(yīng)的待存儲數(shù)據(jù)；
[0054]判斷待存儲數(shù)據(jù)是否包含有重復(fù)數(shù)據(jù)，如果是，則確定待存儲數(shù)據(jù)為數(shù)據(jù)存儲對象。
[0055]可以理解的是，在上述實施例的基礎(chǔ)上，還包括:
[0056]記錄步驟S10-S12中的任意一個步驟或幾個步驟對應(yīng)的操作信息。
[0057]在步驟S10開始執(zhí)行到本步驟執(zhí)行完成后，將該步驟的操作信息記錄下來，例如， 執(zhí)行時間等，以便作為后續(xù)的問題處理和故障排查依據(jù)。對于步驟S11和步驟S12來說相同。 [〇〇58]圖2為本發(fā)明提供的一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重裝置的結(jié)構(gòu)圖。一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重裝置，包括:
[0059]數(shù)據(jù)存儲對象類型判斷模塊10，用于判斷包含有重復(fù)數(shù)據(jù)的數(shù)據(jù)存儲對象的類型為文件數(shù)據(jù)還是塊數(shù)據(jù)；
[0060]去重方式選擇模塊11，用于在數(shù)據(jù)存儲對象類型判斷模塊判斷出數(shù)據(jù)存儲對象的類型為文件數(shù)據(jù)時，確定數(shù)據(jù)存儲對象按照文件級去重方式進(jìn)行去重，或者，用于在數(shù)據(jù)存儲對象類型判斷模塊判斷出數(shù)據(jù)存儲對象的類型為塊數(shù)據(jù)時，確定數(shù)據(jù)存儲對象按照塊數(shù)據(jù)級去重方式進(jìn)行去重。
[0061]在具體實施中，數(shù)據(jù)存儲對象的類型可以分為文件數(shù)據(jù)類型和塊數(shù)據(jù)類型，文件數(shù)據(jù)類型和塊數(shù)據(jù)類型的去重方式不同。如果數(shù)據(jù)存儲對象為文件數(shù)據(jù)類型，采用塊數(shù)據(jù)級去重方式的話，則降低存儲系統(tǒng)去重效率和存儲資源池的整體利用率;相同的，如果數(shù)據(jù)存儲對象為塊數(shù)據(jù)類型，采用文件級去重方式的話，則降低存儲系統(tǒng)去重效率和存儲資源池的整體利用率。
[0062]本發(fā)明中的文件級去重方式指的是:如果發(fā)現(xiàn)兩個相同的文件，其中之一就會被指向另一個文件的指針?biāo)〈Ｔ摲绞街皇呛唵蔚貙⒍喾菰L問請求鏈接到同一份數(shù)據(jù)，不會影響數(shù)據(jù)的讀取性能，而且用戶打開文件時，也不需要進(jìn)行解壓縮或者數(shù)據(jù)重組。
[0063]本發(fā)明中的塊數(shù)據(jù)級去重方式指的是:將所有的數(shù)據(jù)存儲對象分解成數(shù)據(jù)塊，然后通過散列算法，為每個塊創(chuàng)建一個哈希值，并與其他所有數(shù)據(jù)塊的哈希值進(jìn)行比對，如果兩個不同數(shù)據(jù)塊的哈希值完全一致，其中的一個塊就會被刪除，并用指向另一個塊的指針來代替。該方式有著較高的壓縮率，去重粒度更細(xì)，能夠更好的提高數(shù)據(jù)去重的效率。[〇〇64]本實施例提供的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重裝置，當(dāng)數(shù)據(jù)存儲對象類型判斷模塊 10接收到數(shù)據(jù)存儲對象后，首先判斷數(shù)據(jù)存儲對象的類型為文件數(shù)據(jù)還是塊數(shù)據(jù)，如果是文件數(shù)據(jù)則去重方式選擇模塊11確定數(shù)據(jù)存儲對象按照文件級去重方式進(jìn)行去重;如果判斷數(shù)據(jù)存儲對象的類型為塊數(shù)據(jù)入則去重方式選擇模塊11確定數(shù)據(jù)存儲對象按照塊數(shù)據(jù)級去重方式進(jìn)行去重。該方法根據(jù)數(shù)據(jù)存儲對象的類型確定相應(yīng)的去重方式，能夠提高存儲系統(tǒng)去重效率和存儲資源池的整體利用率。
[0065]圖3為本發(fā)明提供的一種云存儲系統(tǒng)的結(jié)構(gòu)圖。一種云存儲系統(tǒng)，包括上述實施例所述的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重裝置1。在具體實施中，云存儲系統(tǒng)還包括存儲資源池2 等。云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重裝置1的【具體實施方式】見上述實施例的描述。
[0066]以上對本發(fā)明所提供的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法、裝置及系統(tǒng)進(jìn)行了詳細(xì)介紹。說明書中各個實施例采用遞進(jìn)的方式描述，每個實施例重點說明的都是與其他實施例的不同之處，各個實施例之間相同相似部分互相參見即可。對于實施例公開的裝置而言， 由于其與實施例公開的方法相對應(yīng)，所以描述的比較簡單，相關(guān)之處參見方法部分說明即可。應(yīng)當(dāng)指出，對于本技術(shù)領(lǐng)域的普通技術(shù)人員來說，在不脫離本發(fā)明原理的前提下，還可以對本發(fā)明進(jìn)行若干改進(jìn)和修飾，這些改進(jìn)和修飾也落入本發(fā)明權(quán)利要求的保護(hù)范圍內(nèi)。
[0067]專業(yè)人員還可以進(jìn)一步意識到，結(jié)合本文中所公開的實施例描述的各示例的單元及算法步驟，能夠以電子硬件、計算機(jī)軟件或者二者的結(jié)合來實現(xiàn)，為了清楚地說明硬件和軟件的可互換性，在上述說明中已經(jīng)按照功能一般性地描述了各示例的組成及步驟。這些功能究竟以硬件還是軟件方式來執(zhí)行，取決于技術(shù)方案的特定應(yīng)用和設(shè)計約束條件。專業(yè)技術(shù)人員可以對每個特定的應(yīng)用來使用不同方法來實現(xiàn)所描述的功能，但是這種實現(xiàn)不應(yīng)認(rèn)為超出本發(fā)明的范圍。
[0068]結(jié)合本文中所公開的實施例描述的方法或算法的步驟可以直接用硬件、處理器執(zhí)行的軟件模塊，或者二者的結(jié)合來實施。軟件模塊可以置于隨機(jī)存儲器(RAM)、內(nèi)存、只讀存儲器(R0M)、電可編程R0M、電可擦除可編程R0M、寄存器、硬盤、可移動磁盤、CD-ROM、或技術(shù)領(lǐng)域內(nèi)所公知的任意其它形式的存儲介質(zhì)中。
【主權(quán)項】
1.一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法，其特征在于，包括:S10:判斷包含有重復(fù)數(shù)據(jù)的數(shù)據(jù)存儲對象的類型為文件數(shù)據(jù)還是塊數(shù)據(jù)，如果是文件 數(shù)據(jù)則進(jìn)入步驟SI 1，如果是塊數(shù)據(jù)則進(jìn)入步驟S12;S11:確定所述數(shù)據(jù)存儲對象按照文件級去重方式進(jìn)行去重；S12:確定所述數(shù)據(jù)存儲對象按照塊數(shù)據(jù)級去重方式進(jìn)行去重。2.根據(jù)權(quán)利要求1所述的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法，其特征在于，在步驟S11之 后還包括:將所述數(shù)據(jù)存儲對象發(fā)送至存儲資源池中的文件存儲設(shè)備中以對所述數(shù)據(jù)存儲對象 進(jìn)行去重和存儲。3.根據(jù)權(quán)利要求2所述的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法，其特征在于，所述文件存儲 設(shè)備包括NAS網(wǎng)絡(luò)存儲設(shè)備。4.根據(jù)權(quán)利要求1所述的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法，其特征在于，在步驟S12之 后還包括:將所述數(shù)據(jù)存儲對象發(fā)送至存儲資源池中的塊存儲設(shè)備中以對所述數(shù)據(jù)存儲對象進(jìn) 行去重和存儲。5.根據(jù)權(quán)利要求4所述的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法，其特征在于，所述塊存儲設(shè) 備包括SAN存儲設(shè)備。6.根據(jù)權(quán)利要求1所述的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法，其特征在于，在步驟S11或 步驟S12之后還包括:將所述數(shù)據(jù)存儲對象發(fā)送至存儲資源池中的對象存儲設(shè)備中以對所述數(shù)據(jù)存儲對象 進(jìn)行去重和存儲。7.根據(jù)權(quán)利要求6所述的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法，其特征在于，所述對象存儲 設(shè)備包括Ceph對象存儲設(shè)備。8.根據(jù)權(quán)利要求1所述的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重方法，其特征在于，在步驟S10之 前還包括:獲取存儲請求；接收所述存儲請求對應(yīng)的待存儲數(shù)據(jù)；判斷所述待存儲數(shù)據(jù)是否包含有所述重復(fù)數(shù)據(jù)，如果是，則確定所述待存儲數(shù)據(jù)為所 述數(shù)據(jù)存儲對象。9.一種云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重裝置，其特征在于，包括:數(shù)據(jù)存儲對象類型判斷模塊，用于判斷包含有重復(fù)數(shù)據(jù)的數(shù)據(jù)存儲對象的類型為文件 數(shù)據(jù)還是塊數(shù)據(jù)；去重方式選擇模塊，用于在所述數(shù)據(jù)存儲對象類型判斷模塊判斷出所述數(shù)據(jù)存儲對象 的類型為文件數(shù)據(jù)時，確定所述數(shù)據(jù)存儲對象按照文件級去重方式進(jìn)行去重，或者，用于在 所述數(shù)據(jù)存儲對象類型判斷模塊判斷出所述數(shù)據(jù)存儲對象的類型為塊數(shù)據(jù)時，確定所述數(shù) 據(jù)存儲對象按照塊數(shù)據(jù)級去重方式進(jìn)行去重。10.—種云存儲系統(tǒng)，其特征在于，包括權(quán)利要求9所述的云存儲系統(tǒng)的重復(fù)數(shù)據(jù)去重 裝置。
【文檔編號】G06F3/06GK106020722SQ201610334354
【公開日】2016年10月12日
【申請日】2016年5月19日
【發(fā)明人】于輝, 劉俊朋
【申請人】浪潮(北京)電子信息產(chǎn)業(yè)有限公司