元數(shù)據(jù)動態(tài)管理方法及系統(tǒng)的制作方法
【專利摘要】本發(fā)明涉及一種元數(shù)據(jù)動態(tài)管理方法及系統(tǒng)，方法包括：元數(shù)據(jù)管理服務器接收客戶端發(fā)出的對元數(shù)據(jù)的查詢請求時，在本地查詢元數(shù)據(jù)對應的元數(shù)據(jù)存儲節(jié)點的位置；根據(jù)元數(shù)據(jù)的訪問時間和訪問頻率確定元數(shù)據(jù)的訪問頻度；將元數(shù)據(jù)的訪問頻度與預設閾值比對，將較高訪問頻度的元數(shù)據(jù)及副本調(diào)整到負載能力更高的元數(shù)據(jù)存儲節(jié)點。本發(fā)明在元數(shù)據(jù)管理服務器處理客戶端發(fā)出的元數(shù)據(jù)的查詢請求時，根據(jù)元數(shù)據(jù)的訪問時間和訪問頻率確定元數(shù)據(jù)的訪問頻度，再根據(jù)訪問頻度來將訪問頻度較高的元數(shù)據(jù)和元數(shù)據(jù)副本調(diào)整到負載能力更高的元數(shù)據(jù)存儲節(jié)點。這樣就使得這些被頻繁訪問的元數(shù)據(jù)及副本調(diào)整在負載能力更高的服務器，從而不容易發(fā)生失效的情況。
【專利說明】元數(shù)據(jù)動態(tài)管理方法及系統(tǒng)

【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及云計算海量存儲應用領(lǐng)域，尤其涉及一種元數(shù)據(jù)動態(tài)管理方法及系 統(tǒng)。

【背景技術(shù)】
[0002] 在當前的信息社會中，每天都會產(chǎn)生大量需要保存的數(shù)據(jù)，這也促使海量存儲系 統(tǒng)成為當前研究和應用中的熱點問題。云計算已經(jīng)逐漸走進人們的視野，基于云計算平臺 的海量數(shù)據(jù)存儲系統(tǒng)為海量存儲提供了解決方案。
[0003] 在云計算平臺的海量數(shù)據(jù)存儲系統(tǒng)中，云數(shù)據(jù)節(jié)點負責整體數(shù)據(jù)描述，屬于數(shù)據(jù) 存儲的核心節(jié)點，目前云數(shù)據(jù)節(jié)點采用單節(jié)點形式，一旦云數(shù)據(jù)節(jié)點出現(xiàn)失效的情況，將會 導致云計算平臺的數(shù)據(jù)存儲無法繼續(xù)提供服務。


【發(fā)明內(nèi)容】

[0004] 本發(fā)明的目的是提出一種元數(shù)據(jù)動態(tài)管理方法及系統(tǒng)，能夠解決元數(shù)據(jù)存儲節(jié)點 易失效的問題。
[0005] 為實現(xiàn)上述目的，本發(fā)明提供了一種元數(shù)據(jù)動態(tài)管理方法，包括：
[0006] 元數(shù)據(jù)管理服務器接收客戶端發(fā)出的對元數(shù)據(jù)的查詢請求時，根據(jù)所述數(shù)據(jù)查詢 請求在本地查詢所述元數(shù)據(jù)對應的元數(shù)據(jù)存儲節(jié)點的位置；
[0007] 所述元數(shù)據(jù)管理服務器根據(jù)所述元數(shù)據(jù)的訪問時間和訪問頻率確定所述元數(shù)據(jù) 的訪問頻度；
[0008] 所述元數(shù)據(jù)管理服務器將所述元數(shù)據(jù)的訪問頻度與預設閾值進行比對，將較高訪 問頻度的元數(shù)據(jù)及對應的元數(shù)據(jù)副本調(diào)整到負載能力更高的元數(shù)據(jù)存儲節(jié)點。
[0009] 進一步的，在所述元數(shù)據(jù)管理服務器接收客戶端發(fā)出的對元數(shù)據(jù)的查詢請求的操 作之前，還包括以下步驟：
[0010] 所述元數(shù)據(jù)管理服務器對所述元數(shù)據(jù)進行副本備份，得到至少一個元數(shù)據(jù)副本；
[0011] 所述元數(shù)據(jù)管理服務器將所述元數(shù)據(jù)和對應的元數(shù)據(jù)副本的對應關(guān)系進行保存。
[0012] 進一步的，所述元數(shù)據(jù)管理服務器將所述元數(shù)據(jù)的訪問頻度與預設閾值進行比 對，將較高訪問頻度的元數(shù)據(jù)及對應的元數(shù)據(jù)副本調(diào)整到負載能力更高的元數(shù)據(jù)存儲節(jié)點 的操作具體為：
[0013] 所述元數(shù)據(jù)管理服務器計算本地保存的多個元數(shù)據(jù)的訪問頻度均值，作為訪問頻 度的預設閾值；
[0014] 所述元數(shù)據(jù)管理服務器判斷所述元數(shù)據(jù)的訪問頻度是否超過所述訪問頻度均值， 如果所述元數(shù)據(jù)的訪問頻度超過所述訪問頻度均值，則將所述元數(shù)據(jù)及對應的元數(shù)據(jù)副本 調(diào)整到負載能力更高的元數(shù)據(jù)存儲節(jié)點，否則不需對所述元數(shù)據(jù)及對應的元數(shù)據(jù)副本的存 儲位置進行調(diào)整。
[0015] 進一步的，所述元數(shù)據(jù)管理服務器根據(jù)所述元數(shù)據(jù)的訪問時間和訪問頻率確定所 述元數(shù)據(jù)的訪問頻度的操作具體為：
[0016] 所述元數(shù)據(jù)管理服務器根據(jù)以下公式計算所述元數(shù)據(jù)的訪問頻度A，
[0017]

【權(quán)利要求】
1. 一種元數(shù)據(jù)動態(tài)管理方法，包括： 元數(shù)據(jù)管理服務器接收客戶端發(fā)出的對元數(shù)據(jù)的查詢請求時，根據(jù)所述數(shù)據(jù)查詢請求 在本地查詢所述元數(shù)據(jù)對應的元數(shù)據(jù)存儲節(jié)點的位置； 所述元數(shù)據(jù)管理服務器根據(jù)所述元數(shù)據(jù)的訪問時間和訪問頻率確定所述元數(shù)據(jù)的訪 問頻度； 所述元數(shù)據(jù)管理服務器將所述元數(shù)據(jù)的訪問頻度與預設閾值進行比對，將較高訪問頻 度的元數(shù)據(jù)及對應的元數(shù)據(jù)副本調(diào)整到負載能力更高的元數(shù)據(jù)存儲節(jié)點。
2. 根據(jù)權(quán)利要求1所述的元數(shù)據(jù)動態(tài)管理方法，其中在所述元數(shù)據(jù)管理服務器接收客 戶端發(fā)出的對元數(shù)據(jù)的查詢請求的操作之前，還包括以下步驟： 所述元數(shù)據(jù)管理服務器對所述元數(shù)據(jù)進行副本備份，得到至少一個元數(shù)據(jù)副本； 所述元數(shù)據(jù)管理服務器將所述元數(shù)據(jù)和對應的元數(shù)據(jù)副本的對應關(guān)系進行保存。
3. 根據(jù)權(quán)利要求1所述的元數(shù)據(jù)動態(tài)管理方法，其中所述元數(shù)據(jù)管理服務器將所述元 數(shù)據(jù)的訪問頻度與預設閾值進行比對，將較高訪問頻度的元數(shù)據(jù)及對應的元數(shù)據(jù)副本調(diào)整 到負載能力更高的元數(shù)據(jù)存儲節(jié)點的操作具體為： 所述元數(shù)據(jù)管理服務器計算本地保存的多個元數(shù)據(jù)的訪問頻度均值，作為訪問頻度的 預設閾值； 所述元數(shù)據(jù)管理服務器判斷所述元數(shù)據(jù)的訪問頻度是否超過所述訪問頻度均值，如果 所述元數(shù)據(jù)的訪問頻度超過所述訪問頻度均值，則將所述元數(shù)據(jù)及對應的元數(shù)據(jù)副本調(diào)整 到負載能力更高的元數(shù)據(jù)存儲節(jié)點，否則不需對所述元數(shù)據(jù)及對應的元數(shù)據(jù)副本的存儲位 置進行調(diào)整。
4. 根據(jù)權(quán)利要求1所述的元數(shù)據(jù)動態(tài)管理方法，其中所述元數(shù)據(jù)管理服務器根據(jù)所述 元數(shù)據(jù)的訪問時間和訪問頻率確定所述元數(shù)據(jù)的訪問頻度的操作具體為： 所述元數(shù)據(jù)管理服務器根據(jù)以下公式計算所述元數(shù)據(jù)的訪問頻度A，
其中，t。是元數(shù)據(jù)創(chuàng)建的時間；t是系統(tǒng)當前的時間；f；是元數(shù)據(jù)在單位時間內(nèi)被訪問 的次數(shù)，t。和t以天為計算單位。
5. 根據(jù)權(quán)利要求1所述的元數(shù)據(jù)動態(tài)管理方法，其中所述根據(jù)數(shù)據(jù)查詢請求在本地查 詢所述元數(shù)據(jù)對應的元數(shù)據(jù)存儲節(jié)點的位置的操作具體為： 所述元數(shù)據(jù)管理服務器基于語義對所述元數(shù)據(jù)的元數(shù)據(jù)存儲節(jié)點的位置進行查詢。
6. -種元數(shù)據(jù)動態(tài)管理系統(tǒng)，包括： 元數(shù)據(jù)存儲節(jié)點，用于存儲元數(shù)據(jù)及對應的至少一個元數(shù)據(jù)副本； 元數(shù)據(jù)管理服務器，用于對所述元數(shù)據(jù)和元數(shù)據(jù)副本的對應關(guān)系進行管理，接收客戶 端發(fā)出的對所述元數(shù)據(jù)的查詢請求時，根據(jù)所述數(shù)據(jù)查詢請求在本地查詢所述元數(shù)據(jù)對應 的元數(shù)據(jù)存儲節(jié)點的位置，根據(jù)所述元數(shù)據(jù)的訪問時間和訪問頻率確定所述元數(shù)據(jù)的訪問 頻度，將所述元數(shù)據(jù)的訪問頻度與預設閾值進行比對，將較高訪問頻度的元數(shù)據(jù)及對應的 元數(shù)據(jù)副本調(diào)整到負載能力更高的元數(shù)據(jù)存儲節(jié)點。
7. 根據(jù)權(quán)利要求6所述的元數(shù)據(jù)動態(tài)管理系統(tǒng)，其中所述元數(shù)據(jù)管理服務器具體包 括： 副本關(guān)系管理模塊，用于對所述元數(shù)據(jù)和元數(shù)據(jù)副本的對應關(guān)系進行管理； 查詢請求接收模塊，用于接收客戶端發(fā)出的對所述元數(shù)據(jù)的查詢請求； 節(jié)點位置查詢模塊，用于根據(jù)所述數(shù)據(jù)查詢請求在本地查詢所述元數(shù)據(jù)對應的元數(shù)據(jù) 存儲節(jié)點的位置； 訪問頻度確定模塊，用于根據(jù)所述元數(shù)據(jù)的訪問時間和訪問頻率確定所述元數(shù)據(jù)的訪 問頻度； 訪問頻度比對模塊，用于將所述元數(shù)據(jù)的訪問頻度與預設閾值進行比對； 存儲節(jié)點調(diào)整模塊，用于將較高訪問頻度的元數(shù)據(jù)及對應的元數(shù)據(jù)副本調(diào)整到負載能 力更高的元數(shù)據(jù)存儲節(jié)點。
8. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)動態(tài)管理系統(tǒng)，其中所述元數(shù)據(jù)管理服務器還包括： 副本備份模塊，用于對所述元數(shù)據(jù)進行副本備份，得到至少一個元數(shù)據(jù)副本，并將所述 元數(shù)據(jù)和對應的元數(shù)據(jù)副本的對應關(guān)系進行保存。
9. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)動態(tài)管理系統(tǒng)，其中所述元數(shù)據(jù)管理服務器還包括： 均值計算模塊，用于計算本地保存的多個元數(shù)據(jù)的訪問頻度均值，作為訪問頻度的預 設閾值； 訪問頻度比對模塊具體用于判斷所述元數(shù)據(jù)的訪問頻度是否超過所述訪問頻度均值， 如果所述元數(shù)據(jù)的訪問頻度超過所述訪問頻度均值，則調(diào)用所述存儲節(jié)點調(diào)整模塊將所述 元數(shù)據(jù)及對應的元數(shù)據(jù)副本調(diào)整到負載能力更高的元數(shù)據(jù)存儲節(jié)點，否則不需對所述元數(shù) 據(jù)及對應的元數(shù)據(jù)副本的存儲位置進行調(diào)整。
10. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)動態(tài)管理系統(tǒng)，其中所述訪問頻度確定模塊具體用 于根據(jù)以下公式計算所述元數(shù)據(jù)的訪問頻度A，
其中，t。是元數(shù)據(jù)創(chuàng)建的時間；t是系統(tǒng)當前的時間；f；是元數(shù)據(jù)在單位時間內(nèi)被訪問 的次數(shù)，t。和t以天為計算單位。
11. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)動態(tài)管理系統(tǒng)，其中所述節(jié)點位置查詢模塊具體用 于基于語義對所述元數(shù)據(jù)的元數(shù)據(jù)存儲節(jié)點的位置進行查詢。
【文檔編號】G06F17/30GK104142953SQ201310170473
【公開日】2014年11月12日 申請日期:2013年5月10日 優(yōu)先權(quán)日:2013年5月10日
【發(fā)明者】顧茜 申請人:中國電信股份有限公司