專利名稱：一種歷史數(shù)據(jù)管理系統(tǒng)與方法
技術(shù)領(lǐng)域：
本發(fā)明涉及數(shù)據(jù)庫(kù)應(yīng)用領(lǐng)域，尤其是涉及存儲(chǔ)數(shù)據(jù)庫(kù)歷史數(shù)據(jù)的硬盤空間管理領(lǐng)域。
背景技術(shù)：
在電信管理網(wǎng)中，網(wǎng)絡(luò)管理軟件承擔(dān)統(tǒng)一管理網(wǎng)元的重要角色。隨著業(yè)務(wù)的增長(zhǎng)及功能多樣化，被管理的網(wǎng)元越來越多，而且網(wǎng)元下配置的數(shù)據(jù)也越來越豐富，使得數(shù)據(jù)庫(kù)存儲(chǔ)空間呈現(xiàn)迅速膨脹的趨勢(shì)。大量的歷史數(shù)據(jù)，會(huì)對(duì)網(wǎng)管的查詢及入庫(kù)產(chǎn)生效率上的影響。故需要及時(shí)把庫(kù)中的歷史數(shù)據(jù)歸檔成文件。隨著時(shí)間的推移，這些大數(shù)據(jù)量的歸檔文件很快占滿硬盤空間，給應(yīng)用程序的正常運(yùn)行帶來極大的隱患。
目前很多應(yīng)用程序都會(huì)產(chǎn)生大量數(shù)據(jù)文件，例如性能管理，它是網(wǎng)管的主要功能，也是產(chǎn)生最大數(shù)據(jù)量的功能之一。以傳輸網(wǎng)的SDH設(shè)備為例，各個(gè)單板每隔15分鐘就要向網(wǎng)管上報(bào)大量的性能數(shù)據(jù)，管理的單板越多，上報(bào)的性能數(shù)據(jù)越多，大量的歷史數(shù)據(jù)持續(xù)入庫(kù)，會(huì)導(dǎo)致后續(xù)網(wǎng)管數(shù)據(jù)入庫(kù)效率的降低及數(shù)據(jù)庫(kù)空間急劇減小。
目前存在解決上述問題的一些方法，如中國(guó)專利CN200410096255提出了一種歷史數(shù)據(jù)歸檔和査詢裝置及方法，可以部分解決該問題，即通過將歷史數(shù)據(jù)進(jìn)行壓縮從而節(jié)省硬盤空間，但是大量的歷史數(shù)據(jù)歸檔后，生成文本文件，隨著時(shí)間的推移，導(dǎo)致大量的文本文件生成，同時(shí)占用硬盤的空間越來越大，如果不及時(shí)清理這些文件，就可能最終導(dǎo)致硬盤空間耗盡，使整個(gè)系統(tǒng)存在處于癱瘓的可能。
針對(duì)以上方法的缺陷，本發(fā)明提出一種定時(shí)增量壓縮歷史數(shù)據(jù)，自動(dòng)管理硬盤空間的系統(tǒng)與方法
發(fā)明內(nèi)容
長(zhǎng)，保證歷史數(shù)據(jù)不會(huì)丟失，占用硬盤空間以較小的速度增長(zhǎng)，既提高硬盤的使用率，又降低手工維護(hù)硬盤的頻率。
本發(fā)明的技術(shù)方案為
一種歷史數(shù)據(jù)管理系統(tǒng)，其特征在于，包括配置文件單元，數(shù)據(jù)管理單元；所述配置文件單元用于配置所述數(shù)據(jù)管理單元的相應(yīng)參數(shù)；所述數(shù)據(jù)管理單元用于對(duì)數(shù)據(jù)庫(kù)歷史數(shù)據(jù)進(jìn)行增量壓縮并根據(jù)所述配置文件單元的參數(shù)配置刪除已成功壓縮的歷史數(shù)據(jù)。
所述的歷史數(shù)據(jù)管理系統(tǒng)，還包括硬盤空間定時(shí)檢測(cè)單元，所述硬盤空間定時(shí)檢測(cè)單元用于定時(shí)檢測(cè)硬盤空間是否低于設(shè)定的臨界閾值，當(dāng)硬盤空間低于臨界閾值時(shí)，硬盤空間定時(shí)檢測(cè)單元根據(jù)設(shè)定處理機(jī)制進(jìn)行操作，包括通過廣播通知用戶界面，將預(yù)警提示信息寫入日志或者將該事件通知數(shù)據(jù)管理單元進(jìn)行刪除操作。
所述的歷史數(shù)據(jù)管理系統(tǒng)，所述硬盤空間定時(shí)檢測(cè)單元通過所述配置文件單元進(jìn)行參數(shù)設(shè)定，包括定時(shí)檢查時(shí)間，硬盤空間的臨界閾值，硬盤空間低于臨界閾值的處理機(jī)制。
一種歷史數(shù)據(jù)管理方法，包括如下步驟
步驟一，初始化配置文件的參數(shù)，包括處理歷史數(shù)據(jù)的時(shí)間范圍、文件范圍、處理時(shí)間、壓縮文件的格式及壓縮文件的刪除策略。
步驟二，在設(shè)定的處理時(shí)間將所述時(shí)間范圍內(nèi)的歷史數(shù)據(jù)壓縮為設(shè)定格式；
步驟三，確定歷史文件壓縮成功后，根據(jù)配置文件所設(shè)定的刪除策略，刪除壓縮成功的數(shù)據(jù)文件。
上述歷史數(shù)據(jù)管理方法，步驟一中根據(jù)文件目錄、文件類型、文件大小設(shè)定文件范圍；處理時(shí)間設(shè)定為周期間隔；壓縮文件刪除策略為定時(shí)或者實(shí)時(shí)刪除特定的壓縮文件。
上述歷史數(shù)據(jù)管理方法，步驟一中的壓縮文件文件格式為WIN、 SUN或者HP平臺(tái)下的特定格式。上述歷史數(shù)據(jù)管理方法，還可包括對(duì)硬盤空間定時(shí)檢測(cè)的步驟，當(dāng)定時(shí)檢測(cè)到硬盤可用空間低于臨界閾值時(shí)，按照設(shè)定的處理機(jī)制進(jìn)行操作。所述處理機(jī)制為通過廣播通知用戶界面，將預(yù)警提示信息寫入日志或者將該事件通知數(shù)據(jù)管理單元進(jìn)行刪除操作。
上述歷史數(shù)據(jù)管理方法，所述硬盤空間臨界閾值采用絕對(duì)值或者相對(duì)值設(shè)定，兩種閾值可以同時(shí)生效。
采用本發(fā)明所述系統(tǒng)和方法，與現(xiàn)有技術(shù)相比，由于采取了定時(shí)增量壓縮、刪除已壓縮目錄或文件的技術(shù)措施，節(jié)省硬盤空間，達(dá)到了自動(dòng)管理硬盤空間的效果，克服了現(xiàn)有的每天大量的歷史數(shù)據(jù)歸檔時(shí)，導(dǎo)致硬盤空間極易占滿，從而不能正常歸檔或整個(gè)系統(tǒng)由于可用空間不足，產(chǎn)生癱瘓的缺陷。
同時(shí)可通過硬盤空間檢測(cè)系統(tǒng)及時(shí)檢測(cè)硬盤空間，及時(shí)向用戶和系統(tǒng)進(jìn)行預(yù)警。所生成的壓縮文件，可以采用不同平臺(tái)(包括WIN、 SUN平臺(tái)和HP平臺(tái))下的通用解壓工具解壓使用。


圖1為本發(fā)明歷史數(shù)據(jù)管理系統(tǒng)的一個(gè)實(shí)施例的系統(tǒng)結(jié)構(gòu)圖2為本發(fā)明實(shí)施例壓縮歷史歸檔數(shù)據(jù)的流程示意圖3為本發(fā)明實(shí)施例定時(shí)對(duì)硬盤空間進(jìn)行檢測(cè)流程示意圖。
具體實(shí)施例方式
下面結(jié)合附圖和具體實(shí)施例對(duì)本發(fā)明作進(jìn)一步的說明。
圖1為本發(fā)明歷史數(shù)據(jù)管理系統(tǒng)的各單元示意圖，本實(shí)施例包括配置文件單元，數(shù)據(jù)管理單元和硬盤空間定時(shí)檢測(cè)單元。所述配置文件單元用于配置所述數(shù)據(jù)管理單元和硬盤空間定時(shí)檢測(cè)單元的相應(yīng)參數(shù)；所述數(shù)據(jù)管理單元用于對(duì)數(shù)據(jù)庫(kù)歷史數(shù)據(jù)進(jìn)行增量壓縮并根據(jù)所述配置文件單元的參數(shù)配置刪除成功壓縮的歷史數(shù)據(jù)；所述硬盤空間定時(shí)檢測(cè)單元用于定時(shí)檢測(cè)硬盤空間是否低于臨界閾值設(shè)定，當(dāng)硬盤空間低于臨界閾值時(shí)通知數(shù)據(jù)管理單元或者用戶界面進(jìn)行后續(xù)操作。圖2為本發(fā)明對(duì)歷史數(shù)據(jù)進(jìn)行管理的流程圖。
1. 首先初始化配置文件，包括歷史數(shù)據(jù)的時(shí)間范圍，如N=10天；文件范 圍及處理時(shí)間，如指定文件目錄和文件格式及處理時(shí)間，如每天凌晨2 時(shí)；
2. 根據(jù)配置文件中的處理時(shí)間，每隔10天于凌晨2時(shí)定時(shí)啟動(dòng)程序，根據(jù) 配置文件所設(shè)定的文件范圍掃描指定文件目錄下的指定格式文件，檢査 是否存在未壓縮的歷史文件；
3. 如果為壓縮文件存在，增量壓縮10天前的文件，以提高壓縮效率；
4. 確認(rèn)壓縮是否成功后，刪除已完成壓縮的文件或目錄，其中壓縮文件數(shù) 據(jù)可通過WIN和Unix平臺(tái)進(jìn)行查詢。
圖3為定時(shí)對(duì)硬盤空間進(jìn)行檢測(cè)的流程圖。
首先初始化配置文件，包括定時(shí)檢查時(shí)間，硬盤空間的臨界閾值，硬盤空間 低于閾值的處理機(jī)制；
在設(shè)定的檢査時(shí)間到達(dá)后，對(duì)硬盤空間進(jìn)行掃描；
當(dāng)硬盤可用空間低于所設(shè)定閾值時(shí)，根據(jù)相應(yīng)的處理機(jī)制進(jìn)行處理，如通過 廣播通知用戶界面提示預(yù)警信息或者通知數(shù)據(jù)管理單元進(jìn)行后續(xù)處理。
權(quán)利要求
1、一種歷史數(shù)據(jù)管理系統(tǒng)，其特征在于，包括配置文件單元，數(shù)據(jù)管理單元；所述配置文件單元用于配置所述數(shù)據(jù)管理單元的相應(yīng)參數(shù)；所述數(shù)據(jù)管理單元用于對(duì)數(shù)據(jù)庫(kù)歷史數(shù)據(jù)進(jìn)行增量壓縮并根據(jù)所述配置文件單元的參數(shù)配置刪除已成功壓縮的歷史數(shù)據(jù)。
2、 根據(jù)權(quán)利要求1所述的歷史數(shù)據(jù)管理系統(tǒng)，其特征在于，還包括硬盤空間定 時(shí)檢測(cè)單元，所述硬盤空間定時(shí)檢測(cè)單元用于定時(shí)檢測(cè)硬盤空間是否低于設(shè) 定的臨界閾值，當(dāng)硬盤空間低于臨界閾值時(shí)，硬盤空間定時(shí)檢測(cè)單元通過廣 播通知用戶界面、將預(yù)警提示信息寫入日志或者將該事件通知數(shù)據(jù)管理單元 進(jìn)行刪除操作。
3、 根據(jù)權(quán)利要求2所述的歷史數(shù)據(jù)管理系統(tǒng)，其特征在于，所述硬盤空間定時(shí) 檢測(cè)單元通過所述配置文件單元進(jìn)行參數(shù)設(shè)定。
4、 一種歷史數(shù)據(jù)管理方法，其特征在于，包括如下歩驟步驟一，初始化配置文件的參數(shù)，包括處理歷史數(shù)據(jù)的時(shí)間范圍、文件范圍、 處理時(shí)間、壓縮文件的格式及壓縮文件的刪除策略；步驟二，在設(shè)定的處理時(shí)間將所述時(shí)間范圍內(nèi)的歷史數(shù)據(jù)壓縮為設(shè)定格式； 步驟三，確定歷史文件壓縮成功后，根據(jù)配置文件所設(shè)定的刪除策略，刪除 壓縮成功的數(shù)據(jù)文件。
5、 根據(jù)權(quán)利要求4所述的歷史數(shù)據(jù)管理方法，其特征在于步驟一中根據(jù)文件 目錄、文件類型、文件大小設(shè)定文件范圍；處理時(shí)間設(shè)定為周期間隔；壓縮 文件刪除策略為定時(shí)或者實(shí)時(shí)刪除特定的壓縮文件。
6、 根據(jù)權(quán)利要求4所述的歷史數(shù)據(jù)管理方法，其特征在于步驟一中的壓縮文 件文件格式為WIN、 SUN或者HP平臺(tái)下的特定格式。
7、 根據(jù)權(quán)利要求4所述的歷史數(shù)據(jù)管理方法，其特征在于還包括對(duì)硬盤空間定時(shí)檢測(cè)的步驟，當(dāng)定時(shí)檢測(cè)到硬盤可用空間低于臨界閾值時(shí)，按照設(shè)定的處 理機(jī)制進(jìn)行操作。
8、 根據(jù)權(quán)利要求7所述的歷史數(shù)據(jù)管理方法，其特征在于，所述處理機(jī)制為通 過廣播通知用戶界面，將預(yù)警提示信息寫入日志或者將該事件通知數(shù)據(jù)管理 單元進(jìn)行刪除操作。
9、 根據(jù)權(quán)利要求7、 8所述的任意一種歷史數(shù)據(jù)管理方法，其特征在于，所述硬 盤空間臨界閾值采用絕對(duì)值或者相對(duì)值設(shè)定。
全文摘要
一種歷史數(shù)據(jù)管理系統(tǒng)與方法，系統(tǒng)包括配置文件單元，數(shù)據(jù)管理單元；方法為初始化配置文件的參數(shù)，包括處理歷史數(shù)據(jù)的時(shí)間范圍、文件范圍、處理時(shí)間、壓縮文件的格式及壓縮文件的刪除策略；在設(shè)定的處理時(shí)間將所述時(shí)間范圍內(nèi)的歷史數(shù)據(jù)壓縮為設(shè)定格式；確定歷史文件壓縮成功后，根據(jù)配置文件所設(shè)定的刪除策略，刪除壓縮成功的數(shù)據(jù)文件。采用本發(fā)明所述系統(tǒng)和方法，可以自動(dòng)管理硬盤空間的效果，克服了現(xiàn)有的每天大量的歷史數(shù)據(jù)歸檔時(shí)，導(dǎo)致硬盤空間極易占滿，從而不能正常歸檔或整個(gè)系統(tǒng)由于可用空間不足，產(chǎn)生癱瘓的缺陷。
文檔編號(hào)G06F17/30GK101661470SQ200810142078
公開日2010年3月3日 申請(qǐng)日期2008年8月25日 優(yōu)先權(quán)日2008年8月25日
發(fā)明者張富力, 王雪懷 申請(qǐng)人:中興通訊股份有限公司