亚洲成年人黄色一级片,日本香港三级亚洲三级,黄色成人小视频,国产青草视频,国产一区二区久久精品,91在线免费公开视频,成年轻人网站色直接看

一種實(shí)時(shí)數(shù)據(jù)分布式并行壓縮的方法與流程

文檔序號(hào):11864884閱讀:來(lái)源:國(guó)知局

技術(shù)特征:

1.一種實(shí)時(shí)數(shù)據(jù)分布式并行壓縮的方法,應(yīng)用于對(duì)多個(gè)被監(jiān)測(cè)設(shè)備的運(yùn)行數(shù)據(jù)進(jìn)行壓縮處理;其特征在于,提供一處理單元,所述處理單元用以對(duì)遠(yuǎn)程連接的多個(gè)所述被監(jiān)測(cè)設(shè)備發(fā)送的所述運(yùn)行數(shù)據(jù)進(jìn)行處理,所述運(yùn)行數(shù)據(jù)中包括多個(gè)數(shù)據(jù)點(diǎn),于所述運(yùn)行數(shù)據(jù)中將所需計(jì)算的數(shù)據(jù)點(diǎn)數(shù)量作為計(jì)算節(jié)點(diǎn)的數(shù)量,并預(yù)設(shè)收到的第一個(gè)數(shù)據(jù)點(diǎn)為第一基準(zhǔn)點(diǎn),還包括:

步驟S1、所述處理單元于所述運(yùn)行數(shù)據(jù)中獲取待計(jì)算的數(shù)據(jù)點(diǎn)數(shù)量,并建立與所述待計(jì)算數(shù)據(jù)點(diǎn)數(shù)量相同的所述計(jì)算節(jié)點(diǎn);

步驟S2、所述處理單元對(duì)當(dāng)前的所述計(jì)算節(jié)點(diǎn)進(jìn)行處理以獲得對(duì)應(yīng)當(dāng)前的所述計(jì)算節(jié)點(diǎn)的上下臨界精度值,以及對(duì)所述第一基準(zhǔn)點(diǎn)進(jìn)行處理以獲得對(duì)應(yīng)所述第一基準(zhǔn)點(diǎn)的上下臨界精度值;

步驟S3、所述處理單元根據(jù)當(dāng)前的所述計(jì)算節(jié)點(diǎn)的上下臨界精度值以及所述第一基準(zhǔn)點(diǎn)的上下臨界精度值構(gòu)建一數(shù)據(jù)計(jì)算模型;

步驟S4、所述處理單元分別將當(dāng)前的所述計(jì)算節(jié)點(diǎn)與所述第一基準(zhǔn)點(diǎn)之間的每個(gè)所述數(shù)據(jù)點(diǎn)作為待處理數(shù)據(jù)點(diǎn),并根據(jù)所述數(shù)據(jù)計(jì)算模型分別對(duì)每個(gè)所述待處理數(shù)據(jù)點(diǎn)進(jìn)行計(jì)算,以獲得對(duì)應(yīng)所述待處理數(shù)據(jù)點(diǎn)的個(gè)數(shù)的計(jì)算結(jié)果;

步驟S5、所述處理單元判斷所有所述計(jì)算結(jié)果是否均滿足一預(yù)設(shè)計(jì)算值:

若是,則轉(zhuǎn)向步驟S7;

步驟S6,所述處理單元選取當(dāng)前的所述計(jì)算節(jié)點(diǎn)與所述第一基準(zhǔn)點(diǎn)之間的多個(gè)所述待判斷數(shù)據(jù)點(diǎn)并保留,并結(jié)束對(duì)當(dāng)前的所述計(jì)算節(jié)點(diǎn)的處理;

步驟S7、所述處理單元保存當(dāng)前的所述計(jì)算節(jié)點(diǎn),并結(jié)束對(duì)當(dāng)前的所述計(jì)算節(jié)點(diǎn)的處理。

2.根據(jù)權(quán)利要求1所述的實(shí)時(shí)數(shù)據(jù)分布式并行壓縮的方法,其特征在于,所述步驟S7中還包括以下步驟:

步驟S71、將所述計(jì)算結(jié)果對(duì)應(yīng)的所述待處理數(shù)據(jù)點(diǎn)的前一個(gè)所述待處理數(shù)據(jù)點(diǎn)作為一第二基準(zhǔn)點(diǎn);

步驟S72、保留除所述第一基準(zhǔn)點(diǎn)及所述第二基準(zhǔn)點(diǎn)之間的所有所述待處理數(shù)據(jù)點(diǎn)之外的所述待處理數(shù)據(jù)點(diǎn);

步驟S73、結(jié)束對(duì)當(dāng)前的所述計(jì)算節(jié)點(diǎn)的處理后,將所述第二基準(zhǔn)點(diǎn)作為所述第一基準(zhǔn)點(diǎn),并返回所述步驟S2。

3.根據(jù)權(quán)利要求1所述的實(shí)時(shí)數(shù)據(jù)分布式并行壓縮的方法,其特征在于,所述步驟S8中,保存當(dāng)前的所述計(jì)算節(jié)點(diǎn),并結(jié)束對(duì)當(dāng)前的所述計(jì)算節(jié)點(diǎn)的處理后,將當(dāng)前的所述計(jì)算節(jié)點(diǎn)作為第一基準(zhǔn)點(diǎn),并返回步驟S2。

4.根據(jù)權(quán)利要求1所述的實(shí)時(shí)數(shù)據(jù)分布式并行壓縮的方法,其特征在于,在執(zhí)行所述步驟S1前,所述處理單元預(yù)先對(duì)所述被檢測(cè)設(shè)備發(fā)送的所述運(yùn)行數(shù)據(jù)進(jìn)行篩選,以去除所述運(yùn)行數(shù)據(jù)中的異常數(shù)據(jù)。

5.根據(jù)權(quán)利要求1所述的實(shí)時(shí)數(shù)據(jù)分布式并行壓縮的方法,其特征在于,按照對(duì)應(yīng)于所述運(yùn)行數(shù)據(jù)的所述被檢測(cè)設(shè)備的編號(hào),通過預(yù)設(shè)的排序方法對(duì)所述運(yùn)行數(shù)據(jù)進(jìn)行排序。

6.根據(jù)權(quán)利要求5所述的實(shí)時(shí)數(shù)據(jù)分布式并行壓縮的方法,其特征在于,所述排序方法為歸并排序法。

7.根據(jù)權(quán)利要求1所述的實(shí)時(shí)數(shù)據(jù)分布式并行壓縮的方法,其特征在于,提供一數(shù)據(jù)庫(kù),用以保存經(jīng)過壓縮處理的所述運(yùn)行數(shù)據(jù)對(duì)應(yīng)的所述數(shù)據(jù)點(diǎn)。

8.根據(jù)權(quán)利要求1所述的實(shí)時(shí)數(shù)據(jù)分布式并行壓縮的方法,其特征在于,所述處理單元為基于storm集群的管理系統(tǒng)。

9.根據(jù)權(quán)利要求6所述的實(shí)時(shí)數(shù)據(jù)分布式并行壓縮的方法,其特征在于,提供一服務(wù)端,與所述所數(shù)據(jù)庫(kù)以及所述處理單元連接,用以獲取經(jīng)過處理的所述運(yùn)行數(shù)據(jù)對(duì)應(yīng)的所述數(shù)據(jù)點(diǎn)。

10.根據(jù)權(quán)利要求1所述的實(shí)時(shí)數(shù)據(jù)分布式并行壓縮的方法,其特征在于,每個(gè)所述被監(jiān)測(cè)設(shè)備中設(shè)置有一通信模塊,每個(gè)所述被監(jiān)測(cè)設(shè)備分別通過所述通信模塊將所述運(yùn)行數(shù)據(jù)發(fā)送至所述處理單元。

當(dāng)前第2頁(yè)1 2 3 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
1