基于多形式處理的大數(shù)據(jù)分析系統(tǒng)的制作方法
【專利摘要】本發(fā)明涉及數(shù)據(jù)處理【技術(shù)領(lǐng)域】,具體地說是一種處理效率高、分析準確的基于多形式處理的大數(shù)據(jù)分析系統(tǒng),其特征在于設(shè)有用于獲取關(guān)鍵信息的數(shù)據(jù)抽取模塊、用于對獲取的數(shù)據(jù)進行預(yù)處理的預(yù)處理模塊、用于對處理方式進行選擇的參數(shù)設(shè)置模塊、用于對數(shù)據(jù)進行分析運算的數(shù)據(jù)挖掘模塊、用于對多項挖掘結(jié)果進行融合的數(shù)據(jù)融合模塊、用于輸出融合后最終結(jié)果的顯示輸出模塊,本發(fā)明與現(xiàn)有技術(shù)相比,能夠根據(jù)使用者的需求,對于輸入的數(shù)據(jù)進行多角度、多屬性、多形式的挖掘處理,并將挖掘結(jié)果進一步融合分析后,進行分類、估值、聚集、可視化等處理,具有結(jié)構(gòu)合理、操作簡便等顯著的優(yōu)點。
【專利說明】基于多形式處理的大數(shù)據(jù)分析系統(tǒng)
【技術(shù)領(lǐng)域】
:
[0001]本發(fā)明涉及數(shù)據(jù)處理【技術(shù)領(lǐng)域】,具體地說是一種處理效率高、分析準確的基于多形式處理的大數(shù)據(jù)分析系統(tǒng)。
【背景技術(shù)】
:
[0002]隨著信息技術(shù)的高度發(fā)展,人們積累的數(shù)據(jù)量日益增長,如何從海量數(shù)據(jù)中快速的獲得有效數(shù)據(jù)成為當務(wù)之急。大數(shù)據(jù)是指無法再當前條件下使用常規(guī)的工具對數(shù)據(jù)內(nèi)容進行檢索和管理的數(shù)據(jù)集,其具有數(shù)據(jù)量大、數(shù)據(jù)類型繁多、價值密度低、處理速度快等特點。由于數(shù)據(jù)種類繁多,在對其進行處理時,會根據(jù)數(shù)據(jù)類型的不同以及處理目的的不同選擇不同的數(shù)據(jù)處理算法,而這些算法處理得到的結(jié)果如何進一步匯總得到有效運用是亟待解決的問題。
【發(fā)明內(nèi)容】
:
[0003]本發(fā)明針對現(xiàn)有技術(shù)中存在的缺點和不足,提出了一種處理效率高、分析準確的基于多形式處理的大數(shù)據(jù)分析系統(tǒng)。
[0004]本發(fā)明可以通過以下措施達到:
[0005]一種基于多形式處理的大數(shù)據(jù)分析系統(tǒng),其特征在于設(shè)有用于獲取關(guān)鍵信息的數(shù)據(jù)抽取模塊、用于對獲取的數(shù)據(jù)進行預(yù)處理的預(yù)處理模塊、用于對處理方式進行選擇的參數(shù)設(shè)置模塊、用于對數(shù)據(jù)進行分析運算的數(shù)據(jù)挖掘模塊、用于對多項挖掘結(jié)果進行融合的數(shù)據(jù)融合模塊、用于輸出融合后最終結(jié)果的顯示輸出模塊。
[0006]本發(fā)明所述數(shù)據(jù)融合模塊包括用于獲取兩個以上運算模型輸出結(jié)果的數(shù)據(jù)獲取模塊;用于對數(shù)據(jù)獲取模塊獲取數(shù)據(jù)進行有效范圍篩選的篩選模塊、用于對篩選后數(shù)據(jù)進行權(quán)值分配的權(quán)值分配模塊、用于對分配權(quán)值后數(shù)據(jù)進行融合的數(shù)據(jù)融合算法模塊以及用于輸出數(shù)據(jù)融合結(jié)果的顯示輸出模塊。
[0007]本發(fā)明所述數(shù)據(jù)融合算法模塊中設(shè)有加權(quán)平均法處理模塊、卡爾曼濾波處理模塊、統(tǒng)計決策處理模塊以及神經(jīng)網(wǎng)絡(luò)處理模塊。
[0008]本發(fā)明所述數(shù)據(jù)融合模塊與顯示輸出模塊之間還設(shè)有分類模塊、估值模塊、聚集豐旲塊。
[0009]本發(fā)明所述預(yù)處理模塊中設(shè)有離散化處理模塊、屬性增/刪模塊、屬性位置互換模塊、添加ID屬性模塊、數(shù)據(jù)噪聲處理模塊。
[0010]本發(fā)明所述數(shù)據(jù)挖掘模塊設(shè)有加權(quán)平均法處理模塊、卡爾曼濾波處理模塊、統(tǒng)計決策處理模塊以及神經(jīng)網(wǎng)絡(luò)處理模塊。
[0011]本發(fā)明與現(xiàn)有技術(shù)相比,能夠根據(jù)使用者的需求,對于輸入的數(shù)據(jù)進行多角度、多屬性、多形式的挖掘處理,并將挖掘結(jié)果進一步融合分析后,進行分類、估值、聚集、可視化等處理,具有結(jié)構(gòu)合理、操作簡便等顯著的優(yōu)點?!緦@綀D】
【附圖說明】:
[0012]附圖1是本發(fā)明的結(jié)構(gòu)框圖。
[0013]附圖2是本發(fā)明中預(yù)處理模塊的結(jié)構(gòu)框圖。
[0014]附圖3是本發(fā)明中數(shù)據(jù)融合模塊的結(jié)構(gòu)框圖。
[0015]附圖標記:數(shù)據(jù)抽取模塊1、預(yù)處理模塊2、參數(shù)設(shè)置模塊3、數(shù)據(jù)挖掘模塊4、數(shù)據(jù)融合模塊5、顯示輸出模塊6、數(shù)據(jù)獲取模塊7、篩選模塊8、權(quán)值分配模塊9、數(shù)據(jù)融合算法模塊10、顯示輸出模塊11、離散化處理模塊12、屬性增/刪模塊13、屬性位置互換模塊14、添加ID屬性模塊15、數(shù)據(jù)噪聲處理模塊16。
【具體實施方式】
:
[0016]下面結(jié)合附圖對本發(fā)明作進一步的說明。
[0017]如附圖1所示,本發(fā)明提出了一種基于多形式處理的大數(shù)據(jù)分析系統(tǒng),其特征在于設(shè)有用于獲取關(guān)鍵信息的數(shù)據(jù)抽取模塊1、用于對獲取的數(shù)據(jù)進行預(yù)處理的預(yù)處理模塊2、用于對處理方式進行選擇的參數(shù)設(shè)置模塊3、用于對數(shù)據(jù)進行分析運算的數(shù)據(jù)挖掘模塊4、用于對多項挖掘結(jié)果進行融合的數(shù)據(jù)融合模塊5、用于輸出融合后最終結(jié)果的顯示輸出模塊6。
[0018]如附圖3所示,本發(fā)明所述數(shù)據(jù)融合模塊5包括用于獲取兩個以上運算模型輸出結(jié)果的數(shù)據(jù)獲取模塊7 ;用于對數(shù)據(jù)獲取模塊獲取數(shù)據(jù)進行有效范圍篩選的篩選模塊8、用于對篩選后數(shù)據(jù)進行權(quán)值分配的權(quán)值分配模塊9、用于對分配權(quán)值后數(shù)據(jù)進行融合的數(shù)據(jù)融合算法模塊10以及用于輸出數(shù)據(jù)融合結(jié)果的顯示輸出模塊11。
[0019]本發(fā)明所述數(shù)據(jù)融合算法模塊中設(shè)有加權(quán)平均法處理模塊、卡爾曼濾波處理模塊、統(tǒng)計決策處理模塊以及神經(jīng)網(wǎng)絡(luò)處理模塊。
[0020]本發(fā)明所述數(shù)據(jù)融合模塊與顯示輸出模塊之間還設(shè)有分類模塊、估值模塊、聚集豐旲塊。
[0021]如附圖2所示,本發(fā)明所述預(yù)處理模塊2中設(shè)有離散化處理模塊12、屬性增/刪模塊13、屬性位置互換模塊14、添加ID屬性模塊15、數(shù)據(jù)噪聲處理模塊16。
[0022]本發(fā)明所述數(shù)據(jù)挖掘模塊設(shè)有加權(quán)平均法處理模塊、卡爾曼濾波處理模塊、統(tǒng)計決策處理模塊以及神經(jīng)網(wǎng)絡(luò)處理模塊。
[0023]本發(fā)明與現(xiàn)有技術(shù)相比,能夠根據(jù)使用者的需求,對于輸入的數(shù)據(jù)進行多角度、多屬性、多形式的挖掘處理,并將挖掘結(jié)果進一步融合分析后,進行分類、估值、聚集、可視化等處理,具有結(jié)構(gòu)合理、操作簡便等顯著的優(yōu)點。
【權(quán)利要求】
1.一種基于多形式處理的大數(shù)據(jù)分析系統(tǒng),其特征在于設(shè)有用于獲取關(guān)鍵信息的數(shù)據(jù)抽取模塊、用于對獲取的數(shù)據(jù)進行預(yù)處理的預(yù)處理模塊、用于對處理方式進行選擇的參數(shù)設(shè)置模塊、用于對數(shù)據(jù)進行分析運算的數(shù)據(jù)挖掘模塊、用于對多項挖掘結(jié)果進行融合的數(shù)據(jù)融合模塊、用于輸出融合后最終結(jié)果的顯示輸出模塊。
2.根據(jù)權(quán)利要求1所述的一種基于多形式處理的大數(shù)據(jù)分析系統(tǒng),其特征在于所述數(shù)據(jù)融合模塊包括用于獲取兩個以上運算模型輸出結(jié)果的數(shù)據(jù)獲取模塊;用于對數(shù)據(jù)獲取模塊獲取數(shù)據(jù)進行有效范圍篩選的篩選模塊、用于對篩選后數(shù)據(jù)進行權(quán)值分配的權(quán)值分配模塊、用于對分配權(quán)值后數(shù)據(jù)進行融合的數(shù)據(jù)融合算法模塊以及用于輸出數(shù)據(jù)融合結(jié)果的顯不輸出模塊。
3.根據(jù)權(quán)利要求1所述的一種基于多形式處理的大數(shù)據(jù)分析系統(tǒng),其特征在于所述數(shù)據(jù)融合算法模塊中設(shè)有加權(quán)平均法處理模塊、卡爾曼濾波處理模塊、統(tǒng)計決策處理模塊以及神經(jīng)網(wǎng)絡(luò)處理模塊。
4.根據(jù)權(quán)利要求3所述的一種基于多形式處理的大數(shù)據(jù)分析系統(tǒng),其特征在于所述數(shù)據(jù)融合模塊與顯示輸出模塊之間還設(shè)有分類模塊、估值模塊、聚集模塊。
5.根據(jù)權(quán)利要求1所述的一種基于多形式處理的大數(shù)據(jù)分析系統(tǒng),其特征在于所述預(yù)處理模塊中設(shè)有離散化處理模塊、屬性增/刪模塊、屬性位置互換模塊、添加10屬性模塊、數(shù)據(jù)噪聲處理模塊。
6.根據(jù)權(quán)利要求1所述的一種基于多形式處理的大數(shù)據(jù)分析系統(tǒng),其特征在于所述數(shù)據(jù)挖掘模塊設(shè)有加權(quán)平均法處理模塊、卡爾曼濾波處理模塊、統(tǒng)計決策處理模塊以及神經(jīng)網(wǎng)絡(luò)處理模塊。
【文檔編號】G06F17/30GK104484412SQ201410784053
【公開日】2015年4月1日 申請日期:2014年12月16日 優(yōu)先權(quán)日:2014年12月16日
【發(fā)明者】尚成輝, 趙迪 申請人:蕪湖樂銳思信息咨詢有限公司