技術(shù)總結(jié)
本發(fā)明涉及一種基于電子商務(wù)平臺的大數(shù)據(jù)統(tǒng)計方法,依次通過數(shù)據(jù)收集、數(shù)據(jù)分析和數(shù)據(jù)統(tǒng)計三大部分實(shí)現(xiàn)數(shù)據(jù)收集、清洗數(shù)據(jù)、數(shù)據(jù)存儲、數(shù)據(jù)分析和數(shù)據(jù)統(tǒng)計工作;目前每天收集的數(shù)據(jù)量達(dá)到TB級,數(shù)據(jù)回溯處理流量比數(shù)據(jù)量高出10倍以上,每天數(shù)據(jù)分析次數(shù)千次,本發(fā)明提供一種基于電子商務(wù)平臺的大數(shù)據(jù)統(tǒng)計方法,確保性能和數(shù)據(jù)的實(shí)效性以及數(shù)據(jù)統(tǒng)計的要求上都得到了很好的平衡和滿足,在電子商務(wù)的數(shù)據(jù)變化和業(yè)務(wù)快速增長的條件下,這個系統(tǒng)的架構(gòu)也很靈活,存儲和分析都支持橫向擴(kuò)展;有效解決在數(shù)據(jù)和日志處理量較大的情況下性能會變得很緩慢、在數(shù)據(jù)分析結(jié)果上時間消耗周期會較長和在后期數(shù)據(jù)分析報表類數(shù)據(jù)的實(shí)時性較慢等現(xiàn)有技術(shù)缺點(diǎn)。
技術(shù)研發(fā)人員:陸佳
受保護(hù)的技術(shù)使用者:德基網(wǎng)絡(luò)科技南京有限公司
文檔號碼:201610662045
技術(shù)研發(fā)日:2016.08.12
技術(shù)公布日:2017.01.11