技術(shù)特征:
技術(shù)總結(jié)
本申請公開一種數(shù)據(jù)處理的方法及裝置,該方法中第一機(jī)房中的第一系統(tǒng)在獲取到流式數(shù)據(jù)后,可先對流式數(shù)據(jù)進(jìn)行Map處理,并得到的第一處理結(jié)果,而后,再將自身得到的第一處理結(jié)果發(fā)送至第二機(jī)房的第二系統(tǒng)中,以使第二系統(tǒng)可根據(jù)獲取到的第一系統(tǒng)發(fā)送的第一處理結(jié)果,得到第二處理結(jié)果。由于第一系統(tǒng)將獲取的流式數(shù)據(jù)進(jìn)行處理得到第一處理結(jié)果相對于獲取的流式數(shù)據(jù)來說,數(shù)據(jù)量極大的降低,這樣則可極大的降低跨機(jī)房的數(shù)據(jù)傳輸量,從而縮短了跨機(jī)房傳輸數(shù)據(jù)時所消耗的時間,進(jìn)而提升了數(shù)據(jù)處理效率。
技術(shù)研發(fā)人員:周光輝
受保護(hù)的技術(shù)使用者:阿里巴巴集團(tuán)控股有限公司
技術(shù)研發(fā)日:2017.05.16
技術(shù)公布日:2017.11.10