技術(shù)編號:10616045
提示:您尚未登錄,請點 登 陸 后下載,如果您還沒有賬戶請點 注 冊 ,登陸完成后,請刷新本頁查看技術(shù)詳細信息。在大數(shù)據(jù)的作業(yè)中,通常會有大量離線的文件或數(shù)據(jù)需要處理,例如大量離線日志。對于單個服務(wù)器而言,它是沒有能力處理這些數(shù)據(jù)的,而分布式系統(tǒng)中恰好具有足夠的資源來處理這些數(shù)據(jù)。在分布式系統(tǒng)對這些數(shù)據(jù)進行處理之前,首先需要將這些大量數(shù)據(jù)上傳至分布式系統(tǒng)進行處理。數(shù)據(jù)的產(chǎn)生是不間斷的,每一天每一個小時都會產(chǎn)生大量的數(shù)據(jù),且這些數(shù)據(jù)在存儲介質(zhì)中通常是以壓縮形式存在的,通常,將其上傳至分布式處理系統(tǒng)時,其數(shù)據(jù)量要翻倍,約10倍左右。若是一次性向一個服務(wù)器上傳過多的數(shù)據(jù),...
注意:該技術(shù)已申請專利,請尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權(quán)人授權(quán)前,僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán),增加技術(shù)思路,做技術(shù)知識儲備,不適合論文引用。