技術(shù)編號:6622655
提示:您尚未登錄,請點(diǎn) 登 陸 后下載,如果您還沒有賬戶請點(diǎn) 注 冊 ,登陸完成后,請刷新本頁查看技術(shù)詳細(xì)信息。本發(fā)明公開了一種Hadoop集群中批處理作業(yè)的方案,涉及Hadoop集群批處理作業(yè)技術(shù)。本發(fā)明公開的方法,包括構(gòu)建一個(gè)混合異構(gòu)內(nèi)存的硬件平臺,在該硬件平臺中部署Hadoop集群,其中,所構(gòu)建的硬件平臺中混合異構(gòu)內(nèi)存采用非易失性存儲介質(zhì)與動態(tài)隨機(jī)存取存儲器(DRAM)的混合;當(dāng)在硬件平臺上進(jìn)行Hadoop集群批處理作業(yè)時(shí),將Hadoop集群批處理作業(yè)的內(nèi)存申請分配到混合異構(gòu)內(nèi)存的非易失性存儲介質(zhì)中;在Map階段,將Hadoop集群批處理作業(yè)的中間結(jié)果存儲在所...
注意:該技術(shù)已申請專利,請尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權(quán)人授權(quán)前,僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進(jìn)行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán),增加技術(shù)思路,做技術(shù)知識儲備,不適合論文引用。
請注意,此類技術(shù)沒有源代碼,用于學(xué)習(xí)研究技術(shù)思路。