技術(shù)編號(hào):9417511
提示:您尚未登錄,請(qǐng)點(diǎn) 登 陸 后下載,如果您還沒(méi)有賬戶(hù)請(qǐng)點(diǎn) 注 冊(cè) ,登陸完成后,請(qǐng)刷新本頁(yè)查看技術(shù)詳細(xì)信息。本發(fā)明涉及數(shù)據(jù)處理,尤其涉及。背景技術(shù)Apached hadoop (—般簡(jiǎn)稱(chēng)hadoop)是一個(gè)開(kāi)源的分布式數(shù)據(jù)處理平臺(tái),它的核心主要包括兩個(gè)部分,分布式文件系統(tǒng)(HDFS)和mapreduce計(jì)算模型。HDFS在大規(guī)模數(shù)據(jù)的存儲(chǔ)方面表現(xiàn)出巨大的優(yōu)勢(shì),然而,它在處理實(shí)時(shí)的數(shù)據(jù)讀取方面存在很大的不足。由于在執(zhí)行mapreduce任務(wù)的過(guò)程中需要進(jìn)行大量的數(shù)據(jù)讀取,會(huì)對(duì)網(wǎng)絡(luò)傳輸和磁盤(pán)I/O (Input/Output)帶寬造成巨大的壓力,所以要在HDFS的基...
注意:該技術(shù)已申請(qǐng)專(zhuān)利,請(qǐng)尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專(zhuān)利權(quán)人授權(quán)前,僅供技術(shù)研究參考不得用于商業(yè)用途。
該專(zhuān)利適合技術(shù)人員進(jìn)行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán),增加技術(shù)思路,做技術(shù)知識(shí)儲(chǔ)備,不適合論文引用。
請(qǐng)注意,此類(lèi)技術(shù)沒(méi)有源代碼,用于學(xué)習(xí)研究技術(shù)思路。