技術(shù)編號:6631850
提示:您尚未登錄,請點 登 陸 后下載,如果您還沒有賬戶請點 注 冊 ,登陸完成后,請刷新本頁查看技術(shù)詳細信息。本發(fā)明提供一種基于NFS文件服務(wù)器的文本文件多機并行上傳到HDFS方法,是選取HDFS集群中N個主機,然后選擇任一節(jié)點作為主節(jié)點,其他N-1個節(jié)點作為從節(jié)點,在主節(jié)點上,獲取要上傳的NFS文件服務(wù)器要上傳目錄下文件,對于每一個文件,采用并行上傳方法,即集群中所有機器都參與上傳,集群中每一臺主機負責(zé)上傳每一個文件1/N大小的連續(xù)的數(shù)據(jù)塊,達到并行上傳的目的,從而提高上傳速度。專利說明一種基于NFS文件服務(wù)器的文本文件多機并行上傳到HDFS方法 [000...
注意:該技術(shù)已申請專利,請尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權(quán)人授權(quán)前,僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán),增加技術(shù)思路,做技術(shù)知識儲備,不適合論文引用。
請注意,此類技術(shù)沒有源代碼,用于學(xué)習(xí)研究技術(shù)思路。