技術(shù)編號(hào):9524202
提示:您尚未登錄,請(qǐng)點(diǎn) 登 陸 后下載,如果您還沒有賬戶請(qǐng)點(diǎn) 注 冊(cè) ,登陸完成后,請(qǐng)刷新本頁查看技術(shù)詳細(xì)信息。分布式文件系統(tǒng)將大文件分塊存儲(chǔ)在各存儲(chǔ)節(jié)點(diǎn)中,實(shí)現(xiàn)了文件多節(jié)點(diǎn)并行讀寫,如圖1所示。但在每次讀寫時(shí),需先從元數(shù)據(jù)節(jié)點(diǎn)查詢存儲(chǔ)文件的節(jié)點(diǎn)。一旦頻繁讀寫小文件(小于最小分塊,HDFS(Hadoop Distributed File System,Hadoop分布式文件系統(tǒng))定義為64M),查詢的時(shí)間甚至超過讀寫文件時(shí)間,嚴(yán)重影響了系統(tǒng)效率。由于在元數(shù)據(jù)節(jié)點(diǎn)的內(nèi)存中存在大量的文件索引條目,因此在主備節(jié)點(diǎn)數(shù)據(jù)備份過程中,需進(jìn)行大量?jī)?nèi)存數(shù)據(jù)的頻繁拷貝,長(zhǎng)時(shí)間占據(jù)系統(tǒng)...
注意:該技術(shù)已申請(qǐng)專利,請(qǐng)尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權(quán)人授權(quán)前,僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進(jìn)行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán),增加技術(shù)思路,做技術(shù)知識(shí)儲(chǔ)備,不適合論文引用。
請(qǐng)注意,此類技術(shù)沒有源代碼,用于學(xué)習(xí)研究技術(shù)思路。