技術(shù)總結(jié)
本發(fā)明公開了一種輕量級的數(shù)據(jù)密集型文件系統(tǒng)的自治塊管理方法,通過交叉遷移劃分(ISD,Intersected?Shifted?Declustering)實現(xiàn)數(shù)據(jù)塊到數(shù)據(jù)存儲節(jié)點的映射、數(shù)據(jù)存儲節(jié)點中數(shù)據(jù)塊的快速查找、數(shù)據(jù)存儲節(jié)點失效時數(shù)據(jù)塊的快速恢復(fù)和新添加數(shù)據(jù)存儲節(jié)點時數(shù)據(jù)塊的快速重新分布等,使主節(jié)點只負(fù)責(zé)數(shù)據(jù)密集型文件系統(tǒng)中文件命名空間的存儲和維護(hù),而數(shù)據(jù)塊到數(shù)據(jù)存儲節(jié)點的映射關(guān)系信息存儲和維護(hù),以及數(shù)據(jù)存儲節(jié)點失效時數(shù)據(jù)塊的替換和新數(shù)據(jù)存儲節(jié)點添加時數(shù)據(jù)塊的重新分布等都由數(shù)據(jù)存儲節(jié)點自治完成。該發(fā)明節(jié)省了數(shù)據(jù)密集型文件系統(tǒng)中主節(jié)點的內(nèi)存空間,提高了主節(jié)點的處理能力,能大幅度提高大數(shù)據(jù)環(huán)境下數(shù)據(jù)密集型文件系統(tǒng)的數(shù)據(jù)塊管理效率。
技術(shù)研發(fā)人員:陳付梅;韓德志;畢坤;王軍
受保護(hù)的技術(shù)使用者:上海海事大學(xué)
文檔號碼:201610665489
技術(shù)研發(fā)日:2016.08.12
技術(shù)公布日:2017.01.04