分布式文件系統(tǒng)HDFS快照技術(shù)的研究與實(shí)現(xiàn).pdf

1、隨著社會(huì)的不斷發(fā)展，在信息時(shí)代里，數(shù)據(jù)開(kāi)始爆炸式增長(zhǎng)。傳統(tǒng)的存儲(chǔ)方式越來(lái)越難以解決海量數(shù)據(jù)存儲(chǔ)和處理的問(wèn)題。各種各樣的分布式文件系統(tǒng)應(yīng)運(yùn)而生。Apache公司旗下的開(kāi)源項(xiàng)目Hadoop能夠部署在低廉的硬件上，憑借其高效性、可靠性、可伸縮性和穩(wěn)定性，在云計(jì)算時(shí)代得到了廣泛的應(yīng)用。分布式文件系統(tǒng)HDFS是Hadoop的組件，由于目前并不支持快照功能，從而在使用上有較大限制。
　　本文在國(guó)內(nèi)外研究的基礎(chǔ)上進(jìn)行了探索，對(duì)分布式文件系統(tǒng)HD

2、FS的快照技術(shù)進(jìn)行了深入的研究。本文首先通過(guò)對(duì)文件系統(tǒng)關(guān)鍵部分的研究，得出了快照數(shù)據(jù)操作的序列化和反序列化方法，利用RPC框架來(lái)設(shè)計(jì)快照的使用協(xié)議和調(diào)用邏輯;接著選取了實(shí)現(xiàn)快照技術(shù)的主從架構(gòu)模式，給出了在類級(jí)別上的實(shí)現(xiàn)方法;最后得出了快照邏輯的啟動(dòng)和關(guān)閉的方法。在實(shí)現(xiàn)部分設(shè)計(jì)了快照的邏輯結(jié)構(gòu)—快照樹(shù)，在文件系統(tǒng)的目錄文件層次結(jié)構(gòu)的基礎(chǔ)上重新組織了文件系統(tǒng)的基礎(chǔ)架構(gòu);然后為了處理快照相關(guān)的邏輯并與原文件系統(tǒng)兼容，本文對(duì)HDFS的啟動(dòng)和保存