基于FastDFS云存儲系統(tǒng)的研究與設(shè)計.pdf

1、隨著信息技術(shù)的飛速發(fā)展，大量的數(shù)據(jù)需要進行存儲，為了解決這種問題，企業(yè)往往需要購買大量的存儲設(shè)備，這不但需要很高的成本，而且大量的數(shù)據(jù)管理困難，不易維護，這種方式暴露出種種的弊端。云存儲作為一種隨著云計算而發(fā)展出來的一種技術(shù)，其關(guān)注的重心恰恰是海量數(shù)據(jù)的存儲和管理，同時因為具備彈性擴展、方便海量數(shù)據(jù)管理以及低成本等特點，被認為是未來數(shù)據(jù)存儲的較好選擇。它使用了分布式文件系統(tǒng)和集群等多種技術(shù)，將分散在網(wǎng)絡(luò)中的類型各異的存儲設(shè)備整合在一起，

2、作為一個整體提供數(shù)據(jù)的存儲和接入訪問。而對于用戶來說，使用云存儲隨時隨地都可以通過網(wǎng)絡(luò)訪問云上的資源。
　　FastDFS是一款由國人研發(fā)并且開放源碼的分布式文件系統(tǒng)，在類UNIX系統(tǒng)上能很好的工作。對比其他的分布式文件系統(tǒng)，它的優(yōu)勢是量級較輕，滿足高并發(fā)訪問的需求，容易擴展，具備負載均衡功能，并且能自動進行文件同步。另外對小文件的存儲性能較好。本文在教研室現(xiàn)有的云平臺基礎(chǔ)之上，探索一種以FastDFS為基礎(chǔ)的云存儲方式。

3、　　本文首先對FastDFS的系統(tǒng)架構(gòu)、運行以及同步機制進行了研究。其次從功能和性能兩個方面對系統(tǒng)展開需求分析。在借鑒云存儲的典型架構(gòu)模型的基礎(chǔ)之上，設(shè)計了基于FastDFS的云存儲系統(tǒng)的總體架構(gòu)。自頂向下分別是用戶訪問層、應用接口層、管理層以及數(shù)據(jù)存儲層。然后依據(jù)需求分析以及總體架構(gòu)對系統(tǒng)的各個層次進行了詳細的設(shè)計與實現(xiàn)，在用戶訪問層，采用B/S模式，結(jié)合Bootstrap開源框架設(shè)計了用戶界面。在應用接口層，對用戶訪問時的負載均衡進

4、行了研究，并設(shè)計了REST API接口。在管理層實現(xiàn)需求分析中提出的功能需求，如普通用戶對文件上傳、下載、刪除以及文件夾的各種操作，系統(tǒng)管理員對于用戶的管理和集群的監(jiān)控等。同時，研究了FastDFS原有的集群監(jiān)控原理，增加了對CPU、內(nèi)存使用、磁盤讀寫以及網(wǎng)絡(luò)I/O的監(jiān)控；研究了FastDFS調(diào)度算法，分析其存在的缺陷和不足，并提出了動態(tài)負載均衡算法。在管理層和存儲集群之間，使用epoll和線程池的方式設(shè)計了接口服務器，能夠及時響應大量