私有云存儲(chǔ)系統(tǒng)元數(shù)據(jù)管理模塊的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著公司、企業(yè)信息化程度不斷提高，在企業(yè)內(nèi)部運(yùn)作所需要的數(shù)據(jù)無論從規(guī)模還是種類都高速增長(zhǎng)的今天，企業(yè)急需一種架構(gòu)高可擴(kuò)展，數(shù)據(jù)高可靠的存儲(chǔ)服務(wù)以滿足企業(yè)內(nèi)部應(yīng)用需求。在此之前企業(yè)數(shù)據(jù)往往采用單臺(tái)計(jì)算機(jī)存儲(chǔ)加上重要數(shù)據(jù)集中存儲(chǔ)的方法進(jìn)行管理。企業(yè)中個(gè)人用戶把數(shù)據(jù)存儲(chǔ)在各自的電腦上，這種數(shù)據(jù)存儲(chǔ)方式在照成企業(yè)內(nèi)部普通數(shù)據(jù)共享極大不便的同時(shí)，更因?yàn)閭€(gè)人電腦單機(jī)故障問題使這種存儲(chǔ)方式存儲(chǔ)企業(yè)數(shù)據(jù)存在巨大的安全隱患。
　　私有云存儲(chǔ)技術(shù)因其

2、數(shù)據(jù)存儲(chǔ)效率高、數(shù)據(jù)高可靠等特點(diǎn)成為存儲(chǔ)企業(yè)數(shù)據(jù)一種很好的解決方案。而私有云存儲(chǔ)平臺(tái)中元數(shù)據(jù)管理模塊成為訪問的熱點(diǎn)，其元數(shù)據(jù)高效管理方式、數(shù)據(jù)并發(fā)性以及數(shù)據(jù)安全性成為元數(shù)據(jù)管理模塊設(shè)計(jì)的重點(diǎn)和難點(diǎn)。
　　本文結(jié)合企業(yè)云存儲(chǔ)平臺(tái)需求，提出一套全新貼合企業(yè)用戶需求的私有云存儲(chǔ)平臺(tái)（C-store），設(shè)計(jì)并實(shí)現(xiàn)了架構(gòu)高可擴(kuò)展、數(shù)據(jù)高可靠且支持用戶文件系統(tǒng)訪問行為的元數(shù)據(jù)管理模塊集群。本文從總體上介紹C-store項(xiàng)目以及基本架構(gòu)以及系統(tǒng)

3、基本模塊組成，并詳細(xì)介紹了系統(tǒng)中元數(shù)據(jù)管理模塊的設(shè)計(jì)與實(shí)現(xiàn)工作。
　　本文采用哈希桶策略把來自不同用戶的元數(shù)據(jù)均勻的散列在多個(gè)邏輯桶中，并根據(jù)元數(shù)據(jù)集群各節(jié)點(diǎn)負(fù)載情況進(jìn)行合理的調(diào)配存放。在元數(shù)據(jù)服務(wù)器內(nèi)部，系統(tǒng)采用最長(zhǎng)路徑匹配方法，使用戶元數(shù)據(jù)操作最快速的定位到元數(shù)據(jù)子表中。與此同時(shí)，系統(tǒng)采用內(nèi)部熱點(diǎn)分表策略、節(jié)點(diǎn)間桶遷移策略動(dòng)態(tài)地平衡單臺(tái)元數(shù)據(jù)服務(wù)器以及集群間各臺(tái)主機(jī)之間元數(shù)據(jù)訪問負(fù)載壓力。系統(tǒng)通過元數(shù)據(jù)一致性檢查策略以及元數(shù)據(jù)