分布式數(shù)據(jù)倉(cāng)庫(kù)中預(yù)聚集數(shù)據(jù)的一致性維護(hù)策略研究.pdf

1、隨著數(shù)據(jù)倉(cāng)庫(kù)應(yīng)用范圍的不斷擴(kuò)大，集中式數(shù)據(jù)倉(cāng)庫(kù)環(huán)境已不能滿足用戶的需求，分布式數(shù)據(jù)倉(cāng)庫(kù)技術(shù)應(yīng)運(yùn)而生。分布式數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)大多來源于多個(gè)分散、異構(gòu)及自治的底層業(yè)務(wù)數(shù)據(jù)庫(kù)，其信息往往以實(shí)視圖的形式分布存儲(chǔ)在多個(gè)結(jié)點(diǎn)上，其中，預(yù)聚集數(shù)據(jù)是實(shí)視圖的一個(gè)重要組成部分。預(yù)聚集數(shù)據(jù)的存在，加快了查詢響應(yīng)速度，大大提高了數(shù)據(jù)倉(cāng)庫(kù)的性能。然而，底層數(shù)據(jù)庫(kù)中的數(shù)據(jù)是不斷變化的，為使分布式數(shù)據(jù)倉(cāng)庫(kù)中的預(yù)聚集數(shù)據(jù)能夠同步反映數(shù)據(jù)源的變化，必須對(duì)其進(jìn)行及時(shí)維護(hù)

2、。
　　在介紹分布式數(shù)據(jù)倉(cāng)庫(kù)及預(yù)聚集數(shù)據(jù)相關(guān)知識(shí)的基礎(chǔ)上，分析了脫機(jī)維護(hù)和聯(lián)機(jī)維護(hù)存在的不足，擴(kuò)展了動(dòng)態(tài)增量維護(hù)算法的應(yīng)用范圍，提出了基于分布式數(shù)據(jù)倉(cāng)庫(kù)的動(dòng)態(tài)增量維護(hù)的模型及算法，分別在各分布站點(diǎn)上設(shè)置兩級(jí)視圖，輔助實(shí)現(xiàn)視圖的增量維護(hù)，取得了較好的效果。
　　作為聚集數(shù)據(jù)的組織形式之一--數(shù)據(jù)立方體是二維表格的多維擴(kuò)展。數(shù)據(jù)立方體的形成過程就是數(shù)據(jù)聚集的過程，對(duì)聚集數(shù)據(jù)的維護(hù)可以轉(zhuǎn)化為對(duì)數(shù)據(jù)立方體的維護(hù)。在介紹多維結(jié)構(gòu)及數(shù)據(jù)

3、立方體的基礎(chǔ)上，通過維劃分引入維層次信息實(shí)現(xiàn)立方體的存儲(chǔ)，同時(shí)對(duì)數(shù)據(jù)立方體進(jìn)行分段劃分，然后根據(jù)主題進(jìn)行聚簇，提出了一種有利于分布式系統(tǒng)的數(shù)據(jù)立方體的存儲(chǔ)結(jié)構(gòu)--分布式數(shù)據(jù)立方體，使數(shù)據(jù)立方體據(jù)主題分布于分布式數(shù)據(jù)倉(cāng)庫(kù)的各個(gè)節(jié)點(diǎn)上，采用增量式維護(hù)算法及分布式并行處理的方法，對(duì)數(shù)據(jù)進(jìn)行維護(hù)，提高了數(shù)據(jù)的維護(hù)效率。
　　為了測(cè)試以往運(yùn)用于集中式系統(tǒng)中的算法在分布式系統(tǒng)中的功能及效率，搭建了分布式系統(tǒng)模擬環(huán)境，以分布式數(shù)據(jù)立方體的形式對(duì)