面向結(jié)構(gòu)安全監(jiān)測的SQL與NoSQL集成查詢中間件的設(shè)計與實(shí)現(xiàn).pdf

1、隨著互聯(lián)網(wǎng)技術(shù)的快速發(fā)展，人們正在進(jìn)入大數(shù)據(jù)時代:新的數(shù)據(jù)來源渠道不斷出現(xiàn)，數(shù)據(jù)復(fù)制和傳輸更加容易，不斷積壓的歷史數(shù)據(jù)有待存儲和處理。現(xiàn)有的關(guān)系型數(shù)據(jù)庫和非關(guān)系型數(shù)據(jù)庫存儲方案各具優(yōu)勢，所以SQL與NoSQL混合數(shù)據(jù)庫方案應(yīng)運(yùn)而生。但這種存儲方案需要將同一應(yīng)用的數(shù)據(jù)進(jìn)行分離，根據(jù)數(shù)據(jù)特點(diǎn)分開存儲于SQL數(shù)據(jù)庫和NoSQL數(shù)據(jù)庫中，所以涉及到多個異構(gòu)數(shù)據(jù)源的管理問題。本文正是在以上背景下對SQL與NoSQL集成查詢的關(guān)鍵技術(shù)進(jìn)行研究。

2、r>　　本文首先介紹了結(jié)構(gòu)安全監(jiān)測領(lǐng)域的存儲架構(gòu)面臨的分布式問題，說明SQL與NoSQL集成查詢中間件的研究意義。通過分析近幾年國內(nèi)外存儲架構(gòu)的現(xiàn)狀和發(fā)展趨勢提出了本文的研究方向。然后重點(diǎn)研究了SQL與NoSQL集成查詢的方案，總結(jié)出了SQL主庫查詢方案與獨(dú)立中間件方案相結(jié)合的SQL與NoSQL集成查詢中間件的架構(gòu)。針對架構(gòu)需求中的NoSQL數(shù)據(jù)關(guān)系化進(jìn)行研究，通過分析直接型NoSQL數(shù)據(jù)三元組化算法的缺陷，設(shè)計一種基于預(yù)查詢的NoSQ

3、L數(shù)據(jù)轉(zhuǎn)化方案;針對架構(gòu)需求中的NoSQL數(shù)據(jù)重建進(jìn)行研究，分析等值連接重建算法的缺陷，設(shè)計一種基于預(yù)篩選的NoSQL數(shù)據(jù)重建方案。接著，利用改進(jìn)后的新方案對SQL與NoSQL集成查詢中間件進(jìn)行實(shí)現(xiàn)，使用戶能夠透明地訪問異構(gòu)數(shù)據(jù)源。最后，搭建測試平臺，對中間件的功能、NoSQL數(shù)據(jù)轉(zhuǎn)化算法以及NoSQL查詢模式轉(zhuǎn)化算法進(jìn)行測試，對比分析原算法與新方案的性能區(qū)別。
　　實(shí)驗(yàn)表明，本文設(shè)計的SQL與NoSQL集成查詢中間件架構(gòu)是可行的