面向數(shù)據(jù)流的通用實時監(jiān)控平臺的研究與實現(xiàn).pdf

1、信息的價值隨著時間的流逝而降低，及時捕獲關(guān)鍵信息并做出響應(yīng)才能先發(fā)制人。實時監(jiān)控是一個非常有挑戰(zhàn)性的課題。實時監(jiān)控應(yīng)用要求系統(tǒng)在最短的時間做出響應(yīng)，能處理海量數(shù)據(jù)，能快速的應(yīng)對用戶不斷變化的業(yè)務(wù)需求并提供不間斷的服務(wù)。
　　 根據(jù)實時監(jiān)控場景下接入應(yīng)用和業(yè)務(wù)人員的需求，本文設(shè)計并實現(xiàn)了一個高實時性、高可靠、可擴展、可定制、面向數(shù)據(jù)流的通用實時監(jiān)控平臺。本文抽象了信息模型來描述通用的監(jiān)控場景，包括主題、監(jiān)控項、數(shù)據(jù)源、請求和風(fēng)險;

2、用戶可以根據(jù)自己的業(yè)務(wù)創(chuàng)建對應(yīng)的數(shù)據(jù)實體并輕松的接入到實時監(jiān)控平臺;本文通過一個金融風(fēng)險監(jiān)控應(yīng)用進一步說明了如何在這個平臺搭建自己的應(yīng)用。
　　 其次，本文設(shè)計了一個實時數(shù)據(jù)流處理引擎，定義了一個SQL風(fēng)格的流處理語言，實現(xiàn)了在數(shù)據(jù)流上做支持滑動時間窗口的查詢和常用的集聚表達式，提供了API與其他軟件集成，并設(shè)計了持久化和故障恢復(fù)的模塊。
　　 最后，本文分析了軟件系統(tǒng)中普遍存在的數(shù)據(jù)一致性問題，并討論了如何在性能和一致