一種可適應多變需求的數(shù)據(jù)處理平臺設計與應用.pdf

1、隨著計算機網(wǎng)絡的發(fā)展與互聯(lián)網(wǎng)的深入應用，企業(yè)面臨數(shù)據(jù)爆炸式增長，如何從這些海量、異構、多樣、動態(tài)的數(shù)據(jù)中準確、高效、低成本地挖掘有價值的信息，幫助企業(yè)和機構做出決策，已成為許多企業(yè)下一個階段信息化系統(tǒng)建設的重要目標。傳統(tǒng)的在開發(fā)階段必須確定相應功能的應用開發(fā)模式，很難適應基礎數(shù)據(jù)快速增長、應用需求多變的使用環(huán)境，很容易導致系統(tǒng)開發(fā)周期長、使用壽命短的局面，造成巨大人力、物力浪費。研究可適應多變需求的應用系統(tǒng)，具有實用價值。
　　本

2、文在深入研究可適應多變需求應用系統(tǒng)構建相關理論和技術的基礎上，提出了一種處理方案:基于通用數(shù)據(jù)處理平臺提供動態(tài)定制數(shù)據(jù)處理（統(tǒng)計、數(shù)據(jù)挖掘）流程的功能，而（高層）應用系統(tǒng)通過一個流程處理執(zhí)行引擎執(zhí)行可變流程或者組合的流程方式，以增強應用系統(tǒng)適應數(shù)據(jù)和多變需求的能力。論文主要貢獻和工作如下:
　　1.研究了可跨平臺交換統(tǒng)計和挖掘模型的通用語言PMML，并在研究了部分開源PMML執(zhí)行引擎的基礎上，設計并實現(xiàn)了一套PMML執(zhí)行引擎。

3、r>　　2.設計并實現(xiàn)了一套可支持數(shù)據(jù)預處理、數(shù)據(jù)集成和部分數(shù)據(jù)挖掘的可視化數(shù)據(jù)處理流程設計平臺。該平臺以PMML語言作為數(shù)據(jù)處理流程的基本描述語言，以自主設計的PMML執(zhí)行引擎為流程定制模塊的核心，實現(xiàn)了允許以直觀的、交互式繪圖方式，進行可視化流程設計、流程執(zhí)行以及可視化執(zhí)行結果展示等功能。
　　該平臺主要功能現(xiàn)已基本完成，可正常運行。將平臺應用于某商業(yè)銀行海量客戶交易金融數(shù)據(jù)信用分析，驗證了平臺的一些功能，通過定制數(shù)據(jù)處理流程