網(wǎng)格中基于MapReduce應(yīng)用的可視化系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著網(wǎng)格計(jì)算在高性能計(jì)算領(lǐng)域中變得越來越重要,網(wǎng)格應(yīng)用也開始蓬勃發(fā)展。在Google提出并大力推廣MapReduce計(jì)算架構(gòu)的時(shí)機(jī),在網(wǎng)格環(huán)境中部署MapReduce應(yīng)用可以提高網(wǎng)格的適用性。而隨著技術(shù)的普及,網(wǎng)格產(chǎn)品開始被普通的中小型用戶所廣泛認(rèn)知以及接受。但是如何使用復(fù)雜艱深的以命令行為基礎(chǔ)的網(wǎng)格應(yīng)用,一直是網(wǎng)格產(chǎn)品向大眾普及的一個(gè)瓶頸。為解決這個(gè)問題,在網(wǎng)格環(huán)境中將MapReduce應(yīng)用進(jìn)行可視化的需求也就應(yīng)運(yùn)而生了。
　　

2、為了將一個(gè)具有復(fù)雜結(jié)構(gòu)的計(jì)算框架展示給用戶,本論文研究對(duì)比了現(xiàn)在流行的可視化界面框架之后,決定采用同時(shí)擁有強(qiáng)大組件庫(kù)和良好用戶體驗(yàn)的自有商用界面框架CommonWidget?？梢暬到y(tǒng)的一個(gè)通病是其性能問題,本文為了減少后臺(tái)數(shù)據(jù)轉(zhuǎn)換到前臺(tái)界面所消耗的資源,使用JNI和Ajax等新興技術(shù)來提高整個(gè)系統(tǒng)的效率。將MapReduce應(yīng)用和可視化系統(tǒng)手工部署到環(huán)境中去對(duì)普通用戶來說相當(dāng)困難,本文在調(diào)研了網(wǎng)格應(yīng)用的用戶群體之后,采用Linux下的

3、64位平臺(tái)作為部署環(huán)境,使用RPM打包技術(shù)幫助用戶一步到位的將整個(gè)MapReduce解決方案部署完成。
　　本論文將MapReduce應(yīng)用的三種工作量Application、Job和Task的狀態(tài)和功能分層次的展示在可視化系統(tǒng)上,不僅包含了MapReduce應(yīng)用應(yīng)有的功能,還創(chuàng)建了適合用戶操作的個(gè)性化功能。另外本論文還設(shè)置了不同的界面訪問權(quán)限使不同性質(zhì)的用戶專注于其功能點(diǎn)。MapReduce應(yīng)用的可視化系統(tǒng)不僅能夠幫助用戶高效輕松