海量數(shù)據(jù)查詢的優(yōu)化處理及其在用電稽查系統(tǒng)中的應(yīng)用.pdf

1、隨著互聯(lián)網(wǎng)技術(shù)的迅猛發(fā)展，Web應(yīng)用中的數(shù)據(jù)量越來越大，海量數(shù)據(jù)的訪問和處理已成為信息技術(shù)研究的熱點(diǎn)。移動(dòng)公司的基站普遍存在著用電管理難、盜電嚴(yán)重、無法及時(shí)檢測(cè)基站設(shè)備故障和老化等問題，對(duì)移動(dòng)公司的通信保障和用電開支有著嚴(yán)重的影響。移動(dòng)公司的動(dòng)力環(huán)境集中監(jiān)控平臺(tái)雖然能提供詳實(shí)的用電數(shù)據(jù)，但這些數(shù)據(jù)非常雜亂和龐大，不適合進(jìn)行數(shù)據(jù)統(tǒng)計(jì)和分析，從而無法在實(shí)際工作中為用電管理提供數(shù)據(jù)支持和決策指導(dǎo)。
　　 本文提出了基于權(quán)重因子的緩存替

2、換算法LFU-W，通過改進(jìn)的替換算法提高緩存命中率，結(jié)合索引優(yōu)化技術(shù)，達(dá)到提升海量數(shù)據(jù)查詢效率的目的。針對(duì)移動(dòng)公司在用電管理過程中存在的問題，詳細(xì)闡述了基于海量數(shù)據(jù)查詢的用電稽查系統(tǒng)的設(shè)計(jì)方法、實(shí)現(xiàn)和優(yōu)化。主要內(nèi)容為:
　　 (1)研究Ebbinghaus遺忘曲線的特點(diǎn)，并將其應(yīng)用到基于時(shí)間序列的權(quán)重因子計(jì)算公式中，提出改進(jìn)的基于權(quán)重因子的緩存替換算法LFU-W。根據(jù)用電數(shù)據(jù)查詢的特點(diǎn)，綜合運(yùn)用索引和緩存技術(shù)，達(dá)到提升海量數(shù)據(jù)查

3、詢效率的目的，最大限度的提升系統(tǒng)的響應(yīng)速度;
　　 (2)根據(jù)空調(diào)和開關(guān)電源的用電量，建立單項(xiàng)用電對(duì)比模型，通過對(duì)比分析找出設(shè)備是否有用電故障或線路老化的問題;
　　 (3)根據(jù)采集用電、理論用電、遠(yuǎn)程抄表用電和實(shí)際用電，建立總用電對(duì)比模型，通過對(duì)比分析找出基站是否有人為盜電或人工抄表不準(zhǔn)確的問題。
　　 本文采用的基于索引和緩存技術(shù)的優(yōu)化方法能大幅度提升海量數(shù)據(jù)的查詢效率;提出的對(duì)比模型能準(zhǔn)確而有效的分析出用電