面向大數(shù)據(jù)的關(guān)鍵字檢索算法研究及優(yōu)化.pdf

1、針對傳統(tǒng)檢索模型在檢索上存在的數(shù)據(jù)冗余、模糊匹配、檢索結(jié)果差等缺點，結(jié)合當(dāng)前研究熱點，論述異構(gòu)數(shù)據(jù)集成、冗余數(shù)據(jù)排除、高效數(shù)據(jù)分類、關(guān)鍵字檢索等模型與方法，旨在大數(shù)據(jù)環(huán)境下，充分利用傳統(tǒng)技術(shù)與虛擬化技術(shù)、Map-Reduce并行框架模型、改進(jìn)向量空間檢索模型等技術(shù)相結(jié)合優(yōu)化存儲模型、改進(jìn)分類算法以及優(yōu)化檢索算法，進(jìn)而提高算法運算效率，為用戶提供一套集數(shù)據(jù)存儲、數(shù)據(jù)分類、數(shù)據(jù)檢索于一體的大數(shù)據(jù)檢索基礎(chǔ)平臺。
　　以關(guān)鍵字檢索算法作為

2、研究對象，主要研究內(nèi)容為：
　　首先，為了更好地對數(shù)據(jù)檢索提供良好的數(shù)據(jù)存儲基礎(chǔ)，研究數(shù)據(jù)模型的設(shè)計與優(yōu)化，并在云計算環(huán)境下研討設(shè)計數(shù)據(jù)存儲模型，文件塊的數(shù)據(jù)更新算法設(shè)計，以及云存儲的故障恢復(fù)機(jī)制等。
　　第二，為了達(dá)到準(zhǔn)確地對不同數(shù)據(jù)的檢索要求，在原有分類算法的基礎(chǔ)上提出了并行分類混合算法（PCHA算法），該算法利用鄰近分類算法適合處理屬性多、數(shù)據(jù)大的分類問題的優(yōu)勢，引入 Map-Reduce并行框架與其融合設(shè)計，優(yōu)化并提

3、升原有分類算法的建模預(yù)測能力和分類識別率。
　　第三，研討傳統(tǒng)檢索算法并提出無序關(guān)鍵字檢索算法（DKRA算法），該算法利用向量檢索模型計算方便、復(fù)雜度低等優(yōu)點，引入 K-D矩陣構(gòu)造及相似度等計算方法設(shè)計檢索算法，并與計算關(guān)鍵字序列權(quán)重得到相關(guān)數(shù)據(jù)相似度的計算方法做比較，從而體現(xiàn)DKRA算法在計算效率上的優(yōu)勢。
　　最后，在 DKRA算法的基礎(chǔ)上提出了有序關(guān)鍵字檢索算法（OKRA算法），該算法利用檢索關(guān)鍵字的有序性，給出了關(guān)鍵