基于HowNet樹層次模型的語(yǔ)義相似度計(jì)算方法研究.pdf

1、隨著互聯(lián)網(wǎng)的快速發(fā)展和網(wǎng)絡(luò)資源的日益豐富，從海量文本信息中準(zhǔn)確返回用戶所需內(nèi)容的需求越發(fā)強(qiáng)烈，人們對(duì)計(jì)算機(jī)處理文本信息的能力要求越來越高。作為文本信息處理和自然語(yǔ)言處理的基礎(chǔ)研究?jī)?nèi)容，語(yǔ)義相似度廣泛應(yīng)用于自動(dòng)問答系統(tǒng)、基于實(shí)例的機(jī)器翻譯、多文檔、信息檢索等領(lǐng)域。語(yǔ)義相似度的計(jì)算結(jié)果直接影響文本信息處理的效果，因此提高語(yǔ)義相似度計(jì)算的準(zhǔn)確性十分必要。詞語(yǔ)是構(gòu)成句子最基本的語(yǔ)義和語(yǔ)法單位。詞語(yǔ)相似度的計(jì)算是語(yǔ)義相似度最基本的研究?jī)?nèi)容，提高詞

2、語(yǔ)相似度計(jì)算效果能夠更好的服務(wù)于上層應(yīng)用研究。
　　本文分析比較了主流的詞語(yǔ)相似度計(jì)算方法，對(duì)基于HowNet的詞語(yǔ)相似度展開研究。在 HowNet的基本結(jié)構(gòu)和樹層次模型的基礎(chǔ)上，提出一種改進(jìn)的基于節(jié)點(diǎn)概率密度比的詞語(yǔ)相似度計(jì)算方法。將改進(jìn)算法進(jìn)行實(shí)驗(yàn)仿真并與最新算法比較，驗(yàn)證本文提出的算法更接近人工評(píng)估的結(jié)果。句子是表達(dá)一個(gè)完整語(yǔ)義的基本結(jié)構(gòu)。句子相似度的計(jì)算涉及詞法、詞義、句法、上下文環(huán)境等內(nèi)容，是一個(gè)具有挑戰(zhàn)性的問題。針對(duì)單