文本信息檢索中修飾語作用的研究.pdf

1、隨著網(wǎng)絡(luò)信息時(shí)代的到來,信息日新月異,并呈指數(shù)增長(zhǎng)趨勢(shì),形成"信息爆炸".在進(jìn)行信息檢索時(shí),與用戶需求匹配的信息經(jīng)常不在檢索結(jié)果內(nèi),而大量用戶不需求的信息——"信息垃圾",卻占用檢索結(jié)果的相當(dāng)大的一部分.因此,改進(jìn)文本信息檢索系統(tǒng)的檢索性能,提高檢索質(zhì)量就成為亟待解決的問題.該論文的主要研究目的是,針對(duì)可能影響檢索效力的一個(gè)容易被忽略的因素——修飾語,研究其在文本信息檢索中的作用.針對(duì)這一目的,開發(fā)了改進(jìn)的向量空間模型(Modified

2、 Vector Space Model,MVSM),并使用英文文本進(jìn)行了試驗(yàn),進(jìn)而說明修飾語的作用.該文通過對(duì)修飾語作用的研究,主要取得以下成果:(1)傳統(tǒng)模型(如布爾檢索模型)的查詢語句關(guān)鍵詞以及文本關(guān)鍵詞僅僅為獨(dú)立的實(shí)詞(名詞、動(dòng)詞、形容詞、副詞),將傳統(tǒng)的向量空間模型(VectorSpace Model,VSM)進(jìn)行改進(jìn),設(shè)計(jì)并實(shí)現(xiàn)了能夠完成該研究目的的信息檢索模型(MVSM).該模型與傳統(tǒng)向量空間模型主要區(qū)別以及優(yōu)點(diǎn)在于:它將傳

3、統(tǒng)的檢索關(guān)鍵詞(該文中主要指名詞)與修飾它的修飾語(該文中主要指形容詞)作為一個(gè)整體關(guān)鍵詞來看待,一定程度上確定了歧義詞的真正含義;同時(shí),將檢索關(guān)鍵詞中的修飾語以及它所修飾的中心詞根據(jù)它們的同義詞進(jìn)行擴(kuò)展并重組,使得一些由于用詞生僻而原本檢索不出來的卻符合用戶需要的文本能夠檢索出來.(2)使用標(biāo)準(zhǔn)語料庫(TREC),運(yùn)用設(shè)計(jì)好的MVSM模型,輸入共150個(gè)查詢語句,進(jìn)行各種針對(duì)修飾語的試驗(yàn),并將其結(jié)果與普通檢索試驗(yàn)的結(jié)果進(jìn)行比較,從而說