英文多文檔查詢(xún)型自動(dòng)文摘研究.pdf

1、隨著信息技術(shù)和互聯(lián)網(wǎng)的發(fā)展,人們置身于浩瀚的信息海洋,可獲取的信息也越來(lái)越多,越來(lái)越紛繁復(fù)雜。人們?cè)絹?lái)越迫切地希望能夠?qū)π畔⑦M(jìn)行標(biāo)引、提煉與濃縮,以較少的文字表達(dá)主要內(nèi)容和中心意思,從而減少信息獲取的時(shí)間。文本的自動(dòng)摘要技術(shù)正好為人們提供了一種解決方案,通過(guò)計(jì)算機(jī)自動(dòng)從一篇或多篇文檔中提煉出用戶(hù)需要的信息內(nèi)容,從而節(jié)省用戶(hù)獲取信息的時(shí)間,減輕用戶(hù)的負(fù)擔(dān)。文本自動(dòng)摘要技術(shù)一直是自然語(yǔ)言領(lǐng)域的研究熱點(diǎn),尤其是近年來(lái),文本自動(dòng)摘要出現(xiàn)了和自動(dòng)

2、問(wèn)題回答系統(tǒng)融合的趨勢(shì),并更加注重于查詢(xún)型的文摘,國(guó)際上相關(guān)的文摘評(píng)測(cè)會(huì)議也越來(lái)越受到科研單位的重視。對(duì)于文摘領(lǐng)域語(yǔ)義關(guān)系、篇章分析、機(jī)器學(xué)習(xí)方法應(yīng)用的研究越來(lái)越多,在這一背景下,本文嘗試對(duì)語(yǔ)義關(guān)系三元組這一重要特征以及機(jī)器學(xué)習(xí)方法應(yīng)用于文摘做了詳細(xì)的探討。語(yǔ)義關(guān)系是文摘方法的重要特征,本文使用語(yǔ)義關(guān)系三元組這一重要特征來(lái)揭示文本之間的語(yǔ)義關(guān)系,在對(duì)句子進(jìn)行充分的句法分析的基礎(chǔ)上,抽取語(yǔ)義關(guān)系特征形成三元組,并引入搜索引擎等外部知識(shí)庫(kù),

3、轉(zhuǎn)化為更容易計(jì)算的詞、關(guān)系之間的語(yǔ)義聯(lián)系。在DUC權(quán)威語(yǔ)料上的實(shí)驗(yàn)證明,使用該特征在各項(xiàng)文摘性能指標(biāo)上超過(guò)了經(jīng)典的TF*ISF方法,ROUGE-4指標(biāo)提高了46.4％,而且由該特征單獨(dú)編制的文摘系統(tǒng),和參加DUC2005年評(píng)測(cè)的32個(gè)系統(tǒng)相比,ROUGE-L指標(biāo)排名為第10。抽取式的文摘方法,可以看作兩類(lèi)的分類(lèi)問(wèn)題。機(jī)器學(xué)習(xí)方法可以選取最優(yōu)的特征組合,學(xué)習(xí)出文摘模型。本文采用了最大熵、支持向量機(jī)等模型實(shí)現(xiàn)基于機(jī)器學(xué)習(xí)方法的自動(dòng)文摘系統(tǒng),