網(wǎng)站主題分析、標(biāo)引與檢索技術(shù)的研究.pdf

1、隨著社會(huì)分工向?qū)I(yè)化細(xì)分方向的發(fā)展，“專、精、深”的專業(yè)化信息服務(wù)需求日益增大，網(wǎng)絡(luò)中涌現(xiàn)出了大量的專業(yè)化信息網(wǎng)站，搜索引擎技術(shù)也逐漸從通用搜索向?qū)I(yè)搜索方面演變，其中針對(duì)提供自動(dòng)化的網(wǎng)站分類導(dǎo)航服務(wù)的相關(guān)技術(shù)成為了信息處理領(lǐng)域近年十分活躍的熱點(diǎn)研究問(wèn)題。
　　基于主題標(biāo)引的智能網(wǎng)站檢索(ThemeIndexingbasedWebSiteRetrival，TTWR)便是以主題網(wǎng)站(Single-ThemeWebsite)為檢索目標(biāo)

2、，結(jié)合網(wǎng)站拓?fù)浣Y(jié)構(gòu)等特有的相關(guān)特征，以主題分析標(biāo)引技術(shù)為核心，為提供自動(dòng)化的網(wǎng)站檢索服務(wù)而開(kāi)展的相關(guān)技術(shù)研究。
　　根據(jù)以上研究目的，本文首先分析了智能網(wǎng)站檢索技術(shù)的構(gòu)造與實(shí)現(xiàn)，提出了基于主題標(biāo)引的智能網(wǎng)站檢索系統(tǒng)的系統(tǒng)結(jié)構(gòu)與實(shí)現(xiàn)策略，之后對(duì)系統(tǒng)中的主題分析、標(biāo)引與檢索等關(guān)鍵技術(shù)進(jìn)行了深入分析，針對(duì)主要技術(shù)難點(diǎn)重點(diǎn)討論了網(wǎng)頁(yè)正文抽取，網(wǎng)站拓?fù)浣Y(jié)構(gòu)分析，網(wǎng)站主題獲取等相關(guān)實(shí)現(xiàn)技術(shù)，提出了基于標(biāo)簽間距的正文抽取算法，基于URL目錄相似

3、度的網(wǎng)站結(jié)構(gòu)分析算法和基于網(wǎng)站結(jié)構(gòu)的網(wǎng)站主題概念獲取算法等解決方案。最后在以上算法與理論的基礎(chǔ)上，整合實(shí)現(xiàn)了智能網(wǎng)站檢索的信息采集實(shí)驗(yàn)系統(tǒng)，經(jīng)過(guò)實(shí)驗(yàn)分析與評(píng)價(jià)，取得了較好的網(wǎng)站主題標(biāo)引結(jié)果。
　　本文提出的網(wǎng)站主題分析、標(biāo)引與檢索技術(shù)為網(wǎng)站檢索提供了新的解決方案，提供了更適于傳統(tǒng)信息檢索模型與用戶檢索習(xí)慣的標(biāo)引技術(shù)，使之避免了傳統(tǒng)分類問(wèn)題中構(gòu)建類別體系的單一性與用戶需求的多樣性之間的矛盾，克服了傳統(tǒng)信息檢索與分類模式中可能出現(xiàn)的部