面向汽車行業(yè)的主題爬蟲(chóng)研究與實(shí)現(xiàn).pdf

1、隨著互聯(lián)網(wǎng)技術(shù)的不斷發(fā)展以及網(wǎng)絡(luò)信息多元化的發(fā)展，傳統(tǒng)搜索引擎已經(jīng)不能滿足人們對(duì)于特定行業(yè)領(lǐng)域的個(gè)性化檢索需求，因此針對(duì)各行業(yè)主題信息的搜索引擎應(yīng)運(yùn)而生。而主題爬蟲(chóng)是主題搜索引擎的核心部分，為保證其返回查詢信息的準(zhǔn)確性和及時(shí)性，對(duì)主題爬蟲(chóng)展開(kāi)研究具有重要意義。本文設(shè)計(jì)實(shí)現(xiàn)的汽車主題爬蟲(chóng)就是在這樣的背景下產(chǎn)生的。
　　 本文首先闡述了主題爬蟲(chóng)的發(fā)展現(xiàn)狀，然后對(duì)目前主流爬蟲(chóng)在主題基準(zhǔn)模型、網(wǎng)頁(yè)信息提取和網(wǎng)頁(yè)搜索策略等關(guān)鍵模塊的各種實(shí)

2、現(xiàn)方案進(jìn)行比較分析，提出了適合汽車主題爬蟲(chóng)建立的一套完整的設(shè)計(jì)方案，并對(duì)主題爬蟲(chóng)的各主要模塊進(jìn)行功能實(shí)現(xiàn)。最后對(duì)設(shè)計(jì)的主題爬蟲(chóng)展開(kāi)性能測(cè)試，并進(jìn)行相應(yīng)的總結(jié)分析。
　　 具體地說(shuō)，本文對(duì)汽車主題爬蟲(chóng)的研究工作主要體現(xiàn)在以下幾點(diǎn)：
　　 1、分析主流主題爬蟲(chóng)實(shí)現(xiàn)流程，提出適合汽車主題爬蟲(chóng)的設(shè)計(jì)方案，并設(shè)計(jì)出汽車主題爬蟲(chóng)的總體結(jié)構(gòu)框架。
　　 2、通過(guò)比較主題基準(zhǔn)模型實(shí)現(xiàn)方案，采用向量空間模型的方法構(gòu)建汽車主題關(guān)鍵詞