基于協(xié)同過濾的互聯(lián)網(wǎng)用戶行為分析技術(shù)研究.pdf

1、隨著社會信息化趨勢的不斷加深,以及互聯(lián)網(wǎng)內(nèi)容和應(yīng)用的不斷完善,互聯(lián)網(wǎng)用戶數(shù)量也正在迅速增長。目前,作為掌握大量流量數(shù)據(jù)的網(wǎng)絡(luò)運(yùn)營商,有必要深入挖掘流量價值,分析用戶行為,促進(jìn)業(yè)務(wù)發(fā)展,提升用戶體驗。Web2.0時代的到來,使得萬維網(wǎng)逐步發(fā)展成為一個全球性的用戶參與、共享和互動的平臺,而不是原來的海量信息資源庫。這對現(xiàn)有的互聯(lián)網(wǎng)知識發(fā)現(xiàn)研究帶來了新的挑戰(zhàn)。首先,使分布在萬維網(wǎng)上各類復(fù)雜數(shù)據(jù)類型,如音頻、圖像、視頻等快速增加;其次,互聯(lián)網(wǎng)用

2、戶個性化的操作需求也在不斷增長。因此,怎么樣有效支持互聯(lián)網(wǎng)用戶行為分析,并將分析結(jié)果加以有效應(yīng)用,成為當(dāng)前基于互聯(lián)網(wǎng)的知識發(fā)現(xiàn)技術(shù)所面臨的挑戰(zhàn)。
　　在一個層面上,網(wǎng)絡(luò)上數(shù)據(jù)中的各種復(fù)雜的類型,如在圖像的急劇增加的分布,音頻,視頻等;另一層面,個人用戶中的操作方面的需要互聯(lián)網(wǎng)也越來越大。因此,基于因特網(wǎng)的當(dāng)前知識發(fā)現(xiàn)面臨的技術(shù)兩大挑戰(zhàn)演變成如何有效地支持互聯(lián)網(wǎng)用戶行為分析,和分析的結(jié)果,以有效地應(yīng)用。
　　在本文中,我們對互

3、聯(lián)網(wǎng)用戶行為分析技術(shù),在以下方面進(jìn)行了研究和探索:
　　1.提出了一種在多Web站點(diǎn)、多標(biāo)簽瀏覽的網(wǎng)絡(luò)訪問環(huán)境中用戶瀏覽行為采集和預(yù)處理的方法,首先利用網(wǎng)絡(luò)嗅探器來采集用戶瀏覽行為數(shù)據(jù),然后將采集到的數(shù)據(jù)進(jìn)行過濾清理。數(shù)據(jù)過濾方法是采取從捕獲過濾、傳統(tǒng)過濾到基于引用和時間關(guān)系過濾的三次逐級過濾清理方式。從而為用戶行為模型為基礎(chǔ)的數(shù)據(jù)挖掘提供了較為準(zhǔn)確的數(shù)據(jù)源。
　　2.分類算法的適用性和具體每個數(shù)據(jù)庫的特征很大程度上被屬性選

4、擇方法所取決,所有的數(shù)據(jù)庫和各種挖掘方法不可能被一種屬性選擇方法所適用。屬性選擇首先要考慮屬性選擇維數(shù)的降低程度,其次要考慮算法的運(yùn)行時間,同時還要考慮選擇后的屬性集對分類算法的精度影響。論文充分考慮上訴因素,采用了過濾法和打包法相結(jié)合的方法進(jìn)行屬性選擇,并應(yīng)用于上網(wǎng)行為數(shù)據(jù)預(yù)處理。
　　3.在基于用戶行為數(shù)據(jù)采集的基礎(chǔ)上,有效地發(fā)掘用戶間興趣的相似度是互聯(lián)網(wǎng)用戶行為分析系統(tǒng)的主要內(nèi)容。推薦系統(tǒng)是一種根據(jù)用戶訪問行為分析,自動發(fā)現(xiàn)

5、用戶興趣點(diǎn)的一種信息過濾方式。本文提出了一種以項目分類為基礎(chǔ)的協(xié)同過濾推薦改進(jìn)的算法。該算法首先利用項目信息為項目預(yù)測評,通過計算類內(nèi)用戶相似度得到鄰居,最后進(jìn)行推薦。該算法可以準(zhǔn)確地獲取用戶興趣最近鄰,有效地解決數(shù)據(jù)稀疏性問題;同時,該算法還極大地提高了系統(tǒng)的工作效率及可擴(kuò)展性。
　　4.基于以上研究成果,設(shè)計開發(fā)了一個互聯(lián)網(wǎng)用戶行為分析原型系統(tǒng)UBAS,利用部分運(yùn)營商作為應(yīng)用對象,驗證了關(guān)鍵技術(shù)可行性,完成了用戶行為分析。

6、r>　　本文以改進(jìn)的數(shù)據(jù)采集和過濾技術(shù)為基礎(chǔ)進(jìn)行了基礎(chǔ)數(shù)據(jù)的采集,在此基礎(chǔ)上,結(jié)合基于項目分類的協(xié)同過濾改進(jìn)算法,進(jìn)行了互聯(lián)網(wǎng)用戶行為分析。這樣的算法可以準(zhǔn)確地獲取用戶興趣最近鄰,有效地解決數(shù)據(jù)稀疏性問題。下一步將把社交網(wǎng)絡(luò)中的推薦系統(tǒng)以及在用戶行為分析的基礎(chǔ)上增加反饋機(jī)制作為未來研究方向。在電信運(yùn)營商領(lǐng)域,基于本文的研究結(jié)果取得了良好的應(yīng)用效果,尤其是針對用戶行為分析的再精確營銷。這從側(cè)面證明了本文成果具有廣闊的商用前景,同時具備積極