版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡介
1、互聯(lián)網(wǎng)和多媒體技術(shù)的飛速發(fā)展,推動了數(shù)字多媒體作品的在線銷售與傳播,也帶來了版權(quán)侵犯問題。數(shù)字作品可以被輕易拷貝,任何人均可通過網(wǎng)絡(luò)將版權(quán)保護(hù)作品進(jìn)行再次分發(fā)。使用網(wǎng)絡(luò)爬蟲主動搜索互聯(lián)網(wǎng)中的多媒體作品(圖像、音頻和視頻),利用拷貝檢測和數(shù)字指紋技術(shù)追蹤泄露者,可以有效地保護(hù)版權(quán)。設(shè)計(jì)實(shí)現(xiàn)了一個(gè)分布式多媒體網(wǎng)絡(luò)爬行系統(tǒng),實(shí)現(xiàn)對互聯(lián)網(wǎng)上多媒體作品的抓取,為下一步版權(quán)保護(hù)提供檢測數(shù)據(jù)來源。
分布式網(wǎng)絡(luò)爬蟲的設(shè)計(jì)是一項(xiàng)極具挑戰(zhàn)性的工作
2、,在詳細(xì)討論一般爬蟲設(shè)計(jì)架構(gòu)的基礎(chǔ)上,提出了一種實(shí)用的分布式架構(gòu)設(shè)計(jì),有效的結(jié)合了集中式和分布式設(shè)計(jì)的優(yōu)點(diǎn),較好地解決了任務(wù)調(diào)度與爬行結(jié)點(diǎn)動態(tài)加入和退出造成的重復(fù)爬行問題。網(wǎng)絡(luò)爬蟲的實(shí)現(xiàn)涉及到一系列關(guān)鍵技術(shù),為加快爬行速度,盡早爬行到重要資源,采用基于URL過濾的寬度優(yōu)先搜索策略,丟棄不重要的URL;在對基于Bloom Filter的URL判重方式進(jìn)行詳細(xì)分析討論后,提出了一種基于Bloom Filter的分布式URL判重方法,每個(gè)爬行
3、結(jié)點(diǎn)只維護(hù)自身任務(wù)范圍內(nèi)URL的判重結(jié)構(gòu),爬行結(jié)點(diǎn)越多,單個(gè)爬行結(jié)點(diǎn)需要進(jìn)行判重的URL越少,減少了對內(nèi)存的需求,加快了判重速度;爬行結(jié)點(diǎn)采用多線程實(shí)現(xiàn)可以有效加快爬行速度,但線程之間存在競爭,詳細(xì)討論了多線程設(shè)計(jì)中遇到的問題。
在多媒體資源爬行方面,詳細(xì)討論了多媒體資源爬行下載中存在的問題及解決思路,著重介紹了視頻分享網(wǎng)站中存在的視頻下載問題,并以視頻網(wǎng)站優(yōu)酷為例描述了問題的解決方案。最后通過系統(tǒng)的實(shí)際運(yùn)行評測,驗(yàn)證分布式多
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 分布式多媒體遠(yuǎn)端教學(xué)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 分布式多媒體系統(tǒng)媒體內(nèi)同步的研究與實(shí)現(xiàn).pdf
- 桌面型分布式多媒體遠(yuǎn)程會診系統(tǒng)的設(shè)計(jì).pdf
- 分布式多媒體會議系統(tǒng)研討
- 分布式多媒體編輯與素材共享系統(tǒng)總體設(shè)計(jì)與編輯功能的實(shí)現(xiàn).pdf
- 分布式多媒體編輯系統(tǒng)中粗編功能模塊的設(shè)計(jì)和實(shí)現(xiàn).pdf
- 分布式多媒體編輯系統(tǒng)的資料管理及索引生成.pdf
- 分布式多媒體同步與并行編碼技術(shù)研究.pdf
- 分布式多媒體可視化交互管理系統(tǒng)方案資料
- 分布式多媒體可視化交互管理系統(tǒng)方案.doc
- 分布式多媒體接入的呼叫中心平臺的構(gòu)建.pdf
- 分布式多媒體網(wǎng)絡(luò)中QoS保證的多播路由算法研究.pdf
- 基于分布式多媒體數(shù)據(jù)庫的數(shù)字校園查詢系統(tǒng).pdf
- 分布式網(wǎng)絡(luò)多媒體遠(yuǎn)程監(jiān)控系統(tǒng).pdf
- 基于IP的分布式多媒體系統(tǒng)的QoS管理模型的研究.pdf
- 基于低速網(wǎng)的分布式多媒體系統(tǒng)同步機(jī)制的研究.pdf
- 無線家庭媒體網(wǎng)絡(luò)分布式系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 基于Petri網(wǎng)的分布式多媒體同步技術(shù)研究.pdf
- 分布式多媒體遠(yuǎn)程教學(xué)系統(tǒng)關(guān)鍵技術(shù)研究.pdf
- 分布式多媒體通信平臺和服務(wù)質(zhì)量的研究.pdf
評論
0/150
提交評論