基于關(guān)鍵幀的視頻內(nèi)容描述方法的研究.pdf

1、隨著多媒體技術(shù)的飛速發(fā)展，關(guān)于如何對視頻內(nèi)容進(jìn)行描述已成為研究的熱點之一，而結(jié)合人類視覺系統(tǒng)的視頻內(nèi)容描述方法也越來越受到研究者們的關(guān)注，并將其應(yīng)用于視頻檢索、智能監(jiān)控、視頻壓縮、視頻復(fù)制檢測等領(lǐng)域。同時，隨著智能監(jiān)控系統(tǒng)的廣泛應(yīng)用，對視頻內(nèi)容的描述在監(jiān)控視頻的事件檢測方面的應(yīng)用更加突出。因此，對視頻內(nèi)容的正確描述及在事件檢測方面的應(yīng)用已經(jīng)成為國內(nèi)外研究的熱點。
　　 本文是在基于符合人眼視覺注意機制的時空域關(guān)注模型的基礎(chǔ)上，應(yīng)

2、用視覺關(guān)注轉(zhuǎn)移機制，提出了一種基于關(guān)鍵幀的視頻內(nèi)容描述方法，并將其應(yīng)用到智能監(jiān)控視頻的事件檢測中，并同時對人臉檢測和追蹤算法進(jìn)行了研究。本文首先介紹了視頻內(nèi)容描述的基本方法和研究現(xiàn)狀;然后介紹了視覺關(guān)注模型的基本知識，接著重點介紹了一種新的時空域關(guān)注模型的構(gòu)建過程;并在此基礎(chǔ)上根據(jù)視覺關(guān)注轉(zhuǎn)移機制提取表征視頻內(nèi)容的關(guān)鍵幀;接著將基于關(guān)鍵幀的視頻內(nèi)容描述方法應(yīng)用于事件檢測領(lǐng)域，最后研究了人臉檢測和追蹤的算法，以便以后將人臉信息作為更高級的

3、語義特征用于關(guān)注模型的構(gòu)建方面。
　　 本文的主要創(chuàng)新和貢獻(xiàn)在以下幾個方面:
　　 (1)構(gòu)建一種新的時空域關(guān)注模型。該模型在實驗室原有研究成果的基礎(chǔ)上，加上視頻的時域信息，用以時域關(guān)注為主的權(quán)重將時域關(guān)注模型和空域關(guān)注模型進(jìn)行融合，構(gòu)建出符合人眼視覺注意機制的時空域關(guān)注模型。
　　 (2)提出一種基于視覺關(guān)注轉(zhuǎn)移的事件檢測算法。該算法從人的視覺關(guān)注特性出發(fā)，將視覺關(guān)注的轉(zhuǎn)移作為事件檢測的依據(jù)，根據(jù)時空域關(guān)注模型

4、提取視頻幀中的受關(guān)注區(qū)域，根據(jù)連續(xù)幀中的最受關(guān)注區(qū)域的變化來確定人眼視覺關(guān)注點的轉(zhuǎn)移，形成視頻關(guān)注節(jié)奏，根據(jù)關(guān)注節(jié)奏的變化強度來選取關(guān)鍵幀，通過關(guān)鍵幀表明事件發(fā)生的時刻，從而觸發(fā)對受關(guān)注事件的提示，并結(jié)合人眼的視覺注意機制選擇關(guān)鍵幀中的受關(guān)注區(qū)域作為對象，用基于meanshift的追蹤算法對對象進(jìn)行追蹤，標(biāo)定受關(guān)注對象在前、后續(xù)幀中的位置，并對遺留物和被帶走物體進(jìn)行標(biāo)定和突出顯示，從而達(dá)到有效遏制危險情況發(fā)生的目的。
　　 (3