視頻語義提取方法研究.pdf

1、隨著多媒體和網(wǎng)絡(luò)的飛速發(fā)展,數(shù)字視頻的數(shù)量急劇增加。怎樣通過計(jì)算機(jī)對這些大量的視頻進(jìn)行自動理解,提取出其語義信息,從而方便用戶進(jìn)行高效率的查詢和檢索,是當(dāng)前急需解決的問題。目前,視頻語義提取技術(shù)正在受到廣泛關(guān)注,已成為研究的熱點(diǎn)。
　　標(biāo)簽是表達(dá)語義的一種有效方式,根據(jù)視頻數(shù)據(jù)的特點(diǎn),可以采用名詞語義標(biāo)簽和動詞語義標(biāo)簽相結(jié)合的方式來表達(dá)其語義信息,其中名詞語義標(biāo)簽對應(yīng)的是視頻中的運(yùn)動對象,動詞語義標(biāo)簽對應(yīng)的是運(yùn)動對象的具體動作行為

2、,兩者結(jié)合起來即為視頻的語義標(biāo)簽。
　　在提取視頻語義標(biāo)簽時(shí),采用機(jī)器學(xué)習(xí)的方法,先構(gòu)造出視頻訓(xùn)練集,然后分別從名詞語義標(biāo)簽和動詞語義標(biāo)簽兩個(gè)方面對測試視頻進(jìn)行分析。名詞語義標(biāo)簽方面,首先對測試視頻進(jìn)行鏡頭分割和關(guān)鍵幀提取等操作,得到視頻的關(guān)鍵幀,然后對關(guān)鍵幀進(jìn)行對象識別,即可得到名詞語義標(biāo)簽。動詞語義標(biāo)簽方面,首先通過運(yùn)動對象檢測和跟蹤的相關(guān)算法得到測試視頻的運(yùn)動軌跡數(shù)據(jù),然后考察測試視頻的軌跡數(shù)據(jù)與訓(xùn)練集視頻的軌跡數(shù)據(jù)之間的語