基于音視頻融合的網(wǎng)球視頻檢索.pdf

1、本文以網(wǎng)球視頻為研究對(duì)象，檢測(cè)網(wǎng)球比賽視頻中出現(xiàn)的精彩事件，如ACE球、上網(wǎng)球等。并提出了一個(gè)網(wǎng)球視頻精彩事件檢測(cè)框架，實(shí)現(xiàn)了視頻流語(yǔ)義分析、音頻流語(yǔ)義分析和音視頻特征融合的精彩事件檢測(cè)三個(gè)部分。
　　 視頻流語(yǔ)義分析包括鏡頭分類(lèi)、球員檢測(cè)、球員跟蹤等。鏡頭分類(lèi)是網(wǎng)球比賽視頻分析的基礎(chǔ)，直接決定精彩事件檢測(cè)的準(zhǔn)確性。針對(duì)目前現(xiàn)有的鏡頭分類(lèi)方法，結(jié)合網(wǎng)球比賽視頻的特點(diǎn)，提出了一種基于Hou曲直線(xiàn)檢測(cè)的鏡頭分類(lèi)方法，將鏡頭分為比賽鏡

2、頭和非比賽鏡頭。然后在比賽鏡頭中利用幀差法提取球員所在位置區(qū)域，利用Camshifi算法實(shí)現(xiàn)球員跟蹤。
　　 音頻流語(yǔ)義分析包括基于幀的特征提取及基于段的音頻分類(lèi)等。本文先將音頻流分段，再對(duì)音頻段分幀處理，然后提取音頻幀的特征參數(shù)，包括短時(shí)平均能量、短時(shí)過(guò)零率、MFCC以及差分MFCC等，利用連續(xù)隱馬爾可夫模型實(shí)現(xiàn)對(duì)音頻段的分類(lèi)，將音頻段分為擊球聲、歡呼聲、解說(shuō)員激昂解說(shuō)、解說(shuō)員平緩解說(shuō)、背景噪音等五個(gè)類(lèi)別。
　　 最后