立體視頻中的場景運(yùn)動分類方法研究.pdf

1、人眼觀察真實(shí)世界能夠獲得立體感的一個最主要的原因是人眼視覺系統(tǒng)是雙目構(gòu)造并且左右眼看到的視覺影像是略微不同的，立體視頻在播放時利用了這一原理來給觀影者提供立體感。考慮到觀影舒適度和立體感呈現(xiàn)的效果，需要對拍攝所得的原始立體視頻進(jìn)行后期處理。其中立體視頻中場景的運(yùn)動信息是關(guān)鍵的一環(huán)，能為處理過程提供指導(dǎo)。本文的主要研究目的即是對沒有先驗知識的立體視頻進(jìn)行場景運(yùn)動信息的計算和分類。
　　本文一開始著重討論了拍攝使用的立體相機(jī)對的設(shè)置方

2、式以及在不同方式下的成像模型和特點(diǎn)。立體視頻相比普通視頻具有的優(yōu)勢是已知立體相機(jī)對的設(shè)置信息后可以將某一幀立體視圖內(nèi)的特征點(diǎn)直接進(jìn)行三維重建?；诙攘恐亟ńY(jié)構(gòu)之間的關(guān)系來估計場景的運(yùn)動是本文提出的分類算法中的一個重點(diǎn)。
　　本文獲得場景運(yùn)動信息的著手點(diǎn)在于直接計算拍攝所用相機(jī)對的運(yùn)動軌跡。視頻中呈現(xiàn)的場景運(yùn)動的本質(zhì)原因是由于相機(jī)對在拍攝的過程中相對場景產(chǎn)生了運(yùn)動，因此對于復(fù)雜的場景運(yùn)動方式可以通過相機(jī)對的運(yùn)動來進(jìn)行準(zhǔn)確地解釋和表達(dá)

3、。由于視頻沒有先驗知識，待求參數(shù)很多，因此本文將相機(jī)對的內(nèi)外參數(shù)有效地分離后分別計算，并且在內(nèi)參計算中創(chuàng)新性地利用了立體幀內(nèi)度量重建結(jié)構(gòu)的約束性質(zhì)，從而降低了求解的難度以及提高了結(jié)果的準(zhǔn)確性。
　　視頻相對于圖像而言具有的特點(diǎn)是內(nèi)容的連續(xù)性，因此在以上計算結(jié)果的基礎(chǔ)上本文提出了優(yōu)化的方法，通過將一段立體視頻作整體的處理來提高結(jié)果的準(zhǔn)確性。最終，兩幀之間的相機(jī)運(yùn)動計算結(jié)果被表達(dá)成為場景運(yùn)動分類信息，然后匯總后取主分量作為該視頻片段的