基于視覺顯著性的立體視頻編碼研究.pdf

1、立體視頻是通過雙視點(diǎn)或者多視點(diǎn)攝像機(jī)采集同一場景得到的視頻序列,與單通道視頻相比,它增加了景物的深度信息,可以增強(qiáng)視頻的立體感和逼真感。但是立體視頻龐大的數(shù)據(jù)量阻礙了其實(shí)用化,因此對立體視頻數(shù)據(jù)進(jìn)行高效的壓縮以降低對存儲(chǔ)和傳輸?shù)男枨笾陵P(guān)重要。立體視頻編碼技術(shù)通常利用幀內(nèi)、幀間和視點(diǎn)間預(yù)測與補(bǔ)償?shù)确椒▉硗诰蛄Ⅲw視頻的時(shí)間冗余、空間冗余和視點(diǎn)間冗余,從而實(shí)現(xiàn)一定的壓縮,但是傳統(tǒng)的立體視頻編碼方法忽略了人眼在觀看視頻時(shí)的感知冗余。本文從人眼的

2、視覺特性出發(fā),對基于視覺顯著性的立體視頻編碼進(jìn)行研究。
　　基于人類視覺系統(tǒng)的生理學(xué)和心理學(xué)研究表明,人眼在觀看和理解視頻圖像時(shí),會(huì)將注意力集中在一些引起視覺顯著性的、最能表現(xiàn)場景信息與圖像內(nèi)容、值得關(guān)注的區(qū)域,這些區(qū)域也就是感興趣區(qū)域。根據(jù)人眼對不同區(qū)域的感興趣程度不同和對失真的敏感度不同,本文利用視頻的深度信息將視頻分為多級感興趣區(qū)域,并采取相應(yīng)的量化參數(shù)調(diào)整措施為感興趣區(qū)域分配較多的比特以提高視頻質(zhì)量,為非感興趣區(qū)域分配較少

3、的比特以實(shí)現(xiàn)更有效的壓縮。基于多級感興趣區(qū)域的多視點(diǎn)視頻編碼方法,提高了視頻感興趣區(qū)域邊界的平滑性,在保證重建視頻整體質(zhì)量的前提下降低了碼率,提高了多視點(diǎn)視頻的編碼效率。
　　多視點(diǎn)視頻可以讓用戶在不同視點(diǎn)間自由切換、增強(qiáng)3D視覺體驗(yàn),但是在資源有限的環(huán)境中難以傳輸多個(gè)視點(diǎn)。虛擬視點(diǎn)繪制技術(shù)可以利用紋理和深度數(shù)據(jù)生成立體顯示設(shè)備所需的多視點(diǎn)視頻。本文在分析虛擬視點(diǎn)繪制原理的基礎(chǔ)上,研究了基于視覺顯著性、面向虛擬視點(diǎn)繪制的多視點(diǎn)視頻