基于肌肉模型控制的口型可視化研究.pdf

1、與語(yǔ)音對(duì)應(yīng)的口型可視化技術(shù)是現(xiàn)在語(yǔ)音可視化領(lǐng)域的熱點(diǎn)和難點(diǎn)問題之一。目前該技術(shù)仍存在以下三個(gè)問題亟待解決:
　　 第一，在表達(dá)口型動(dòng)畫的嘴部模型中，多數(shù)研究者沒有考慮舌頭部位的運(yùn)動(dòng)模擬;
　　 第二，在協(xié)同發(fā)音現(xiàn)象中，音素靜態(tài)視位受其他音素影響后存在一定的變化規(guī)律，但大多數(shù)研究者缺乏將該規(guī)律與協(xié)同發(fā)音模型中的視位權(quán)重控制函數(shù)曲線的幾何特性相關(guān)聯(lián)，在部分字的口型動(dòng)畫上存在著較明顯不真實(shí)的現(xiàn)象;
　　 第三，在動(dòng)畫插

2、補(bǔ)算法中，大多數(shù)研究者采用線性、三角函數(shù)作為過渡幀插值函數(shù)，雖然能滿足過渡效果平滑的效果，但存在一定的局限性，中間過渡幀過多，口型動(dòng)畫不能突出關(guān)鍵幀。
　　 針對(duì)以上問題，以及可視化語(yǔ)音以及虛擬說話人系統(tǒng)中對(duì)唇部和舌部動(dòng)畫的高逼真度要求，本文首先提出了一種基于運(yùn)動(dòng)軌跡分析的三維唇舌肌肉控制模型。該方法首先根據(jù)解剖學(xué)原理，建立起基于網(wǎng)格和紋理的唇部、舌部模型。然后，根據(jù)分析唇部的運(yùn)動(dòng)軌跡，將口輪匝肌分解成兩部分來聯(lián)合控制唇部的運(yùn)動(dòng)

3、，可以獲得各種口型。在舌部的運(yùn)動(dòng)模擬中，將它的運(yùn)動(dòng)軌跡分解成一些機(jī)械運(yùn)動(dòng)的組合，通過使用四種肌肉模型來控制這些運(yùn)動(dòng)。最終實(shí)現(xiàn)了人臉嘴部說話時(shí)的各種口型，實(shí)現(xiàn)了卷舌、舔嘴等動(dòng)作。實(shí)驗(yàn)結(jié)果表明，該方法能逼真地實(shí)現(xiàn)出唇部、舌部的運(yùn)動(dòng)動(dòng)畫。
　　 然后，針對(duì)漢語(yǔ)中的協(xié)同發(fā)音現(xiàn)象以及語(yǔ)音可視化技術(shù)中對(duì)唇型動(dòng)畫自然、連續(xù)的要求，采用了一種新的口型動(dòng)畫生成方法。一方面，本文在協(xié)同發(fā)音建模中，采用了基于微分幾何學(xué)描述的多音素協(xié)同發(fā)音模型，該模型