多視角人臉檢測(cè)及面部特征點(diǎn)定位研究.pdf

1、人臉圖像的感知和分析作為模式識(shí)別和人工智能學(xué)科的前沿課題，包括人臉檢測(cè)，面部特征點(diǎn)定位，姿態(tài)估計(jì)，表情分析，人臉合成，人臉識(shí)別和人臉動(dòng)畫等一系列研究?jī)?nèi)容。其中，人臉檢測(cè)和面部特征定位是基礎(chǔ)，也是擴(kuò)大人臉應(yīng)用范圍需解決的關(guān)鍵問(wèn)題，因而受到了國(guó)內(nèi)外學(xué)者的廣泛研究。早期的人臉檢測(cè)和面部特征點(diǎn)定位都是針對(duì)正面人臉進(jìn)行的，經(jīng)過(guò)多年的的發(fā)展，取得了一系列進(jìn)展，其研究成果在人機(jī)交互，生物信息安全，虛擬現(xiàn)實(shí)等方面發(fā)揮著重要作用。但隨著人臉應(yīng)用范圍的不斷

2、擴(kuò)大和開發(fā)實(shí)際系統(tǒng)需求的不斷提高，多視角人臉檢測(cè)和面部特征定位自20世紀(jì)90年代后逐漸被人們重視并得到研究。多視角人臉指圖像中人臉覆蓋一個(gè)較大視角范圍的人臉表觀模式，一般超過(guò)30o范圍。與正面人臉檢測(cè)與特征點(diǎn)定位相比，多視角人臉的研究還相對(duì)薄弱，難度也大得多，離實(shí)際應(yīng)用還有距離，但卻是人臉感知和分析技術(shù)走向?qū)嵱没毙杞鉀Q的關(guān)鍵問(wèn)題。
　　正是在這種背景下，本文在系統(tǒng)總結(jié)了現(xiàn)有的人臉檢測(cè)和面部特征點(diǎn)定位方法的優(yōu)缺點(diǎn)的基礎(chǔ)上，對(duì)多視角

3、人臉面部特征點(diǎn)定位進(jìn)行了深入研究，內(nèi)容涉及以下方面：全視角下的彩色人臉檢測(cè)、多視角人臉多器官定位及面部特征點(diǎn)定位。主要工作及創(chuàng)新成果概括如下：
　?。?）針對(duì)Adaboost算法對(duì)伴有平面旋轉(zhuǎn)的多視角人臉圖像訓(xùn)練復(fù)雜，檢測(cè)效果不理想的問(wèn)題，將膚色分割與基于Adaboost的多視角人臉檢測(cè)算法相結(jié)合，提出一種檢測(cè)伴有平面任意旋轉(zhuǎn)的多視角彩色人臉?lè)椒?。首先利用不同膚色之間的差異性和相似性的特點(diǎn)，使用顏色聚類方法建立分類膚色查找表，通過(guò)

4、它實(shí)現(xiàn)快速提取待測(cè)圖像中的膚色區(qū)域并自動(dòng)分割與人臉粘連的膚色背景；然后，使用基于顏色相似度的鄰接區(qū)域合并算法重新合并由于光照不均而被分割成部分的人臉候選區(qū)域，對(duì)其用K-L變換確定人臉平面方向，最后用Adaboost多視角人臉?lè)诸惼鲯呙杞?jīng)過(guò)旋轉(zhuǎn)校正的候選區(qū)域，完成人臉定位。實(shí)驗(yàn)表明，該方法能有效檢測(cè)出普通Adaboost多視角分類器無(wú)法檢測(cè)的平面大角度多視角人臉圖像，應(yīng)用于多視角、多人臉的具有膚色背景的情況，具有較好的檢測(cè)效果。
　

5、　（2）提出一種新的多視角面部多器官定位的方法，首先在Adaboost定位的人臉區(qū)域中劃分眼、鼻和嘴的搜索范圍，然后利用眉眼和鼻嘴整體特征，用大規(guī)模多視角面部器官樣本訓(xùn)練的支持向量機(jī)在搜索區(qū)域中確定候選眼、鼻及嘴的區(qū)域。利用分類器中判別函數(shù)值越高的窗口相對(duì)越接近目標(biāo)以及目標(biāo)對(duì)象往往會(huì)被附近窗口多次檢測(cè)到的事實(shí)，對(duì)候選眼、鼻及嘴區(qū)域進(jìn)行篩選與合并以確定最佳位置，實(shí)現(xiàn)多視角人臉上多器官的準(zhǔn)確定位。實(shí)驗(yàn)表明，該方法具有很好的精確性和魯棒性，能

6、適應(yīng)復(fù)雜背景下表情變化的多視角人臉上的眼、鼻及嘴的定位。
　　（3）提出了一種基于DCT-SVM的增強(qiáng)型人臉主動(dòng)形狀模型算法。相比于傳統(tǒng)的ASM及其他人臉特征點(diǎn)定位算法，本算法使用改進(jìn)的DCT-SVM算法建立局部紋理模型，同時(shí)，改變以往文獻(xiàn)中對(duì)所有特征點(diǎn)建立紋理模型的方法，只對(duì)部分關(guān)鍵特征點(diǎn)建立紋理模型，避免紋理區(qū)分度小的特征點(diǎn)對(duì)定位精度的干擾；其次，將關(guān)鍵特征點(diǎn)依相應(yīng)的DCT-SVM特征點(diǎn)檢測(cè)器的輸出情況進(jìn)行可靠性分類，利用可靠

7、點(diǎn)，將臉部器官形狀模型和全局形狀模型相結(jié)合進(jìn)行人臉的形狀優(yōu)化，減小錯(cuò)誤點(diǎn)對(duì)迭代形狀的干擾，提高人臉輪廓的定位精度。
　?。?）提出Candide-3姿態(tài)估計(jì)下的多視角主動(dòng)形狀模型。為了能抽取多視角人臉的面部輪廓，我們引入Candide-3模型，通過(guò)多視角人臉的五官位置，使用Candide-3模型進(jìn)行姿態(tài)估計(jì)，劃分視角類別，以此為基礎(chǔ)將之融入到前面的增強(qiáng)型人臉主動(dòng)形狀模型框架內(nèi)，形成Candide-3姿態(tài)估計(jì)下的增強(qiáng)型多視角主動(dòng)形狀