魯棒的三維人臉特征點(diǎn)定位技術(shù)研究
發(fā)布時(shí)間:2021-06-07 07:45
三維人臉特征點(diǎn)定位作為人臉識(shí)別相關(guān)技術(shù)應(yīng)用的基礎(chǔ),廣泛運(yùn)用于人臉識(shí)別,人臉表情識(shí)別,人臉匹配,人臉對(duì)齊,人臉形狀分析等領(lǐng)域,而人臉表面變化復(fù)雜,為了克服姿態(tài)變化,遮擋等情況的影響,業(yè)界需要魯棒的三維人臉特征點(diǎn)定位算法。本文在以往的研究基礎(chǔ)上,通過對(duì)鼻尖點(diǎn)特性的分析和深度模型在特征點(diǎn)定位中的應(yīng)用,分別實(shí)現(xiàn)了一個(gè)鼻尖點(diǎn)的單獨(dú)定位算法和一個(gè)多特征點(diǎn)定位算法。本文內(nèi)容的主要工作和創(chuàng)新點(diǎn)如下:1)提出了一種對(duì)姿態(tài)魯棒的三維人臉鼻尖點(diǎn)快速定位算法。鼻尖點(diǎn)定位的準(zhǔn)確性決定了人臉切割等人臉預(yù)處理步驟的好壞。然而人臉在發(fā)生姿態(tài)變化時(shí),鼻尖往往并非處于正方向的最高點(diǎn),這給傳統(tǒng)的一些鼻尖定位方法帶來了嚴(yán)重的影響。為了克服這個(gè)問題,本章提出的算法將鼻尖點(diǎn)定位分成兩步:第一,對(duì)每個(gè)頂點(diǎn)構(gòu)建稀疏鄰域集,在局部基準(zhǔn)坐標(biāo)下提取頂點(diǎn)附近的領(lǐng)域點(diǎn)到局部基準(zhǔn)坐標(biāo)系平面的距離,得到一種新的旋轉(zhuǎn)不變性特征,局部基準(zhǔn)坐標(biāo)能量。依據(jù)該能量可以迭代篩選出可能為鼻尖的候選點(diǎn)。第二,在候選點(diǎn)中計(jì)算每個(gè)頂點(diǎn)的散度特征,散度可以描述頂點(diǎn)附近矢量場(chǎng)的膨脹與收縮程度,而鼻尖處的矢量場(chǎng)在人臉表面中膨脹程度最大,因此擁有散度值最大的候選點(diǎn)為最終鼻尖...
【文章來源】:東南大學(xué)江蘇省 211工程院校 985工程院校 教育部直屬院校
【文章頁數(shù)】:68 頁
【學(xué)位級(jí)別】:碩士
【部分圖文】:
維人臉數(shù)(a)三維點(diǎn)云(b)三維網(wǎng)
第一章緒論500個(gè)對(duì)象,男性和女性各占一半,該庫沒有過多的表情或姿態(tài)變化,因此適合做中性正面人臉的相關(guān)技術(shù)研究。1.3.3三維人臉特征點(diǎn)定位評(píng)價(jià)指標(biāo)圖1-2特征點(diǎn)定位準(zhǔn)確度評(píng)判從直觀角度來說,可以觀察出算法定位的特征點(diǎn)是否處于對(duì)應(yīng)位置上。但從數(shù)學(xué)角度來說,人臉表面特征點(diǎn)沒有固定的表現(xiàn)形式,因此,為了對(duì)特征點(diǎn)定位算法的結(jié)果能夠量化描述準(zhǔn)確度,通常在一些測(cè)試人臉上手工標(biāo)記好每個(gè)特征點(diǎn)的坐標(biāo)位置,通過對(duì)比手工標(biāo)記點(diǎn)和算法輸出點(diǎn)的一些數(shù)學(xué)指標(biāo)來反饋定位的準(zhǔn)確性。圖1-2直觀顯示了以人臉右眼角點(diǎn)的定位為例的準(zhǔn)確度衡量。在三維人臉特征點(diǎn)定位領(lǐng)域常見的評(píng)價(jià)指標(biāo)描述如下:1)絕對(duì)距離誤差:對(duì)于某個(gè)特征點(diǎn),由算法定位的特征點(diǎn)坐標(biāo)和手工標(biāo)記點(diǎn)之間計(jì)算歐式距離得到。2)個(gè)體檢測(cè)誤差:在多特征點(diǎn)定位中,統(tǒng)計(jì)個(gè)體所有特征點(diǎn)的定位距離誤差,并求均值得到。3)特征點(diǎn)檢測(cè)誤差:以某個(gè)特征點(diǎn)為單位,統(tǒng)計(jì)在測(cè)試集中所有個(gè)體在該特征點(diǎn)的絕對(duì)距離誤差,由所有個(gè)體在該特征點(diǎn)的定位距離誤差的均值和標(biāo)準(zhǔn)差表示。其中距離誤差的均值稱為特征點(diǎn)平均誤差,距離誤差的標(biāo)準(zhǔn)差稱為特征點(diǎn)標(biāo)準(zhǔn)差。4)總體檢測(cè)誤差:以整個(gè)測(cè)試集為單位,統(tǒng)計(jì)該數(shù)據(jù)集所有個(gè)體檢測(cè)誤差的均值和標(biāo)準(zhǔn)差。個(gè)體檢測(cè)誤差的均值稱為總體平均誤差,個(gè)體檢測(cè)誤差的標(biāo)準(zhǔn)差稱為總體標(biāo)準(zhǔn)差。4)可接受距離:以某個(gè)特征點(diǎn)為單位,標(biāo)定一個(gè)閾值來衡量這次定位成功還是失敗。5)特征點(diǎn)檢測(cè)成功率:以特征點(diǎn)為單位,統(tǒng)計(jì)特征點(diǎn)平均誤差小于可接受距離的個(gè)體占總體的比率。5
東南大學(xué)碩士學(xué)位論文6)總體檢測(cè)成功率:以測(cè)試集為單位,統(tǒng)計(jì)個(gè)體檢測(cè)誤差小于可接受距離的個(gè)體占總體的比率。7)個(gè)體檢測(cè)誤差累計(jì)分布:以測(cè)試集為單位,統(tǒng)計(jì)一個(gè)數(shù)據(jù)集所有個(gè)體檢測(cè)誤差的概率累計(jì)分布。如圖1-3所示,通過折線圖來表示個(gè)體檢測(cè)誤差累計(jì)分布,橫軸x表示可接受距離的變化,縱軸y表示數(shù)據(jù)集中個(gè)體檢測(cè)誤差小于可接受距離的個(gè)體占總體數(shù)量的比率,即不同可接受距離下的總體檢測(cè)成功率。圖1-3個(gè)體檢測(cè)誤差累計(jì)分布圖1.3.4三維人臉特征點(diǎn)定位應(yīng)用三維人臉特征點(diǎn)定位的最重要應(yīng)用為兩個(gè)方向:三維人臉識(shí)別[17]和三維人臉表情識(shí)別[18]。首先,三維人臉識(shí)別中諸多環(huán)節(jié)需要特征點(diǎn)坐標(biāo),包括三維人臉預(yù)處理[19]、三維人臉姿態(tài)估計(jì)、三維人臉剛性區(qū)域提取[19]、三維人臉局部特征提取[20]、三維人臉配準(zhǔn)[21]和數(shù)字特征預(yù)提取[22]等,具體應(yīng)用細(xì)節(jié)如下:1)三維人臉預(yù)處理:前端采集設(shè)備得到的三維人臉點(diǎn)云數(shù)據(jù)往往是冗雜的,人臉作為感興趣區(qū)域需要從中切割出。三維人臉切割方法以鼻尖為中心,一定距離的半徑做球,球內(nèi)區(qū)域主要包括了人臉區(qū)域,因此,鼻尖點(diǎn)定位的準(zhǔn)確度直接影響了切割效果和后續(xù)處理,如果鼻尖定位有偏差會(huì)導(dǎo)致人臉區(qū)域不對(duì)稱,人臉下巴區(qū)域丟失等較嚴(yán)重的問題。2)三維人臉姿態(tài)估計(jì):如前幾節(jié)所述,在三維空間中人臉朝向是任意的,姿態(tài)有千萬種變化。在進(jìn)行人臉識(shí)別前需要將人臉姿態(tài)歸一化到同一個(gè)朝向,這就需要臉部特征點(diǎn)坐標(biāo)以便進(jìn)行人臉姿態(tài)預(yù)測(cè),進(jìn)而完成姿態(tài)調(diào)整。3)三維人臉配準(zhǔn):三維人臉點(diǎn)云往往數(shù)量較多,在進(jìn)行一些配準(zhǔn)算法時(shí)如果全局考慮所有頂點(diǎn)的對(duì)齊將會(huì)十分耗時(shí),這一步驟可通過只配準(zhǔn)一些特征點(diǎn)來簡化。4)三維人臉剛性區(qū)域提。喝四樖且粋(gè)半剛性表面,包括了容易發(fā)生形變的鼻尖下6
【參考文獻(xiàn)】:
期刊論文
[1]基于關(guān)鍵點(diǎn)的由粗到精三維人臉特征點(diǎn)定位[J]. 成翔昊,達(dá)飛鵬,鄧星. 儀器儀表學(xué)報(bào). 2018(10)
[2]基于人臉側(cè)影線角點(diǎn)檢測(cè)的鼻尖點(diǎn)定位方法[J]. 潘臘青,徐海黎,韋勇,沈標(biāo). 計(jì)算機(jī)工程與應(yīng)用. 2018(13)
[3]BJUT-3D三維人臉數(shù)據(jù)庫及其處理技術(shù)[J]. 尹寶才,孫艷豐,王成章,蓋赟. 計(jì)算機(jī)研究與發(fā)展. 2009(06)
博士論文
[1]表情變化下三維人臉識(shí)別中特征提取與分類研究[D]. 鄧星.東南大學(xué) 2017
碩士論文
[1]人臉關(guān)鍵特征點(diǎn)定位與識(shí)別研究[D]. 劉俊權(quán).東南大學(xué) 2016
本文編號(hào):3216178
【文章來源】:東南大學(xué)江蘇省 211工程院校 985工程院校 教育部直屬院校
【文章頁數(shù)】:68 頁
【學(xué)位級(jí)別】:碩士
【部分圖文】:
維人臉數(shù)(a)三維點(diǎn)云(b)三維網(wǎng)
第一章緒論500個(gè)對(duì)象,男性和女性各占一半,該庫沒有過多的表情或姿態(tài)變化,因此適合做中性正面人臉的相關(guān)技術(shù)研究。1.3.3三維人臉特征點(diǎn)定位評(píng)價(jià)指標(biāo)圖1-2特征點(diǎn)定位準(zhǔn)確度評(píng)判從直觀角度來說,可以觀察出算法定位的特征點(diǎn)是否處于對(duì)應(yīng)位置上。但從數(shù)學(xué)角度來說,人臉表面特征點(diǎn)沒有固定的表現(xiàn)形式,因此,為了對(duì)特征點(diǎn)定位算法的結(jié)果能夠量化描述準(zhǔn)確度,通常在一些測(cè)試人臉上手工標(biāo)記好每個(gè)特征點(diǎn)的坐標(biāo)位置,通過對(duì)比手工標(biāo)記點(diǎn)和算法輸出點(diǎn)的一些數(shù)學(xué)指標(biāo)來反饋定位的準(zhǔn)確性。圖1-2直觀顯示了以人臉右眼角點(diǎn)的定位為例的準(zhǔn)確度衡量。在三維人臉特征點(diǎn)定位領(lǐng)域常見的評(píng)價(jià)指標(biāo)描述如下:1)絕對(duì)距離誤差:對(duì)于某個(gè)特征點(diǎn),由算法定位的特征點(diǎn)坐標(biāo)和手工標(biāo)記點(diǎn)之間計(jì)算歐式距離得到。2)個(gè)體檢測(cè)誤差:在多特征點(diǎn)定位中,統(tǒng)計(jì)個(gè)體所有特征點(diǎn)的定位距離誤差,并求均值得到。3)特征點(diǎn)檢測(cè)誤差:以某個(gè)特征點(diǎn)為單位,統(tǒng)計(jì)在測(cè)試集中所有個(gè)體在該特征點(diǎn)的絕對(duì)距離誤差,由所有個(gè)體在該特征點(diǎn)的定位距離誤差的均值和標(biāo)準(zhǔn)差表示。其中距離誤差的均值稱為特征點(diǎn)平均誤差,距離誤差的標(biāo)準(zhǔn)差稱為特征點(diǎn)標(biāo)準(zhǔn)差。4)總體檢測(cè)誤差:以整個(gè)測(cè)試集為單位,統(tǒng)計(jì)該數(shù)據(jù)集所有個(gè)體檢測(cè)誤差的均值和標(biāo)準(zhǔn)差。個(gè)體檢測(cè)誤差的均值稱為總體平均誤差,個(gè)體檢測(cè)誤差的標(biāo)準(zhǔn)差稱為總體標(biāo)準(zhǔn)差。4)可接受距離:以某個(gè)特征點(diǎn)為單位,標(biāo)定一個(gè)閾值來衡量這次定位成功還是失敗。5)特征點(diǎn)檢測(cè)成功率:以特征點(diǎn)為單位,統(tǒng)計(jì)特征點(diǎn)平均誤差小于可接受距離的個(gè)體占總體的比率。5
東南大學(xué)碩士學(xué)位論文6)總體檢測(cè)成功率:以測(cè)試集為單位,統(tǒng)計(jì)個(gè)體檢測(cè)誤差小于可接受距離的個(gè)體占總體的比率。7)個(gè)體檢測(cè)誤差累計(jì)分布:以測(cè)試集為單位,統(tǒng)計(jì)一個(gè)數(shù)據(jù)集所有個(gè)體檢測(cè)誤差的概率累計(jì)分布。如圖1-3所示,通過折線圖來表示個(gè)體檢測(cè)誤差累計(jì)分布,橫軸x表示可接受距離的變化,縱軸y表示數(shù)據(jù)集中個(gè)體檢測(cè)誤差小于可接受距離的個(gè)體占總體數(shù)量的比率,即不同可接受距離下的總體檢測(cè)成功率。圖1-3個(gè)體檢測(cè)誤差累計(jì)分布圖1.3.4三維人臉特征點(diǎn)定位應(yīng)用三維人臉特征點(diǎn)定位的最重要應(yīng)用為兩個(gè)方向:三維人臉識(shí)別[17]和三維人臉表情識(shí)別[18]。首先,三維人臉識(shí)別中諸多環(huán)節(jié)需要特征點(diǎn)坐標(biāo),包括三維人臉預(yù)處理[19]、三維人臉姿態(tài)估計(jì)、三維人臉剛性區(qū)域提取[19]、三維人臉局部特征提取[20]、三維人臉配準(zhǔn)[21]和數(shù)字特征預(yù)提取[22]等,具體應(yīng)用細(xì)節(jié)如下:1)三維人臉預(yù)處理:前端采集設(shè)備得到的三維人臉點(diǎn)云數(shù)據(jù)往往是冗雜的,人臉作為感興趣區(qū)域需要從中切割出。三維人臉切割方法以鼻尖為中心,一定距離的半徑做球,球內(nèi)區(qū)域主要包括了人臉區(qū)域,因此,鼻尖點(diǎn)定位的準(zhǔn)確度直接影響了切割效果和后續(xù)處理,如果鼻尖定位有偏差會(huì)導(dǎo)致人臉區(qū)域不對(duì)稱,人臉下巴區(qū)域丟失等較嚴(yán)重的問題。2)三維人臉姿態(tài)估計(jì):如前幾節(jié)所述,在三維空間中人臉朝向是任意的,姿態(tài)有千萬種變化。在進(jìn)行人臉識(shí)別前需要將人臉姿態(tài)歸一化到同一個(gè)朝向,這就需要臉部特征點(diǎn)坐標(biāo)以便進(jìn)行人臉姿態(tài)預(yù)測(cè),進(jìn)而完成姿態(tài)調(diào)整。3)三維人臉配準(zhǔn):三維人臉點(diǎn)云往往數(shù)量較多,在進(jìn)行一些配準(zhǔn)算法時(shí)如果全局考慮所有頂點(diǎn)的對(duì)齊將會(huì)十分耗時(shí),這一步驟可通過只配準(zhǔn)一些特征點(diǎn)來簡化。4)三維人臉剛性區(qū)域提。喝四樖且粋(gè)半剛性表面,包括了容易發(fā)生形變的鼻尖下6
【參考文獻(xiàn)】:
期刊論文
[1]基于關(guān)鍵點(diǎn)的由粗到精三維人臉特征點(diǎn)定位[J]. 成翔昊,達(dá)飛鵬,鄧星. 儀器儀表學(xué)報(bào). 2018(10)
[2]基于人臉側(cè)影線角點(diǎn)檢測(cè)的鼻尖點(diǎn)定位方法[J]. 潘臘青,徐海黎,韋勇,沈標(biāo). 計(jì)算機(jī)工程與應(yīng)用. 2018(13)
[3]BJUT-3D三維人臉數(shù)據(jù)庫及其處理技術(shù)[J]. 尹寶才,孫艷豐,王成章,蓋赟. 計(jì)算機(jī)研究與發(fā)展. 2009(06)
博士論文
[1]表情變化下三維人臉識(shí)別中特征提取與分類研究[D]. 鄧星.東南大學(xué) 2017
碩士論文
[1]人臉關(guān)鍵特征點(diǎn)定位與識(shí)別研究[D]. 劉俊權(quán).東南大學(xué) 2016
本文編號(hào):3216178
本文鏈接:http://www.sikaile.net/kejilunwen/shengwushengchang/3216178.html
最近更新
教材專著