本文采用三維運(yùn)動捕捉技術(shù)對漢語普通話的語音以及人臉特征點(diǎn)坐標(biāo)進(jìn)行數(shù)據(jù)采集,通過研究分析發(fā)音人漢語普通話唇部的發(fā)音變化特征,實現(xiàn)漢語普通話語音學(xué)習(xí)軟件的設(shè)計,從而達(dá)到語音教學(xué)的目的。全文的研究工作主要包括以下三部分內(nèi)容:（1）采用經(jīng)過Vicon Cara和Dynamixyz兩者改裝相結(jié)合的面部捕捉技術(shù),得到能夠同步采集音頻和視頻的運(yùn)動捕捉系統(tǒng)。首先,對人臉面部特征點(diǎn)及語音數(shù)據(jù)進(jìn)行采集;其次,使用該系統(tǒng)的CaraPost軟件對人臉面部特征點(diǎn)進(jìn)行預(yù)處理;最后,使用Motion Builder導(dǎo)出已處理的人臉三維坐標(biāo)點(diǎn)。（2）使用MATLAB開發(fā)工具構(gòu)建人臉模型。首先,使用人臉模型方法對三維人臉特征點(diǎn)進(jìn)行構(gòu)建;其次,由于構(gòu)建的人臉唇形曲線不夠生動自然,采用三次樣條插值方法對內(nèi)外唇輪廓進(jìn)行數(shù)據(jù)平滑處理,從而實現(xiàn)光滑的唇輪廓曲線;最后,三維人臉與語音數(shù)據(jù)的合成,利用Premiere工具將發(fā)音人臉與語音進(jìn)行渲染合并,并利用切音工具按音節(jié)切分,最終得到所有的動態(tài)三維人臉發(fā)音視頻庫。（3）通過Director多媒體開發(fā)工具實現(xiàn)漢語普通話語音學(xué)習(xí)軟件的設(shè)計。首先,依據(jù)設(shè)計方案對開發(fā)軟件所需要的素材進(jìn)行制作... 

【文章來源】：西北民族大學(xué)甘肅省

【文章頁數(shù)】：51 頁

【學(xué)位級別】：碩士

【文章目錄】：
摘要
Abstract
第1章 緒論
    1.1 研究背景
    1.2 國內(nèi)外研究現(xiàn)狀
        1.2.1 運(yùn)動捕捉技術(shù)的研究
        1.2.2 語音同步人臉動畫技術(shù)的研究
    1.3 研究目的與意義
    1.4 實驗研究方法
    1.5 論文主要內(nèi)容及結(jié)構(gòu)安排
第2章 漢語普通話語音數(shù)據(jù)采集與處理
    2.1 漢語普通話概述
    2.2 人臉運(yùn)動捕捉技術(shù)
    2.3 三維運(yùn)動捕捉環(huán)境的搭建
    2.4 實驗數(shù)據(jù)采集
        2.4.1 數(shù)據(jù)采集準(zhǔn)備工作
        2.4.2 數(shù)據(jù)采集流程
    2.5 實驗數(shù)據(jù)預(yù)處理
    2.6 本章小結(jié)
第3章 三維人臉模型構(gòu)建與合成
    3.1 人臉網(wǎng)格模型
    3.2 數(shù)據(jù)擬合
        3.2.1 三次樣條插值
        3.2.2 實驗結(jié)果
    3.3 人臉合成方法
        3.3.1 工具介紹
        3.3.2 動態(tài)發(fā)音人臉的合成
    3.4 本章小結(jié)
第4章 漢語普通話語音學(xué)習(xí)軟件的設(shè)計與實現(xiàn)
    4.1 軟件開發(fā)環(huán)境
    4.2 軟件總體設(shè)計
        4.2.1 軟件開發(fā)流程
        4.2.2 軟件內(nèi)容
    4.3 軟件交互界面設(shè)計
        4.3.1 軟件素材制備
        4.3.2 軟件界面設(shè)計
    4.4 軟件功能實現(xiàn)
        4.4.1 軟件界面的搭建
        4.4.2 Lingo腳本語言設(shè)計
    4.5 本章小結(jié)
第5章 總結(jié)與展望
    5.1 總結(jié)
    5.2 研究展望
參考文獻(xiàn)
附錄
致謝


【參考文獻(xiàn)】：
期刊論文
[1]三次Cardinal樣條插值函數(shù)的改進(jìn)及其性質(zhì)[J]. 楊虹.  無線互聯(lián)科技. 2018(18)
[2]運(yùn)動捕捉技術(shù)工藝流程及數(shù)據(jù)處理——面部運(yùn)動捕捉及數(shù)據(jù)處理[J]. 常一孜.  現(xiàn)代電影技術(shù). 2016(01)
[3]探討基于Director的互動多媒體學(xué)習(xí)光盤的設(shè)計與實現(xiàn)[J]. 張鵬麗.  天津職業(yè)院校聯(lián)合學(xué)報. 2015(04)
[4]運(yùn)動捕獲技術(shù)在三維動畫角色面部表情設(shè)計的運(yùn)用[J]. 張漫宇.  天津美術(shù)學(xué)院學(xué)報. 2013(04)
[5]運(yùn)動捕捉技術(shù)及其應(yīng)用研究綜述[J]. 向澤銳,支錦亦,徐伯初,李娟.  計算機(jī)應(yīng)用研究. 2013(08)
[6]人體運(yùn)動捕捉儀的設(shè)計與實現(xiàn)[J]. 段世梅,孫倩,陳彥明.  中國科技信息. 2011(06)
[7]動作捕捉在影視作品中的應(yīng)用[J]. 尹釗.  影視制作. 2010(11)
[8]基于運(yùn)動捕捉技術(shù)的中國少數(shù)民族舞蹈藝術(shù)保護(hù)方法研究[J]. 邱望標(biāo),李超.  電子科技大學(xué)學(xué)報(社科版). 2009(04)
[9]虛擬人技術(shù)研究綜述[J]. 羅冠,郝重陽,張雯,樊養(yǎng)余.  計算機(jī)工程. 2005(18)
[10]三維人臉建模與應(yīng)用[J]. 徐成華,王蘊(yùn)紅,譚鐵牛.  中國圖象圖形學(xué)報. 2004(08)

博士論文
[1]基于運(yùn)動捕捉的虛擬人關(guān)鍵技術(shù)研究[D]. 索寧.中國礦業(yè)大學(xué)（北京） 2011
[2]人臉運(yùn)動捕捉數(shù)據(jù)處理及表情動畫重構(gòu)研究[D]. 方小勇.大連理工大學(xué) 2010
[3]漢語語音同步的真實感三維人臉動畫研究[D]. 周維.中國科學(xué)技術(shù)大學(xué) 2008

碩士論文
[1]基于Cardinal樣條曲線的微小線段間平滑過渡算法的設(shè)計與實現(xiàn)[D]. 袁家蘭.中國科學(xué)院大學(xué)(中國科學(xué)院沈陽計算技術(shù)研究所) 2018
[2]基于動捕信息的虛實交互技術(shù)研究[D]. 郭嬌嬌.北方工業(yè)大學(xué) 2017
[3]運(yùn)動捕捉系統(tǒng)設(shè)計及基于運(yùn)動捕捉數(shù)據(jù)的步態(tài)模式研究[D]. 付龍.北京工業(yè)大學(xué) 2016
[4]基于運(yùn)動捕捉數(shù)據(jù)的三維人體運(yùn)動合成[D]. 張迪.長安大學(xué) 2015
[5]基于漢語協(xié)同發(fā)音模型的文本驅(qū)動三維口型動畫合成研究[D]. 王躍.山東財經(jīng)大學(xué) 2014
[6]基于光學(xué)運(yùn)動捕捉的虛擬交互系統(tǒng)開發(fā)[D]. 周曉陽.哈爾濱工業(yè)大學(xué) 2012
[7]三維人臉唇形動畫的語音驅(qū)動研究[D]. 喬德明.電子科技大學(xué) 2010
[8]基于Director軟件的有機(jī)化學(xué)實驗的開發(fā)與技術(shù)研究[D]. 馮慧.武漢理工大學(xué) 2009
[9]基于漢語驅(qū)動人臉語音動畫的研究[D]. 羅琰欽.電子科技大學(xué) 2009



本文編號：3166256