面向手繪草圖的語(yǔ)義理解研究
發(fā)布時(shí)間:2023-02-22 16:05
作為一種常見(jiàn)的表達(dá)方式,手繪草圖在人類生活中發(fā)揮著十分重要的作用,可以方便地用于描繪物體、勾勒故事情節(jié)、設(shè)計(jì)建筑等。手繪草圖所具有的抽象表現(xiàn)力和靈活性使其能夠很好地與圖像檢索、場(chǎng)景生成等實(shí)際應(yīng)用相結(jié)合,導(dǎo)致對(duì)于手繪草圖的處理和理解的實(shí)際需求日益增加。但是,當(dāng)前圖像理解領(lǐng)域的工作主要針對(duì)的是真實(shí)圖像數(shù)據(jù),而面向手繪草圖的研究相對(duì)較少。相比于真實(shí)圖像,手繪草圖僅包含若干簡(jiǎn)要線條,沒(méi)有顏色和紋理等信息,且數(shù)據(jù)十分匱乏。此外,由于人類個(gè)體繪畫技巧等主觀因素的影響,手繪草圖在形象程度、外觀和細(xì)節(jié)等方面都表現(xiàn)出了非常大的差異,這使得面向手繪草圖的語(yǔ)義理解成為一個(gè)極具挑戰(zhàn)性的任務(wù)。如何將計(jì)算機(jī)自動(dòng)化技術(shù)與手繪草圖結(jié)合起來(lái),實(shí)現(xiàn)對(duì)手繪草圖數(shù)據(jù)的深層理解和高效挖掘,以提高創(chuàng)作者或設(shè)計(jì)人員的工作效率,滿足用戶多樣化的應(yīng)用需求,是一個(gè)非常有價(jià)值和具有挑戰(zhàn)性的研究課題。手繪草圖的語(yǔ)義理解研究主要面臨著兩方面的挑戰(zhàn):一是底層特征與高層語(yǔ)義及真實(shí)圖像和手繪草圖之間存在的語(yǔ)義鴻溝,二是手繪草圖數(shù)據(jù)匱乏及類內(nèi)差異過(guò)大。此外,現(xiàn)有方法還未充分考慮手繪草圖的表達(dá)能力與視頻語(yǔ)義理解的關(guān)聯(lián)性。針對(duì)手繪草圖語(yǔ)義理解中存在的上述...
【文章頁(yè)數(shù)】:137 頁(yè)
【學(xué)位級(jí)別】:博士
【文章目錄】:
摘要
ABSTRACT
第1章 緒論
1.1 手繪草圖語(yǔ)義理解的研究背景及意義
1.1.1 研究背景
1.1.2 研究意義
1.2 手繪草圖語(yǔ)義理解的研究現(xiàn)狀與分析
1.2.1 手繪草圖的識(shí)別與分割
1.2.2 基于手繪草圖的檢索
1.2.3 真實(shí)圖像與手繪草圖的相互轉(zhuǎn)換
1.2.4 具有代表性的手繪草圖數(shù)據(jù)集
1.3 現(xiàn)有方法存在的主要問(wèn)題及可能的解決方案
1.4 本文的主要研究?jī)?nèi)容與組織結(jié)構(gòu)
1.4.1 本文的研究?jī)?nèi)容
1.4.2 本文的組織結(jié)構(gòu)
第2章 面向手繪草圖的有判別力圖像塊挖掘
2.1 引言
2.2 相關(guān)工作
2.3 手繪草圖中有判別力圖像塊的挖掘
2.3.1 圖像塊采樣及特征表示
2.3.2 有判別力圖像塊的自動(dòng)挖掘
2.4 實(shí)驗(yàn)結(jié)果與分析
2.4.1 手繪草圖中有判別力的圖像塊
2.4.2 代表性手繪草圖的比較
2.4.3 手繪草圖的識(shí)別
2.4.4 討論與分析
2.5 本章小結(jié)
第3章 基于CNN的手繪草圖部件級(jí)語(yǔ)義解析
3.1 引言
3.2 相關(guān)工作
3.2.1 真實(shí)圖像的語(yǔ)義解析
3.2.2 手繪草圖的語(yǔ)義解析
3.2.3 域適應(yīng)的方法
3.3 基于深度學(xué)習(xí)的部件級(jí)草圖解析
3.3.1 基于同質(zhì)轉(zhuǎn)換的跨域自適應(yīng)方法
3.3.2 基于軟加權(quán)的交叉熵?fù)p失函數(shù)
3.3.3 類間信息共享的階段學(xué)習(xí)策略
3.4 實(shí)驗(yàn)結(jié)果與分析
3.4.1 數(shù)據(jù)集及實(shí)驗(yàn)設(shè)置
3.4.2 實(shí)驗(yàn)結(jié)果與討論
3.4.3 與現(xiàn)有方法的比較
3.4.4 針對(duì)SBIR的進(jìn)一步應(yīng)用
3.4.5 定性結(jié)果及分析
3.5 本章小結(jié)
第4章 融合Bezier形變和均線重構(gòu)的數(shù)據(jù)增強(qiáng)學(xué)習(xí)法及手繪草圖識(shí)別
4.1 引言
4.2 相關(guān)工作
4.2.1 手繪草圖的識(shí)別
4.2.2 數(shù)據(jù)增強(qiáng)方法
4.3 基于手繪草圖特定數(shù)據(jù)增強(qiáng)的學(xué)習(xí)方法
4.3.1 基于Bezier控制點(diǎn)草圖形變的建模方法
4.3.2 針對(duì)類內(nèi)差異的均線重構(gòu)方法
4.4 實(shí)驗(yàn)結(jié)果與分析
4.4.1 數(shù)據(jù)集及實(shí)驗(yàn)設(shè)置
4.4.2 消融研究
4.4.3 與現(xiàn)有方法的比較
4.4.4 在Sketchy-R數(shù)據(jù)集上的分類結(jié)果
4.4.5 針對(duì)SBIR的進(jìn)一步應(yīng)用
4.4.6 定性結(jié)果
4.4.7 討論
4.5 本章小結(jié)
第5章 動(dòng)作草圖時(shí)空表達(dá)法及動(dòng)作類視頻語(yǔ)義匹配
5.1 引言
5.2 相關(guān)工作
5.3 基于動(dòng)作草圖時(shí)空表達(dá)法的人類動(dòng)作識(shí)別
5.3.1 動(dòng)作的草圖化
5.3.2 有判別力動(dòng)作草圖的挖掘
5.3.3 基于草圖池化的動(dòng)作表示
5.4 實(shí)驗(yàn)結(jié)果與分析
5.4.1 數(shù)據(jù)集
5.4.2 實(shí)驗(yàn)設(shè)置
5.4.3 有判別力的動(dòng)作草圖的實(shí)驗(yàn)結(jié)果
5.4.4 不同池化方法的比較
5.4.5 動(dòng)作識(shí)別的結(jié)果
5.4.6 時(shí)間開銷
5.5 本章小結(jié)
結(jié)論
參考文獻(xiàn)
攻讀博士學(xué)位期間發(fā)表的論文及其他成果
致謝
個(gè)人簡(jiǎn)歷
本文編號(hào):3747964
【文章頁(yè)數(shù)】:137 頁(yè)
【學(xué)位級(jí)別】:博士
【文章目錄】:
摘要
ABSTRACT
第1章 緒論
1.1 手繪草圖語(yǔ)義理解的研究背景及意義
1.1.1 研究背景
1.1.2 研究意義
1.2 手繪草圖語(yǔ)義理解的研究現(xiàn)狀與分析
1.2.1 手繪草圖的識(shí)別與分割
1.2.2 基于手繪草圖的檢索
1.2.3 真實(shí)圖像與手繪草圖的相互轉(zhuǎn)換
1.2.4 具有代表性的手繪草圖數(shù)據(jù)集
1.3 現(xiàn)有方法存在的主要問(wèn)題及可能的解決方案
1.4 本文的主要研究?jī)?nèi)容與組織結(jié)構(gòu)
1.4.1 本文的研究?jī)?nèi)容
1.4.2 本文的組織結(jié)構(gòu)
第2章 面向手繪草圖的有判別力圖像塊挖掘
2.1 引言
2.2 相關(guān)工作
2.3 手繪草圖中有判別力圖像塊的挖掘
2.3.1 圖像塊采樣及特征表示
2.3.2 有判別力圖像塊的自動(dòng)挖掘
2.4 實(shí)驗(yàn)結(jié)果與分析
2.4.1 手繪草圖中有判別力的圖像塊
2.4.2 代表性手繪草圖的比較
2.4.3 手繪草圖的識(shí)別
2.4.4 討論與分析
2.5 本章小結(jié)
第3章 基于CNN的手繪草圖部件級(jí)語(yǔ)義解析
3.1 引言
3.2 相關(guān)工作
3.2.1 真實(shí)圖像的語(yǔ)義解析
3.2.2 手繪草圖的語(yǔ)義解析
3.2.3 域適應(yīng)的方法
3.3 基于深度學(xué)習(xí)的部件級(jí)草圖解析
3.3.1 基于同質(zhì)轉(zhuǎn)換的跨域自適應(yīng)方法
3.3.2 基于軟加權(quán)的交叉熵?fù)p失函數(shù)
3.3.3 類間信息共享的階段學(xué)習(xí)策略
3.4 實(shí)驗(yàn)結(jié)果與分析
3.4.1 數(shù)據(jù)集及實(shí)驗(yàn)設(shè)置
3.4.2 實(shí)驗(yàn)結(jié)果與討論
3.4.3 與現(xiàn)有方法的比較
3.4.4 針對(duì)SBIR的進(jìn)一步應(yīng)用
3.4.5 定性結(jié)果及分析
3.5 本章小結(jié)
第4章 融合Bezier形變和均線重構(gòu)的數(shù)據(jù)增強(qiáng)學(xué)習(xí)法及手繪草圖識(shí)別
4.1 引言
4.2 相關(guān)工作
4.2.1 手繪草圖的識(shí)別
4.2.2 數(shù)據(jù)增強(qiáng)方法
4.3 基于手繪草圖特定數(shù)據(jù)增強(qiáng)的學(xué)習(xí)方法
4.3.1 基于Bezier控制點(diǎn)草圖形變的建模方法
4.3.2 針對(duì)類內(nèi)差異的均線重構(gòu)方法
4.4 實(shí)驗(yàn)結(jié)果與分析
4.4.1 數(shù)據(jù)集及實(shí)驗(yàn)設(shè)置
4.4.2 消融研究
4.4.3 與現(xiàn)有方法的比較
4.4.4 在Sketchy-R數(shù)據(jù)集上的分類結(jié)果
4.4.5 針對(duì)SBIR的進(jìn)一步應(yīng)用
4.4.6 定性結(jié)果
4.4.7 討論
4.5 本章小結(jié)
第5章 動(dòng)作草圖時(shí)空表達(dá)法及動(dòng)作類視頻語(yǔ)義匹配
5.1 引言
5.2 相關(guān)工作
5.3 基于動(dòng)作草圖時(shí)空表達(dá)法的人類動(dòng)作識(shí)別
5.3.1 動(dòng)作的草圖化
5.3.2 有判別力動(dòng)作草圖的挖掘
5.3.3 基于草圖池化的動(dòng)作表示
5.4 實(shí)驗(yàn)結(jié)果與分析
5.4.1 數(shù)據(jù)集
5.4.2 實(shí)驗(yàn)設(shè)置
5.4.3 有判別力的動(dòng)作草圖的實(shí)驗(yàn)結(jié)果
5.4.4 不同池化方法的比較
5.4.5 動(dòng)作識(shí)別的結(jié)果
5.4.6 時(shí)間開銷
5.5 本章小結(jié)
結(jié)論
參考文獻(xiàn)
攻讀博士學(xué)位期間發(fā)表的論文及其他成果
致謝
個(gè)人簡(jiǎn)歷
本文編號(hào):3747964
本文鏈接:http://www.sikaile.net/kejilunwen/shengwushengchang/3747964.html
最近更新
教材專著