基于正交元空間的多模態(tài)圖像增強(qiáng)技術(shù)研究
發(fā)布時(shí)間:2021-11-07 06:08
圖像增強(qiáng)技術(shù)自適應(yīng)地為普通圖像(主要體現(xiàn)為光照、對(duì)比度等的不和諧)賦予適當(dāng)?shù)拿缹W(xué)特征,同時(shí)保留圖像的內(nèi)容細(xì)節(jié)。給定普通圖像,多數(shù)現(xiàn)有工作僅輸出唯一的具有統(tǒng)一美學(xué)樣式的增強(qiáng)圖像,該樣式來(lái)自于給定的參考圖像集。然而,不同用戶的審美偏好、具體應(yīng)用場(chǎng)景均可能存在較大差異,這需要圖像增強(qiáng)技術(shù)具有單一模型多模態(tài)處理的能力,給出盡量多樣化的輸出供用戶選擇。與此同時(shí),圖像內(nèi)容和樣式特征需要充分解耦,并有多模態(tài)融合的能力。為了實(shí)現(xiàn)圖像增強(qiáng)的多模態(tài)輸出,本文提出了一種基于正交元空間的多模態(tài)圖像增強(qiáng)框架,提取出參考圖像中具有視覺(jué)吸引力的美學(xué)特征,并將其顯式地編碼到一個(gè)正交的元空間中。具體地,本文首先使用編碼-解碼器及對(duì)抗訓(xùn)練策略提取出高美學(xué)質(zhì)量圖像的樣式和內(nèi)容特征。接下來(lái),本文將參考圖像的樣式編碼映射到一個(gè)由一組正交基張成的樣式元空間中,其中正交基通過(guò)引入正交正則化損失來(lái)實(shí)現(xiàn)。在測(cè)試階段,給定任意一張普通圖像,本文由編碼器提取其內(nèi)容特征;同時(shí)在樣式元空間中隨機(jī)采樣多個(gè)樣式特征;最后將原圖內(nèi)容編碼與樣式特征分別融合后,送入解碼器得到最終的多模態(tài)增強(qiáng)圖像。另外,為提高多模態(tài)場(chǎng)景下樣式、內(nèi)容特征解耦及融合的穩(wěn)定性...
【文章來(lái)源】:南開(kāi)大學(xué)天津市 211工程院校 985工程院校 教育部直屬院校
【文章頁(yè)數(shù)】:79 頁(yè)
【學(xué)位級(jí)別】:碩士
【文章目錄】:
摘要
Abstract
第一章 緒論
第一節(jié) 研究背景與動(dòng)機(jī)
第二節(jié) 相關(guān)工作
第三節(jié) 本文研究?jī)?nèi)容
第二章 基于正交元空間的多模態(tài)圖像增強(qiáng)技術(shù)
第一節(jié) 單一模型多模態(tài)圖像增強(qiáng)問(wèn)題定義
第二節(jié) 樣式元空間的構(gòu)建與學(xué)習(xí)
第三節(jié) 普通及參考圖像的重建
第四節(jié) 使用跨域隱變量進(jìn)行圖像增強(qiáng)
第五節(jié) 本章小結(jié)
第三章 基于實(shí)例標(biāo)準(zhǔn)化及互信息優(yōu)化的特征解耦方法
第一節(jié) 基于元空間坐標(biāo)及樣式編碼的實(shí)例標(biāo)準(zhǔn)化
第二節(jié) 基于互信息最大化的元空間增強(qiáng)
第三節(jié) 本章小結(jié)
第四章 實(shí)驗(yàn)結(jié)果與分析
第一節(jié) 實(shí)驗(yàn)配置細(xì)節(jié)
第二節(jié) HDR數(shù)據(jù)集樣式多樣性分析
第三節(jié) 元空間正交性與可解釋性分析
第四節(jié) 消融實(shí)驗(yàn)
第五節(jié) 本文方法與現(xiàn)有技術(shù)的比較
第六節(jié) 用戶調(diào)查
第七節(jié) 本章小結(jié)
第五章 結(jié)論
第一節(jié) 本文工作總結(jié)
第二節(jié) 未來(lái)工作展望
參考文獻(xiàn)
致謝
個(gè)人簡(jiǎn)歷
【參考文獻(xiàn)】:
期刊論文
[1]協(xié)作式生成對(duì)抗網(wǎng)絡(luò)[J]. 張龍,趙杰煜,葉緒倫,董偉. 自動(dòng)化學(xué)報(bào). 2018(05)
[2]生成式對(duì)抗網(wǎng)絡(luò)GAN的研究進(jìn)展與展望[J]. 王坤峰,茍超,段艷杰,林懿倫,鄭心湖,王飛躍. 自動(dòng)化學(xué)報(bào). 2017(03)
[3]基于互信息的貝葉斯網(wǎng)絡(luò)結(jié)構(gòu)學(xué)習(xí)[J]. 紀(jì)厚業(yè),羅倩. 北京信息科技大學(xué)學(xué)報(bào)(自然科學(xué)版). 2016(06)
本文編號(hào):3481315
【文章來(lái)源】:南開(kāi)大學(xué)天津市 211工程院校 985工程院校 教育部直屬院校
【文章頁(yè)數(shù)】:79 頁(yè)
【學(xué)位級(jí)別】:碩士
【文章目錄】:
摘要
Abstract
第一章 緒論
第一節(jié) 研究背景與動(dòng)機(jī)
第二節(jié) 相關(guān)工作
第三節(jié) 本文研究?jī)?nèi)容
第二章 基于正交元空間的多模態(tài)圖像增強(qiáng)技術(shù)
第一節(jié) 單一模型多模態(tài)圖像增強(qiáng)問(wèn)題定義
第二節(jié) 樣式元空間的構(gòu)建與學(xué)習(xí)
第三節(jié) 普通及參考圖像的重建
第四節(jié) 使用跨域隱變量進(jìn)行圖像增強(qiáng)
第五節(jié) 本章小結(jié)
第三章 基于實(shí)例標(biāo)準(zhǔn)化及互信息優(yōu)化的特征解耦方法
第一節(jié) 基于元空間坐標(biāo)及樣式編碼的實(shí)例標(biāo)準(zhǔn)化
第二節(jié) 基于互信息最大化的元空間增強(qiáng)
第三節(jié) 本章小結(jié)
第四章 實(shí)驗(yàn)結(jié)果與分析
第一節(jié) 實(shí)驗(yàn)配置細(xì)節(jié)
第二節(jié) HDR數(shù)據(jù)集樣式多樣性分析
第三節(jié) 元空間正交性與可解釋性分析
第四節(jié) 消融實(shí)驗(yàn)
第五節(jié) 本文方法與現(xiàn)有技術(shù)的比較
第六節(jié) 用戶調(diào)查
第七節(jié) 本章小結(jié)
第五章 結(jié)論
第一節(jié) 本文工作總結(jié)
第二節(jié) 未來(lái)工作展望
參考文獻(xiàn)
致謝
個(gè)人簡(jiǎn)歷
【參考文獻(xiàn)】:
期刊論文
[1]協(xié)作式生成對(duì)抗網(wǎng)絡(luò)[J]. 張龍,趙杰煜,葉緒倫,董偉. 自動(dòng)化學(xué)報(bào). 2018(05)
[2]生成式對(duì)抗網(wǎng)絡(luò)GAN的研究進(jìn)展與展望[J]. 王坤峰,茍超,段艷杰,林懿倫,鄭心湖,王飛躍. 自動(dòng)化學(xué)報(bào). 2017(03)
[3]基于互信息的貝葉斯網(wǎng)絡(luò)結(jié)構(gòu)學(xué)習(xí)[J]. 紀(jì)厚業(yè),羅倩. 北京信息科技大學(xué)學(xué)報(bào)(自然科學(xué)版). 2016(06)
本文編號(hào):3481315
本文鏈接:http://www.sikaile.net/kejilunwen/shengwushengchang/3481315.html
最近更新
教材專著