基于單目攝像頭的智能電視手勢交互系統(tǒng)
本文選題:手勢跟蹤 + 增量子空間; 參考:《華南理工大學(xué)》2014年碩士論文
【摘要】:手勢作為一種自然的人機(jī)交互方式被廣泛應(yīng)用于智能電視交互中?紤]到手勢的非剛性形變和其快速運(yùn)動的特點(diǎn),外加家居環(huán)境中不確定的復(fù)雜的光照條件和背景環(huán)境,以及計(jì)算復(fù)雜度、實(shí)時性和低成本的考慮,智能電視手勢交互系統(tǒng)的研究依舊面臨諸多挑戰(zhàn)。 本文針對創(chuàng)維42E790U智能電視,基于單目攝像頭設(shè)計(jì)開發(fā)一套智能電視手勢交互系統(tǒng);谟(jì)算機(jī)視覺的手勢識別過程大致可分為手勢檢測、手勢跟蹤以及手勢識別三個階段。本文在已有的相關(guān)技術(shù)基礎(chǔ)上,主要做了如下三部分工作: (1)手勢跟蹤方面:本文的改進(jìn)基于原有的增量子空間跟蹤模型。本文中所采用的跟蹤算法可以分為兩個模塊,分別是運(yùn)動模型和目標(biāo)外觀模型。運(yùn)動模型減小了目標(biāo)位置的搜索范圍,并給出一定的運(yùn)動預(yù)測,為跟蹤的實(shí)時性提供保障。目標(biāo)外觀模型為準(zhǔn)確定位目標(biāo)提供保障。本文應(yīng)用中,為了適應(yīng)手勢的非剛性形變及家居空間中復(fù)雜的光照、背景環(huán)境,采用目標(biāo)外觀模型可以自適應(yīng)更新的增量子空間在線跟蹤模型。為了減輕跟蹤過程中背景對跟蹤造成的影響,采用加權(quán)的增量子空間在線跟蹤模型。為了適應(yīng)手勢的快速運(yùn)動,基于粒子濾波框架提出二次采樣和運(yùn)動預(yù)測的解決方案。實(shí)驗(yàn)結(jié)果顯示了本文算法的有效性。 (2)手勢識別方面:本文先對電視系統(tǒng)的交互任務(wù)進(jìn)行分析,設(shè)計(jì)了一套簡單的、易用且交互性較好的動態(tài)手勢指令集。并為這套指令集設(shè)計(jì)了對應(yīng)的動態(tài)手勢識別算法。本文系統(tǒng)采用基于編輯距離的識別方法,通過對軌跡的預(yù)處理、有效性檢驗(yàn)和基于標(biāo)準(zhǔn)差改進(jìn)的軌跡相似度分類,本文的動態(tài)手勢系統(tǒng)識別準(zhǔn)確率達(dá)到了96%。取得非常好的效果。 (3)系統(tǒng)設(shè)計(jì)方面:本文基于電視資源的分析,將算法資源進(jìn)行有效分配,將復(fù)雜的算法運(yùn)算置于高配置的PC端處理,而對指令的響應(yīng)和顯示則由智能電視系統(tǒng)來處理,兩者通過網(wǎng)絡(luò)進(jìn)行通信,以達(dá)到系統(tǒng)的高效協(xié)同運(yùn)作。實(shí)驗(yàn)結(jié)果表明,本系統(tǒng)設(shè)計(jì)方法具有一定的實(shí)用價值。相比于智能電視的內(nèi)置手勢控制系統(tǒng),,有更好的兼容性和拓展性。
[Abstract]:As a natural human-computer interaction, gesture is widely used in intelligent TV interaction. Taking into account the non-rigid deformation of gestures and the characteristics of their rapid motion, the uncertain and complex lighting and background conditions in additional home environments, as well as the considerations of computational complexity, real-time performance and low cost, The research of intelligent TV gesture interaction system still faces many challenges. In this paper, an intelligent TV gesture interaction system based on single camera is designed for Skyworth 42E790U intelligent TV. The process of gesture recognition based on computer vision can be divided into three stages: gesture detection, gesture tracking and gesture recognition. Based on the existing related technologies, this paper mainly does the following three parts of work: 1) gesture tracking: the improvement of this paper is based on the original incremental subspace tracking model. The tracking algorithm used in this paper can be divided into two modules: motion model and object appearance model. The motion model reduces the search range of the target position and gives a certain motion prediction, which provides a guarantee for the real-time tracking. The object appearance model provides the guarantee for the accurate positioning of the target. In order to adapt to the non-rigid deformation of gestures and the complex illumination and background environment in home space, the incremental subspace online tracking model can be adaptively updated by the target appearance model. In order to reduce the influence of background on tracking, a weighted incremental subspace online tracking model is adopted. In order to adapt to the fast motion of gestures, a solution of quadratic sampling and motion prediction is proposed based on particle filter framework. Experimental results show the effectiveness of the proposed algorithm. (2) gesture recognition: firstly, the interactive task of TV system is analyzed, and a set of simple, easy-to-use and interactive dynamic gesture instruction set is designed. The corresponding dynamic gesture recognition algorithm is designed for the instruction set. In this paper, an edit-distance based recognition method is adopted, and the accuracy of dynamic gesture recognition is 96% through the pre-processing of trajectory, validity test and improved trajectory similarity classification based on standard deviation. Very good results have been achieved. 3) system design: based on the analysis of TV resources, this paper allocates the algorithm resource effectively, and puts the complex algorithm operation on the high configuration PC terminal, while the response and display to the instruction is handled by the intelligent TV system. In order to achieve the efficient and cooperative operation of the system, the two systems communicate through the network. The experimental results show that the system design method has certain practical value. Compared with intelligent TV's built-in gesture control system, it has better compatibility and expansibility.
【學(xué)位授予單位】:華南理工大學(xué)
【學(xué)位級別】:碩士
【學(xué)位授予年份】:2014
【分類號】:TN949.2
【相似文獻(xiàn)】
相關(guān)期刊論文 前10條
1 王福恒;覃京燕;李威;;人-車信息交互系統(tǒng)設(shè)計(jì)[J];包裝工程;2009年03期
2 萬秀穎;張學(xué)銘;付素芳;劉貫軍;李明強(qiáng);;冰箱在線配置客戶需求交互系統(tǒng)研究[J];河南科技學(xué)院學(xué)報(bào);2009年02期
3 程軍;;自動化交互系統(tǒng)的管理與教育[J];電腦與信息技術(shù);2010年06期
4 咼智強(qiáng);辛成瑤;;“能量公社”運(yùn)動交互系統(tǒng)設(shè)計(jì)[J];包裝工程;2011年14期
5 楊桂芳;趙志勇;;電視臺收錄交互系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[J];中國傳媒科技;2012年22期
6 張孝喜;包炳生;梁亦榮;;一個異種計(jì)算機(jī)信息交互系統(tǒng)[J];浙江氣象科技;1986年04期
7 宮小明;姜強(qiáng);;《現(xiàn)代教育技術(shù)》網(wǎng)絡(luò)課程交互系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[J];長春大學(xué)學(xué)報(bào);2005年06期
8 張毅;覃京燕;李威;;基于手語語義學(xué)的多點(diǎn)觸摸交互系統(tǒng)的用戶行為研究[J];包裝工程;2008年05期
9 鄧亞平;賈顥;;嵌入式多功能信息交互系統(tǒng)的設(shè)計(jì)[J];微型機(jī)與應(yīng)用;2009年21期
10 高凈業(yè);黃岸仲;;多點(diǎn)檢測交互系統(tǒng)的研究[J];杭州電子科技大學(xué)學(xué)報(bào);2010年06期
相關(guān)會議論文 前7條
1 陶霖密;穆煜;楊澍;張中元;馬旭龍;;人-車交互系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[A];第18屆全國多媒體學(xué)術(shù)會議(NCMT2009)、第5屆全國人機(jī)交互學(xué)術(shù)會議(CHCI2009)、第5屆全國普適計(jì)算學(xué)術(shù)會議(PCC2009)論文集[C];2009年
2 付永領(lǐng);龐堯;劉和松;王利劍;;PMSM控制器與上位機(jī)數(shù)據(jù)交互系統(tǒng)設(shè)計(jì)[A];2010航空試驗(yàn)測試技術(shù)學(xué)術(shù)交流會論文集[C];2010年
3 武匯岳;王西穎;張風(fēng)軍;戴國忠;;基于視頻手勢的交互系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[A];第三屆和諧人機(jī)環(huán)境聯(lián)合學(xué)術(shù)會議(HHME2007)論文集[C];2007年
4 曹順艇;王建民;龔武明;;基于腳本驅(qū)動的普適終端手語交互系統(tǒng)設(shè)計(jì)[A];第三屆和諧人機(jī)環(huán)境聯(lián)合學(xué)術(shù)會議(HHME2007)論文集[C];2007年
5 王霓虹;孟慶川;;基于J2EE的后勤信息交互系統(tǒng)的設(shè)計(jì)[A];黑龍江省計(jì)算機(jī)學(xué)會2007年學(xué)術(shù)交流年會論文集[C];2007年
6 陳純杰;陳定方;魏國前;;基于VRML起重機(jī)交互系統(tǒng)及實(shí)現(xiàn)技術(shù)[A];12省區(qū)市機(jī)械工程學(xué)會2006年學(xué)術(shù)年會湖北省論文集[C];2006年
7 林德輝;曾劍云;羅慧華;;廣州地鐵乘客信息交互系統(tǒng)應(yīng)用研究[A];2010城市軌道交通關(guān)鍵技術(shù)論壇論文集[C];2010年
相關(guān)重要報(bào)紙文章 前9條
1 記者 常莎莎;宣城開通3G音視頻交互系統(tǒng)[N];人民郵電;2010年
2 ;睿博遠(yuǎn)程可視交互系統(tǒng)平臺[N];中國計(jì)算機(jī)報(bào);2010年
3 陳東升;在押人員可與親友互發(fā)短信[N];法制日報(bào);2006年
4 邵煉鋼邋趙建玉 胡國波 徐云翔;稅企交互系統(tǒng)及時發(fā)布政策[N];中國稅務(wù)報(bào);2008年
5 記者 敖娟;興發(fā)鋁業(yè)領(lǐng)跑行業(yè)信息化[N];中國建材報(bào);2007年
6 許巍;興發(fā)鋁業(yè)信息化再拔頭籌EPI正式啟動[N];中國質(zhì)量報(bào);2007年
7 張斌;溫州甌?词厮涸谘喝藛T可與家屬互“通”短信[N];人民公安報(bào);2007年
8 趙秀紅;聾人也能“收聽”奧運(yùn)會比賽[N];中國教育報(bào);2008年
9 本報(bào)記者 徐晶卉;智能交互,下一座“金礦”?[N];文匯報(bào);2014年
相關(guān)博士學(xué)位論文 前3條
1 黃樟欽;異構(gòu)環(huán)境下基于OP通道技術(shù)的人—人交互系統(tǒng)研究[D];西安交通大學(xué);2000年
2 朱全勝;能量控制中心交互系統(tǒng)的相關(guān)技術(shù)研究[D];大連理工大學(xué);2009年
3 邵吉光;基于隨機(jī)交互系統(tǒng)的金融波動模型的構(gòu)造與分析[D];北京交通大學(xué);2012年
相關(guān)碩士學(xué)位論文 前10條
1 宋菲菲;開放式作業(yè)交互系統(tǒng)[D];內(nèi)蒙古大學(xué);2011年
2 郝斌;交互系統(tǒng)在科普展覽展示中的研究與實(shí)現(xiàn)[D];北京郵電大學(xué);2012年
3 何迎;協(xié)同環(huán)境下交互系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];武漢理工大學(xué);2008年
4 于飛;基于校園網(wǎng)的教學(xué)信息交互系統(tǒng)的研究與設(shè)計(jì)[D];復(fù)旦大學(xué);2009年
5 彭婷婷;數(shù)字電視互動應(yīng)用交互系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[D];中山大學(xué);2011年
6 阿扎提·沙拉瓦提;哈薩克族民間文化藝術(shù)交互系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];電子科技大學(xué);2013年
7 金大偉;基于智能手機(jī)的隨機(jī)人際信息交互系統(tǒng)設(shè)計(jì)[D];浙江大學(xué);2014年
8 趙鳴奇;一個基于眼電信號的人—機(jī)器人交互系統(tǒng)的設(shè)計(jì)和實(shí)現(xiàn)[D];蘭州大學(xué);2014年
9 景韶春;基于加密技術(shù)的銀行數(shù)據(jù)交互系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];復(fù)旦大學(xué);2009年
10 翟海娟;虛擬林區(qū)交互系統(tǒng)的研究與實(shí)現(xiàn)[D];北京林業(yè)大學(xué);2008年
本文編號:1786063
本文鏈接:http://www.sikaile.net/kejilunwen/wltx/1786063.html