基于多屬性信息的云平臺異常檢測系統(tǒng)設計與實現(xiàn)
發(fā)布時間:2017-03-28 04:02
本文關鍵詞:基于多屬性信息的云平臺異常檢測系統(tǒng)設計與實現(xiàn),由筆耕文化傳播整理發(fā)布。
【摘要】:當今,云計算已成為全球IT產(chǎn)業(yè)的主流模式,各個領域的發(fā)展都離不開云計算。為了提高云計算平臺的服務質量,需要對云平臺進行全面的監(jiān)控。由于云計算資源具有多樣性、復雜性等特點,給監(jiān)控任務帶來了巨大的挑戰(zhàn)。云監(jiān)控中涉及的關鍵問題主要有監(jiān)控信息的獲取、監(jiān)控數(shù)據(jù)的異常判定、異常信息的傳輸及異常預警。本文提出了一種基于主成分分析(Principal Component Analysis,PCA)和多屬性信息的虛擬機異常檢測方法。在此基礎上,設計并實現(xiàn)了一個基于多屬性信息的云平臺異常檢測系統(tǒng),該監(jiān)控系統(tǒng)能夠對虛擬機中的Hadoop集群節(jié)點進行資源監(jiān)控和故障預警;赑CA和多屬性信息的虛擬機異常檢測方法研究包括以PCA算法為核心的多屬性信息處理和以非參數(shù)CUSUM算法為核心的異常檢測。前者首先通過PCA算法將多個屬性數(shù)據(jù)重新組合成一組新的相互無關的綜合數(shù)據(jù)來代替原來的多維數(shù)據(jù),然后通過分析計算將該綜合數(shù)據(jù)劃分為“正!、“異!奔啊肮收稀钡热。后者主要針對異常數(shù)據(jù)而展開,當檢測到異常數(shù)據(jù)時,系統(tǒng)將啟動CUSUM檢測機制,加快采集頻率,當檢驗序列由負變正時累加異常,當異常累計值達到閾值門限時即發(fā)送警告。實驗結果表明:基于PCA的多屬性信息異常檢測算法可以在虛擬機運行狀態(tài)發(fā)生顯著異常之前準確地檢測出異常,并具有較小的時延;诙鄬傩孕畔⒌脑破脚_異常檢測系統(tǒng)設計主要在Xen云平臺中實現(xiàn),包括節(jié)點機功能設計和主控機功能設計。其中,節(jié)點機功能的實現(xiàn)首先通過Sysstat系統(tǒng)性能收集工具對節(jié)點信息進行采集,然后通過后臺守護進程將信息進行整理并存入Mysql數(shù)據(jù)庫,最后通過異常檢測算法進行異常判定并進行異常告警。主控機是異常檢測系統(tǒng)的人機交互界面,負責所有命令的接收與發(fā)送,并具有異常報警、警告記錄存儲和各個節(jié)點資源利用狀態(tài)查看的功能。實驗結果表明,該系統(tǒng)可以完成各項預期的設計功能。
【關鍵詞】:云監(jiān)控 Xen虛擬機 多屬性信息 異常檢測
【學位授予單位】:大連理工大學
【學位級別】:碩士
【學位授予年份】:2015
【分類號】:TP302
【目錄】:
- 摘要4-5
- Abstract5-9
- 1 緒論9-15
- 1.1 課題背景9-10
- 1.2 國內(nèi)外研究現(xiàn)狀10-13
- 1.3 研究目的與主要工作13
- 1.4 論文的組織結構13-15
- 2 云監(jiān)控相關技術基礎15-25
- 2.1 云計算15-19
- 2.1.1 云計算的體系結構15-17
- 2.1.2 HDFS分布式文件系統(tǒng)17-19
- 2.2 云平臺監(jiān)控技術19-21
- 2.3 Xen虛擬化技術21-23
- 2.4 Linux下自動化編譯技術23-24
- 2.5 本章小結24-25
- 3 基于主成分分析的多屬性信息異常檢測25-43
- 3.1 基于主成分分析的數(shù)據(jù)處理25-35
- 3.1.1 主成分分析法原理25-26
- 3.1.2 主成分分析法算法26-27
- 3.1.3 PCA建模27-32
- 3.1.4 運行狀態(tài)等級分類32-35
- 3.2 基于非參數(shù)CUSUM算法的異常檢測分析35-39
- 3.2.1 CUSUM算法簡介35-37
- 3.2.2 非參數(shù)CUSUM算法的異常檢測分析37-38
- 3.2.3 非參數(shù)CUSUM閾值分析38-39
- 3.3 實驗結果與分析39-42
- 3.4 本章小結42-43
- 4 多屬性信息的云平臺異常檢測系統(tǒng)設計與實現(xiàn)43-60
- 4.1 多屬性信息的云平臺異常檢測系統(tǒng)體系結構43-44
- 4.2 節(jié)點機的設計與實現(xiàn)44-50
- 4.2.1 節(jié)點機功能設計44-45
- 4.2.2 后臺守護進程的設計45-47
- 4.2.3 UDP通信模塊設計47-48
- 4.2.4 數(shù)據(jù)持久化設計48-50
- 4.3 主控機設計與實現(xiàn)50-51
- 4.4 測試系統(tǒng)的實現(xiàn)51-59
- 4.4.1 測試平臺搭建51-55
- 4.4.2 實驗數(shù)據(jù)采集55-57
- 4.4.3 運行分析57-59
- 4.5 本章小結59-60
- 結論60-61
- 參考文獻61-64
- 攻讀碩士學位期間發(fā)表學術論文情況64-65
- 致謝65-66
【參考文獻】
中國碩士學位論文全文數(shù)據(jù)庫 前1條
1 鄭佰平;云計算技術在汽車研發(fā)系統(tǒng)中的應用研究[D];重慶交通大學;2013年
本文關鍵詞:基于多屬性信息的云平臺異常檢測系統(tǒng)設計與實現(xiàn),由筆耕文化傳播整理發(fā)布。
,本文編號:271604
本文鏈接:http://www.sikaile.net/kejilunwen/jisuanjikexuelunwen/271604.html
最近更新
教材專著