網(wǎng)絡(luò)日志是定位網(wǎng)絡(luò)安全問題的重要依據(jù)。網(wǎng)絡(luò)日志周期性強(qiáng)、瞬時(shí)值高的特點(diǎn)易使系統(tǒng)平均訪問時(shí)間延長,波動(dòng)變大。設(shè)計(jì)適合日志數(shù)據(jù)的存儲(chǔ)方法,對(duì)降低訪問時(shí)延、提高系統(tǒng)穩(wěn)定性具有重要的意義。當(dāng)前,日志存儲(chǔ)多使用通用數(shù)據(jù)存儲(chǔ)的方式,存儲(chǔ)策略單一,對(duì)日志存儲(chǔ)的特定場(chǎng)景考慮較少,且對(duì)固態(tài)硬盤這類新型存儲(chǔ)介質(zhì)的利用較少。為解決上述問題,本課題提出基于流量預(yù)測(cè)的日志存儲(chǔ)方法,并基于該方法設(shè)計(jì)、實(shí)現(xiàn)基于流量預(yù)測(cè)的日志存儲(chǔ)系統(tǒng)。具體內(nèi)容如下:首先,提出基于流量預(yù)測(cè)的日志存儲(chǔ)方法。從日志數(shù)據(jù)的特點(diǎn)出發(fā),充分利用日志數(shù)據(jù)的時(shí)間序列特性,將日志流量按照所提方法劃分為高峰期、中間期與低谷期,并使用BP神經(jīng)網(wǎng)絡(luò)對(duì)日志流量進(jìn)行預(yù)測(cè)。然后根據(jù)日志流量的當(dāng)前值與預(yù)測(cè)值綜合系統(tǒng)性能狀況計(jì)算不同時(shí)期中日志在機(jī)械硬盤與緩存介質(zhì)間的分配比例、調(diào)整方法以及日志緩存的消費(fèi)方式。其次,基于所提方法,設(shè)計(jì)并實(shí)現(xiàn)基于流量預(yù)測(cè)的日志存儲(chǔ)系統(tǒng),包括調(diào)度層、監(jiān)控層與應(yīng)用層。該系統(tǒng)選取固態(tài)硬盤作為日志緩存,根據(jù)用戶配置自動(dòng)化完成日志采集、解析、存儲(chǔ)與查看,并根據(jù)日志流量預(yù)測(cè)值自動(dòng)選擇相應(yīng)的存儲(chǔ)介質(zhì)與存儲(chǔ)策略,完成日志存儲(chǔ)。實(shí)驗(yàn)結(jié)果表明,此系統(tǒng)可以有效... 

【文章來源】：北京郵電大學(xué)北京市 211工程院校 教育部直屬院校

【文章頁數(shù)】：90 頁

【學(xué)位級(jí)別】：碩士

【部分圖文】：

圖２－１預(yù)寫日志工作原理示意圖??

中目前被廣泛應(yīng)用的種類之一，它使用梯度下降法以獲得最小的實(shí)際輸出值與??期望輸出值的誤差均方差。??圖２－２所示是一個(gè)三層ＢＰ神經(jīng)網(wǎng)絡(luò)的拓?fù)浣Y(jié)構(gòu)，它包括輸入層、隱含層和??輸出層。每個(gè)層中都有一定數(shù)量的神經(jīng)元，＆為輸入層和隱含層之間的連接權(quán)??值，％為隱含層和輸出層之間的鏈接權(quán)值。??ｉｎ?ｙｖ?ｈｊ?）??－２??圖２－２三層ＢＰ神經(jīng)網(wǎng)絡(luò)??ＢＰ神經(jīng)網(wǎng)絡(luò)模型的訓(xùn)練主要由以下兩個(gè)過程組成，分別為前向傳播與反向??傳播。??２．２．２前向傳播??前向傳播也即計(jì)算實(shí)際輸出與期望輸出之間的誤差時(shí)按照從輸入到輸出的??方向進(jìn)行計(jì)算，輸入信號(hào)通過隱含層作用于輸出節(jié)點(diǎn)，經(jīng)過非線性變換，產(chǎn)生??輸出信號(hào)，若誤差符合所設(shè)閾值，結(jié)果成立，否則轉(zhuǎn)入反向傳播的過程。設(shè)輸??入樣本為＇?＝?…ｚｊ，輸出值為＾＾＾，＾…況＾來計(jì)算系統(tǒng)誤??差值，誤差計(jì)算公式如公式（２－１）所示：??Ｅ｛ｎ）?＝?＼ｊ＾｛ＯＴｋｐ－Ｏｐｋ）２?（２－１）??＾?Ｐ＝＼?Ｋ＝＼??２．２．３反向傳播??當(dāng)實(shí)際輸出與期望輸出誤差超出所設(shè)閾值時(shí)

??ｇｏ?ｆｉｍｃ（）語句就可以實(shí)現(xiàn)并發(fā)編程。如圖２－３所示，Ｇｏ調(diào)度器主要包括Ｇ／Ｍ／Ｐ??三個(gè)部分［２３】。??Ｇ即Ｇｏｒｏｕｔｉｎｅ，它類似于操作系統(tǒng)中的進(jìn)程控制塊（ＰＣＢ），保存棧、狀態(tài)、??ｉｄ、函數(shù)等信息，它通過ｇｏｆｕｎｃＧ語句被創(chuàng)建，并且只有被綁定到Ｐ才可以被調(diào)??度執(zhí)行。??Ｍ即Ｍａｃｈｉｎｅ，它是實(shí)際工作的線程，因此，每當(dāng)一個(gè)Ｍ被創(chuàng)建，一個(gè)底??層線程也被創(chuàng)建，而Ｇ最終也是通過Ｍ執(zhí)行的。Ｍ會(huì)從運(yùn)行隊(duì)列中取出Ｇ并??運(yùn)行，如果Ｇ運(yùn)行完畢或休眠，則從隊(duì)列中取下一個(gè)Ｇ繼續(xù)運(yùn)行。??Ｐ即Ｐｒｏｃｅｓｓｏｒ，它是被抽象出來的處理器概念，每個(gè)運(yùn)行的Ｍ必須綁定一??個(gè)Ｐ，就像線程必須在一個(gè)ＣＰＵ核上執(zhí)行一樣，由Ｐ來調(diào)度Ｇ在Ｍ上的運(yùn)行，??可以理解為一種多對(duì)多的關(guān)系。??全局隊(duì)列?？？？（§）？？??ｔｎｊ?ｒｚ??Ｇ隊(duì)列?Ｍｉ?．．．??Ｇ?Ｉ?Ｇ??？?Ｇ?Ｇ?Ｇ??｜?Ｉ?＾?Ｉ?Ｉ??ｒ＿Ｌ＾?：??ｐ?ｐ?ｐ?ｐ??Ｍ：?．?：Ｍ??圖２－３?Ｇｏ調(diào)度器原理示意圖??Ｇ／Ｍ／Ｐ設(shè)計(jì)的精妙之處在于每個(gè)Ｍ／Ｐ都擁有一個(gè)運(yùn)行隊(duì)列

【參考文獻(xiàn)】：
期刊論文
[1]基于閃存的混合存儲(chǔ)系統(tǒng)緩沖區(qū)管理算法[J]. 王光忠,王翰虎,陳梅,馬丹.  計(jì)算機(jī)工程與設(shè)計(jì). 2012(06)

博士論文
[1]針對(duì)固態(tài)盤的I/O優(yōu)化技術(shù)研究[D]. 李紅艷.華中科技大學(xué) 2016



本文編號(hào)：2911314