S-RAID中基于連續(xù)數(shù)據(jù)特征的寫優(yōu)化策略
本文選題:連續(xù)數(shù)據(jù)存儲 + 節(jié)能。 參考:《計算機學(xué)報》2014年03期
【摘要】:節(jié)能型磁盤陣列S-RAID通過對磁盤分組,關(guān)閉部分磁盤,降低存儲系統(tǒng)部分性能來實現(xiàn)節(jié)能.為避免啟動已關(guān)閉磁盤而產(chǎn)生額外能耗,S-RAID中的寫操作全部采用"讀-改-寫"方式,影響了S-RAID的寫性能.本研究提出一種S-RAID的優(yōu)化結(jié)構(gòu):LS-RAID,在不提高存儲系統(tǒng)能耗的條件下,優(yōu)化S-RAID的寫性能.LS-RAID適用于以連續(xù)訪問為主的應(yīng)用,通過磁盤分區(qū),分離存儲系統(tǒng)中的隨機訪問和順序訪問,降低了隨機訪問對存儲系統(tǒng)性能的影響;提出一種數(shù)據(jù)增量校驗算法,避免了寫過程中對數(shù)據(jù)盤舊數(shù)據(jù)的讀操作,降低了因"讀-改-寫"導(dǎo)致的寫懲罰.實驗表明,與S-RAID相比,在不增加系統(tǒng)能耗的情況下,LS-RAID的寫速率可以提升至少56%.在提供相同寫性能的條件下,LS-RAID可以關(guān)閉更多磁盤,進一步降低了存儲系統(tǒng)能耗,提升了節(jié)能效果.
[Abstract]:Energy saving disk array S-RAID can save energy by grouping disks, closing some disks, reducing part of the storage system performance to save energy. In order to avoid the extra energy consumption to start off the disks, the write operation in S-RAID is all "read to write", which affects the writing ability of S-RAID. This study proposes a S-RAID optimization structure, LS-RAID, In the condition that the energy consumption of the storage system is not improved, the writing performance of the optimized S-RAID.LS-RAID is suitable for the application which is based on continuous access. The random access and sequential access in the storage system are separated through the disk partition, and the effect of random access on the performance of the storage system is reduced. A data increment check algorithm is proposed to avoid the writing process. The read operation of the old data of the data disk reduces the writing penalty caused by the "read to write". The experiment shows that, compared with S-RAID, the write rate of LS-RAID can be raised at least 56%. without increasing the energy consumption of the system, and the LS-RAID can shut down more disks under the condition of providing the same writing performance, further reducing the energy consumption of the storage system, and raising the energy consumption. Energy saving effect.
【作者單位】: 北京理工大學(xué)計算機科學(xué)與技術(shù)學(xué)院;河北工業(yè)大學(xué)計算機科學(xué)與軟件學(xué)院;北京理工大學(xué)北京市海量語言信息處理與云計算應(yīng)用工程技術(shù)中心;
【基金】:國家“八六三”高技術(shù)研究發(fā)展計劃項目基金(2013AA01A212) 國家自然科學(xué)基金(61370063)資助~~
【分類號】:TP333
【參考文獻】
相關(guān)期刊論文 前5條
1 萬武南;吳震;陳運;王曉京;;一種基于3容錯陣列碼的RAID數(shù)據(jù)布局[J];計算機學(xué)報;2007年10期
2 許春聰;黃小猛;吳諾;孫寧偉;楊廣文;;分布式文件系統(tǒng)存儲介質(zhì)評測與分析[J];計算機學(xué)報;2010年10期
3 金海,張江陵;采用RS碼的高可靠RAID系統(tǒng)的可靠性分析[J];計算機學(xué)報;1996年07期
4 趙鵬;朱龍云;;基于相變存儲器的非易失內(nèi)存數(shù)據(jù)機密性保護[J];計算機學(xué)報;2011年11期
5 趙鵬;白石;;基于隨機游走的大容量固態(tài)硬盤磨損均衡算法[J];計算機學(xué)報;2012年05期
相關(guān)博士學(xué)位論文 前1條
1 毛波;盤陣列的數(shù)據(jù)布局技術(shù)研究[D];華中科技大學(xué);2010年
【共引文獻】
相關(guān)期刊論文 前10條
1 王新春;洪明;;基于單物理硬盤的磁盤陣列研究[J];楚雄師范學(xué)院學(xué)報;2010年12期
2 萬武南;王拓;索望;;一種三容錯數(shù)據(jù)布局[J];電子與信息學(xué)報;2013年10期
3 羅迅;;基于MEL的糾刪碼容錯能力分析[J];計算機工程與應(yīng)用;2011年17期
4 常乾;許胤龍;項利萍;潘玉彪;;基于EVENODD碼的單盤故障快速恢復(fù)算法[J];計算機應(yīng)用與軟件;2011年06期
5 葉波;李天望;羅敏;;基于SATA接口的RAID5編解碼器芯片實現(xiàn)[J];微電子學(xué);2009年05期
6 葉波;江金光;李天望;羅敏;;基于RAID-5的SATA磁盤陣列控制芯片設(shè)計[J];微電子學(xué);2010年05期
7 劉靖宇;鄭軍;李元章;孫志卓;王文明;譚毓安;;混合S-RAID:一種適于連續(xù)數(shù)據(jù)存儲的節(jié)能數(shù)據(jù)布局[J];計算機研究與發(fā)展;2013年01期
8 強彥;盧軍佐;劉濤;裴博;;基于HBase的并行BFS方法[J];計算機科學(xué);2013年03期
9 李元章;孫志卓;馬忠梅;鄭軍;譚毓安;;S-RAID5:一種適用于順序數(shù)據(jù)訪問的節(jié)能磁盤陣列[J];計算機學(xué)報;2013年06期
10 陳鋼;朱俊峰;張世樂;吳百鋒;;面向大容量數(shù)據(jù)實時傳輸?shù)膲K間4糾刪編碼[J];通信學(xué)報;2012年06期
相關(guān)博士學(xué)位論文 前8條
1 劉軍平;磁盤存儲系統(tǒng)可靠性技術(shù)研究[D];華中科技大學(xué);2011年
2 金超;容錯存儲系統(tǒng)的結(jié)構(gòu)優(yōu)化技術(shù)研究[D];華中科技大學(xué);2011年
3 肖宜龍;隨機化數(shù)據(jù)冗余方法及其在存儲系統(tǒng)中的應(yīng)用[D];電子科技大學(xué);2013年
4 蔣海波;海量數(shù)據(jù)存儲系統(tǒng)的高可靠性關(guān)鍵技術(shù)研究與應(yīng)用[D];電子科技大學(xué);2013年
5 張帆;認知可重構(gòu)的高效能Web服務(wù)體系結(jié)構(gòu)研究[D];解放軍信息工程大學(xué);2013年
6 黃平;基于固態(tài)盤特征的存儲優(yōu)化研究[D];華中科技大學(xué);2013年
7 伍江江;面向服務(wù)應(yīng)急響應(yīng)的數(shù)據(jù)保護關(guān)鍵技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2012年
8 敬思遠;面向綠色虛擬數(shù)據(jù)中心資源管理的若干關(guān)鍵技術(shù)研究[D];電子科技大學(xué);2013年
相關(guān)碩士學(xué)位論文 前8條
1 蔣明原;云計算平臺在搜索引擎中的關(guān)鍵技術(shù)研究[D];中北大學(xué);2011年
2 梅景泉;基于高斯信道的級聯(lián)碼差錯控制系統(tǒng)設(shè)計與仿真[D];華中科技大學(xué);2004年
3 陳寶純;基于糾刪碼與HDFS的云文件系統(tǒng)[D];吉林大學(xué);2012年
4 胡明德;磁盤陣列可靠性研究[D];重慶大學(xué);2012年
5 盧俊;云存儲中基于SecCSIE架構(gòu)與AONT-RS的數(shù)據(jù)可靠性與安全性研究[D];湖南大學(xué);2012年
6 朱衛(wèi)衛(wèi);基于重碼和二進制矩陣的RAID編碼算法研究[D];湖南大學(xué);2011年
7 楊燦;基于HDFS的華圖在線文庫系統(tǒng)數(shù)據(jù)存儲與管理研究[D];中南大學(xué);2013年
8 楊華偉;多平臺虛擬化環(huán)境集成管理技術(shù)研究與實現(xiàn)[D];濟南大學(xué);2013年
【二級參考文獻】
相關(guān)期刊論文 前1條
1 毛波;馮丹;吳素貞;;MP-RAID: Mirroring and parity protected disk array[J];Journal of Shanghai University(English Edition);2009年06期
相關(guān)博士學(xué)位論文 前4條
1 王俊偉;大規(guī)模多媒體存儲系統(tǒng)中數(shù)據(jù)放置與調(diào)度策略的研究[D];國防科學(xué)技術(shù)大學(xué);2005年
2 胡勇其;基于語義的數(shù)據(jù)對象訪問和存儲管理研究[D];中國科學(xué)院研究生院(計算技術(shù)研究所);2006年
3 王剛;網(wǎng)絡(luò)磁盤陣列結(jié)構(gòu)和數(shù)據(jù)布局研究[D];南開大學(xué);2002年
4 張曉;基于存儲區(qū)域網(wǎng)絡(luò)的數(shù)據(jù)可靠性技術(shù)研究[D];西北工業(yè)大學(xué);2006年
【相似文獻】
相關(guān)期刊論文 前10條
1 荊有廣;;數(shù)字圖書館安全存儲淺議[J];網(wǎng)絡(luò)財富;2010年23期
2 毛波;吳素貞;馮丹;;一種提高磁盤陣列重建效率的緩存替換算法[J];華中科技大學(xué)學(xué)報(自然科學(xué)版);2011年06期
3 那寶玉;張毓森;;基于CRS算法的高可靠性存儲系統(tǒng)的設(shè)計[J];計算機工程;2007年15期
4 柴云鵬;都志輝;李三立;;保障服務(wù)質(zhì)量的節(jié)能流媒體存儲系統(tǒng)[J];清華大學(xué)學(xué)報(自然科學(xué)版);2010年01期
5 王偉;小心!“禁”入存儲誤區(qū)[J];中國計算機用戶;2005年22期
6 ;存儲天地[J];每周電腦報;2006年31期
7 趙吉志;;SAS2.0技術(shù)發(fā)展簡介[J];科技浪潮;2008年04期
8 王芳,張江陵,馮丹;面向優(yōu)化內(nèi)存使用的高速RAID控制器設(shè)計[J];計算機工程與應(yīng)用;2003年14期
9 于耳;;建立面向應(yīng)用的存儲系統(tǒng)[J];中國教育網(wǎng)絡(luò);2011年06期
10 張詢;速度快容量大的新型存儲系統(tǒng)[J];世界電子元器件;1997年09期
相關(guān)會議論文 前10條
1 趙志剛;;存儲系統(tǒng)在企業(yè)信息化中的應(yīng)用[A];2005年安徽通信論文集[C];2006年
2 朱平;朱建濤;高劍剛;蔣金虎;;高性能計算存儲關(guān)鍵技術(shù)研究[A];2010年第16屆全國信息存儲技術(shù)大會(IST2010)論文集[C];2010年
3 周功業(yè);周江;陳希;陳進才;;寄生存儲原理及實現(xiàn)機制[A];第15屆全國信息存儲技術(shù)學(xué)術(shù)會議論文集[C];2008年
4 黃曉峰;張杰;;礦井信息中心存儲系統(tǒng)設(shè)計[A];安全高效礦井機電裝備及信息化技術(shù)——陜西省煤炭學(xué)會學(xué)術(shù)年會論文集(2011)[C];2011年
5 胡維;劉光明;李瓊;劉欣;;基于智能預(yù)警的自恢復(fù)存儲系統(tǒng)研究[A];2010年第16屆全國信息存儲技術(shù)大會(IST2010)論文集[C];2010年
6 汪位龍;;設(shè)計院存儲系統(tǒng)建設(shè)初探[A];中國公路學(xué)會計算機應(yīng)用分會2004年年會學(xué)術(shù)論文集[C];2004年
7 聶明;;構(gòu)建海量存儲系統(tǒng) 提升媒體競爭力[A];中國新聞技術(shù)工作者聯(lián)合會2008年學(xué)術(shù)年會論文集(下)[C];2008年
8 羅香玉;李傳佑;汪蕓;;糾刪碼容錯組的布局策略研究[A];第18屆全國多媒體學(xué)術(shù)會議(NCMT2009)、第5屆全國人機交互學(xué)術(shù)會議(CHCI2009)、第5屆全國普適計算學(xué)術(shù)會議(PCC2009)論文集[C];2009年
9 陳新平;;存儲區(qū)域網(wǎng)絡(luò)簡介及在遼河油田的應(yīng)用[A];中國地球物理學(xué)會第二十四屆年會論文集[C];2008年
10 唐聃;王曉京;;一類可容多列磁盤陣列錯誤的編碼技術(shù)[A];中國電子學(xué)會第十五屆信息論學(xué)術(shù)年會暨第一屆全國網(wǎng)絡(luò)編碼學(xué)術(shù)年會論文集(下冊)[C];2008年
相關(guān)重要報紙文章 前10條
1 本報記者 郭濤;統(tǒng)一存儲化繁為簡[N];中國計算機報;2009年
2 本報記者 郭濤;存儲優(yōu)化三招[N];中國計算機報;2010年
3 本報記者 李坤;六大勢能構(gòu)建智慧信息架構(gòu)[N];中國計算機報;2009年
4 創(chuàng)新科存儲技術(shù)有限公司 崔ng 李龍年;iSCSI:八大技術(shù)看點[N];中國計算機報;2007年
5 郭濤;SAS 2.0還要等多久[N];中國計算機報;2008年
6 張建平;助力中小企業(yè)存儲 高性價比航天聯(lián)志AL—5161S面市[N];中國高新技術(shù)產(chǎn)業(yè)導(dǎo)報;2008年
7 郭濤;SAS普及還有四道關(guān)[N];中國計算機報;2007年
8 李凱;富士通存儲系統(tǒng)力助廣東中行[N];通信產(chǎn)業(yè)報;2005年
9 郭濤;惠普中高端存儲實現(xiàn)“四化”[N];中國計算機報;2007年
10 ;磁盤陣列當(dāng)“書柜”[N];計算機世界;2002年
相關(guān)博士學(xué)位論文 前10條
1 吳素貞;磁盤陣列高可用技術(shù)研究[D];華中科技大學(xué);2010年
2 王玉林;多節(jié)點容錯存儲系統(tǒng)的數(shù)據(jù)與緩存組織研究[D];電子科技大學(xué);2010年
3 金超;容錯存儲系統(tǒng)的結(jié)構(gòu)優(yōu)化技術(shù)研究[D];華中科技大學(xué);2011年
4 萬勝剛;磁盤陣列高容錯模式及重構(gòu)技術(shù)研究[D];華中科技大學(xué);2010年
5 劉軍平;磁盤存儲系統(tǒng)可靠性技術(shù)研究[D];華中科技大學(xué);2011年
6 施展;基于本體的存儲系統(tǒng)管理研究[D];華中科技大學(xué);2011年
7 王鵬;低密度奇偶校驗碼應(yīng)用于存儲系統(tǒng)的關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2013年
8 姜明華;基于冗余智能存儲通道的存儲系統(tǒng)關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年
9 王志坤;樹結(jié)構(gòu)磁盤陣列組織策略及關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2010年
10 岳銀亮;存儲系統(tǒng)低能耗數(shù)據(jù)布局技術(shù)研究[D];華中科技大學(xué);2010年
相關(guān)碩士學(xué)位論文 前10條
1 吉永光;樹型結(jié)構(gòu)存儲系統(tǒng)設(shè)計與層間緩存技術(shù)[D];華中科技大學(xué);2007年
2 楊照宏;分布式海量存儲系統(tǒng)的可靠性和容錯性研究[D];大連海事大學(xué);2007年
3 秦曉玲;存儲系統(tǒng)的一種多鏈路技術(shù)的研究與實現(xiàn)[D];華中科技大學(xué);2008年
4 汪志剛;大容量數(shù)據(jù)采集存儲系統(tǒng)的研究與實現(xiàn)[D];電子科技大學(xué);2010年
5 胡晗;基于FPGA的磁盤陣列存儲系統(tǒng)設(shè)計[D];哈爾濱工程大學(xué);2013年
6 陸正武;面向流媒體應(yīng)用存儲系統(tǒng)的研究與實現(xiàn)[D];華中科技大學(xué);2004年
7 胡維;基于智能預(yù)警和自修復(fù)的高可靠磁盤陣列關(guān)鍵技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2010年
8 程波;磁盤陣列級節(jié)能技術(shù)的研究與實現(xiàn)[D];華中科技大學(xué);2011年
9 杜睿;基于IP-SAN技術(shù)的石化企業(yè)數(shù)據(jù)集中存儲系統(tǒng)的設(shè)計與實現(xiàn)[D];華東理工大學(xué);2010年
10 金強;基于HBase的RDF存儲系統(tǒng)的研究與設(shè)計[D];浙江大學(xué);2011年
,本文編號:2071480
本文鏈接:http://www.sikaile.net/kejilunwen/jisuanjikexuelunwen/2071480.html