本文關(guān)鍵詞：基于再生碼的云存儲(chǔ)系統(tǒng)——Ustor　出處：《通信學(xué)報(bào)》2014年04期 　論文類型：期刊論文

  更多相關(guān)文章： 云存儲(chǔ) 再生碼 糾刪碼 修復(fù)帶寬

【摘要】：當(dāng)前常使用多個(gè)云共同存儲(chǔ)數(shù)據(jù),以保證用戶數(shù)據(jù)可靠性。為減少存儲(chǔ)成本和修復(fù)帶寬,提出了一種使用功能性修復(fù)再生碼(FRC)將數(shù)據(jù)編碼為多個(gè)數(shù)據(jù)塊,并分布于不同的云中的方法。該方法減少了多個(gè)云中單個(gè)云發(fā)生數(shù)據(jù)丟失時(shí)需要從網(wǎng)絡(luò)上傳輸?shù)臄?shù)據(jù)量,并減少了修復(fù)成本,已成功地應(yīng)用于所構(gòu)建的云存儲(chǔ)系統(tǒng)Ustor中。實(shí)驗(yàn)表明:與不編碼比較,冗余編碼給系統(tǒng)增加了5%~10%的響應(yīng)時(shí)間開銷,但可保障節(jié)點(diǎn)失效;FRC碼編、解碼和修復(fù)速度與里德-所羅門(Reed-Solomon或RS)碼基本相當(dāng),256 MB大小文件編碼時(shí)間差距在0.5 s以內(nèi);FRC碼修復(fù)時(shí)與傳統(tǒng)的RS碼相比減少了25%以上需要下載的數(shù)據(jù)量。
[Abstract]:Currently, multiple clouds are often used to store data together to ensure the reliability of user data. In order to reduce storage costs and repair bandwidth. A functional repair regenerative code (FRC) is proposed to encode data into a plurality of data blocks. The method reduces the amount of data that needs to be transferred from the network when data loss occurs in a single cloud in multiple clouds and reduces the repair cost. It has been successfully applied to the cloud storage system Ustor. The experiments show that the redundant coding can increase the response time cost by 5% or 10%, but can guarantee the node failure. The coding, decoding and repairing speed of FRC code is almost equal to that of Reed-Solomon Reed-Solomon code or RS code. The coding time of 256MB file is less than 0.5s. Compared with the traditional RS code, the FRC code can reduce the amount of data needed to download by more than 25% when compared with the traditional RS code.
【作者單位】： 華中科技大學(xué)計(jì)算機(jī)科學(xué)與技術(shù)學(xué)院;
【基金】：國(guó)家重點(diǎn)基礎(chǔ)研究發(fā)展計(jì)劃(“973”計(jì)劃)基金資助項(xiàng)目(2011CB302301) 國(guó)家自然科學(xué)基金資助項(xiàng)目(61025008,61232004) 國(guó)家高技術(shù)研究發(fā)展計(jì)劃(“863”計(jì)劃)基金資助項(xiàng)目(2013AA013203) 國(guó)家科技支撐計(jì)劃基金資助項(xiàng)目(2011BAH04B02) 中央高校基本科研業(yè)務(wù)費(fèi)基金資助項(xiàng)目(2013TS043) 電子信息產(chǎn)業(yè)發(fā)展基金資助項(xiàng)目~~
【分類號(hào)】：TP333
【正文快照】： 1引言隨著分布式存儲(chǔ)系統(tǒng)集群的擴(kuò)張和云存儲(chǔ)的廣泛應(yīng)用,冗余編碼逐漸應(yīng)用于分布式存儲(chǔ)系統(tǒng)中保證數(shù)據(jù)的可靠性,減少了存儲(chǔ)容量和存儲(chǔ)成本[1]。常用的糾錯(cuò)碼有Reed-Solomon碼(RS碼[2])。(n,k)-RS碼是一種最大距離可分(MDS,maximumdistance seperable)碼,也就是所有數(shù)據(jù)存儲(chǔ)在n

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 楊春燕;用SAN構(gòu)筑現(xiàn)代企業(yè)信息存儲(chǔ)系統(tǒng)的優(yōu)勢(shì)[J];內(nèi)蒙古電力技術(shù);2002年S1期

2 ;專家觀點(diǎn)[J];中國(guó)計(jì)算機(jī)用戶;2006年43期

3 ;HDS AMS 2000系列的創(chuàng)新之道[J];通信世界;2009年08期

4 金文新;;大型高校圖書館計(jì)算機(jī)網(wǎng)絡(luò)集成系統(tǒng)建設(shè)[J];情報(bào)科學(xué);2009年04期

5 李靜;;淺談HIS系統(tǒng)對(duì)服務(wù)器和存儲(chǔ)設(shè)備的要求及設(shè)計(jì)方案[J];信息與電腦(理論版);2009年11期

6 劉剛;張海濤;李瑞東;張強(qiáng);;一種基于模塊化設(shè)計(jì)的NAS集群存儲(chǔ)系統(tǒng)[J];微計(jì)算機(jī)信息;2011年05期

7 于耳;;建立面向應(yīng)用的存儲(chǔ)系統(tǒng)[J];中國(guó)教育網(wǎng)絡(luò);2011年06期

8 ;數(shù)字視頻存儲(chǔ)系統(tǒng)[J];光學(xué)精密工程;1977年06期

9 張明明;;為信息傳輸設(shè)備保駕護(hù)航——訪EMC公司中國(guó)區(qū)產(chǎn)品經(jīng)理馬永亨先生[J];上海微型計(jì)算機(jī);1998年Z1期

10 趙晨;;EMC Symmetrix優(yōu)化SAP R/3系統(tǒng)[J];計(jì)算機(jī)與網(wǎng)絡(luò);1998年09期

相關(guān)會(huì)議論文 前10條

1 趙志剛;;存儲(chǔ)系統(tǒng)在企業(yè)信息化中的應(yīng)用[A];2005年安徽通信論文集[C];2006年

2 朱平;朱建濤;高劍剛;蔣金虎;;高性能計(jì)算存儲(chǔ)關(guān)鍵技術(shù)研究[A];2010年第16屆全國(guó)信息存儲(chǔ)技術(shù)大會(huì)（IST2010）論文集[C];2010年

3 周博;宿紹瑩;陳曾平;;基于CPCI總線的寬帶雷達(dá)數(shù)據(jù)傳輸存儲(chǔ)系統(tǒng)設(shè)計(jì)[A];全國(guó)第二屆信號(hào)處理與應(yīng)用學(xué)術(shù)會(huì)議�？痆C];2008年

4 周功業(yè);周江;陳希;陳進(jìn)才;;寄生存儲(chǔ)原理及實(shí)現(xiàn)機(jī)制[A];第15屆全國(guó)信息存儲(chǔ)技術(shù)學(xué)術(shù)會(huì)議論文集[C];2008年

5 汪黎;章文嵩;楊學(xué)軍;;Cfslight:一個(gè)新型的輕量級(jí)對(duì)象存儲(chǔ)集群文件系統(tǒng)[A];2006年全國(guó)開放式分布與并行計(jì)算學(xué)術(shù)會(huì)議論文集（一）[C];2006年

6 聶明;;構(gòu)建海量存儲(chǔ)系統(tǒng) 提升媒體競(jìng)爭(zhēng)力[A];中國(guó)新聞技術(shù)工作者聯(lián)合會(huì)2008年學(xué)術(shù)年會(huì)論文集（下）[C];2008年

7 王克敏;張璽;胡江凱;王毅濤;;NWP資料歸檔方法及其存儲(chǔ)系統(tǒng)的應(yīng)用[A];中國(guó)氣象學(xué)會(huì)2006年年會(huì)“中尺度天氣動(dòng)力學(xué)、數(shù)值模擬和預(yù)測(cè)”分會(huì)場(chǎng)論文集[C];2006年

8 劉湛明;吳柳堅(jiān);;數(shù)字電視臺(tái)的建設(shè)[A];2007第二屆全國(guó)廣播電視技術(shù)論文集2（下）[C];2007年

9 黃曉峰;張杰;;礦井信息中心存儲(chǔ)系統(tǒng)設(shè)計(jì)[A];安全高效礦井機(jī)電裝備及信息化技術(shù)——陜西省煤炭學(xué)會(huì)學(xué)術(shù)年會(huì)論文集（2011）[C];2011年

10 羅香玉;李傳佑;汪蕓;;糾刪碼容錯(cuò)組的布局策略研究[A];第18屆全國(guó)多媒體學(xué)術(shù)會(huì)議（NCMT2009）、第5屆全國(guó)人機(jī)交互學(xué)術(shù)會(huì)議（CHCI2009）、第5屆全國(guó)普適計(jì)算學(xué)術(shù)會(huì)議（PCC2009）論文集[C];2009年

相關(guān)重要報(bào)紙文章 前10條

1 朗飛;IBM“冰立方”就像搭積木[N];中國(guó)計(jì)算機(jī)報(bào);2006年

2 郭濤;MediaGrid既不是SAN也不是NAS[N];中國(guó)計(jì)算機(jī)報(bào);2007年

3 本報(bào)記者　　張峰;知己知彼建存儲(chǔ)（上）[N];網(wǎng)絡(luò)世界;2006年

4 森林;NAS資源存儲(chǔ)系統(tǒng)[N];中國(guó)電腦教育報(bào);2002年

5 Hifn(漢帆)杭州信息技術(shù)有限公司 馬劍杰;自動(dòng)精簡(jiǎn)配置：提升存儲(chǔ)利用率有絕招[N];中國(guó)計(jì)算機(jī)報(bào);2009年

6 ;IBM收購(gòu)存儲(chǔ)解決方案公司[N];計(jì)算機(jī)世界;2007年

7 本報(bào)記者 徐恒;面臨機(jī)遇 中國(guó)新型存儲(chǔ)業(yè)合作求創(chuàng)新[N];中國(guó)電子報(bào);2011年

8 李想 徐晉;福州電業(yè)局研發(fā)個(gè)人文件安全存儲(chǔ)系統(tǒng)[N];中國(guó)電力報(bào);2006年

9 ;HDS推出企業(yè)入門級(jí)存儲(chǔ)系統(tǒng)[N];計(jì)算機(jī)世界;2005年

10 ;戴爾EMC打造新一代高容量存儲(chǔ)系統(tǒng)[N];人民郵電;2004年

相關(guān)博士學(xué)位論文 前10條

1 陸承濤;存儲(chǔ)系統(tǒng)性能管理問(wèn)題的研究[D];華中科技大學(xué);2010年

2 聶雪軍;內(nèi)容感知存儲(chǔ)系統(tǒng)中信息信息生命周期管理關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年

3 羅東健;大規(guī)模存儲(chǔ)系統(tǒng)高可靠性關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年

4 聶雪軍;內(nèi)容感知存儲(chǔ)系統(tǒng)中信息生命周期管理關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2010年

5 王玉林;多節(jié)點(diǎn)容錯(cuò)存儲(chǔ)系統(tǒng)的數(shù)據(jù)與緩存組織研究[D];電子科技大學(xué);2010年

6 施展;基于本體的存儲(chǔ)系統(tǒng)管理研究[D];華中科技大學(xué);2011年

7 黃繼鵬;高速高可靠小型數(shù)字視頻存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];中國(guó)科學(xué)院研究生院（長(zhǎng)春光學(xué)精密機(jī)械與物理研究所）;2012年

8 劉科;內(nèi)容感知存儲(chǔ)系統(tǒng)中的信息檢索關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2012年

9 王鵬;低密度奇偶校驗(yàn)碼應(yīng)用于存儲(chǔ)系統(tǒng)的關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2013年

10 姜明華;基于冗余智能存儲(chǔ)通道的存儲(chǔ)系統(tǒng)關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年

相關(guān)碩士學(xué)位論文 前10條

1 陸正武;面向流媒體應(yīng)用存儲(chǔ)系統(tǒng)的研究與實(shí)現(xiàn)[D];華中科技大學(xué);2004年

2 杜睿;基于IP-SAN技術(shù)的石化企業(yè)數(shù)據(jù)集中存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];華東理工大學(xué);2010年

3 金強(qiáng);基于HBase的RDF存儲(chǔ)系統(tǒng)的研究與設(shè)計(jì)[D];浙江大學(xué);2011年

4 余智敏;數(shù)字化圖書館的數(shù)據(jù)存儲(chǔ)技術(shù)的研究[D];武漢理工大學(xué);2006年

5 陶博舟;磁盤陣列快照系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];華中科技大學(xué);2007年

6 張小艷;基于嵌入式技術(shù)的USB存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];內(nèi)蒙古大學(xué);2011年

7 蔣亞群;基于DLX體系結(jié)構(gòu)的微處理器核的設(shè)計(jì)與實(shí)現(xiàn)[D];中國(guó)人民解放軍國(guó)防科學(xué)技術(shù)大學(xué);2002年

8 亓偉;關(guān)系數(shù)據(jù)庫(kù)存儲(chǔ)子系統(tǒng)研究與實(shí)現(xiàn)[D];清華大學(xué);2005年

9 宋迎迎;數(shù)字館藏評(píng)價(jià)指標(biāo)體系研究[D];鄭州大學(xué);2006年

10 袁曉銘;磁盤陣列系統(tǒng)的快照技術(shù)研究[D];華中科技大學(xué);2007年

，

本文編號(hào)：1427437