發(fā)布時間：2017-11-22 03:27

  本文關(guān)鍵詞：基于分布式的電力云存儲系統(tǒng)的研究與應(yīng)用

  更多相關(guān)文章： 電力系統(tǒng) 云存儲 分布式文件系統(tǒng) 負載均衡

【摘要】：隨著國家電網(wǎng)公司業(yè)務(wù)的拓展，辦公文件的數(shù)量也就隨之劇增，從而導(dǎo)致存儲效率低等問題的出現(xiàn)，使得文件管理變得異常繁瑣，因此對電力云存儲系統(tǒng)的研究具有很高的應(yīng)用價值，云存儲系統(tǒng)是在當(dāng)前廣泛討論的云計算概念上延伸和發(fā)展出來的，具有高可用性、高擴展性、高可靠性等特點，可以將各種類型的存儲介質(zhì)整合在一起來提供數(shù)據(jù)存儲和業(yè)務(wù)訪問的功能。HDFS是開源云框架Hadoop的底層文件系統(tǒng)的實現(xiàn)，具有高容錯性和高傳輸率等特點，可以以流的形式寫入或者讀取文件系統(tǒng)中的數(shù)據(jù)，從而解決了文件存儲和訪問速度的問題，并且實現(xiàn)海量數(shù)據(jù)的存儲和管理。在云存儲理論的研究和分析的基礎(chǔ)上，將實現(xiàn)一個基于分布式的電力云存儲系統(tǒng)，并使得該系統(tǒng)逐步成為國網(wǎng)公司重要的數(shù)據(jù)存儲平臺。 首先，分析和研究了當(dāng)前廣泛討論的云存儲模型以及其關(guān)鍵技術(shù)。詳細描述了開源云計算框架Hadoop的底層文件系統(tǒng)HDFS。 其次，在研究現(xiàn)有HDFS的基礎(chǔ)上，針對其在負載均衡機制和小文件處理上的弊端進行了深入的探討和研究，，從而提出了新的負載均衡優(yōu)化策略和小文件存儲優(yōu)化策略，設(shè)計的加權(quán)負載均衡算法在系統(tǒng)資源分配過程中，綜合考慮各節(jié)點的性能指標(biāo)因素，從而讓集群中各個節(jié)點充分的發(fā)揮作用，實現(xiàn)負載均衡。在傳統(tǒng)小文件處理方案的基礎(chǔ)上，從小文件的存儲結(jié)構(gòu)和索引結(jié)構(gòu)上進行優(yōu)化設(shè)計，大大提高了小文件在HDFS上的存儲和檢索效率。 最后，本課題在原有HDFS架構(gòu)的基礎(chǔ)上，并融合了第三章和第四章的優(yōu)化策略，實現(xiàn)了基于分布式的電力云存儲系統(tǒng)，該系統(tǒng)主要實現(xiàn)的功能有文件上傳、文件下載、文件共享、文件瀏覽等，本系統(tǒng)的實現(xiàn)對Hadoop分布式文件系統(tǒng)在電力企業(yè)中的深化應(yīng)用具有探索和指導(dǎo)意義。
【學(xué)位授予單位】：華北電力大學(xué)
【學(xué)位級別】：碩士
【學(xué)位授予年份】：2014
【分類號】：TP333

【相似文獻】

中國期刊全文數(shù)據(jù)庫 前10條

1 于翔;日立數(shù)據(jù)推出Lightning 9900 V系列存儲系統(tǒng)[J];微電腦世界;2002年11期

2 周可,張江陵,馮丹;基于數(shù)據(jù)塊的對等存儲系統(tǒng)的設(shè)計與實現(xiàn)[J];計算機工程與科學(xué);2003年03期

3 毛宇星;存儲系統(tǒng)未來發(fā)展的新趨勢[J];中國金融電腦;2004年03期

4 王洛;制造業(yè)存儲系統(tǒng)應(yīng)用選型[J];電子商務(wù)世界;2004年04期

5 李瑋;日立力推新存儲系統(tǒng)[J];微電腦世界;2004年11期

6 ;存儲系統(tǒng) 電信行業(yè)服務(wù)滿意獎[J];每周電腦報;2004年20期

7 ;存儲系統(tǒng) 金融行業(yè)服務(wù)滿意獎 電信行業(yè)應(yīng)用卓越獎[J];每周電腦報;2004年20期

8 ;存儲系統(tǒng) 制造行業(yè)產(chǎn)品創(chuàng)新獎[J];每周電腦報;2004年20期

9 ;存儲系統(tǒng) 電信行業(yè)技術(shù)領(lǐng)先獎[J];每周電腦報;2004年20期

10 ;快速恢復(fù)免重安裝——山東師范大學(xué)完成圖書館存儲系統(tǒng)建設(shè)[J];每周電腦報;2004年28期

中國重要會議論文全文數(shù)據(jù)庫 前10條

1 趙志剛;;存儲系統(tǒng)在企業(yè)信息化中的應(yīng)用[A];2005年安徽通信論文集[C];2006年

2 黃曉峰;張杰;;礦井信息中心存儲系統(tǒng)設(shè)計[A];安全高效礦井機電裝備及信息化技術(shù)——陜西省煤炭學(xué)會學(xué)術(shù)年會論文集（2011）[C];2011年

3 孫哲;李昌銀;;構(gòu)建核電高可用云存儲系統(tǒng)[A];2012電力行業(yè)信息化年會優(yōu)秀論文專輯[C];2012年

4 焦超;周天彤;李祥學(xué);李建華;;面向災(zāi)備的高性能可信存儲系統(tǒng)設(shè)計[A];第十一屆保密通信與信息安全現(xiàn)狀研討會論文集[C];2009年

5 汪位龍;;設(shè)計院存儲系統(tǒng)建設(shè)初探[A];中國公路學(xué)會計算機應(yīng)用分會2004年年會學(xué)術(shù)論文集[C];2004年

6 梅松竹;李宗伯;;Storage 7000系列混合存儲系統(tǒng)分析[A];2009年中國高校通信類院系學(xué)術(shù)研討會論文集[C];2009年

7 王克敏;張璽;胡江凱;王毅濤;;NWP資料歸檔方法及其存儲系統(tǒng)的應(yīng)用[A];中國氣象學(xué)會2006年年會“中尺度天氣動力學(xué)、數(shù)值模擬和預(yù)測”分會場論文集[C];2006年

8 孫哲;李昌銀;;DeDu:基于云計算的冗余刪除存儲系統(tǒng)[A];電力行業(yè)新一代信息技術(shù)研討會論文集[C];2011年

9 高小伍;黨齊民;林晨;;校園網(wǎng)存儲系統(tǒng)的研究與實現(xiàn)[A];中國高等教育學(xué)會教育信息化分會第十次學(xué)術(shù)年會論文集[C];2010年

10 宮海林;郭長國;苑洪亮;王懷民;;支持事務(wù)的非結(jié)構(gòu)化數(shù)據(jù)聚合存儲系統(tǒng)GSL[A];2006年全國開放式分布與并行計算機學(xué)術(shù)會議論文集（三）[C];2006年

中國重要報紙全文數(shù)據(jù)庫 前10條

1 記者　 孫永杰;存儲：中低端應(yīng)用漸成熱點[N];中國電子報;2005年

2 ;HP再度出擊 EMC腹背受敵[N];計算機世界;2000年

3 ;湖北移動建設(shè)智能存儲系統(tǒng)[N];人民郵電;2002年

4 本報記者 郭平;同有飛驥自主研發(fā)統(tǒng)一存儲系統(tǒng)[N];計算機世界;2010年

5 ;浪潮存儲為北航網(wǎng)絡(luò)中心升級[N];人民郵電;2007年

6 ;解決方案面向誰？[N];中國高新技術(shù)產(chǎn)業(yè)導(dǎo)報;2001年

7 張峰 劉平;決戰(zhàn)存儲之巔[N];網(wǎng)絡(luò)世界;2003年

8 ;賽 迪 觀 市[N];中國計算機報;2003年

9 雪梅;統(tǒng)一存儲發(fā)展新趨勢[N];人民郵電;2012年

10 宋家雨;山東建筑大學(xué)圖書館存儲系統(tǒng)建設(shè)[N];網(wǎng)絡(luò)世界;2007年

中國博士學(xué)位論文全文數(shù)據(jù)庫 前10條

1 陸承濤;存儲系統(tǒng)性能管理問題的研究[D];華中科技大學(xué);2010年

2 聶雪軍;內(nèi)容感知存儲系統(tǒng)中信息信息生命周期管理關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年

3 羅東健;大規(guī)模存儲系統(tǒng)高可靠性關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年

4 聶雪軍;內(nèi)容感知存儲系統(tǒng)中信息生命周期管理關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2010年

5 王鵬;低密度奇偶校驗碼應(yīng)用于存儲系統(tǒng)的關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2013年

6 刁瑩;用數(shù)學(xué)建模方法評價存儲系統(tǒng)性能[D];哈爾濱工程大學(xué);2013年

7 符青云;面向大規(guī)模流媒體服務(wù)的高性能存儲系統(tǒng)研究[D];電子科技大學(xué);2009年

8 王玉林;多節(jié)點容錯存儲系統(tǒng)的數(shù)據(jù)與緩存組織研究[D];電子科技大學(xué);2010年

9 田敬;對等存儲系統(tǒng)中的數(shù)據(jù)可用性與安全性研究[D];北京大學(xué);2007年

10 李懷陽;進化存儲系統(tǒng)數(shù)據(jù)組織模式研究[D];華中科技大學(xué);2006年

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條

1 許偉民;非編網(wǎng)存儲系統(tǒng)規(guī)劃與分析[D];廈門大學(xué);2008年

2 王宇德;進化存儲系統(tǒng)的研究及其關(guān)鍵技術(shù)分析[D];華中科技大學(xué);2004年

3 雷小強;基于閃存的混合式存儲系統(tǒng)研究[D];華中科技大學(xué);2011年

4 吳永發(fā);面向終端應(yīng)用的云存儲系統(tǒng)研究與設(shè)計[D];廣東工業(yè)大學(xué);2013年

5 胡偉明;云存儲系統(tǒng)的設(shè)計與實現(xiàn)[D];中國地質(zhì)大學(xué)（北京）;2013年

6 吉永光;樹型結(jié)構(gòu)存儲系統(tǒng)設(shè)計與層間緩存技術(shù)[D];華中科技大學(xué);2007年

7 戴澤福;高性能層次并行流存儲系統(tǒng)研究與實現(xiàn)[D];國防科學(xué)技術(shù)大學(xué);2007年

8 王強;社交網(wǎng)站的群集存儲系統(tǒng)的研究與設(shè)計[D];上海交通大學(xué);2009年

9 馬墨峰;基于存儲局域網(wǎng)的存儲系統(tǒng)的實現(xiàn)[D];西北工業(yè)大學(xué);2001年

10 伍開文;低能耗存儲系統(tǒng)的設(shè)計與實現(xiàn)[D];華中科技大學(xué);2012年

本文編號：1213341