本文關鍵詞： OpenStack Swift 云存儲 大文件 存儲方案　出處：《計算機工程與設計》2015年02期 　論文類型：期刊論文

【摘要】：為解決開源云平臺OpenStack的對象存儲服務Swift在存儲GB級大文件方面的不足,提出基于文件分割、片段合并、并行處理的GB級大文件的存儲方案。分析Swift體系結構及其特點,在此基礎上構建云存儲系統(tǒng)的層次架構;制定GB級大文件的存儲策略,設計關鍵數(shù)據(jù)結構和上傳下載的核心流程,使用Java多線程實現(xiàn)該方案。部署云存儲實驗環(huán)境,通過實驗驗證了該方案的可行性,該方案突破了Swift對文件大小的限制,提高了文件的上傳和下載速度。
[Abstract]:In order to solve the problem of object storage service (Swift) in open source cloud platform (OpenStack) in storing large files of GB level, file segmentation and fragment merging are proposed. The storage scheme of large files of GB level in parallel processing. The Swift architecture and its characteristics are analyzed, and then the hierarchical architecture of cloud storage system is constructed. The key data structure and the core process of uploading and downloading are designed. The scheme is implemented by Java multithreading. The cloud storage experimental environment is deployed. The feasibility of the scheme is verified by experiments. The scheme breaks through the limitation of Swift on file size and improves the speed of uploading and downloading files.
【作者單位】： 北京工業(yè)大學計算機學院;
【分類號】：TP333
【正文快照】： 0引言目前面對海量數(shù)據(jù)的存儲需求,傳統(tǒng)的數(shù)據(jù)存儲方案在存儲容量、數(shù)據(jù)的可靠性、存儲成本等方向存在很大的不足。云存儲[1,2]具有自身獨特的優(yōu)勢,可以動態(tài)、靈活地進行擴展和配置,使用戶可以通過網(wǎng)絡按需獲得云存儲的軟硬件資源。OpenStack[3,4]是一個開源的云計算平臺,它的

【參考文獻】

相關期刊論文 前2條

1 曾文英;趙躍龍;尚敏;;云計算及云存儲生態(tài)系統(tǒng)研究[J];計算機研究與發(fā)展;2011年S1期

2 蔣溢;孫雪濤;楊川;;Swift云存儲環(huán)境下基于I/O負載均衡的讀取策略[J];計算機工程與設計;2013年09期

【共引文獻】

相關期刊論文 前10條

1 從立鋼;郭利菊;;云存儲系統(tǒng)安全技術研究[J];長春理工大學學報(自然科學版);2014年03期

2 費賢舉;王樹鋒;王文;;一種海量大數(shù)據(jù)云存儲系統(tǒng)框架設計[J];常州工學院學報;2014年03期

3 趙穎;;云計算及云儲存生態(tài)系統(tǒng)研究[J];太原城市職業(yè)技術學院學報;2014年08期

4 王治中;張慶君;呂科;;大數(shù)據(jù)時代航天遙感系統(tǒng)的挑戰(zhàn)和機遇[J];工程研究-跨學科視野中的工程;2014年03期

5 琚忠云;周濤;李精精;肖澤軍;;云計算在核安全分析中的應用研究[J];工業(yè)安全與環(huán)保;2014年10期

6 郝亮;崔剛;曲明成;柯文德;;云計算能耗資源調度優(yōu)化關鍵技術研究[J];智能計算機與應用;2014年05期

7 吳秋萍;;推動云計算生態(tài)系統(tǒng)發(fā)展研究——以廣佛肇一體化為例[J];電腦知識與技術;2014年31期

8 楊金鳳;;云時代背景下IT企業(yè)的戰(zhàn)略選擇研究[J];中國管理信息化;2015年04期

9 趙偉;卓偉;李占波;王志華;;基于云計算的一種新的數(shù)據(jù)交換架構[J];計算機工程與科學;2013年08期

10 陳聯(lián)誠;胡月明;張飛揚;段文杰;余平祥;;農產品安全追溯系統(tǒng)的云計算技術性能提升設計[J];農業(yè)工程學報;2013年24期

相關會議論文 前2條

1 Gang Zhao;Chen LiJuan;Ye QiuXu;;Applied Research of Cloud Computing on the Sharing of Educational Information Resource[A];2013年教育技術與管理科學國際會議論文集[C];2013年

2 張峰;李基亮;;校園私有云存儲方案與探索[A];中國高等教育學會教育信息化分會第十二次學術年會論文集[C];2014年

相關博士學位論文 前2條

1 姜春茂;基于移動P2P的分布式存儲和傳輸機制研究[D];哈爾濱工程大學;2013年

2 夏純中;云存儲多數(shù)據(jù)中心QoS保障機制研究[D];江蘇大學;2014年

相關碩士學位論文 前10條

1 葉嬌;云計算技術在農業(yè)信息共享服務中的研究與應用[D];吉林農業(yè)大學;2013年

2 熊智;基于XCP云平臺的I/O監(jiān)控的研究與實現(xiàn)[D];華南理工大學;2013年

3 李寧寧;云計算環(huán)境中虛擬機增量遷移技術的研究[D];電子科技大學;2013年

4 馮黎明;云環(huán)境下無線傳感器網(wǎng)絡服務研究[D];南京師范大學;2013年

5 賈玉輝;面向語音交互的云計算系統(tǒng)的研究[D];中國海洋大學;2013年

6 韓博聞;云計算運維平臺服務控制子系統(tǒng)的設計與實現(xiàn)[D];哈爾濱工業(yè)大學;2013年

7 陳欣;云計算環(huán)境中虛擬化技術的研究與實踐[D];北京工業(yè)大學;2013年

8 黃彩鋒;基于HDFS分布式并行文件系統(tǒng)副本策略研究[D];浙江師范大學;2013年

9 雷棠棣;企業(yè)級MapReduce系統(tǒng)失效恢復機制的設計與實現(xiàn)[D];哈爾濱工業(yè)大學;2012年

10 肖磊;基于云計算的移動商務研究與實現(xiàn)[D];南昌航空大學;2013年

【二級參考文獻】

相關期刊論文 前1條

1 田冠華;孟丹;詹劍鋒;;云計算環(huán)境下基于失效規(guī)則的資源動態(tài)提供策略[J];計算機學報;2010年10期

【相似文獻】

相關期刊論文 前10條

1 ;上海信天喜獲華東首份SWIFT客戶合同[J];通信世界;2004年04期

2 劉春燕;;SWIFT促進業(yè)務標準化和自動化[J];金融電子化;2006年02期

3 沈國華;;SWIFT在我國商業(yè)銀行的應用及其前景[J];電腦與電信;2007年02期

4 袁俊德;高國奇;李躍華;;SWIFT的基本架構與技術發(fā)展[J];中國金融電腦;2007年05期

5 楊士華;;SWIFT在中國的發(fā)展和應用[J];金融電子化;2008年10期

6 李赫;;SWIFT與東亞的合作及啟示[J];華南金融電腦;2008年05期

7 毛翔昊;;中國農業(yè)發(fā)展銀行SWIFT系統(tǒng)升級實錄[J];中國金融電腦;2012年08期

8 ;SHENZHEN POST IN SWIFT DEVELOPMENT[J];中國郵政;1988年01期

9 楊英;Swift系統(tǒng)[J];管理科學文摘;1995年06期

10 張卓其;國際環(huán)球同業(yè)財務電信系統(tǒng)SWIFT[J];信息系統(tǒng)工程;1997年09期

相關會議論文 前4條

1 林一清;;Swift/BAT observations for X-ray flashes[A];中國天文學會2007年學術年會論文集[C];2007年

2 孫峻峭;;青海中行SWIFT應用及安全[A];第十一屆全國計算機安全技術交流會論文集[C];1996年

3 張峰;李基亮;;校園私有云存儲方案與探索[A];中國高等教育學會教育信息化分會第十二次學術年會論文集[C];2014年

4 何友文;;強流星雨及其電離效應觀測與研究[A];1998年中國地球物理學會第十四屆學術年會論文集[C];1998年

相關重要報紙文章 前10條

1 河南 韓欲青;Swift 3D讓平面動起來[N];中國電腦教育報;2001年

2 記者 潘曉娟;SWIFT合作伙伴計劃助推中國金融設施建設[N];中國經濟導報;2007年

3 張?zhí)┬?SWIFT助力金融交易處理平臺[N];中國證券報;2007年

4 袁媛邋謝曉冬;中行成為內地首家SWIFT組織成員[N];上海證券報;2007年

5 雋文;SWIFT將促進中國金融市場協(xié)調發(fā)展[N];中國經濟導報;2008年

6 維德;上海信天獲華東首份SWIFT客戶合同[N];中國電子報;2004年

7 魏建玲邋張娜;SWIFT促進中國金融市場協(xié)調發(fā)展[N];國際商報;2008年

8 曾婭;上海信天喜獲華東首份SWIFT客戶合同[N];人民郵電;2004年

9 記者 潘曉娟;向中國銀行提供標準化的服務[N];中國經濟導報;2006年

10 記者 潘曉娟;借助SWIFT：中國銀行力促中國貿易發(fā)展[N];中國經濟導報;2007年

相關博士學位論文 前1條

1 俞云偉;Swift時代伽瑪射線暴及其余輝的多波段研究[D];華中師范大學;2009年

相關碩士學位論文 前2條

1 畢曉宇;商業(yè)銀行SWIFT系統(tǒng)接入及實現(xiàn)[D];電子科技大學;2005年

2 付世平;基于Swift的教育資源共享平臺的設計與實現(xiàn)[D];西安電子科技大學;2014年

，

本文編號：1473255