【摘要】：內(nèi)存云(RAMCloud)是一個新型的基于內(nèi)存的分布式鍵值存儲系統(tǒng),它通過高速網(wǎng)絡(luò),將數(shù)據(jù)中心的各個服務(wù)器的可利用內(nèi)存整合起來進行統(tǒng)一管理,利用磁盤實現(xiàn)數(shù)據(jù)的持久化存儲。它能夠有效地支持在線大規(guī)模小數(shù)據(jù)的存取與訪問,但是并不支持大文件的直接存取操作。針對上述問題,提出了一個基于文件分割和合并的解決方案,在此基礎(chǔ)之上,設(shè)計和實現(xiàn)了一個大文件管理模塊,并將此模塊集成到RAMCloud中。通過實驗對改進后的系統(tǒng)進行了性能測試,實驗結(jié)果表明,該系統(tǒng)能夠有效地支持大文件的存取,且與HDFS相比,讀寫速度均有著明顯的性能優(yōu)勢。在后續(xù)工作中,考慮將此系統(tǒng)集成到HDFS中當(dāng)作分布式緩存管理系統(tǒng)來使用,從而達(dá)到提高HDFS性能的目的。

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 王春靖;FAT32的優(yōu)點[J];電腦愛好者;1998年03期

2 何文才;鄭釗;劉培鶴;杜敏;;一種基于目錄數(shù)據(jù)分離存儲的文件存儲方法的研究與實現(xiàn)[J];網(wǎng)絡(luò)安全技術(shù)與應(yīng)用;2014年01期

3 飛雪散花;;手機文件存儲看我的[J];電腦迷;2012年05期

4 孫有軍;張大興;;海量圖片文件存儲去重技術(shù)研究[J];計算機應(yīng)用與軟件;2014年04期

5 ;金剛指——計算機文件存儲的保護神[J];信息安全與通信保密;2001年12期

6 趙躍龍;謝曉玲;蔡詠才;王國華;劉霖;;一種性能優(yōu)化的小文件存儲訪問策略的研究[J];計算機研究與發(fā)展;2012年07期

7 周國安;李強;陳新;胡旭;;云環(huán)境下海量小文件存儲技術(shù)研究綜述[J];信息網(wǎng)絡(luò)安全;2014年06期

8 張美芳;電子文件存儲方式的研究[J];數(shù)字與縮微影像;2005年02期

9 陶慧;于守謙;劉夏;;適于測控系統(tǒng)的文件存儲結(jié)構(gòu)研究[J];計算機應(yīng)用與軟件;2010年11期

10 方勇;史躍輝;;淺談減少地形圖電子文件存儲冗余的幾種方法[J];江西測繪;2006年02期

相關(guān)會議論文 前6條

1 任勇;朱立谷;張雷;彭建峰;;新型虛擬文件存儲系統(tǒng)的設(shè)計[A];第15屆全國信息存儲技術(shù)學(xué)術(shù)會議論文集[C];2008年

2 李浩;;基于制播分離的文件存儲和傳輸方式的探討[A];中國新聞技術(shù)工作者聯(lián)合會五屆二次理事會暨學(xué)術(shù)年會論文集（上篇）[C];2010年

3 陳海波;侯建衛(wèi);;針對海量詳單快速存儲檢索的實現(xiàn)方法[A];2011年通信與信息技術(shù)新進展——第八屆中國通信學(xué)會學(xué)術(shù)年會論文集[C];2011年

4 陳海波;侯建衛(wèi);;針對海量詳單快速存儲檢索的實現(xiàn)方法[A];2011全國無線及移動通信學(xué)術(shù)大會論文集[C];2011年

5 袁旦;張智君;;預(yù)覽時間對顏色判斷任務(wù)下客體文件存儲的影響[A];第十一屆全國心理學(xué)學(xué)術(shù)會議論文摘要集[C];2007年

6 黃步根;黃政;劉建軍;;SANYO數(shù)碼相機中被刪除視頻的恢復(fù)[A];第26次全國計算機安全學(xué)術(shù)交流會論文集[C];2011年

相關(guān)重要報紙文章 前9條

1 本報記者 郭平;Isilon擴充文件存儲產(chǎn)品線[N];計算機世界;2009年

2 本報記者 郭平;容量與性能 一樣都不能少[N];計算機世界;2010年

3 張峰;統(tǒng)一存儲 業(yè)務(wù)連續(xù)[N];網(wǎng)絡(luò)世界;2006年

4 清水　編譯;基于文件存儲大行其道[N];計算機世界;2011年

5 本報記者 郭濤;HCP Anywhere：為HDS內(nèi)容云錦上添花[N];中國計算機報;2013年

6 于翔;讓IT如業(yè)務(wù)般運營的應(yīng)用路徑[N];網(wǎng)絡(luò)世界;2009年

7 劉一冰;IBM SoNAS專攻高端存儲客戶[N];電腦商報;2010年

8 清水　編譯;云存儲：機遇下暗藏挑戰(zhàn)[N];計算機世界;2010年

9 沈建苗;互聯(lián)網(wǎng)存儲 你信得過嗎[N];計算機世界;2007年

相關(guān)碩士學(xué)位論文 前10條

1 廖家趙;面向城軌線網(wǎng)的海量小文件存儲方法的研究與實現(xiàn)[D];華南理工大學(xué);2015年

2 李長平;基于FastDFS架構(gòu)的小文件存儲系統(tǒng)的設(shè)計與實現(xiàn)[D];哈爾濱工業(yè)大學(xué);2015年

3 葉道平;基于HADOOP的海量錄音文件存儲系統(tǒng)的設(shè)計與實現(xiàn)[D];電子科技大學(xué);2014年

4 張振猛;基于Hadoop的海量文件存儲系統(tǒng)的分析與設(shè)計[D];北京工業(yè)大學(xué);2015年

5 武奇;云存儲中數(shù)據(jù)的分發(fā)與遷移機制的研究[D];長春工業(yè)大學(xué);2016年

6 周興;基于MongoDB的海量大中小文件存儲系統(tǒng)的研究與應(yīng)用[D];中國地質(zhì)大學(xué)(北京);2016年

7 張程;基于HDFS的文件存儲與讀取的優(yōu)化策略研究與應(yīng)用[D];北京工業(yè)大學(xué);2016年

8 宮海林;支持事務(wù)的文件存儲技術(shù)研究與系統(tǒng)實現(xiàn)[D];國防科學(xué)技術(shù)大學(xué);2006年

9 曹挹芬;分布式文件存儲與檢索平臺的設(shè)計與實現(xiàn)[D];湖南大學(xué);2009年

10 黃斌;并行文件存儲系統(tǒng)關(guān)鍵技術(shù)的研究[D];華南理工大學(xué);2012年

，

本文編號：2574438