分布式并行文件系統(tǒng)和副本的管理策略是目前比較熱門的研究?jī)?nèi)容,近年來(lái),美國(guó)、加拿大、澳大利亞等很多國(guó)家的一些大學(xué)和科研小組都在進(jìn)行并行文件系統(tǒng)的研究,研制出一批各具特色的并行文件系統(tǒng)模型;一些計(jì)算機(jī)廠家也開(kāi)發(fā)出一批專用并行文件系統(tǒng),這些系統(tǒng)多為運(yùn)行在UNIX操作系統(tǒng)的網(wǎng)絡(luò)工作站或?qū)Ｓ貌⑿袡C(jī)上運(yùn)行,包括商用并行文件系統(tǒng)、用于研究的并行文件系統(tǒng)以及公開(kāi)源代碼的并行文件系統(tǒng)。還有為運(yùn)行Linux操作系統(tǒng)的機(jī)群設(shè)計(jì)的,HDFS作為一種新興的并行文件系統(tǒng),它既有通用并行文件的特點(diǎn),同時(shí)又有自己不同的需求和設(shè)計(jì)目標(biāo),它支持海量的大文件存儲(chǔ),文件大小一般都以GB為單位,有效地支持跑在其上的應(yīng)用程序批處理和具有高吞吐量的作業(yè)。 副本的管理策略研究是分布是并行文件系統(tǒng)中的熱門研究?jī)?nèi)容,本文提出了基于HDFS的動(dòng)態(tài)副本管理模型,包括副本放置策略、動(dòng)態(tài)副本創(chuàng)建策略和動(dòng)態(tài)副本刪除策略,這些策略動(dòng)態(tài)的對(duì)HDFS中的副本進(jìn)行管理,優(yōu)化了系統(tǒng)的性能。

【文章頁(yè)數(shù)】：57 頁(yè)

【學(xué)位級(jí)別】：碩士

【部分圖文】：

圖4.1動(dòng)態(tài)副本管理模型

圖4.1動(dòng)態(tài)副本管理模型4.3副本管理技術(shù)的基本概念本節(jié)基于分布式文件系統(tǒng)領(lǐng)域，給出HDFS動(dòng)態(tài)副本管理的基本概念。定義4.1.數(shù)據(jù)塊數(shù)據(jù)塊是HDFS中數(shù)據(jù)存儲(chǔ)的基本單位，保存在HDFS中的文件除了最后一個(gè)數(shù)塊外，其他的被默認(rèn)的分為64M大小的數(shù)據(jù)塊，這....

本文編號(hào)：3919387