本文選題：Hadoop　切入點(diǎn)：HDFS　出處：《四川大學(xué)學(xué)報(bào)(自然科學(xué)版)》2014年06期 　論文類型：期刊論文

【摘要】：針對(duì)在Hadoop分布式文件系統(tǒng)中,系統(tǒng)默認(rèn)的數(shù)據(jù)負(fù)載均衡算法在做負(fù)載均衡決策時(shí)只根據(jù)磁盤空間使用率這單一的衡量指標(biāo)無(wú)法準(zhǔn)確反映集群中各服務(wù)器實(shí)際的工作負(fù)載狀況這一缺陷,通過(guò)研究和分析Hadoop分布式文件系統(tǒng)本身的負(fù)載均衡機(jī)制和在其基礎(chǔ)上改進(jìn)的負(fù)載均衡算法,本文提出了一種基于多衡量指標(biāo)的負(fù)載均衡方法,定義了一個(gè)衡量指標(biāo)函數(shù),然后根據(jù)該函數(shù)計(jì)算集群中各數(shù)據(jù)服務(wù)器的負(fù)載量來(lái)對(duì)集群進(jìn)行負(fù)載決策.最后通過(guò)實(shí)驗(yàn)結(jié)果表明,該方法有效地提高了Hadoop分布式文件系統(tǒng)中的負(fù)載均衡效果.
[Abstract]:In a Hadoop distributed file system, The default data load balancing algorithm can not accurately reflect the actual workload status of each server in the cluster according to the single measure of disk space utilization when making load balancing decision. By studying and analyzing the load balancing mechanism of Hadoop distributed file system and the improved load balancing algorithm based on it, a load balancing method based on multiple metrics is proposed, and a measurement index function is defined. Then the load of each data server in the cluster is calculated according to the function. Finally, the experimental results show that the proposed method can effectively improve the load balancing effect in Hadoop distributed file system.
【作者單位】： 四川大學(xué)計(jì)算機(jī)學(xué)院;
【基金】：國(guó)家自然科學(xué)基金(61173159)
【分類號(hào)】：TP333

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 陳登偉,魯智勇;網(wǎng)絡(luò)動(dòng)態(tài)負(fù)載均衡算法分析[J];現(xiàn)代電子技術(shù);2003年21期

2 趙兵選;衛(wèi)星;樊少華;藺玉;;基于累積點(diǎn)播概率的負(fù)載均衡算法研究[J];電子技術(shù);2008年09期

3 李輝;張文博;王偉;;基于節(jié)點(diǎn)分組的異構(gòu)集群負(fù)載均衡算法[J];計(jì)算機(jī)應(yīng)用研究;2009年07期

4 黃開金;羅國(guó)明;陳良;;分布式散列表中的負(fù)載均衡算法研究[J];電子質(zhì)量;2010年12期

5 邱釗;陳明銳;;Web集群負(fù)載均衡算法比較[J];現(xiàn)代計(jì)算機(jī);2006年08期

6 陳勇;;一種高效的分布式反饋流量負(fù)載均衡算法[J];計(jì)算機(jī)工程;2009年02期

7 胡志剛;張艷平;;基于目標(biāo)約束的分層動(dòng)態(tài)負(fù)載均衡算法[J];計(jì)算機(jī)應(yīng)用研究;2011年03期

8 周松泉;;一種改進(jìn)的集群動(dòng)態(tài)負(fù)載均衡算法[J];計(jì)算機(jī)與現(xiàn)代化;2012年01期

9 李新紅;張敏菊;;負(fù)載均衡算法的應(yīng)用研究[J];軟件導(dǎo)刊;2012年08期

10 李永明;李冬;;基于綜合負(fù)載動(dòng)態(tài)分組的負(fù)載均衡算法研究[J];鄭州輕工業(yè)學(xué)院學(xué)報(bào)(自然科學(xué)版);2012年06期

相關(guān)會(huì)議論文 前1條

1 張耀旭;肖征榮;;基于LTE-Advanced網(wǎng)絡(luò)自優(yōu)化的負(fù)載均衡算法[A];2011全國(guó)無(wú)線及移動(dòng)通信學(xué)術(shù)大會(huì)論文集[C];2011年

相關(guān)重要報(bào)紙文章 前1條

1 本報(bào)記者　范毅波;安全的“平方”[N];網(wǎng)絡(luò)世界;2003年

相關(guān)碩士學(xué)位論文 前10條

1 熊紀(jì)濤;校園網(wǎng)絡(luò)中自適應(yīng)負(fù)載均衡算法研究[D];電子科技大學(xué);2008年

2 馮秀玲;云計(jì)算環(huán)境下的負(fù)載均衡算法的研究與設(shè)計(jì)[D];北京郵電大學(xué);2012年

3 童瑞霞;基于動(dòng)態(tài)反饋機(jī)制的集群負(fù)載均衡算法研究[D];武漢理工大學(xué);2011年

4 楊瀟;海量安全卡設(shè)備的負(fù)載均衡研究與實(shí)現(xiàn)[D];清華大學(xué);2007年

5 魏欽磊;基于集群的動(dòng)態(tài)反饋負(fù)載均衡算法的研究[D];重慶大學(xué);2013年

6 陳廣東;流媒體服務(wù)器集群負(fù)載均衡算法研究[D];華中師范大學(xué);2006年

7 李子民;基于LVS的集群動(dòng)態(tài)負(fù)載均衡算法研究[D];電子科技大學(xué);2009年

8 張小倩;高速負(fù)載均衡算法的FPGA實(shí)現(xiàn)[D];電子科技大學(xué);2010年

9 馬衛(wèi);一種改進(jìn)的LVS集群負(fù)載均衡算法[D];華中師范大學(xué);2006年

10 丁逸;基于層次策略的動(dòng)態(tài)負(fù)載均衡算法研究[D];東南大學(xué);2005年

，

本文編號(hào)：1557506