大數(shù)據(jù)計(jì)算與存儲(chǔ)分離技術(shù)實(shí)驗(yàn)分析
發(fā)布時(shí)間:2023-05-07 17:05
隨著大數(shù)據(jù)的發(fā)展,傳統(tǒng)的集群混合部署模式逐漸暴露出管理難、資源競(jìng)爭(zhēng)、性能相互制約等問(wèn)題。計(jì)算與存儲(chǔ)分離部署方案不斷發(fā)展,開(kāi)始呈現(xiàn)其優(yōu)勢(shì),但是在解決計(jì)算與存儲(chǔ)資源彈性擴(kuò)展、高容錯(cuò)和高可靠問(wèn)題上,且具備兼顧虛擬機(jī)和容器兩種部署方式的能力要求上,目前的方案都相形見(jiàn)絀;诖,提出并實(shí)現(xiàn)了一種基于Ceph的大數(shù)據(jù)平臺(tái)分離存儲(chǔ)方案,解耦了計(jì)算與存儲(chǔ)之間的綁定關(guān)系,同時(shí)實(shí)現(xiàn)了資源的彈性利用,并兼容了虛擬機(jī)和容器的兩種大數(shù)據(jù)部署方式。最后我們搭建了試驗(yàn)環(huán)境對(duì)方案的功能及性能進(jìn)行了測(cè)試,對(duì)上述能力進(jìn)行了驗(yàn)證。
【文章頁(yè)數(shù)】:5 頁(yè)
【文章目錄】:
1 引言
2 Hadoop計(jì)算與存儲(chǔ)分離
2.1 Hadoop計(jì)算與存儲(chǔ)分離概述
2.2 現(xiàn)有技術(shù)方案
2.2.1 Hadoop與HDFS分離部署方案
2.2.2 Hadoop與S3A分離部署方案
2.2.3 Hadoop Provided Storage分離部署方案
3 基于Ceph的Hadoop分離存儲(chǔ)方案
4 實(shí)驗(yàn)與分析
4.1 功能測(cè)試
4.2 性能測(cè)試
5 結(jié)束語(yǔ)
本文編號(hào):3810977
【文章頁(yè)數(shù)】:5 頁(yè)
【文章目錄】:
1 引言
2 Hadoop計(jì)算與存儲(chǔ)分離
2.1 Hadoop計(jì)算與存儲(chǔ)分離概述
2.2 現(xiàn)有技術(shù)方案
2.2.1 Hadoop與HDFS分離部署方案
2.2.2 Hadoop與S3A分離部署方案
2.2.3 Hadoop Provided Storage分離部署方案
3 基于Ceph的Hadoop分離存儲(chǔ)方案
4 實(shí)驗(yàn)與分析
4.1 功能測(cè)試
4.2 性能測(cè)試
5 結(jié)束語(yǔ)
本文編號(hào):3810977
本文鏈接:http://www.sikaile.net/kejilunwen/jisuanjikexuelunwen/3810977.html
最近更新
教材專(zhuān)著