發(fā)布時間：2024-03-31 14:58

　　隨著大數(shù)據(jù)時代的到來,每個人都成為了數(shù)據(jù)的生產(chǎn)者和消費者,以往的關(guān)系型數(shù)據(jù)庫難以滿足如此大規(guī)模的數(shù)據(jù)的存儲和管理,于是各大廠商紛紛推出了不同的NoSQL產(chǎn)品,HBase就是其中著名的NoSQL數(shù)據(jù)庫之一,它在研究和生產(chǎn)中都有廣泛的應(yīng)用。然而NoSQL并不能取代關(guān)系型數(shù)據(jù)庫,它們的單獨和組合使用為服務(wù)器提供了堅實的數(shù)據(jù)保障。而在選擇數(shù)據(jù)庫和數(shù)據(jù)庫投入生產(chǎn)以前,對異構(gòu)數(shù)據(jù)庫進行壓力測試也是對數(shù)據(jù)庫穩(wěn)定高效運行的保障。本文設(shè)計并實現(xiàn)了一種針對異構(gòu)數(shù)據(jù)庫的壓力測試系統(tǒng),這里的異構(gòu)數(shù)據(jù)庫就是指包括HBase在內(nèi)的NoSQL數(shù)據(jù)庫和包括Oracle、MySQL、PostgreSQL和達夢在內(nèi)的關(guān)系型數(shù)據(jù)庫。通過對異構(gòu)數(shù)據(jù)庫設(shè)計統(tǒng)一的訪問接口和測試類型,實現(xiàn)異構(gòu)數(shù)據(jù)庫壓力測試系統(tǒng)。通過該壓力測試系統(tǒng)對這些數(shù)據(jù)庫進行對比測試,得到了不同數(shù)據(jù)庫的性能特點,得到的結(jié)果符合業(yè)內(nèi)共識,驗證了該測試系統(tǒng)的可用性。通過該壓力測試系統(tǒng)對多種數(shù)據(jù)庫進行協(xié)同測試,評估了多數(shù)據(jù)庫系統(tǒng)協(xié)同工作時的性能特點。本文首先介紹了SQL數(shù)據(jù)庫和NoSQL數(shù)據(jù)庫的背景和它們相關(guān)的測試工作,針對這些測試的不足,提出了本文的研究內(nèi)容;然后...

【文章頁數(shù)】：94 頁

【學(xué)位級別】：碩士

【部分圖文】：

圖２－１?ＨＢａｓｅ單元格ｃｅｌ丨的存儲模型??

關(guān)系型數(shù)據(jù)庫不同的是，如果關(guān)系型數(shù)據(jù)庫某一列沒有數(shù)據(jù)，它一般會被設(shè)置為??ＮＵＬＬ或者默認(rèn)值，但是在ＨＢａｓｅ當(dāng)中，如果ｒｏｗｋｅｙ、列族和列對應(yīng)的ｃｅｌｌ沒??有數(shù)據(jù)，它就不會存儲它，這也是ＨＢａｓｅ的數(shù)據(jù)表是稀疏表的原因。圖２－１所示??的是用編程語言風(fēng)格表示時的一個ｃｅｌｌ....

圖２－２?ＨＢａｓｅ數(shù)據(jù)庫系統(tǒng)架構(gòu)圖??２．２．２．１?ＨＭａｓｔｅｒ、ＨＲｅｇｉｏｎＳｅｒｖｅｒ?和?ＱｕｏｒｕｍＰｅｅｒＭａｉｎ?進程??

ＨＲｅｇｉｏｎＳｅｒｖｅｒ節(jié)點的功能是存儲數(shù)據(jù)。Ｚｏｏｋｅｅｐｅｉ？的作用是為系統(tǒng)提供協(xié)同服務(wù)，??它相當(dāng)于對數(shù)據(jù)存儲系統(tǒng)提供一個分布式鎖，保證ＨＢａｓｅ數(shù)據(jù)庫擁有較高的容??錯性和可用性。ＨＢａｓｅ數(shù)據(jù)庫系統(tǒng)的整體架構(gòu)圖見圖２－２所示。??（ＣＳｅ？ｙ?—??？Ｃ????—￣４....

圖２－３?ＬＳＭ樹中的數(shù)據(jù)塊迭代合并的過程??２＿２．２．４?ＷＡＬ?介紹??

一顆很大的Ｂ＋樹分成許多很小的Ｂ＋樹，寫入操作先寫入內(nèi)存中的樹中，然后隨??著內(nèi)存中的小樹越來越大，會ｆｌｕｓｈ到磁盤中，磁盤中的樹會定期的執(zhí)行ｍｅｒｇｅ??操作，合并成一顆大樹，來優(yōu)化讀性能［１７］。圖２－３展示了這樣的過程，這樣的過??程就是２．２．２．２小節(jié)中所述的ＭｅｍＳ....

圖２＿４?ｓｏｃｉ架構(gòu)圖??１０??

一顆很大的Ｂ＋樹分成許多很小的Ｂ＋樹，寫入操作先寫入內(nèi)存中的樹中，然后隨??著內(nèi)存中的小樹越來越大，會ｆｌｕｓｈ到磁盤中，磁盤中的樹會定期的執(zhí)行ｍｅｒｇｅ??操作，合并成一顆大樹，來優(yōu)化讀性能［１７］。圖２－３展示了這樣的過程，這樣的過??程就是２．２．２．２小節(jié)中所述的ＭｅｍＳ....

本文編號：3944099