基于分布式的智慧社區(qū)存儲(chǔ)技術(shù)研究與應(yīng)用
發(fā)布時(shí)間:2023-05-12 18:05
隨著移動(dòng)互聯(lián)網(wǎng)時(shí)代的蓬勃發(fā)展,行業(yè)應(yīng)用系統(tǒng)的規(guī)模迅速擴(kuò)大,使其產(chǎn)生的數(shù)據(jù)量呈爆發(fā)式增長(zhǎng),海量數(shù)據(jù)對(duì)數(shù)據(jù)庫(kù)的存儲(chǔ)容量造成了嚴(yán)峻的考驗(yàn)。因此,如何應(yīng)對(duì)海量數(shù)據(jù)存儲(chǔ)、用戶的高并發(fā)訪問(wèn)和系統(tǒng)的高可用性,成為了目前企業(yè)所困擾的問(wèn)題。傳統(tǒng)數(shù)據(jù)庫(kù)因其性能瓶頸以及擴(kuò)展困難問(wèn)題,已經(jīng)逐漸無(wú)法滿足海量數(shù)據(jù)的存儲(chǔ)及其性能要求。而分布式數(shù)據(jù)庫(kù)的出現(xiàn)有效地解決了這些問(wèn)題,分布式數(shù)據(jù)庫(kù)結(jié)合計(jì)算機(jī)網(wǎng)絡(luò)將多臺(tái)數(shù)據(jù)庫(kù)服務(wù)器邏輯上連接在一起,構(gòu)建出一個(gè)分布式集群,從而分散了單臺(tái)數(shù)據(jù)庫(kù)的壓力。針對(duì)智慧社區(qū)項(xiàng)目遇到的海量數(shù)據(jù)存儲(chǔ)以及高并發(fā)問(wèn)題,本文采用Mycat數(shù)據(jù)庫(kù)中間件作為構(gòu)建分布式數(shù)據(jù)庫(kù)的關(guān)鍵技術(shù)。結(jié)合智慧社區(qū)項(xiàng)目的實(shí)際需求,對(duì)項(xiàng)目中原有的集中式存儲(chǔ)方案進(jìn)行改進(jìn),提出了一個(gè)基于Mycat的分布式存儲(chǔ)方案。本文的主要工作內(nèi)容如下:(1)以Mycat中間件為關(guān)鍵技術(shù)來(lái)實(shí)現(xiàn)數(shù)據(jù)庫(kù)的讀寫分離、數(shù)據(jù)切分和故障切換,從而提升系統(tǒng)的讀寫性能、擴(kuò)展性、高可用性。(2)針對(duì)數(shù)據(jù)整合過(guò)程中的數(shù)據(jù)排序進(jìn)行優(yōu)化,對(duì)其中使用的堆排序算法進(jìn)行改進(jìn)。通過(guò)減少排序過(guò)程中的比較次數(shù),從而有效地減少算法的時(shí)間開銷。最終使Mycat在數(shù)據(jù)排序過(guò)程中的運(yùn)行時(shí)...
【文章頁(yè)數(shù)】:68 頁(yè)
【學(xué)位級(jí)別】:碩士
【文章目錄】:
摘要
Abstract
1 緒論
1.1 研究背景與研究意義
1.2 國(guó)內(nèi)外研究現(xiàn)況
1.3 論文研究?jī)?nèi)容
1.4 論文組織結(jié)構(gòu)
2 相關(guān)技術(shù)研究
2.1 分布式數(shù)據(jù)庫(kù)
2.1.1 分布式數(shù)據(jù)庫(kù)的概念
2.1.2 分布式數(shù)據(jù)庫(kù)的特點(diǎn)
2.2 Mycat數(shù)據(jù)庫(kù)中間件
2.2.1 Mycat的概念
2.2.2 Mycat的關(guān)鍵技術(shù)
2.2.3 Mycat與其他中間件的區(qū)別與優(yōu)勢(shì)
2.3 HAProxy+Keepalived
2.3.1 HAProxy技術(shù)
2.3.2 Keepalived技術(shù)
2.4 本章小結(jié)
3 分布式存儲(chǔ)方案需求分析
3.1 智慧社區(qū)項(xiàng)目背景
3.2 存儲(chǔ)方案需求分析
3.3 視頻圖像存儲(chǔ)方案
3.4 本章小結(jié)
4 數(shù)據(jù)切分方案設(shè)計(jì)與實(shí)現(xiàn)
4.1 數(shù)據(jù)切分總體設(shè)計(jì)
4.2 垂直切分方案
4.3 水平切分方案
4.4 跨庫(kù)查詢方案
4.5 數(shù)據(jù)切分方案實(shí)現(xiàn)
4.6 數(shù)據(jù)整合優(yōu)化
4.6.1 數(shù)據(jù)路由
4.6.2 數(shù)據(jù)排序優(yōu)化
4.6.3 數(shù)據(jù)排序優(yōu)化實(shí)現(xiàn)
4.7 本章小結(jié)
5 基于Mycat的分布式存儲(chǔ)方案設(shè)計(jì)與實(shí)現(xiàn)
5.1 存儲(chǔ)方案總體設(shè)計(jì)
5.2 讀寫分離方案
5.2.1 讀寫分離方案設(shè)計(jì)
5.2.2 讀寫分離方案實(shí)現(xiàn)
5.3 基于HAProxy+Keepalived的高可用方案
5.3.1 高可用方案設(shè)計(jì)
5.3.2 高可用方案實(shí)現(xiàn)
5.4 本章小結(jié)
6 驗(yàn)證與分析
6.1 環(huán)境搭建
6.2 數(shù)據(jù)排序測(cè)試
6.3 高可用測(cè)試
6.4 性能測(cè)試
6.5 本章小結(jié)
7 總結(jié)與展望
參考文獻(xiàn)
致謝
附錄1 攻讀碩士學(xué)位期間參與的項(xiàng)目和發(fā)表論文
本文編號(hào):3814366
【文章頁(yè)數(shù)】:68 頁(yè)
【學(xué)位級(jí)別】:碩士
【文章目錄】:
摘要
Abstract
1 緒論
1.1 研究背景與研究意義
1.2 國(guó)內(nèi)外研究現(xiàn)況
1.3 論文研究?jī)?nèi)容
1.4 論文組織結(jié)構(gòu)
2 相關(guān)技術(shù)研究
2.1 分布式數(shù)據(jù)庫(kù)
2.1.1 分布式數(shù)據(jù)庫(kù)的概念
2.1.2 分布式數(shù)據(jù)庫(kù)的特點(diǎn)
2.2 Mycat數(shù)據(jù)庫(kù)中間件
2.2.1 Mycat的概念
2.2.2 Mycat的關(guān)鍵技術(shù)
2.2.3 Mycat與其他中間件的區(qū)別與優(yōu)勢(shì)
2.3 HAProxy+Keepalived
2.3.1 HAProxy技術(shù)
2.3.2 Keepalived技術(shù)
2.4 本章小結(jié)
3 分布式存儲(chǔ)方案需求分析
3.1 智慧社區(qū)項(xiàng)目背景
3.2 存儲(chǔ)方案需求分析
3.3 視頻圖像存儲(chǔ)方案
3.4 本章小結(jié)
4 數(shù)據(jù)切分方案設(shè)計(jì)與實(shí)現(xiàn)
4.1 數(shù)據(jù)切分總體設(shè)計(jì)
4.2 垂直切分方案
4.3 水平切分方案
4.4 跨庫(kù)查詢方案
4.5 數(shù)據(jù)切分方案實(shí)現(xiàn)
4.6 數(shù)據(jù)整合優(yōu)化
4.6.1 數(shù)據(jù)路由
4.6.2 數(shù)據(jù)排序優(yōu)化
4.6.3 數(shù)據(jù)排序優(yōu)化實(shí)現(xiàn)
4.7 本章小結(jié)
5 基于Mycat的分布式存儲(chǔ)方案設(shè)計(jì)與實(shí)現(xiàn)
5.1 存儲(chǔ)方案總體設(shè)計(jì)
5.2 讀寫分離方案
5.2.1 讀寫分離方案設(shè)計(jì)
5.2.2 讀寫分離方案實(shí)現(xiàn)
5.3 基于HAProxy+Keepalived的高可用方案
5.3.1 高可用方案設(shè)計(jì)
5.3.2 高可用方案實(shí)現(xiàn)
5.4 本章小結(jié)
6 驗(yàn)證與分析
6.1 環(huán)境搭建
6.2 數(shù)據(jù)排序測(cè)試
6.3 高可用測(cè)試
6.4 性能測(cè)試
6.5 本章小結(jié)
7 總結(jié)與展望
參考文獻(xiàn)
致謝
附錄1 攻讀碩士學(xué)位期間參與的項(xiàng)目和發(fā)表論文
本文編號(hào):3814366
本文鏈接:http://www.sikaile.net/kejilunwen/jisuanjikexuelunwen/3814366.html
最近更新
教材專著