本文關(guān)鍵詞：基于HDFS的創(chuàng)新知識(shí)云平臺(tái)存儲(chǔ)架構(gòu)的研究與設(shè)計(jì)

  更多相關(guān)文章： 創(chuàng)新知識(shí) HDFS 小文件存儲(chǔ) 單點(diǎn)故障

【摘要】：針對(duì)現(xiàn)有存儲(chǔ)結(jié)構(gòu)無法滿足海量創(chuàng)新知識(shí)帶來的存儲(chǔ)及服務(wù)需求的問題,提出一種改進(jìn)的HDFS(Hadoop Distributed File System)分布式存儲(chǔ)系統(tǒng)并應(yīng)用到創(chuàng)新知識(shí)云平臺(tái)。首先引入包文件及分布式索引服務(wù),改進(jìn)HDFS小文件存儲(chǔ)的效率問題,然后通過優(yōu)化HDFS的命名空間備份及故障恢復(fù)服務(wù),實(shí)現(xiàn)可用性更強(qiáng)、資源利用率更高的HDFS高可用架構(gòu)。通過系統(tǒng)的設(shè)計(jì)和實(shí)現(xiàn)證明優(yōu)化工作大大降低了命名節(jié)點(diǎn)的內(nèi)存壓力,提高了集群的可用性,并且改進(jìn)的HDFS存儲(chǔ)系統(tǒng)可以滿足創(chuàng)新知識(shí)云平臺(tái)的存儲(chǔ)需求。
【作者單位】： 河北工業(yè)大學(xué)計(jì)算機(jī)科學(xué)與軟件學(xué)院;
【關(guān)鍵詞】： 創(chuàng)新知識(shí) HDFS 小文件存儲(chǔ) 單點(diǎn)故障
【分類號(hào)】：TP333;TP393.09
【正文快照】： 0引言一直以來創(chuàng)新都是國內(nèi)外各行各業(yè)在場(chǎng)競(jìng)爭中關(guān)注的重點(diǎn)之一,我國更是將科技創(chuàng)新作為國家的基本戰(zhàn)略。其中,建立創(chuàng)新平臺(tái)對(duì)創(chuàng)新知識(shí)進(jìn)行全社會(huì)共享是促進(jìn)創(chuàng)新發(fā)展過程中一個(gè)必不可少的環(huán)節(jié)。創(chuàng)新知識(shí)[1]的復(fù)雜性以及其量級(jí)帶來的是計(jì)算的復(fù)雜性和服務(wù)的動(dòng)態(tài)性要求,這正與，

本文編號(hào)：692649