天堂国产午夜亚洲专区-少妇人妻综合久久蜜臀-国产成人户外露出视频在线-国产91传媒一区二区三区

當(dāng)前位置:主頁 > 科技論文 > 軟件論文 >

基于云計(jì)算的冠字號(hào)碼存儲(chǔ)與查詢系統(tǒng)中的關(guān)鍵技術(shù)研究與實(shí)現(xiàn)

發(fā)布時(shí)間:2021-01-17 11:43
  冠字號(hào)碼由冠號(hào)和數(shù)字編號(hào)兩個(gè)部分組成,是人民幣的身份標(biāo)識(shí)。金融部門對(duì)冠字號(hào)碼統(tǒng)計(jì)歸檔可以有效監(jiān)管紙幣的流通情況。冠字號(hào)碼數(shù)據(jù)在掌握錢幣來源去向、揭示資金關(guān)聯(lián)、發(fā)現(xiàn)問題錢幣等方面發(fā)揮著重要的作用,F(xiàn)金設(shè)備采集的冠字號(hào)碼記錄主要由文本與圖片兩部分?jǐn)?shù)據(jù)組成,數(shù)據(jù)量巨大。關(guān)系型數(shù)據(jù)庫在處理海量冠字號(hào)碼數(shù)據(jù)時(shí)面臨巨大的挑戰(zhàn),系統(tǒng)成本高,難度大。而基于云計(jì)算的技術(shù)雖然在很多海量數(shù)據(jù)的存儲(chǔ)與查詢中得到了應(yīng)用,但是對(duì)于冠字號(hào)碼實(shí)際應(yīng)用中的多維查詢、索引構(gòu)建、小文件存儲(chǔ)與查詢等具體問題,現(xiàn)有的云平臺(tái)也存在著一些不足。本文設(shè)計(jì)并實(shí)現(xiàn)了基于云計(jì)算的冠字號(hào)碼存儲(chǔ)與查詢系統(tǒng),并對(duì)其中的部分關(guān)鍵技術(shù)進(jìn)行了研究。冠字號(hào)碼文本記錄的查詢常常會(huì)涉及到多個(gè)查詢條件,而基于云計(jì)算的NoSql數(shù)據(jù)庫采用Key-Value結(jié)構(gòu),只支持主鍵的快速查詢,對(duì)于多個(gè)非主鍵的查詢很有可能會(huì)造成全表掃描操作,查詢效率不高。本文提出了一種基于HBase的多維索引框架來實(shí)現(xiàn)冠字號(hào)碼文本信息的快速查詢。該索引框架首先設(shè)計(jì)了粗細(xì)粒度結(jié)合的多維空間索引,實(shí)現(xiàn)多維數(shù)據(jù)向一維上的投影;然后通過每個(gè)時(shí)間段內(nèi)的記錄條數(shù)對(duì)生成數(shù)據(jù)區(qū)塊的大小進(jìn)行限制,在控制H... 

【文章來源】:南京理工大學(xué)江蘇省 211工程院校

【文章頁數(shù)】:68 頁

【學(xué)位級(jí)別】:碩士

【部分圖文】:

基于云計(jì)算的冠字號(hào)碼存儲(chǔ)與查詢系統(tǒng)中的關(guān)鍵技術(shù)研究與實(shí)現(xiàn)


圖2-1?Hadoop生態(tài)系統(tǒng)??在Hadoop中有兩個(gè)核心模塊,分別是HDFS和MapReduce

系統(tǒng)架構(gòu),具體方式,讀寫數(shù)據(jù),元數(shù)據(jù)


HDFS、管理表中的數(shù)據(jù)。Client直接通過HRegionServer讀寫數(shù)據(jù),具體方式是從HMaster??中獲取元數(shù)據(jù),找到RowKey所在的HRegionServer后進(jìn)行操作。??HBase系統(tǒng)架構(gòu)如圖2-3所示。??.?Z?.、、、、???HRegsonS^ver?i?HR?g?onSefveT??-???n?丨丨丨,.議.丨????.丨丨■丨丨:{廣1…?.....丨丨.丨?????丨?"""??"?、'??HRegion?I?s?HRegion??髮?—]SJafe??>?^SkKC?1?I?f?1?f?Sioffi?Q^nSiSreT]?Ssore??|?I?1I'"?i?j?III?|-?^?卜,…??工?U?1丄[丄—i?Jj?j?j?||?[?ji}?\^i?it?1^1?J?jlUnFtel?J?J?.]??i?^?^?>

流程圖,流程,用戶表,信息


通過RowKey定位到查詢結(jié)果所在的Region以及該Region對(duì)應(yīng)的HRegionServer。??其中,-META表中記錄了用戶表中的Region信息,而-ROOT表中存儲(chǔ)了-META??表中的信息。當(dāng)發(fā)生查詢請(qǐng)求時(shí),采用類似于B+樹的三層查詢結(jié)構(gòu)。查詢流程如圖2-4??所示。??12??


本文編號(hào):2982816

資料下載
論文發(fā)表

本文鏈接:http://www.sikaile.net/kejilunwen/ruanjiangongchenglunwen/2982816.html


Copyright(c)文論論文網(wǎng)All Rights Reserved | 網(wǎng)站地圖 |

版權(quán)申明:資料由用戶e5ac3***提供,本站僅收錄摘要或目錄,作者需要?jiǎng)h除請(qǐng)E-mail郵箱bigeng88@qq.com