<正>Apriori算法是關聯(lián)規(guī)則數(shù)據挖掘領域最經典的算法之一,但是隨著大數(shù)據時代的到來,Apriori算法已經不能滿足海量數(shù)據挖掘的要求,本文采用優(yōu)化的Spark-Apriori算法對原始的Apriori算法進行改進,充分利用了Spark的內存計算,容錯機制,RDD等優(yōu)勢。改進后的算法在性能和運行速度上較原始Apriori算法都有所提高。農業(yè)災害會對生態(tài)環(huán)境產生巨大破壞�；诖�,通過spark-apriori算法和關聯(lián)規(guī)則算法對農業(yè)災害進行預測,為采取有效措施提供數(shù)據支持。農業(yè)災害的發(fā)生不僅僅對農民生產和收益有直接的影響,還會帶來其他間接的社會經濟效應,如影響農業(yè)生產相關部門的發(fā)展,破壞資源與生態(tài)環(huán)境,甚至還會威脅到人類的生存與社會穩(wěn)定。所以通過分析已經發(fā)生的災害,來預測將要發(fā)生的災害并對其進行防

【文章頁數(shù)】：3 頁

【部分圖文】：

圖1 Hbase的三層結構圖

1）三層尋址：Zookeeper文件記錄了＿ROOT＿表的位置，＿ROOT＿記錄了.META.的位置信息，.META.記錄了用戶數(shù)據表在Region服務器中的位置信息。尋找數(shù)據存儲的地址時，用戶直接訪問Zookeeper服務器獲取，如圖1所示。2)Region服務器的工作原理：(....

圖2 Region服務器工作原理圖

2)Region服務器的工作原理：(1)一個Region服務器集群中包含多個Region服務器，每個服務器中包含了一個HLog（預寫式日志）和多個Region分區(qū)，每個Region分區(qū)包含了一個MemStore（內存中的緩存，保存最近更新的數(shù)據）和多個StoreFile（磁盤中的....

圖3 Hbase系統(tǒng)架構圖

客戶端遠程調用名稱節(jié)點，獲得文件開始部分數(shù)據塊的位置，對于該數(shù)據塊，名稱節(jié)點返回保存該數(shù)據塊的所有數(shù)據節(jié)點的地址，并根據距離客戶端遠近進行排序�？蛻舳双@得輸入流FSDataInputStream以后，調用read()函數(shù)開始讀取數(shù)據，輸入流根據前面的排序結果，選擇距離客戶端最近的....

圖4 HDFS體系架構圖

圖3Hbase系統(tǒng)架構圖2農業(yè)災害預測分析

本文編號：4048024