近年來,隨著對智慧油氣管道的研究,在維護(hù)管道的每一個環(huán)節(jié)都需要實(shí)現(xiàn)智能化。其中,在電化學(xué)保護(hù)油氣管道方面,對陰極保護(hù)裝置實(shí)現(xiàn)智能化是有待解決的問題。要實(shí)現(xiàn)陰極保護(hù)智能化管理,需要搭建一個將影響陰極保護(hù)的多種因素按區(qū)域分布式收集、存儲、分析的數(shù)據(jù)管理平臺。本文研究一種基于大數(shù)據(jù)的長輸管道區(qū)域陰極保護(hù)數(shù)據(jù)管理平臺,可以實(shí)現(xiàn)對影響陰極保護(hù)的多因素中最重要因素——土壤的數(shù)據(jù)管理,為陰極保護(hù)參數(shù)自動調(diào)整與電化學(xué)腐蝕預(yù)測提供良好平臺。論文首先根據(jù)影響陰極保護(hù)運(yùn)行和電化學(xué)腐蝕的土壤環(huán)境,利用數(shù)據(jù)挖掘中的粗糙集算法建立土壤腐蝕分級評價RS-EW-SPA模型。通過Python運(yùn)行模型,將土壤腐蝕分為4個等級,并計算每個測試點(diǎn)處土壤腐蝕等級及各指標(biāo)因素影響度大小、排序,按需求生成不同的文件。與現(xiàn)場實(shí)測數(shù)據(jù)及其事后局部分析評價結(jié)果對比驗證,表明此模型適用于油氣管道土壤腐蝕分級評價。其次,對基于Hadoop的區(qū)域陰極保護(hù)數(shù)據(jù)管理平臺的設(shè)計,包括設(shè)計總體架構(gòu),分析系統(tǒng)特點(diǎn),設(shè)計Hadoop集群架構(gòu)及搭建流程,數(shù)據(jù)分布式存儲設(shè)計及多樣查詢。最后,根據(jù)系統(tǒng)架構(gòu)部署虛擬軟、硬件環(huán)境,再利用RS-EW-SPA模型生成的文件和收集的其他與陰極保護(hù)相關(guān)的不同類型文件對平臺進(jìn)行測試,在平臺上實(shí)現(xiàn)文件上傳、存儲、分析、查詢、下載等功能。
【學(xué)位單位】：西安石油大學(xué)
【學(xué)位級別】：碩士
【學(xué)位年份】：2019
【中圖分類】：TE988.2;TP311.13
【文章目錄】：
摘要
abstract
第一章 緒論
    1.1 研究目的及意義
        1.1.1 研究的目的
        1.1.2 研究的意義
    1.2 國內(nèi)外研究現(xiàn)狀
        1.2.1 大數(shù)據(jù)技術(shù)研究現(xiàn)狀
        1.2.2 長輸管道陰極保護(hù)技術(shù)研究現(xiàn)狀
        1.2.3 大數(shù)據(jù)下長輸管道與陰極保護(hù)研究現(xiàn)狀
    1.3 章節(jié)安排
第二章 大數(shù)據(jù)相關(guān)技術(shù)簡介
    2.1 大數(shù)據(jù)的基本概念
    2.2 數(shù)據(jù)挖掘技術(shù)
    2.3 Hadoop技術(shù)概述
    2.4 HDFS分布式文件系統(tǒng)概述
    2.5 MapReduce概述
    2.6 ZooKeeper概述
    2.7 Hadoop中數(shù)據(jù)倉庫Hive概述
    2.8 本章小結(jié)
第三章 區(qū)域陰極保護(hù)研究
    3.1 區(qū)域陰極保護(hù)土壤因素分析
    3.2 土壤腐蝕分級評價模型架構(gòu)設(shè)計
    3.3 模型建立
        3.3.1 數(shù)據(jù)預(yù)處理
        3.3.2 特征加權(quán)
        3.3.3 特征向量化
    3.4 模型運(yùn)算
    3.5 模型驗證
        3.5.1 指標(biāo)測試
        3.5.2 確定決策表
        3.5.3 確定指標(biāo)權(quán)重
        3.5.4 結(jié)果對比分析
    3.6 本章小結(jié)
第四章 基于Hadoop的區(qū)域陰極保護(hù)數(shù)據(jù)管理平臺設(shè)計
    4.1 基于Hadoop的區(qū)域陰極保護(hù)數(shù)據(jù)管理平臺總體結(jié)構(gòu)
        4.1.1 系統(tǒng)的總體結(jié)構(gòu)
        4.1.2 系統(tǒng)的特點(diǎn)
    4.2 基于Hadoop的分布式集群設(shè)計
        4.2.1 搭建集群架構(gòu)
        4.2.2 集群搭建流程
        4.2.3 集群初始化
        4.2.4 集群啟動
    4.3 基于Hadoop分布式集群的數(shù)據(jù)存儲
        4.3.1 HDFS存儲
        4.3.2 HIVE存儲
    4.4 基于Hive的數(shù)據(jù)查詢
        4.4.1 外部查詢
        4.4.2 分區(qū)查詢
    4.5 本章小結(jié)
第五章 基于Hadoop的區(qū)域陰極保護(hù)數(shù)據(jù)管理平臺實(shí)現(xiàn)
    5.1 系統(tǒng)環(huán)境準(zhǔn)備
        5.1.1 Linux環(huán)境準(zhǔn)備
        5.1.2 SSH環(huán)境準(zhǔn)備
        5.1.3 JDK開發(fā)環(huán)境準(zhǔn)備
        5.1.4 ZooKeeper集群環(huán)境準(zhǔn)備
    5.2 Hadoop集群搭建
    5.3 數(shù)據(jù)存儲
    5.4 數(shù)據(jù)查詢
    5.5 本章小結(jié)
第六章 總結(jié)與展望
    6.1 論文總結(jié)
    6.2 展望
致謝
參考文獻(xiàn)
攻讀學(xué)位期間參加科研情況及獲得的學(xué)術(shù)成果

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 楊宇;;長輸管道施工中的常見問題與解決措施探析[J];全面腐蝕控制;2019年06期

2 劉兆營;;埋地長輸管道防腐方法及質(zhì)量控制途徑[J];全面腐蝕控制;2019年06期

3 劉曉軍;;長輸管道現(xiàn)場施工問題的研究[J];化工設(shè)計通訊;2018年12期

4 楊國祿;;油田長輸管道施工中存在的問題與解決對策[J];石化技術(shù);2018年01期

5 劉曉旭;;從長輸管道安全隱患整治談安全監(jiān)管創(chuàng)新——長輸管道安全隱患整治創(chuàng)新監(jiān)管的體會[J];中國石油和化工標(biāo)準(zhǔn)與質(zhì)量;2018年03期

6 馮學(xué)書;樊帆;;成品油長輸管道的發(fā)展現(xiàn)狀[J];石化技術(shù);2018年09期

7 高曉;;我國石油長輸管道存在問題及解決對策[J];化工管理;2016年36期

8 王秀錦;;南蘇丹長輸管道項目基礎(chǔ)設(shè)計概算[J];國際工程與勞務(wù);2017年02期

9 朱孟光;;石油長輸管道泄漏風(fēng)險分析及應(yīng)對研究[J];工程建設(shè)與設(shè)計;2017年02期

10 王浩;薛立勇;;埋地長輸管道防腐方法及質(zhì)量控制的要點(diǎn)分析[J];中國石油和化工標(biāo)準(zhǔn)與質(zhì)量;2017年09期

相關(guān)博士學(xué)位論文 前6條

1 李建華;基于故障樹分析的長輸管道定量風(fēng)險評價方法研究[D];蘭州理工大學(xué);2008年

2 毅力琦;長輸管道變形計算、應(yīng)變測量和健康監(jiān)測系統(tǒng)研究[D];北京化工大學(xué);2012年

3 陳朋超;長輸管道安全預(yù)警系統(tǒng)若干關(guān)鍵技術(shù)研究[D];天津大學(xué);2010年

4 李俊花;長輸液體管道泄漏監(jiān)測方法研究[D];大連理工大學(xué);2006年

5 張圣柱;油氣長輸管道事故風(fēng)險分析與選線方法研究[D];中國礦業(yè)大學(xué)(北京);2012年

6 黃福祥;大口徑長輸管道內(nèi)環(huán)縫自動焊設(shè)備及工藝研究[D];天津大學(xué);2009年

相關(guān)碩士學(xué)位論文 前10條

1 王玉婷;基于大數(shù)據(jù)的長輸管道區(qū)域陰極保護(hù)數(shù)據(jù)管理平臺研究[D];西安石油大學(xué);2019年

2 崔震;長輸管道陰極保護(hù)裝置的研究[D];西安石油大學(xué);2019年

3 倪夢;長輸管道區(qū)域陰極保護(hù)參數(shù)的數(shù)值模擬研究[D];西安石油大學(xué);2019年

4 高巍;長輸管道基礎(chǔ)數(shù)據(jù)集成平臺的研究[D];東北石油大學(xué);2018年

5 韓冷;中國石油長輸管道項目代建制管理模式研究[D];清華大學(xué);2017年

6 代微;云南省天然氣有限公司長輸管道巡檢管理系統(tǒng)的設(shè)計與實(shí)現(xiàn)[D];山東大學(xué);2018年

7 陳文艷;液氨長輸管道泄漏風(fēng)險分析及對策研究[D];首都經(jīng)濟(jì)貿(mào)易大學(xué);2011年

8 王超;長輸管道中數(shù)字管理平臺的設(shè)計及實(shí)現(xiàn)[D];東北石油大學(xué);2015年

9 楊海燕;長輸管道站場監(jiān)控系統(tǒng)的研究[D];西南石油大學(xué);2014年

10 馬欣;現(xiàn)役長輸管道風(fēng)險分析技術(shù)研究[D];蘭州理工大學(xué);2005年

本文編號：2858593