喀斯特石漠化數(shù)據(jù)多源異構(gòu)、涉及面廣,石漠化成因問題復(fù)雜。為更好地揭示喀斯特石漠化的發(fā)生發(fā)展及其變化規(guī)律,解決石漠化治理中的科技難點,將大數(shù)據(jù)技術(shù)引入喀斯特石漠化領(lǐng)域。厘清喀斯特石漠化大數(shù)據(jù)定義,結(jié)合喀斯特石漠化大數(shù)據(jù)要求,從大數(shù)據(jù)平臺、基礎(chǔ)設(shè)施平臺、技術(shù)平臺、應(yīng)用服務(wù)平臺、運維平臺5方面構(gòu)建喀斯特石漠化大數(shù)據(jù)平臺,旨在為喀斯特地區(qū)石漠化綜合治理、監(jiān)測預(yù)警、生態(tài)修復(fù)和生態(tài)產(chǎn)業(yè)發(fā)展提供新的技術(shù)手段和決策支持。 

【文章來源】：貴州師范大學(xué)學(xué)報(自然科學(xué)版). 2020,38(04)

【文章頁數(shù)】：8 頁

【部分圖文】：

喀斯特石漠化大數(shù)據(jù)平臺登錄界面

數(shù)據(jù)源是大數(shù)據(jù)平臺的第一要素,是喀斯特石漠化大數(shù)據(jù)平臺建設(shè)的關(guān)鍵支撐。如何增強數(shù)據(jù)采集與獲取能力,有效集成并融合石漠化各類相關(guān)數(shù)據(jù),是構(gòu)建喀斯特石漠化大數(shù)據(jù)平臺的前提和基礎(chǔ)�？λ固厥瘮�(shù)據(jù)類型多樣,不僅包括自然地理環(huán)境本底數(shù)據(jù)、土地利用現(xiàn)狀數(shù)據(jù)、實時監(jiān)測數(shù)據(jù)、多源遙感數(shù)據(jù),還包括石漠化生態(tài)產(chǎn)業(yè)數(shù)據(jù)、社會經(jīng)濟調(diào)查數(shù)據(jù)、能源結(jié)構(gòu)分布數(shù)據(jù)、專項調(diào)查數(shù)據(jù)、石漠化治理工程數(shù)據(jù)、科學(xué)研究數(shù)據(jù)、監(jiān)測站水文站等收集的數(shù)據(jù),并且這些數(shù)據(jù)分布在自然資源、地質(zhì)、發(fā)改、規(guī)劃、農(nóng)業(yè)、林業(yè)、統(tǒng)計、氣象、水利、能源、科研院所等眾多部門。例如,地理本底數(shù)據(jù)中包含有地形、地貌、水文、洞穴分布、土壤、巖性、植被等也分屬在不同部門;土地利用現(xiàn)狀數(shù)據(jù)、各類遙感影像及解譯數(shù)據(jù)、水土流失等國土數(shù)據(jù);各地面氣象站、氣象衛(wèi)星、氣象雷達(dá)等監(jiān)測的氣象數(shù)據(jù);石漠化治理的工程布局?jǐn)?shù)據(jù)、治理產(chǎn)業(yè)布局、農(nóng)林草生態(tài)工程數(shù)據(jù)等各類工程數(shù)據(jù);石漠化區(qū)石漠化現(xiàn)狀等級、土壤養(yǎng)分、理化性質(zhì)及野外調(diào)查數(shù)據(jù)等各類科研數(shù)據(jù)。疊加社會、經(jīng)濟等人文要素,再考慮1 a、10 a、30 a、50 a不同時間尺度,全球、國家、縣域、小流域不同空間尺度,從而形成了多源異構(gòu)、時空交替、復(fù)雜非線性的海量數(shù)據(jù)。隨著物聯(lián)網(wǎng)、5G技術(shù)及“天空地一體化”技術(shù)發(fā)展,喀斯特石漠化數(shù)據(jù)來源將不斷擴展,多媒體、各類APP數(shù)據(jù)、地理位置數(shù)據(jù)、文字短報數(shù)據(jù)、各類傳感器設(shè)備采集數(shù)據(jù)等也成為喀斯特石漠化數(shù)據(jù)來源的新渠道。大數(shù)據(jù)時代,喀斯特石漠化數(shù)據(jù)的空間分布范圍更廣、時效性更強、數(shù)據(jù)量更大、內(nèi)容更龐雜,這對石漠化大數(shù)據(jù)的采集獲取、存儲管理及處理分析等提出了更高要求[7]。

數(shù)據(jù)采集就是搜集符合數(shù)據(jù)挖掘要求的原始數(shù)據(jù)[14-15]。數(shù)據(jù)采集在大數(shù)據(jù)研究與應(yīng)用極為重要。數(shù)據(jù)采集工作做得好,大數(shù)據(jù)集成、分析與管理工作才能有序進行[20]。根據(jù)采集數(shù)據(jù)的類型可以分為不同的采集方式,主要有傳感器采集、網(wǎng)絡(luò)數(shù)據(jù)采集、系統(tǒng)日志采集以及其他數(shù)據(jù)采集[7,14,17]等�？λ固厥鷳B(tài)環(huán)境數(shù)據(jù)采集最常用、操作簡單的手段就是通過傳感器采集,外業(yè)科技人員利用無線或有線傳感器設(shè)備采集了大量的地質(zhì)災(zāi)害調(diào)查、石漠化治理監(jiān)測、生態(tài)環(huán)境監(jiān)測與調(diào)查、植被監(jiān)測和水土流失監(jiān)測等,常用的土壤溫濕度、空氣溫濕度、雨量、光照傳感器等都是生態(tài)環(huán)境監(jiān)測的必配;網(wǎng)絡(luò)數(shù)據(jù)采集主要針對非結(jié)構(gòu)化數(shù)據(jù)的采集,是通過網(wǎng)絡(luò)爬蟲工具或網(wǎng)頁公開的API從各類網(wǎng)頁上獲取的非結(jié)構(gòu)數(shù)據(jù),并以結(jié)構(gòu)化的方式存儲到統(tǒng)一的本地數(shù)據(jù)文件。對于網(wǎng)絡(luò)流量的采集還可以使用DPI或DFI等帶寬管理技術(shù)進行處理。Apache的Chukwa、Cloudera的Flume、Facebook的Scribe和Linkedin的Kafka等[17,19,21]均采用系統(tǒng)日志采集,也是大多數(shù)互聯(lián)網(wǎng)企業(yè)[21]對海量數(shù)據(jù)采集的主要工具。另外,國家規(guī)定的保密性數(shù)據(jù),必須按照國家信息技術(shù)大數(shù)據(jù)安全相關(guān)標(biāo)準(zhǔn)嚴(yán)格遵守保密規(guī)定;對于企業(yè)生產(chǎn)經(jīng)營數(shù)據(jù)或科學(xué)研究數(shù)據(jù)等保密性數(shù)據(jù),通過簽訂保密協(xié)議、技術(shù)合作或有償購買服務(wù),在遵守國家數(shù)據(jù)保密相關(guān)標(biāo)準(zhǔn)和數(shù)據(jù)保護知識產(chǎn)權(quán)的情況下,采用使用特定系統(tǒng)接口等相關(guān)方式采集數(shù)據(jù),確保數(shù)據(jù)的安全性。3.3.1.2 數(shù)據(jù)傳輸

【參考文獻】：
期刊論文
[1]大數(shù)據(jù)技術(shù)在生態(tài)環(huán)境領(lǐng)域的應(yīng)用綜述[J]. 熊麗君,袁明珠,吳建強.  生態(tài)環(huán)境學(xué)報. 2019(12)
[2]時空大數(shù)據(jù)背景下并行數(shù)據(jù)處理分析挖掘的進展及趨勢[J]. 關(guān)雪峰,曾宇媚.  地理科學(xué)進展. 2018(10)
[3]第三次石漠化監(jiān)測主要技術(shù)特點與存在問題分析[J]. 李夢先,但新球,吳協(xié)保,吳照柏.  中南林業(yè)調(diào)查規(guī)劃. 2018(03)
[4]基于大數(shù)據(jù)的政府環(huán)境決策能力建設(shè)[J]. 鄔曉燕.  行政管理改革. 2017(09)
[5]生態(tài)環(huán)境大數(shù)據(jù)平臺架構(gòu)和技術(shù)初探[J]. 趙芬,張麗云,趙苗苗,邵蕊,劉麗香,趙海鳳,徐明.  生態(tài)學(xué)雜志. 2017(03)
[6]大數(shù)據(jù)在生態(tài)環(huán)境領(lǐng)域的應(yīng)用進展與展望[J]. 趙苗苗,趙師成,張麗云,趙芬,邵蕊,劉麗香,趙海鳳,徐明.  應(yīng)用生態(tài)學(xué)報. 2017(05)
[7]網(wǎng)絡(luò)安全態(tài)勢監(jiān)控機制與模型研究[J]. 劉鵬,陳厚武,房瀟,楊健.  信息網(wǎng)絡(luò)安全. 2015(09)
[8]大數(shù)據(jù)系統(tǒng)綜述[J]. 李學(xué)龍,龔海剛.  中國科學(xué):信息科學(xué). 2015(01)
[9]農(nóng)業(yè)大數(shù)據(jù)綜述[J]. 張浩然,李中良,鄒騰飛,魏旭陽,楊國才.  計算機科學(xué). 2014(S2)
[10]大數(shù)據(jù):概念、技術(shù)及應(yīng)用研究綜述[J]. 方巍,鄭玉,徐江.  南京信息工程大學(xué)學(xué)報(自然科學(xué)版). 2014(05)

博士論文
[1]林業(yè)資源信息云計算服務(wù)體系研究[D]. 孫偉.中國林業(yè)科學(xué)研究院 2012

碩士論文
[1]喀斯特石漠化治理農(nóng)村專業(yè)合作經(jīng)濟組織培育與生態(tài)產(chǎn)業(yè)模式[D]. 劉艷鴻.貴州師范大學(xué) 2018
[2]基于卷積神經(jīng)網(wǎng)絡(luò)的語音情感識別[D]. 陳曉東.華南理工大學(xué) 2015
[3]數(shù)據(jù)清洗的若干關(guān)鍵技術(shù)研究[D]. 包從劍.江蘇大學(xué) 2007



本文編號：3335733