ODPS平臺(tái)下的電力設(shè)備監(jiān)測(cè)大數(shù)據(jù)存儲(chǔ)與并行處理方法
本文選題:電力大數(shù)據(jù) 切入點(diǎn):公有云 出處:《電工技術(shù)學(xué)報(bào)》2017年09期 論文類(lèi)型:期刊論文
【摘要】:計(jì)算性能是制約電力大數(shù)據(jù)應(yīng)用(基于大數(shù)據(jù)的故障診斷、預(yù)測(cè)等)的關(guān)鍵問(wèn)題。利用分布式存儲(chǔ)、并行計(jì)算加速此類(lèi)數(shù)據(jù)密集型應(yīng)用是目前較有效的手段。嘗試?yán)冒⒗镌崎_(kāi)放數(shù)據(jù)處理服務(wù)(ODPS)存儲(chǔ)并加速電力設(shè)備監(jiān)測(cè)大數(shù)據(jù)分析過(guò)程。以變壓器局部放電(PD)數(shù)據(jù)相位圖譜分析(PRPD)為例,提出了適合高采樣率、時(shí)序性強(qiáng)的局部放電信號(hào)數(shù)據(jù)存儲(chǔ)方法。采用ODPS擴(kuò)展MapReduce模型(MR2)設(shè)計(jì)了"Map-Reduce-Reduce"方式的PD信號(hào)宏觀特征提取方法,提出了并行化PRPD分析算法(ODPS-PRPD),實(shí)現(xiàn)了大量PD信號(hào)的并行基本參數(shù)提取、統(tǒng)計(jì)特征計(jì)算與放電類(lèi)型識(shí)別。在實(shí)驗(yàn)室中構(gòu)造了4種放電模型并采集了大量PD信號(hào),分別在ODPS平臺(tái)上和實(shí)驗(yàn)室自建的Hadoop平臺(tái)上進(jìn)行了性能評(píng)估和成本分析。實(shí)驗(yàn)分析和結(jié)果表明,ODPS-PRPD將大量的中間過(guò)程數(shù)據(jù)(PD譜圖數(shù)據(jù)等)一直保存在內(nèi)存中,相比自建Hadoop MapReduce平臺(tái)性能明顯提升,并在數(shù)據(jù)可靠性、服務(wù)可用性以及成本方面具有明顯優(yōu)勢(shì)。
[Abstract]:Computing performance is a key problem that restricts the application of power big data (the fault diagnosis, prediction, etc.) based on big data. Parallel computing is an effective method to accelerate this kind of data intensive application. This paper attempts to use Ali Cloud Open data processing Service (ODPSs) to store and accelerate the analysis process of power equipment monitoring big data. According to the phase map analysis (PRPD) as an example, A data storage method for PD signals with high sampling rate and strong timing is proposed. A "Map-Reduce-Reduce" method for extracting macroscopic features of PD signals is designed by using ODPS extended MapReduce model (MR2). A parallel PRPD analysis algorithm, ODPS-PRPDD, is proposed. The parallel basic parameters of a large number of PD signals are extracted, the statistical characteristics are calculated and the discharge types are identified. Four discharge models are constructed and a large number of PD signals are collected in the laboratory. The performance evaluation and cost analysis were carried out on the ODPS platform and on the Hadoop platform built by the laboratory, respectively. The experimental results show that ODPS-PRPD keeps a large amount of intermediate process data and PD spectrum data in memory. Compared with the self-built Hadoop MapReduce platform, the performance of the platform is significantly improved, and it has obvious advantages in data reliability, service availability and cost.
【作者單位】: 華北電力大學(xué)控制與計(jì)算機(jī)工程學(xué)院;
【基金】:國(guó)家自然科學(xué)基金項(xiàng)目(51677072) 河北省自然科學(xué)基金項(xiàng)目(F2014502069) 中央高;究蒲袠I(yè)務(wù)費(fèi)專(zhuān)項(xiàng)資金(2016MS116,2016MS117)資助
【分類(lèi)號(hào)】:TM769
【相似文獻(xiàn)】
相關(guān)期刊論文 前10條
1 徐劍,黃成軍,錢(qián)勇;多態(tài)性局部放電簇的小波提取算法[J];上海交通大學(xué)學(xué)報(bào);2005年S1期
2 買(mǎi)買(mǎi)提·努爾;石海珍;齊鐵東;;局部放電帶電巡檢技術(shù)的應(yīng)用研究[J];科技創(chuàng)新與應(yīng)用;2013年02期
3 D.Train;徐光澤;;運(yùn)行中的高壓電壓互感器局部放電的測(cè)量[J];變壓器;1978年02期
4 沈文琪;;用計(jì)算機(jī)計(jì)測(cè)局部放電[J];電力電容器;1985年03期
5 斯特列漢格·B;李建明;;局部放電起始和熄滅電壓的含義[J];西南電力;1988年02期
6 張鵬輝,于欽學(xué),任文娥;局部放電在線窄帶檢測(cè)系統(tǒng)的研究[J];高電壓技術(shù);2000年01期
7 李新,孫才新,廖瑞金,李劍,顧樂(lè)觀;識(shí)別局部放電的新特征量——分維數(shù)的研究[J];高電壓技術(shù);2000年01期
8 趙中原,邱毓昌,馬翠姣,羅俊華,馮江,袁檢,蔡慶;分形學(xué)在局部放電特征提取中應(yīng)用初探[J];高電壓技術(shù);2001年01期
9 李劍,孫才新,陳明英,杜林,袁志堅(jiān);局部放電識(shí)別中分維數(shù)分布的研究[J];高壓電器;2001年02期
10 李劍,孫才新,杜林,李新,周nv;局部放電灰度圖象分維數(shù)的研究[J];中國(guó)電機(jī)工程學(xué)報(bào);2002年08期
相關(guān)會(huì)議論文 前10條
1 李剛;韓立臏;朱鐵劍;;數(shù)字式局部放電測(cè)試系統(tǒng)的研制[A];’02全國(guó)電工測(cè)試技術(shù)學(xué)術(shù)交流會(huì)論文集[C];2002年
2 朱祖松;張紅斌;;局部放電現(xiàn)場(chǎng)測(cè)試技術(shù)[A];’02全國(guó)電工測(cè)試技術(shù)學(xué)術(shù)交流會(huì)論文集[C];2002年
3 冉漢政;劉華昌;于成龍;;直流局部放電測(cè)試系統(tǒng)的研制[A];中國(guó)工程物理研究院科技年報(bào)(2005)[C];2005年
4 王靜;唐炬;魏剛;李劍;;統(tǒng)計(jì)參數(shù)用于局部放電模式識(shí)別的研究[A];’02全國(guó)電工測(cè)試技術(shù)學(xué)術(shù)交流會(huì)論文集[C];2002年
5 虞蒼璧;高勝友;李福祺;談克雄;;使用組合神經(jīng)網(wǎng)絡(luò)的電容器模型局部放電模式識(shí)別研究[A];’02全國(guó)電工測(cè)試技術(shù)學(xué)術(shù)交流會(huì)論文集[C];2002年
6 劉華昌;;電容器直流局部放電指紋分析[A];2008中國(guó)儀器儀表與測(cè)控技術(shù)進(jìn)展大會(huì)論文集(Ⅲ)[C];2008年
7 錢(qián)勇;黃成軍;姚林朋;郭燦新;高明月;江秀臣;;地鐵直流電纜局部放電故障分析[A];08全國(guó)電工測(cè)試技術(shù)學(xué)術(shù)交流會(huì)論文集[C];2008年
8 于成龍;吳偉;;基于超高頻傳感器的變壓器局部放電定位方法[A];第十屆沈陽(yáng)科學(xué)學(xué)術(shù)年會(huì)論文集(信息科學(xué)與工程技術(shù)分冊(cè))[C];2013年
9 王中龍;張營(yíng);戴嘉彤;王澤眾;史琳;李歡歡;;一種識(shí)別局部放電類(lèi)型的新方法[A];山東電機(jī)工程學(xué)會(huì)2012年度學(xué)術(shù)年會(huì)論文集[C];2012年
10 吳烽;;變壓器局部放電的帶電測(cè)試及在線監(jiān)測(cè)[A];2007中國(guó)電機(jī)工程學(xué)會(huì)電力系統(tǒng)自動(dòng)化專(zhuān)委會(huì)供用電管理自動(dòng)化學(xué)科組(分專(zhuān)委會(huì))二屆三次會(huì)議論文集[C];2007年
相關(guān)重要報(bào)紙文章 前1條
1 通訊員 李想 聶津;福州電業(yè)局局部放電測(cè)試技術(shù)通過(guò)鑒定[N];中國(guó)電力報(bào);2005年
相關(guān)博士學(xué)位論文 前10條
1 韓帥;頻變電—熱應(yīng)力對(duì)高頻電力變壓器絕緣特性的耦合作用機(jī)制[D];山東大學(xué);2015年
2 鄭書(shū)生;變壓器繞組中局部放電特高頻定位方法研究[D];華北電力大學(xué);2015年
3 金虎;基于多參量的GIS局部放電發(fā)展過(guò)程研究及嚴(yán)重程度評(píng)估[D];華北電力大學(xué);2015年
4 楊霽;基于小波多尺度變換的局部放電去噪與識(shí)別方法研究[D];重慶大學(xué);2004年
5 牛海清;高壓直流局部放電的模糊識(shí)別及去噪策略[D];華南理工大學(xué);2009年
6 常文治;電力電纜中間接頭典型缺陷局部放電發(fā)展過(guò)程的研究[D];華北電力大學(xué);2013年
7 劉帆;局部放電下六氟化硫分解特性與放電類(lèi)型辨識(shí)及影響因素校正[D];重慶大學(xué);2013年
8 金卓睿;變壓器局部放電超高頻監(jiān)測(cè)分形天線與最優(yōu)小波去噪及信號(hào)識(shí)別研究[D];重慶大學(xué);2008年
9 畢為民;變壓器局部放電監(jiān)測(cè)中以小波包去噪和統(tǒng)計(jì)量識(shí)別放電模式的研究[D];重慶大學(xué);2003年
10 杜林;大電機(jī)主絕緣局部放電測(cè)量及老化特征研究[D];重慶大學(xué);2004年
相關(guān)碩士學(xué)位論文 前10條
1 史曉東;局部放電超聲波傳感器檢測(cè)技術(shù)研究[D];河北大學(xué);2015年
2 吳炬卓;中壓電纜局部放電帶電檢測(cè)的白噪聲抑制和放電類(lèi)型識(shí)別方法研究[D];華南理工大學(xué);2015年
3 陳武奮;局放的高頻電流和超聲信號(hào)與SVR估計(jì)模型研究[D];昆明理工大學(xué);2015年
4 曾志明;改進(jìn)的OGA-SVM及其在氣體絕緣系統(tǒng)局部放電識(shí)別上的應(yīng)用[D];華南理工大學(xué);2015年
5 夏燁;智能GIS設(shè)備檢測(cè)平臺(tái)局部放電模擬技術(shù)的研究[D];華北電力大學(xué);2015年
6 劉昌標(biāo);GIS特高頻局部放電特征量?jī)?yōu)選及類(lèi)型識(shí)別研究[D];華北電力大學(xué);2015年
7 張曉涵;油紙絕緣復(fù)合電壓下氣隙模型局部放電發(fā)展過(guò)程研究[D];華北電力大學(xué);2015年
8 賈薇;基于LabWindows_CVI的變壓器局部放電超聲波定位系統(tǒng)[D];電子科技大學(xué);2015年
9 褚鑫;油紙絕緣典型缺陷局部放電特征提取與模式識(shí)別研究[D];中國(guó)礦業(yè)大學(xué);2015年
10 唐武平;基于超聲波法對(duì)變壓器局部放電定位的研究[D];電子科技大學(xué);2015年
,本文編號(hào):1624655
本文鏈接:http://www.sikaile.net/kejilunwen/zidonghuakongzhilunwen/1624655.html