發(fā)布時間：2020-05-27 21:32

【摘要】：隨著氣象預(yù)報精細(xì)化要求的不斷提高,氣象預(yù)報服務(wù)制作需要采集的數(shù)據(jù)量與數(shù)據(jù)種類也隨之增加,而傳統(tǒng)氣象預(yù)報處理方式既不能滿足氣象預(yù)報系統(tǒng)對大數(shù)據(jù)量的需求,也延緩了氣象預(yù)報制作的周期,本文針對氣象預(yù)報系統(tǒng)面臨的有關(guān)數(shù)據(jù)處理的難題,提出改進(jìn)后的氣象數(shù)據(jù)處理方案并隨之設(shè)計與實現(xiàn)氣象預(yù)報數(shù)據(jù)處理子系統(tǒng),解決氣象數(shù)據(jù)采集、存儲和調(diào)用的問題,子系統(tǒng)的實現(xiàn)為氣象預(yù)報系統(tǒng)的研發(fā)與運(yùn)行提供了有力支持。論文的主要工作包括:(1)提出了氣象報文自動化解析的優(yōu)化方案,使用動態(tài)文件目錄監(jiān)聽與消息隊列存儲技術(shù)解決了傳統(tǒng)報文數(shù)據(jù)采集存在的人工干預(yù)過多、效率低下等問題,使用文件內(nèi)存映射策略與NIO文件流解析技術(shù)提高了報文解析程序的處理效率。(2)針對傳統(tǒng)省級CIMISS系統(tǒng)有關(guān)數(shù)據(jù)采集存在的數(shù)據(jù)傳輸率低、耗時長、不支持大數(shù)據(jù)量等問題,提出在氣象預(yù)報制作前預(yù)先將氣象數(shù)據(jù)采集到本地關(guān)系型數(shù)據(jù)庫的處理思路,加快氣象數(shù)據(jù)的調(diào)用。(3)依據(jù)氣象數(shù)據(jù)的入庫頻率,使用MySQL集群存儲氣象數(shù)據(jù),通過MySQL的分表分區(qū)功能實現(xiàn)了氣象數(shù)據(jù)的有序管理,加快氣象數(shù)據(jù)的檢索速度,通過MySQL的主從復(fù)制架構(gòu)實現(xiàn)數(shù)據(jù)庫中有關(guān)數(shù)據(jù)操作的讀寫分離,降低氣象網(wǎng)站的負(fù)載壓力。相關(guān)數(shù)據(jù)庫的功能設(shè)計從數(shù)據(jù)存儲角度提高了子系統(tǒng)的數(shù)據(jù)處理效率。(4)開發(fā)基于NC文件的數(shù)據(jù)解碼程序與基于SSM框架的氣象數(shù)據(jù)調(diào)度程序,分別解析非結(jié)構(gòu)化氣象數(shù)據(jù)與結(jié)構(gòu)化氣象數(shù)據(jù),并完成氣象原始數(shù)據(jù)到氣象數(shù)據(jù)資料的轉(zhuǎn)化,為氣象預(yù)報系統(tǒng)提供了豐富的氣象數(shù)據(jù)衍生資料。(5)在上述工作的基礎(chǔ)上,根據(jù)改進(jìn)后的氣象數(shù)據(jù)處理方案并結(jié)合軟件設(shè)計的基本思想,研發(fā)并實現(xiàn)了氣象預(yù)報數(shù)據(jù)處理子系統(tǒng),通過國睿科技有限公司的氣象內(nèi)網(wǎng)對氣象數(shù)據(jù)的采集、數(shù)據(jù)資料的生成分別進(jìn)行測試,驗證本文提出的技術(shù)方案不僅能夠高效采集大數(shù)據(jù)量的氣象數(shù)據(jù),而且具備將采集到的數(shù)據(jù)進(jìn)行快速分析與調(diào)用以生成氣象數(shù)據(jù)資料的能力,基本滿足了子系統(tǒng)的預(yù)期設(shè)計需求。
【圖文】：

圖 1-1 AccuWeather 氣象數(shù)據(jù)處理系統(tǒng)架構(gòu)圖AccuWeather 系統(tǒng)架構(gòu)由數(shù)據(jù)采集模塊、數(shù)據(jù)預(yù)處理模塊、數(shù)據(jù)分類處理模塊和數(shù)據(jù)調(diào)用模塊組成，其中數(shù)據(jù)采集模塊直接采集各種探測設(shè)備的原始數(shù)據(jù)；數(shù)據(jù)預(yù)處理模塊按照氣象數(shù)據(jù)處理規(guī)則[9]進(jìn)行規(guī)格化處理；數(shù)據(jù)分類處理模塊將各類數(shù)據(jù)信息按照功能需求不同進(jìn)行分類處理并生成不同時效的氣象數(shù)據(jù)；統(tǒng)一應(yīng)用程序訪問接口生成不同格式的氣象數(shù)據(jù)資料，供氣象公司采集并制作氣象預(yù)報業(yè)務(wù)。AccuWeather 系統(tǒng)不僅從各種探測設(shè)備上采集實時觀測數(shù)據(jù)，而且還使用高精度的氣象預(yù)報模型與氣象隨機(jī)算法，比如 ECMEF、美國的 GFS 氣象模型和 CFSv2 氣象模型等，旨在提高氣象預(yù)報的準(zhǔn)確率。AccuWeather 系統(tǒng)使用專有的通用預(yù)報數(shù)據(jù)庫(UFDB)，可以存儲近幾十年內(nèi)的氣象數(shù)據(jù)信息并根據(jù)預(yù)測模型生成預(yù)測結(jié)果，系統(tǒng)的預(yù)報范圍也從美國逐步拓展到全球。AccuWeather 系統(tǒng)實現(xiàn)了數(shù)據(jù)采集、預(yù)處理、計算和發(fā)布的一整套的氣象數(shù)據(jù)處理方案，為全美境內(nèi)的氣象公司提供了精確和全面的數(shù)據(jù)服務(wù)，AccuWeather 系統(tǒng)還使用了基于美國和全球范圍內(nèi)的專利技術(shù)與數(shù)據(jù)處理解決方案，，使得系統(tǒng)模塊間銜接流暢。

第一章 緒論，數(shù)據(jù)覆蓋范圍廣，滿足氣象預(yù)報制作的基本數(shù)據(jù)需求。二、支持不同語言和操作的數(shù)據(jù)采集。包括主流的 Linux 和 Window 操作的各個版本，并提供不同編程語言據(jù)調(diào)用，包括 C++、C、Python、Fortan 等。三、支持返回多種數(shù)據(jù)格式，滿足調(diào)對氣象數(shù)據(jù)的格式需求。省級 CIMISS 系統(tǒng)不僅可以檢索出 XML、HTML、JSOXT 等格式文件，還可以根據(jù)調(diào)用語言的不同直接返回結(jié)構(gòu)體或類。由于省MISS 系統(tǒng)的優(yōu)秀特性和國家氣象數(shù)據(jù)中心的大力支持，氣象公司可以直接從省級MISS 系統(tǒng)直接檢索源數(shù)據(jù)到氣象預(yù)報系統(tǒng)中，然后使用 B/S 或 C/S 架構(gòu)完成氣象。這種氣象數(shù)據(jù)采集方式具有數(shù)據(jù)權(quán)威性強(qiáng)的優(yōu)點(diǎn)，采集到的數(shù)據(jù)可以通過 We直觀的展示。圖 1-2 是國家氣象信息數(shù)據(jù)共享平臺的架構(gòu)分析圖。
【學(xué)位授予單位】：東南大學(xué)
【學(xué)位級別】：碩士
【學(xué)位授予年份】：2018
【分類號】：TP311.52

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 李波;唐寧琳;李思萍;劉成建;;新時期氣象預(yù)報服務(wù)的需求與發(fā)展[J];江西農(nóng)業(yè);2019年10期

2 葉泓麟;夏中凱;;采用高科技?xì)庀箢A(yù)報手段 服務(wù)現(xiàn)代農(nóng)業(yè)生產(chǎn)環(huán)節(jié)[J];吉林農(nóng)業(yè);2017年09期

3 王林;;我國海洋氣象預(yù)報業(yè)存在的問題及對策[J];知識文庫;2019年10期

4 周銳;;明星鞋帶[J];學(xué)苑創(chuàng)造(3-6年級閱讀);2017年03期

5 海文;;氣象預(yù)報統(tǒng)一發(fā)布[J];初中生必讀;2015年05期

6 陳淑紅;;淺議氣象預(yù)報通知短信[J];農(nóng)業(yè)與技術(shù);2013年03期

7 郭明慶;由建華;李來民;姜珊;于秀芹;李功澤;;氣象預(yù)報服務(wù)與當(dāng)今社會需求的現(xiàn)狀與改進(jìn)措施[J];產(chǎn)業(yè)與科技論壇;2013年16期

8 姜曉艷;;生物氣象預(yù)報的生態(tài)動力學(xué)基礎(chǔ)[J];氣象科技;2006年06期

9 夏志瓊;氣象預(yù)報能帶來商機(jī)嗎[J];企業(yè)文化;2003年04期

10 興杰;王占重視專業(yè)氣象預(yù)報[J];內(nèi)蒙古氣象;2000年03期

相關(guān)會議論文 前10條

1 張榮;相東;;淺談氣象預(yù)報對社會經(jīng)濟(jì)發(fā)展的影響及適宜性對策研究[A];創(chuàng)新驅(qū)動發(fā)展 提高氣象災(zāi)害防御能力——S3第三屆氣象服務(wù)發(fā)展論壇——公眾、專業(yè)氣象預(yù)報服務(wù)技術(shù)與應(yīng)用[C];2013年

2 陸漢京;;模糊聚類在長期氣象預(yù)報中的應(yīng)用[A];中國系統(tǒng)工程學(xué)會模糊數(shù)學(xué)與模糊系統(tǒng)委員會第五屆年會論文選集[C];1990年

3 吳煥萍;;氣象預(yù)報與服務(wù)的文本生成綜述和應(yīng)用展望[A];第35屆中國氣象學(xué)會年會 S14 大數(shù)據(jù)、互聯(lián)網(wǎng)、融媒體時代氣象服務(wù)的創(chuàng)新與變革——第八屆氣象服務(wù)發(fā)展論壇[C];2018年

4 童茂祥;王昆洲;;航空氣象預(yù)報自動編碼發(fā)報系統(tǒng)簡介[A];2006年海峽兩岸氣象科學(xué)技術(shù)研討會論文集[C];2006年

5 羅菊英;;新形勢下氣象預(yù)報業(yè)務(wù)人員應(yīng)具備的基本素質(zhì)淺談[A];2008年湖北省氣象學(xué)會學(xué)術(shù)年會學(xué)術(shù)論文詳細(xì)文摘匯集[C];2008年

6 顏家蔚;;福建氣象部門對臺灣同胞開展氣象預(yù)報服務(wù)考[A];中國氣象學(xué)會2006年年會“氣象史志研究進(jìn)展”分會場論文集[C];2006年

7 王威;全秋浩;陳楊;王程程;;吉林省氣象預(yù)報服務(wù)產(chǎn)品共享平臺設(shè)計與實現(xiàn)[A];第32屆中國氣象學(xué)會年會S19 氣象信息化——機(jī)遇與挑戰(zhàn)[C];2015年

8 王祖承;陳正洪;楊宏青;王志斌;楊維軍;陳波;;城市環(huán)境氣象預(yù)報系統(tǒng)的軟件開發(fā)[A];城市氣象服務(wù)科學(xué)討論會學(xué)術(shù)論文集[C];2001年

9 劉文偉;周霖華;臧曉鐘;;新一代地市級氣象預(yù)報業(yè)務(wù)平臺的研制[A];第三屆長三角氣象科技論壇論文集[C];2006年

10 張朝林;孟春雷;程叢蘭;扈海波;王在文;鄭祚芳;;城市精細(xì)道路氣象預(yù)報與服務(wù)系統(tǒng)的設(shè)計與應(yīng)用[A];中國力學(xué)學(xué)會學(xué)術(shù)大會'2009論文摘要集[C];2009年

相關(guān)重要報紙文章 前10條

1 記者 黃彬 段昊書 馮子晏;全國臭氧氣象預(yù)報業(yè)務(wù)規(guī)范實施[N];中國氣象報;2018年

2 記者 金可;網(wǎng)絡(luò)天氣預(yù)報將按季度打分[N];北京日報;2017年

3 本報記者 張昊;網(wǎng)絡(luò)氣象預(yù)報信息傳播不能太“任性”[N];法制日報;2017年

4 記者 王敬濤;氣象預(yù)報傳播質(zhì)量評價將業(yè)務(wù)化[N];中國氣象報;2017年

5 通訊員 孟茹 馬艷;漢中推進(jìn)智能網(wǎng)格氣象預(yù)報業(yè)務(wù)規(guī)范化[N];中國氣象報;2017年

6 記者 張格苗;七省市率先正式發(fā)布智能網(wǎng)格氣象預(yù)報[N];中國氣象報;2017年

7 記者 張明;繼續(xù)保持高度的責(zé)任心 做好氣象預(yù)報工作[N];通化日報;2017年

8 張格苗 薛峰 黃彬;網(wǎng)格氣象預(yù)報：未來已來[N];北京日報;2017年

9 本報記者 陳磊;氣象預(yù)報統(tǒng)一發(fā)布制度將從紙面走入現(xiàn)實[N];法制日報;2015年

10 記者 鄭代玉　通訊員 陳秀生;我市榮獲全省氣象預(yù)報業(yè)務(wù)技能選拔賽第一名[N];東營日報;2010年

相關(guān)博士學(xué)位論文 前1條

1 曹永強(qiáng);汛限水位動態(tài)控制方法研究及其風(fēng)險分析[D];大連理工大學(xué);2003年

相關(guān)碩士學(xué)位論文 前10條

1 張建輝;基于分布式技術(shù)的氣象預(yù)報業(yè)務(wù)系統(tǒng)的設(shè)計與實現(xiàn)[D];東南大學(xué);2018年

2 臧聰聰;氣象預(yù)報系統(tǒng)中數(shù)據(jù)處理子系統(tǒng)的研究與實現(xiàn)[D];東南大學(xué);2018年

3 李強(qiáng);市州短臨氣象預(yù)報業(yè)務(wù)平臺研究與實現(xiàn)[D];電子科技大學(xué);2014年

4 崔玉東;氣象預(yù)報信息短信服務(wù)系統(tǒng)的設(shè)計與實現(xiàn)[D];山東大學(xué);2006年

5 閆燕;市級集約化氣象預(yù)報預(yù)測平臺的設(shè)計與實現(xiàn)[D];電子科技大學(xué);2015年

6 喬梁;電力氣象預(yù)報預(yù)警方法研究[D];哈爾濱工程大學(xué);2016年

7 嚴(yán)華雯;基于GFS和WW3數(shù)值預(yù)報模式數(shù)據(jù)的精細(xì)化海洋氣象預(yù)報集成平臺開發(fā)[D];華東師范大學(xué);2012年

8 楊靈芝;基于機(jī)群技術(shù)的中尺度數(shù)值氣象預(yù)報監(jiān)控管理系統(tǒng)的研究與實現(xiàn)[D];山東科技大學(xué);2009年

9 姜博文;林區(qū)短時天氣預(yù)報系統(tǒng)設(shè)計[D];東北林業(yè)大學(xué);2015年

10 汪春秀;基于支持向量機(jī)的氣象預(yù)報方法研究[D];南京信息工程大學(xué);2011年

本文編號：2684168