近年來金融風(fēng)險事件頻發(fā),造成的后果也愈加嚴(yán)重,及時獲取風(fēng)險信息意味著有更充足的時間采取應(yīng)對措施�；ヂ�(lián)網(wǎng)作為當(dāng)前金融信息傳播的主要渠道,具有實(shí)時性高、覆蓋內(nèi)容廣的特點(diǎn),然而在信息爆炸的時代,已經(jīng)無法單純依靠人工來獲取和處理信息,因此金融機(jī)構(gòu)和從業(yè)人員迫切需要一種高效靈活的方法,對給定的多網(wǎng)絡(luò)渠道的金融信息進(jìn)行實(shí)時監(jiān)控,從大量信息中及時獲取相關(guān)風(fēng)險信息,提前采取措施規(guī)避風(fēng)險。本文針對當(dāng)前金融信息獲取效率低下的問題開展了研究,設(shè)計并實(shí)現(xiàn)了一個金融領(lǐng)域多通道信息監(jiān)控系統(tǒng)。主要研究內(nèi)容如下:（1）對金融領(lǐng)域多通道信息監(jiān)控系統(tǒng)進(jìn)行需求分析并設(shè)計系統(tǒng)架構(gòu),將系統(tǒng)分為多通道的信息采集子系統(tǒng)、金融風(fēng)險事件抽取子系統(tǒng)、信息實(shí)時監(jiān)控子系統(tǒng)三大部分;（2）設(shè)計多通道的信息采集子系統(tǒng),本文基于Scrapy設(shè)計和實(shí)現(xiàn)分布式爬蟲工具,通過定義配置文件和解析模版來定制爬蟲,通過Celery分布式任務(wù)隊列實(shí)現(xiàn)分布式抓取,通過基于Redis的哈希壓縮去重方法和布隆過濾器去重方法,解決了分布式爬蟲系統(tǒng)的URL去重問題,并設(shè)計依賴URL去重的增量抓取和斷點(diǎn)續(xù)爬;（3）設(shè)計金融風(fēng)險事件抽取子系統(tǒng),本文設(shè)計和實(shí)現(xiàn)了基于觸發(fā)詞擴(kuò)展... 

【文章頁數(shù)】：73 頁

【學(xué)位級別】：碩士

【部分圖文】：

圖２－１?ＨＴＭＬ頁面Ｄ０Ｍ樹結(jié)構(gòu)??２．１．４?爬蟲框架Ｓｃｒａｐｙ??

圖２－２?Ｓｃｒａｐｙ架構(gòu)??數(shù)據(jù)流由Ｓｃｒａｐｙ?ｅｎｇｉｎｅ?（執(zhí)行引擎）控制，過程如下：??１）引擎找到爬蟲對應(yīng)Ｓｐｉｄｅｒ，從中獲取待爬Ｒｅｑｕｅｓｔ送給調(diào)度器進(jìn)行調(diào)度，??

圖３－２多通道信息監(jiān)控系統(tǒng)架構(gòu)圖??根據(jù)系統(tǒng)需求分析及系統(tǒng)設(shè)計目標(biāo)，本論文設(shè)計系統(tǒng)的整體架構(gòu)如圖３－２所??

【參考文獻(xiàn)】：
期刊論文
[1]神經(jīng)網(wǎng)絡(luò)事件抽取技術(shù)綜述[J]. 秦彥霞,張民,鄭德權(quán).  智能計算機(jī)與應(yīng)用. 2018(03)
[2]面向事件抽取的深度與主動聯(lián)合學(xué)習(xí)方法[J]. 邱盈盈,洪宇,周文瑄,姚建民,朱巧明.  中文信息學(xué)報. 2018(06)
[3]基于深度信念網(wǎng)絡(luò)的事件識別[J]. 張亞軍,劉宗田,周文.  電子學(xué)報. 2017(06)
[4]基于語義的中文事件觸發(fā)詞抽取聯(lián)合模型[J]. 李培峰,周國棟,朱巧明.  軟件學(xué)報. 2016(02)
[5]Redis數(shù)據(jù)庫特性分析[J]. 馬豫星.  物聯(lián)網(wǎng)技術(shù). 2015(03)
[6]Redis在高速緩存系統(tǒng)中的應(yīng)用[J]. 曾超宇,李金香.  微型機(jī)與應(yīng)用. 2013(12)
[7]基于Bloom Filter的海量數(shù)據(jù)分布式快速匹配算法研究[J]. 羅理,劉響光,胡振,周姣,張剛偉,李啟平.  計算機(jī)與數(shù)字工程. 2011(03)
[8]事件抽取技術(shù)的回顧與展望[J]. 許旭陽,韓永峰,宋文政.  信息工程大學(xué)學(xué)報. 2011(01)
[9]面向資源的RESTful Web應(yīng)用研究[J]. 潘冰.  微計算機(jī)應(yīng)用. 2010(07)
[10]網(wǎng)絡(luò)爬蟲技術(shù)的研究[J]. 孫立偉,何國輝,吳禮發(fā).  電腦知識與技術(shù). 2010(15)

博士論文
[1]中文事件抽取關(guān)鍵技術(shù)研究[D]. 譚紅葉.哈爾濱工業(yè)大學(xué) 2008

碩士論文
[1]面向建材信息的網(wǎng)絡(luò)爬蟲系統(tǒng)的設(shè)計與實(shí)現(xiàn)[D]. 于懷寶.北京交通大學(xué) 2015
[2]網(wǎng)絡(luò)金融數(shù)據(jù)分析系統(tǒng)的設(shè)計與實(shí)現(xiàn)[D]. 臧凱源.北京交通大學(xué) 2015
[3]中文命名實(shí)體識別方法研究[D]. 廖先桃.哈爾濱工業(yè)大學(xué) 2006
[4]基于條件隨機(jī)場的中文命名實(shí)體識別[D]. 向曉雯.廈門大學(xué) 2006



本文編號：3657810