面向政務(wù)微博的數(shù)據(jù)分析系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)
發(fā)布時(shí)間:2021-05-16 19:42
如今政務(wù)微博在政府工作中發(fā)揮著越來越重要作用,政務(wù)微博發(fā)布內(nèi)容種類繁多,日發(fā)布量越來越多,迫切需要提高政務(wù)微博的管理和運(yùn)營效率,掌握近期政務(wù)微博的輿論傾向并及時(shí)引導(dǎo)輿論導(dǎo)向,了解人民大眾最關(guān)心的政務(wù)話題,本文涉及的面向政務(wù)微博的數(shù)據(jù)分析領(lǐng)域研究,對(duì)解決政府微博運(yùn)營管理,具有很好的應(yīng)用前景。本文通過調(diào)查研究近年來政務(wù)微博發(fā)展現(xiàn)狀,發(fā)現(xiàn)政務(wù)微博運(yùn)營人員不能掌握政務(wù)微博內(nèi)部大眾關(guān)心的熱門話題,不能及時(shí)了解政務(wù)微博信息輿論情感傾向,對(duì)政務(wù)微博運(yùn)營管理效率低,并且政務(wù)微博賬戶內(nèi)數(shù)據(jù)量不斷增多,數(shù)據(jù)特征復(fù)雜,隱藏許多潛在價(jià)值等。本文根據(jù)政務(wù)微博現(xiàn)在迫切要解決的需求問題,設(shè)計(jì)并實(shí)現(xiàn)了面向政務(wù)微博的數(shù)據(jù)分析系統(tǒng),該系統(tǒng)實(shí)現(xiàn)了提取大眾最關(guān)心的政務(wù)微博話題、獲取大眾對(duì)近期熱門微博的情感傾向、分析微博用戶行為和用戶特征信息、定時(shí)收集熱門發(fā)布素材信息等功能,以政府微博賬戶“上海發(fā)布”為例對(duì)整個(gè)系統(tǒng)做了闡述,整個(gè)系統(tǒng)分為三個(gè)子系統(tǒng),分別為數(shù)據(jù)采集子系統(tǒng),數(shù)據(jù)分析子系統(tǒng),數(shù)據(jù)可視化子系統(tǒng),數(shù)據(jù)采集子系統(tǒng)利用分布式爬蟲Scrapy框架采集數(shù)據(jù),數(shù)據(jù)分析子系統(tǒng)利用Spark分布式系統(tǒng)進(jìn)行數(shù)據(jù)分析計(jì)算,其中包括:中文分...
【文章來源】:杭州師范大學(xué)浙江省
【文章頁數(shù)】:74 頁
【學(xué)位級(jí)別】:碩士
【文章目錄】:
摘要
Abstract
1 緒論
1.1 研究背景與意義
1.2 國內(nèi)外研究現(xiàn)狀
1.2.1 政務(wù)微博國內(nèi)外研究現(xiàn)狀
1.2.2 微博文本挖掘國內(nèi)外研究現(xiàn)狀
1.2.3 政務(wù)微博突顯問題
1.3 論文研究內(nèi)容及論文結(jié)構(gòu)
1.3.1 論文研究內(nèi)容
1.3.2 論文結(jié)構(gòu)
1.4 論文創(chuàng)新處
2 相關(guān)技術(shù)分析
2.1 網(wǎng)絡(luò)爬蟲技術(shù)
2.2 Jieba分詞器
2.3 Spark計(jì)算框架
2.4 LDA主題模型
2.5 MongoDB數(shù)據(jù)庫
2.6 WEB技術(shù)
2.7 可視化工具Echarts
2.8 本章小結(jié)
3 系統(tǒng)需求分析
3.1 業(yè)務(wù)需求
3.2 功能性需求
3.3 本章小結(jié)
4 面向政務(wù)微博熱度和情感分析的HRCA和 EDS模型
4.1 政務(wù)微博熱度HRCA模型
4.1.1 政務(wù)微博熱度HRCA模型設(shè)計(jì)
4.1.2 政務(wù)微博熱度HRCA模型實(shí)驗(yàn)
4.2 政務(wù)微博評(píng)論情感值EDS模型
4.2.1 政務(wù)微博評(píng)論情感值EDS模型設(shè)計(jì)
4.2.2 政務(wù)微博評(píng)論情感值EDS模型實(shí)驗(yàn)
4.3 本章小結(jié)
5 面向政務(wù)微博的數(shù)據(jù)分析系統(tǒng)設(shè)計(jì)
5.1 系統(tǒng)整體架構(gòu)設(shè)計(jì)
5.2 數(shù)據(jù)采集子系統(tǒng)設(shè)計(jì)
5.2.1 數(shù)據(jù)采集種類
5.2.2 政務(wù)微博數(shù)據(jù)采集功能設(shè)計(jì)
5.3 數(shù)據(jù)分析子系統(tǒng)設(shè)計(jì)
5.3.1 獲取政務(wù)微博熱門微博話題功能設(shè)計(jì)
5.3.2 基于EDS模型輿論傾向分析功能設(shè)計(jì)
5.3.3 政務(wù)微博多維度數(shù)據(jù)分析功能設(shè)計(jì)
5.3.4 政務(wù)微博獲取發(fā)布素材功能設(shè)計(jì)
5.4 數(shù)據(jù)可視化子系統(tǒng)設(shè)計(jì)
5.4.1 系統(tǒng)用戶管理功能
5.4.2 數(shù)據(jù)可視化展示功能
5.5 數(shù)據(jù)庫設(shè)計(jì)
5.6 本章小結(jié)
6 面向政務(wù)微博的數(shù)據(jù)分析系統(tǒng)實(shí)現(xiàn)
6.1 系統(tǒng)實(shí)現(xiàn)環(huán)境
6.1.1 軟硬件環(huán)境
6.1.2 分布式環(huán)境
6.2 數(shù)據(jù)采集子系統(tǒng)實(shí)現(xiàn)
6.2.1 數(shù)據(jù)采集功能實(shí)現(xiàn)
6.3 數(shù)據(jù)分析子系統(tǒng)實(shí)現(xiàn)
6.3.1 獲取政務(wù)微博熱門微博話題功能實(shí)現(xiàn)
6.3.2 基于EDS模型輿論傾向分析功能實(shí)現(xiàn)
6.3.3 政務(wù)微博多維度數(shù)據(jù)分析功能實(shí)現(xiàn)
6.3.4 政務(wù)微博獲取發(fā)布素材功能實(shí)現(xiàn)
6.4 數(shù)據(jù)可視化子系統(tǒng)實(shí)現(xiàn)
6.4.1 系統(tǒng)用戶管理功能
6.4.2 數(shù)據(jù)可視化展示功能
6.5 本章小結(jié)
7 總結(jié)與展望
7.1 全文總結(jié)
7.2 展望
參考文獻(xiàn)
作者簡歷
致謝
【參考文獻(xiàn)】:
期刊論文
[1]從“南京發(fā)布”的運(yùn)營看政務(wù)微博的發(fā)展[J]. 封紅旗,雷晨陽. 青年記者. 2016(29)
[2]中國政務(wù)微博的發(fā)展現(xiàn)狀及對(duì)策研究——基于對(duì)新浪省級(jí)政府微博的網(wǎng)絡(luò)調(diào)查[J]. 陳艷紅,姬榮榮. 電子政務(wù). 2015(11)
[3]短文本相似度研究及其在微博話題檢測中的應(yīng)用[J]. 黃賢英,陳紅陽,劉英濤. 計(jì)算機(jī)工程與設(shè)計(jì). 2015(11)
[4]政務(wù)微博推廣機(jī)制研究——以“北京微博發(fā)布廳”的推廣為例[J]. 柳思思. 電子政務(wù). 2015(01)
[5]大數(shù)據(jù)技術(shù)研究綜述[J]. 劉智慧,張泉靈. 浙江大學(xué)學(xué)報(bào)(工學(xué)版). 2014(06)
[6]基于詞典和規(guī)則集的中文微博情感分析[J]. 王志濤,於志文,郭斌,路新江. 計(jì)算機(jī)工程與應(yīng)用. 2015(08)
[7]中文微博情感分析研究綜述[J]. 周勝臣,瞿文婷,石英子,施詢之,孫韻辰. 計(jì)算機(jī)應(yīng)用與軟件. 2013(03)
[8]中文文本情感傾向分析研究[J]. 馬曉玲,金碧漪,范并思. 情報(bào)資料工作. 2013(01)
[9]基于層次結(jié)構(gòu)的多策略中文微博情感分析和特征抽取[J]. 謝麗星,周明,孫茂松. 中文信息學(xué)報(bào). 2012(01)
[10]政務(wù)微博的管理風(fēng)險(xiǎn)及運(yùn)營策略[J]. 瞿旭晟. 新聞大學(xué). 2011(02)
碩士論文
[1]基于文本挖掘技術(shù)的微信公眾號(hào)關(guān)系網(wǎng)絡(luò)研究[D]. 潘偉.東南大學(xué) 2018
[2]地方政務(wù)微博運(yùn)營策略及職能發(fā)揮研究[D]. 馬骎.廣西大學(xué) 2015
[3]基于LDA特征擴(kuò)展的微博短文本分類[D]. 劉麗娟.燕山大學(xué) 2015
[4]微博客主題分類的特征擴(kuò)展方法[D]. 呂向楠.哈爾濱工業(yè)大學(xué) 2013
[5]微博客熱點(diǎn)話題發(fā)現(xiàn)策略研究[D]. 楊冠超.浙江大學(xué) 2011
本文編號(hào):3190286
【文章來源】:杭州師范大學(xué)浙江省
【文章頁數(shù)】:74 頁
【學(xué)位級(jí)別】:碩士
【文章目錄】:
摘要
Abstract
1 緒論
1.1 研究背景與意義
1.2 國內(nèi)外研究現(xiàn)狀
1.2.1 政務(wù)微博國內(nèi)外研究現(xiàn)狀
1.2.2 微博文本挖掘國內(nèi)外研究現(xiàn)狀
1.2.3 政務(wù)微博突顯問題
1.3 論文研究內(nèi)容及論文結(jié)構(gòu)
1.3.1 論文研究內(nèi)容
1.3.2 論文結(jié)構(gòu)
1.4 論文創(chuàng)新處
2 相關(guān)技術(shù)分析
2.1 網(wǎng)絡(luò)爬蟲技術(shù)
2.2 Jieba分詞器
2.3 Spark計(jì)算框架
2.4 LDA主題模型
2.5 MongoDB數(shù)據(jù)庫
2.6 WEB技術(shù)
2.7 可視化工具Echarts
2.8 本章小結(jié)
3 系統(tǒng)需求分析
3.1 業(yè)務(wù)需求
3.2 功能性需求
3.3 本章小結(jié)
4 面向政務(wù)微博熱度和情感分析的HRCA和 EDS模型
4.1 政務(wù)微博熱度HRCA模型
4.1.1 政務(wù)微博熱度HRCA模型設(shè)計(jì)
4.1.2 政務(wù)微博熱度HRCA模型實(shí)驗(yàn)
4.2 政務(wù)微博評(píng)論情感值EDS模型
4.2.1 政務(wù)微博評(píng)論情感值EDS模型設(shè)計(jì)
4.2.2 政務(wù)微博評(píng)論情感值EDS模型實(shí)驗(yàn)
4.3 本章小結(jié)
5 面向政務(wù)微博的數(shù)據(jù)分析系統(tǒng)設(shè)計(jì)
5.1 系統(tǒng)整體架構(gòu)設(shè)計(jì)
5.2 數(shù)據(jù)采集子系統(tǒng)設(shè)計(jì)
5.2.1 數(shù)據(jù)采集種類
5.2.2 政務(wù)微博數(shù)據(jù)采集功能設(shè)計(jì)
5.3 數(shù)據(jù)分析子系統(tǒng)設(shè)計(jì)
5.3.1 獲取政務(wù)微博熱門微博話題功能設(shè)計(jì)
5.3.2 基于EDS模型輿論傾向分析功能設(shè)計(jì)
5.3.3 政務(wù)微博多維度數(shù)據(jù)分析功能設(shè)計(jì)
5.3.4 政務(wù)微博獲取發(fā)布素材功能設(shè)計(jì)
5.4 數(shù)據(jù)可視化子系統(tǒng)設(shè)計(jì)
5.4.1 系統(tǒng)用戶管理功能
5.4.2 數(shù)據(jù)可視化展示功能
5.5 數(shù)據(jù)庫設(shè)計(jì)
5.6 本章小結(jié)
6 面向政務(wù)微博的數(shù)據(jù)分析系統(tǒng)實(shí)現(xiàn)
6.1 系統(tǒng)實(shí)現(xiàn)環(huán)境
6.1.1 軟硬件環(huán)境
6.1.2 分布式環(huán)境
6.2 數(shù)據(jù)采集子系統(tǒng)實(shí)現(xiàn)
6.2.1 數(shù)據(jù)采集功能實(shí)現(xiàn)
6.3 數(shù)據(jù)分析子系統(tǒng)實(shí)現(xiàn)
6.3.1 獲取政務(wù)微博熱門微博話題功能實(shí)現(xiàn)
6.3.2 基于EDS模型輿論傾向分析功能實(shí)現(xiàn)
6.3.3 政務(wù)微博多維度數(shù)據(jù)分析功能實(shí)現(xiàn)
6.3.4 政務(wù)微博獲取發(fā)布素材功能實(shí)現(xiàn)
6.4 數(shù)據(jù)可視化子系統(tǒng)實(shí)現(xiàn)
6.4.1 系統(tǒng)用戶管理功能
6.4.2 數(shù)據(jù)可視化展示功能
6.5 本章小結(jié)
7 總結(jié)與展望
7.1 全文總結(jié)
7.2 展望
參考文獻(xiàn)
作者簡歷
致謝
【參考文獻(xiàn)】:
期刊論文
[1]從“南京發(fā)布”的運(yùn)營看政務(wù)微博的發(fā)展[J]. 封紅旗,雷晨陽. 青年記者. 2016(29)
[2]中國政務(wù)微博的發(fā)展現(xiàn)狀及對(duì)策研究——基于對(duì)新浪省級(jí)政府微博的網(wǎng)絡(luò)調(diào)查[J]. 陳艷紅,姬榮榮. 電子政務(wù). 2015(11)
[3]短文本相似度研究及其在微博話題檢測中的應(yīng)用[J]. 黃賢英,陳紅陽,劉英濤. 計(jì)算機(jī)工程與設(shè)計(jì). 2015(11)
[4]政務(wù)微博推廣機(jī)制研究——以“北京微博發(fā)布廳”的推廣為例[J]. 柳思思. 電子政務(wù). 2015(01)
[5]大數(shù)據(jù)技術(shù)研究綜述[J]. 劉智慧,張泉靈. 浙江大學(xué)學(xué)報(bào)(工學(xué)版). 2014(06)
[6]基于詞典和規(guī)則集的中文微博情感分析[J]. 王志濤,於志文,郭斌,路新江. 計(jì)算機(jī)工程與應(yīng)用. 2015(08)
[7]中文微博情感分析研究綜述[J]. 周勝臣,瞿文婷,石英子,施詢之,孫韻辰. 計(jì)算機(jī)應(yīng)用與軟件. 2013(03)
[8]中文文本情感傾向分析研究[J]. 馬曉玲,金碧漪,范并思. 情報(bào)資料工作. 2013(01)
[9]基于層次結(jié)構(gòu)的多策略中文微博情感分析和特征抽取[J]. 謝麗星,周明,孫茂松. 中文信息學(xué)報(bào). 2012(01)
[10]政務(wù)微博的管理風(fēng)險(xiǎn)及運(yùn)營策略[J]. 瞿旭晟. 新聞大學(xué). 2011(02)
碩士論文
[1]基于文本挖掘技術(shù)的微信公眾號(hào)關(guān)系網(wǎng)絡(luò)研究[D]. 潘偉.東南大學(xué) 2018
[2]地方政務(wù)微博運(yùn)營策略及職能發(fā)揮研究[D]. 馬骎.廣西大學(xué) 2015
[3]基于LDA特征擴(kuò)展的微博短文本分類[D]. 劉麗娟.燕山大學(xué) 2015
[4]微博客主題分類的特征擴(kuò)展方法[D]. 呂向楠.哈爾濱工業(yè)大學(xué) 2013
[5]微博客熱點(diǎn)話題發(fā)現(xiàn)策略研究[D]. 楊冠超.浙江大學(xué) 2011
本文編號(hào):3190286
本文鏈接:http://www.sikaile.net/guanlilunwen/zhengwuguanli/3190286.html
最近更新
教材專著