基于協(xié)同過濾的CPS數據處理算法研究
發(fā)布時間：2022-12-25 11:28
CPS技術正對物理世界和信息世界的交互方式產生著潛移默化的影響。信息物理融合系統(tǒng)集嵌入式計算、傳感、網絡通信控制于一體,為智能化社會的建設提供巨大支持,隨著信息物理融合系統(tǒng)蓬勃發(fā)展,網絡數據資源進入爆炸增長時代,要實現實時存儲、處理分析,滿足人們的迫切需求,就需要將基于大數據的信息物理融合系統(tǒng)作為發(fā)展重點。為了滿足不同巨量數據用戶的目的與需求,各種異構數據融合和處理推薦算法陸續(xù)被提出來與運用,其中最為著名的是協(xié)同過濾推薦算法。根據過去的研究,雖然協(xié)同過濾推薦算法很成功地應用在推薦系統(tǒng)領域中,但仍然存在著諸多困擾,如擴展性、冷啟動及數據稀疏性等,數據處理質量都會受到上述困擾影響而降低。因此,本研究使用正�；謴拖嗨菩远攘恳孕拚齾f(xié)同過濾推薦算法的誤差值,并在云端Hadoop環(huán)境中,比較測量在3、6以及9個節(jié)點情況下與單機執(zhí)行的時間,分析改進協(xié)同過濾算法的加速比及效能,主要的內容和貢獻如下:1.以基于用戶的協(xié)同過濾算法為基礎,采用BP神經網絡算法對協(xié)同過濾算法的正常恢復相似性度量方法進行改進,以完善協(xié)同過濾推薦算法計算誤差,提高CPS數據處理的時間加速比。2.搭建實驗環(huán)境,在Hadoop平臺上...
【文章頁數】：60 頁
【學位級別】：碩士
【文章目錄】：
摘要
ABSTRACT
第一章 緒論
1.1 研究背景及意義
1.2 國內外研究現狀
1.3 研究的主要內容和章節(jié)安排
第二章 相關技術與理論概述
2.1 物聯(lián)網異構數據傳輸協(xié)議
2.1.1 網絡層的傳輸協(xié)議
2.1.2 應用層的傳輸協(xié)議
2.2 物聯(lián)網的服務發(fā)現
2.3 協(xié)同過濾算法
2.3.1 協(xié)同過濾算法的數據收集
2.3.2 數據預處理
2.3.3 使用者為基礎的協(xié)同過濾
2.4 BP神經網絡
2.5 Apache Hadoop
2.5.1 Map Reduce
2.5.2 分布式文件系統(tǒng)
2.5.3 Apache Mahout
第三章 基于BP神經網絡和協(xié)同過濾算法的數據處理推薦算法研究
3.1 算法改進思想
3.2 算法改進
3.2.1 協(xié)同過濾程序
3.2.2 皮爾森相關系數
3.2.3 正�；謴拖嗨菩远攘�
第四章 基于改進協(xié)同過濾算法的數據處理實現
4.1 實驗環(huán)境
4.2 基于用戶的協(xié)同過濾算法實現
4.3 算法加速比比較分析
4.4 分析時間的比較
結論
參考文獻
攻讀碩士學位期間發(fā)表的學術論文
致謝
【參考文獻】：
期刊論文
[1]采用評論挖掘修正用戶評分的改進協(xié)同過濾算法[J]. 王紅霞,陳健,程艷芬. 浙江大學學報(工學版). 2019(03)
[2]基于NB-IoT及ZigBee的無線傳感器網絡網關設計[J]. 李玲,郭曉玲,武仁杰,徐婷. 通信技術. 2019(01)
[3]加權自學習哈希高維數據最近鄰查詢算法[J]. 熊一利. 計算機工程與設計. 2018(12)
[4]基于線性四分樹的空間關鍵詞最近鄰查詢方法研究[J]. 于啟迪,吳雷,馬昂. 計算機應用與軟件. 2018(11)
[5]時空大數據背景下并行數據處理分析挖掘的進展及趨勢[J]. 關雪峰,曾宇媚. 地理科學進展. 2018(10)
[6]基于搜索改進的KNN文本分類算法[J]. 殷亞博,楊文忠,楊慧婷,許超英. 計算機工程與設計. 2018(09)
[7]基于Hadoop、Spark及Flink大規(guī)模數據分析的性能評價[J]. 代明竹,高嵩峰. 中國電子科學研究院學報. 2018(02)
[8]神經網絡模型壓縮方法綜述[J]. 曹文龍,芮建武,李敏. 計算機應用研究. 2019(03)
[9]基于MQTT的物聯(lián)網系統(tǒng)消息發(fā)布/訂閱方法研究[J]. 張玉杰,張海濤,張婷婷. 電視技術. 2017(Z3)
[10]一種基于Spark與BP神經網絡的入侵檢測方法[J]. 王輝,王勇,柯文龍. 電腦知識與技術. 2017(16)
博士論文
[1]不確定TOP-K查詢處理關鍵技術研究[D]. 肖國慶.湖南大學 2017
[2]面向信息物理融合系統(tǒng)的資源索引構建和查詢優(yōu)化技術研究[D]. 馬武彬.國防科學技術大學 2014
碩士論文
[1]家庭用電智能管理系統(tǒng)的研究[D]. 丁雨彤.華東交通大學 2018
[2]基于Zigbee+WiFi技術的智能家居網關系統(tǒng)的研究與設計[D]. 張保森.上海師范大學 2018
[3]基于COS系統(tǒng)的藍牙4.0低功耗的研究與實現[D]. 趙小燕.東南大學 2016
[4]實時數據流的聚類和聚類邊界檢測[D]. 梁小波.武漢科技大學 2012
[5]基于Zigbee協(xié)議的無線網絡軟硬件研究與設計[D]. 胡鵬飛.電子科技大學 2012
本文編號：3726527
【文章頁數】：60 頁
【學位級別】：碩士
【文章目錄】：
摘要
ABSTRACT
第一章 緒論
1.1 研究背景及意義
1.2 國內外研究現狀
1.3 研究的主要內容和章節(jié)安排
第二章 相關技術與理論概述
2.1 物聯(lián)網異構數據傳輸協(xié)議
2.1.1 網絡層的傳輸協(xié)議
2.1.2 應用層的傳輸協(xié)議
2.2 物聯(lián)網的服務發(fā)現
2.3 協(xié)同過濾算法
2.3.1 協(xié)同過濾算法的數據收集
2.3.2 數據預處理
2.3.3 使用者為基礎的協(xié)同過濾
2.4 BP神經網絡
2.5 Apache Hadoop
2.5.1 Map Reduce
2.5.2 分布式文件系統(tǒng)
2.5.3 Apache Mahout
第三章 基于BP神經網絡和協(xié)同過濾算法的數據處理推薦算法研究
3.1 算法改進思想
3.2 算法改進
3.2.1 協(xié)同過濾程序
3.2.2 皮爾森相關系數
3.2.3 正�；謴拖嗨菩远攘�
第四章 基于改進協(xié)同過濾算法的數據處理實現
4.1 實驗環(huán)境
4.2 基于用戶的協(xié)同過濾算法實現
4.3 算法加速比比較分析
4.4 分析時間的比較
結論
參考文獻
攻讀碩士學位期間發(fā)表的學術論文
致謝
【參考文獻】：
期刊論文
[1]采用評論挖掘修正用戶評分的改進協(xié)同過濾算法[J]. 王紅霞,陳健,程艷芬. 浙江大學學報(工學版). 2019(03)
[2]基于NB-IoT及ZigBee的無線傳感器網絡網關設計[J]. 李玲,郭曉玲,武仁杰,徐婷. 通信技術. 2019(01)
[3]加權自學習哈希高維數據最近鄰查詢算法[J]. 熊一利. 計算機工程與設計. 2018(12)
[4]基于線性四分樹的空間關鍵詞最近鄰查詢方法研究[J]. 于啟迪,吳雷,馬昂. 計算機應用與軟件. 2018(11)
[5]時空大數據背景下并行數據處理分析挖掘的進展及趨勢[J]. 關雪峰,曾宇媚. 地理科學進展. 2018(10)
[6]基于搜索改進的KNN文本分類算法[J]. 殷亞博,楊文忠,楊慧婷,許超英. 計算機工程與設計. 2018(09)
[7]基于Hadoop、Spark及Flink大規(guī)模數據分析的性能評價[J]. 代明竹,高嵩峰. 中國電子科學研究院學報. 2018(02)
[8]神經網絡模型壓縮方法綜述[J]. 曹文龍,芮建武,李敏. 計算機應用研究. 2019(03)
[9]基于MQTT的物聯(lián)網系統(tǒng)消息發(fā)布/訂閱方法研究[J]. 張玉杰,張海濤,張婷婷. 電視技術. 2017(Z3)
[10]一種基于Spark與BP神經網絡的入侵檢測方法[J]. 王輝,王勇,柯文龍. 電腦知識與技術. 2017(16)
博士論文
[1]不確定TOP-K查詢處理關鍵技術研究[D]. 肖國慶.湖南大學 2017
[2]面向信息物理融合系統(tǒng)的資源索引構建和查詢優(yōu)化技術研究[D]. 馬武彬.國防科學技術大學 2014
碩士論文
[1]家庭用電智能管理系統(tǒng)的研究[D]. 丁雨彤.華東交通大學 2018
[2]基于Zigbee+WiFi技術的智能家居網關系統(tǒng)的研究與設計[D]. 張保森.上海師范大學 2018
[3]基于COS系統(tǒng)的藍牙4.0低功耗的研究與實現[D]. 趙小燕.東南大學 2016
[4]實時數據流的聚類和聚類邊界檢測[D]. 梁小波.武漢科技大學 2012
[5]基于Zigbee協(xié)議的無線網絡軟硬件研究與設計[D]. 胡鵬飛.電子科技大學 2012
本文編號：3726527
本文鏈接：http://www.sikaile.net/kejilunwen/ruanjiangongchenglunwen/3726527.html
