信息在人們的生活中扮演著越來越重要的角色。海量數(shù)據(jù)分析在廣告投放、科學(xué)決策等領(lǐng)域發(fā)揮了重要做用。如何從數(shù)據(jù)中發(fā)現(xiàn)有價(jià)值的信息已經(jīng)成為人們普遍關(guān)注的問題。 近年來,我國信息化建設(shè)有了飛速的發(fā)展：骨干網(wǎng)和接入網(wǎng)帶寬增加、用戶規(guī)模不斷擴(kuò)大。這些情況對(duì)運(yùn)營商的網(wǎng)絡(luò)管理能力提出了挑戰(zhàn)。網(wǎng)絡(luò)流量監(jiān)測技術(shù)是運(yùn)營商分析網(wǎng)絡(luò)狀態(tài)、進(jìn)行網(wǎng)絡(luò)管理的有效手段。通過網(wǎng)絡(luò)流量監(jiān)測系統(tǒng)可以獲得海量的網(wǎng)絡(luò)用戶行為數(shù)據(jù)。這些數(shù)據(jù)蘊(yùn)含著網(wǎng)絡(luò)流量變化規(guī)律和用戶行為特征等有價(jià)值的信息。網(wǎng)絡(luò)用戶行為分析對(duì)提高運(yùn)營商網(wǎng)的絡(luò)管理水平和服務(wù)質(zhì)量有很大意義。 當(dāng)前,由于監(jiān)測數(shù)據(jù)規(guī)模龐大、內(nèi)容復(fù)雜等因素對(duì)網(wǎng)絡(luò)監(jiān)測數(shù)據(jù)的分析工作還有很多值得改進(jìn)的地方。近年來分布式存儲(chǔ)和計(jì)算發(fā)展得很快,逐漸成為海量數(shù)據(jù)處理的有效方法。本文將網(wǎng)絡(luò)監(jiān)測數(shù)據(jù)的格式特點(diǎn)、流量特點(diǎn)以及分析需求等因素與分布式的思想結(jié)合起來,提出了一個(gè)基于分布式方法的用戶行為分析系統(tǒng)(User Behavior Analysis System, UBAS)。這個(gè)系統(tǒng)分為數(shù)據(jù)存儲(chǔ)和查詢分析兩部分。存儲(chǔ)子系統(tǒng)通過適當(dāng)?shù)臄?shù)據(jù)轉(zhuǎn)發(fā)規(guī)則實(shí)現(xiàn)了系統(tǒng)存儲(chǔ)能力的提高和擴(kuò)展性能的加強(qiáng)；它還通過文件分片和...

【文章頁數(shù)】：65 頁

【學(xué)位級(jí)別】：碩士

【文章目錄】：
摘要
ABSTRACT
第一章 緒論
    1.1 研究背景
    1.2 研究意義
    1.3 文章結(jié)構(gòu)
第二章 寬帶網(wǎng)絡(luò)監(jiān)測與分布式數(shù)據(jù)處理方法綜述
    2.1 網(wǎng)絡(luò)監(jiān)測數(shù)據(jù)的產(chǎn)生過程
    2.2 網(wǎng)絡(luò)監(jiān)測數(shù)據(jù)的特點(diǎn)
    2.3 對(duì)網(wǎng)絡(luò)監(jiān)測數(shù)據(jù)的需求分析
        2.3.1 查詢需求分析
        2.3.2 統(tǒng)計(jì)分析需求分析
    2.4 分布式數(shù)據(jù)的處理方法
        2.4.1 云計(jì)算
        2.4.2 網(wǎng)格計(jì)算
        2.4.3 分布式計(jì)算
第三章 UBAS系統(tǒng)設(shè)計(jì)
    3.1 UBAS邏輯結(jié)構(gòu)
    3.2 通信規(guī)程
    3.3 并發(fā)查詢處理
    3.4 系統(tǒng)查詢接口定義
        3.4.1 查詢字符串定義
        3.4.2 功能函數(shù)的實(shí)現(xiàn)邏輯
第四章 存儲(chǔ)子系統(tǒng)的設(shè)計(jì)和實(shí)現(xiàn)
    4.1 數(shù)據(jù)轉(zhuǎn)發(fā)子層的設(shè)計(jì)與實(shí)現(xiàn)
        4.1.1 按系統(tǒng)條件轉(zhuǎn)發(fā)
        4.1.2 按話單內(nèi)容轉(zhuǎn)發(fā)
        4.1.3 數(shù)據(jù)轉(zhuǎn)發(fā)子層的實(shí)現(xiàn)
    4.2 數(shù)據(jù)寫入子層設(shè)計(jì)與實(shí)現(xiàn)
        4.2.1 文件路徑映射
        4.2.2 hash劃分子文件
        4.2.3 索引的建立和使用方法
        4.2.4 數(shù)據(jù)寫入子層的實(shí)現(xiàn)
第五章 查詢子系統(tǒng)的設(shè)計(jì)和實(shí)現(xiàn)
    5.1 總體結(jié)構(gòu)和關(guān)鍵邏輯
        5.1.1 中綴字符串的解析
        5.1.2 分組統(tǒng)計(jì)與匯總
    5.2 調(diào)度層設(shè)計(jì)與實(shí)現(xiàn)
        5.2.1 查詢狀態(tài)控制
        5.2.2 調(diào)度層實(shí)現(xiàn)
    5.3 查詢層設(shè)計(jì)與實(shí)現(xiàn)
        5.3.1 數(shù)據(jù)查詢加速
        5.3.2 狀態(tài)轉(zhuǎn)移邏輯
        5.3.3 查詢層實(shí)現(xiàn)
第六章 系統(tǒng)測試和性能分析
    6.1 測試環(huán)境與測試項(xiàng)目
    6.2 系統(tǒng)數(shù)據(jù)查詢速度的測試
    6.3 在線用戶數(shù)分析
第七章 總結(jié)和展望
參考文獻(xiàn)
致謝
攻讀學(xué)位期間發(fā)表的學(xué)術(shù)論文目錄



本文編號(hào)：3850173