本文關(guān)鍵詞：一種云環(huán)境下的大數(shù)據(jù)Top-K查詢方法

  更多相關(guān)文章： Top-K查詢 云計算 MapReduce

【摘要】：Top-K查詢在搜索引擎、電子商務(wù)等領(lǐng)域有著廣泛的應(yīng)用.Top-K查詢從海量數(shù)據(jù)中返回最符合用戶需求的前K個結(jié)果,主要目的是消除信息過載帶來的負面影響.大數(shù)據(jù)背景下的Top-K查詢,給數(shù)據(jù)管理和分析等方面帶來新的挑戰(zhàn).結(jié)合MapReduce的特點,從數(shù)據(jù)劃分、數(shù)據(jù)篩選等方面對云環(huán)境下的大數(shù)據(jù)Top-K查詢問題進行深入研究.實驗結(jié)果表明,該方法具有良好的性能和擴展性.
【作者單位】： 中國人民大學信息學院;
【關(guān)鍵詞】： Top-K查詢 云計算 MapReduce
【基金】：國家自然科學基金(61379050,91224008) 國家高技術(shù)研究發(fā)展計劃(863)(2013AA013204) 高等學校博士學科點專項科研基金(20130004130001)
【分類號】：TP311.13
【正文快照】： 隨著大數(shù)據(jù)時代的到來,數(shù)據(jù)開始呈現(xiàn)爆炸式增長.不斷積累的數(shù)據(jù),對數(shù)據(jù)存儲、分析等領(lǐng)域提出嚴峻的挑戰(zhàn).大數(shù)據(jù)的最終價值體現(xiàn)在數(shù)據(jù)的分析和利用上,而對數(shù)據(jù)處理時間的要求也越來越高.一般認為,數(shù)據(jù)價值會隨時間的流逝而降低.因此,如何縮短數(shù)據(jù)處理時間、提高數(shù)據(jù)處理效率的

【共引文獻】

中國期刊全文數(shù)據(jù)庫 前10條

1 馬環(huán)宇;姜偉;虎嵩林;;QSynth-TopK:一個支持Top K查詢的質(zhì)量敏感的自動服務(wù)組合系統(tǒng)[J];電子學報;2012年10期

2 黃震華;向陽;孫圣力;陳千;;超對等網(wǎng)絡(luò)中的輪廓查詢優(yōu)化[J];電子學報;2013年08期

3 郎波;張博宇;;面向大數(shù)據(jù)的非結(jié)構(gòu)化數(shù)據(jù)管理平臺關(guān)鍵技術(shù)[J];信息技術(shù)與標準化;2013年10期

4 邵景峰;崔尊民;王進富;白曉波;;大數(shù)據(jù)下紡織制造執(zhí)行系統(tǒng)的構(gòu)建[J];紡織器材;2013年06期

5 張亞楠;譚躍生;;基于MapReduce的并行遮蓋文本聚類算法[J];內(nèi)蒙古科技大學學報;2013年03期

6 周國亮;朱永利;王桂蘭;;CC-MRSJ:Hadoop平臺下緩存敏感的星型聯(lián)接算法[J];電信科學;2013年10期

7 王鵬;黃焱;劉峰;安俊秀;;大數(shù)據(jù)技術(shù)中計算與數(shù)據(jù)的協(xié)作機制[J];成都信息工程學院學報;2014年01期

8 杜政頡;王鵬;黃焱;郎福通;;一種基于Storm編程模型的迭代Topology方案[J];成都信息工程學院學報;2014年01期

9 范飛;黃文明;鄧珍榮;;Oozie工作流在Mahout分布式數(shù)據(jù)挖掘中的應(yīng)用[J];桂林電子科技大學學報;2014年01期

10 丁玉成;諸葛晴鳳;沙行勉;;云計算環(huán)境下排序算法的性能分析[J];重慶大學學報;2014年04期

中國重要會議論文全文數(shù)據(jù)庫 前7條

1 喬媛媛;劉芳;凌艷;尹勁松;;云計算環(huán)境下MapReduce的資源建模與性能預(yù)測[A];2013年全國通信軟件學術(shù)會議論文集[C];2013年

2 Xiaoguang Han;Jigang Sun;Wu Qu;Xuanxia Yao;;Distributed Malware Detection based on Binary File Features in Cloud Computing Environment[A];第26屆中國控制與決策會議論文集[C];2014年

3 陳佐旗;余柏蒗;吳健平;;基于GPU通用計算的遙感數(shù)據(jù)處理——以計算地表太陽輻射值為例[A];第十八屆中國環(huán)境遙感應(yīng)用技術(shù)論壇論文集[C];2014年

4 白永超;付偉;辛陽;;基于Hadoop和Nutch的分布式搜索引擎研究與仿真[A];第十九屆全國青年通信學術(shù)年會論文集[C];2014年

5 李超越;徐國勝;;Hadoop公平調(diào)度算法的改進[A];第十九屆全國青年通信學術(shù)年會論文集[C];2014年

6 張愷玉;陳磊;;一種基于Hadoop架構(gòu)的指揮系統(tǒng)大數(shù)據(jù)挖掘方法[A];第三屆中國指揮控制大會論文集（上冊）[C];2015年

7 朱健軍;張彤;吳哲夫;;基于權(quán)值的Hadoop調(diào)度算法改進與實現(xiàn)[A];浙江省電子學會2014學術(shù)年會論文集[C];2014年

中國博士學位論文全文數(shù)據(jù)庫 前10條

1 李昕;電子商務(wù)Web數(shù)據(jù)庫不精確查詢方法研究[D];遼寧工程技術(shù)大學;2010年

2 高明;不確定數(shù)據(jù)的世系管理和相似性查詢[D];復(fù)旦大學;2011年

3 孟祥福;Web數(shù)據(jù)庫柔性查詢關(guān)鍵技術(shù)研究[D];東北大學;2010年

4 鄧亞丹;面向共享Cache多核處理器的數(shù)據(jù)庫查詢執(zhí)行優(yōu)化技術(shù)研究[D];國防科學技術(shù)大學;2009年

5 王斌;面向關(guān)系數(shù)據(jù)庫的關(guān)鍵字近似搜索技術(shù)研究[D];東北大學;2008年

6 李健;云計算環(huán)境下最小化運營開銷的調(diào)度技術(shù)研究[D];北京郵電大學;2013年

7 韓晶;大數(shù)據(jù)服務(wù)若干關(guān)鍵技術(shù)研究[D];北京郵電大學;2013年

8 程祥;高效可靠的虛擬網(wǎng)絡(luò)映射技術(shù)研究[D];北京郵電大學;2013年

9 李朋;異構(gòu)信息網(wǎng)絡(luò)分析模型及其應(yīng)用研究[D];重慶大學;2013年

10 李韌;基于Hadoop的大規(guī)模語義Web本體數(shù)據(jù)查詢與推理關(guān)鍵技術(shù)研究[D];重慶大學;2013年

中國碩士學位論文全文數(shù)據(jù)庫 前10條

1 閆實;關(guān)系數(shù)據(jù)庫的關(guān)鍵字查詢優(yōu)化研究[D];山東大學;2011年

2 王佳宜;基于關(guān)系數(shù)據(jù)庫的關(guān)鍵詞模糊查詢及結(jié)果集排序策略研究[D];中南大學;2008年

3 姬慎達;關(guān)系數(shù)據(jù)庫中基于知識庫的Top-N關(guān)鍵詞查詢[D];河北大學;2010年

4 周華慧;基于語義信息的面向數(shù)據(jù)庫的Top-k關(guān)鍵字查詢技術(shù)[D];東北大學;2008年

5 解朝良;融合文本屬性和數(shù)值屬性的語義Top-N查詢處理[D];河北大學;2013年

6 陳貞;HDFS環(huán)境下的訪問控制技術(shù)研究[D];重慶大學;2013年

7 張丹;HDFS中文件存儲優(yōu)化的相關(guān)技術(shù)研究[D];南京師范大學;2013年

8 潘吳斌;基于云計算的并行K-means氣象數(shù)據(jù)挖掘研究與應(yīng)用[D];南京信息工程大學;2013年

9 趙洪昌;云計算下的關(guān)聯(lián)分析和模糊聚類研究[D];南京信息工程大學;2013年

10 汪洋;通信網(wǎng)云計算平臺資源調(diào)度策略與算法研究[D];南昌大學;2013年

【相似文獻】

中國期刊全文數(shù)據(jù)庫 前10條

1 史新華;韋思惠;;期刊數(shù)據(jù)庫索引與文章查詢方法[J];廣西物理;2012年01期

2 李占宣;;數(shù)據(jù)庫中面向復(fù)雜應(yīng)用的查詢方法[J];電腦學習;2009年04期

3 本刊編輯部;;如何在網(wǎng)上查詢我刊發(fā)表的論文[J];石油和化工設(shè)備;2010年09期

4 劉潔;;基于B*樹聚簇索引的加密字符串查詢方法[J];計算機系統(tǒng)應(yīng)用;2013年06期

5 李亞力,賀宗春;基于字典的數(shù)據(jù)查詢方法及技巧[J];計算機系統(tǒng)應(yīng)用;1996年01期

6 吳鴻韜;朱懷忠;馬建紅;檀潤華;;基于概念推薦的專利查詢方法[J];計算機集成制造系統(tǒng);2014年01期

7 宋俊洪;崔國華;;一種密文數(shù)據(jù)庫的查詢方法[J];計算機與數(shù)子工程;2003年06期

8 吳志軍,黃震,郝利君,李軍;激光粒子圖像測速技術(shù)的灰度判別查詢方法[J];應(yīng)用激光;2001年02期

9 范葵紅;水產(chǎn)信息在互聯(lián)網(wǎng)上的查詢方法及水產(chǎn)網(wǎng)站簡介[J];河北漁業(yè);2002年03期

10 黎展榮;楊如軍;周新忠;;關(guān)系數(shù)據(jù)庫管理空間數(shù)據(jù)的方式下數(shù)據(jù)查詢方法的研究[J];武漢大學學報(信息科學版);2005年12期

中國重要會議論文全文數(shù)據(jù)庫 前8條

1 王斌;李保棟;;電力營銷決策支持系統(tǒng)中的查詢方法[A];第二十一屆中國數(shù)據(jù)庫學術(shù)會議論文集（技術(shù)報告篇）[C];2004年

2 黃邦宇;吳效明;周靜;;島礁部隊健康管理多字段數(shù)據(jù)庫的多表查詢方法[A];中國生物醫(yī)學工程學會第六次會員代表大會暨學術(shù)會議論文摘要匯編[C];2004年

3 黃光安;肖璐;張亮;施伯樂;;一種基于文檔編碼的XML優(yōu)化查詢方法[A];第二十一屆中國數(shù)據(jù)庫學術(shù)會議論文集（研究報告篇）[C];2004年

4 廖順和;樂嘉錦;;一種類K-means算法的高效近似查詢方法研究[A];第二十四屆中國數(shù)據(jù)庫學術(shù)會議論文集（研究報告篇）[C];2007年

5 翁偉;薛永生;段江嬌;黃震華;;一種基于交叉鏈表的文檔查詢方法[A];第二十屆全國數(shù)據(jù)庫學術(shù)會議論文集（研究報告篇）[C];2003年

6 李興東;姜守旭;張碩;;一種處理圖數(shù)據(jù)庫中超圖集合的查詢方法[A];NDBC2010第27屆中國數(shù)據(jù)庫學術(shù)會議論文集A輯二[C];2010年

7 何震瀛;李建中;高宏;;Web數(shù)據(jù)倉庫的異步迭代查詢方法(英文)[A];第十八屆全國數(shù)據(jù)庫學術(shù)會議論文集（研究報告篇）[C];2001年

8 王敬貴;蘇奮振;楊曉梅;杜云艷;仉天宇;;基于Ontology的空間知識查詢方法研究[A];第十四屆全國遙感技術(shù)學術(shù)交流會論文摘要集[C];2003年

中國重要報紙全文數(shù)據(jù)庫 前4條

1 ;防偽查詢方法[N];中國質(zhì)量報;2003年

2 ;部分省市高考分數(shù)查詢方法[N];中國教育報;2006年

3 金愛玲;甘肅：管局工商聯(lián)手治理[N];人民郵電;2005年

4 本報記者 秦延安 通訊員 孫少軍;許可建設(shè)項目管理信息系統(tǒng)投入使用[N];中國水利報;2008年

中國碩士學位論文全文數(shù)據(jù)庫 前10條

1 呂倩楠;面向多維對象的反k近鄰e笥行Р檠椒╗D];吉林大學;2012年

2 高世偉;三維空間中基于對象方位的方向關(guān)系查詢方法研究[D];燕山大學;2010年

3 辛婷婷;K-匿名數(shù)據(jù)的查詢方法研究[D];東華大學;2012年

4 彭川;反k最遠鄰查詢方法的研究[D];燕山大學;2012年

5 任彩平;路網(wǎng)中連續(xù)路過近鄰的查詢方法[D];燕山大學;2010年

6 李艷群;網(wǎng)絡(luò)教育資源的建設(shè)及查詢方法研究[D];山東師范大學;2005年

7 李若愚;空間數(shù)據(jù)庫中基于R-樹的最近鄰查詢方法研究[D];哈爾濱工程大學;2010年

8 王璐;路網(wǎng)中互近鄰查詢和最大化雙色反近鄰查詢方法研究[D];燕山大學;2010年

9 丁曉劍;對大信息量XML文檔查詢方法的研究[D];西安理工大學;2006年

10 閆東亮;基于語義的XML近似查詢方法研究[D];東北大學;2010年

，

本文編號：603998