本文關鍵詞：行業(yè)動態(tài)信息采集系統(tǒng)關鍵問題解決方案

  更多相關文章： Heritrix和Lucene 信息爬取 網頁清洗 全文檢索

【摘要】：為了解決行業(yè)動態(tài)信息采集系統(tǒng)中網頁定向爬取、網頁清洗、信息檢索等關鍵問題,文章提出一套基于Heritrix、Jsoup和Lucene的解決方案,并以測繪地理動態(tài)信息系統(tǒng)為例進行驗證,結果證明該方法能夠較好完成測繪地理信息的定向爬取,實現對不同風格網站網頁的清洗,并建立索引提供信息檢索機制,給測繪行業(yè)人士提供準確可靠的信息服務,為相關研究提供參考。
【作者單位】： 長江大學地球科學學院;
【關鍵詞】： Heritrix和Lucene 信息爬取 網頁清洗 全文檢索
【基金】：國土資源部項目(2014Z1317)
【分類號】：TP391.3;P208
【正文快照】： 0引言專業(yè)動態(tài)信息的瀏覽是掌握行業(yè)最新動態(tài)的必要手段。但行業(yè)網站的紛繁復雜和網上信息的良莠不齊使得人們?yōu)g覽信息的效率大打折扣,建立一個行業(yè)動態(tài)信息采集系統(tǒng),抓取準確可靠的行業(yè)信息給業(yè)內人士提供信息服務是諸多行業(yè)的所面臨的共同需求。這個系統(tǒng)的實現必須解決以下3

【相似文獻】

中國期刊全文數據庫 前10條

1 和琨;;電力用電信息采集系統(tǒng)的應用分析[J];民營科技;2011年06期

2 鄭凱津;;智能化的信息采集系統(tǒng)的研究實踐分析[J];黑龍江科技信息;2013年08期

3 陳健;;智能化的信息采集系統(tǒng)的研究實踐分析[J];黑龍江科技信息;2013年12期

4 梁朝暉;;用電信息采集系統(tǒng)簡述[J];山西科技;2013年05期

5 羅榮艷;;企業(yè)用戶電能信息采集系統(tǒng)設計及其實現分析[J];科技風;2012年23期

6 禹志輝;;智能電網下的用電信息采集系統(tǒng)[J];黑龍江科技信息;2013年21期

7 史鵬斌;;用電信息采集系統(tǒng)的演變與建設現狀[J];山西科技;2013年05期

8 買買提,米爾夏提,鄧緒斌;對機讀卡民文信息采集系統(tǒng)的探討[J];新疆大學學報(自然科學版);1998年03期

9 韓冬;;電力用戶用電信息采集系統(tǒng)通信技術分析[J];科技致富向導;2013年18期

10 陶礦之;;論電力用戶用電信息采集系統(tǒng)費控功能的實現[J];廣東科技;2013年02期

中國重要會議論文全文數據庫 前10條

1 ;用電信息采集系統(tǒng)的規(guī)劃與建設[A];2011年安徽省智能電網技術論壇論文集[C];2011年

2 劉利成;梁后樂;任民;;提高電力用戶用電信息采集系統(tǒng)采集成功率的措施[A];第二十屆華東六省一市電機工程（電力）學會輸配電技術討論會論文集[C];2012年

3 夏澤舉;;用電信息采集系統(tǒng)實用化關鍵問題及探討[A];2011年安徽省智能電網技術論壇論文集[C];2011年

4 程德山;劉梁寶;李浩;;六安市區(qū)用電信息采集系統(tǒng)的通信組網技術研究[A];2011年安徽省智能電網技術論壇論文集[C];2011年

5 王洪元;;用電信息采集系統(tǒng)建設模式探討[A];山東電機工程學會2012年度學術年會論文集[C];2012年

6 劉繼彥;宋燕霞;趙建文;;關于用電信息采集系統(tǒng)數據移植工作的討論[A];山東電機工程學會2012年度學術年會論文集[C];2012年

7 劉利成;;電力用戶用電信息采集系統(tǒng)網絡規(guī)劃研究[A];2012電力行業(yè)信息化年會論文集[C];2012年

8 趙琦;溫宏愿;周木春;陳延如;;一種用于光輻射多頻道信息采集系統(tǒng)的設計[A];第三屆全國虛擬儀器大會論文集[C];2008年

9 張德玉;高福亭;;組織實施圖像信息采集系統(tǒng)建設工作中存在的問題和對策研究[A];北京市高教學會保衛(wèi)學研究會第十屆學術年會論文選集[C];2007年

10 黃興;顧軍;李靖;王獻偉;吳致真;楊潤全;戴磊;;基于Web的安全生產信息采集系統(tǒng)的設計[A];第十二屆全國煤礦自動化學術年會論文專輯[C];2002年

中國重要報紙全文數據庫 前10條

1 馬旭升;青海公司啟動用電信息采集系統(tǒng)建設[N];國家電網報;2010年

2 通訊員 丁罕　王濤;無錫地區(qū)用電信息采集系統(tǒng)建設起步[N];中國電力報;2010年

3 林平;河南公司高質量建設用電信息采集系統(tǒng)[N];國家電網報;2010年

4 潘新興　劉群 朱蕭軼;浙江武原鎮(zhèn)投運用電信息采集系統(tǒng)[N];國家電網報;2010年

5 李雪;四平公司用電信息采集系統(tǒng)“全覆蓋”[N];東北電力報;2011年

6 記者 管亞東　通訊員 尹蕭 高坦;首個自助信息采集系統(tǒng) 昨在羅湖啟用[N];深圳商報;2011年

7 記者 沈雪梅邋實習生 陳艷;外來人口信息采集系統(tǒng)全面啟動[N];南通日報;2008年

8 記者 朱海斌;新人口與計生信息采集系統(tǒng)啟動[N];吐魯番報(漢);2009年

9 馬旭升　薛曉慧;青海公司完成全年用電信息采集系統(tǒng)建設[N];國家電網報;2010年

10 董萍;吐魯番電業(yè)局加快信息采集系統(tǒng)建設[N];國家電網報;2012年

中國博士學位論文全文數據庫 前2條

1 葉濤;精準農業(yè)的農田信息采集系統(tǒng)研究與開發(fā)[D];中國農業(yè)科學院;2006年

2 方慧;基于掌上電腦的農田信息采集系統(tǒng)的研究[D];浙江大學;2003年

中國碩士學位論文全文數據庫 前10條

1 郭玉波;基于WSN的農田環(huán)境信息采集系統(tǒng)的研究與設計[D];內蒙古大學;2015年

2 岳虎;用電信息采集系統(tǒng)的建設應用與研究[D];燕山大學;2015年

3 馬銘;基于主題的互聯網稅源信息采集系統(tǒng)研究[D];財政部財政科學研究所;2015年

4 郭振;基于車聯網的車輛信息采集系統(tǒng)的設計與研究[D];長安大學;2015年

5 郭琳琳;河南用電信息懫集系統(tǒng)的升級改造設計與實現[D];鄭州大學;2015年

6 張海峰;基于物聯網的健康與運動信息采集系統(tǒng)的實現[D];華中師范大學;2015年

7 徐清風;基于Android平臺的現場信息采集系統(tǒng)設計與實現[D];上海交通大學;2015年

8 楊寧;浙江電力用電信息采集系統(tǒng)的技術研究與深化應用[D];華北電力大學;2015年

9 徐連杰;電力用戶用電信息采集系統(tǒng)建設研究[D];華北電力大學;2015年

10 孔姍;面向農地確權的內外業(yè)一體化信息采集系統(tǒng)設計與實現[D];中國礦業(yè)大學;2015年

，

本文編號：971275