資料介紹
針對傳統(tǒng)的周期性集中式搜索(Crawler)的弱點和增量式Crawler的難點,提出預測更新策略,給出判別網頁更新的MD5算法、URL調度算法和URL緩存算法,描述系統(tǒng)各個模塊的分布式構架的實現(xiàn),建立測試集數(shù)據(jù)對算法進行評測。該系統(tǒng)在北大天網搜索引擎上運行半年多,更新周期縮短了20天,變化預測命中率達到79.4%,提高了時效性、擴展性和穩(wěn)定性。
關鍵詞:增量式搜集;網頁變化預測;搜索引擎
關鍵詞:增量式搜集;網頁變化預測;搜索引擎
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- FPGA加速視覺搜索引擎解決方案
- 基于蛻變測試的用戶搜索引擎性能分析 9次下載
- python爬蟲入門教程之python爬蟲視頻教程分布式爬蟲打造搜索引擎 29次下載
- 分布式搜索引擎elasticsearch使用手冊 0次下載
- 基于JAVA技術的搜索引擎的研究與實現(xiàn)
- 主題搜索引擎的研究
- 教育網BBS搜索引擎設計與實現(xiàn)
- 分布式多搜索引擎系統(tǒng)的研究與實現(xiàn)
- 基于壓縮后綴數(shù)組技術的搜索引擎
- 原創(chuàng)優(yōu)先的搜索引擎排序算法
- 分布式數(shù)據(jù)庫搜索引擎的索引建立和優(yōu)化
- 基于偽爬行器的主題式元搜索引擎研究與設計
- 搜索引擎查詢日志的聚類
- 基于網格技術的并行搜索引擎
- 基于網絡搜索引擎的網絡話題分析框架
- javascript:void(0) 是否影响SEO优化471次阅读
- 如何实现不间断能源的智能备用电池703次阅读
- 谷歌搜索引擎优化的各个方面和步骤1264次阅读
- 百度搜索exgraph图执行引擎设计与实践分享755次阅读
- 使用Rust语言重写的代码搜索引擎黑鸟系统Blackbird正式启用1170次阅读
- 一个基于GPT-4的代码搜索引擎,开源了!1678次阅读
- Elasticsearch 8作为开源软件正式发布2651次阅读
- 实测没有广告的百度开发者搜索2982次阅读
- 深入了解电子设计搜索引擎2419次阅读
- 大数据是如何优化企业搜索引擎2354次阅读
- Elasticsearch概述 怎么安装ES4485次阅读
- 如何用Python实现一个大数据搜索引擎3183次阅读
- 如何在Python中进行Elasticsearch操作?7887次阅读
- 基于深度学习技术,从头开始搭建图像语义搜索引擎5065次阅读
- 垂直搜索引擎是什么_垂直搜索引擎有哪些8203次阅读
下載排行
本周
- 1電子電路原理第七版PDF電子教材免費下載
- 0.00 MB | 1490次下載 | 免費
- 2單片機典型實例介紹
- 18.19 MB | 93次下載 | 1 積分
- 3S7-200PLC編程實例詳細資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識別和講解說明
- 4.28 MB | 18次下載 | 4 積分
- 5開關電源原理及各功能電路詳解
- 0.38 MB | 10次下載 | 免費
- 6基于AT89C2051/4051單片機編程器的實驗
- 0.11 MB | 4次下載 | 免費
- 7基于單片機和 SG3525的程控開關電源設計
- 0.23 MB | 3次下載 | 免費
- 8基于單片機的紅外風扇遙控
- 0.23 MB | 3次下載 | 免費
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費
- 4LabView 8.0 專業(yè)版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費
- 5555集成電路應用800例(新編版)
- 0.00 MB | 33562次下載 | 免費
- 6接口電路圖大全
- 未知 | 30320次下載 | 免費
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費
- 8開關電源設計實例指南
- 未知 | 21539次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費
- 2protel99se軟件下載(可英文版轉中文版)
- 78.1 MB | 537791次下載 | 免費
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費
- 6電路仿真軟件multisim 10.0免費下載
- 340992 | 191183次下載 | 免費
- 7十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183277次下載 | 免費
- 8proe5.0野火版下載(中文版免費下載)
- 未知 | 138039次下載 | 免費
評論