資料介紹
針對(duì)傳統(tǒng)的周期性集中式搜索(Crawler)的弱點(diǎn)和增量式Crawler的難點(diǎn),提出預(yù)測(cè)更新策略,給出判別網(wǎng)頁(yè)更新的MD5算法、URL調(diào)度算法和URL緩存算法,描述系統(tǒng)各個(gè)模塊的分布式構(gòu)架的實(shí)現(xiàn),建立測(cè)試集數(shù)據(jù)對(duì)算法進(jìn)行評(píng)測(cè)。該系統(tǒng)在北大天網(wǎng)搜索引擎上運(yùn)行半年多,更新周期縮短了20天,變化預(yù)測(cè)命中率達(dá)到79.4%,提高了時(shí)效性、擴(kuò)展性和穩(wěn)定性。
關(guān)鍵詞:增量式搜集;網(wǎng)頁(yè)變化預(yù)測(cè);搜索引擎
關(guān)鍵詞:增量式搜集;網(wǎng)頁(yè)變化預(yù)測(cè);搜索引擎
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- FPGA加速視覺(jué)搜索引擎解決方案
- 基于蛻變測(cè)試的用戶搜索引擎性能分析 9次下載
- python爬蟲(chóng)入門教程之python爬蟲(chóng)視頻教程分布式爬蟲(chóng)打造搜索引擎 30次下載
- 分布式搜索引擎elasticsearch使用手冊(cè) 0次下載
- 基于JAVA技術(shù)的搜索引擎的研究與實(shí)現(xiàn)
- 主題搜索引擎的研究
- 教育網(wǎng)BBS搜索引擎設(shè)計(jì)與實(shí)現(xiàn)
- 分布式多搜索引擎系統(tǒng)的研究與實(shí)現(xiàn)
- 基于壓縮后綴數(shù)組技術(shù)的搜索引擎
- 原創(chuàng)優(yōu)先的搜索引擎排序算法
- 分布式數(shù)據(jù)庫(kù)搜索引擎的索引建立和優(yōu)化
- 基于偽爬行器的主題式元搜索引擎研究與設(shè)計(jì)
- 搜索引擎查詢?nèi)罩镜木垲?/a>
- 基于網(wǎng)格技術(shù)的并行搜索引擎
- 基于網(wǎng)絡(luò)搜索引擎的網(wǎng)絡(luò)話題分析框架
- javascript:void(0) 是否影響SEO優(yōu)化 1k次閱讀
- 谷歌搜索引擎優(yōu)化的各個(gè)方面和步驟 2k次閱讀
- 百度搜索exgraph圖執(zhí)行引擎設(shè)計(jì)與實(shí)踐分享 1.2k次閱讀
- 使用Rust語(yǔ)言重寫的代碼搜索引擎黑鳥(niǎo)系統(tǒng)Blackbird正式啟用 1.7k次閱讀
- 一個(gè)基于GPT-4的代碼搜索引擎,開(kāi)源了! 2.2k次閱讀
- Elasticsearch 8作為開(kāi)源軟件正式發(fā)布 3.3k次閱讀
- 實(shí)測(cè)沒(méi)有廣告的百度開(kāi)發(fā)者搜索 3.3k次閱讀
- 深入了解電子設(shè)計(jì)搜索引擎 2.7k次閱讀
- 大數(shù)據(jù)是如何優(yōu)化企業(yè)搜索引擎 2.6k次閱讀
- Elasticsearch概述 怎么安裝ES 4.8k次閱讀
- TensorFlow和PyTorch框架的幾個(gè)重要發(fā)展 6k次閱讀
- 如何用Python實(shí)現(xiàn)一個(gè)大數(shù)據(jù)搜索引擎 3.5k次閱讀
- 如何在Python中進(jìn)行Elasticsearch操作? 8.3k次閱讀
- 基于深度學(xué)習(xí)技術(shù),從頭開(kāi)始搭建圖像語(yǔ)義搜索引擎 5.4k次閱讀
- 垂直搜索引擎是什么_垂直搜索引擎有哪些 8.7k次閱讀
下載排行
本周
- 1MDD品牌三極管MMBT3906數(shù)據(jù)手冊(cè)
- 2.33 MB | 次下載 | 免費(fèi)
- 2MDD品牌三極管S9012數(shù)據(jù)手冊(cè)
- 2.62 MB | 次下載 | 免費(fèi)
- 3聯(lián)想flex2-14D/15D說(shuō)明書
- 4.92 MB | 次下載 | 免費(fèi)
- 4收音環(huán)繞擴(kuò)音機(jī) AVR-1507手冊(cè)
- 2.50 MB | 次下載 | 免費(fèi)
- 524Pin Type-C連接器設(shè)計(jì)報(bào)告
- 1.06 MB | 次下載 | 免費(fèi)
- 6新一代網(wǎng)絡(luò)可視化(NPB 2.0)
- 3.40 MB | 次下載 | 免費(fèi)
- 7MS1000TA 超聲波測(cè)量模擬前端芯片技術(shù)手冊(cè)
- 0.60 MB | 次下載 | 免費(fèi)
- 8MS1022高精度時(shí)間測(cè)量(TDC)電路數(shù)據(jù)手冊(cè)
- 1.81 MB | 次下載 | 免費(fèi)
本月
- 1愛(ài)華AIWA HS-J202維修手冊(cè)
- 3.34 MB | 37次下載 | 免費(fèi)
- 2PC5502負(fù)載均流控制電路數(shù)據(jù)手冊(cè)
- 1.63 MB | 23次下載 | 免費(fèi)
- 3NB-IoT芯片廠商的資料說(shuō)明
- 0.31 MB | 22次下載 | 1 積分
- 4H110主板CPU PWM芯片ISL95858HRZ-T核心供電電路圖資料
- 0.63 MB | 6次下載 | 1 積分
- 5UWB653Pro USB口測(cè)距通信定位模塊規(guī)格書
- 838.47 KB | 5次下載 | 免費(fèi)
- 6技嘉H110主板IT8628E_BX IO電路圖資料
- 2.61 MB | 4次下載 | 1 積分
- 7蘇泊爾DCL6907(即CHK-S007)單芯片電磁爐原理圖資料
- 0.04 MB | 4次下載 | 1 積分
- 8100W準(zhǔn)諧振反激式恒流電源電路圖資料
- 0.09 MB | 2次下載 | 1 積分
總榜
- 1matlab軟件下載入口
- 未知 | 935137次下載 | 10 積分
- 2開(kāi)源硬件-PMP21529.1-4 開(kāi)關(guān)降壓/升壓雙向直流/直流轉(zhuǎn)換器 PCB layout 設(shè)計(jì)
- 1.48MB | 420064次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233089次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191439次下載 | 10 積分
- 5十天學(xué)會(huì)AVR單片機(jī)與C語(yǔ)言視頻教程 下載
- 158M | 183353次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81602次下載 | 10 積分
- 7Keil工具M(jìn)DK-Arm免費(fèi)下載
- 0.02 MB | 73822次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65991次下載 | 10 積分
電子發(fā)燒友App





創(chuàng)作
發(fā)文章
發(fā)帖
提問(wèn)
發(fā)資料
發(fā)視頻
上傳資料賺積分
評(píng)論