切换导航
文档转换
企业服务
Action
Another action
Something else here
Separated link
One more separated link
vip购买
不 限
期刊论文
硕博论文
会议论文
报 纸
英文论文
全文
主题
作者
摘要
关键词
搜索
您的位置
首页
期刊论文
基于Bloom Filter的大规模网页去重策略研究
基于Bloom Filter的大规模网页去重策略研究
来源 :现代图书情报技术 | 被引量 : 0次 | 上传用户:jrong520
【摘 要】
:
针对大规模信息采集,运用Bloom Filter及其改进算法,在误差允许的条件下,通过URL散列运算可以有效地对同源网页进行去重。实践证明,通过对其参数进行合理的调整,可以达到满:卷的结
【作 者】
:
丁振国
吴宝贵
辛友强
【机 构】
:
西安电子科技大学网络教育学院,西安电子科技大学经济管理学院
【出 处】
:
现代图书情报技术
【发表日期】
:
2008年3期
【关键词】
:
布隆过滤器
散列函数
URL
网页去重
下载到本地 , 更方便阅读
下载此文
赞助VIP
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对大规模信息采集,运用Bloom Filter及其改进算法,在误差允许的条件下,通过URL散列运算可以有效地对同源网页进行去重。实践证明,通过对其参数进行合理的调整,可以达到满:卷的结果。
其他文献
应用人因工程改善机械制造企业生产的可行性分析
随着信息技术的快速发展,机械制造企业成为我国经济发展的主力,而现代化进程的加快以及人们生活水平的提高,使机械制造企业的运营管理越来越重视人的因素。因此,在现代制造企
期刊
人因工程
机械制造企业
生产改善
高速列车牵引变流器故障诊断研究
针对高速列车牵引变流器冷却滤网状态异常引发的牵引变流器故障问题,通过综合分析牵引变流器故障分类和滤网堵塞程度之间的相关性,提出一种基于多任务深度学习的故障诊断方法
期刊
高速列车
牵引变流器
故障诊断
多任务深度神经网络
自组织映射
high-speed traintraction converterfault diagnosi
吗啡与芬太尼自控静脉镇痛在冻结肩松解术后的临床应用
近年来,我院疼痛科采用全身麻醉在c臂引导下对患者实施手法松解术,术后采用吗啡或者芬太尼病人自控静脉镇痛技术(PCIA)缓解术后疼痛,促使患者术后尽早开始功能锻炼,取得良好效果。
期刊
冻结肩
吗啡
芬太尼
自控镇痛
基于变分自编码器的轴承健康状态评估
针对现有数据驱动型轴承健康状态评估方法普遍存在的特征信息损失大、泛化能力弱和数据依赖强等问题,提出了一种面向高熵特征数据的变分自编码器(variational auto-encoder,
期刊
变分自编码器
异常检测
故障预测与健康管理
滚动轴承
variational auto-encoderanomaly detectionprognostics
跨文化视角下的《我们和他们》
《我们和他们》(We and They)是英国诗人吉普林的一首诗作。作者通过细节的描写展示了英国和印度两种文化的不同。对诗歌的语言予以解释,对其文化意义进行解读,有利于我们跨文
期刊
《我们和他们》
跨文化
启示
中空夹层金属管混凝土构件侧向冲击试验研究
为提高海洋平台结构的抗冰能力,提出一种新型中空夹层金属管混凝土导管腿构件。通过理论分析、数值模拟和试验相结合,研究不同外钢管材料(Q345钢、奥氏体304级不锈钢和T6061
期刊
海洋平台
中空夹层金属管混凝土
导管腿
抗冲击性能
offshore platformconcrete filled double skins metal tu
二十碳五烯酸眼表用药对大鼠角膜不良反应的研究
角膜新生血管(corneal neovascularization,CNV)是角膜病变导致视力下降和角膜移植排斥反应发生的重要原因。我们以往的研究表明,二十碳五烯酸(eicosapentaenoic acid,EPA)是一种核
期刊
二十碳五烯酸
角膜新生血管
不良反应
眼表用药
角膜移植排斥反应
白细胞介素-1Α
血管内皮生长因子
大鼠
其他学术论文