互联网舆情监控系统中聚焦爬虫的研究

来源 :2010第六届全国多智能体系统与控制学术年会 | 被引量 : 0次 | 上传用户:q520fang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文对质检总局互联网舆情监控系统中聚焦爬虫进行了研究,给出了爬虫算法和关键技术,研究了聚焦爬虫的工作流程、组成、架构.聚焦爬虫由页面相关度评价模块、搜索链接评价模块和页面提取模块组成.本文给出了以上模块的组成及相互关系.针对聚焦爬虫中存在的问题,给出了具体的解决方案。
其他文献
连锁超市供应链配送供应链在实际运作过程中存在大量诸如需求不确定、信息不对称以及供应商不稳定等随机因素,这些因素的存在导致连锁超市配送供应链管理中的风险性,从而影响
本文提出了在科学计算软件SCILAB中连接访问嵌入式数据库SQLite的实现方法.由SQLite负责记录数据的管理,从而方便科学计算的数据记录与管理,极大扩展了SCILAB功能.方法简单实
统一建模语言UML是目前最受欢迎的一种建模工具.本文采用UML对高校选课信息系统进行设计,对系统进行分析.在确定系统设计的目的的基础上,对系统的需求进行了用例建模,同时分
绿菜花高产优质栽培技术大石桥市钢都乡农业站李恺大石桥市蔬菜办公室蔡淑颢,王秀艳绿菜花又名西兰花、木兰花椰菜、青菜花等,属十字花科甘蓝类蔬菜。绿菜花原产地中海沿岸,营养
苹果新品种──新苹一号该品种由兵团农八师葡萄站选育,亲本国光×56193(选育代号74─1)。多年生枝褐色,1年生枝赤褐色,新梢密被灰白色茸毛,皮孔较小、稀疏、椭圆形或圆形。叶片椭圆形,波状卷
从上面介绍的国外水平看来虽然在某些方面我们是有差距的,但是一般说来差距并不很大,只要我们努力去做,可以在不长的时间里赶上去。根据七十年代的发展情况,对100米以上的大
随着企业业务需求的不断复杂,越来越多的企业选择在实现企业核心技术的业务同时集成一些在Internet上的外部应用服务来降低程序开发成本.这也促进了Web服务组合技术的快速发
购买果树苗应注意什么购买果树苗应注意到“六看”。一看品种苹果、梨、桃、杏等果树苗,要弄清其是否适合当地的地理条件,若适合栽培,应选购砧木类型一致、品种纯正的好苗。二看
我区西洞庭湖及沅、澧水尾闾是血吸虫病严重流行区,每年都发生急性血吸虫病。1977~1986年发生急性血吸虫病1319例。 发病情况 1319例中首次感染976例,占73.99%。以1983年发病
这是一篇在海上死里逃生的故事,也是一个关于游泳的故事,不过,它比游泳池里发生的一切要惊心动魄得多——那是1984年3月11日的夜晚,经历了2天的暴风雨,冰岛以南7公里爱尔兰