面向统计数据的网络信息抓取系统设计与实现

被引量 : 0次 | 上传用户:ringogogo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
论文研究开发一种面向社会经济统计数据的网络信息抓取系统。该系统以上海市社会经济统计数据为目标,从历年的上海统计年鉴网页和上海市区县统计公报网页中分析和抓取社会经济发展指标数据,为上海市社会经济决策咨询GIS系统的数据更新提供一种方便快捷的途径。论文主要研究内容如下:1.分析研究上海市社会经济决策咨询GIS系统的功能模块和数据构成,归纳总结上海市社会经济决策咨询GIS系统的统计指标及其特征,为系统设计研发提供依据;2.研究讨论面向特定站点的网页解析技术,为指标数据提取及相关功能的设计和使用提供技术方法支撑;3.研究面向文本信息的数据提取方法,包括中文分词技术,实现基于统计的中文分词算法,并使用该算法对网页文本信息进行分析处理;4.抽象定向网页中社会经济指标数据的一般形式,设计面向社会经济统计数据的解析抓取器;5.处理统计公报异构数据,设计并实现统计公报异构数据解析模块。
其他文献
席卷全球的金融危机对浙江家具出口产生了极大影响。本文从出口量和出口方向上分析浙江家具出口贸易现状,同时分析出口贸易中存在的诸多问题,提出进一步扩大出口的对策措施。
工矿企业200KW以上的大功率电动机一般都采用6kV或10kV电压供电,在变频调速节能改造设计中,有多种方案进行选择。本文根据实例阐述了不同功率等级的变频调速节能改造实施方案,并
随着聚合物驱和聚表剂驱采油技术应用,大庆油田和冀东油田产生了大量的含聚污水、高聚污水和聚表剂污水。由于它们含有聚合物等物质,水质发生变化,油水分离困难,乳化严重,物
随着大庆油田进入三次采油阶段,三元复合驱采油技术得到了大面积的推广应用,产生了大量的三元复合驱采出水,由于含有大量的表面活性剂、聚丙烯酰胺和碱导至采出水油水分离困
近几年来,随着“低碳、环保、节能”观念的日益深入人心,人们开始更多地关注环境问题,尤其是CO气体的检测问题。传统的痕量气体检测方法,如化学分析法及气相色谱法无法实现实
尖晶石锰酸锂材料因具有储量资源丰富、环境友好、价格低廉、良好的热稳定性、适宜的充放电平台、容易制备等优点受到越来越多研究者的关注,成为当前最具前景的锂离子电池正极
为了明确煤氧化过程中CO的生成机理与生成途径,利用红外光谱仪与原位反应池,研究了煤低温氧化过程中,醛基、酮基与醌基3种官能团与CO产生规律的关联性,并对3种CO前驱体的表观
目的:早日恢复患者膝关节功能,缩短患者住院时间。方法:术前配合医生作好术前准备,术后针对人工膝关节表面置换术患者行有效的自主功能锻炼指导。结果:15例患者平均住院15.3d
农村金融排斥是一个世界性难题,也是一个动态的、多维度的、综合性的研究问题,反映出金融资源分配的“不公平”和“低效率”,是社会排斥的一个子集。农村地区金融排斥状况严
目的尖锐湿疣(Condyloma Acuminatum,CA)是由人乳头瘤病毒(human papilloma-virus, HPV)感染所致的生殖器及肛周增生性损害。人乳头瘤状病毒目前已发现的有120多种基因型,其