适合统计数据对象整合处理技术的研究与应用

来源 :东华大学 | 被引量 : 0次 | 上传用户:planktonli
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着我国城市公共交通快速发展,轨道交通作为城市交通中的重要组成部分,在城市繁忙的公共交通运输中越来越受到青睐。但目前,轨道交通自动售检票系统在计算机技术应用层面上还停留在售检票设备运营自动监控和票务信息处理与管理的技术范畴。本文的项目研究是针对轨道交通自动售检票系统沉淀的海量票务交易、设备状态和维护日志等数据的挖掘、发现、统计分析和使用的方法与技术。本文重点研究适合统计数据对象整合处理的技术与应用。本文作者的主要研究、创新工作如下:ⅰ)为便于使用者理解和使用各种数据源组织结构信息,提出映射数据库元数据信息并进行中文语义描述的方法,把英文的专用缩略词汇描述成易于理解的中文语义描述,增强了系统易用性:ⅱ)通过研究基于Linux平台下的数据整合,采用XML技术来解决异构数据库的数据转换、存储和数据关系运算的问题。根据实际业务数据的特点,研究和实现的数据转换包括:格式修正、字段解码、度量单位转化和日期/时间转化,并结合数据仓库中的相关策略及本项目的架构模式,提出一个双层数据转换模型。该模型在开发实现上有着较大的灵活性、占用计算资源较少、在部署和运行上扩展性较强;ⅲ)针对并发请求响应和数据文件存储问题,通过分析文件存储和XML格式文件存储的特点,定义了适合统计结果存储的XML格式文件,很好地解决了统计结果缓存及再次反馈的应用需求,并能实施控制XML格式结果文件占用存储空间的策略;ⅳ)针对数据运算,提出把部分关系运算和数值计算从数据库系统剥离的策略,降低对业务数据库系统的资源占用。基于XML数据文件,可以根据DOM接口来读取XML文件中数据,进行相关的关系运算、数值计算和其它运算,为了提高连接的处理效率,实现了基于XML数据文件的NES-JOIN算法。实际应用证明,本文研究的数据整合处理的技术与方法能够满足在线分析处理的应用需要,并能优化使用生产现场宿主系统的计算资源。
其他文献
Internet的迅猛发展带来了一系列问题,例如路由、资源预留和网络管理等问题。由于在Internet上实验非常昂贵,且因为一些商业因素的限制,研究者不可能直接在Internet上模拟和仿真
移动数据实时转换能够架起传统互联网和移动网络之间的桥梁,使移动终端用户不仅能够访问专门的WAP资源网站服务,而且能够访问平时不能访问的WEB内容。本文中的移动数据实时转
本论文简要介绍了分形的定义及其发展,以及Mandelbrot集(简称M集)和Julia集(简称J集)的概念及两者的区别。利用理论推导和数值模拟相结合的方法研究了混沌控制中的相关问题,
语义检索是把信息检索与人工智能技术、自然语言技术相结合的检索技术,它从语义理解的角度分析信息对象与检索者的检索请求,是一种基于概念及其相关关系的检索匹配机制。Ontolo
访问控制是通过某种途径显式地准许或限制访问能力及范围的一种方法,在电子商务环境下,它是解决企业信息系统安全的关键方法之一,也是信息安全领域研究的重点和热点。目前已存在
科学技术的迅速发展和应用,对智能化系统的需求也变得更加突出和激烈。在这资源环境剧烈变化的时代,现代人类越来越注重生活品质与生活安全。智能化系统的出现为人类的生活提供
制造报文规范作为交换实时数据和监控信息的一套国际标准报文规范得到了广泛研究与应用。作为图形数学建模工具,Petri网广泛用于系统的建模、分析和仿真,但很少涉及Petri网模
随着人类科技的进步发展和先进仪器设备的应用,人类得到了大量的数据。其中,高维小样本数据作为生物信息数据的特点,给数据信息处理带来了新的挑战。为了从海量数据中提取有
本文主要研究了群体智能优化算法中的粒子优化群算法在函数优化方面的应用与改进。粒子群算法是近几年发展起来的一种基于群体智能的优化算法,其源于对鸟群群体运动行为的研
随着3G时代的到来,用户对移动通信有了更高的期望,不仅要求有稳定的语音通信,而且还要求能够进行数据和多媒体的多种通信方式。针对这些需求,第三代合作伙伴计划(3GPP)标准小