基于实时可视化数据挖掘的高并发性能监测系统设计与实现

被引量 : 0次 | 上传用户:glittering789
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
软件工程领域的并发在微观上是指多个程序在处理器上同一时间的运行,宏观上是指多个用户在同一时间对系统的访问和操作;而高并发则是高数量级的程序或用户对系统在同一时间的执行或操作,进而对该系统产生巨大的负载压力。现今,高并发系统应用在诸多行业,包括门户网站、电信、金融、交通、甚至热议中的云计算等领域。本文重点关注的是高并发系统的性能监测,因为此类系统不仅要在功能上满足要求,性能上也要保证高并发环境下的正常运行,所以对该类系统上线运行前的性能测试和运行当中的性能监视是必要的。但目前大部分高并发系统的性能测试和系统运营时的监视是分别在各自环境和工具中进行,造成性能测试阶段所获得的测试分析数据和在测试过程中各种异常事件处理经验,不能有效地应用到系统运营阶段的性能监视中,也就不利于对被监测系统运行状态的准确预测、异常事件的排查和在维护调优过程中对所需技术依据的掌握。所以本文提出:高并发系统的性能测试和运营中的性能监视应能有机的结合,形成合二为一的高并发性能监测系统。同时许多高并发系统都需要实时地获取和处理数据,具有实时系统的特点,这不仅要求系统在高并发压力环境下的运行稳定性,也要求能及时同步地获取该系统的性能状态数据予以监测;并且为了达到对系统运行状态的有效跟踪、报警和预测,增强信息表达效果,应能在系统运行时进行直观的可视化监测。针对上述高并发系统性能监测的技术要求,需要有对应的基于实时性和可视化数据挖掘技术的高并发性能监测解决方案。所以利用相关技术,开发基于实时可视化数据挖掘的高并发性能监测系统具有实际的应用意义。为了在高并发系统环境下对实时数据的精确处理和对性能监测数据的有效分析,本文采用了基于时序同步的分布式并行处理技术和BP神经网络数据挖掘算法,这既能根据系统监测要求对高并发监测数据进行高效地采集和统计分析,又能把测试阶段提炼出的性能分析数据形成训练样本,对实时性能监视数据进行可视化数据挖掘,形成有效的可视化性能分析、预测及报警监测图像,达到对被测系统的可视化状态跟踪分析的目的。本文首先根据目前相关行业需求和高并发系统监测面临的问题,明确开发和应用基于实时可视化数据挖掘的高并发性能监测系统的必要性。分别详细研究了高并发系统性能监测、可视化数据挖掘、实时系统;论述如何把基于时序同步的分布式并行处理和BP神经网络数据挖掘算法应用到高并发性能监测系统中,并以此为基础展开对高并发性能监测系统的详细设计和具体实现。
其他文献
自2016年8月国务院发布《降低实体经济企业成本工作方案》(国发[2016]48号,以下简称48号文)以来,降低实体经济企业成本取得显著成效。但是,近一年来实体经济企业融资成本反弹,资本
报纸
近现代社会商品经济的发展催生了最高额抵押制度,其产生不过百余年的历史,已经在经济社会中发挥了重大的作用。然而在我国,最高额抵押制度立法尚存有一定的缺陷,学者间对最高
为了解采伐及伐后土地利用方式改变对东北温带次生林土壤微生物生物量碳氮的影响,在东北林业大学帽儿山实验林场,选择典型次生杂木林进行了四种采伐处理(皆伐后造林、皆伐后
太阳能由于无污染、无噪声等诸多优点较其他可再生能源具有较高的利用开发价值。论文分析光伏发电系统的分类与结构,以工程实例探讨光伏发电系统的设计,为相关工程提供参考。
空间态势信息是空间攻防对抗和信息对抗中不可或缺的战场情报信息和影响战略决策的重要因素。我军发展空间攻防的新概念武器、天基作战平台和信息对抗关键技术都必须发展相适
18世纪末,廓尔喀军队侵犯我国西藏,清军将领福康安率兵赴藏予以抗击。取得胜利后,针对西藏封建农奴制度日趋腐朽,某些寺庙僧侣、地方官吏无偿滥用乌拉差役,使农牧业生产萧条,民不聊
目前,我国公路建设正处于大规模发展时期,投资规模大、建设标准高。面对大规模公路建设物资的需求,需要高规格的物资保障。针对公路建设物资,尤其是重点公路建设物资的采购提
随着社会经济的飞速发展,人们生活水平的提高,交通流量日益增大,各种交通问题频繁发生,智能交通系统就变得尤为重要。交通载具作为整个交通的载体,是智能交通系统研究的重点
<正>赣发[2014]8号2014年2月19日各市、县(市、区)党委和人民政府,省委各部门,省直各单位,各人民团体:《江西省党政机关厉行节约反对浪费实施细则》已经省委、省政府同意,现
现阶段发光二极管(Light-Emitting Diode)的应用日趋普遍。LED灯具具有强于传统光源的若干优势,随着LED功率不断提高,高亮度的LED灯具有着取代传统照明灯具的趋势,应用潜力非