网络系统故障分布式检测方法设计与实现

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:chinasun09
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网技术的发展,网络给人们的日常生活带来了极大的便利,但复杂的网络架构使得网络的维护工作越来越困难,网络服务提供者需要及时的检测和处理网络故障。目前在网络故障检测领域中存在如下几个问题:(1)网络中的大部分流量是正常通信产生的,由于一些稀有的故障流量非常少,存在着数据不平衡的问题,从而导致网络故障检测模型无法正确的识别出稀有的故障;(2)基于单机集中式收集数据进行网络故障检测模型训练的方式会带来巨大的数据存储压力以及存在数据隐私泄露问题。为解决上述问题,本文的主要工作如下:1.针对于网络故障检测领域中存在的数据不平衡问题,本文提出了用于解决数据不平衡的网络故障检测模型DNFD-SRU。DNFD-SRU模型通过采用focal loss权重惩罚函数使得模型更加关注于数据量少的样本,避免了数据不平衡对模型效果的影响,提升了模型对于少数类故障的识别效果。同时通过SRU避免循环神经网络存在前后依赖导致模型训练慢的问题,提高了故障检测的实时性。2.针对于单机集中式收集数据进行网络故障检测模型训练存在的数据隐私泄露和数据存储压力的问题,本文采用了不需要集中收集训练数据且具有隐私保护功能的联邦分布式机器学习技术来进行网络故障检测模型的训练。同时针对传统联邦分布式聚合算法未能考虑各个参与方数据质量和训练效果的问题,本文提出了一种充分考虑各个联邦参与方所拥有的数据质量以及训练效果的方法,根据不同参与方每次参与训练时的验证集准确率,在全局模型聚合时施加一定的惩罚项,提高了全局模型的效果。3.基于以上研究,本文设计并实现了一个网络故障检测系统,将上述成果应用到系统中,并从系统架构、前端显示、后端算法模块、数据存储模块以及最后的工程实现进行了详细描述。最后对实现的网络故障检测系统进行了相应的功能测试,测试结果表示其能较好的检测出自建数据集中的网络拥塞、设备宕机等故障。
其他文献
学位
学位
人物投票行为预测一直是人物行为分析领域的热点问题,对人物的投票行为进行深入的研究,一方面有利于更好地分析人物倾向、理解人物行为,另一方面也能对提案最终是否通过做出预测。目前广泛使用的投票行为预测框架是基于理想点模型的,该模型将投票人与待投票的提案表示为空间中的点,用点之间的距离表示倾向程度。该方法直观展示出了投票人与提案间的关系,并将投票人对提案的倾向变得可解释、可度量,为后续的计算处理过程提供了
学位
学位
学位
油气资源在现代社会中拥有不可撼动的地位,目前,油气资源的输送大部分还是采用金属管道作为输送工具。内压是管道运营过程中最常见的荷载,管线在带压运营的过程中,内部输送的油气介质往往具有腐蚀性,随着运营年限的增加,会对管壁造成一定的侵蚀,如果任由缺陷损伤处发展,将会造成巨大的财产损失。近年来,针对管体缺陷处进行修复加固,已经成为一项重要任务,钢制环氧套筒作为一种新型的夹具免焊修复技术,目前国内外已有部分
学位
人工智能技术在近些年得到了长足的进步和发展,嵌入式智能应用越来越多地应用到各种安全关键场景。为了抵御攻击带来的安全威胁,传统嵌入式系统已经部署了一些安全措施,但严重忽略了安全措施失效或出错对系统造成的影响。本文针对嵌入式智能系统的计算任务、消息安全任务以及深度学习任务施加容错保护,旨在对错误进行检测和恢复,以提供容错支持。然而,容错设计在提高系统容错能力的同时也引入了额外的时间开销,从而影响到系统