基于lightGBM的网络流量异常检测方法研究

来源 :燕山大学 | 被引量 : 0次 | 上传用户:lingang89029
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网技术的不断普及,给人们带来了便利的同时也带来了挑战。由于网络安全事件的频繁发生,急需构建高效的流量异常检测模型并将其应用到网络安全领域中解决网络入侵问题。网络流量数据的样本不仅种类繁杂和数据量庞大,而且存在数据不平衡和特征维度高的问题。为了解决上述问题,论文的工作如下。首先,本文采用Boderline-SMOTE少数类数据合成方法,解决网络流量数据集中存在的数据不平衡问题。在网络流量数据中,各种网络攻击类别的数量存在很大差异,在模型的训练过程中容易造成过拟合问题。Boderline-SMOTE方法在少数类边界处对少数类进行数据合成,实现数据的平衡化。其次,本文整合Relief F算法和遗传算法(GA)算法,提出一种基于Relief F-GA的双重式特征选择方法,解决网络流量数据特征维度高的问题。该方法使用Relief F算法,根据各个特征和类别的相关性赋予特征不同的权重,把特征按照权重排序,挑选出权重值排名中前k个特征作为特征子集。但是Relief F算法只考虑特征与类别的相关性,未考虑特征间的冗余,为了解决特征间的冗余的问题,使用基于遗传算法包裹式特征选择方法针对每种网络行为的筛选出最优的特征子集。再次,本文提出网络流量异常检测模型BRG-FLGBM,使用聚焦损失函数(Focalloss)优化的light GBM算法FL-light GBM作为多分类器,使模型BRG-FLGBM在训练过程中不断调整网络流量数据的权重,使模型在训练过程中更加关注难分样本,提升模型的准确率。同时使用贝叶斯优化算法对light GBM模型进行自动调参。最后,在NSL-KDD数据集上进行网络流量异常检测仿真实验,并将实验得到的结果与现有的网络流量异常检测模型对比,实验结果证明所提出的模型在网络流量异常检测方面的高效性。
其他文献
作为胃肠道平滑肌的生理性刺激之一,牵张对胃肠功能的调节具有十分重要的意义。早期研究表明,机械性外力能够激活某些信号转导通路中的离子通道,例如,牵张细胞膜可激活钙通道、钾通道和毒蕈碱受体门控通道等。细胞骨架主要包括三种蛋白成分,即微丝、微管和中间丝纤维。它们组成一个复杂的网状结构,为细胞器之间的功能联系提供基础。牵张刺激能够改变细胞形状,相应地也能够改变细胞骨架蛋白的结构。早期研究证实,组成细胞骨架
用解析的方法求解温度等于临界温度时在Matsubara表象中二阶行列式方程推导出超导临界温度按电声子耦合常数λ=2∫ dω/ω α2(ω)F(ω)的负幂次展开表达式;得到了强耦合超导理论的有效声子谱α2(ω)f(ω),电声耦合常数λ,λ(ω2)和库仑赝势μ*的计算公式;研究了金属间化合物MgB2超导临界温度的计算方法,并对弱耦合BCS理论和强耦合Eliasshberg理论结果作比较。
近年来随着技术的不断的发展,目标跟踪作为计算机视觉的重要分支,在无人驾驶、人机交互、智慧医疗等方面有着广泛的应用。目标跟踪算法在实际应用中经常会受到遮挡、形变、相似背景干扰、光照变化等多种复杂情况的影响,导致跟踪精度下降,甚至目标丢失。针对上述存在的问题,提出了特征融合和极坐标下尺度变化目标跟踪算法,具体工作如下:首先,针对目标跟踪算法中出现光照变化、姿态变化时跟踪精度下降的问题,提出了多特征融合
随着“互联网+”时代的到来,数据已成为越来越多组织或企业的核心资产。文档由纸质版逐步转化为电子版形式,Internet上传输和交换的数据也随之增多,方式的转变提高了数据安全的风险和威胁。虽然信息技术促进了现代企业的发展,但企业中敏感数据安全问题也逐渐显露。为了防止企业中的重要文档泄漏,则需要对这些敏感文档布置有效的检测手段,本文提出了多重文件指纹策略,并结合人工智能等先进技术,针对信息安全审计系统
功能近红外光谱成像系统作为一种非侵入脑功能成像工具在脑科学研究领域迅速发展,对于研究神经活动与脑血流动力学相关性方面具有重要的意义。而系统通道数量较少导致的检测能力不足成为目前拟解决的问题。为了对脑组织多个部位的血液动力学参数进行同步测量,本文设计开发了一套基于光源光强调制的多通道fNIRS成像系统。首先,设计了多通道fNIRS成像系统的硬件电路。通过分析fNIRS成像系统的测量原理及方法,确定光
OpenAPI(OpenApplication Programming Interface),即开放平台接口,作为Web应用之间交互的重要方式,以其低成本高价值的优势成为Web应用开发者进行Web应用之间通信的首要选择。因此,研究Web应用对接OpenAPI过程的现状,针对其对接难、更换烦和运行不稳定的问题,将手工对接过程转化为半自动化的对接过程,对社会电子信息化发展是具有现实意义的,其成果可以节
目标跟踪技术作为计算机视觉领域的一个核心研究课题,具有很高的商用价值,例如在机器人、导航与制导、无人驾驶等军用及民用领域都发挥着重要的作用。孪生网络的出现,将目标跟踪的精度与速度做到了良好的平衡,但是当目标遇到遮挡、旋转、翻转、光照变化等复杂情况时,跟踪效果明显下降,由于其固定使用第一帧作为模板,长期跟踪时模板发生退化,特征相似度降低,易导致跟踪漂移。本文基于孪生网络目标跟踪算法,在特征提取及融合
肺结节作为一种肺部的常见疾病,容易累及其他器官,甚至会发展为肺癌,严重威胁人类的健康。目前临床上采用胸部电子计算机断层扫描(Computed Tomography,CT)影像学技术获取肺结节的图像,医生依据肺部CT图像进行诊断,已成为主要的诊断手段。但医生的判断往往存在主观因素,并且图像的采集和处理也是关系诊断准确性的重要因素。如何获取更高质量的肺部CT图像,是医学面临的一个重要问题。故本文对此进
本文以推广的Jacobson方法讨论了SSeS结的Josephson效应,并在小电流假设下,导出了该结的电流密度与位相之间的关系。 首先,介绍了结的各种类型及不同的研究方法。前人已经对SIS结、SNS结、SINS结、SINIS结、SIS1IS结、SNS1NS结等超导结进行了研究,并且在许多领域中获得了及其重要的应用。在Josephson效应的理论研究中,大体上有微观和宏观两种方法,本文采
随着居民生活节奏的加快、购物需求的增加,电商购物平台所提供的足不出户的购物方式,已经演变为青年、中年、中老年消费者的首选,而且这种购物模式的持续发展,既在不断优化电商平台的销售及管理,同时出暴露出电商平台销售的诚信度或各供应环节的衔接问题。本研究以电商平台的水果销售及管理为例,对电商平台销售的优势与问题进行研究,寻求进一步的电商平台水果销售及管理的完善策略。