基于机器学习的网络流量检测方法设计与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:wushiguo208
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络业务类型的多样化和网络部署规模的快速增长,由信息交互产生的网络流量成倍增加,极大消耗了整体网络带宽,给网络管理带来新的问题和挑战。网络流量检测作为监控网络性能、保障网络服务质量的手段之一,已受到国内外学者的广泛关注。由于机器学习能够对网络流量的行为统计特征进行有效整合,研究基于机器学习的网络流量检测方法具有重要意义。本文总结了机器学习在网络流量检测中的研究现状,针对当前流量检测方法实时性差的问题,提出一种改进的XGBoost网络流量检测模型。该模型通过引入Boruta算法,创建阴影特征和随机森林分类器,依据特征重要性分数对原始流量特征进行筛选,缩小了特征规模;此外,将XGBoost在特征粒度上并行化,利用Block结构保存特征值的预排序结果,并在确定最优分裂点时重复使用该结构,减少计算量。在实验设计中,利用Python搭建环境并实现了上述模型功能,然后基于林肯实验室发布的网络入侵数据集进行了验证。实验表明基于改进的XGBoost网络流量检测模型的特征规模缩小25%,模型训练时间也由325秒缩短至198秒,提高了流量检测的实时性。针对当前网络流量检测方法准确性低的问题,本文提出一种基于动态深度森林的流量检测模型。通过多粒度遍历模块和级联森林模块分别实现流量特征的重组和流量类型的分类。在多粒度遍历模块中,通过构建动态选择器将流量特征进行组合遍历,加强了模型的表示学习能力;在级联森林模块中,通过引入层层相连的树形结构和动态层级增长策略限制模型的复杂度,在提升分类性能的同时防止过拟合。通过实验设计和结果验证,动态深度森林模型的流量检测精度提升约12%,误报率由19.4%降低至2.8%,全面提升了流量检测的准确性。
其他文献
在建筑能耗中,建筑围护结构的耗热量占了主要部分,因此对建筑围护结构传热的研究得到越来越多人的重视。在亚热带地区的代表性城市广州,其气候特征是典型的夏热冬暖,该地区的建筑围护结构主要满足隔热性能的要求。因此,研究夏热冬暖地区建筑围护结构在夏季非稳态传热过程和传热特性,对于该地区的建筑节能具有重要意义。以往多采用实验与模拟法来研究非透明围护结构的隔热性能,通过实验和模拟得出的结论是离散而非连续的,无法
目的:本研究考察金复康口服液调控NLRP3干预A549细胞增殖和体内生长的机制研究。方法:1.炎症小体NLRP3在非小细胞肺癌细胞A549增殖中的作用及机制研究敲低(knock down,KD)A549细胞中的NLRP3和利用核因子-κB(NF-κB)的抑制剂BAY 11-7082干预;MTT法检测KD A549细胞中NLRP3及NF-κB抑制剂BAY 11-7082处理A549细胞后的体外增殖影
车集煤矿23采区下山煤柱工作面长度250 m,推进长度270m,两侧采空为孤岛工作面,为解决采掘接续紧张,准备安全回采煤柱工作面资源,而回采时将遇到工作面过空巷、合理停采线位置确定问题。因此煤柱工作面开采需对过空巷、合理停采线留设两大难题进行技术研究。论文以车集煤矿煤柱工作面为工程背景,在煤岩力学测试、围岩结构探测的基础上,发现了影响工作面开采主要技术难点;分析了工作面过空巷应力变化特征,构建了煤
耕地资源是人类生存和发展的基础,是国家和民族得以延续的生命线。随着我国工业化、城镇化的迅速发展,耕地资源面临数量不断减少,质量日益下降,生态问题凸显等严峻威胁。究其根本,由于长期以来人们对耕地价值的片面认知,导致了在耕地利用过程中过度重视耕地的生产价值和社会价值,而忽视了生态价值。面对耕地生态保护的严峻形势,想要实现对耕地资源数量、质量和生态的“三位一体”的全方位保护,就必须建立、健全耕地资源生态
随着移动蜂窝网络技术发展与移动互联网应用的普及,移动互联网数据流量和内容多样性呈爆发式增长。对于海量移动多媒体内容分发应用场景,数据内容具有异步重复请求特点,高流行度内容的重复传输导致回程链路资源利用率较低,无法满足海量数据内容传输需求,因此将流行度较高的热点内容缓存在网络边缘的边缘缓存技术成为解决回程链路流量压力的关键技术之一。在对边缘缓存技术的研究中,一方面智能终端的硬件存储技术飞速发展,存储
长期以来,课堂问题行为在我国初中课堂教学活动中普遍存在,尤其在农村初中留守学生教育问题中表现最为突出。这种现象既影响了正常的教学秩序,课堂效率和教学目标的实现,也不利于留守学生身心健康的成长与发展。因此有效解决农村初中课堂问题行为对于农村初中留守学生教育来说意义重大。本研究以范县区域初中为例,通过对初中留守学生的随机取样调查,了解当前农村初中留守学生课堂问题行为的现状,透过现象看本质,从多维的视角
心率作为人体健康状况的重要生理参数,对于人体疾病诊治及健康监护有着不可替代的作用。本文设计了一种利用视频图像处理方式检测心率的非接触式测量系统,将嵌入式图像处理与心率检测相结合,可以实现视频图像的实时采集并放大其中微弱的人体生命体征信号,再通过信号分析获取心率值。非接触式心率测量方法具有无创、便捷、可长期连续测量等优点,为智慧医疗中的远程监控发展奠定基础。论文首先研究了视频图像中微小信号放大的模型
我国高速铁路在建设运营中,难免要跨越江河、天然沟谷等交通要道,为减少占地及对环境的影响,需要设置桥梁。在严寒地区路基与桥梁过渡点附近极易产生不均匀变形,导致轨面不平顺与结构损伤,进而影响行车的安全性和稳定性。既有研究主要集中在基础变形的产生机理、设计方法以及控制措施等方面,关于严寒地区复杂基础变形对无砟轨道损伤特性的研究较少。因此有必要开展严寒地区路桥过渡段区域基础变形对无砟轨道变形损伤和动力学响
2016年6月23日,英国公投确定脱离欧盟组织,这一“黑天鹅”事件给世界经济走势带来了巨大不确定性,原本稳定的贸易局势开始变得扑朔迷离。我国作为世界贸易大国,英国脱欧后其相关的贸易政策制定调整的不确定性必将给我国出口企业带来冲击。因此,本文从贸易政策不确定性这一角度出发,研究英国脱欧这一事件给我国出口企业的投资活动带来的影响。本文首先对国内外研究贸易政策不确定性与企业投资关系的文献进行了系统梳理。
中国高铁网络对城市间创新合作的影响是一个有待探究的问题。本文在已有研究的基础上,从创新活动集聚、创新要素流动两方面分析高铁影响城市创新的路径,提出高铁网络影响城市间创新合作的4个假说。假说1:高铁网络有利于促进城市间的创新合作。相比于未开通高铁的城市,开通高铁的城市其城市间创新合作水平更高。假说2:城市在高铁网络中的位置差异是影响城市间创新合作水平的重要因素。高铁网络中心度越高,则城市间的创新合作