大规模网络流量异常检测方法研究

来源 :吉林大学 | 被引量 : 0次 | 上传用户:wings
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
计算机网络高速发展,在日常活动中变得越来越重要。特别是,计算机网络已经成为关键基础设施的一部分,对我们的社会和经济具有战略意义。这些发展导致了高度动态的网络利用,其中流量波动和看似随机和异常的流量模式通常表现出来并且难以检测。为了确保网络的保护和恢复,有必要对网络流量进行更好的观察和分析。因此,流量异常检测旨在发现和描述影响网络基础设施的关键异常,这些异常的来源可能是故意恶意的或无意的,例如攻击、故障、错误配置,或者合法但不正常的网络使用,例如突发访问。然而,虽然有大量的算法和技术研究网络流量异常的不同因素,但大多数研究通常集中在一个特定的方面或方法上,而对整体环境的研究却很少。本文旨在对网络异常检测领域的现状进行全面的分析,将流量异常检测问题分解为处理成本,诊断粒度,理论方法和流量特征四个维度。随后,对流量异常检测研究领域进行进一步的分析,分别讨论问题的各个组成部分,并结合多种统计分析、信息论等技术,从不同角度提出了多种流量异常检测方法,主要研究内容如下:首先,由弱关联数据产生的异常网络通信难以消除,为此,提出了一种基于特征分析的通信网络异常弱关联数据检测方法。该方法对传统方法的基本检测原理进行了更新,并通过使用关联规则来设置异常弱关联数据特征类型,以获得正常数据和异常数据之间更多的差异特征。使用Netflow系统对异常流量数据进行检测,统一数据格式,并根据粗粒度表示提取异常流量中异常弱关联数据特征。利用信息熵定义异常弱关联数据的标准信息熵。在不同时间段的分形维数中,对弱关联数据进行了检测,得到了异常检测结果。实验结果表明,该方法可以有效提高网络通信的自适应能力。其次,使用机器学习算法进行流量异常检测时,特征子集的选择非常重要;并且,在使用支持向量机(SVM)进行流量异常检测时,SVM算法的效率及其性能主要取决于内核类型及其参数。针对前面说明的问题,在使用SVM进行流量异常检测时,需要同时考虑特征选择和参数优化两方面的内容。因此,提出结合使用遗传算法进行优化的思想,在进行特征选择的同时,对SVM的参数进行优化操作。然而,当选择遗传算法进行优化问题的求解过程中,使用者往往需要设置一些参数,由于不同的遗传算子适用于不同的应用领域,因此参数调整是一项困难的任务。本文提出了一种遗传算子随机变化的遗传算法方案。所提出的方法旨在更密切地模仿大自然。在这种方法中,采用了非均匀交叉和选择技术。在生育“孩子”的数量取决于生育率的情况下,还使用了性别繁殖。此外,父母可以收养一个新的“孩子”。在搜索空间的探索和开发之间增加了年龄和死亡年龄。使用这些方法,可以有效地保持种群的多样性,提高遗传算法的性能。然后,提出将改进的自适应遗传算法和支持向量机相结合,利用改进的自适应遗传算法自适应的寻找最佳特征子集,并同时优化SVM模型的参数,以提高算法进行流量异常检测的效率。实验结果表明,所提方法在最小化所选特征数量的同时,最大化SVM在进行流量异常检测的精度。最后,K-Means聚类已被广泛研究并应用于流量异常检测问题,其性能受随机初始聚类中心的不同选择而影响异常检测和分类的效果。提出结合蚱蜢优化算法优化K-Means聚类的思想,将蚱蜢优化算法的最佳解决方案作为K-Means算法的初始点,大大提高了流量异常检测的全局搜索能力和局部搜索能力。实验结果表明了所提算法的有效性。
其他文献
<正>痛经是临床常见的妇科病之一,可分为原发性和继发性两大类,前者是指生殖器官无器质性病变的痛经,后者是指盆腔器质性病变所引起的痛经[1]。自2011年10月至2012年10月以来
目的观察抗生素与妇科千金片治疗子宫内膜炎的临床疗效。方法选取2015年8月至2017年8月在我院接受治疗的子宫内膜炎患者80例作为研究对象,按照随机数字表法分为治疗组和对照
清末民初云南府城(昆明)的城市消费变迁在两个阶段有不同的特点:第一阶段,1889年蒙自开埠到1910年滇越铁路通车,消费能力提高,消费倾向洋化,消费意愿增强;第二阶段,1910年滇
<正>中药现代化,从本质上来讲,就是将中医药的优势和特色予以继承和发扬,采用现代先进的科学技术方法,研究生产出符合国际医药标准和规范的、以现代化和高科技为特征的现代中
辩诉交易是指被告人作出认罪答辩,公诉人则作出撤销部分指控、降格指控或者建议法官从轻判刑的承诺,被告人和控辩方通过协商达成协议的刑事司法制度。辩诉交易产生于美国,由
高校大学生是我国未来社会主义建设的中间力量,他们体质的强弱直接影响着整个全民体质健康水平,直接关系到我国未来的发展和民族的兴衰。本研究随机抽取大连东软信息学院计算机
采用微波氧化辅助Na2S-Na OH浸出体系对铜冶炼烟灰(简称"烟灰")进行研究。结果表明:当温度60℃,Na OH和烟灰的投加量比例为5 g∶10 g,Na2S和烟灰的投加量比例为8 g∶10 g,固
石蜡切片技术方法的改进附属医院病理科王春阳,赵晓明,金小平,尹惠兰,蔡芫关键词改进,石蜡切片,方法具体步骤和方法如下:①取新鲜组织20mm×15mm×4mm入10%甲醛固定液中10~16小时。②入80%的酒精溶液Ⅰ、酒
理欲之辨是维持传统政治秩序的根本观念之一,在古代它被"存天理,灭人欲"的非人本主义所取代,造成理欲之间的对立。今天,在构建和谐社会中以人为本,人民不断增长的物质文化需
在滨江公园建设过程中,森林植物担任着重要的角色,森林植物景观营造的好坏影响着沿江居民的生活环境与生活品质。文章在分析金海湾公园的现状植物、水分、土壤等基础上,提出