基于软件定义网络的智能QoS路由优化研究

来源 :湖南师范大学 | 被引量 : 0次 | 上传用户:haidong711
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着移动互联网通信技术的快速发展,新型移动网络的应用和业务越来越多,传统的尽力而为的路由算法无法满足这些新应用和业务的网络服务质量(Quality of Service,QoS)需求。近年来,软件定义网络(Software-Defined Networking,SDN)的出现使网络管理变得更加灵活和高效,软件定义范式被应用于网络路由中,在很大程度上改善了网络的QoS,但是,基于软件定义范式的QoS路由优化方案往往是针对某些具体网络场景的,难以适应不断变化的业务需求。随着人工智能迅速的发展,机器学习在数据处理、分类、智能决策等领域上有着显著的优势。为了有效解决SDN网络下的QoS路由问题,将机器学习技术的智能算法引入到SDN的QoS路由优化中,从而为实现一个更加智能的动态路由提供了便利条件。但现有的智能路由方案一般只能处理离散的、低维的动作空间,并用离线的网络数据进行训练,不能在线学习,对于动态网络环境表现效果不佳。为此本文通过对QoS路由优化的问题进行研究,以SDN为基础框架,使用深度强化学习(Deep Reinforcement Learning,DRL)进行智能路由决策,提出了一种新型智能在线的QoS路由优化方案。本文研究的主要内容和创新点如下:(1)提出了一种基于SDN和深度强化学习的在线QoS路由架构。该框架利用SDN控制器为QoS智能路由决策提供相应的网络状态信息,并根据QoS智能路由算法的决策输出来下发路由规则。该框架可以实现网络信息数据的实时采集,同时能够进行在线策略(on-policy)学习,从而实现对QoS路由的优化。(2)提出了一种基于SDN和异步优势动作评估模型(Asynchronous Advantage Actor-critic,A3C)的智能QoS路由优化算法,简称SA3CR算法。SA3CR算法将深度学习智能模型A3C引入到QoS网络中,并对A3C算法中的网络结构,输入、输出、奖励函数等进行了重新设计。该算法能够根据QoS目标流的需求,并综合考虑了多种QoS指标,来生成路由策略。利用SDN控制器将搜集到的网络状态信息作为A3C深度强学习模型的输入状态,经过在线训练,得到一系列的链路权重,然后根据智能路由算法SA3CR来计算出路最优路径,从而对QoS路由进行优化。(3)实现了基于软件定义网络的QoS智能路由优化系统。系统包含网络感知模块、QoS参数测量模块、QoS智能路由模块、流表下发模块、网络监控模块等多个模块。整个系统能够实现对网络状态信息的实时采集,动态智能路由策略的生成,路由策略的实时下发,三个环节相互配合,不断检测QoS网络状态、更新路由策略完成智能路由过程,实现对网络数据流的在线路由功能。(4)通过采用OS3E网络拓扑对本文提出的架构和算法进行评估,SA3CR智能路由优化算法相较于ECMP、KSP、NAF_R、DDPG_R算法上,至少减少了10%的平均时延,提高了8.7%的网络吞吐量,降低了7.2%的网络丢包率。
其他文献
李代数是一类重要的非结合代数,任何李代数都可以看作是单点流形上的李代数胚.本文基于李代数胚对的Atiyah class的理论,主要研究了李代数L及其子代数A组成的李代数对(L,A)的Atiyah class.通过应用李代数模和李代数的上同调理论,定义了李代数对的Atiyah class,证明了 Atiyah class为零的判定定理.作为应用,计算了实数域上四维李代数对的Atiyah class.
随着互联网的高速发展,社会已经进入大数据时代,以关键字组合进行检索的传统搜索系统,无法解析用户问句的语义信息,只是简单返回相关的答案供用户参考。因此基于知识图谱的智能问答系统应运而生,根据自然语言问句能够快捷准确的得到答案,更好的满足现代社会的需求。本文基于NLPCC-ICCPOL 2018提供的中文领域知识图谱公共数据和清华大学提供的基于基础教育类知识图谱数据进行智能问答系统的研究,将智能问答系
边界层(Planetary Boundary Layer,PBL)参数化方案的准确性会影响数值模式对近地面变量和大气低层热动力结构的模拟,这对雷暴等强对流天气的预报非常重要。但PBL方案内在的不确定性使得单一预报具有局限性。随机参数扰动(Stochastic Parameter Perturbation,SPP)方案是一种针对物理参数化方案中不确定的参数进行扰动的集合预报方法,从根源上表征了预报不
本文考虑了切换系统在两种反馈控制下的稳定性研究,并且将研究的结果运用到两级化学反应槽系统、飞控系统、升压变换电路系统中.第一章为本文主要结论的引出,预备了定义和引理.第二章研究了一类具有时变时滞的执行器饱和切换系统的耦合事件触发采样机制和基于观测器的输入反馈控制的稳定问题.对比一般的连续时间反馈控制,基于观测器的事件触发反馈控制的优势在于,其一可以进行非连续时间反馈控制,尤其是在应对系统状态信息不
随着信息技术的迅速发展和应用,海量数据蕴含的巨大价值吸引了诸多研究者的关注。低秩张量填充作为一种重要的数据分析工具,已经成为计算机视觉、人工智能和优化领域研究的热点问题。其主要对部分丢失、含有噪声或异常值的数据进行填充,在图像/视频修复、信号重建、数据挖掘等方面有重要的应用。然而,现有的低秩张量填充算法存在速度慢、能够处理的规模小等问题,使得不能发挥其作用和优势。另外,在很多应用中,实际数据的先验
本文利用1980—2017年国家气象信息中心提供的全国753站逐日降水资料、NCEP/NCAR逐日再分析资料、NOAA同期驱动轨迹模式HYSPLIT资料,首先对比研究了华南前汛期8个典型涝年和7个典型旱年的低频降水特征及其与低频水汽输送的同期和时间滞后关系,给出了低频降水预测参考信号,并用HYSPLIT模式验证。在此基础上,进一步研究南半球低频环流系统及越赤道气流对华南前汛期涝旱年低频降水的影响,
随着第五代(the fifth generation,5G)移动通信在世界范围内的不断发展,5G用户渗透率不断提升,与5G相关的创新型业务也将大幅增长。无线信道作为通信系统中的传输媒介对通信性能有重大的影响。5G和未来通信的发展离不开与相应无线通信环境相吻合的信道模型的研究。由于目前信道模型的仿真并不全面,并且很少有学者对当前的主流的信道模型做出全面客观的对比分析。因此本文结合当前主流的5G信道模
动态场景下的模糊图像是物体的移动、相机的晃动和失焦引起图像的模糊伪像,从而影响人们的视觉对详细图像信息的感知,图像去模糊已经成为图像复原中关键的技术之一。如何把动态场景下拍摄的模糊图像修复成清晰的图像是十分突出待解决的问题,目前随着深度学习技术的蓬勃发展,越来越多的方法可以将动态场景下的一幅模糊的图像通过卷积神经网络得到清晰的图像。动态场景下高清晰的图像,在消费电子、安全监控等领域有宽广的应用前景
特种串联机械臂是某特种试验中搭载模型的关键机构,承担着稳固模型位置及调整位姿的重要任务。含有大量构件和运动关节的串联机械臂不可避免的会受到各种误差因素的影响,这些误差则会反映在机构末端执行器的运动上,尤其是累积性的误差,会随着机构服役周期的增加不断叠加,甚至引起精度的失效。本文针对多误差因素耦合的情况,重点考虑累积性因素,分析特种串联机械臂运动精度及可靠性对误差的响应,并进行精度的分配与可靠度的优
木质纤维素生物质细胞壁主要由多糖和芳香聚合物木质素组成,这些聚合物已经进化成复杂的复合材料,使植物细胞壁具备一定的顽固性,阻碍了木质纤维素原料的利用。生物预处理作为一种比物理预处理或化学预处理更可持续的选择,正受到越来越多的关注,然而生物降解细胞壁背后的去木质素机制还远远没有被完全了解。本文以4.5年生毛竹(Phyllostachys edulis(Carrière)J.Houz)为试验材料,通过