基于Multi-Agent的泛在网络负载均衡研究

来源 :重庆邮电大学 | 被引量 : 0次 | 上传用户:liongliong483
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前各种无线接入技术纷纷涌现,形成了多个相对独立的网络,构成了一个无处不在的泛在网络。在泛在网络中,要达到无线资源的有效利用,关键就是要研究多个无线网络的负载均衡,Multi-Agent作为分布式人工智能的一个研究领域,近年来引起广泛的重视,本文将研究利用Agent技术解决泛在网络的负载均衡。   首先,本文针对泛在网络的局部自治性,为了集中处理网络的状态信息,从用户终端的角度出发,提出了一个基于Multi-Agent集中式强化学习算法的负载均衡模型。模型利用Agent的自主学习能力,在用户终端设置Agent作为算法的动作策略者,感知并适应复杂和不断变化的动态环境;各无线接入网络已有的负载信息和请求接入的业务信息等环境状态作为算法的输入,终端Agent根据各个网络的带宽信息选择网络接入,最终达到负载均衡。通过仿真验证了集中式强化学习算法可以实现网络的负载均衡,证实了算法的可行性,有效的利用了网络资源。   其次,由于集中式可靠性较小,中央Agent的瘫痪将导致负载均衡策略无法执行;考虑泛在网络中多个无线接入网络的分布性和异构性,因此本文再使用独立式(RLI)和群体式(RLG)两种分布式强化学习算法来解决负载均衡问题。在分布式强化学习算法中,RAN中的Agent作为学习和动作的策略者,RLI算法把自身网络的负载信息和业务信息做算法的输入,不考虑其他接入网络的负载信息,容易陷入单个接入网络的局部资源最优;RLG算法在RLI算法的基础上,在算法输入中考虑了整个泛在网络的负载信息,在一定程度上弥补了RLI算法最优策略选取的不足,但却增加了算法的复杂度、降低了算法的收敛速度。本文针对两种算法存在的局限性提出了改进方法:在Agent选择网络时加入Agent以前的均衡信息,作为一次迭代的网络选择改善估计。通过仿真证实了使用Multi-Agent的分布式强化学习算法能实现泛在网络负载均衡;验证了改进方法能更快的达到网络的负载均衡,有效降低网络的阻塞率,扩大系统容量。
其他文献
MIMO技术的主要优点是通过多天线的配置来充分利用信号的空间资源,从而达到提高系统速率的目的。在无线频谱资源紧缺的条件下,MIMO技术正是提高频谱利用率和数据传输速率的有效
两转子三轴承的联轴器拆卸时需用假瓦支撑转子,通过经验总结法,将上海电气集团提供的假瓦重新设计,制作成某厂可调整式假瓦.可调整式假瓦利用顶丝与滚动轴承相结合,不仅能够
本文主要对电力通信资源管理系统、CORBA技术以及TMF814协议进行了分析与研究。采用基于ACE+TAO平台上的接口适配器(Adapter),从功能模型、层次模型、处理流程等方面给出了系
随着第三代移动通信逐渐进入商用,有关第四代移动通信的研究已经如火如荼。OFDM技术能够有效地对抗频率选择性衰落和高效利用频谱资源,MIMO技术能够充分利用多径传播成倍地提高
移动自组织网络是由很多地位对等的移动节点(Mobile Node,MN)组成的网络。由于这种网络是动态的,对于网络中节点的路由,要么提前获取到所有节点的路由,要么在需要的时候在网
IEEE802.16技术定位于无线城域网的宽带无线接入技术,IEEE802.16d标准对无线带宽接入系统空中接口的媒体接入控制层和物理层作出明确规定。Ranging机制又称测距机制或者校正过
下一代无线通信系统将包含多种无线通信技术。不同的网络技术出发点不同,面向的用户需求也不同,每种技术都有其独有的特点,不能完全取代其他技术。因此,不同类型网络之间的融
随着移动通信技术的迅速发展,第三代移动通信系统已经进入商用阶段,但为适应和满足移动通信领域移动化、宽带化、IP化的需求,3GPP又及时启动了3G的长期演进LTE项目。LTE是3.9G的
本系统采用AT89S51单片机为控制核心,输以带反馈自稳定的串调恒压源,可以对200mA~2000mA的电流值进行设定,根据所设定的电流值,由A/D0832对精密电阻电压的监控,由DAC0832直接
通过对循环流化床锅炉各类泄漏事件进行经验总结,制定切实可行的防范措施,不断提高发电厂设备管理水平.