基于消息反馈与强化学习的节能路由算法

来源 :应用科技 | 被引量 : 0次 | 上传用户:mqzhen1987
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对中小型规模水下无线传感器网络中存在的节点能量消耗不均衡、网络生命周期较短的问题,提出一种基于强化学习(RL)与消息反馈机制的能量均衡路由算法,将水下路由问题建模成马尔可夫过程,采用Q-Learning方法并设计直接奖励函数对节点转发路径进行决策;引入节点转发适宜度规避转发过程中的疑似空洞节点;改进空节点数据包恢复方法.采用NS-3网络仿真模拟器,通过在不同规模下对传感器动态网络算法性能进行对比分析.仿真结果显示,该算法在中等规模动态水下传感器网络中保障较高路由效率与投递成功率的前提下有效均衡了网络节点能量消耗,显著延长了网络生命周期.
其他文献
肝细胞癌是一种高死亡率的原发性肝癌,临床上具有早期发现困难、难治疗和易复发的特点.为了建立适用于本实验室的动物原位肝癌模型,采用二乙基亚硝胺(DEN)诱发C57BL/6小鼠形成肝癌,通过动态监测小鼠肝癌发展进程的病理学特征及生化指标,结合特异性免疫组织化学检测,发现与对照组相比,DEN给药后,小鼠体重随给药时间延长呈现明显降低,血清中谷丙转氨酶(ALT)、谷草转氨酶(AST)与肝脏组织中JAK2和STAT3蛋白表达显著增加,且小鼠肝脏形态及病理切片逐渐出现炎症-肝纤维化-肝硬化现象,并在第20周形成肝癌.
利用Ricceri的三临界点理论研究了带有Navier边值条件的(p1,…,pn)双调和方程组{Δ(∣Δui∣pi-2Δui)-αiΔpiui+βi∣ui∣pi-2 ui=λFui(x,u1,…,un)+μGui(x,u1,…,un),x∈Ω,ui=Δui=0,x∈?Ω,弱解的存在性,得到了问题至少存在3个弱解的充分条件.
在家犬(Canis lupus familiaris)、牛(Bos taurus)、猪(Sus scrofa domesticus)、绵羊(Ovis aries)、山羊(Capra hircus)等家养动物之后,家马(Equus caballus)才被人类成功驯化.虽然驯化历史很短,但其对人类社会文明发展变革的影响却最大.家马出色的负重移动能力使人类社会由固定的农耕模式向移动分享模式过渡,使历史发展进入了快车道,因此其起源驯化历史一直备受关注.然而由于家马直系同源野生种早已灭绝,加之现代品种化培育引起遗传
研究了一类五次哈密顿系统在五次扰动下的极限环分支.应用定性理论方法和数值计算方法得出该系统可以同时分支出4个极限环.使用数值模拟方法给出了4个极限环的具体位置,同时呈现了双尖点极限环.
以活性炭纤维(ACF)为支撑层,聚乙烯醇(PVA)为活性分离层,LiCl和CaCl2为添加剂,采用浸渍法制备了水复合吸附剂.在一定的温度和湿度条件下,对制成的复合吸附剂进行水蒸气吸附性能考察,并利用SEM观察其表面形貌,采用BET对比表面积和孔隙度等进行表征,从微观层面分析了吸附剂对水蒸气的吸附能力.
考虑在环境白噪音扰动下建立一类潜伏期和染病期均具有传染性的随机SEIQR模型.首先利用Lyapunov函数和It?公式证明随机SEIQR传染病模型存在唯一的全局正解.其次讨论当基本再生数不大于1时,给出相应确定性模型的无病平衡点渐近稳定的充分条件,当白噪声较小时,疾病将灭绝;当基本再生数大于1时,给出相应确定性模型的地方病平衡点渐近稳定的充分条件,反应了在一定条件下,疾病将流行.
为了探究水下通气空泡包裹水射流的气液两相流流动特性及相关影响因素,在矩形透明水箱中,进行了气体射流包裹液体射流的两相流实验,利用高速相机记录了两相流以及通气空泡形态与运动状态.重点分析了通气空泡的运动及演化过程,定量分析了通气空泡形态的变化规律.研究结果表明,通气空泡的包裹可以显著增加水射流在水下的流程,但空泡的形态与运动变化规律具有明显的周期性;通气流量越大,最大空泡长度与空泡体积越大;水射流流量越小,空泡长度随通气流量的增长速率越大.本文提出的方法能显著提高水射流在水下的工作效率.
水凝胶力学性质与生物组织相似,生物相容性好,在生物电子学领域具有独特的优势.受生物组织——如皮肤、神经、肌肉等启发,发展了具有仿生结构和功能的水凝胶材料.以这种水凝胶材料制作而成的柔性电子器件具有感知温度、压力、应变、电场等外界刺激的功能,可模拟生物组织的传感能力,在仿生电子皮肤,人工肌肉,人工神经等领域具有重要的应用前景.总结了水凝胶仿生柔性电子学的研究进展,包括水凝胶柔性电子器件,水凝胶仿生柔性电子学的应用以及目前面临的主要挑战,并对未来需要解决的科学问题和发展方向进行了展望.
对分光光度计检测设备的依赖,以及通过系列浓度样品测量建立标准曲线的操作限制,极大限制了分光光度法使用场景.当前日益增长的日常健康监测、大样本量的临床测试、野外环境监测等巨大需求,渴望通过触手可及的设备,实现快速、便捷的样本定量分析.受视觉对色度快速识别的启发,设计了一种深度学习辅助的比色法,利用相机拍照,将样品的色度、亮度等信息与对应浓度建立联系,应用于宽浓度范围测定和多组分体系分析.相比传统的分光光度法,深度学习辅助的比色法对单组分体系、多组分体系检测能力均有显著提升,对KMnO4单组分体系的浓度检测范
燃料乙醇生产线具有信息化与智能化不足、管控成本较高、安全隐患监测困难等特点,如何实现生产线的全过程监测、管控与优化,是当前研究和践行燃料乙醇智能生产线面临的瓶颈问题.针对该问题,本文基于工业互联网,提出了数字孪生赋能的燃料乙醇生产线数字孪生模型,研究了其框架搭建以及建模方法,阐述了燃料乙醇生产线数字孪生模型的物联配置、数据传输与融合与数字孪生建模3项关键技术.最后,以国投生物燃料乙醇生产线为例,进行工业案例验证,验证了本文所提框架与方法的有效性和实用性.