【摘 要】
：
为解决强化学习(RL)应用于云资源弹性伸缩问题时算法空间随应用规模变化而呈指数级变化、可伸缩性受限、算法训练时间长、收敛慢及设置水平伸缩动作空间时难以兼顾系统性能与稳定性等问题,提出了一种基于强化学习的分组云资源混合式伸缩算法(BGRL).将应用实例进行逻辑分组,使算法空间固定,解决了算法空间爆炸及可伸缩性受限问题;采用并行学习,加快了学习速度,解决了算法收敛慢的问题;通过汇集多组的学习结果决定水平伸缩动作,解决了现有算法难以同时保证应用稳定性和资源调整及时性的问题;采用水平和垂直两个方向上的混合式伸缩,
【机 构】
：
西安交通大学软件学院,710049,西安;轨道交通工程信息化国家重点实验室(中铁一院),710043,西安
论文部分内容阅读
为解决强化学习(RL)应用于云资源弹性伸缩问题时算法空间随应用规模变化而呈指数级变化、可伸缩性受限、算法训练时间长、收敛慢及设置水平伸缩动作空间时难以兼顾系统性能与稳定性等问题,提出了一种基于强化学习的分组云资源混合式伸缩算法(BGRL).将应用实例进行逻辑分组,使算法空间固定,解决了算法空间爆炸及可伸缩性受限问题;采用并行学习,加快了学习速度,解决了算法收敛慢的问题;通过汇集多组的学习结果决定水平伸缩动作,解决了现有算法难以同时保证应用稳定性和资源调整及时性的问题;采用水平和垂直两个方向上的混合式伸缩,在保证应用能力范围的同时,解决了局部性能问题.通过重放实际应用数据集而产生的工作负载模式进行云应用仿真,结果表明:BGRL的应用资源量最贴合负载变化,资源利用率最高,稳定在80％左右;在消耗的资源量和违反服务质量请求的百分比方面,比其他算法分别减少了15％～20％和0.1％～3.26％.
其他文献
当前商业软件或数值计算方法基于理想气体假设对点火延迟时间等碳氢燃料基础燃烧数据进行仿真模拟,在高压或超临界压力条件下可能导致较大误差.本研究依托开源化学反应动力学计算平台Cantera,构建了考虑实际气体效应的模拟仿真框架,进行了平台可靠性的验证,计算了丙烷、正庚烷和正十二烷等典型燃料体系在不同压力条件下的点火延迟时间,分析了实际气体效应对碳氢燃料点火延迟时间的影响.结果 表明:高压条件下实际气体效应对点火延迟时间的影响较为显著,仿真计算中须考虑该效应以获得准确结果;燃料物化性质的非理想性随压力升高而增加
在一台重型柴油机上燃用3种不同理化特性的柴油,分别为国五柴油与2种改性柴油,用来探明改性柴油对排放污染物的影响.分析了工况、空燃比及改性柴油对重型柴油机常规污染物NOx、C02、THC的影响;用XAD-2吸附管采集气相多环芳香烃污染物,活性炭吸附管采集单环芳香烃污染物,DNPH吸附管采集醛酮类化合物,探讨工况、空燃比与改性柴油对非常规污染物排放影响;用石英滤膜采集颗粒物进行碳质组分分析,讨论了工况、空燃比与改性柴油对颗粒物碳质组分的影响.结果 表明:相比于低转速25％负荷工况,额定转速25％负荷工况下空燃
针对末端负载质量变化的柔性连杆机械臂运动轨迹跟踪控制问题,提出了一种结合径向基神经网络(RBFNN)和干扰观测器(DOB)的复合学习控制方法.利用RBFNN逼近连杆柔性引起的非线性不确定性,构造DOB实时估计包括负载变化、非线性摩擦、RBFNN逼近误差等效应的集中干扰,将两者用于控制器的前馈补偿设计以提升系统跟踪性能,同时设计鲁棒反馈控制律保证系统的稳定性.通过Lyapunov稳定性理论证明了所提控制方法可保证跟踪误差的有界性和闭环系统的稳定性.基于柔性机械臂平台的对比实验结果表明:所提控制方法在不同负载
为探索涂层内部缺陷结构对大气等离子喷涂热障涂层(APS-TBCs)抗冲蚀的影响,建立了含有大量随机分布圆形孔隙的大气等离子热障涂层模型.基于显式动力学算法并结合脆性断裂准则,模拟了粒子冲击作用下陶瓷层内裂纹扩展、冲蚀破碎等失效现象,获取了陶瓷层内孔隙半径(0.1～5 μm)、孔隙率(0～20％)等关键参数与冲蚀质量之间的内在关系.仿真结果表明,圆形孔隙结构会使热障涂层冲蚀性能发生改变;对于某特定孔隙率存在最优孔隙半径,使其抗冲蚀性优于无孔隙结构的热障涂层;对于某特定孔隙半径,随着孔隙率的增加涂层冲蚀质量逐
为实现多孔单胞构型对多孔结构功能特性的调控,提出隐式曲面梯度多孔结构拓扑优化设计方法.在三周期极小曲面隐式水平集函数中引入罚函数,保证小体积分数下曲面的连续性.对惩罚的隐式函数线性加权构造混合水平集函数,实现多孔结构混合参数化建模.采用数值均匀化法评估多孔结构的宏观等效弹性属性,并通过径向基插值函数构建等效弹性张量关于混合权重因子的显式表达式.以混合权重因子为设计变量,建立柔度最小化拓扑优化模型并采用优化准则法求解.引入Heaviside函数建立高阶连续插值模型,保证梯度多孔结构的高阶连续性.数值案例和实
数值研究了无发散冷却与3种发散冷却气质量流量比下的涡轮静叶端壁附近涡结构、总压损失系数和端壁、叶表绝热冷却有效度以及两种冷却气在端壁上的流动结构.研究表明:发散冷却气质量流量比由5％增加至7％时,进口截面端壁附近的总压峰值升高3.7％,峰值区流体在叶片前缘滞止后向上卷起形成冲击涡;发散冷却流量增加会增强冲击涡而吸力面角区涡对被削弱.低流量冷却气会使整体总压损失降低,而发散冷却气质量流量比由5％升高至7％时总压损失增加4.5％.发散冷却气注入时,冲击涡会将冷却气携带至叶表,在压力面形成显著的泛冷却效果;发散
采用数值计算方法研究了前缘倒角造型动叶的端区气热性能,分析了3种前缘形式(无倒角、直线型倒角、抛物线型倒角)的叶片端区的二次流结构、气动损失和传热特性,对比了有、无前缘倒角时马蹄涡和通道涡对端区流动传热性能的影响机制.结果 表明:前缘倒角造型显著减小了端壁前缘区域的切应力、通道下游偏转角和前缘倒角角区的马蹄涡尺寸和强度,但对通道涡的抑制作用较小;前缘倒角削弱了端区横向二次流动,使得通道下游总压损失减小;抛物线型前缘倒角的角区湍动能和马蹄涡尺寸略小于直线型前缘倒角造型的相应参数;3种前缘倒角造型叶片通道下游
针对癫痫发作前期脑电信号中含有运动伪迹影响癫痫预测的问题,提出一种变分模态分解-自适应熵阈值(VMD-AET)的运动伪迹去除方法.设计了实验室环境下8种模拟运动状态,分析不同运动状态下脑电信号的变化规律;利用VMD方法获得脑电信号各频带的变分模态分量,对分量进行能量熵求解和排序;采用不同的熵闽值进行运动状态下伪迹分量的去除,比较得到能量熵的最优阈值,得到不合运动伪迹的脑电信号;采用M atlab软件使用VMD-AET方法实现了脑电信号中运动伪迹的有效去除.实验结果表明:每种运动状态均能达到去伪迹效果,在跑
针对断路器弹簧操动机构中被缓冲对象复杂、难以最小化系统机械冲击的问题,提出一种规划动触头运动求解缓冲器结构参数的方法,对侧切式阶梯型缓冲器的活塞进行设计.以某CT-Ⅳ型弹簧操动机构为例,建立缓冲器作用时操动机构的等效动力学模型,设计动触头的等减速运动规律,结合运动学分析,计算缓冲器应当提供的理想缓冲力.为保证实际缓冲力与理想缓冲力接近,根据缓冲器的缓冲动态特性,将缓冲器活塞铣面长度的设计问题转换为最大铣面间距及最小铣面长度的取值问题,根据中间位移的缓冲力与理想缓冲力相等求解每级铣面的间距.采用ADAMS与
为了解决悬浮在电解质溶液中的介电杆旋转方向难以改变的问题,并实现对介电杆的灵活控制,提出了单个介电微杆在外加旋转电场作用下旋转方向可以主动调节的方法.通过建立微流控芯片模型,在四相电极阵列中心布置或去除结构化的悬浮微电极,对电解质溶液中的介电微杆的运动开展研究.实验结果表明:在没有理想的可极化金属表面的情况下,测得的与行波电场相反的电旋转角速度总是远大于考虑非均匀表面传导的M axw ell-Wager界面极化理论所预测的角速度,最大角速度可达2.9(°)/s;在嵌入了偶极悬浮微电极的情况下,诱导出的双电