异构分布计算系统可靠性分析及优化方法研究

来源 :东南大学 | 被引量 : 5次 | 上传用户:manhong85
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着大规模科学计算应用的普及以及并行数据处理规模的不断增大,以网格和并行计算为基础的分布计算系统已成为信息技术和通信技术的重要发展方向,尤其是通过互联网络将大量廉价、处理能力和可靠性等都相互异构的计算单元进行连接所构成的数据存储和计算平台受到学术界和工业界的广泛关注。异构分布计算平台也成为中国战略性新兴产业的重要组成部分,其中系统性能和可靠性优化问题已成为国内外研究的热点。但是系统和应用规模逐渐增大的同时,并行应用对系统长期可靠运行的时间需求也越来越高。此外,由于异构系统下计算资源的动态加入和退出,并行应用程序输入参数的变化以及异构系统环境等因素将引起并行应用程序的执行出现不确定性和不可控性等安全威胁。因此,各并行任务能否可靠地运行是评价分布计算系统优劣的关键指标之一。尤其当异构分布计算系统在时间和空间维度存在关联失效背景下,如何分析系统可靠性以及通过任务调度对并行应用程序执行过程的可靠性进行优化等问题。本文首先从系统可靠性分析理论入手,重点解决关联失效模式下异构分布计算系统可靠性度量和优化方法,并在分布计算系统资源管理和任务分配等方面展开深入研究和探索,提出考虑性能和可靠性开销、具有截止时间约束以及计算资源存在关联失效等条件下的任务调度理论和可靠性优化方法,旨在解决异构分布计算系统可靠性领域的部分关键技术问题。本文的主要研究工作和贡献包括:(1)扩展现有分布计算系统可靠性分析方法,提出关联失效模式下异构分布计算系统可靠性评估方法。目前的异构分布计算系统存在大规模资源共享、广域通信以及多资源合作,而很多传统可靠性分析方法都建立在计算资源间的失效是相互独立的假设基础之上,没有考虑计算资源在时间和空间维度上可能存在的关联失效,尤其随着纳米级大规模集成电路的快速发展,高能电磁辐射引起计算节点关联失效的概率越来越大。根据分布计算系统资源的失效特征建立系统失效模型,提出关联失效模式下基于泰勒展开式的计算系统可靠性度量方法,并从系统结构角度分析共因失效对系统可靠性的影响程度,通过仿真实验验证影响系统可靠度和平均无故障时间的主要因素。在此基础上,进一步提出冗余系统和静态失效系统可靠性分析方法,并通过仿真实验验证算法的性能和有效性。(2)针对资源存在异构性、动态性和广域分布性等特点的大规模分布计算系统,提出基于任务期望执行时间和可靠性开销的表调度算法。分析任意架构网络模型(APN)下关联任务之间最可靠通信链路的选择问题,并提出考虑可靠性开销的最优路径选择算法(OCPR)。在此基础上通过添加具有预测功能的分布计算节点选择策略,以及考虑系统异构性和可靠性开销的任务优先级计算方法,设计分布计算系统环境下可靠性驱动的任务调度算法(RDLS)。仿真实验结果表明所提算法在相同时间复杂度条件下,相对于经典的HEFT和RASD算法具有更优的调度性能和可靠性指标。(3)针对实际分布计算系统运行过程中所收集的开源失效数据集FTA,从时间和空间角度对计算资源的关联失效进行建模,其中空间角度又分为物理空间关联失效和逻辑空间关联失效两种失效模型,并利用马尔科夫随机场和Gibbs分布之间存在的等价理论对所提出的关联失效模型进行理论分析和形式化建模。对关联失效进行建模的目的是将分布计算系统内的节点进行关联组划分,每个组内的计算节点具有强关联性,从而为选择冗余节点来提高任务执行可靠性提供依据,避免选择同-关联失效组内的多个计算节点作为同一任务的副本计算节点。通过理论分析和实验验证了所提关联失效模型的有效性和可行性。(4)针对计算资源存在关联失效的分布计算系统和具有截止时间约束的并行DAG应用程序,提出基于任务截止时间划分的关键路径模型和子任务截止时间分配算法(SDA)。在此基础上,进一步提出基于可靠性驱动的贪心任务复制算法(RDGD)和基于费用驱动的任务复制算法(CDD),在选择复本资源进行任务分配以提高应用程序执行可靠性时,避免同一个子任务分配给具有关联失效特性的计算节点集合内的多个节点,以最大化子任务执行结果的可靠性。实验结果显示基于截止时间划分的关键路径和基于不同目标的可靠性优化调度算法不仅能够提高并行应用程序执行的可靠性,同时又能满足并行应用程序调度性能的需求。
其他文献
在经济水平不断发展的大背景下,人们对住房条件提出了更高的要求。房屋的质量与地基的建设质量有直接对应关系,文章探讨了现有的房屋结构特点、地基建设的方法与新型工艺,以
文章选取行永久性肠造口患者31例为研究对象,实施4C延续性护理,观察患者护理前后生活质量、自我护理能力变化及并发症发生情况,探讨4C延续护理在永久性肠造口患者中的应用价
利用2018年对藤县6个乡镇所有中小学校防雷设施安全检测的结果数据统计分析显示,藤县目前在用校舍中没有安装防雷设施和虽安装有防雷设施但检测不合格的校舍所占比例极高,反
通过对钦州市气象应急减灾工作现状调查分析,阐述了基层应急管理工作中存在的问题和不足,并对气象应急减灾工作的发展作了探讨和思考,对进一步提高气象应急管理工作水平,优化气象
职业会计教学现状随着社会主义市场经济体制不断完善,我国经济迅速发展,会计行业在我国各经济领域中也逐渐体现出重要地位.各企业会计岗位为了招聘更优秀的专业技术人才,对会
期刊
【正】 1976年11月,赤峰县三眼井公社在农田基本建设中,发现一件完整的秦铁权。这件秦铁权呈扁圆形,实测重量为31.431公斤。平底,底径23.8厘米,底部有两个铸造时留下的小砂眼
探索培养具有工程领袖潜力的工科拔尖人才的方法是"985"高校的一项教改课题。本文以国家重大专项作为驱动,对优秀本科学生进行了工程领袖型人才探索式的培养。工程领袖型人才培
以游戏为名,Zynga实际在运营着一门社交生意。7月初,Zynga向美国证券交易委员会(SEC)提交了首次公开招股(IP0)申请。这家2007年6月才成立的社交游戏开发商如今已经是互联网、硅谷和
2011年上市公司中报已经披露完毕,相对于企业业绩普遍向好,国民经济的支柱——制造业的上市公司则出现了现金流大幅萎缩,企业融资成本、人工成本也不断上升,有专家对《经济参考报
报纸
电力是当前社会不可缺少的能源,自动化技术的应用对提高电力生产效率和产品质量都有重大帮助。随着与网络、通信等技术的结合,风险有所增加,电力系统安全控制工作显得愈发重