基于划分设计和放置传输阵列的编码分布式计算方案

来源 :广西师范大学 | 被引量 : 0次 | 上传用户:keremslr
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
分布式计算通过将一个计算任务分解成许多小的部分,分配给多台计算机处理,能够提高计算效率。已有研究发现,分布式计算中,数据交换耗费的时间占总体执行时间相当大的一部分,因此人们将编码引入分布式计算,以降低通信负载。有研究表明,实现最优通信负载的编码分布式计算方案,需要大量的输入文件和输出函数,难以在实际中应用。所以,如何减少输入文件和输出函数的数量,同时保证较低的通信负载,是一个需要解决且充满挑战的研究问题。本文针对分布式计算方案的性能优化展开研究,构造了两类编码分布式计算方案,主要工作如下:(1)提出了基于一种划分设计的编码分布式计算方案。本方案将划分设计的列元素与分布式计算节点关联,行元素与输入文件关联,同一个分区的节点负责计算相同的输出函数,因而输入文件数量与划分设计的行数相等,输出函数数量与划分设计的分区数相等。经过一类转换,使得每一个项的位置与每个节点存储文件的情况之间存在一一对应的关系。采取一个分区的节点向不同分区的所有节点发送编码多播信号的传输方式,使得所产生的的通信负载控制在相当低的范围内。理论分析表明,该方案不仅能够大幅度减少输入文件数量和输出函数数量,同时保持了相当低的通信负载的优势。(2)提出了基于放置传输阵列的多作业压缩编码分布式计算方案。该方案适用于多个线性函数的Map Reduce作业并行执行。在内容放置阶段,利用放置传输阵列设计用户存储文件的方式;在内容传输阶段,每一个特定整数的子矩阵对应于一个传输组。在并行处理多个Map Reduce作业的过程中,首先利用压缩技术将同一函数的中间值合并为一个压缩值,然后将这些压缩值分块,最后将这些压缩值块编码成多播信号,跨不同Map Reduce作业进行传输。理论分析表明,该方案能够显著地减少分布式计算的通信负载。同时,大量数值结果表明,该方案仅仅需要少量的Map Reduce作业。在本文中,基于划分设计的编码分布式计算方案在大幅度减少输入文件和输出函数数量的同时,保持了低通信负载的优势;基于放置传输阵列的多作业压缩编码分布式计算方案在显著降低通信负载的同时,大幅度减少了并行运行的作业数量。
其他文献
移动边缘计算(Mobile Edge Computing,MEC)通过将计算服务部署在距离用户侧较近的边缘服务器上,使得用户卸载的任务可以就近处理。为了给用户提供低延迟、高带宽、高性能的计算服务,通常需要在边缘服务器上提前部署一些服务,以便当计算任务被卸载到边缘服务器时,能够更快地获得计算服务。同时,由于服务类型的多样性,不同服务类型在不同计算架构下的执行效率不同,为了提升整体执行效率,因此不同的
学位
目的:通过收集出生体重不一致双胎(birth weight discordant twins,BWDT)、出生体重一致双胎(birth weight concordant twins,BWCT)相关临床资料,进行队列研究,调查BWDT发生率,分析其发生的危险因素、新生儿期并发症,住院期间治疗及生长发育和转归情况,为远期生长发育标准化管理和规范化指导提供依据。方法:根据纳入及排除标准,收集2018年
学位
目的:探讨红细胞输注(red blood cell transfusion,RBCT)早产儿6月龄内铁代谢指标变化,评估RBCT早产儿的铁超载和铁缺乏情况,对早产儿铁剂补充提供参考。方法:采用前瞻性对照研究。以2020年11月1日至2021年8月31日,出生后24h内入住贵州医科大学附属医院新生儿重症监护室(Neonatal Intensive Care Unit,NICU),胎龄(Gestati
学位
目的:以某中西医结合医院神经内科200份中药处方为例进行分析,针对现存问题提出有效的管理方案。方法:在某中西医结合医院信息管理系统中遴选2022年1—3月已调配的神经内科200份中药处方作为分析对象。利用Excel电子表格汇总处方有关信息,包括疾病诊断、处方用药、药物功效、用法用量,分析神经内科常见病种、常用药及相关特征。结果:调查的200份中药处方涉及常见病种为脑血管疾病(34.00%)、中枢神
期刊
果树产业是我国农业的重要组成部分。近年来,在人工成本逐步提升、劳动力资源不断减少的背景下,实现农业生产作业的机械化、自动化成为我国现代农业的重要发展趋势。水果采摘机器人是农业生产自动化的研究热点之一,而树上果实的实时识别是水果自动采摘的核心技术。在果园环境下,果实重叠、与枝叶相互遮挡,以及光照和天气变化等复杂因素使得树上果实的准确识别和大小测算成为一个挑战。本文围绕果实自动采摘的现实需求,针对果园
学位
<正>庄信万丰公司(Johnson Matthey)宣布,英国石油公司(BP)与其共同开发的费-托合成技术(FT-CANS)已被战略生物燃料公司(Strategic Biofuels)选中。该项目旨在生产世界上碳足迹最低的液体燃料,将工业排放、直接空气捕获、城市固体废物或其他生物质等来源产生的合成气转化为适合生产可再生柴油和可持续航空燃料的长链烃类化合物。战略生物燃料公司是开发负碳足迹的生物燃料工
期刊
目的:探讨LN患儿血清1,25-(OH)2-D3水平与病情活动度的关系。方法:筛选并收集2016年01月-2021年12月就诊于贵阳市妇幼保健院肾脏病房初次诊断的40例LN患儿的临床资料。将初诊40例LN患儿纳入LN组,依据系统性红斑狼疮疾病活动度(SLEDAI-2K)评分,分为轻-中度组(SLEDAI<15分)和重度组(SLEDAI≥15分)。对照组为同期住院的无肾脏等基础疾病的患儿(40例)。
学位
目的:探讨婴幼儿反复喘息的转归及其影响因素,了解患儿发生持续性喘息的危险因素,为临床上及时评估及预测可能发展为持续性喘息的患儿提供理论依据。方法:收集2017年6月至2018年6月期间于贵州医科大学附属医院小儿呼吸科诊治的反复喘息的婴幼儿,记录患儿的一般资料、实验室资料及病史资料;在其出院3年后通过电话随访患儿的喘息情况,根据3岁之后是否还有喘息,分为一过性喘息组、持续性喘息组;采用单因素分析,对
学位
目的:探讨外周血红细胞分布宽度、中性粒细胞与淋巴细胞比值预测儿童紫癜性肾炎的发生及其新月体形成的诊断意义,为无法及时取得肾脏病理结果时对指导治疗和评估预后提供建议。方法:以2015年1月-2021年11月在贵州医科大学附属医院确诊为过敏性紫癜的患者为研究对象。收集患者的基本信息、第一次入院时的血常规、血生化及肾脏病理结果,并计算出中性粒细胞与淋巴细胞比值。设计Excel表格录入数据,使用SPSS2
学位
随着社会经济的不断发展,行业的竞争压力也越来越大,市场偏向饱和状态且客户的流动性较大,许多企业都面临着客户流失的实质问题,客户流失预测对企业的发展尤为重要,它可以将潜在的流失客户预测出来,从而使得企业更有针对性更高效地制定客户挽留措施,有效降低企业的成本,提高市场竞争力。对于客户流失的预测问题有很多解决方案,传统的机器学习方法存在特征工程对模型效果影响较大的缺点,深度学习则使得算法不会太依赖于领域
学位