【摘 要】
:
异构环境下的Hadoop平台对reduce任务的调度存在随机性,在分配任务时既没有考虑数据本地性,也没有考虑计算节点对当前任务的计算能力。针对以上问题,提出一种异构环境下自适
【基金项目】
:
国家自然科学基金资助项目(31571563);高可靠嵌入式系统技术北京市工程研究中心资助项目(2013BAH19F01)
论文部分内容阅读
异构环境下的Hadoop平台对reduce任务的调度存在随机性,在分配任务时既没有考虑数据本地性,也没有考虑计算节点对当前任务的计算能力。针对以上问题,提出一种异构环境下自适应reduce任务调度算法(SARS)。算法根据reduce任务的输入数据分布选择所含数据量最大的机架,在选择计算节点的过程中,结合节点所含任务的数据量、节点的计算能力和当前节点的忙碌状态来选出任务的执行节点。实验结果表明,SARS算法减少了reduce任务执行时的网络开销,同时也减少了reduce任务的执行时间。
其他文献
在当前基层农业发展的过程中,对技术形式有了严格的要求,需要及时处理各类问题,明确推广管理的基础要求。农业机械化新技术的推广和应用应适应当今经济社会发展的趋势,在实施
本文着力解决无人车编队行驶过程中的核心问题:无人车跟随控制。并基于领航跟随法建立两无人车领航跟随模型。考虑了实际道路可能存在的如下情况:两无人车行驶时的跟随间距为
生物在后天获得的性状能否遗传是遗传学长期争论的问题之一,至今尚无定论。本文讨论了获得性遗传存在的可能性及其微观机制,并从表观遗传学角度进行诠释。通过对物理学和生物
微波法提取川木香中的木香烃内酯和去氢木香内酯,考察了微波功率、辐射时间、料液比对提取率的影响。最优工艺条件是微波辐射功率为400 W,辐射时间为3 min,料液比为1∶30(g/mL
我国是农业大国,水稻是我国主要的粮食种植作物之一,种植面积广泛,我国水稻种植也有着悠久的历史。但就目前而言,随着城镇化进程的加快,大量土地被占用。因此,提升水稻高产非
马铃薯被称为土豆、山药蛋子,属于一年生的茄科类植物,是一种高产稳产的粮食和蔬菜兼用型作物。马铃薯淀粉含量十分丰富,在饮食、食品加工以及其他领域有着广泛的应用。马铃
在我国各方面建设趋于完善的同时,人民对生活有了更高的要求与期盼,安居乐业是二十一世纪全国人民共同奋斗的目标。安居乐业首要关注问题应该是衣食住行,衣食住行满足了人民
目的:观察威派止血贴在经股动脉途径冠状动脉介入手术中的止血效果。方法48例患者平均分成止血贴组24例,对照组24例。观察2组患者在有效止血的按压时间、迷走神经反射发生率等