分布式并行编程模型MapReduce及其应用研究

来源 :西南民族大学学报:自然科学版 | 被引量 : 0次 | 上传用户:qq310474070
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在传统的并行编程模型中,对大量数据如何进行并行计算、如何为每个任务分发数据、如何处理单点故障等问题,都需要大量的程序分析和设计,这些问题的有效处理都需要程序员显式地使用有关技术来解决.对于程序员来说,这是一项具有极大困难的工作,使得原本简单的运算反而变得非常复杂,这些问题的存在也在一定程度上制约了并行程序的普及.而MapReduce计算模型能有效地解决上述问题,阐述了Google的MapReduce计算模型的实现机制,并通过实例描述了该模型的执行过程.
其他文献
根据聚合反应的特定工艺过程要求,提出了一种新型双轴搅拌桨,并设计实验对其宏观混合性能进行研究,与常规桨型进行对比,结果表明该桨在高粘度流体内混合时间、排液量、混合效率等
对求解非线性互补问题的非单调自适应光滑信赖域算法的收敛性给予了证明,得到"如果F是P0函数,则算法产生的所有点列都包含在某个水平集内,并且每一个聚点都是非线性互补问题的
介绍玻璃钢埋地储油罐设计特点和预防泄漏的措施.
传统基因表达式编程算法的进化过程使用一成不变的变异率和交叉率,忽略了进化中种群的动态变化,导致GEP算法有可能陷入局部最优.为此,做了如下探索:(1)形式化尖Γ云模型,GEP模式
分析简阳大耳山羊不同年龄性别组粪尿养分含量的变化,为降低粪尿排放造成的污染和调配科学高效的饲料配方提供依据.试验山羊按年龄、性别分为A.B、C和D四个组,采用ICP-OES6300Rad