异构环境下云计算数据副本动态管理研究

被引量 : 0次 | 上传用户:ychh1988
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着云计算的发展及推广,众多涉及海量数据处理的应用蓬勃涌现。面对海量数据的存储需求,传统文件系统在容量及性能扩展方面存在瓶颈,分布式文件成为了云环境下各种应用的基础。为增强系统的可用性、可靠性和容错性,分布式文件系统采用了副本技术。副本技术是一种数据管理机制,将数据项复制多份分别放在分布式文件系统的多个节点上,用以提高系统的可靠性和访问效率。副本管理策略分为静态副本策略和动态副本策略。静态副本策略基于已知的访问方式,在文件创建时确定副本的数目及放置位置,适用于资源环境稳定的情况。动态副本策略根据资源环境的变化而动态调整副本数目和位置,以适应不断变化的资源环境。现有HDFS(Hadoop Distributed File System)采用静态副本管理机制,副本因子默认为3,副本放置策略是将一个副本在放在本地机架上的一个节点,一个副本放在同一机架上的另一个节点,最后一个副本放在不同机架上的一个节点。HDFS通过多副本来提高数据的可靠性和访问效率。然而,HDFS副本管理仍存在一些缺陷,比如,副本创建数目和时机固定,副本放置未考虑资源节点异构性。为解决这些问题,本文提出一种异构环境下云计算数据副本动态管理模型DMDR(Dynamic Management of Data Replicas)。(1)在副本创建时,DMDR根据节点性能选择最优副本放置节点;(2)在系统运行过程中,基于灰色预测技术,DMDR根据数据的最近访问特征预测数据访问热度,并动态调整副本数目。实验表明,在异构环境下,较之现有HDFS副本管理机制,DMDR可有效减少节点之间数据传输,提高负载均衡,降低作业执行时间。
其他文献
行政复议两条基本原则 :一是坚持有错必究、保障法律法规正确实施原则 ,二是合法、公正、公开、及时、便民原则。我国现行行政复议原则上采取书面审理方式 ,必要时方可调查、
为了实现平等的老年生活, 我国于2005年~2012年连续8年调整了企业职工基本养老保险待遇。 文章基于公平性视角分析发现, 基本养老保险待遇调整政策实施后, 企业退休职工之间、 企
<正> 赤霉素是一种新的强烈的植物生长刺激素,是从水稻恶苗病菌中提取的,具有打破种子和块茎的休眠、促进植物生长发育、提早成熟等作用。深入研究赤霉素的生理作用和机制,将
近两年,随着web3.0新兴起,新一类开放的互联网社交服务——微信也应运而生。微信作为一个新的传播平台、媒介产品,在日常生活、媒介使用习惯和使用方式方面对人们都产生了越
体育游戏作为一种体育的手段,在各种体育教学、运动训练、健身练习、休闲娱乐等活动中都受到人们的重视。本文就体育游戏的特点分析研究体育游戏与篮球训练的内在联系。总结
革命导师恩格斯青年时代目睹家乡人民的苦难,写下了反映他们痛苦的通讯文学。他22岁时又旅居英国,以21个月的时间,深入伦敦工人贫民窟,亲眼观察,亲身感受,并收集官方和媒体的
DMG(德马吉)公司也是对刀仪行业的佼佼者,作为公司里的一种服务类产品,完善产品链、更好地服务于机床产品,是对刀仪的一个基本定位。DMG(德马吉)对刀仪采用数码摄像式测量系
介绍了一种用于冲压机上的管材下料装置,包括一冲裁机构,一管材夹紧机构。该新型下料装置利用冲刀瞬间的冲力来下料。下料时间快,效率高,并且管材切口处光滑无毛刺,在工作时
目的了解维持性血液透析患者依从性的影响因素,为提高患者的依从性提供依据。方法采用访谈法对10例维持性血液透析患者进行个案访谈,运用现象学分析法对资料进行分析。结果通
SiC/Cu复合材料有着良好的力学、热学和电学性能,使其有望成为新一代“结构/功能”一体化的高性能复合材料,并将在航空航天领域发挥重要的作用。SiC和Cu界面润湿性和增强体相