纠删码存储集群的在线扩容方案研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:wplyaq
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着存储系统中数据量的不断增长,存储系统会面临存储容量不足这一挑战,通常的应对措施是为存储系统增加新的存储设备,即存储扩容。对纠删码存储集群而言,存储扩容涉及两方面操作:数据迁移和校验更新。在数据中心等场景下,存储系统需要全天候向外提供数据存储服务,即存储系统正在进行扩容时也不能中断存储服务。本文针对纠删码存储集群的在线扩容问题进行研究。本文针对纠删码存储集群,提出一种背包式在线扩容方案PiggySS(Piggybacked Scaling Scheme),利用已有用户请求数据来减少扩容I/O。PiggySS有三个主要特征:首先,方案利用已有用户请求的数据来降低扩容操作对用户请求响应的影响;其次,方案根据节点的负载和扩容I/O,重新分布了相关节点上了数据分块和校验分块的读写,实现扩容过程中的I/O均衡;最后,PiggySS将一部分被请求过的数据分块迁移到新增节点上,提高了存储集群的读并行性,并使用整条带填充的方式向存储集群写入新数据,数据的写入过程具有高写性能。PiggySS方案中用到了四个算法来处理用户I/O和扩容I/O,并提出了三种对PiggSS方案的优化方法。在实际的纠删码集群环境中实现了PiggySS方案和其他三种可替代的扩容方案(即,Scale-RS、McPod、RR),通过重放真实的I/O记录来对这四种扩容方案进行定量化评估。实验结果表明,在扩容过程中和扩容完成后,PiggySS具有更好的用户访问性能,其平均用户响应时间分别是Scale-RS、McPod、RR的33.5%、29.92%、19.34%和87.09%、94.53%、85.87%。
其他文献
伴随着移动通信、数字多媒体业务的发展,人们对接入网与主干传输网络的带宽要求也越来越高。单载波频域均衡(Single-carrier Frequency Domain Equalization,SCFDE)技术由于
相变存储器(PCM,Phase Change Memory)因非易失性、可扩展性与存储密度高、访问延迟与静态功耗低、以及耐辐射等诸多优点成为一种极具应用前景的新型存储介质,受到了学术界与
基于多光谱图像分析的纸币防伪技术是当前纸币防伪领域的研究热点,它直接关系着国家金融安全,有着重要的理论研究价值以及广阔的市场应用前景。相比传统纸币鉴伪方式,通过对
目的:建立食管鳞癌(Esophageal squamous cell carcinoma,ESCC)CT图像的影像组学特征模型,探究其评估肿瘤淋巴结转移的可行性。方法:回顾性分析经食管内镜活组织检查证实为ESCC患者334例,其中淋巴结转移阴性152例,淋巴结转移阳性182例(包括区域性淋巴结转移103例、非区域性淋巴结转移79例)。淋巴结转移状态经区域淋巴结清扫术、扩大区域淋巴结清扫术或超声引导
随着云计算技术的快速发展,越来越多的非计算设备有接入云平台的需求,打印机便是其中的一种非计算设备,另外,移动互联网对人们生活方式的改变,随时随地打印的需求变得日益旺
有向无环网络是一种不含有向环路的特殊的网络结构,在自然、工业和社会网络中大量存在。近年来,有向无环网络系统的一致性问题吸引了越来越多生物科学,计算机科学以及系统科
在时代大变革和产业升级的大背景下,每个企业都在追求转型升级,以期获得更强的竞争能力。如何优化流程管理成为大多数企业应对激烈竞争的关键。流程优化是在流程再造的基础上
目的:1.通过摩腹法作用于IBS-C大鼠,观察大鼠的肠道活动效应。2.探究摩腹法对EGCs、GDNF、AKt的影响。方法:1.采用冰水灌胃法建立IBS-C大鼠模型,将摩腹组、模型组、空白组大鼠分笼独立饲养,普通饲料喂养,自由进水。每日上午8:30用低于4℃的生理盐水进行冰水灌胃(3ml/只),连续灌胃14d,正常组给予等量常温生理盐水灌胃。待造模成功后,给予摩腹组大鼠腹部摩腹28天,14min/d
在新一轮课程改革和高考制度改革的大背景下,高中物理教学方法的探讨研究在不断进行。问题教学法是以学生为主体,教师为主导,学生发展为根本的教学方法,也是一种激发学生主动参与学习探究的方法。问题教学法源远流长,理论思想萌芽可以追溯至我国古代的教育先驱孔子的教育思想。随着新课程改革的开展和实施,它的优势已日益凸显,成为革除传统常规教学弊端的重要手段,因此受到了更多教育学者和教师的重视,其理论内涵和实践经验
均衡重力异常是地壳内部异常源引起的重力异常,是地壳均衡状态的标志,其与地震活动密切相关。川滇地区地质构造复杂,地震活动频繁,自汶川地震以来,该区处于活跃状态,相继发生