容错存储系统中的MDS阵列码研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:imafool2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着现代存储系统在规模和复杂性上的不断增长,硬盘(节点)故障已经成为系统运行中的一个日常事件。为了防止各类硬件故障造成数据丢失,存储系统一般使用两种方式对数据进行保护,即多路镜像和纠删编码。多路镜像虽然实现简单,但这种方式的存储效率通常较低;而纠删码技术由于可以灵活地调节存储效率而被越来越多的存储系统采用。最大距离可分的(MDS)阵列码是一类主要面向存储系统的纠删码,这类码可以使用最少的冗余来提供特定的容错能力,并且其编解码过程只需要用到简单的异或和循环移位运算,因此在近几年受到了越来越多的关注。本文主要针对纠双删和纠三删的MDS阵列码进行了深入的研究,并取得了以下几点成果:1、RAID-6正在逐步取代RAID-5成为RAID的主流形式,因为它可以在两个磁盘同时故障的情况下也能够恢复数据。有许多纠双删的MDS阵列码是专为实现RAID-6设计的,但是这些码都有它们各自的局限性。本文研究了其中一种有代表性的码(Blaum-Roth码),分析其优势及局限性,并对其编解码算法进行改进。改进后的Blaum-Roth码具有以下优秀特性:1)编码复杂度达到理论下界;2)解码复杂度接近理论下界;3)可以在几乎没有性能损失的前提下实现RAID-6的可扩展性。与其它最常用于RAID-6的MDS阵列码相比,改进后的Blaum-Roth码更适于构建高性能并且可伸缩的RAID-6磁盘阵列。2、纠双删的最低密度MDS阵列码是一类结构优美的纠删码,具有最优的编码、解码和更新复杂度。然而,现有的这类码或者对码长的限制过于严格,或者编码规则没有明显的几何规律,这使得它们的实用性较差。为此,本文构造了一种新的纠双删最低密度MDS阵列码,称为对称码。对称码的编码、解码和更新复杂度均达到最优,而且码长可以是素数或者素数减1。此外,对称码在恢复单个删除列时所需的I/O开销比大多数最低密度MDS阵列码要少,并且在码长较短时这个开销可以接近理论下界。3、最低密度MDS阵列码由于其编码和更新复杂度的最优性而广受欢迎。然而,目前已知的绝大多数最低密度MDS阵列码都只能纠两个删除列,虽然有少部分例外,但是它们对码长的限制非常严格。例如,现有的纠三删的最低密度MDS阵列码通常要求码长为p(或p-1),其中p必须是满足以下条件的素数:2为GF(p)的一个本原元且p-1能够被3整除。如此严格的码长限制使得这些码几乎无法被实际存储系统采用。为此,本文构造了一种实用的纠三删的最低密度MDS阵列码,能够纠正码字中的任意三个删除列或者一个删除列连同一个差错列。这类码的解码复杂度可以达到或接近理论下界(取决于删除模式),并且码长可以是p或p+1,其中p是一个奇素数。这是目前已知最具实用价值的纠三删的最低密度MDS阵列码。4、广义RDP码被认为是目前最实用和最高效的强系统的MDS码,因为其编码复杂度达到了理论下界,并且可以支持任意码长。然而,广义RDP码的现有解码算法的解码复杂度离理论下界有点远,还有一定的改进空间。本文对纠三删的广义RDP码的解码算法进行了研究,并提出了一种针对三个删除列的改进的解码算法。与原有的解码算法相比,本文提出的算法具有明显更低的解码复杂度,且当码长不等于10或11时这个复杂度最多只比理论下界高出8个百分点。
其他文献
跨境电商加速了"一带一路"区域经济的发展,然而缓慢的区域间协同服务阻碍了跨境电商的常态发挥,协同发展因而成为"一带一路"区域经济繁荣的必由之路。本文针对"一带一路"区域
中国的经济呈现飞速增长,但中国不均衡不充分的发展模式带来了一些巨大的风险,比如:不持续发展导致的环境退化问题等,我国政府如果不出台相应政策解决上述问题,那么中国的经
<正>"可怜"一词,在现代汉语里,其义项主要有三个。据《现代汉语词典》:1.值得怜悯;2.怜悯;3.(数量少或质量坏到)不值得一提。而"可怜"在古汉语里,则要活泼得多,其含义也更为
期刊
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
随着计算机软硬件技术的不断进步,高性能计算领域迅猛发展;高性能计算领域的迅猛发展同时又对高性能微处理器不断提出新的需求。实现未来的超高性能计算机,硬件技术、体系结
随着社会经济的快速发展,大数据时代的到来给予了众多行业尤其是新闻采编行业新的动力。大数据时代背景下,新闻采编工作在传统的基础上得到了升华和质的飞跃,对于新闻的整体
固定资产的全寿命周期管理,指的是在满足安全以及效益的前提下,从资产的长期利益出发考虑资产全过程,追求固定资产寿命周期最低成本的管理上的理念和方法。近几年来,资产密集
由于巴赞与克拉考尔的支持,以"逼真性"为主的现实主义流派经历不同时期的蓬勃发展。克拉考尔认为电影是"物质现实的复原",电影可以将一切搬上银幕,再现实际生活。与"逼真性"相同,"假
认罪认罚从宽制度是适应新形势,准确及时惩罚犯罪、维护社会稳定的重要举措,是充分体现现代司法宽容精神、贯彻宽严相济刑事政策、强化人权司法保障的重要路径,是推动刑事案
传统提高单核处理器性能的方法主要是通过提高时钟频率的方式来实现的。随着大规模计算应用以及复杂应用对处理器的计算能力、存储系统设计等方面需求的大幅度提升,单核处理