对象存储系统中数据管理策略研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:caozhi7963
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前,在超级计算领域,对高I/O吞吐率、高并行性和高扩展性的存储系统要求日益迫切,而传统的存储系统已经难以满足应用需求。实际的需求推动着存储系统不断向前发展,一种新兴的存储模式,对象存储系统应运而生。对象存储系统中文件系统是分布式文件系统。与传统分布式文件系统不同的是,对象存储将数据管理功能下移到智能化的对象存储设备上。对象存储设备负责管理磁盘空间,是对象存储系统中数据的载体,也是存储系统管理的核心。单个对象存储设备性能的提升直接影响对象存储系统的性能。可以从硬件和软件两个方面改善其性能。硬件方面主要针对网络存储的特征,设计I/O吞吐率高、低功耗和可扩展性好的嵌入式对象存储设备控制器,它采用Xscale微架构处理器和交换式架构实现。交换式架构支持任意接口到其他接口的并行事务,可以解决传统I/O总线瓶颈,实现并行I/O。软件方面主要是在对象设备端开发基于扩展哈希的对象文件系统XOBFS(eXtensible hashing Object-based Storage File System),实现对象存储系统存储资源管理。在XOBFS中,磁盘空间被划分成多个区域单元,区域中定长块分配策略与位图管理空闲块方式结合,使得系统在长期运行中不会产生外部碎片,性能不会退化;对象属性用扩展哈希管理,在哈希桶中采用相同对象属性相邻存放策略。属性管理的实现,为更好地组织与管理数据,以及改善数据共享做好准备。最后通过合成Trace对XOBFS进行仿真测试,测试结果表明XOBFS的I/O吞吐率比传统文件系统高,且不会随时间增长而老化。XOBFS为对象存储设备端提供了一种有效的数据管理方法。
其他文献
随着软件规模的不断扩大,软件出现故障的概率随之增大。软件故障已成为软件系统不可靠的主要来源。软件可靠性模型对于软件可靠性估测起着核心的作用。目前所提出的模型大多
随着计算机技术和通信技术的迅速发展,以及嵌入式硬件技术的不断提高,使得越来越多的嵌入式产品需要嵌入式操作系统的支持。因嵌入式应用领域中存在硬件平台的多样性和应用领域
随着网络技术和编码技术的发展,多媒体应用迅猛发展,在无线信道上传输多媒体信息的需求也越来越大。由于多媒体数据尤其是视频数据庞大,为了满足传输带宽需求,视频信号必须高度压
为了更加真实的表现三维物体,三维网格模型的数据量越来越大,给存储、处理和网络传输带来了困难,因此有必要对三维图形数据进行高效的压缩,以减少存储空间,节约网络带宽,缩短
人脸识别是模式识别和计算机视觉领域的热点课题之一,经过30多年的研究,在环境可控条件下已达到实用程度,但在非理想成像(尤其是光照、姿态变化)、用户不配合、大规模人脸库
GPU(Graphics Processing Unit,图形处理器)具有很强的并行计算能力,尤其CUDA(Compute Unified Device Architecture,统一计算设备架构)的出现使得GPU在高性能计算中占据越来
电信运营支撑系统是电信运营商的一体化、信息资源共享支持系统,它以客户服务、业务运营和管理为核心,以关键性事务操作作为系统的主要功能,为网络运营商提供一个综合的业务运营
anycast是一种新型的网络服务,是IPv6的一个新特性。与unicast和multicast一样,它是IP的一种通信模式,anycast给用户的期望是通过一个anycast地址就能访问到该地址所表示的一
对象存储系统系统采用一种新的三方存储架构,和传统的存储系统相比在安全控制上也有着较大的不同,对象存储系统中元数据服务器的安全控制研究是对象存储系统安全性研究十分重
随着计算机网络的快速发展,人们对网络服务质量的要求也越来越高。拥塞控制是网络服务质量研究领域的重要课题之一,是制约网络传输效率的关键性障碍。自1986年网络拥塞现象被