基于LDAP的元数据服务器集群的研究与实现

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:happy_hoo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
信息的爆炸性增长对当前的存储技术提出了巨大挑战。新的对象存储技术,能为存储系统提供高性能和高可扩展性,是构建大规模、分布存储系统的基础,正逐渐成为存储领域研究的一个热点。元数据服务器子系统作为对象存储体系的一个核心部分,是实现分布式对象分布存储的关键。然而,以前的单一元数据服务器结构在服务效率、可用性和扩展性方面都无法对大型对象存储系统中多达TB甚至PB级的数据进行有效管理,必须将元数据服务器扩展成为集群方式。因此,研究如何构建元数据服务器集群、为存储系统提供高效率的元数据服务,成为一项重要而急待解决的课题。在对象存储系统体系结构研究的基础上,利用轻量级目录访问协议LDAP(Lightweight Directory Access Protocol)良好的分布式目录服务能力,针对元数据服务器的功能,设计了一个基于LDAP的元数据服务器集群(LMDS Cluster)。该集群在结构上将服务提供与请求处理分离,整个系统没有集中控制点,是完全分布式的管理。在元数据存储方面,采用基于散列法的元数据分布策略,将对象ID作为散列依据把元数据分布到各个节点上。在系统服务方面,给出了一种动态反馈的负载均衡机制,使得LMDS Cluster能够合理利用集群中的资源,发挥系统的最高效能。在元数据副本一致性方面,设计了一个两段同步协议,能够保证各镜像节点实时地在线同步。目前已经实现了LMDS Cluster的原型系统。测试证明,它能够为客户的并发元数据操作请求提供快速的处理与响应服务,性能稳定,具备大规模对象存储系统的元数据管理能力。
其他文献
随着Internet的飞速发展,各种异构数据交换越来越频繁,XML(eXtensible Markup Language)作为一种Internet上主要的数据表示和交换标准之一,应用范围非常广泛,如电子商务、Web
数据库技术的逐渐成熟、网络技术的迅速普及和计算机硬件的不断出新,使人们采集数据的能力得到了极大的提高,从而导致了全球范围内数据存储量的急剧增大。为增强人们对这些海量
缓存技术和预取技术是解决Web访问延迟问题的主要方案。虽然缓存技术在互联网上有着非常广泛的应用,但是单纯的缓存机制只是利用WWW的访问模式的时间局部性,对于未曾访问过的内
在光盘系统中,通道编码方法对于通道性能有很大的影响,是光盘标准制订过程中需要重点考虑的因素之一,也是光盘标准中知识产权关注的要点,因此一直都是国内外研究的焦点。游程
随着语义Web的迅速发展,语义Web中的信息量呈现爆炸式的增长趋势,如何从海量信息中快速、准确的获取有用信息成为一个热门课题。RDF(Resource Description Framework,资源描
智能视频监控是利用计算机视觉和图像处理的方法对摄像机拍下的图像序列进行自动分析,实现对场景中运动目标的定位、识别与跟踪,并在此基础上对目标的行为进行分析与判断,从
3G的蓬勃发展和4G的悄然到来,无论是个人还是企业团体,都越来越深入地走进了现代信息化的生活,基站作为支持信息传播最基本和最重要的硬件,同样遇到了挑战。基站具有数量多、
近年来,随着互联网和搜索技术的进一步发展,仅仅对于网页文本的搜索已经无法满足人们的需要,对于多媒体特别是语音数据的检索已经成为当今研究的热点问题,也是未来几年中互联
随着网络技术不断发展,人们可方便获得大量信息,但高效的获取信息仍是面临的一个巨大挑战。信息检索是一种有效地获得信息的技术,它能帮助人们从海量信息中迅速找到所需信息。
网络和通信技术的发展突飞猛进,多媒体和音/视频编解码技术日趋成熟,大量多媒体通信业务涌现出来。VoIP技术可以实现PC与电话的语音和视频通讯,同时可完成文字、图像的传送,