元数据存储单元设计与实现

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:ruixinxin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息的大发展数据呈现爆炸式增长,用于存储飞速增长的数据的分布式文件系统应运而生。目前主流的分布式文件系统多采用元数据与数据分离的管理机制,即将文件元数据和命名空间保存到元数据存储节点上,而向系统上传的数据则保存到数据节点上,以便高效、高扩展、安全、快速地存取数据。因此,在整个分布式文件系统中,元数据的存储占据举足轻重的地位。本文主要研究分布式文件系统中的元数据存储单元。通过对元数据高可用性技术的深入研究,在前人研究成果基础上,设计实现了Cstore分布式文件系统元数据存储单元,并对实现的存储单元进行了部分性能测试。主要工作如下:研究了分布式文件系统中目前主流的文件系统以及这些系统的设计理念与设计原则,并对上述主流的文件系统的元数据管理的方式方法进行了重点研究,同时对元数据职责和元数据管理的方式进行了详细的阐述。研究了分布式文件系统常用的系统组织模式,并详细的介绍了两大类设计模式:active/active模式和active/standby模式。对这两大类设计模式介绍的同时分析了这两大模式下的不同子模式的优点与缺点。同时介绍了常用的服务器编程I/O模型。对Cstore文件系统进行了概括性的介绍,并对整个系统中所涉及到的关键技术进行了介绍与阐述,其中对元数据存储单元提供服务所面临到的问题提出了解决方案。如对数据安全和稳定服务方面提出的主从互备机制,面对如何确保用户上传的元数据快速定位到用户上传元数据定位元数据服务器,上传的文件如何快速定位到需要上传数据的数据服务器等技术。同时介绍了元数据规则服务器用到的一些关键技术。总体介绍上述元数据存储单元的模块划分,然后详细给出各子模块的设计类图和数据流程图,并对图中所涉及到的类的作用加以详细说明和介绍。对实现后的元数据存储单元集群进行了测试。结果表明该元数据存储单元集群能够高效稳定地对外提供元数据访问,性能达到了设计要求。
其他文献
二战后,由于意识形态与共产主义的尖锐对立,美国国会颁布了一系列反共法案,旨在清除公共系统中的共产主义者。政治的影响逐渐渗透到社会生活的各个领域,高等教育领域也未能幸
商务英语笔译课程是商务英语专业的重要课程,如何上好商务英语笔译课程一直是语言教学领域关注的问题。依据将翻译视为试探性理论的思想,在教学各个环节中加入“尝试”的理念
基于物联网/传感网的生产安金监控报警系统的研究与设计旨在通过建立自组无线传感器网络可以将各种传感器,如温度、湿度、压力、振动、光照、气体传感器或者振动、声音、磁力、
随着现代社会的高速发展,电力紧缺的现象越发严重。为此,我国不断加大对电力建设项目的投入,使得电力建设项目的规模和数量也越来越大,却对电力建设项目的时间要求越来越短,这不仅
批评性报道是指针对现实中存在的问题、缺点或错误等所作的新闻报道,俗称“批评稿”。开展批评性报道,是新闻媒体履行舆论监督功能的重要方式,也是我国新闻事业战斗性的重要体现
我国幅员辽阔、地形地貌复杂且微气候特征繁多,约70%的国土面积处于高海拔地区,因此在“西电东送、南北互供、全国联网”的电力发展战略下,输电线路不可避免地需要穿越覆冰(雪)
内蒙古电视台250m~2演播室2013年10月承担了由我台承办《第二届房展会》的直播任务,首次实现了多场地、多机位、多信号源、多播出平台同步直播的功能。本文对直播前技术方案
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清华大学发明人:隋森芳文摘:本发明属于生物技
目的:通过2011年云南省玉龙县农村居民的现场调查资料,了解云南省玉龙县新型农村合作医疗制度的运行现状,分析玉龙县农村居民主要慢性病的患病率及直接疾病经济负担情况,探讨
水是人类赖以生存和发展的重要自然资源,也是自然生态环境重要的制约因素。随着社会的进步,经济的发展,水资源的需求量日益增加,使得水资源供需矛盾日益突出,解决水资源危机