数据网格中副本模型和数据迁移机制的研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:liuhong89332
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数据网格通过使用网格技术将网络上分散、异构、局部自治的资源整合起来,通过有序管理和协同计算,消除信息孤岛,发挥综合效能,实现资源的广泛共享、有效聚合、充分释放,提供高效的计算服务、数据服务和信息服务等。在数据网格中,一个合适的副本机制对数据网格效率和可靠性有着重要的影响,同时在数据网格中,使数据及其副本随着域内作业在计算资源上分布和域间用户对热点数据的访问频度而动态迁移以保证数据的访问能力,也有着重要的意义。在中国教育科研网格公共支撑平台(CGSP)中,数据服务是其核心服务之一,其目的是为中国教育科研网格的用户及各种应用提供一个可扩展的、高性能的分布式数据管理系统,管理网格中各种异构的存储资源,为用户及中国教育科研网格公共支撑平台的其他功能模块提供数据支持。衡量类似数据网格系统好坏的三个重要指标是其可靠性、可用性和服务性能。通过引入副本机制,在后台中保留每份原始数据的备份,当原始数据或者其中某个副本数据所在存储资源发生损坏时,可以通过访问其他数据源获取数据服务,提高了系统的可靠性,同时系统可以从其余的副本数据中恢复丢失的数据,保证了系统的可用性。在网格中,存在着大量的计算资源和数据资源,当网格用户提交一个任务时,其任务的执行过程是计算节点和存储节点共同合作的结果,根据当前网格的拓扑结构、计算资源和存储资源的负载、用户提交的任务的实际情况动态的优化数据及其副本在网格范围内的分布,将使得用户向网格中提交的任务有更快的执行时间以及对网格本身有更好的负载均衡,动态数据迁移机制即是为这个目的而开展的研究。两个方面的研究互为补充,共同保证数据网格系统的可靠性、可用性和服务性能。通过实际测试表明了副本模型在CGSP数据服务中有着完整的功能实现,并能有效地提高数据服务的服务效率。同时,通过仿真分析,表明在副本模型基础上引入数据迁移机制后可以有效提高网格作业的运行效率。
其他文献
随着市场竞争的日趋激烈,信息对于企业的生存和发展起着越来越重要的作用,同时也要求高层管理者做出迅速而明智的决策。90年代中期出现了三项支持决策新技术:数据仓库、联机分析
作为互联网最基础的应用之一,电子邮件的广泛使用使其占据互联网数据总量的三分之一左右。随着应用的增多,垃圾邮件数量的增长也非常迅速,网民每周收到的垃圾邮件占总邮件量
随着通信软件的飞速发展,通信软件产品的日益增多,通信软件的维护越发重要,维护过程中存在的问题也越来越明显,对于核心通信软件——即在通信网上提供增值应用、增值业务及为运营
随着互联网的迅速发展以及网络复杂性的不断增加,网络安全问题日益严重。由于恶意软件传播速度快、破坏力强、影响范围大等特点,因此如何有效地遏制恶意软件的传播已经成为非
为了适应信息社会的发展及学校图书馆的实际需要,内蒙古扎兰屯市教师进修学校急需引入自已的图书馆管理系统。本文分析了目前我国图书馆管理系统的发展现状及存在的问题,结合
XML已成为Web上数据表示、集成和交换的标准,它的格式简单、自我描述能力强,实现了内容、结构和表现三者的分离,更适合于数据表示和交换。近年来,XML在各个领域得到了广泛的使用,W
小词汇量非特定人孤立词语音识别是语音识别领域中的一个重要分支,在家电遥控、智能导航、人机交互等领域都有着广泛的应用价值。 近年来,语音识别技术得到了飞跃性的进展,但
随着大数据时代的到来,数据已呈爆炸式的增长,海量数据的存储已成为数据中心的首要问题,重复数据大量存在于信息处理与存储的各个环节中,如文件系统、邮件附件、web对象以及
人脸自动识别是一种利用计算机分析人脸图像特征以实现人的身份验证的技术,是近二十年来图像处理、模式识别和计算机视觉领域中极富挑战性的研究课题之一。多年来,人们对人脸识
面向对象模型基于方法学原理,关系数据模型基于集合论原理,理论基础的不同导致了两种模型之间的阻抗不匹配。为解决这一问题而提出的对象关系映射(Object Relational Mapping,简