负载感知的数据分区与复制技术研究

来源 :华东师范大学 | 被引量 : 0次 | 上传用户:Liujc
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着数据的爆炸式增长和对海量数据查询处理能力的强烈要求,分布式数据库系统和并行数据处理平台应运而生。在分布式环境下,分析型查询的执行可能会产生大量的网络传输,影响查询的执行效率。良好的数据分区和复制技术可以保持数据的本地性,尽可能减少负载执行时远程传输的数据量,降低网络传输的代价,提高整体处理性能。现有的数据分区和复制技术,存在对复杂查询负载的支持较弱或占用存储资源过大的问题。本文设计并实现了一个面向分布式数据库的负载感知的数据分区复制工具,通过合理的分区、复制策略实现高效的分析型查询处理。本文的主要贡献如下:1.针对分布式环境下的分析型负载,本文设计了两种负载感知的启发式分区算法实现分布式数据分区,有效降低分布式节点间的网络数据传输,提升查询执行的效率。2.为了进一步减少网络的传输量,本文在数据分区的基础上增加存储资源敏感的数据复制策略,设计了基于网络传输代价和数据存储代价的混合代价模型,提出了扩展的分区复制算法。3.本文实现了一套数据分区与复制建议工具,主要包括信息统计收集、最优化算法、贪心分区算法、遗传分区算法、代价模型构建等模块。此工具可以作为组件嵌套进数据库存储层或作为外部建议工具使用。
其他文献
2019年,中国债券市场规模增至全球第二。在债券市场蓬勃发展的同时,债券隐含的信用风险也不容忽视。衡量信用风险的一项重要指标是债券的信用利差,它反映债券相对于无风险证券的信用升水,且其受到多方面宏观与微观因素的影响,其中包括从投资者行为角度出发的异质信念,代表不同投资者对于同一债券的预期差异。信用利差与异质信念之间的相互影响在过去缺乏详细和全面的分析与探讨,因此本文对此进行了多方面的实证研究。首先
地震勘探开发过程中,地震资料处理质量会对后期解释工作产生很大影响。要得到好的处理结果,就要充分考虑该探区地震波传播特点以及地震资料的特点,进行更切合该探区介质的处
二氧化钛因其良好的化学和物理性能被广泛用于各个领域中,但二氧化钛有三种晶型:锐钛型、金红石型、板钛型。应用最多的是锐钛型和金红石型。但锐钛型和金红石型的性能各有不同,为了得到不同晶型的二氧化钛以供生产中使用。如何控制锐钛型和金红石型的晶型结构就显得尤为重要。非晶型二氧化钛型加热到一定温度可转变成锐钛型。晶型转变温度大概在200℃400℃。从锐钛型转变成金红石型的晶型转变温度大概在500℃700℃。
氧化石墨烯是石墨的高度氧化剥离产物,因其表面具有大量的羟基、羧基和环氧基团以及两面具有芳香结构且比表面积大,所以在有机合成中主要应用于一些氧化反应和酸催化反应等。近年来,关于氧化石墨烯在有机合成中的应用报道逐渐增多,因具有价格低廉,容易制备,环境友好,能与多种官能团兼容等优点使其成为化学工作者们研究的热点。本文主要以氧化石墨烯的氧化性为核心,进行了在有机合成中的应用探索。首先介绍了氧化石墨烯氧化异
双转子系统是航空发动机和燃气轮机等现代高端装备的核心部件,它具有转速高、温度高、负荷大和柔性结构耦合等特点。非线性双转子系统动力学研究对“两机”的结构设计、故障检测和维护具有重要意义。本文基于双转子系统结构特点,考虑转子系统非线性弹簧特性提出一种全新的双转子系统动力学模型。另外,考虑到相空间分析会弱化系统耦合关系,本文提出基于能量空间的振动能量分析方法,并用于分析系统的非线性振动特征。本文以集中质
电化学聚合可选择定向沉积,制备的薄膜结构性质可控,但是由于链段的强相互作用和电荷残留引起的猝灭效应,电聚合薄膜一般没有荧光或荧光较弱。在以往的工作中,我们课题组开发出一种电聚合前体分子OCBzC,分子外围含八个咔唑作为交联基团,在电聚合的过程中能形成高交联度的发光薄膜;由其制备的有机电致发光器件(OLEDs)的亮度以及效率能达到旋涂器件的水平,在OLEDs及显示中有潜在的应用。在传统方法制备OLE
宗祠,作为纪念祖先而建立的建筑,它承担起了祭祀先人,教化后代、处理纷争,承办族内重大活动的功能,是地区家族信仰、文化中心。当代社会,宗祠建筑虽不像以往,承担着许多重要社会职责,但这些建筑是历史的见证者,记录着家族历史、文化、经济的发展变化,对于地区而言,宗祠建筑是宝贵的历史、文化、精神财富,值得我们的研究与保护。湘南位于湘赣粤三省的交界地带,湖湘文化、中原文化、岭南文化等多种文化在此融合、碰撞,形
近年来稀土有机无机杂化发光材料因其优异的发光性能引起了科研工作者的广泛关注。通常这种杂化发光材料的制备方法是将稀土配合物掺杂到无机基质中,如沸石,二氧化钛,二氧化
生存、生长与繁殖是植物生活史进程的核心目标,植物的一切行为皆围绕而行,生态策略调节也是如此。气候变化背景下,植物以适应为目的的生态策略变化对研究植被动态、生态系统
混合岩是辽宁鞍山某矿区露天边坡的主要组成岩性之一,卸荷力学特性对于边坡的稳定至关重要,本文旨在通过室内常规三轴试验来揭示混合岩的变形破坏规律,用于指导工程实践。通