基于非易失性内存的空间索引技术研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:liongliong536
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网催动了电子商务、自动驾驶、网络社交、物联网的极速发展,大量的空间数据随之产生,人们的日常生活越来越依赖于空间数据,空间数据的大数据时代已经到来。空间数据具有:数量多、产生速度快、结构复杂、操作特殊等特点,传统的关系型数据库难以应对空间多维数据的存储和操作。而且传统的存储设备是块存储每次更新是按照块大小来操作的,在空间索引数量多,小数据的情况下影响检索插入性能。针对以上问题,本文采用了基于R树、RLink树、非易失性存储(Non-Volatile Memory,简称 NVM)和非易失性内存编程开发库(Persistent Memory Development Kit,简称PMDK)等技术,设计并实现了优化持久R树(Optimized Persistent R tree,简称OPR-tree)和持久 RLink 树(Persistent RLink tree,简称 PRLink-tree)空间数据检索结构。该索引结构实现了对空间数据的插入,检索主要功能,满足了非易失性内存的按字节读取、8字节原子更新、大容量等特性。具有更高的插入,检索吞吐量的优点。本文的主要工作如下:(1)分析现有的R树二次分裂算法存在的遗留分支缺陷,针对遗留分支问题,提出一种改进的分裂流程,修改了原本的分裂流程,测试表明这种分裂流程的改进可以提高空间利用率和减少覆盖。(2)使用了位图bitmap来加速结点内部分支的查找,设计的8字节大小的header来保存结点元数据OPR-tree为(层级、版本号、位图),PRlink-tree为(层级、逻辑序列号、位图),充分利用非易失性的最小8字节原子化更新大小来设计。(3)使用了 Inplace-update就地更新方式,来插入新的索引记录和更新旧的索引记录。相比于原始的R树将溢出结点分裂成两个新结点,再将两个新结点插入到父结点中去,原始的R树分裂方式需要父结点有两个空的分支,如果不满足则父结点需要再次分裂,增加了分裂次数,影响了操作效率。Inplace-update这种更新方式只需要一个空的分支,它利用了原始的溢出结点分支,提高了操作效率。(4)OPR-tree使用了 mutex锁实现多线程操作,PRLink-tree使用了读写锁实现多线程操作。并且分析了多线程操作下的读写一致性问题。(5)使用了日志结构来避免系统崩溃或断电后导致的非易失性内存中数据不一致问题。针对OPR-tree,PRLink-tree索引结构,搭建了基于英特尔傲腾持久内存的非易失性内存实验环境,实验了它的多线程插入,检索吞吐量,不同header大小下插入,检索吞吐量,实验结果表明:OPR-tree的在插入,检索性能方面优于FBR-tree,OPR-tree 插入性能最高提升了 34%,检索性能最高提升了 6%。在同等数据量下 PRLink-tree对非易失性内存的平均刷写次数相比于OPR-tree和FBR-tree大大减小,插入性能也优于 OPR-tree 和 FBR-tree。
其他文献
工业生产过程中,常需对生产工件进行无损检测以检验工件的性能。超声显微检测技术能够利用超声波的传播特性显示样品表面和内部的缺陷或分层信息,是一种无损检测的有效方式。随着器件小型化的发展越来越迅速,需要检测的缺陷尺寸也越来越小,超声无损检测的分辨率也需要不断提高。为实现微米级缺陷的超声无损检测,本文研制了一套高精度、高分辨率的超声扫描显微系统。本文的主要工作如下:(1)实现了超声扫描成像系统的硬件搭建
学位
卫星通信相控阵天线具有覆盖范围广、信息传输速率高的优势,且能够进行快速波束扫描,是无数天线工作者的重要研究课题之一。对于卫星通信相控阵天线的双圆极化、宽带大角度扫描两大特性更是学者们进行设计研究的重难点部分,科研意义重大。为此,本文的分析研究主要针对双圆极化馈电网络、双圆极化相控阵天线的设计以及相控阵天线宽带宽角的扫描展开。主要的工作内容概述如下:(1)对卫星通信天线双圆极化馈电网络进行研究。为达
学位
随着时代的发展,语音在人们的生活中越来越重要,但是现实世界背景下往往会掺入很多背景噪声。这会导致语音质量的下降,因此在这种背景下,语音增强技术成为一个热点。除了传统的语音增强方法,基于深度学习的语音增强方法已经在语音增强领域占有一席之地。它能够通过神经网络直接实现带噪语音到目标语音的映射,避免了传统方法往往需要估计噪声谱的弊端,提升语音增强的效果。基于卷积神经网络的语音增强模型表现良好,但深度神经
学位
司法领域的中文命名实体识别是对裁判文书中的各类实体进行准确地识别,是司法人工智能领域后续应用的基础性工作。由于司法标注语料的严重匮乏以及法律文本独特的行文特点限制,国内对于此方面的研究相对较少。本文对裁判文书的行文特点进行分析,并结合深度学习方法针对司法领域的中文命名实体识别任务展开研究。主要的工作内容如下:(1)针对司法领域公开标注语料缺失的问题,人工构建了一个基于裁判文书的命名实体语料库Leg
学位
质子治疗头是质子医疗设备的关键部件,扫描磁铁电源为治疗头扫描磁铁提供高精度、低纹波、快速变化的励磁电流,是质子医疗中扫描磁铁能够精确控制质子束流偏转、扩展的保障,进而影响最终治疗效果。本文研制了一种基于高、低压H桥混合级联的扫描磁铁电源,包括硬件结构与控制策略,其中高压H桥保证电流的动态要求,低压H桥实现电流的精度要求。首先,通过研究国内外扫描磁铁电源方案,在分析各个电源方案优缺点后,确定了该电源
学位
随着科技的迅速发展,电子战已经逐渐成为现代军事战争的核心。而电子侦察作为电子战的先导和基础,主要是对敌方雷达辐射源进行探测和截获,以获取敌方雷达辐射源信息,为后续的战场态势评估、对敌攻击提供技术信息支持。本文主要研究机载未知雷达辐射源识别和工作模式识别问题。主要工作包括:(1)介绍了雷达脉冲参数和主要参数的调制方式,在此基础上,对雷达相关参数特征的提取进行了研究,并对机载雷达常用的工作模式进行了分
学位
调频连续波(Frequency Modulation Continuous Wave,FMCW)毫米波雷达具有成本低、检测精度高、全天候、全时段工作等特点,目前广泛应用于民用雷达领域,而雷达目标识别是雷达的一项重要功能,但目前民用FMCW毫米波雷达在识别道路目标时,由于道路环境复杂、干扰过多,导致雷达识别准确率较低,距离雷达目标识别技术能够真正应用于实际道路还有一段距离。因此本文对基于FMCW毫米
学位
教育部于2014年发布了《关于全面深化课程改革落实立德树人根本任务的意见》,该文件明确提出学生应具备适应终身发展和社会发展必须的品格和能力。由此,教育部逐步组织研究各学段各学科学生发展核心素养体系,核心素养的落实逐渐成为现代教育教学的总目标。在该背景下相关学者和初中教师都开始主动探索全新的教学模式,大单元教学因其落实学科核心素养的有效性成为主要研究方向。大单元教学呼唤新课程改革下的教学设计也必须进
学位
太空环境恶劣且充满未知,为在外星球上能够实现着陆测距、地质勘探等活动,对探测器提出了极其苛刻的要求,其耐热性、耐寒性、重量、体积都被严格限定。龙伯透镜天线由于具有高增益、低旁瓣、天线结构简单、利于辐射多波束等优点,被广泛用于航天航空领域信号探测。本文针对Ka波段下耐温轻量小型化龙伯透镜天线的设计及实现过程进行了相关研究工作。其主要内容包括:首先,本文从龙伯透镜天线技术的研究背景展开,对龙伯透镜天线
学位
波达方向估计是阵列信号处理技术的重要研究方向之一,可获得信号在空域中的来波方向信息,对目标定位、跟踪等应用具有重要意义。子空间算法是超分辨阵列波达方向估计的重要理论,其中包括经典算法——多重信号分类(MUSIC:Multiple Signal Classification),该算法具有实现简单、精度较高的特点,因而被广泛应用。本文针对MUSIC算法在二维阵列波达方向估计和近场信号波达方向估计时算法
学位