基于NoSQL的遥感影像存储系统的研究

来源 :中国电子科技集团公司电子科学研究院 | 被引量 : 0次 | 上传用户:fishonscreen
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着航天技术、传感器技术的飞快发展,我国相继发射了多种型号的高分辨率卫星,这些遥感卫星在资源勘探、灾害防控、军事观察等方面都发挥了重大作用。与此同时,如何有效地存储遥感卫星生产出的遥感影像,具有如下挑战:第一、单幅遥感影像体积较大,某些场景下甚至达到上百GB。第二、遥感影像数据总体规模海量。第三、遥感影像应用的实时性要求高。根据以上问题,本文围绕着分布式存储中影像分块、影像编码和影像数据访问效率等方面,开展了基于NoSQL数据库HBase的遥感影像存储系统的研究,并给出了详细的设计方案。本文的主要工作成果如下:(1)对国内外现有的遥感影像存储方案进行了研究,分析其中存在的若干问题。在研究影像金字塔技术和GeoHash编码技术的基础上,提出了影像采样切分编码的方案。(2)深入研究了HBase存储模型,基于GeoHash分块编码近邻性和HBase按字节排序存储的特征,提出了Rowkey拼接方案和基于传感器类型等元数据的二级索引的方案,经过实验测试,影像数据的局部索引性能有明显提升。(3)分析了MEM、SSD、HDD三种存储介质的读取速度,基于LFU数据块淘汰算法,设计了三级缓存队列,测试数据表明该方案可以有效提升影像块的访问速度。并且研究分析了布隆过滤器原理,设计了布隆过滤器模块,可以快速检测影像数据块是否存在,避免耗费系统资源查找无效数据块的情况。(4)给出了影像存储系统的详细设计方案,同时分析了HDFS模块,HBase数据库以及三级缓存模块的单点故障问题,详述了基于分布式协调系统Zookeeper高可用系统的搭建过程。
其他文献
随着油气勘探开发的不断深入,勘探地区的地质构造和地质环境愈发复杂多变。在陆上和海上中深层勘探目标区采集的地震资料中,受复杂地质条件和其他因素等影响,原始资料的品质通常比较差,主要表现为:剖面中存在着较严重的随机噪声和相干噪声干扰,有效反射信号较弱且被强噪声覆盖,资料信噪比和保真度较低。由于地震资料的信噪比会直接影响到地质解释的精度,因此地震资料去噪处理就成了十分重要且基础的环节,也有必要对地震去噪
研究背景:结核病是一种发病率较高、传染性较强的呼吸道传播类疾病,是由结核分枝杆菌感染人体各个器官引起的,当其侵入肺部时成为肺结核。耐药结核病是由耐药性结核分枝杆菌引起的疾病,这种结核杆菌感染机体后,对治疗结核类药物如异烟肼(Isoniazid,INH)、利福平(Rifampicin,RIF)、链霉素(Streptomycin,SM)、乙胺丁醇(Ethambutol,EMB)等产生耐药性。不规范、错
阅读是写作的基础,写作是一个将阅读内容反刍和思维加工深度拓展的过程。在语文学习的整个过程中,阅读和写作一直备受重视。高中语文“以读促写”问题对策研究是提高教师专业素养和学生阅读与写作能力的有效途径。云南作为边疆少数民族重要聚居区,高中语文教学和教学对象具有一定特殊性,论文以红河州金平县第一中学高中语文“以读促写”问题对策为研究对象,运用案例分析法、问卷法、访谈法和观察法,针对目前红河州金平县这种边
地月空间指地球与月球二者引力占据主导作用的空间范围,用任一单个中心体引力都无法模拟在这一空间内的物体运行规律。在复杂深空探测任务需求的引领下,在微小型航天器和航天
行业题材电视剧(简称行业剧),可归属于职业剧范畴,是一种文本价值侧重于展示一个行业精神风貌的重要电视剧类型。当前,从角色塑造、细节处理、社会影响力、同时间段产量等多方面比较,在创作层面已经形成模式化的美国行业剧较优于其他国家和地区,具有一定创作特色。本文选取美国部分代表行业剧,以剧集专业性和戏剧性融合程度为参考,探讨行业剧的概念及归属;结合社会文化背景对行业剧在美国的产生、兴盛原因进行系统解读;结
随着现代社会飞速发展,通信领域的频谱资源变得越来越稀缺,如何提高频带资源利用率逐渐成为人们研究的重点。同时,在卫星通信和深空通信等通信系统中,一般要求发射机功率放大器需要工作在全饱和模式的状态,以此来产生足够的发射功率,确保信号能够准确地传送到接收端。然而工作在此状态下的功率放大器具有非线性特性,因而又要求已调信号具有恒包络或准恒包络的特性,以减少频谱扩展现象的发生。在通信系统中,已调信号的带宽以
2C类蛋白磷酸酶(type2C protein phosphatase,PP2C)A亚族成员(PP2CAs)是脱落酸(Abscisic acid,ABA)信号转导途径的重要组成部分,广泛参与ABA介导的逆境胁迫响应。水稻PP2CA基因家族中共含有10个成员,部分基因家族成员的功能已经初步明确。但是其中的OsPP2C30在水稻中的生物学功能还并不清楚。本研究利用表达分析、亚细胞定位和转基因等多种研究
本文对东乌旗乌里雅斯太地区中生代火山岩进行了岩石学和元素地球化学的研究,对火山岩的年代学进行了分析,为火山岩的研究提供了准确的年代学数据与地球化学数据,阐述了区内火山岩的成因,综合分析其形成的构造背景。乌里雅斯太地区的火山岩主要为流纹岩、英安岩、安山岩等一套中-酸性火山岩,锆石U-Pb的定年结果131.6±1.8Ma-153.2±0.6Ma,显示其主要形成在晚侏罗世到早白垩世时期。火山岩SiO2的
本文是一篇交替传译实践报告,以笔者参与的一项大型石油天然气项目中的封弃井项目实践为基础,主要对口译实践中遇到的问题和现象加以梳理和总结,提出了问题应对方法,并对此次口译实践进行了总结。本篇实践报告共分为四章内容。第一章主要介绍了翻译任务的背景、内容、特点和要求。第二章描述了整个翻译过程,涉及译前准备和过程描述。第三章笔者列出了翻译过程中的实例及分析,第一节梳理了口译实践中出现的缩略词传译不当、设备
随着我国输变电工程的飞速发展,1000kV特高压已成功应用与实际工程中。而电压等级及导线容量的不断增大,输电线路中的荷载也在不断增加,同时远距离传输线路架设时还需考虑通航要求、架设净空等问题,所以输电塔越来越多的采用钢管构件。而钢管连接的节点则是研究的重点部位,现行的规范中规定的相贯焊节点承载力计算方法均是针对无加劲的相贯焊节点提出的。而在输电线路工程中,特别是特高压大跨越钢管塔中,通常会采用有加