海量卫星遥感数据实时存储与交换技术设计与实现

来源 :国防科技大学 | 被引量 : 0次 | 上传用户:yq8308yq
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人类对地观测卫星系统的发展,卫星遥感数据量爆炸性增长。海量的遥感数据对当今存储系统存储容量、数据可用性以及I/O性能等方面提出了越来越高的要求。单纯使用系统提供的异步存储方案或利用分布式文件系统高速大容量存储已不能满足实际环境中大数据量实时存储需求。如何更加可靠、高效地存储海量遥感数据,保证数据业务的高实时性,实现卫星遥感数据的快速共享与分发,已经成为卫星地面数据处理领域的研究热点。针对需要持久化存储与高速交换的数据,本文提出了一种基于共享文件系统和文件编目消息推送的海量卫星数据实时存储与交换机制;同时,针对时间指标要求苛刻的海量数据实时交换需求,本文提出了一种基于共享内存的海量卫星数据实时存取交换机制。本文的主要工作如下:(1)海量卫星数据实时存储与交换框架研究通过对海量卫星数据实时存储与交换问题进行梳理、分析,实现了海量卫星数据实时存储及交换的硬件总体架构、软件体系结构以及数据流转的相关设计。(2)设计并实现了一种基于共享文件系统和实时消息推送机制的海量卫星数据实时存储与交换服务针对海量卫星数据存储过程中低延迟存储调用的需求,以及数据实时交换的特点。设计了一套基于共享文件系统和实时消息推送机制的海量卫星数据实时存储与交换服务,为上层应用提供高实时、低延迟的数据实时存储支持;并设计文件编目信息实时消息推送机制,实现海量卫星数据在多个处理节点间的实时共享和更新。(3)设计并实现了基于共享内存的海量卫星数据实时存取交换服务针对海量卫星数据存储业务流程中,某些特定场景下对结构化数据、非结构化数据查询时间要求苛刻的情况。根据查询数据类型的不同,设计了一套基于共享内存的海量卫星数据实时存储与交换服务。针对结构化数据,设计实现了基于TimesTen的结构化数据实时存取服务;针对非结构化数据,设计实现了基于Redis内存数据库的数据实时交换服务。设计并实现的服务在处理相应类型数据的过程中,都达到了很好的效果。
其他文献
评价理论是在系统功能语言学框架下发展起来的研究人际意义的阐释性理论,在语篇分析中被广泛应用,对二语习得和英语教学具有指导意义。该理论包含态度、介入、级差三个子系统
研究背景及目的支气管哮喘是一种以呼吸道炎症、呼吸道高反应和呼吸道重塑为特征的常见多发疾病。近年来,其发病率和死亡率呈逐年上升趋势;法医学实践中因哮喘引起的猝死案例也
通过对某住宅生活给水水压不稳定原因进行分析,并参考<建筑给水排水设计规范GB50015-2003>及建筑给水排水工程相关知识,计算查证了该建筑给水管道设计存在的问题,解释了水压
人类胚胎干细胞及诱导多能干细胞研究的一个目标就是将它们成功应用于临床细胞替代疗法,为人类健康做贡献。诱导人类胚胎干细胞及诱导多能干细胞向不同谱系的细胞定向分化是
组成复杂的酸性镀铜液中,因干扰离子多,氯离子含量低,用银量法难以准确测定镀液中的氯含量。采用BaO作沉淀剂、H2O2为氧化剂,消去干扰离子,建立了离子选择电极法测酸性镀铜液
目的分析二胎再育趋势下产妇人口学特征及剖宫产率的变化。方法回顾性分析济宁医学院附属医院产科2013年11月—2014年4月(3 217例,A组)、2014年11月—2015年4月(3565例,B组)、201
随着改革开放的深入和社会主义市场经济建设的不断推进,当代中国社会正经历着剧烈的社会转型,社会道德状况作为衡量社会转型的重要标志,也随之呈现出复杂多变的状况。人与人
文章对特殊儿童的概念和范围进行了扩展,阐述少儿图书馆应重视为特殊儿童服务这项工作,并对做好这项工作提出几点具体措施。
<正>世界发达国家都把建筑部件工厂化预制和装配产业化施工作为建筑产业现代化的重要标志。"装配式建筑产业化是世界性的大潮流和大趋势,同时也是各国改革和发展的迫切要求,
丝绸之路经济带建设是集政治、经济、生态等多元因素为一体的国家战略。中国与中亚经济带具有天然的地缘优势,生态合作的深化与加强将有力地推进丝绸之路经济带的整体建设。