海量复杂结构数据计算方法的应用研究

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:glsdap
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来越来越多的传统行业受互联网新技术的影响和推动,运用互联网技术处理数据业务,由此产生的海量复杂结构数据使得传统的关系型数据库已不再适用。非关系型数据库凭借其自身结构灵活、高效并发读写等显著特征,为存储、计算复杂结构的数据提供了有效的数据库系统支持。部分非关系型数据库不仅能处理传统的关系数据和新型的非结构化数据,还具有一定的对空间地理数据进行存储和应用的能力,但是这种能力与一些专用的地理信息系统数据库相比还有一定的差距,多种数据库系统的协同应用也成为目前的一种趋势。本文在研究分析MongoDB数据库分片技术原理和基本片键选择方法的基础上,给出了基于数据库操作场景汇总计算出的数据库操作向量,对分片模式以及数据模型片键选择提供自动决策的方法,为分布式数据库分存储规划提出新的思路。进而在研究现有关系型数据库和非关系型数据库基本原理的基础上,分析对比二者在不同应用场景中的优劣差异。重点对比了PostgreSQL数据库与MongoDB数据库在对多种复杂结构数据的导入速度、磁盘空间占用、主键查询效率、非主键查询效率、地理区域关系查询等多方面的效率和性能,并且分析不同类型的索引对两种数据库的影响,结合电信运营管线资源管理系统分析两种数据库的适用情境,建立这两种数据协同支撑架构的应用方案,在实际应用中表现出较好的性能。
其他文献
随着计算机网络的广泛普及,计算机的辅助应用已经普遍运用与各行各业,为经济、政治、军事、文化的发展做出了巨大贡献,包括在教育测量方面。教育测量是在20世纪二三十年代首
按照民航局空管体制改革有关优化空管系统资源配置、提高空管系统运行整体效率的要求,建立贯穿于全系统的新型运行保障服务模式,民航空管系统提出建立空管系统“三横三纵”运
语音库的自动建设在可训练的语音合成中占有很重要的地位,它要求对输入的音频进行类别的区分来进行不同的处理,并将处理后的音频分割为句子作为后续的音段切分系统的输入。音
内容分发系统能够在多用户之间快速的传输大型文件,已经成为应用最为广泛的P2P技术。网络编码技术作为通信领域的新兴技术,已经得到学术界的普遍关注,如何将网络编码技术应用
本文依托四川省科技厅科技攻关项目《多参数非接触测量在线系统研制》和西南科技大学省级机器人重点实验室实际项目的需求,重点研究了视觉测量在工件形面测量应用中的几个关键
学位
随着Web服务标准的持续完善和支持Web服务的企业级软件平台的不断成熟,越来越多的企业和商业组织参与到软件服务化(Software as a Services, SaaS)的行列中来,纷纷将其业务功
随着信息技术、网络技术、数据存储技术和高性能处理器技术的进步,数据资料的规模急速膨胀,从而促进了数据挖掘(Data Mining,DM)技术的产生和飞速发展。数据挖掘在不断的挖掘
数据库水印技术是实现数据库版权保护的一种有效手段,它在不影响数据库使用价值的前提下将水印信息嵌入其中,通过检测或提取水印以证实数据库的所有权或完整性达到身份证明及
学位
中国互联网的变化日新月异,原本占主流地位的PC网络端逐渐没落,被飞速发展的移动互联网所取代。伴随着iPhone,Android移动平台的出现,手机游戏开发正变得越来越受到大众的欢
无线传感器网络的一个重要技术就是数据收集技术,通过将节点收集到的数据发送到基站并对其进行分析以便作出相应的决策。同时,数据收集技术也是无线传感器网络得以稳定、高效