支持多源车辆数据流的存储优化

来源 :山东科技大学 | 被引量 : 0次 | 上传用户:JK0803_sunmingfang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
伴随着物联网技术的迅速发展及城市化进程的加快,智能交通应用迅速崛起。新型城市交通基础设施不断兴建,车流量快速增长,监控系统越来越庞大。通过视频识别摄像头、GPS车辆定位装置、RFID车辆等感知技术,汇集了各类车辆实时监测数据。一种以实时监测数据为例的新型数据模型——流数据的出现,对数据库技术提出了更高的要求。流数据管理系统有效的弥补了传统数据库在处理动态数据上的缺陷,但流数据管理系统主要着眼于当前流入内存的实时数据,流出内存的数据则不断抛弃。然而,几乎30%~40%的实际应用涉及历史流数据,因此,我们有必要对流出系统的历史数据有效地进行保存。  本文所依托的实时车辆监管平台中,通过对停车场或道路上的车辆布控监测点所监测的以某种标准转换的车辆数据进行处理,以进行车辆流统计、嫌疑违章车辆判别以及轨迹分析等业务计算,从而支持对整个城市范围内的道路与停车场车辆的全面监管。在该平台中,需将监测车辆数据以及各类计算结果进行快速实时存储,为诸多不同类型车辆数据以及实时计算结果提供有效的管理与持久化存储环境,以保障车辆数据存储的通用性,低延迟性,高效性和可扩展性。因此,本文的主要贡献如下:  第一,针对海量实时车辆数据的多样化实时存储需求,深入分析各类数据,根据其差异性,创建通用存储接口,增加系统的通用性。  第二,利用一致性哈希技术,构建分布式的并行存储架构以提升大规模车辆数据及计算数据的存储性能,保证数据存储的低延迟性,高效性与可扩展性。  第三,在项目背景下设计实验进行验证。在某城市车辆监管系统支撑下设计的实验表明,本文设计的分布式实时存储架构具有良好的高效性,低延迟性,可扩展性。
其他文献
电子数据采集(EDC)是现代临床研究不可或缺的一种现代化研究手段,无论是在国外还是国内都已经得到了普遍的应用。而对于临床研究来说,准确而迅速地采集并处理数据是至关重要的,
Manet网络也即移动Ad H0c网络(Mobile Ad hoc Network),它是由若干节点所组成的一个无线移动自治系统。在一个无线Manet网络中,节点之间通过多跳的无线链路相互通信,这样所有的
目前,电信业竞争激烈,移动运营商在不断地寻找新的途径去创造新的利润点或者利润增长点。在各种移动增值业务当中,无线定位业务又称为位置业务(LBS),是由移动通信网提供的一种增
2008年北京奥运会后,体育竞技项目越来越受人们欢迎。但如何更好的运用图形图像技术来实现运动员的各种运动信息的展示,也成为一个越来越热门的研究领域。冬季奥运会上的花样滑
信息时代,人们对教育提出了新的要求,Internet远程教学作为一种新的教学模式正备受关注。与传统的教学相比,基于Internet的远程教学不受时空环境的限制。它符合现代人才培养的需
搜索引擎是人们获取海量网络信息的首要工具,是网络研究和应用的关键内容。目前随着tntemet信息的爆炸增长以及信息多元化的发展,主题搜索引擎正成为研究热点与发展趋势。本文
近些年来,有关空间数据的应用与日俱增,这就对空间数据的有效管理提出了迫切要求。空间数据库是管理和处理空间数据的有效途径,它已成为当前数据库领域的研究热点,在国内外应用于
越来越多的互联网公司依赖大规模的数据分析作为其核心服务的一部分,如日志分析、特征提取和数据过滤等任务。通过其Hadoop实现,MapReduce模型已经被证明是处理此类数据的有效
基于XScale的NeuLinux开发平台是由东软集团有限公司嵌入式软件事业部为了面向高端的嵌入式市场而开发的一种软硬件平台。 在XScale开发板上,我们定制了NeuLinux嵌入式操作
VoIP俗称IP电话,它是利用国际互联网Internet作为语音传输的媒介,从而实现语音通信的一种的通信技术。当前,VoIP的业务量正在以飞快的速度增长,然而,IP电话终端设备和网关的可扩展