基于Hadoop云平台下的客流量预测研究

来源 :长安大学 | 被引量 : 6次 | 上传用户:zhanghaocong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
交通客流量预测作为智能交通系统的一个重要研究方向,能够有效的为城市道路建设,智能交通疏导等领域提供行之有效保障措施。通过对大量过往交通客流量数据的分析,同时结合神经网络理论,可以建立起准确的数据预测模型,传统的神经网络预测模型局限于训练样本过小,初始化网络权值选取不当,从而可能导致预测结果不准,借助并行计算技术以及分布式存储技术可以方便的解决这两类问题,从而建立更加准确的预测模型。本文将传统神经网络算法和MapReduce并行编程技术相结合,同时借助HBase分布式数据库实现底层数据存储,建立了基于Hadoop集群的神经网络预测模型,并应用于实际客流量的预测问题。本文的主要研究工作如下:(1)通过对应用较广泛的并行编程技术的调研与分析,确定使用MapReduce并行编程框架,并以Hadoop集群作为实验环境,实现可视化的Linux集群资源监控与Job运行监控等服务,开发提供了无网络环境下集群安装配置服务组件。(2)在研究分析串行神经网络预测模型与MapReduce编程模型的基础上,提出将MapReduce与BP神经网络算法进行融合改造,提出BP-MR并行预测模型,即能够发挥神经网络算法在预测领域的优势,同时通过增强初始网络权值的随机性以及训练样本数据的并行化,从而可以获得更好的预测结果。(3)在Hadoop集群环境下,通过除噪清洗工作,将干净的客流量数据存储在HBase数据库中,作为MapReduce程序的数据源,通过对BP-MR并行预测模型与BP模型的预测结果进行分析对比,得出BP-MR并行预测模型的优点和不足,提出改进思路。
其他文献
近年来,随着机动车保有量的增加,交通环境不断恶化,城市道路交通安全形势日趋严峻。行人在整个交通体系中处于最弱势的地位,是交通事故中最容易受到伤害的人群,数据显示行人
语义Web的目标是使得Web上的信息具有计算机可以处理的语义。语义原生XML数据库系统(简称SNAX)的目的在于构建一个提供研究语义Web的各种理论、技术和方法的平台。本体映射技
随着互联网和多媒体技术的飞速发展,基于网络的多媒体交互技术得到了广泛的应用。由于网络带宽的限制,研究高质量低码率的视频压缩方法成为热点,于是出现了H.264标准。作为新
QoS组播路由问题是一个非线性的组合优化问题,已证明该问题是NP完全问题,传统方法很难求得全局最优解。解决此类问题一般采用启发式算法,启发式算法包括蚁群算法、粒子群算法等
随着社会的发展,以人为本的思想已经渗透到社会的各个领域。以用户为中心的研究UCD(user-centered design)在国内外计算机行业方面已经作为重点研究,与传统方法不同,以用户为
虚拟制造和虚拟现实的结合与应用从根本上改变了现行的制造模式,对相关行业也产生了巨大影响。移动电话产品设计是一个非常繁复的过程,要经历许多不同的设计方向,因此迫切需要对
数据挖掘是随着信息技术不断发展而形成的一门新学科。它帮助人们在信息海洋中发现有用的知识和信息,面对信息时代海量数据的出现,如何有效地利用巨量的原始数据分析现状以预测
作为商业银行吸引客户和开展各项业务的重要设施,ATM选址是否得当直接关系到商业银行的利益。科学的选址决策有利于提高银行工作效率,增加效益,方便储户:选址不当则可能造成银行
学位
MIMO(多输入多输出)和OFDM(正交频分复用)技术作为B3G移动通信和宽带无线局域网的两个关键技术,越来越受到人们的重视。MIMO系统在发送端和接收端利用多个天线同时在相同的频
随着日益增长的交通需求,交通问题已成为全世界所共同关注的主要问题。如何运用计算机科学等现代的科技手段来缓解日益严峻的交通压力,已成为目前研究的重点。建立ITS(智能交