复杂场景下的智能汽车目标检测与跟踪算法研究

来源 :吉林大学 | 被引量 : 0次 | 上传用户:zhangxueyh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着汽车保有量的逐年攀升,城市交通拥堵日益严重,道路交通事故频频发生。智能汽车可以根据实时路况辅助甚至完全代替驾驶员完成主要的驾驶操纵,逐步成为解决交通安全问题的理想方案。环境感知是智能汽车综合系统中至关重要的一部分,它相当于车辆的“眼睛”,直接影响决策系统和控制系统的智能化水平,是智能车辆安全行驶的先决条件。相比于其他车载传感器,以摄像头为主的视觉传感器可以获得最为丰富的环境信息,且成本低廉,硬件技术成熟,在自动驾驶领域具备独一无二的优势。近年来,由于深度学习方法在图像处理和模式识别领域获得巨大的成功,以计算机视觉为代表的新兴技术为智能汽车视觉感知指明了新的发展方向。尽管现有的视觉感知算法已经取得了一些卓有成效的研究成果,但仅能应用于场景良好的简单环境,光线的不足、恶劣的天气条件、障碍物的遮挡以及杂乱的背景等诸多因素,给视觉感知算法的长足发展带来一系列的挑战与考验。面对复杂多变的外部环境,如何实现对视觉信息的快速处理与准确理解,是目前智能汽车视觉感知研究中亟需解决的问题。在实际道路场景中,车辆周围环境内存在的主要目标对象包括车道线、交通标志以及行人和车辆等障碍物。因此,本文致力于对复杂场景下的智能汽车目标检测与跟踪算法进行深入研究,具体研究内容如下:(1)提出了一种面向复杂路况和动态环境的车道线检测算法。通过摄像机标定和去除图像畸变对失真图像进行转换,采用叠加阈值的边缘检测算法来确定车道线的基本轮廓,由感兴趣区域(ROI)提取和逆透视变换来获得车道线的鸟瞰图。考虑到B样条曲线具有仿射不变性、局部修改性和强凸包性等性质,能够灵活地对曲线形状进行表示,基于三阶B样条曲线模型采用随机抽样一致性算法(RANSAC)对车道线进行曲线拟合,并对曲线进行拟合评价和曲率半径计算。测试实验结果显示,所提算法基于道路行车视频的平均准确识别率达到了98.49%,检测每帧的平均处理时间为21.5ms。基于Tu Simple数据集的平均准确识别率达到了98.42%,检测每帧的平均处理时间为22.2ms。(2)提出了一种基于卷积神经网络的交通标志检测与识别算法。基于HSV颜色空间对交通标志进行分割,对二值化图像进行形态学处理来实现交通标志的有效提取。考虑到经典LeNet-5卷积神经网络模型仅适用于单一目标的分类识别,对其进行较大改进,包括采用Gabor核作为初始卷积核,在池化层后加入BN数据规范化处理,选择Adam法作为优化器算法以及在全连接层加入Dropout等。实验结果表明,改进的LeNet-5网络模型具有良好的泛化能力,可以对不同类型的交通标志进行准确高效地分类识别。所提算法基于GTSRB数据集的准确识别率达到了99.75%,检测每帧的平均处理时间为5.4ms。(3)提出了一种基于改进YOLOv3模型的行人检测算法。考虑到行人是典型的非刚性目标,行人之间姿态各异,采用YOLOv3网络模型对行人进行检测时容易出现对目标定位不准确、小尺度目标易被漏检以及在目标密集场景中检测精度较低等问题,对其进行合理改进。在改进的网络模型中,对栅格单元的划分尺寸进行调整,采用改进的k-means聚类算法,基于扩大感受野对多尺度边界框预测,以及采用Soft-NMS算法。实验结果显示,所提算法基于INRIA行人数据集的m AP值达到了90.42%,相比于改进前的检测精度提高了6.88%。检测每帧的平均处理时间为9.6ms,相比于改进前的检测速度缩短了3.9ms。基于PASCAL VOC 2012数据集的m AP值达到了91.14%,相比于改进前的检测精度提高了7.14%。(4)提出了一种基于改进SSD模型的车辆检测算法。考虑到车辆是典型的刚性目标,车辆之间相似度较高,采用SSD网络模型对车辆进行检测时容易出现对小尺度目标特征提取能力不足、受遮挡目标易被漏检以及在复杂环境中检测性能较差等问题,对其进行有针对性的改进。在改进的网络模型中,结合Inception模块和特征融合方法对网络基本结构重新进行设计,在网络训练中采用加权Mask,以及在损失函数中添加排斥损失。实验结果显示,所提算法基于KITTI数据集的m AP值达到了92.18%,相比于改进前的检测精度提高了4.64%。检测每帧的平均处理时间为15ms,相比于改进前的检测速度缩短了13ms。基于自制车辆数据集的平均m AP值达到了91.76%,在同种天气状况下的检测精度均高于网络模型改进前。(5)提出了一种基于双模板孪生网络模型的目标跟踪算法。针对现有孪生网络类算法在目标跟踪中存在的对深层特征提取能力不足、忽略浅层特征的细节信息以及不能保证跟踪精度与跟踪速度的均衡等问题,在Siam-FC网络的基础上构建了基于多特征融合的双模板孪生网络模型。在设计的网络模型中,采用改进的轻量级网络Mobile Net V2作为特征提取骨干网络,引入注意力机制来实现对目标关键细节信息的重点关注,通过模板在线更新机制来有效处理目标的受遮挡问题。实验结果显示,所提算法基于OTB2015数据集的平均覆盖率均值达到了82.5%,平均中心位置误差均值为8.5像素,跟踪速度为56FPS。在实际行车视频序列的平均覆盖率达到了84.7%,平均中心位置误差为6.9像素,跟踪速度为58FPS。由测试评价结果可知,所提目标检测与跟踪算法均具有良好的准确性与实时性,在复杂场景中依然能够保持较强的鲁棒性和抗干扰能力,有效解决了现有研究方法存在的问题与不足。本文研究内容具有重要的理论意义和工程应用价值,有助于推动智能汽车辅助驾驶技术水平进一步发展与提升。
其他文献
运动的带电粒子和物质之间的相互作用能产生辐射。这一现象在物理学、电子显微镜、光学、生物学和材料科学等领域都有着广泛的应用。这种自由电子激励的辐射很大程度上依赖于被激励物质的特性。人工电磁超材料具有很多天然材料所不具备的特性,在操纵辐射场特性方面有着独特的优势。因此研究自由电子和人工电磁超材料相结合来产生相干、可调谐、高功率密度的太赫兹(THz)辐射对THz辐射源的发展具有十分重要的科学价值。本文主
神经胶质瘤是最常见的原发性脑肿瘤之一,在所有发生于脑和中枢神经系统(CNS)的恶性肿瘤中占74.6%。胶质瘤不仅具有死亡率高、复发率高、生存时间短的特点,而且治疗效果有限。目前,治疗胶质瘤最常见的标准策略是手术切除,然而,由于胶质瘤细胞的侵袭性,使得手术治疗的应用十分有限。随着放射治疗或化疗技术的发展,越来越多的放/化疗技术应用到治疗胶质瘤中。对于胶质瘤患者,采用最大程度手术切除联合放疗或/和辅助
Madden-Julian Oscillation(MJO)是热带大气季节内尺度上最活跃的模态,对全球天气和气候有着十分重要的影响。MJO活动具有明显的海气耦合和年际变化特征,与热带太平洋和印度洋的海表温度(Sea Surface Temperature,SST)存在显著的联系。然而,由于热带SST与MJO活动之间的关系表现出复杂性特征,目前两者之间的联系和机理并不十分清楚,这阻碍了对MJO年际变
空间电荷转移高分子荧光材料是一类利用电子给体与电子受体的空间π-堆积实现电荷转移发光的高分子荧光材料,在化学结构上具有给体与受体之间采用非共轭连接的特征,在发光特性方面具有易于实现热活化延迟荧光效应的特点,是构建高效高分子荧光材料的新途径。论文工作围绕调控聚苯乙烯类空间电荷转移高分子荧光材料的发光颜色和提高聚苯乙烯类空间电荷转移高分子荧光材料的发光效率两个关键问题展开,通过调控给体与受体之间的空间
信息隐藏分支中的隐写术是一种“行为安全”技术,其与注重“内容安全”的加密技术一起构成了保密通信技术的基础。传统的隐写术通过“不可见”的方式修改特定的宿主信号以嵌入秘密信息,其本质是将隐蔽通信行为伪装成正常行为以避免攻击者的怀疑。然而,随着隐写分析技术的发展,隐写术只要对载体进行了修改,就存在被隐写分析方法检测出的可能。为了抵御隐写分析,无载体隐写应运而生,其以秘密信息为驱动直接“获取/生成”含密对
在排放稳定阶段气溶胶重污染的变化过程中,湍流扩散和水平输送扮演了重要角色。但在现有的中尺度气象—化学模式中没有气溶胶湍流扩散项,以往气溶胶重污染过程的变化机制研究中也缺少将长期边界层垂直结构观测与包括气溶胶湍流扩散项的中尺度模式相结合的工作,特别是在地形较复杂、污染过程较容易受到区域输送影响的安徽地区,认识重污染形成、变化的机制更为复杂。本研究瞄准上述有关气溶胶重污染变化机制的重要问题,选择我国中
随着工业化和城镇化的加速推进,空气污染对人群健康的影响持续受到关注。本文以江苏省典型地区为研究对象,收集气象、空气污染、死因、流感样病例等资料,现场检测儿童肺功能,采集PM2.5滤膜进行成分分析,对江苏省典型地区空气污染对人群健康效应的影响进行模型分析,探讨空气污染物对流感样病例、儿童肺功能的急性影响,空气污染对人群死因的影响,归因于PM2.5、PM10、NO2及未来情景的分病种超额死亡数,以及P
核盘菌(Sclerotinia sclerotiorum)是一种死体营养型植物病原性真菌。核盘菌可以侵染600多种植物,它所引起的菌核病分布范围广且危害严重,造成巨大的经济损失。核盘菌菌核是一种富含黑色素的休眠体,能够在自然环境中长时存活多年,并成为菌核病主要侵染源。FKH是forkhead家族转录因子,作为真核生物中具有多种生物学功能的转录因子。目前,对FKH蛋白在植物病原真菌中作用报道较少。S
在当前“双碳”政策能源背景下,排放法规对发动机在瞬变工况下的排放要求日益加严,尤其是未来国七排放法规中微粒数量及质量的排放限值越来越成为关注重点,同时以压燃式发动机为代表的车用柴油机的微粒排放又是交通行业微粒排放的主要来源,因此对压燃发动机瞬变工况性能及微粒排放的优化控制至关重要。本研究以一台2.8L车用压燃式增压柴油机为研究改装对象,利用瞬变工况测试控制系统、自行搭建的进气道和缸内双喷射系统、定
肿瘤,特别是恶性肿瘤,现已成为危害人类健康的重大疾病之一。目前,临床上对肿瘤疾病的诊断与治疗已经开展了大量的相关研究,并取得了长足的进步与发展。然而由于肿瘤疾病的发生和发展过程是一个多因子、多步骤的高度复杂性过程,导致多数肿瘤疾病在诊断发现时就已经进入晚期,加大了临床干预的难度,失去了治疗的最佳时机,给病人带来严重的生理和心理影响。因此,亟需探索适用于肿瘤早期诊断和精准治疗的有效方法,尽早攻克癌症