融合双目视觉的智能车辆环境感知方法研究

来源 :北京工业大学 | 被引量 : 0次 | 上传用户:yangqun0215
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人工智能技术和汽车工业的飞速发展,以先进辅助驾驶(ADAS,Advanced Driver Assistance System)和自动驾驶技术为核心的智能车辆逐渐成为未来研究的重点领域和汽车工业发展的新方向。驾驶环境态势感知是智能车辆自动化系统的核心技术之一,也是车辆全局或局部路径规划及横纵向控制的基础,因此通过优化智能驾驶场景下环境感知任务中的核心算法来提升感知系统的准确性与鲁棒性对于车辆的决策控制和行驶安全等方面具有重要的意义。在智能车辆的前向环境感知方案中,基于全视觉传感器的系统配置方案相较于激光雷达方案或多传感器融合方案而言由于本身成本低廉、设备选型难度低、感知信息丰富等优势更适合作为量产方案。但传统的单目视觉感知算法基于的二维图像本身丧失了空间物理尺度导致算法在实现环境深度测量和障碍物运动态势感知方面难度较大,面对驾驶环境各种要素的高动态性和复杂性,现有算法普遍存在鲁棒性差的问题。为了解决单目视觉在深度感知任务中的固有缺陷,利用双目视觉技术,通过视觉测量方法与视差原理的有效结合来提升环境要素距离检测的精度和鲁棒性,同时将双目相机中左相机获取的图像数据用于实现其他感知任务。基于双目相机基础上提出的融合双目视觉的感知算法方案包含环境深度估计、目标检测、结构化道路车道标线检测三个核心任务,主要研究内容包括以下几个方面:1)环境深度估计任务中双目立体匹配算法对经典的SGM(半全局匹配)算法进行了优化,针对原始算法应用于驾驶场景中出现的弱纹理区域、遮挡区域、强曝光环境下匹配鲁棒性差的问题提出融合像素梯度和AD-Census变换的匹配代价计算方法,在视差精化阶段引入加权最小二乘滤波算法提高了原算法对复杂场景的适应能力。针对双目传感器测距精度随距离降低的问题,基于立体匹配得到的视差深度图提出一种仿人类驾驶员的模糊距离感知方法,同时融合目标检测任务输出的目标包围盒,采用3s原则实现对单目标的深度修正。2)目标检测任务采用深度卷积神经网络技术,针对复杂神经网络训练阶段因多种类目标数据不平衡导致的分类损失优化困难和检测精度差的问题提出一种基于任务分解机制的YOLO-Sign Net目标检测算法。该算法将语义种类复杂的交通流控制信号合并为统一的父类,使用YOLO-V3算法检出父类目标的位置,然后将父类目标感兴趣区域输入至单独设计的Sign Net交通信号分类网络完成对交通信号灯和交通标志子类语义的识别。通过任务分解实现了对复杂类别目标训练过程的单独控制以及子任务网络超参数的针对性调节和结构优化。3)车道标线检测任务基于LaneNet算法框架,将检测任务拆分为语义分割和车道线像素点实例特征聚类两个并行的子任务,并基于VGG16-FCN语义分割模型重新设计了车道线检测网络对原始基础网络ENet进行优化升级,从而提高了模型在复杂道路场景下的检测精度。在实例特征聚类阶段采用DBSCAN算法替换原始Meanshift算法,同时在聚类过程中通过引入骨架提取思路提升了聚类精度与速度,进而使得改进后的LaneNet相较于原算法获得了更为优异的性能。最后,在多种典型自动驾驶场景下对融合双目视觉的环境感知方法中提出的任务算法进行了实验验证,并设计了环境感知软件用于统一调度不同算法线程,实现信息交互。
其他文献
视频分割是指依据视频的低级或高级特征进行分析,并按照一定的分割准则提取出视频中的感兴趣区域。随着互联网技术的发展,计算机视觉相关的技术得到了极速的发展,而视频分割
电力工业是国家在能源领域的重大基础性行业,更是国民经济的命脉。随着我国经济的不断发展,我国电力建设也不断加强。然而在电网的不断发展与建设过程中,电力系统负荷的变化
为了实现“两个一百年”奋斗目标,长江经济带发展作为三大战略之一,其战略地位和重要性不可或缺,其发展前景至关重要。与此同时,生态环境的压力也逐步加重,为了长远利益考虑,我们不能为了发展经济水平而彻底牺牲我们的美好家园,习近平总书记指出长江经济带的开发要科学、绿色、可持续发展。本文根据长江经济带可持续发展立意,(1)阐述了长江流域的生态环境状况和各城市圈的发展情况,不同城市圈发展差别较大;环境方面结果
背景:肿瘤细胞“干性”的获得在许多类型的肿瘤中均被证实参与了包括鼻咽癌在内的多种肿瘤的侵袭和转移过程,目前研究表明,肿瘤细胞“干性”的获得与上皮-间质转化有密切关系
课程文化的建构,是对当下学校课程发展的深层次的思考。课程文化作为一种特殊的文化,是对文化选择、整理和提炼而形成的一种课程观念和课程活动形态。建构基于中国传统文化教育的学校课程文化,是学校实施传统文化教育的重要途径。通过学校课程文化的建构,培育学生对民族文化的认同感,培养学生对中国传统文化的自觉意识,提升文化自信,由此发挥中华优秀传统文化与课程间的积极作用。本研究以W小学为个案,通过课堂观察、教师访
污水再生利用是解决水资源短缺问题的有效对策,纳滤技术是生产高品质再生水的重要方法之一。然而,膜污染现象限制了纳滤工艺的广泛应用。针对已有研究对实际纳滤膜污染的动态
移动互联网的兴起推动了多核嵌入式系统的快速发展,应用程序对多核嵌入式系统的性能和续航要求越来越高。传统的静态随机访问存储器,因其集成密度低、功耗泄漏大等问题,限制
在科技经济高速发展的数字时代,人们的工作生活已经离不开各种各样的信息。及时有效的信息不仅能帮助人们提高知识技能,还能帮助他们解决生活工作的问题。为获取信息,人们每
故障诊断对于现代工业中的各种大型系统极其重要,只有快速、准确地诊断出系统中存在的故障,才能保证系统安全稳定的运行。离散事件动态系统(Discrete event dynamic systems,
直接甲醇燃料电池由于具有能量转换效率高、环境污染小、燃料来源丰富、理论比能量高等优点,在便携式移动电源领域具有广阔的应用前景。阴极催化剂和阳极催化剂是决定直接甲