基于扩展网络的毫米波雷达与视觉融合目标检测算法研究

来源 :吉林大学 | 被引量 : 0次 | 上传用户:wumingshan2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智能驾驶从初级驾驶辅助向高等级自动驾驶过渡,汽车作为独立智能个体对外部环境信息的感知需求也随着智能化的加深而与日俱增。常见的独立感知单元对外部环境的感知能力受传感器自身特性和算法水平限制而不能在雨雾、夜间等条件下独立获取全面的感知信息。因此发展多传感器融合技术对解决智能感知困局具有重要意义。本文综合车载感知元件在感知性能上的互补性、性价比和独立检测技术的成熟度,提出了适用于毫米波雷达和视觉融合的基于扩展网络的融合目标检测算法,并针对算法输入数据的预处理、算法网络结构设计和算法测试分析进行了系统性研究,具体研究内容如下:(1)在对毫米波雷达与视觉融合的技术路线分析基础上确定了本文采用特征级融合,并基于nu Scenes数据集和自制数据采集平台的测试数据开展算法的训练和测试评估。(2)针对不同传感器采样频率和触发时间不一致的问题,本文提出了OOSM与Non-OOSM时间融合机制,并介绍了传感器空间融合技术。(3)针对毫米波雷达检测噪声导致的目标在时间序列上的不规则运动,本文提出了基于“EKF-马氏距离-匈牙利匹配”的目标跟踪和滤波算法进行数据预处理,并引入目标的“生成-存续-消亡”机制维护雷达目标信息。针对数据滤波过程对观测协方差矩阵的确定,开展了基于RTK真值数据的协方差拟合试验,并进行了滤波跟踪算法的可行性验证。(4)对雷达目标集进行空间变换实现从雷达坐标系到图像坐标系的雷达图像生成过程,并基于雷达图像进行毫米波雷达点云的图像平面垂向扩展研究,以雷达反射截面积(RCS)和目标径向距离作为双通道雷达图像的像素值,用于与视觉图像的特征融合研究。(5)为引入毫米波雷达图像作为视觉图像目标检测的辅助信息,本文对基于VGG-16+FPN骨干检测网络的Retina Net一阶段目标检测算法进行扩展性研究,以两通道雷达图像(360?640?2)和三通道视觉图像(360?640?3)作为融合网络的输入,提出了适用于毫米波雷达与视觉融合的扩展VGG-16网络和扩展特征金字塔网络(E-FPN)。通过多层毫米波雷达特征和视觉特征的串联融合,提出了用于毫米波雷达与视觉融合的深度扩展融合目标检测网络。测试结果显示,相比于纯视觉图像目标检测的参照网络,本文所提出的网络m AP提升2.9%,小目标精度相对提升18.73%,验证了本文提出的扩展融合目标检测网络对视觉不敏感目标的检测能力和算法可行性。本文的研究对于智能驾驶汽车多传感器融合技术研究具有一定的参考价值,尤其是在融合目标检测领域对于突破单类型传感器检测瓶颈、提升综合感知性能具有积极地意义。
其他文献
学位
随着全球航空维修行业(Maintenance,Repair&Operations,MRO)市场份额不断增加,我国民用航空维修产业充分发挥技术优势,依托大数据研究民用飞机维修方案,寻求更加合理的、增强航空器性能的、减少维修成本的方案。以知识图谱为代表的处理关联数据的大数据应用技术是更好解决飞机维修方案的路径之一。但在飞机维修领域,知识图谱研究工作较为缺乏,缺少相关数据集。因此,本文以国内大型航空公司
随着计算机技术和信息技术的快速发展,以这些技术为基础的工业物联网(Industrial Internet of Things,IIoT)也随之飞速发展。但在发展的同时也带来了安全问题。工业物联网一旦遭受到网络攻击,就可能会导致生产设备参数被篡改而造成重大生产事故,或者企业生产数据被泄露等问题,对企业利益造成重大损失。因此,工业物联网安全问题需要引起高度重视。针对日益增多的工业物联网攻击问题,研究人
随着汽车保有量的不断加大,交通路况愈加复杂,人们对于驾驶辅助的需求越来越大。自动驾驶辅助的到来,可以在一定功况下帮助驾驶员应对不同的驾驶环境。但频出的自动驾驶交通事故让人们对于自动驾驶的安全性感到担忧。而在众多的自动驾驶事故中,绝大多数的事故都是由于目标识别错误,造成了对驾驶工况的误判,最终导致了事故。因此,针对雷达和摄像头这两种主流的目标识别硬件,利用其各自的优势,弥补单一硬件性能不足的问题,进
学位
目的:量化肩峰倾斜及下垂状改变的程度并探究其对于肩峰下撞击综合征的相关性及诊断价值。方法:所有纳入的实验组病例信息都从患者的病历中收集。本研究对40位于2020年11月至2021年3月期间就诊并住院接受关节镜手术患者的术前肩关节MRI(实验组),和40例健康肩关节MRI(对照组)进行量化肩峰倾斜及下垂状改变的程度分析(包括角α、β、γ、Δ、ε、ζ),所有角度均由两名专业技术研究人员在80张肩关节核
中国互联网基本面貌发生了翻天覆地的变化,数字时代下,营销渠道的增多,市场策略的完善和获客手段的演变都在加速数字化转型的进程,数字经济正在渗透到企业营销的方方面面。通过分析经营状况良好的TJ保健食品企业的营销策略,能够为本土保健食品企业的崛起和振兴提供可行的战略借鉴和启发。本文综合文献分析法、案例分析法、PEST模型分析方法,综合了解当前数字经济营销状况、保健食品营销状况以及具体保健食品企业营销环境
实施知识产权运营是全面深化改革的重要支撑及推动经济结构优化的重要举措。知识产权运营具有商业化属性,以质押为主的市场化行为可最大程度地发挥知识产权经济价值,推进知识产权向现实生产力有效转化。2020年我国专利、商标质押融资登记金额达2180亿元,同比增长43.9%,质押项目数12093项,同比增长43.8%。与“十四五”规划和2035年远景目标纲要提出的在2025年知识产权质押融资登记金额达3200
伴随着航空技术的发展,航空发动机变得越来越精密,越来越复杂,精准的发动机剩余使用寿命预测(Remaining Useful Life,RUL)的难度变得越来越大。设备的剩余寿命预测作为故障预测与健康管理(Prognostics Health Management,PHM)重要的一环,具有极其重要的研究意义。本文设计了一种基于模型融合的方法,以NASA平台提供的C-MAPSS数据集作为基准,深入开展
目的:血友病性骨关节病(HA)是一种特殊类型的关节疾病,目前仍缺乏有效的治疗方案,现有治疗手段主要包括早期凝血因子替代或者终末期全膝关节置换。针对HA具体发病机制的研究目前尚处于探索阶段,以往研究结论认为HA与骨关节炎(OA)等退行性关节疾病具有共同特征;与此同时,多项最新研究结果显示OA进展过程中存在铁死亡现象,谷胱甘肽过氧化物酶4(GPX4)是OA软骨细胞发生铁死亡的重要调节因子。相较于OA,