一种面向智慧交通的多尺度混合模态行人检测方法

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:XULIANSHUAI
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前为止,面向智慧交通的行人检测领域已经取得了不少的成就,但仍然存在着一些非常棘手的问题,其中一个就是复杂光照场景下的行人检测问题。传统的可见光模态图像受光照条件的影响非常大,在白天光照条件较好时可见光模态图像较为清晰,行人检测的效果较优;但在光线较弱的情况下可见光模态图像质量较差,由于无法提供充分有效的行人目标信息,从而导致了行人检测效果的严重下降,而红外光模态图像对于这方面行人信息的弥补有着积极的作用。因此,本文主要针对混合模态图像下的行人检测问题,在YOLOv4算法的基础上提出了一种面向智慧交通的多尺度混合模态行人检测算法,通过可见光和红外光两种模态图像特征的融合,实现复杂道路场景下的行人检测性能。研究内容包括如下三个方面:(1)在YOLOv4算法的基础上引入并行双流特征提取网络,并提出通道堆叠和自学习加权相加两种混合模态特征融合方法。实验结果表明采用通道堆叠融合的检测方法较可见光模态检测方法提高了5.07%的平均准确率,降低了6.92%的对数平均漏检率。(2)提出了四合雪花变换和伪目标嵌入的方式来对原始的训练数据集做数据增广,使得在有限的数据集中产生大量的新样本,从而提高系统鲁棒性。(3)提出了特征共享学习网络FSNet,通过让两个并行不同模态的特征提取网络相互交换特征矩阵各自指导对方有针对性地从图像中学习到共同需要的特征,并辅以Inception结构和跨模态通道注意力机制CMSE来帮助捕获更多的语义,从而实现混合模态特征之间的最佳融合。实验结果表明该方法较通道堆叠融合方法降低了2.8%的对数平均漏检率。综上,本文提出了一种基于YOLOv4算法的可见光、红外光混合模态的多尺度道路行人目标检测方法,经过大量实验和不断改进取得了一定的成效。
其他文献
铝及铝合金材料由于具有储量丰富、密度低、比强度高、耐腐蚀性能良好以及机械加工性能优异等特点,被日益广泛地应用于航空航天、汽车制造、建筑行业以及日常生活等领域。铸锭是合金材料后续加工制备的母材,其质量好坏对产品最终组织、性能有着至关重要的影响。铝合金铸锭的质量与其凝固过程及组织密切相关。由等轴、细小、均匀晶粒组成的铝合金凝固组织不仅可以保证铸件成分的均匀性以及良好的机械加工性能,同时也会极大地降低铸
本论文结合中国地质调查局沈阳地质调查中心项目“区域水资源调查评价方法和地下水生态水位阈值调查研究”(DD20190340)选题,针对吉林省乾安县长期存在的地下水咸化、土壤盐渍化以及氟和砷超标等环境地质问题开展研究,旨在揭示:(1)在氟和砷逐渐污染地下水的情况下,深层地下水是否可以作为替代水源;(2)地下水咸化和土壤盐渍化治理项目成功与否;(3)哈达山水利枢纽工程对乾安县地下水环境的潜在影响。研究通
佳木斯地块东南缘的麻山杂岩被认为是中国东北地区东部最古老的变质基底。麻山杂岩性质和时代的研究是确定佳木斯地块麻粒岩相变质作用演化及形成机制,探讨佳木斯地块前寒武纪地壳形成和演化过程的关键。本文对佳木斯地块柳毛、西麻山和上三阳地区麻山杂岩进行了系统详细的岩石学、矿物微区化学以及岩石地球化学研究,利用相平衡模拟和传统地质温压计估算温压的方法,结合锆石U–Pb年代学,估算了麻粒岩相变质作用不同变质阶段的
随着自然语言处理技术的发展,部分研究学者尝试将深度学习模型应用到古籍文本的处理中。古文相较于现代文不仅在用词、语法等方面存在巨大的差异,还缺少标点。目前仅有少部分古籍文本经过人工处理,具备断句或标点符号,仍还有大量的古籍文本没有断句或标点。通过人工对古文进行断句或标点,既需要有较高的专业知识,还需要对文本对应的当时的历史文化有一定的了解,因此对古文进行断句和标点的速度缓慢。为了加快对古籍文本的断句
在资产定价理论发展进程中,Black和Scholes提出了著名的BS期权定价模型,奠定了期权定价理论基石,对期权定价历史发展而言具有重要的里程碑意义。然而,随着期权定价不断发展,大量研究表明由BS模型推导出的期权价格与市场真实期权价格之间存在显著差异。追溯其根源,BS模型背后的假设过于严格,该理论认为投资主体完全理性,同时市场是完备的,即使市场上存在部分非理性投资者,市场的充分套利也会弥补由非理性
随着半导体集成电路技术的不断发展,全球已经开始把目光瞄准了频率更高的太赫兹频段。太赫兹超外差收发系统在通信、雷达、材料科学、安全应用、生物医学、地球科学和天文探测等领域具有巨大的应用潜力。典型太赫兹收发系统通常包括倍频器、混频器、放大器和滤波器等核心器件。开展肖特基势垒二极管模型、倍频、混频、滤波和集成等关键技术的研究,对实现高性能太赫兹固态源和无线收发系统具有重要的理论意义和实用价值。本文主要基
过渡金属硼化物具有优异的热稳定性、化学惰性、抗压缩性以及高硬特性,是新型超硬材料的理想候选体系。在过渡金属硼化物家族中,四硼化钨因其高硬度、低成本和温和的合成条件而受到强烈关注。然而,其晶体结构的长期未知和异议,阻碍了对该系列化合物力学机理的认知和设计思路的更新。当前发现和设计新型超硬材料仍需努力。因此,基于第一性原理计算方法,对过渡金属硼化物晶体结构,以及物理性质进行了系统研究,取得了如下创新性
蛋白质治疗是当今生物医学领域的研究热点,目前已有213种蛋白药物获得FDA批准,预计到2022年销售额将达到1720亿美元。然而,几乎所有的蛋白质都不能穿过细胞膜的天然屏障,为开发新型蛋白质类药物的机制与功能研究造成了巨大的困难。因此,开发安全、稳定、高效的递送策略将蛋白质分子运输至目标细胞,对蛋白质药物的开发与功能研究具有十分重要的意义。目前,研究人员已经开发了多种方法来克服这些天然的递送屏障。
我国沿海区域的花岗岩受气候和地形影响风化强烈形成残积土,对其水力、力学、变形特性及本构模型进行研究时,除了要考虑残积土本身的复杂工程性质外,更不能忽视其非饱和性。我国深圳地区是花岗岩残积土分布的主要地区,“粤港澳”大湾区的建设,大批新建、新修、新改工程不断涌现。花岗岩残积土大部分土体都处于非饱和状态,其力学特性不同于饱和土体。在基坑工程中随着地下水位的降低,土体由饱和状态变为非饱和状态,在这个过程
血液、白带、尿液和粪便等人体体液、分泌物和排泄物是体检中的常规检查项。目前,我国多数医疗机构仍采用人工镜检的方式检测样本中的细胞等有形成分,检测效率低且检测结果依赖于医生经验。随着硬件设备和深度学习技术的发展,自动化和智能化的全自动样本分析仪逐渐代替人工检测是一种必然趋势。复杂生物样本的自动对焦和有形成分的分割与识别是实现全自动样本分析仪智能化的重要研究课题。本文以人体粪便和白带样本为例,深入分析