基于深度学习的码头场景多目标感知技术研究

来源 :重庆交通大学 | 被引量 : 0次 | 上传用户:yqwang1023
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智慧港口的发展,对码头场景下的目标感知是实现码头生产活动与智能技术融合的重要组成部分。随着近年来深度学习技术的发展,场景中的视觉感知技术的应用引起了广泛的关注,为了拓展基于深度学习的感知技术在码头场景中的应用研究,本文结合目前计算机视觉感知领域的研究基础,主要研究内容及结论如下:(1)对于码头场景中的多目标检测任务,考虑到目前码头目标相关数据集较少,且为了增强检测算法码头场景多目标检测的鲁棒性,本文建立了包含12类码头移动目标的共计8743个标注实例的目标检测数据集,并提出了一种基于码头目标数据集的改进的YOLOv5目标检测模型,该模型在特征融合结构中引入了多尺度卷积以实现网络的更加细粒度的特性提取,并将能够增强特征图通道显著性的金字塔分割注意力模块嵌入到基准模型中,实验结果表明,改进模型最终实现了实现了91.12%的m AP,精确率取得了3.37%提升的同时将码头小尺度目标检测精度提升了9%,在中等尺度和大尺度目标检测精度上分别提升了2%。改进模型实现了在码头不同场景中更鲁棒性的多尺度目标检测效果,能够满足码头现场应用的实时性和准确性要求,整体上该模型对码头多目标的准确检测有较好的稳健性。(2)对于码头机械行为的识别任务,本文建立了6类码头机械行为的1310个视频样本的动作识别数据集,提出了一种融合时空注意力的基于CNN-LSTM方法的码头机械行为识别模型,该方法根据码头机械活动的时空特性,在基准模型上一方面建立了结合时间自适应模块的时间注意力分支,以增强时空特征下的时域信息显著性,另一方面建立了结合卷积LSTM的空间注意力分支,以获得有时域关联的空间显著性特征,然后将两路注意力分支融合后对机械活动分类,实验结果表明,CNN-LSTM模型能够实现对码头机械动作的识别,改进后模型的测试的平均识别准确率达到90.55%,获得了3.94%的精度提升,增强了码头机械动作时空特征关键信息的显著性,更适用于码头机械动作的准确识别。(3)对于码头多目标的跟踪任务,本文选取了Deep SORT方法对码头多目标进行跟踪,建立了码头移动目标重识别数据集训练表观特征提取网络,然后提出了一种在级联匹配模块中基于Ghost Net模块构建的表观特征网络以压缩网络的计算复杂度,然后在匹配模块引入考虑目标框中心距离的DIo U指标以优化匹配效果的改进跟踪方法,实验结果表明,Deep SORT方法能够适用于码头多目标跟踪,将改进的算法与改进的检测器结合后的跟踪方法对码头多目标的跟踪准确率达到70.26%,获得了相比于原方法4.80%的精度提升,有效降低了跟踪ID变化数量,且减少了33.67%的浮点运算次数,能够达到更高效的码头多目标稳定跟踪效果。(4)本文设计了码头环境下多目标视觉感知系统,从码头视频数据的读取与处理方法做了介绍,结合本文的研究成果,基于Python编程语言的GUI设计了包括码头目标检测、码头目标跟踪模块和码头目标动作识别在内的应用模块,实现了对码头场景中的多目标感知功能。
其他文献
目的:观察消疣汤联合重组人干扰素α-2b凝胶治疗宫颈HR-HPV病毒感染的疗效及对HPV E6/E7病毒的影响。方法:选取既往于黑龙江中医药大学附属第一医院及黑龙江中医药大学附属第二医院就诊且符合纳入标准的患者100例,随机分为治疗组(消疣汤联合重组人干扰素α-2b凝胶)和对照组(重组人干扰素α-2b凝胶),两组患者根据要求规范性治疗3个月,观察患者治疗前后HR-HPV病毒感染率、E6/E7 mR
目的 考察加味参苓白术散联合常规治疗对脾虚挟瘀浊证持续性不卧床腹膜透析患者的临床疗效。方法 66例患者随机分为对照组和观察组,每组33例,对照组给予常规治疗(纠正贫血、调控血压、维持机体物质代谢平衡等),观察组在对照组基础上加用加味参苓白术散,疗程16周。检测中医证候疗效、中医证候评分、TGF-β1、α-SMA、E-cadherin、腹膜功能指标(UF、D/Pcr、D4/D0、Kt/V)变化。结果
审查资产损益负债是否合规且真实,不仅是推动企业转型与发展的前提,还是保证相关法规及政策得到落实的关键。文章以该项工作为切入点,首先说明了对其进行审查的意义,其次结合现有法律规定,对审查内容进行了归纳,最后围绕相关审查工作展开了讨论,内容主要涉及审查内容、方法等方面,与此同时,还对审查重点和注意事项进行了总结。希望能给人以帮助或启发,为日后审查工作的高效开展提供支持。
本文以A356铝合金为研究对象,构建动态再结晶模型(DRX),耦合粘塑性自洽(VPSC)模型,研究其在500℃热压缩下的流变应力、织构演变和变形机制。结果表明,构建的模型能较为准确仿真A356铝合金高温热压缩变形过程中的流变应力和织构演变;A356铝合金高温热压缩时发生了动态再结晶,对材料起明显的软化作用,同时弱化了(011)[100]织构组分和强化了(210)[ 132]织构组分;共晶Si发生的
近年来旅游文创产品发展迅速,为中国传统文化的发展与创新带来了新的机遇。旅游文化产品的创新突破了传统文化的设计和生产模式,提高了旅游文创产品的市场竞争力。龟兹壁画是新疆历史文化的代表,聚集了多元民族文化,融合了古代中国和西域各族民族的精神与文化,但文化遗产只能停留在展示和宣传上,缺乏传承手段,缺乏面向大众的文化产品。因此,开发和设计龟兹壁画创意产品迫在眉睫。本次论文研究对象为龟兹壁画文化,研究范畴为
当下,融合媒体云的建设已经如火如荼,融合媒体云在业务层面,可分为全媒体信息汇聚平台;全媒体融合生产平台;全媒体多渠道、多终端发布平台。本文将聚焦全媒体信息汇聚平台,关注广播电视台全台网各媒资系统融合汇聚,借鉴新兴媒体优势的同时,实现将全媒体信息汇聚后,通过大数据的手段加以分析,输出有价值大数据供全媒体融合生产平台借鉴。
目的 研究深圳地区非甲状腺疾病人群促甲状腺激素(thyroid-stimulating hormone, TSH)分泌的节律性,为甲状腺疾病的诊治提供新的思路。方法 利用大数据技术挖掘2020年1月1日~2021年11月31日深圳市中医院计算机中心数据库的促甲状腺激素检验结果 108 071例。剔除具有明确诊断的甲状腺癌、原发性甲状腺功能亢进或甲状腺功能减退患者3 393例,缺失值7 289例和离
随着现代网络科技的飞速发展,人们的阅读方式逐渐由传统的纸质阅读向多媒体互动阅读转变。如何让书籍在信息化时代下仍然具有吸引力和竞争力就成了一个重要的问题。因此,书籍装帧设计发展应符合现代审美需求,不断与时俱进,积极寻求改变,从而带给读者更丰富的阅读体验。文章通过分析书籍装帧设计的现状及影响,探讨新媒体冲击下书籍装帧设计的创新思路。