基于孪生网络的目标跟踪算法研究

来源 :吉林大学 | 被引量 : 0次 | 上传用户:wangql133
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目标跟踪在过去几十年中备受关注,并且广泛应用于诸如监视,机器人技术和人机交互等众多视觉应用中。尽管相关研究已经取得了许多的进展,但对于减少光照变化,遮挡等众多因素所带来的影响,及保证目标跟踪的实时性,仍然是当前研究的核心问题。近年来,卷积神经网络在各种视觉任务中展示出了其卓越的能力,尤其在目标跟踪中使用效果显著。受益于卷积网络层次化特征抽象表达能力,一些跟踪器将深度特征集成到常规跟踪方法中;在充分利用端到端训练的基础上,其他一些跟踪器直接将卷积网络作为分类器引入。虽然这些方法的引入点不同但都是通过采用在线训练来提高跟踪性能。由于卷积神经网络特征和深度神经网络的复杂性,跟踪算法在线训练时的计算量很大。以至于基于卷积神经网络的在线跟踪器的运行速度不能够满足目标跟踪实时要求。对此,基于孪生网络的跟踪器应运而生,由于其高速和准确性而备受关注。孪生跟踪器将目标跟踪任务定义为相似性学习问题,通过学习目标模板和搜索区域特征表示间的互相关来实现目标跟踪。但当跟踪目标外观变化明显或背景复杂度较高时,跟踪器的泛化性和判别性很差。针对提高跟踪器的泛化性,判别性及实时性,本文提出了两种基于孪生网络的实时目标跟踪网络结构。由于为图像分类任务而训练的深层卷积网络中,越深层所抽取的图像特征中所包含的语义信息更丰富,且对图像中主体对象外观变化不敏感,但能将真实目标与欺骗性混乱背景区分开的判别性较低。对此,本文提出一种基于注意力引导的全卷积孪生网络,用以提高全卷积孪生网络(SiamFC)跟踪器的判别性。同时,当前的一些孪生网络跟踪器中所使用的骨干网络相对较浅,并没有充分利用到深层神经网络的优势。并且用现有功能强大的网络架构直接替换孪生跟踪器中骨干网络对跟踪效果进行改善,效果并不明显。对此,本文提出一种基于残差孪生网络的实时目标跟踪算法,在充分利用更深的卷积神经网络来增强目标跟踪的泛化性和判别性的同时实现实时目标跟踪。具体内容如下:(1)基于注意力引导的全卷积孪生网络目标跟踪算法:针对复杂背景,即有太多相似性物体的时候,跟踪效果不好的问题,本文设计了一个通道注意力模块块,并把它嵌入到SiamFC的一个分支中,使其可以根据目标位置周围的通道激活来计算通道权重。并且基于SiamFC的体系结构使跟踪器可以实现实时运行。最后在Got-10k数据集上配合经评估方案对所提目标跟踪算法进行验证,且跟踪效果优于SiamFC跟踪器。(2)基于残差孪生网络的实时目标跟踪:当前的孪生跟踪器仍存在精度差异,即当目标有外观变化,经常会跟踪失败,并且无法利用深层网络特征来提高跟踪精度及时效。对此,本文采用新的残差模块,并在此模块的基础上进一步设计新的残差网络体系结构CIResNet-22,用其去替换孪生网络跟踪器中骨干网络。由于CIResNet-22是轻量化网络结构,故可以在保证目标跟踪性能的同时实现实时跟踪。最后在OTB-2013数据集上,依据成功曲线的精度和曲线下面积两个评估指标进行目标跟踪算法排名,实验结果表明所提出的方法要优于其他方法。
其他文献
空气悬架具有振动频率低、刚度可变和车身高度可调的特点,能在一定程度上提升车辆的行驶平顺性和操纵稳定性,在国内外均获得较为广泛的关注与应用。与传统的空气悬架相比,电
图像作为一个常见且方便的信息载体,在现代信息社会中扮演着越来越重要的角色。图像充斥在生活的各个方面,大到司法、媒体,小到个人娱乐、社交,同时各种图像编辑工具(如“PS”、“美图秀秀”等软件)的也蓬勃发展。图像篡改越来越方便给图像篡改鉴别任务带来了很大的阻力,因此如何有效的鉴别篡改图像是一个巨大的挑战。本文致力于研究图像篡改鉴别领域的一个重要的分支,即拼接图像的鉴别。拼接鉴别的一个主要的方法是提取图
自组织(Adhoc)网是一种灵活的多跳自治系统,非常适用于无人机通信、车联网、环境监测、智能家居等网络场景,自组织网MAC(Medium Access Control)协议受到广泛关注和研究。研
随着我国的公路建设事业的发展,早期铺筑的公路已经出现了多种病害,相继进入了大中修养护阶段。对于沥青路面,在荷载和环境的综合作用下,路面出现了车辙、裂缝、松散等病害,
黄曲霉菌是一种可以侵染农作物丝状致病真菌,并且黄曲霉菌还可以产生的一种致癌性很强的次生代谢产物-黄曲霉毒素,对人类健康造成重要威胁。研究黄曲霉菌体内关键蛋白的功能
随着物联网和嵌入式技术的发展,交通道路通行状况成为了社会关注的热点问题之一。汽车在交叉路口场景下,网联设备、平台的特性以及合适的算法对于交通网络的整体改善起着重要
蛋白质分子适度的展开和聚集是形成凝胶的关键。肌球蛋白是肌肉蛋白的主要功能成分,经热处理可以形成凝胶,在鱼糜制品加工中起着关键作用。在不同盐浓度下,肌球蛋白的溶解度
粒子物理的发展在当下是非常迅速的,主要研究微观世界(例如夸克,电子,中微子等)中物质的结构、性质和相互作用。2012年7月,位于欧洲核子研究中心(CERN)的大型强子对撞机(LHC)
管路系统作为各类设备必不可少的组成部分,担负着动力输送任务,有着构型复杂、长跨度、层叠交错和多支撑的特点。在受到外界载荷、内部流体激励时易发生管路系统的大幅振动、
随着光纤通信技术的不断完善,各类新型光纤器件的研制引起了研究人员的关注。基于光纤设备的光纤传感网络正在蓬勃发展,光纤激光器和光纤传感器在光纤传感网络中发挥着关键作