基于特征融合和孪生网络的行人再识别研究

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:weicun_weicun
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
行人再识别(Person re-identification)技术是判断不同监控视频拍摄的图像中出现的行人是否属于同一行人的技术。行人再识别的研究难点在于拍摄的行人图像视角不同、光照变化大、背景比较复杂和图像分辨率低。首先本文针对传统数据集进行属性融合特征的研究,该特征描述符更具判别性。另外,摄像机拍摄的图像分辨率和视角等参考因素不同,部分数据集的识别准确率很低,因此本文对数据集的迁移学习工作进行了研究,并且考虑到单一的网络模型太过于简单,对图像描述不充分的情况,本文提出以融合模型为子网络的孪生网络模型。本文的主要贡献如下:1、基于属性融合特征的行人再识别。在特征提取之前,分别对行人图像进行行人前景分割和光照增强的方法,将底层特征LOMO-gradient(Local Maximal Occurrence-gradient)和属性特征结合进行行人再识别研究。首先,把每幅行人图像4个部分,分别提取LOMO-gradient特征,依次得到4个随机森林属性分类器。其次,分别对独立的、不同维度的属性子分类器进行训练和融合,生成一个21维属性特征的分类器,并把该分类器与属性关联校正机制相结合。然后,该属性分类器用来预测无标记的数据集上的行人属性,可以有效地降低人工标记的时间复杂度。最后,将从原始图像和前景图像中分别提取的LOMO-gradient特征与属性加权融合得到最终的融合特征。在VIPeR,PRID450S和GRID数据集的实验结果表明,该算法优于目前的行人再识别方法。2、基于融合模型和孪生网络的行人再识别算法研究。训练阶段,首先提出了一种基于ResNet50和VGG16网络层融合的深度学习模型F-CNN。对于得到的F-CNN融合模型作为孪生网络模型中共享权重的子网络,分别在行人再识别训练集上依次训练,得到训练模型,其中损失函数结合了验证损失和识别损失函数,该损失函数以softmax损失为基础。测试阶段,利用无监督迁移学习模型把得到的模型迁移到没有标签的数据集上,分别对测试集中的图像进行任意两幅图像之间的相似度比较以及行人身份标签的预测。其中,迁移学习的目标域数据集包括两个:GRID和Market-1501。本章的数据集有CUHK01,VIPeR,GRID,Market-1501和DukeMTMC,并在实验中分别取得不错的效果。
其他文献
背景材料:今年10月23日,十三届全国人大常委会第十四次会议审议了国务院关于2018年度国有资产管理情况的综合报告,听取了财政部部长刘昆受国务院委托作的关于2018年度全国行
随着社会经济的快速发展,我国科学技术水平显著提升,在各个行业和领域中都逐渐开始使用各种先进技术,而在空间设计中逐渐开始应用虚拟现实技术、互动技术等数字媒体技术的运
火星(Mars)是太阳系八大行星之一,对火星的探索也是目前人类航天活动的目标之一。通过研究火星的电离层有助于我们进一步了解火星所处的空间环境、大气结构以及太阳活动对火
<正>著名学者、北大中文系教授、博士生导师周先慎先生,于2018年4月20日因病不幸去世,享年83岁。北京曹雪芹学会、北京曹雪芹文化发展基金会、《曹雪芹研究》编辑部谨致沉痛
本文提出了一种基于LED照明、实时监控和精准控制的照明控制系统的设计方案。系统分3个子系统组成,分别为LED照明控制系统、视频监控系统和Web客服端登录系统。首先在树莓派中分别搭建基于LED照明控制和监控系统的两个后台应用程序,并安装花生壳内网穿透工具,配置相应外网能够访问的域名和端口号;再通过安装和配置阿里云服务器中的Nginx反向代理服务器,使Nginx反向代理服务器指向由树莓派内网穿透外网能
为检测植物免疫诱抗剂对茭白黑粉菌生长的影响,对比分析5种不同浓度植物免疫诱抗剂和多菌灵对茭白黑粉菌小孢子生长的影响。结果表明,多菌灵和吡唑嘧菌酯完全抑制了茭白黑粉菌
<正>我是荣昌区2017届选调生,在村里工作己经一年多了。近期,组织上准备安排我当一名村里的专职干部。对于组织上这样的安排,我内心起初是有点抗拒的。因为在我的印象中,村里
所谓结构艺术是各种表达主题思想的材料的搭配、排列、组合方式。结构艺术既决定作品的外部形态,又直接影响作品的内部性质。结构在体现作品审美特质的同时,直接关系到艺术作品
随着私人分担高等教育成本比例的提高,高校收取的学杂费标准与人民群众的承受能力之间的矛盾日益突出。云南是典型的欠发达省份,当前高等教育收费政策给大部分农村家庭带来了巨
为研究开挖扰动下隧道围岩渗透突水演化规律,基于流固耦合相似理论,以水泥和石膏为胶结材料、砂为骨料,通过大量室内试验配置一种能够满足弹性模量、强度、亲水性、孔隙率、