基于Group-teaching和视觉语义置信度指导样本融合的噪声标签图像分类算法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:jiushizhegehao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度卷积神经网络(CNNs)在很多学科的各种应用中都取得了巨大的成功。但是CNNs的优异性能依赖于带有正确标签的大规模数据集。而想要获得一个带有正确标签的大规模数据集是一项非常昂贵且耗时的工作。这个问题限制了深度学习的发展。为了克服这个限制,网络监督学习成为了一个很有前景的方向。它在没有任何人工标注的情况下,通过文本搜索,使用网络爬虫技术从互联网上收集数据,并直接用这些数据来训练神经网络。而那些搜索关键字则直接被当成对应数据的标签。但是这些标签是极度不可靠的,且包含了大量噪声。过去的很多研究工作已经表明,噪声标签会严重影响CNNs在图像分类上的性能。为了克服这个问题,我们提出了两种能够在带有噪声标签的数据中学习鲁棒的CNNs的方法,以执行图像分类任务。第一种方法我们称之为Group-teaching。具体而言,我们通过同时训练一组CNNs,并让它们通过选择出自己认为带有正确标签的数据去指导其他网络的进一步训练。Group-teaching利用了多个网络的多样性和各自不同的学习能够力,增强了每个网络识别出带有噪声标签数据的能力,缓解了噪声标签对训练过程的影响,从而提升了在噪声标签图像分类任务上的性能。我们也在多个数据集验证了我们方法的有效性和鲁棒性。如在CIFAR-10和CIFAR-100的噪声标签版本数据集中的实验结果表明,我们的Group-teaching在图像分类任务上的性能优于已有的先进算法。此外,我们也验证了我们的方法在带有真实噪声标签分布中的有效性,如Web Vision1000-100数据集。第二种方法是我们针对网络监督图像分类任务提出的一个简单且高效的样本融合框架。在标签置信度的指导下,我们提出的框架从两方面抑制了噪声标签的影响:基于置信度偏向的样本融合正则化和基于加权置信度的标签校正。具体而言,我们为每一类构建了一个视觉相似性图,它的每个节点表示相应类别的图像。对于每一张图像节点,我们汇总了它以及其邻居的文本数据,并以此提取它的语义信息,用于计算样本的标签置信度。这个标签置信度被用于指导样本融合以及标签校正。最后,我们在Web Vision1000和Food101-N两个大规模网络监督数据集上的执行了实验,验证了我们方法的有效性。
其他文献
随着人类的互联网时代大数据、云计算的极速发展,信息资产的几何级增长速度,繁杂的海量日志,各种网络安全问题爆发式增长,并大面积的产生了深远影响。给互联网的发展和安全环
关节机器人是当今工业领域最常见的机器人之一,随着我国制造业的快速发展,对关节机器人高精度控制提出要求,关节机器人控制研究将不仅考虑动力学模型,还要结合驱动电机模型和
相对于有源光网络,无源光网络具有对不同传输速率的兼容性、对调制编码格式的透明性、更高的可靠性以及更低的成本等优点,但无源光网络的传输距离相对有限。正是无源光网络的
我国林业生产和管理工作中,树种识别分类是许多林业工作的基础,提高树种识别分类效率有着重要的意义,能够为我国林业工程的发展带来巨大的价值。树种的自动识别分类一直是林
目的Waardenburg综合征(Waardenburg Syndrome,WS)是一种比较少见的常染色体显性遗传性疾病,部分表现为隐性。其临床特征是内眦异位、虹膜异色、前额白发及遗传性感音神经性耳聋。目前对重度和极重度感音神经性耳聋的患者,主要的治疗方法是人工耳蜗植入(Cochlear implant,CI)。本课题将研究Waardenburg综合征患者人工耳蜗植入术中电刺激听神经复合动作电位(
在激烈的市场竞争环境下,为了吸引顾客,提升市场竞争力,企业对顾客退货的规定变得愈发宽松,无缺陷退货政策成为一种重要的竞争手段。所谓无缺陷退货指的是由于顾客对产品的外
针对企业叶片加工工艺设计与NC指令生成过程中存在工作重复性大、效率低及工艺文件准备周期长等问题,本文将基于实例推理技术引入叶片工艺设计中,在UG软件的基础上开发了一套
近年来,随着美国实力的相对衰落,东亚地区多极化趋势逐渐显现。尽管美国仍然保有东亚唯一超级大国的地位,但是与区域内大国之间的权力差距不断缩小。美国东亚联盟威慑战略是
随着时代的发展,5G通信的到来,通信传输的业务需求以及质量保障不断推进,对通信数据传输过程信息的质量和传输速度提出更高的要求。BCH码作为线性分组码中一支重要的组成部分
矿井突出影响因素众多,矿井突出预测系统呈现出非线性,很强的模糊性,相关模型不易确定和建立等特点,采用传统BP神经网络模型难以满足高精度的预测要求。针对矿井突出预测系统