【摘 要】
:
尽管深度学习在各种任务中取得了优越的效果,研究人员发现深度网络模型实际上容易受到对抗样本的攻击。对抗样本是指在自然图像中加入一个微小的扰动,导致深度模型给出错误的预测,从而形成一种对模型的攻击。对抗样本的存在对深度学习的应用造成了威胁,因而引起了广泛的研究兴趣。本文分别面向对抗攻击和对抗防御,探索了如何基于深度模型的中高级特征来设计算法。在攻击方面,本文提出了一种生成式可迁移对抗攻击(Genera
论文部分内容阅读
尽管深度学习在各种任务中取得了优越的效果,研究人员发现深度网络模型实际上容易受到对抗样本的攻击。对抗样本是指在自然图像中加入一个微小的扰动,导致深度模型给出错误的预测,从而形成一种对模型的攻击。对抗样本的存在对深度学习的应用造成了威胁,因而引起了广泛的研究兴趣。本文分别面向对抗攻击和对抗防御,探索了如何基于深度模型的中高级特征来设计算法。在攻击方面,本文提出了一种生成式可迁移对抗攻击(Generative Transferable Adversarial Attack,GTAA)算法。首先,为了提高对抗样本生成的效率,GTAA利用一个生成器网络来产生对抗扰动,从而可以在单次前向传播中实现对抗样本的生成。其次,为了增强对抗样本的跨模型可迁移性以提升黑盒攻击的性能,考虑到深度模型中间层特征表达更具有可迁移性,GTAA设计针对模型中间层特征的损失函数,最大化对抗样本与原始样本在中间层中的差异。实验证明GTAA的生成效率比基于梯度的攻击方法更高,且其生成器网络收敛得比其他生成式攻击更快。在ILSVRC2012数据集上,GTAA在白盒设定下有着和对比算法相当的攻击性能,且在黑盒攻击中效果最佳。本文还比较了针对不同中间层进行约束的效果,实验结果表明,基于源模型选择的最优中间层对于黑盒的目标模型也具有最优的效果。在防御方面,本文探索了一种仅根据模型高层语义特征,修正出正确预测结果的算法。现有的工作一般依赖输入图像来抵御对抗样本。然而在实际应用中,存在一些图像数据和低级特征不可访问或难以传输的场景,如上下游任务分离的系统和移动设备,需要考虑基于高层语义特征进行防御。实验观察发现,对抗样本的logit与干净样本的logit有着不一样的分布,且对抗攻击在logit中反映了不同类别之间的内在关联。这为基于logit进行对抗防御提供了可能性。在此基础上,本文提出对抗logit修正(Adversarial Logit Correction,ALC)算法,采用一个两层的logit修正网络来实现从logit到正确预测结果的映射。在灰盒和黑盒设定下,修正网络可以仅基于logit而修正对抗样本的预测结果,同时保持干净样本的预测结果不变。实验表明,该修正网络针对不同攻击方法具有一定的可迁移性。通过对修正网络的微分分析,本文发现存在对攻击响应较强的“支持类别”,且对于任意一对攻击方法,其支持类别的重合比例与修正网络的可迁移性高度相关。
其他文献
我国乡村振兴战略在实施的过程中,需要用到大量的环境设计专业人才,这为相关院校环境设计专业人才的培养起到了良好的推动作用。对于院校来讲,需要切实结合自身特色和优势等来对环境设计专业人才的培养模式进行创新和改良,以此来培养出更多能够独立自主进行创新设计的优秀人才,从而更好地为乡村振兴服务。因此,文章基于乡村振兴战略,针对环境设计专业人才培养模式进行分析和探讨。
随着科技的进步,目标分类受到越来越多的关注,在诸多领域有非常重要的应用,例如军事侦察、医疗诊断、视频监控等等。近几年,一种跳过成像步骤,对目标进行探测后直接分类的策略被提出,学者们并为此提出了一些无成像的目标分类方案。然而,现阶段的无成像目标分类无法做到在极弱光条件下实现目标分类。随着光子探测器件和成像系统的快速发展,一种基于单光子探测器的关联成像系统可以解决极弱光成像问题,且由于其数据获取与成像
近年来,云计算/存储、4G/5G无线通信、人工智能等信息技术和产业快速发展,导致数据通信量持续爆炸性的增长,带来对大容量、高带宽、低损耗光通信的迫切需求,尤其是面向数据中心(DC)、高性能计算机(HPC)以及无线前传等应用的短距离光互连。对于短距离场景,成本、功耗、密度是关键需求,以直接检测的光互连方案为主,包括经典的强度调制和直接检测(IM-DD)以及近年来兴起的斯托克斯矢量直接检测(SV-DD
近年来,随着计算处理能力的提升、算法的突破和大数据的发展,神经网络迅猛发展,并广泛应用于各个行业。其中,储备池计算(Reservoir Computing,RC)作为一种受启发于生物神经网络的新兴神经网络。与传统的神经网络相比,RC的结构简单,而且极大程度地简化了训练方式。RC也克服了传统神经网络中算法收敛速度慢、易陷入局部最优以及训练参数过多等普遍存在的问题。此外,在光学领域中,RC可以利用现有
近几年来,糖尿病逐渐成为危害人类身体健康的主要疾病之一,糖尿病在患病早期没有明显的症状,很难被发现。而糖尿病患者却往往伴随着视网膜渗出、出血以及微动脉瘤等严重的并发症,检测这些并发症就能有助于提前确诊糖尿病的发生。因此,一套糖尿病视网膜多病变自动筛查系统的研究和设计具有非常重大的意义。渗出是糖尿病视网膜病变中最主要的一种,对渗出进行检测和分析,对糖尿病视网膜筛查具有特殊的临床诊断意义。我们以改进的
BIM技术是一种以工程信息大数据和信息化模型为基础的数据化工具,通过计算机技术模拟出相应的施工过程,并对施工信息进行全面改善与共享,虽然BIM技术在我国出现的时间不算很长,但是它自身的发展速度比较快,当前该项技术已经能够融入我国的各个工程领域,而且在多个环节都有较好的运用,在近几年发展中,BIM技术在我国土木工程施工中运用较多,而且有较好的实用效果。本文围绕当前BIM技术在土木工程施工中的应用做出
目的对新型冠状病毒肺炎疫情防控环境下感染科工作人员的心理健康进行调查并分析其应对措施。方法采用随机抽样法选取本院感染科工作人员60名,利用本院自制一般资料调查表、大型公共卫生事件发生时心理问卷以及简易应对方式问卷对其进行调查。结果新型冠状病毒肺炎疫情防控环境下感染科工作人员心理健康状况各维度评分明显高于中国常模(t=2.298、2.381、3.055、2.193、2.274,P<0.05);男性工
生物识别技术以其高安全性和便捷性,在移动终端中的应用越来越普遍。在这些技术中,指纹识别有体积小和成本低的优势,因此应用最为广泛。指纹传感技术主要有电容式、光学式和超声波式三大类。最近,随着用户对高屏占比和“全面屏”的显示需求增长,原有的电容式指纹传感模块由于不透明和不兼容显示等缺点而被厂商舍弃使用。随后,光学式和超声波式屏下指纹传感技术被迅速研发,但现有光学式只能在OLED屏幕下的固定区域进行识别
卫星在轨长期管理(长管)数据是卫星状态的一种反映。卫星运行到地面测控弧段时,地面接收卫星遥测系统下传的遥测数据,数据中包含与各子系统及卫星载荷相关的遥测参量数据,反映出显现及隐含的卫星自身状态信息及宇宙环境信息等。实时以及延时遥测数据中包含异常数据,其中一部分为错误数据,一部分为故障数据。导致卫星遥测数据异常的原因主要有如下几种:未提前通知的基地人为操作、卫星自身或装载的有效载荷运行状态异常、遥测
5G如今已经正式进入商用阶段,其高速率、低时延的性能指标也促使着基带通信技术的发展。极化码作为华为公司主推入选的5G控制信道编码方案,在理论上证明了可以达到香农限,具有优异的误码性能。传统的极化码译码算法伴有复杂的节点计算和高延时的译码结构,虽然在短码的控制信道上还可接受,但也制约了极化码向长码的数据信道上的进一步发展,因此如何改进极化码的译码方法是一个亟待解决的问题。此外5G应用场景的多样化也使