基于生成对抗网络的图像修复技术研究

来源 :北京工业大学 | 被引量 : 1次 | 上传用户:tom95800
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数字图像修复技术是一种利用算法实现缺损图像修复的技术。自2000年提出以来,数字图像修复技术备受关注,很多优秀的算法广泛应用于文物和艺术品保护修复、影视剧制作、医学成像、公安刑侦系统、遥感图像处理等领域。目前,对于小面积缺损、划痕和文字遮挡等修复问题,现有的图像修复算法较为成熟,但缺损面积大、语义信息缺失、纹理和结构信息复杂的修复问题仍然是有待攻克的难题。近年来随着机器学习研究的进步,特别是生成对抗网络的出现,为解决此难题提供了很好的技术手段。本文对基于生成对抗网络的图像修复技术中的几个关键问题开展研究,主要工作有以下三个方面:(1)针对生成对抗网络中在网络训练中可能出现的梯度消失问题,提出了一种基于最小二乘深度卷积生成对抗网络的图像修复算法。首先,本算法将最小二乘损失函数引入深度卷积生成对抗网络,用于替换Sigmoid交叉熵损失函数,很大的程度上缓解了网络训练中的梯度消失问题。其次,本算法还提出了一种新的修复对抗损失,即以修复图像为输入的判别网络损失,并与上下文损失和生成对抗损失结合,共同优化生成网络的输入编码,提高了图像修复质量。通过对比实验验证了本算法的有效性和优越性。(2)针对背景相对复杂、训练样本少的数据集会导致修复效果差的问题,提出了一种基于密集卷积生成对抗网络的图像修复算法。本算法将DenseNet和GAN进行结合,采用DenseNet的密集卷积块构建自编码的生成网络,通过特征重用更好的提取图像特征。同时,为了解决网络层间信息传递的丢失问题,在生成网络的编码-解码结构中引入了跳跃连接。并在训练网络时联合重建损失、对抗损失和TV损失对生成网络进行优化。实现结果表明,本算法不仅避免了训练网络陷入局部最优,而且提高了修复图像的质量。(3)针对随机区域缺损图像修复相似度低的问题,提出了一种改进的双判别网络的图像修复算法。本算法包含三个网络:生成网络、全局判别网络和局部判别网络。利用局部和全局两个判别网络共同优化生成网络中的参数,提高修复区域在整体图像中的视觉连贯性。本算法中,改进了全卷积生成网络的平滑层,创新性地在密集卷积块中使用空洞卷积,增加了特征信息的有效传递,从而提高了局部修复效果。并且,在网络训练过程中,本算法提出先利用重建损失对生成网络进行预训练,使其具有一定的修复能力,再利用联合损失训练生成网络和两个判别网络,从而减少了网络训练时间。实验表明该算法能够更好地提取语义信息,提高修复图像的相似度。
其他文献
改革开放以来,随着经济的持续稳定发展,居民收入有了大幅度的增长,伴随而来的是人们对理财服务需求的日益增长,这意味着商业银行个人理财业务有着巨大的发展潜力和空间。但目
对小学数学而言作业是不可或缺的一部分,作业作为课堂教学的一个重要延伸,按照新课改的要求,科学合理地设计和批改作业能更好地服务于新课程改革的目标。如何以新课程标准为
西单图书大厦相当于书业界的中央电视台,但一年的销售额,如果要付出这一地段面积3700万的年租金,几乎就是惨淡经营。任何卖场,其经营利润低于同地段物业租金,就没有理由生存
目的:从薰衣草的不同提取部位中筛选出抗炎活性部位。方法:采用二甲苯致小鼠耳肿胀模型和冰醋酸致小鼠腹腔毛细血管通透性模型进行抗炎活性筛选,再将活性好的部位采用细胞炎
企业业绩评价指标体系是为了实现一定评价目的而构建起来的由一系列反映企业各个侧面相关指标集合的多层次、多因素的系统结构。信息高速发展的时代,外部信息使用者不再满足
在现代社会文化发展中,公民道德建设有着十分重要的意义,它可以使得国民素质得到进一步的增长。而群众文化作为在公民得到建设的主要载体,它在实际运用的过程中,有着良好的推
1993年10月31日,《中华人民共和国注册会计师法》经全国人大八届四次会议通过,由国家主席江泽民签署的第13号主席令予以公布,自1994年1月1日起实施。这标志着我国注册会计师
故意伤害罪作为一种古老而多发的犯罪,一直都倍受刑法学界的关注。虽然刑法理论界对故意伤害罪进行了广泛而深入的研究,但由于立法上的粗疏及司法工作人员在司法实践中对故意伤
1957年发动的一场大规模的反右派运动是我国社会主义发展史上的一个重要转折点,由于当时党对阶级斗争和右派进攻的形势作了过于严重地估计,导致反右派斗争被严重地扩大化了,
目的:探讨有4个跨膜区的L6超家族成员1(transmembrane 4Lsix family member 1,TM4SF1)基因在上皮性卵巢癌(卵巢癌)组织中的表达及其临床价值。方法:用RT-PCR法检测TM4SF1基因