基于多尺度生成对抗网络的图像压缩方法

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:Lassie01
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像压缩技术是计算机视觉领域一项重要技术,通过减少图像当中的冗余信息,可以有效缓解传输压力和节省存储资源。由于信息时代带来的数据增长,海量的图像数据和短缺的传输资源之间的矛盾日益突出,因此开发一种高效的图像压缩技术,用于缓解图像信息带来的压力显得尤为重要。传统的图像压缩算法依赖人工设计的编码器/解码器框架,采用固定变换的方式减少图像中的冗余信息,但在极低比特率下会出现图像模糊、伪影等影响图像质量的现象。生成式对抗网络是近年来最具有发展潜力的深度学习算法,运用生成器和鉴别器互相对抗训练,产生相当好的效果。因此本文采用深度学习的方法,运用生成式对抗网络为基本框架搭建图像压缩的编/解码器结构,实现对图像不同程度的压缩,尽可能地为图像重要区域保留更多细节部分,提升重建图像的视觉质量,同时提出适用于语义推理的图像压缩方法。本文的主要内容和创新性工作如下:(1)针对高分辨图像在低码率下提取图像典型特征能力较弱以及对于图像不同区域比特分配不足出现图像失真情况,导致重建的图像质量效果较差的问题,提出了一种基于多尺度和注意力机制的GAN网络图像压缩方法,将多尺度特征分解的思想运用到编码器和鉴别器设计中,在编码器聚合多尺度特征信息时,设置不同的权重进行加权求和,提高了网络提取特征的能力,并且加入CBAM注意力机制,使网络关注重点区域的特征,捕捉图像的纹理信息。同时将生成器和多尺度鉴别器进行对抗损失训练,把图像从低分辨率到高分辨率循序重建,从而实现在极限码率下对高分辨图像的压缩与重建,生成满足人眼主观感受的高质量图像。网络训练采用Adam优化器以端到端的方式对网络参数进行优化更新,有效地避免了网络训练中出现梯度消失的情况,对于图像的重建和恢复起到一定的作用。实验结果表明,该方法的压缩重建性能较好,低比特率下的重建质量更受用户青睐,图像内容清晰度较高,满足人的主观视觉体验,PSNR和MS-SSIM两项指标明显优于JPEG2000和一些基于CNN的方法。(2)针对现有的图像压缩算法对于语义任务适用性较差的问题,提出一种基于多尺度GAN网络的多任务语义压缩方法,利用具有感知质量的生成对抗网络对图像进行压缩重构,将量化器的潜在表示并行输入到生成器和分类器网络中,一方面利用高质量生成器对图像进行解码重建图像,与多尺度鉴别器进行对抗训练生成高质量的图像;另一方面利用分类器对图像进行语义分类任务。整个方法中加入多任务学习思想,通过编码器参数共享对网络进行优化,联合共享有用信息来提高语义判别和图像压缩的效果,提出了均方误差损失和感知损失的组合损失函数,用来保持像素级别和语义级别的逼真度,通过端到端的方式学习实现协同图像压缩和分类任务,不仅可以使用较少参数量实现图像处理任务,而且可以重建出高质量的图像,根据图像的语义信息对图像进行分类。实验结果表明,该方法重建图像的效果质量更好,使用ImageNet数据集在0.1450bpp下图像压缩指标PSNR和SSIM可以达到26.49dB和89.4%,图像分类准确率可以达到74.5%,从而证明算法的有效性。
其他文献
学位
檀香(Santalum album Linn.)是檀香科檀香属的一种半寄生乔木,其在香料、医药、护肤保养品、雕刻、家具以及宗教等方面具有广泛的用途,具有较高的经济和生态价值,素有“香料之王”、“绿色黄金”与“神圣之树”之称。人工引种栽培的檀香林生长慢、主干成材率低,尤其是幼林期易出现秃顶、生长不良的现象,严重影响后期檀木的生长。本研究以1-4年生印度檀香幼林为试验对象,通过采用不同修枝方式及修枝强
在石漠化地区引种和培育具有生态恢复功能的阔叶树种,不仅能改善生态环境,也可大幅提高林地的经济效益。广西马山县是广西石漠化最严重的地区之一,本研究以该地区石山种植的8年生降香黄檀(Dalbergia odorifera T.Chen)、顶果树(Acrocarpus fraxinifolius)人工林为研究对象,采用样地实测调查和室内分析技术,比较和分析降香黄檀、顶果树在林分生产力、水源涵养、土壤肥力
学位
随着中国的经济发展,汉语在世界语言应用中的地位越来越高。特别是中国推动的“一带一路”倡议,大大推动了中国临近国家的经济发展,由此也推升了汉语学习在这些国家的热度。目前在印尼学习汉语的人越来越多,许多学生学习汉语的目的是为了可以找到与汉语相关的工作,可以看到,学生学习汉语的动力越来越强。2020年初,全世界新冠疫情爆发,许多学校把传统课堂改为线上教学模式,印尼也不例外。在印尼,使用线上进行汉语作为第
近三十年,钢管混凝土拱桥因具有受力合理、施工方便、经济性好等诸多优点而在国内外得到了迅猛发展,其设计理论日益受到人们的重视,而结构可靠度是设计理论的重要基础。然而,目前关于钢管混凝土拱桥的可靠度的研究不多且主要停留在构件层面,对结构体系可靠度研究很少,导致基于体系可靠度的结构设计理论严重滞后。传统基于构件可靠度的结构设计方法由于未考虑结构的冗余性而往往过于保守,同时也使得钢管混凝土拱桥的后期维修、
现阶段随着河砂过量开采,资源已逐渐枯竭,细集料的缺乏制约着水泥混凝土路面发展。机制砂作为可再生资源的一种,近年来得到国家政策的大力支持,并已逐渐开始替代河砂运用在水泥混凝土路面工程中。由于卵石具有与河砂相近的料源特性,卵石机制砂成为路面用细集料的重要选择。水泥混凝土路面耐磨和抗滑性能是决定路面安全行驶的两项重要指标,但目前卵石机制砂水泥混凝土路面耐磨和抗滑性能研究尚不充分,因此开展卵石机制砂水泥混
学位
甲状腺癌是各类癌症中最常见的内分泌恶性肿瘤,也是近年来发病率增长最快的癌症之一。虽然甲状腺癌治愈率较高,但其淋巴转移率却高达50%以上,其中甲状腺乳头状癌的比例占全部甲状腺癌的80%以上。因此甲状腺乳头状癌的预防以及早期诊断对于防止甲状腺癌的增长和治疗甲状腺癌具有重要意义。病理诊断是准确预防、诊断和治疗甲状腺癌的“金标准”,但是由于医疗资源问题,如何利用日益发展的计算机技术辅助病理医生进行病理诊断