基于多尺度特征融合的人脸照片-素描合成

来源 :中国科学(信息科学) | 被引量 : 0次 | 上传用户:alyue_wang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
从真实的人脸照片合成面部素描及其逆过程具有广泛的用途,例如数字娱乐与协助刑事案件的侦查.但是,由于照片与素描在纹理上的显著差异,它们之间的互相转换仍是一个具有挑战性的问题.最近基于生成对抗网络的方法已在图像间转换问题,特别是照片到素描的转换方面展现出令人鼓舞的结果,但它们大多会在面部关键组件产生不同的形变或者模糊,使得合成图像的真实性受影响.为了应对这一挑战,我们提出了一种新颖的基于多尺度特征融合的人脸照片-素描合成算法,来提高合成图像的结构完整性与纹理逼真度.首先使用编码器提取输入图像的多尺度编码特征,然后将最底层编码特征经过空洞卷积模块后传入解码器进行解码.解码过程中将不同尺度的解码特征与对应尺度的编码特征在通道维度上拼接,从而获得多尺度编解码融合特征.最后在解码器的输出端将不同尺度的编解码融合特征进一步融合,并通过一层卷积层产生最终合成结果.通过这种同时将编码 解码过程中不同尺度的特征在通道维度进行拼接的方式,能够保持较好的图像结构以及纹理细节,生成逼真的面部素描/照片图像.我们在多个具有挑战性的数据集中验证了所提方法的有效性.定量和定性评估表明,本文模型在生成具有高视觉质量的人脸素描(或照片)方面优于其他最新技术.
其他文献
目的:介绍我科膝关节置换术后的血液管理经验.方法:2017年5月至2018年12月,我们根据经验与文献报道总结出了一套规范化的围手术期血液管理经验并在临床实施,取得了良好的临床效果.共纳入116例行单侧TKA的骨关节炎患者,术后1d、3d、5d复查血红蛋白,低于90g/L者给予输血治疗.以同期在我院其他科室行单侧膝关节置换的患者共纳入132例为对照组.观察此规范化管理经验对膝关节置换术后失血量与输血需求量的影响.结果:术后实验组总失血量为(818±352)ml,对照组失血量为(1578±659)ml,两组
高血压不仅会引起冠心病、心肌梗死、心力衰竭、脑梗死和脑出血,还会引起肾功能损害甚至肾衰.今天主要谈谈高血压是如何把肾脏弄坏的.rn大家都认识筛子吧?现在城市里的年轻小朋友可能很少见到了,但是生活在农村的孩子以及城市与农村的中老年人应该都见过甚至都使用过.筛子的用途就是把米或者面中的大颗粒杂质(比如谷子壳、麸皮或柴草等)分离出来,得到纯净的米和面.使用筛子的时候,我们会一点一点地往里面添加粮食,筛完后再次添加,而不会一次就把筛子填满.为什么?如果每一次都填满筛子不仅不方便操作,还会因为筛子里的粮食太重把筛子
期刊
Due to the influence of various social and environmental factors,the incidence of infertility is increasing,and the application of assisted reproductive technology(ART)is becoming more and more wide-spread.At present,the clinical pregnancy rate of in vitr
期刊
量子纠错与量子计算是量子信息科学坚实的基础和重要的组成部分.在实际应用中,如大气传输中的量子通信,将需要多种数学运算,其中包括量子纠错码.量子纠错码可以抵抗噪声,但由于构造量子纠错码依赖于量子纠缠,因此被认为是困难的.利用图态解决码字纠缠度是一个很有前途的解决方案,但高维图态构造起来仍有诸多困难,上述困难可以巧妙地通过码字纠缠的上界和下界来解决.本文根据稳定子码循环差集的特性和经典低密度奇偶校验(low-density parity check,LDPC)码的U和B组合,构造了高维量子低密度奇偶校验(qu
微处理器是现代信息系统的核心基础设施.大数据、人工智能、5G等技术的快速发展催生了数据量的爆发性增长,随之对数据处理能力的需求也急剧增长.专用计算技术被广泛认为是后摩尔时代的计算机体系结构演化的重要方向.专用处理器技术的发展一直伴生着通用处理器的发展,数字信号处理技术甚至早于传统意义上的通用处理器.通用处理器技术的发展,不仅在商业上取得了巨大的成功,很多关键技术也被专用处理器吸收借鉴用于提升专用计算的性能、优化可编程性等.本文主要分析了数字信号处理器(DSP)、图像处理器(GPU)、深度学习处理器(AI芯
基于大概念的高中化学课程实施是高考引导教学的内在需要,亦是“一核四层四翼”高考评价体系背景下培养应用型、创新型人才的外在要求[1].高三阶段进行大概念单元复习除了可以将知识系统化,还能揭示学科知识背后更为核心的概念和思想,有利于实现学业进阶和认知结构化,是知识转化为能力的重要途径.
期刊
一、问题的提出rn人教版九年级化学教材中,用锥形瓶和长颈漏斗组合的固液不加热型装置制备氧气、氢气和二氧化碳等气体,该装置是经典的气体发生装置,但也存在很多缺点:如该装置所用到的锥形瓶体积较大,所加入的液体药品液面必须没过长颈漏斗尖端,一定程度上造成药品浪费;加入药品后不能控制反应速率;反应过程中无法实现固液分离,不能随时控制反应的发生与停止;利用该装置制取氢气时,因锥形瓶上方空间较大,很难排尽装置内的空气,如遇明火,极易发生爆炸.因此,着眼于取材容易、易于操作、性能稳定、安全可靠、环保等原则,以医疗废弃注
期刊
海洋传感器技术在海洋军事作战领域发挥着重要的作用,随着人类探索海洋的未知领域,海洋传感器技术逐渐发展,但现阶段发展不完全,主要依赖进口,国产化率低.海水的温度、盐度、深度(温盐深)是海洋环境测量的基本参数,目前国内温盐深三参数传感器体积大、设备复杂、集成度低,难以满足实时在线检测的需求.本文基于微机电系统(MEMS)技术,制备了一批用于海洋温度、电导率和压力检测的温盐深集成微纳传感器,其中温度测量采用PT8000铂电阻传感器,盐度测量采用四电极法电导率传感器,深度测量采用压阻式压力传感器,通过离子注入工艺
流连接广泛应用于提取多源流数据之间的关键信息,是大数据处理的重要支撑技术.但连接两条大数据流时大规模的连接谓词计算,使其易成为性能瓶颈.为提高处理性能,流连接系统常采用并行和分布式两种方式扩展.然而,采用多核并行的流连接系统的扩展性受到CPU核数限制,无法应对大规模数据流.采用分布式扩展的流连接系统由于引入分布式框架运行的开销,导致硬件处理效率严重下降.为实现高效大规模扩展,本文提出一种利用FPGA加速器外设向上扩展的流连接系统FJoin.加速器可进行高并行的流动连接,载入多个流元组后,连接窗口中的数据流
原子级厚度的二维层状晶体材料具有丰富的物理特性,在新型微纳米器件领域展现出重要的发展潜力,相关的器件制备和性能研究也引起了广泛的关注.二维材料微纳米器件的制备需要经过二维材料的转移及金属电极的淀积等一系列过程.然而,在传统的制备流程中所涉及多步工艺需要用到诸多不同设备,如二维材料转移对准系统、电子束曝光系统,或是光刻系统,而且往往在一些步骤中涉及有机溶液处理,有可能会对样品带来一些不利的影响.本文设计展示了一种能够实现二维材料微纳米器件制备的多功能系统,该系统不仅可以实现二维材料的高效转移,而且可以直接进