基于多尺度变换与神经网络模型的图像融合技术研究

来源 :云南大学 | 被引量 : 0次 | 上传用户:lblb0628wto
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
得益于计算机视觉技术的飞速发展,图像融合技术作为其重要分支,在数字图像处理领域得到了来自世界各地的科研人员的重视。由于传统光学镜头景深有限,当同一场景中含有多个目标物体时,很难通过一次取景就得到一幅所有目标都清晰的图像。图像融合技术作为信息融合领域重要的图像处理方法,充分利用了多源图像信息互补的优势,以一种简单高效的方法克服了光学镜头的成像缺陷,将多幅图像融合为一张新的、包含所有有效信息的图像。随着图像融合技术的不断革新,通过图像融合技术输出的图像更利于人眼视觉系统对图像信息的理解,该技术已在军事、医学、遥感测绘、工业检测等领域得到应用,因此,针对图像融合技术展开研究对提升成像系统的性能具有重要意义。在当前主流的图像融合算法中,基于图像多尺度变换的算法毫无疑问是图像融合领域的研究热点。其中,非下采样轮廓波变换(Non-subsampled contourlet transform,NSCT)作为一种能有效表达图像稀疏特性的多尺度图像分解方法,它不仅继承了传统小波变换的时频特性,还实现了图像的多方向变换;同时,混合l0-l1图像分解模型作为一种新兴的图像分解算法,很好的克服NSCT变换忽略了图像重要的空间一致性,而导致图像亮度和色彩畸变的缺陷。脉冲耦合神经网络(Pulse coupled neural network,PCNN)由于模仿了哺乳动物视觉系统对信号的处理以及传导机制,省去了传统人工神经网络需要大量数据进行训练的麻烦,从而被应用到图像融合领域;近年来,随着深度学习概念的提出,通过卷积神经网络(Convolutional neural network,,CNN)对图像进行深度特征提取,为后期图像融合的完整度和清晰度提供了一定的保障。本文将图像多尺度变换与神经网络模型相结合,对多聚焦图像融合、红外与可见光图像融合算法进行了探讨,通过大量实验对所提算法进行有效性验证,同时从主观视觉角度和客观指标量化两个方面对实验结果进行评价,实验结果表明所提算法在图像融合领域有良好的效果。文章主要内容如下:1.介绍了基于NSCT的图像多尺度变换模型,叙述了基于混合l0-l1模型的图像分解算法;2.针对多聚焦图像融合,考虑到PCNN模型通过其特殊的神经元点火机制,能对图像高低频分量系数进行选取的特点,结合NSCT多尺度性、多方向性以及平移不变性等优良特性,提出了一种在NSCT域内通过图像相位一致性与空间频率来驱动PCNN神经元点火的多聚焦图像融合算法,该算法通过NSCT对源图像进行多尺度分解,并分别制定了基于图像空间频率与相位一致性特性的高低频融合策略来检测图像的聚焦区域,结合PCNN点火特性,利用图像梯度能量和低水平不变形属性来有效提高多聚焦图像融合效果;3.针对多聚焦图像融合,利用交叉双边滤波器良好的图像边缘保持特性,提出了一种在NSCT域内结合交叉双边滤波的多聚焦图像融合算法,该算法首先利用NSCT将源图像分解为高频子带和低频子带,并通过计算低频子带的拉普拉斯能量和来确定聚焦区域的像素点,同时利用交叉双边滤波器对高频子带进行再分解,其良好的边缘保持特性有助于检测出高频子带中的边缘细节信息,达到了良好的融合效果;4.针对红外与可见光图像的融合,由于红外与可见光图像独特的成像机制,提出了一种在混合l0-l1图像稀疏分解域内结合卷积神经网络与图像显著性检测的红外与可见光图像融合算法,首先利用图像稀疏特性对源图像进行稀疏分解,再以红外图像显著性检测作为基础层分量融合规则,以卷积神经网络的深度特征提取机制作为细节层分量的融合策略,对源图像进行融合,该算法有效融合了红外图像中的热目标信息及可见光图像中的丰富光谱信息;
其他文献
随着科学技术的发展,第五代(5G)移动通信已经逐步开始进入人们的生活。为满足5G超高速数据传输速率、高可靠性和低连接延迟等需求,需要研究新型的无线空口波形。在过去几年中多种候选波形被各方提出,滤波的正交频分复用(F-OFDM)便是其中的一种。与4G采取的OFDM系统相比,F-OFDM系统在继承传统OFDM系统的一系列优点的前提下,具有高频带利用率、参数自由度高、带外泄露小等优点。而对F-OFDM系
后发国家在经济赶超阶段无不采用扭曲的经济政策,政策性负向扭曲生产要素价格是后发国家实现低价工业化并长期保持经济高速增长的重要条件。本文将成功实现赶超的经济体作为研究对象,测度各国生产要素价格的扭曲程度,并讨论扭曲对经济体投资、消费和经济增长的影响,进而总结出规律性特征。后发国家生产要素价格绝对扭曲与经济增长存在非线性关系,当经济体处于中低收入阶段,普遍存在压低生产要素价格来促进资本积累,实现工业化
随着WEB2.0时代中微博等在线社交网络平台发展的日益火热,越来越多的用户选择在微博中进行信息分享、关注互动和讯息发布,微博已聚集了大量的活跃用户和流动信息。如果能对用户在微博进行各种社交行为时产生的传播内容和社交信息进行分析,从微博庞大的虚拟在线社交网络中挖掘出用户对应的社交圈信息,不仅有利于社交网络结构的演化分析,而且在网络舆情分析和用户个性化推荐等领域也有着非常重要的作用。本文通过总结国内外
研究背景随着我国社会经济发展,大批农村青壮年进城务工或经商,但由于教育制度、户籍制度、经济承受能力等限制,将其子女留在户籍所在地,并由此产生了“农村留守儿童”这一特
历史教育不仅传授历史知识,而且彰显人文精神与社会关怀,对现实具有重要的指引意义。新课改以来,核心素养逐渐成为中学历史教育的指向标,成为评判人才的重要标准。《普通高中历史课程标准》(2017版)中明确了高中历史课堂中的核心素养教学要求,指出历史学科核心素养包括唯物史观、时空观念、史料实证、历史解释和家国情怀五个方面。高中历史课堂教学中贯彻核心素养要求有助于实现课程标准,彰显史学功能;有助于突出教学主
学位
本文是一篇现场口译实践报告,笔者在“东方行”龙江之旅项目上担任了为期一周的现场的口译译员。笔者在本文中,阐述了翻译实践的过程中产生的一些问题,包括译文结构差、译文冗余和历史文化类信息漏译等问题,分析了产生问题的原因,并针对这些问题,给出了相应的应对策略。在此次活动进行的期间,笔者切实体验到了现场口译工作的难度,在解决相应的翻译问题的同时,自身的能力也得到了锻炼。导游口译的发展趋势处于上升阶段,越来
路侧停车是指由交通管理部门利用城市道路,为机动车停放设置的停车位置。近年来机动车数量迅猛增长,造成路侧停车的机动车数量过多。现有路侧停车管理还基本停留在人工操作阶段,人工记录车辆的路侧停车情况,过程复杂繁琐,人工成本高,不能及时发现违法停车。因此,急需提高路侧停车管理的能力和有效性。同时,随着交通监控覆盖面积的扩大,每天都有海量的交通监控视频数据产生,提高这些数据的利用率也是很重要的研究方向。基于
在现代语音通信过程中,语音的质量和可懂度由于受到各种噪声的干扰而下降。因此,在语音通信系统中,提高语音质量和可懂度显得尤为重要。传统语音增强方法的局限性及对非平稳
近年来中国不断加大科技创新投入,但我国创新能力仍然较弱,在此情况下,创新效率的提升显得尤为重要。在技术水平一定的情况下,创新资源从效率低的企业和部门流向效率高的企业和部门,会提高整体层面的创新效率,相反则会造成效率损失。要研究如何优化创新资源配置,首先应该回答当前创新资源的错配程度如何以及造成了多少效率损失。已有研究缺少从创新资源错配的角度对于创新效率损失的考量,因此本文从创新资源的错配这一视角出
目的:微小RNA(miRNA,miR)-424-3p和5p在前列腺癌细胞LNCaP中的表达以及对前列腺癌细胞LNCaP增殖和迁移的影响,并对比miR-424-3p和5p对LNCaP生物学行为影响大小是否存在差异。