基于多特征融合的端到端图像去雾算法研究

来源 :西北大学 | 被引量 : 0次 | 上传用户:user180
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像去雾是指对雾天采集到的有雾图像进行去雾处理,使得图像清晰化,提高图像质量。近些年,图像去雾算法的研究越来越多,取得了一定的成效,然而,这些模型仍旧存在着一些问题,例如模型性能与运行时间之间的平衡、模型无法有效地去除浓雾、合成数据集上训练的模型无法有效迁移到真实场景和去雾后的图像在小目标检测上效果不好等,这些问题导致去雾算法无法在实际场景中被很好的应用,为了解决上述问题,提出本文的研究内容,本文主要研究内容和创新点有如下三点:(1)针对现有图像去雾算法在浓雾场景,无法有效去除雾霾,存在雾霾斑块的问题,提出了一种端到端的基于全局特征融合的图像去雾网络(GFFN)。本文设计了多尺度全局上下文融合(MGCF)块来捕获全局上下文特征并将它们集成到网络中以协助浓雾区的恢复;之后使用简化的像素注意力(SPA)块与MGCF块串联形成全局特征融合注意力(GFFA)模块;然后基于局部残差学习和GFFA模块,提出特征增强(FE)模块作为基础模块搭建编码器-解码器架构,使网络能够专注于增强更有用的特征。实验结果表明,与前沿算法相比,该算法取得了最优的性能,在峰值信噪比和结构相似性上分别比次优的模型提升了1.13d B和0.014,能有效消除雾霾斑块,适用于浓雾场景,并且可实现快速去雾。(2)针对现有的图像去雾网络大多在合成数据集上进行训练,无法有效地将其迁移到真实场景的问题,本文通过结合基于先验的方法和基于深度学习的方法,提出基于先验特征融合的端到端图像去雾网络(PFFN)。首先,本文设计了先验特征提取(PFE)模块,利用支持反向传播的方式提取出暗通道先验和颜色衰减先验特征。其次,本文结合注意力机制设计了可以对两种先验特征进行自适应融合的先验特征自适应融合(PFAF)模块。最后,把融合后的先验特征以多尺度融合的方式加入主干网络的解码阶段。实验结果表明,在OTS和O-HAZY数据集上,本文的模型都具有最高的峰值信噪比和结构相似性,峰值信噪比的值比次优模型分别高0.48d B和0.44d B,并且能够较好的迁移到真实场景。(3)针对去雾后的图像缺乏细节信息,在小目标检测上效果不好的问题,本文提出面向小目标检测的端到端图像去雾网络(ORSBN),利用原始分辨率子网让特征图保持原始分辨率不变,以此保留更多的细节信息特征,让去雾后的图像更适用于小目标检测。然后,通过实验评估和分析了本文所提出的三个算法在目标检测任务中的应用情况以及适用场景,与前沿算法相比,GFFN、PFFN和ORSBN模型分别在大物体检测、中等大小物体检测和小物体检测上达到了最好的性能。本文针对不同问题提出了三种图像去雾模型,三种算法的参数量都在10M以内,以保证模型运行效率,并在目标检测任务上证明了三个模型的有效性和先进性。
其他文献
改革开放以来,随着我国资本市场的不断完善,保险资金可投资渠道进一步拓宽,保险机构的投资也越来越频繁,举牌行为引发广泛关注。股权投资是保险机构资金运用的重要方式,截至2019年末,我国保险资金运用余额达到18.53万亿,同比规模增长12.91%,其中股票余额1.49万亿,占总余额的8.06%。作为第二大机构投资者,保险机构持股不仅拓宽了保险资金的投资渠道,促进了保险资金流动效率,优化了保险盈利模式,
学位
生物发光断层成像(Bioluminescence Tomography,BLT)作为一种无创的医学成像技术,能够动态地提供活体动物肿瘤分布的信息。然而,由于生物组织的高散射特性,以及生物体表面光学测量信息的有限性和噪声干扰,BLT光源重建是一个病态问题。目前,以1L范数凸优化和贪婪算法为代表的稀疏表示理论为解决病态问题提供了解决思路,在BLT重建中得到了广泛的研究,能够实现光源的有效重建。但是,基
学位
在文物保护领域,三维数字化修复是热门研究课题之一。作为三维数字化修复的重要组成,兵马俑三维模型部分结构提取在兵马俑的修复、碎片拼接相关文物保护研究工作中有着重要的研究价值。目前,传统的手动划分与结构提取的方法,依赖专家主观经验,操作较为复杂,最终划分结果误差较大且整体划分过程耗时较长。针对以上问题,本文提出了两种针对兵马俑三维点云的自动化分割聚类方法来实现对兵马俑三维模型的部分结构数据提取。本文的
学位
中国逐步进入老龄化社会,老年残疾失能人口数量也随之上升,给家庭及社会带来了巨大的残疾失能保障压力。而长期护理保险的普及有助于缓解日益高涨的残疾护理需求。目前,社会性长期护理保险尚处于试点阶段,并且试点地区的现行政策存在诸多限制,给商业残疾保障类保险产品留出了充足的发展空间。混合型长期护理年金是一种创新型残疾保障类商业保险产品。根据前人的理论,该产品通过结合生命年金和长期护理保险的保障范围,中和残疾
学位
中国的风险导向偿付能力体系(简称偿二代)是2016年开始正式实施的针对保险公司的风险监管体系,建立起了定量监管、定性监管、市场约束的三大支柱。在偿二代下,监管机构对以保险风险、信用风险为主的可量化风险进行定量监管,对以操作风险、战略风险为主的不可量化风险进行定性监管。战略风险影响巨大,其试错成本和纠错成本都十分高昂,重大战略规划的失误所引发的后果往往是灾难性的,因此银保监会在监管实务工作中对保险公
学位
党的十九届五中全会明确提出要实施积极应对人口老龄化的国家战略,机关事业养老保险作为保障退休人员权益的一项基本社会保障制度,在促进经济和社会发展方面发挥着巨大的作用。积极推进机关事业单位养老保险制度改革,做好养老保险基金的收支预测,提前部署应对方案,提高基金支付能力,为积极应对人口老龄化,防范化解人口老龄化风险保驾护航。2015年初,山东省政府根据《国务院关于机关事业单位工作人员养老保险制度改革的决
学位
保险公司的准备金制度是适应其负债经营的特点而建立起的维持偿付能力的安排,其初衷是保证保险公司有足够的资金以应对未来可能发生的赔付。2016年“偿二代”正式实施,偿二代以风险为导向,更为系统地监控保险公司的偿付能力。偿二代实施期间保险公司面临的风险环境发生了较大变化,因而偿二代在执行层面暴露出许多问题。2017年9月,监管部门开启了偿二代二期建设,2021年底银保监会公布《保险公司偿付能力监管规则(
学位
文本匹配方法旨在判断两段文本是否表达相同的含义或者描述相同的事件。文本匹配是一项非常重要的自然语言理解任务,在搜索引擎、在线客服等服务中有着广泛的应用。由于文本结构复杂,语义丰富,而且文本对之间往往具有复杂的交互关系,使得文本对之间的语义匹配成为一个具有挑战性的任务。因此针对当前文本匹配任务存在的问题,本文研究了一种短文本表示模型、短文本匹配模型以及长文本匹配模型,本文开展的研究工作如下:(1)针
学位
无论是过去还是现在,生命健康一直是人的基本需求。在顶层设计上,国家一直大力提倡健康生活,《“健康中国2030”规划纲要》第二篇明确指出要普及健康生活,推动广大居民养成良好的健康习惯。另外,新冠疫情爆发至今已有两年有余,在疫情持续不断的背景下,人们更加注意自身健康状况,健康意识进一步觉醒。根据健康信念模型(HBM),人的行为习惯是心里活动的外在表现,具体到个人健康习惯来说,即健康意识更为丰富的人群会
学位
随着中国老龄化程度的加剧,社会养老保险基金的压力倍增,围绕养老保险制度与退休政策施以有针对性的改革措施迫在眉睫。养老保险作为居民退休后的重要生活保障,它将如何影响退休决策值得我们关注。现有文献多为社会基本养老保险对退休决策的作用,鲜少提及年金及商业养老保险。此外,退休是一个从酝酿退休意向到实际进行退休行为的过程,而国内研究只关注退休预期或退休行为中的一个方面,对退休路径中可能存在的退休过渡期也了解
学位