像素级多传感器图像融合新方法研究

被引量 : 43次 | 上传用户:sheryme
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
像素级图像融合是将同类或异类传感器采集到的关于同一场景或目标的图像经过一定的处理,综合成一幅图像,从而获得对同一场景或目标更为准确、全面、可靠的图像描述,是图像处理与计算机视觉领域中多传感器图像信息综合利用的重要手段。随着图像传感技术的发展,像素级图像信息融合已经成为军事、遥感、医学、工业、交通等领域信息综合处理的重要技术。由于图像传感器种类繁多,应用环境各不相同,所以图像融合算法也是各种各样。相对于国外的研究,国内研究起步较晚,其理论以及技术水平亟待提高。本文在深入分析了现有图像融合理论的基础上,结合目前图像处理发展的最新理论,构建了两种新型图像融合框架,提出了稀疏表示域图像融合新方法。在这三种新型图像融合框架下,结合不同图像融合任务的特点,提出了一系列新型像素级图像融算法。另外针对高速公路智能交通系统的需求,本文还提出了多时相图像融合技术和基于特征融合的车牌检测技术,解决了高速公路智能交通系统中监控和信息获取两个重要环节的关键问题。本文主要研究成果如下:1.混合多分辨率分析图像融合传统像素级图像融合算法往往只考虑一种图像多分辨率分析方法,融合算法性能很难获得较大的突破。这是因为任何一种图像多分辨率变换基函数的构造都有严格的限制,使其在表达图像特征时存在一定程度的局限,例如小波变换不能表达图像边缘信息,Curvelet变换不能很好地表达图像细节。由于无法全面表达图像信息,仅通过改变系数融合规则很难进一步提高图像融合算法性能。实际上,不同多尺度几何分析方法之间存在互补特性。例如小波变换适合表示源图像中的纹理、角点等细小特征,而Curvelet和Contourlet变换适合表示源图像的边缘和线信息。基于此本文在通过大量的对比实验以及理论分析的基础上,提出了图像的混合多分辨率分析理论,将具有互补特性的不同图像变换方法以串联的形式结合,获得图像的混合多分辨率分解,并进一步构建了混合多分辨率分析图像融合框架,在混合多分辨率分解域内对分解系数进行融合,最后通过逆变换得到融合图像。在该框架指导下,我们结合小波变换与Curvelet变换的互补特性以及静态小波变换与非下采样Contourlet变换的互补特性,实现了两种基于混合多分辨率分析的图像融合方法。仿真实验显示这两种方法都能很好地保留源图像的细节信息,融合图像质量比单纯使用小波、Curvelet或Contourlet得到的融合图像质量有明显改进。特别地,混合静态小波与非下采样Contourlet变换的多分辨率分析方法还能很好地保持图像变换的移不变特性,使得待融合源图像存在误配准时仍能取得高质量融合图像。2.多聚焦图像区域级融合多聚焦图像融合能够突破光学镜头景深的物理限制,获得场景中所有目标聚焦清晰的合成图像,是许多机器视觉处理任务,如边缘检测、图像分割、目标识别等的关键技术。在传统多聚焦图像融合框架下,融合规则只考虑了源图像单个像素特征或其变换域系数的局部邻域特征,通常是在损失部分清晰特征的情况下达到场景内所有目标的相对清晰,融合图像很难达到最优。且对于没有或不能严格配准的源图像,根本无法得到满意的融合结果。针对这一国内外同行公认的难题,本文通过模拟手工获得理想多聚焦融合图像的剪与贴方法,构建了分割合并相结合的多聚焦图像区域级融合框架。在该框架下,算法自动选择源图像中最清晰的区域合成融合图像,克服了传统方法会损失源图像清晰特征的缺点。基于该框架,我们分别采用Normalized cut和Watershed图像分割算法以及图像空间频率和形态小波变换系数区域清晰度标准设计了两种区域级多聚焦图像融合算法,实验结果显示这两种算法能够得到近似“理想”的多聚焦融合图像。另外,根据多聚焦图像融合的特点,本文还提出了根据图像清晰测度直接对图像进行分割,巧妙地通过比较源图像空间频率特征来得到清晰区域与模糊区域的模板,进一步提高了算法效率。3.稀疏表示域图像融合稀疏表示理论是继小波、Curvelet等多分辨率表示方法后一种新型的信号表示理论,具有稀疏的信号表示形式,更加符合人的视觉特性。图像稀疏系数能够更加准确地表达图像显著信息的特点也使其非常适合图像融合任务。然而,稀疏表示理论与小波变换有着不同的变换形式,基于传统多分辨率分解的图像融合框架并不适用于稀疏表示。本文针对稀疏表示的特点,并考虑到图像融合处理局部显著信息的特点,提出了滑窗技术,在此基础上提出了稀疏表示域图像融合方法。在新的图像融合方法指导下,我们首先提出了多聚焦图像稀疏表示域的融合算法,并对其进一步扩展实现图像恢复融合,在源图像受噪声干扰时,仍能取得非常好的去噪和融合结果。另外经理论分析发现,当进行多模图像融合时,不同的源图像可能分解到过完备稀疏字典不同的子集上,使得稀疏系数的融合规则难于设计。对此本文提出利用同步正交匹配追踪的图像稀疏表示算法来保证异质图像的稀疏表示系数一一对应。大量的仿真比较实验结果显示基于稀疏表示的图像融合方法能够大幅提高融合图像质量。压缩传感是图像稀疏表示理论的重要应用之一,其一经提出就受到了国内外学者的高度关注,2007年被美国科技评论评为年度十大科技进展之一。该理论指出在稀疏约束下,可压缩的信号/图像可从远低于Nyquist标准的压缩采样数据中精确地恢复出来。本文充分结合遥感图像的成像原理,光照特性以及传感器的光谱反应特性,构造了遥感图像压缩传感模型,将遥感图像融合问题转化为具有线性约束的信号恢复问题,并在图像稀疏表示域图像融合框架下,提出了一种基于压缩传感理论的稀疏表示域遥感图像融合算法。在Quickbrid卫星和IKONOS卫星数据上的仿真实验证明该方法能够得到比传统方法更好的融合图像。4.图像信息融合技术在智能交通监控系统中的应用智能交通系统是从根本上解决日益严重的交通问题的一个新型技术手段,它可以为交通部门提供及时、准确的交通信息,从而最大效能的发挥交通管理系统在交通监视、交通控制等方面的作用。然而与我国高速公路建设的快速发展相比,智能交通系统的发展则相对落后。随着日益严重的地面交通问题的出现,开发稳定有效的智能交通系统势在必行。智能交通系统首要任务就是视频监控,然而由于夜间能见度的不足,监控摄像机不能采集到足够的信息,这给视频监控带来了一定的难题。对此本文设计了一种梯度域多时相图像融合方法,将夜间图像与白天背景图像进行融合,提高了夜间图像中背景的质量,改善了高速公路夜间视频监控的能力。交通信息的获取是交通信息服务系统的重要组成部分,其核心为运动汽车车牌的自动检测与识别。针对传统算法检测率不高,后续处理压力较大的问题,本文提出了基于特征融合的车牌检测技术,同时考虑了车牌区域扩展Haar特征和边缘方向直方图特征,使得车牌检测率有显著提高,仿真实验证实了本文算法的有效性。论文最后总结了全文的主要工作和创新性研究成果,并对下一步研究工作进行了展望。
其他文献
针对高超声速巡航导弹的高速高机动特性,本论文研究高动态下的捷联惯导系统并行实现方法,涉及初始对准算法、并行卡尔曼滤波器设计、捷联解算算法、并行捷联解算算法设计以及
期刊
金融是现代经济的核心。金融的发展促进了经济的增长,同时也使居民的生活水平得到了很大的提高。但是城乡之间所呈现的差距却在不断的扩大。农村居民和城镇居民可能没能公平
汉字是一种具有传播信息功能的符号,其设计思路和设计方法对平面设计来说具有广泛的意义。本文将哲学中的“可错性”思维引入汉字设计当中,分析汉字字型的“可错性”与汉字识
《我国产品质量责任制度体系的完善》一文,通过对产品质量责任理论基础、我国现行相关法律制度存在问题的辨析,结合国外相关制度的立法经验及其我国市场经济发展的需要,就我
<正>收获的季节,走在山东省威海市文登区西洋参产区,处处可以看到连绵的参棚。去年秋天,文登西洋参收获季节,鲜参卖出了历史最高价,这让参农们兴奋不已。而今年,西洋参收购价
铬矿在竖炉内熔融还原制取铬铁合金的工艺过程中,如何提高铬矿球团的直接还原速度是极关键的一步。为达到在较低温度下,具有较高还原能力,作者初步进行了以钠、钙、钾的硼酸
目的观察夹脊电针对腰椎间盘退行性病变(LDD)兔模型腰椎间盘髓核蛋白聚糖表达的影响。方法 40只新西兰兔随机分为正常组、假手术组、模型组和治疗组,组内分为28d、56d两个取
知识经济正改变着企业组织结构化的基础。随着知识经济的到来,“知识的逻辑”将在企业制度结构中得到确认;传统的“层级结构”将改造成“网络化的层级结构”;而作为企业经营“副
本论文推导了传感器的输入输出关系,得出了康铜箔各点上的温度与热流密度之间的关系,并通过黑体辐射定律得出辐射热流值,中心温度定律得出中心温度,进而得到在康铜箔中心处,中心温