视频图像在线超分辨率重构技术研究

来源 :长春理工大学 | 被引量 : 0次 | 上传用户:mwj
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视频图像超分辨率重构算法是提高图像传感器分辨率的重要手段。随着硬件成本以及需求环境的增加,传统的超分辨率重构算法存在重构质量较低以及适用范围有限的缺点。与单帧图像重构不同的是,视频图像需要利用多帧图像的时空信息,因此视频图像重构相对来说更有难度。针对视频图像中出现遮挡和大型运动时配准失真的问题,进一步增强图像的重构质量和细节信息,提出一种基于循环图像配准的视频图像超分辨率重构算法,采用非局部卷积提取图像特征,集成图像去噪和隐式运动估计提高配准精度;引入时间相关性和注意力机制融合配准特征,结合金字塔残差网络和并行卷积重构高分辨率视频图像;通过包含像素损失和纹理损失的组合损失函数训练网络。由于目前重构算法的人眼视觉感知质量和时间一致性较差,提出一种基于生成对抗网络的视频图像超分辨率重构算法,生成网络采用轻量级的图像配准网络,结合全局上下文信息配准相邻图像,弥补像素丢失区域,采用扩张卷积提取全局信息;通过改进的判别网络以及时间一致性损失增强生成图像的视觉连贯性,引入全文信息损失在配准失真时计算图像相似性约束网络训练。通过综合公共数据集在Pytorch平台上训练和测试提出算法的重构质量,实验结果表明基于循环图像配准的方法能够获得较高的PSNR指数,重构图像细节清晰,但是视觉感知质量较低;基于生成对抗网络的方法能够生成逼真的纹理细节,具有较高的人眼感知质量指数,时间一致性良好,网络参数相较于前者更少,速度更快。本文提出方法能够快速重构高分辨率图像,恢复真实环境下降质图像丢失的高频信息。
其他文献
“一带一路”倡议令中国在世界上有更多的伙伴,与此同时,与这些国家间的交流需要语言教育跟随世界脚步,为构建人类命运共同体储备人才。文化意识是学生发展核心素养和2017课
议论文写作是高中英语教学的重要组成部分。然而,由于受到现有写作能力和写作焦虑的影响,高中生往往在议论文写作中表现欠佳。有学者提出对比续写可提高学生的议论文写作能力
随着基于位置的服务和地理定位技术的快速发展,产生了越来越多具有位置信息和文本描述信息的空间文本对象。空间文本对象的相关查询,在时空数据库领域中成为了人们研究的热点
多相图像分割是图像处理与分析的重要技术,在多目标检测与识别、三维图像分割与重建等相关问题中得到了广泛的应用。多相图像分割的目的是根据待分割图像的特征,将图像自动分
在自然界中,成群结队飞行的鸟群,鱼群以及觅食的蚁群经常会表现出协调一致的行为.对多智能体系统协调行为的研究在工程及经济领域都有着非常广泛的应用.多智能体系统的协调控
如今,数字图像信息在互联网上被广泛传播,容易遭受大量的恶意攻击。因此,图像信息的安全问题变得尤为重要,这推动了图像加密技术的快速发展。本文设计了两种基于混沌系统与DN
三维点云数据处理技术在光探测和测距(Li DAR)、深度学习、计算机视觉、体感游戏、无人驾驶、逆向工程等领域有着非常重要的研究意义。在获取三维点云数据的过程中不可避免的
蜡样芽胞杆菌CZ(Bacillus cereus CZ)是本实验室自筛野生菌,可以产生高活性的胞外L-亮氨酸氨肽酶。在实验室之前的发酵优化中发现碳源对该氨肽酶的产生具有明显的影响,其他因素
随着全球化进程的加速,英语课程与教学的重要性也越来越突出。2017年出版的《普通高中英语课程标准》中提到的“英语学科核心素养”成为教育工作者和研究者研究的重点。英语
数字化产品的飞速发展极大地刺激了人们对于私人内容的安全性需求。数字水印技术是一种保护数字产品版权的重要手段,通过将私人信息嵌入到图像、音频和视频这些数字载体中来