基于深度学习的短视频超分辨率算法的研究与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:f2062325
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络基础设施的不断完善和移动设备的快速普及,近年来短视频行业飞速发展,观看短视频已经成为人们在线休闲消遣的主要娱乐方式之一。由于短视频具有用户随手拍摄、制作门槛低、创作简单等特点,并且用户缺乏专业设备和拍摄知识,在拍摄过程中容易受到手抖、物体运动和光照环境等因素的影响。造成拍摄出的短视频在分辨率、清晰度、亮度、对比度等方面与专业视频相差甚远,影响用户的观赏体验。因此,对短视频超分辨率技术研究具有重要的实用意义和学术价值。基于以上应用背景,本文提出了一种融合图像去噪的短视频超分辨率深层神经网络。具体地,本文设计了一种基于特征分段融合策略的短视频图像去噪模型,采用多尺度特征图渐进式融合与特征重建为后续的超分辨率提供细节信息丰富、高质量的视频图像;另外,在超分辨率阶段中,采用可变形三维卷积设计实现了一种捕获时空信息和自适应运动补偿的特征对齐融合模块。其次,为了提升网络模型学习相关特征的能力,本文提出了一种融合通道注意力与空间注意力的自学习方法,分别采用自适应大小的局部跨通道交互策略和可分离卷积捕获特征通道与特征空间中潜在的依赖关系,并设计了一种基于注意力机制的残差密集连接模块。此外,为了验证短视频超分辨率算法的有效性,我们也构建了一个短视频超分辨率数据集。最后,我们设计了一个用于短视频超分辨率转换的原型系统。我们的算法分别在短视频数据集与公开数据集上开展多组实验比较,均获得了良好的表现。另外,我们还对所提的短视频图像去噪模型和注意力方法进行了实验分析,进而验证了所提模型对于短视频超分辨率任务的有效性。
其他文献
随着我国经济的稳步健康成长,各大城市的建设也在快速增长。在越来越多的城市里,交通拥堵问题已经逐渐显现,为了解决这一问题,发展轨道交通作为城市的主要交通通勤方式已经成为大多数城市政府的选择。“云轨”是B公司自主研发的跨座式单轨列车工程的一种别称,其目的是为了高效解决目前严重的城市拥堵问题。专用无线通信工程是云轨的子工程之一,是线路内部人员进行高效内部联系的重要手段,主要应用于列车调度,内部通信和紧急
随着新时代机器人技术的兴起,户外和室内的清扫机器人需求日益增加,其中在户外停车场和商场内清扫机器人也逐渐出现,针对如何能高效的实现上述常见的场景以及一些复杂路况下实现稳定、安全的清扫工作,是需要解决并投入大量的研究和探索的。本文围绕如何解决四轮独立驱动独立转向即4WID/S的清扫机器人在户外不同路况下能够高效率的作业这一问题进行研究。本文主要通过对4WID/S运动学底盘和悬架设计、基于运动学内参的