【摘 要】
:
随着信息技术的发展和深度学习技术的广泛应用,人们对于更高质量的多媒体内容的需求不断加强,因此对于更低的带宽需求及更加高效的视频内容编解码的技术研究一直是学术界和工业界的研究热点。近年来,深度学习技术在高层及低层计算机视觉任务中取得了巨大的成功,但是大部分任务都是基于时间无关的图像介质,对于时空相关的视频序列处理仍然有很大的研究价值。本文基于深度学习技术,主要介绍以下两个方面的研究工作:一、提出一种
论文部分内容阅读
随着信息技术的发展和深度学习技术的广泛应用,人们对于更高质量的多媒体内容的需求不断加强,因此对于更低的带宽需求及更加高效的视频内容编解码的技术研究一直是学术界和工业界的研究热点。近年来,深度学习技术在高层及低层计算机视觉任务中取得了巨大的成功,但是大部分任务都是基于时间无关的图像介质,对于时空相关的视频序列处理仍然有很大的研究价值。本文基于深度学习技术,主要介绍以下两个方面的研究工作:一、提出一种基于时序残差网络的视频后处理去块效应算法,创新性地利用视频内容的时序特征进行多尺度的内容增强,同时算法独立于编码器结构以易于使用。二、基于最新的神经网络压缩技术,系统化实现了基于SFP(Soft Filter Pruning)算法的网络剪枝及可视化。没有局限于参考图像去压缩噪声或去高斯噪声的网络结构,我们充分利用视频内容之间的时序特征,针对相邻帧之间的相似内容特征,我们提出一种由粗到细进行内容增强的视频去块效应框架。每层的网络结构参考ARN(Adaptive Residual Network)自适应残差网络结构,用前序层的网络进行粗粒度的噪声特征提取,之后将提取到的残差覆盖到下一帧待处理的视频帧,进行一次预滤波操作,后序的视频帧再次经过相同的网络结构处理相当于进行更加细粒度的噪声特征提取,以此类推,利用三层不同尺度的特征提取以获得更好的去块效应效果。本文提出的多尺度去块效应算法避免了过深的网络结构联合训练的困难,并且取得了目前同类方法中最好的处理效果,在相同的码率条件下,能够平均取得0.6dB~1.0dB的视频质量提升。对于神经网络技术,网络模型的压缩一直是计算理论研究的重点,其中网络可解释性和庞大的计算资源需求一直是该技术广泛应用的重要局限。本文从其参数的重要性程度取舍考量,基于最新的剪枝技术,实现了网络模型的压缩及可视化系统,优化现有算法的存储空间需求及运行速度,将深度网络中的卷积特征进行重要度评分后(Feature Selection),根据裁剪比率裁减掉具有低重要性神经单元。同时基于这种压缩技术和可视化技术我们对神经网络的可解释性进行了一定程度的探索。
其他文献
曾获诺贝尔经济学奖的罗伯特·蒙代尔说,美国的房地产情况和中国不一样。房利美和房地美太大了,美国政府不能让他们倒闭,因此不得不救市,而中国目前没有大的房地产公司倒闭。
简.奥斯丁是进入19世纪后最早发表现实主义小说的作家。她通过《傲慢与偏见》中几段婚姻的描写,来探索经济关系在婚姻和人们生活中的决定作用。夏洛蒂和柯林斯充满了现实色彩
光调制器是现代光通信链路中的关键器件,随着信息社会对传输速率要求的提高,光调制器向大带宽、高消光比、低插入损耗的方向发展。近年来,石墨烯因其独特的能带结构、优异的电学和光学特性成为研究热点,基于石墨烯的光调制器具有调制速率快、调制带宽大、易集成等优势。此外,全光纤光调制器与光通信系统有良好的兼容性,而D型双芯光纤使调制材料与倏逝场充分作用,有利于提高调制效率和消光比。本文将石墨烯与D型双芯光纤结合
宋代是历史上一个比较独特的朝代,而伴随这个朝代而产生的宋词文化也独具特色。正如我们所熟知的宋代词人,如苏轼、辛弃疾、柳永、李清照等,他们都为宋词的发展奉献了自己的
随着国家一带一路项目的发展,许多企业希望通过这个机会走出国门,提高国际知名度,越来越多的企业需要翻译相关的公司文件来进行对外宣传。本翻译项目是笔者就四川省民营石油
硫自养反硝化是一项重要的脱氮技术,由于不需要有机碳源、避免二次污染,所以在氮污染控制方面有着独特的工程实用价值。本研究以小试实验研究为基础,尝试用微生物群落解析、
在抗击新型冠状病毒感染的肺炎疫情的关键时刻,河南鹤壁日报社立即启动一级应急响应宣传报道机制,全面启动新媒体宣传,率先在全省恢复出版纸质版《鹤壁日报》,为抗击疫情提供
10月7日,2019年诺贝尔生理学或医学奖获奖名单揭晓。美国科学家威廉·凯林、英国科学家彼得·拉特克利夫和美国科学家格雷格·塞门扎,因研究对人类以及大多数动物生存而言至关
<正>山西天泽煤化工集团股份公司"40·60"项目2016年5月18日全面建成投产,目前该公司主要化工产品已达到年产180万吨合成氨、300万吨尿素、30万吨甲醇生产能力,产值突破50亿