时域信息辅助的视频文字检测技术研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:pollyzhang15
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着移动智能设备的迅速普及、社交网络和视频网站的大规模兴起并日益深入生活,视频已经成为了一种重要的信息载体,对于视频数据的智能分析与智能处理需求也愈来愈迫切。视频中的文字作为一种高级特征,直接包含了语义信息,往往准确表达了视频关键内容,它不仅是一种重要的获取视频内容的途径,而且也是视频检索和视频内容理解的重要依据。因此视频文字检测技术对于视频数据的智能分析和处理具有重要的研究意义,在智能驾驶、地理定位、网络安全等方面拥有广阔的应用前景。传统的文字检测算法都是针对单个图像,由于视频普遍存在数据量大、光照不均、低分辨率、复杂背景、文字多方向等情况,直接应用已有的图像文字检测算法往往检测效果不佳、检测速度较慢。视频的突出特点是它包含时域冗余信息,本文通过挖掘时域冗余信息应对以上挑战,提出了有效的视频文字检测方案,提高了检测的精度和速度,本文的主要工作和贡献有:1、针对视频帧文字检测任务设计了一种全卷积神经网络检测模型,该模型通过多层的网络结构能够提取丰富的特征信息,不仅能检测水平方向的文字,而且能检测多方向的文字,本文的实验结果也证明了该检测模型的有效性和通用性。2、视频数据量较大,使用单帧文字检测模型进行逐帧检测时计算效率低,本文根据相邻视频帧内容变化小的特点,将光流信息加入检测网络,从而只需要对关键帧进行直接的特征图提取,然后利用光流信息将关键帧的特征图传播到相邻视频帧,极大的节约了特征提取时间。加入光流后的检测网络经过充分的端到端训练后,能够在基本保持性能的同时加快检测速度。3、在文字背景复杂、光照不均、视频模糊等情况下,单视频帧的文字检测模型不可避免的存在着局限性,会出现漏检、误检等。针对这一问题,本文利用相邻帧存在互补信息的特点,进一步挖掘时域冗余信息,对单帧的检测结果进行融合,从而对误检、漏检进行修正,提高检测的精度。本文在Minetto和ICDAR2015两个公开的视频文字数据集上对提出的算法进行了实验验证,实验结果表明本文提出的检测方案在检测速度和检测精度上都取得了良好的结果。
其他文献
在征地过程中,农用地伴随着权属和价值形态的转换,其增值收益在多个利益主体间将实现再次分配。但各利益主体的社会经济地位有着显著差异,因此相应的收益分配也不尽合理。农
党的十九届四中全会提出要继续深化司法体制综合配套改革,完善科技创新体制机制。在当前大数据、互联网快速发展的背景下,监狱管理工作的步伐必须跟上时代发展的要求,适应司法改革和技术进步的趋势,需要将智慧监狱平台建设作为提高新时期监狱对服刑人员执法管理水平的重要手段,要依靠信息化管理推动狱政工作的科学发展,提高监狱人民警察队伍的整体素质,保障监狱充分履行职能。近年来,浙江省监狱系统围绕“平安、法治、智慧‘
铂族和稀土金属稀少而昂贵,加强二次资源中稀有金属的回收对于减少环境污染、社会经济的可持续发展、实现循环经济具有重要意义。溶剂萃取技术作为一种成熟有效的提取分离方
偏微分方程反问题是应用数学领域中的一个十分重要的研究课题.它是伴同众多应用和工程领域中某些重要问题相联系而发展起来的.本文主要研究抛物型方程初边值问题的系数唯一识
生产低聚异麦芽糖的传统工艺是以淀粉为原料,经过α-葡萄糖苷酶的转化进行生产。但是目前我国的低聚异麦芽糖产业严重依赖于从日本进口 α-葡萄糖苷酶酶制剂,为了打破这种技
在能源危机和环境污染的当今社会,迫切需要发展微生物燃料电池(Microbial fuel cell,MFC)这一新世纪绿色能源技术,其具备生物产电和污水处理两大功效,实为未来能源“发动机”
在盾构隧道施工过程中,难免会引起周围土体的扰动,从而造成土体应力状态的改变,进而产生地表沉降,危及临近建筑物及地下管线的正常使用。因此,对盾构隧道地表沉降进行有效地
岩体赋存环境中的水化学因素不断通过物理、化学与力学方式进行着水岩相互作用。天然地质作用生成的岩石存在诸多自身缺陷,在水岩作用下岩石表面特征发生变化,岩石内部缺陷发
现阶段快速发展的绿地景观未能较好的考虑绿地景观的周围环境因素、空间肌理和地域文脉等元素,使局部的绿地景观难以与整体的周围环境产生沟通与对话,所以针对上述问题开展对绿地景观的融合性设计探索是非常有必要的。1.本文以南阳市行政文化中心为研究对象,南阳的行政文化中心是南阳的“会客厅”,是南阳城市绿地景观建设中至关重要的的区域,具有行政文化和景观环境展示的多重责任,探索了依托轴线融合文化、自然和空间,从而
吡啶类化合物和α-羰基酯类化合物大量存在于天然产品以及生物活性分子之中,不仅在功能材料、农药以及医药领域广泛应用,而且在有机合成中可作为中间体和配体。尽管已开发出