基于时空注意力的异常行为提议与检测研究

来源 :合肥工业大学 | 被引量 : 0次 | 上传用户:A2335767
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
异常行为检测目的主要是从智能监控视频的场景中自动检测分析出不同寻常的运动行为,这对于智能视频监控系统对实际的应用场景中的运动进行监控,并对视频场景中的内容信息进行进一步的数据分析具有极其重要的意义。然而,面对庞大的智能监控系统所产生的大量视频数据,如何高效准确地对智能监控视频场景中的行为或者运动信息进行形象化的表达,精准地实现对智能监控视频场景中的行为和运动进行分析仍然是一个具有重大挑战性的技术任务。现有异常行为检测模型能够检测出视频场景中的异常行为,然而仍然存在一定的局限性:复杂多变的背景信息以及其他无关动作的干扰,使得视频中包含了大量的无关冗余信息;此外,大多数异常行为检测模型依赖于行为动作的底层特征,难以准确表达异常行为的运动特征。对此,本文在运动和外观特征的基础之上,定义了三种不同形式的暴力流特征来分析视频场景下的异常行为,并利用三维卷积神经网络深度挖掘行为的时空语境信息,同时结合时空注意力机制去除冗余帧的干扰,增强特征的显著性,从而强化了异常行为检测模型在复杂场景下的检测性能。针对上述问题,本文主要围绕以下几个工作展开:(1)针对目前现有大多数运动提议方法效率低下,提议模型性能差且计算代价高等问题,本文进一步提出了基于空间注意力机制的运动提议方法,通过在三维卷积神经网络中融入空间注意力机制来抑制无关的背景噪声信息的干扰,关注发生运动的关键区域,从而增强特征的显著性。此外,本文运动提议模型的训练不需要依赖于运动行为的真实边界框,大大降低了运动提议模型的计算代价,进一步提高了本文运动提议模型的分析效率以及正确率。实验在UCF101-24和J-HMDB两个公开数据集上分别进行验证,证明了本文的运动提议方法的有效性。(2)针对实际应用中异常行为发生概率小,且外观复杂多变难以界定的问题,本文在运动和外观特征的基础之上,提出了阻碍力,挤压力和侵犯力三种不同形式的暴力流特征来挖掘行为的深度运动特征。在计算这些暴力流特征前,利用时间注意力机制对输入视频帧进行预处理操作,减少无关冗余帧的干扰,筛选出具有重要运动信息的关键帧。接着,通过多通道的三维卷积神经网络对原始视频帧,光流以及计算得到的暴力流特征进行学习,并融入空间注意力机制来增强特征的显著性,去除背景噪声等冗余信息的干扰。在UCF-Crime数据集上的实验结果表明,本文的方法能够有效实现异常行为检测。
其他文献
在室内服务机器人的应用中,其障碍物检测是完成室内服务工作的非常重要的一环。由于室内服务机器人对于视野中目标识别的视角跟我们人为的视角有所不同,本文从室内服务机器人
本文是一篇关于丹江口移民的汉译英翻译实践报告。原文节选自湖北省作家协会会员欧阳敏先生所著的纪实文学作品《世纪大迁徙——丹江口库区移民纪实》。该书于2013年由新华出版社出版,共分10章,译者选取本书的第二章“移民往事”中的部分内容作为源语文本。该部分记述了20世纪60年代丹江口居民为了响应国家号召,建设丹江口大坝,克服种种困难搬迁移民的历史事实。作为移民的后代,译者深感有义务通过自己的翻译实践让更
视网膜每时每刻都在接收海量的视觉信息,大脑中的视觉皮层(如初级视皮层V1,次级视皮层V2以及其他外纹状皮层)通过对这些信息的处理加工,进而实现对物体的识别。然而,我们大脑的并行处理能力有限,在特定的任务需要下只有部分接收到的视觉信息能够被充分地处理。在这一限制下,我们的大脑通过注意机制来选择与任务需求相关的信息。空间注意机制能让我们专注于视野中的特定位置以增强大脑对这一部分信息的处理。第四视觉皮层
将铁电材料与红外型器件相结合的微型半导体器件在近年来研究非常活跃,铁电材料本身具有的良好的压电、铁电、热释电、光电及非线性光学,以及能够与半导体工艺相集成等特点,在微电子和光电子技术领域的应用非常的广泛,成为了一种比较新颖的功能性质的材料,受到了科研人员的广泛的关注,其中,锆钛酸铅(PZT)铁电薄膜是迄今为止研究最多,应用最广的一类铁电薄膜材料,PZT薄膜具有高机电系数、高介电常数和高剩余极化强度
精密测量仪器在国家的工业发展进程中扮演着不可或缺的角色,保证精密测量仪器部件的良品率对精密制造具有重大意义。光栅尺作为常用的精密测量部件,测量码道是保证其检测精度
面部识别是人工智能和图像处理(模式识别)领域的主要研究方向之一,已经广泛应用于身份认证、视频监控和生物检测。因为非接触式、自然、方便并且可靠,面部识别已成为生物识别
为了弥补数据交易平台和机构的不足,更好地促进数据资源流动和利用,由掌握不同类型数据资源的企业组建大数据联盟,通过联盟成员数据资源共享的方式,根据市场需要灵活地支持企
目的:应用Lipiview眼表面干涉仪检测泪膜脂质层结合传统方法评估Visi Plug泪道栓的临床疗效,验证Lipiview对泪道栓疗效评估的客观有效性,并分析泪道栓塞术对泪膜脂质层的影响,探究LLT与其他指标的相关性。方法:此研究采用前瞻性、干预性的研究方法,经一定纳入和排除标准选取2018年5月至7月就诊于华中科技大学同济医学院附属协和医院眼科门诊的14例干眼患者(28只眼),经患者签署知情同
社交媒体正在成为用户观点交流和情感表达的主要平台。用户在表达自身情感的同时,其相互作用也在不断影响现实社会。因此,基于自然语言处理技术的情绪分析、意图识别等研究的
本文通过采用射频磁控溅射法制备Mg掺杂Ga_2O_3薄膜,并研究双靶交替溅射和混合靶材直接溅射两种掺杂方式对薄膜性质的影响;之后选用掺杂方式更好的方式制备不同溅射条件下的Mg掺杂Ga_2O_3薄膜,并将其中一组样品进行后退火处理,并使用X射线衍射仪(XRD)、紫外分光光度计(UV-Vis)、原子力显微镜(AFM)、扫描电子显微镜(SEM)、能量色散谱仪(EDS)以及光致发光谱仪(PL)等测试仪器对