基于深度神经网络的井下视频场景分类方法研究

来源 :西安科技大学 | 被引量 : 0次 | 上传用户:neilakw
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着煤矿智能化程度的提升,智能监控系统在煤矿生产安全中也发挥着愈发重要的作用。对矿井视频场景进行分类,不仅能够为井下视频监控工作提供有价值的参考信息,同时也能为矿井异常事件的排查提供基础。因此,如何准确对矿井视频场景进行分类已成为煤矿视频处理领域的研究热点之一。现有场景分类方法缺乏对矿井视频信息的研究,本文以具有复杂背景的井下视频数据为研究对象,结合视频特征提取、自注意力理论研究了基于深度神经网络的井下视频场景分类方法。(1)为引导更多具有判别性的特征参与分类,本文给出了一种基于改进损失函数的井下视频场景分类方法。该方法首先利用深度卷积神经网络对井下视频图像进行降噪;其次,结合CNN网络和BiLSTM网络学习降噪后的视频时空上下文特征;最后,采用Center loss和Softmax loss进行联合监督分类,以Center loss作为新的具有判别性的正则化项,从而保留类内样本和类间样本的几何分布,实现井下视频场景的多分类。(2)为挖掘更多的视频场景显著信息,本文给出了一种基于分级自注意力的井下视频场景分类方法。该方法首先利用CNN网络提取视频的空间特征,对于空间特征利用一次自注意力计算视频图像的像素关系并加权,使得图像中的显著像素得到较大权重;其次,利用BiLSTM网络提取井下视频的时序上下文特征,并再次利用自注意力对视频帧序列的特征权重进行计算加权,使得视频帧序列中的显著帧特征得到较大权重;最后,利用Center loss和Softmax loss实现井下视频场景的多分类。(3)在煤矿数据集上对给出的两种方法进行了实验验证。实验结果表明,与已有的视频场景分类方法相比,本文给出的基于改进损失函数的分类方法和基于分级自注意力的分类方法能够有效提高井下视频场景分类的准确率。同时,本文还对Center loss和注意力作用结果进行了可视化,分别分析了其对井下视频场景分类的影响。
其他文献
冲拔式冷旋压集成技术作为近年来机械行业所采用的一种高新技术,对研发出高压无缝钢瓶起到了关键性作用。加强对高压无缝钢瓶结构强度的研究,是确保其安全性的重要课题。本文
随着生产自动化水平日益提高,人工成本不断增加,厂区运料AGV(Automatic Guided Vehicle)逐渐被各行各业广泛需求。基于视觉导航的AGV有较好的灵活性和前期投入成本低的特点,
基于虚拟环境的触觉反馈技术是一项允许操作者通过触觉设备控制计算机,模拟虚拟环境中物体运动,并感知其发生碰撞时产生反馈力的技术。在过去的几十年里,触觉反馈技术的快速
基于位置的服务(Location Based Services,LBS)近年来一直是研究热点,无论是在室内还是室外,位置服务都在以它独特的魅力吸引着大家的关注,发挥着重要的作用。随着物联网(Int
目前,SG无线通信工作正在如火如荼地进行,一系列相关规程和关键技术被相继提出。面对当前5G无线移动通信所带来的业务量急速增长的局势,如何使无线频谱资源进行合理分配以缓
泥炭沉积物中有机质氧同位素组成特征被认为是研究古气候变化的重要手段之一,学者在利用泥炭纤维素δ18O在反演古环境变化方面取得了丰硕的成果。对比不同地区泥炭纤维素δ18
地下水是人类生存不可或缺的自然资源。由于生产的发展和生活水平的提高,土壤和地下水污染越来越严重。地下水环境正经受着越来越多的污染冲击。包气带是大气水和地表水同饱
我国有大范围的岩溶区,广泛分布于西南地区、华北地区、西藏南部地区,岩溶区的社会经济发展无法避免的会涉及到岩溶管道相关的工程。经典的达西定律只适用于雷诺数小于10的多
金属卤化物钙钛矿是近几年来倍受关注的一类半导体材料,它具有卓越的光电性能,如超强的光吸收能力,超长的光生载流子寿命及载流子扩散长度,使其在太阳能电池、高分辨率显示、
滇西镇康水头山Pb-Zn矿床是保山地块镇康Pb-Zn-Fe-Cu多金属矿集区内又一重要找矿成果,主矿体呈似层状、透镜状产于上寒武统保山组大理岩化灰岩中,受NEE向断裂构造控制。其矿