基于稀疏编码算法的多视频摘要研究

来源 :天津大学 | 被引量 : 0次 | 上传用户:moimon
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在线视频的爆炸性增长使得快速准确浏览和管理感兴趣的视频内容变得越来越急迫。视频摘要旨在通过将一个或多个视频转换为紧凑的摘要,是解决此问题的一种有效技术。不同于单视频摘要,多视频摘要具有内容多样性、重叠性且有较多的冗余和噪音信息,从这类复杂信息中找到具有代表性的重要视觉信息构成摘要是一项充满挑战性的任务。传统的多视频摘要方法忽略了用户的搜索意图,产生的结果并不理想。为了使摘要结果更加符合用户的需求,本文对面向查询的多视频摘要技术进行深入的分析与研究。首先,提出一种基于稀疏编码的查询感知多视频摘要框架(Query-Aware Sparse Coding for Multi-Video Summarization,简称为QUASC),可提供全面且简洁的待查询内容的相关信息,还可有效地提供在线视频的管理和浏览。具体地,本文设计了一种基于稀疏编码框架的多视频摘要的新型查询感知方法,将查询搜索到的网络图像作为重要的用户偏好信息来揭示查询意图。为了提供用户友好的摘要,本文通过使用无监督的多图融合方法来实现与查询相关的特定事件组的检测,提供了一种事件关键帧呈现方式。其次,提出一种基于稀疏自编码器的多视频摘要方法(Multi-Video Summarization with Importance-Aware Sparse Auto-Encoder,MVS-IASAE)。其将基于查询的网络图像信息作为重要性约束添加到稀疏自编码器中用于指导重要视频内容的获取,提出了一种重要性感知的稀疏自编码器的多视频摘要框架,同时考虑了生成摘要的重要性、代表性和稀疏性。此外,还提出了一种自下而上排序算法呈现多视频摘要,提高摘要的可读性。最后,构建了一个名为MVS1K的大规模多视频摘要数据集,其包含十个查询事件下的约一千个视频及其视频标签、人工标注和关联网络图像。本文提出的QUASC和MVS-IASAE算法在MVS1K数据集进行了实验验证,通过与先进的多视频摘要方法进行比较,验证了所提摘要方法的有效性和先进性。
其他文献
随着全球化进程的不断推进,世界各国在各个领域的交流活动也不断增多。不同领域的交流活动有着不一样的目的与功能,为了能够保证跨文化沟通交流的顺利、准确,口译员在各类交
广播媒体是中国媒体竞争市场不可或缺的组成部分。做为内蒙古自治区唯一—家双频播出的广播电台,如何在媒体市场化进程中探索出适应自身发展的经营之道是摆在我们面前的重要
红外成像技术的发展,加速了红外图像处理领域的发展与应用。其中,红外小目标检测是在军事,交通,监控等领域的热点问题。本文针对机载红外小目标图像序列进行研究,提出一种贝
东北地区作为我国重要的玉米生产基地,温度和降水是限制玉米产量持续增长的关键因素,明确气候变化对玉米产量的影响以及改进栽培技术及其应用对保证东北地区粮食稳产高产具有
“三农”问题一直是国家重点关注的问题。为切实解决“三农”问题,2017年党的十九大报告中提出乡村振兴战略,着力培养一支懂农业、爱农村、爱农民的“三农”工作队伍。在国家的大力支持下,我国的农业科技转化率逐步提高,但目前我国农业科技水平仍然较低。农科专业教师是农科技术人才培养和服务乡村振兴的核心力量,做好农科专业教师培训工作,培养一支高质量的农科教师队伍,是提高中职学校农科人才培养质量的必备条件,也是
局部二值模式(Local Binary Pattern,LBP)是人脸识别中的一种有效特征描述子。与实值描述子相比,二值描述子可以有效节省内存,实现更快的计算速度,且对外部环境的变化具有较强的鲁棒性,具有较高的研究价值。然而,二值描述子在量化过程中丢失了大量有利于识别结果的细节信息。同时,传统的手提二值描述子对某些非受限环境下的干扰(例如:表情,姿态,模糊)鲁棒性较差。当图像中的人脸带有一定的偏转
MiRNA-324-3p通过靶向下调MC1R基因及其下游黑色素合成相关基因的表达水平,减少黑色素的合成。α-黑素细胞刺激素(α-MSH)是一种重要的神经内分泌激素,通过与其天然受体MC1R结合,影响黑色素的合成。miRNA-324-3p和α-MSH均可以通过调控MC1R基因在羊驼黑色素细胞产生黑色素过程中起到非常重要的作用,然而当二者同时作用于黑色素细胞时,究竟如何影响黑色素细胞内黑色素的形成尚未
随着WEB应用的迅猛发展,近年来针对WEB应用的攻击层出不穷,传统防火墙已不足以应对这些WEB攻击,因此国家和企业对WEB安全网关的需求逐年上升。WEB应用对传输时延敏感,因此,对
自2006年3月,世界上第一个微博网站Twitter在美国诞生后,进入门槛低、互动性强、影响范围广的特点使得微博网站成为Web2.0时代下的热门产品,一时间众多仿效者纷纷出现。在国
为了明确籼型血缘对东北水稻产量和品质的影响,以由Sasanishiki×Habataki再回交Sasanishiki两代获得的85个BC2F5株系为试材,分别在沈阳、长春和哈尔滨种植,以来自籼型亲本分