面向观众的电影情感内容表示与识别方法研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:kaka43210
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着数字音视频数据的爆炸性增长,从这些非结构化数据中自动提取富含语义的内容成为当前面临的一项挑战,由此引发的相关研究热潮催生了基于内容视频检索(CBVR)这一研究课题。视频情感内容是人们理解视频内容时的一个重要但是经常被研究者忽略的因素。作为CBVR研究领域中的一个新兴研究方向,视频情感计算可以利用CBVR和情感计算的相关理论理解视频情感内容。但是,由于人类情感与低层特征之间存在较大的“情感鸿沟”,目前仍然缺乏一个统一的理论框架用于视频情感内容理解。在此背景下,以电影视频作为研究对象提出一种面向观众的电影视频情感内容表示与识别方法。为了有效表示电影视频的情感内容同时反映观众的个性情感特征,提出一种面向观众的电影情感空间建模方法。通过引入典型模糊情感子空间的概念,该模型可以统一离散和连续两大流派的心理学情感模型。模型采用模糊C-均值聚类算法划分情感空间,利用高斯混合模型确定划分出的典型模糊情感子空间的情感隶属度函数。该电影情感空间可以反映观众的个性化情感体验,能够在情感空间中定义典型情感状态区域,并且能够方便地计算各种情感状态的情感强度。实验结果验证了建模方法的有效性,并且表明该电影情感空间可以面向观众地表示电影情感内容。为了在低级特征与电影情感内容之间存在的“情感鸿沟”之上架起桥梁,依照情绪心理学和电影创作的相关理论,设计、提取和选择了一组电影情感特征。利用Whitney特征选择算法选择出两组电影情感特征向量,其中一组用于描述情感诱力,另一组用于描述情感激励。实验结果表明,提出的电影情感特征向量在区分情感诱力和激励的正负时优于现有研究结果。为了有效检测电影情感内容,提出一种基于激励曲线和电影情感树的多级电影视频摘要生成算法。基于此算法,可以从原始影片中检测出情感语义较为显著的部分。激励曲线是一种可以用来度量电影观众情绪兴奋度随电影情感内容起伏变化的曲线。首先利用激励曲线定位不同情感粒度的电影情感单元,然后将这些情感单元按情感粒度大小逐级组织起来即可生成电影情感树。电影情感树的每层节点都对应着原始电影的一个电影视频摘要。为了识别电影视频摘要中各情感单元的情感内容,研究中提出两种情感识别方法:基于基因-隐马尔可夫联合模型(GA-HMM)的情感内容识别方法和基于情感空间的情感内容识别方法。GA-HMM情感识别器可以用于识别观众的基本情感事件。实验结果表明与传统的隐马尔可夫模型相比,GA-HMM可以在减小计算量的同时获得更高的情感识别率。基于情感空间的情感内容识别方法采用多层感知机和多元线性回归计算电影情感单元的情感坐标。基于电影情感单元的情感坐标和电影情感空间的情感隶属度函数,该方法提出“最大隶属原则”和“阈值原则”,用来表示和识别观众观影过程中的个性化情感体验。实验结果表明,该方法能够有效地表示和识别个性化电影情感内容。电影情感内容表示与识别需要研究的问题还很多。在电影情感空间建模方面,现有的建模方法完全依赖观众自己标注的情感评价数据建模,给用户带来的负担较重,如何利用已有的其他用户的情感数据为一个新用户服务是未来的一个研究重点。由于人类情感与视觉和听觉之间的内在联系尚不明朗,现有的电影情感特征向量在区分情感诱力正负时的识别精度还不够理想,必须进一步结合领域知识设计更加合理的情感特征向量。此外,建立面向观众的电影情感空间时考虑的观众群还比较有限。为了能够更准确地描述观众的个性情感信息,在今后的研究中还需要进一步扩大采集情感信息的观众群。
其他文献
全面阐述了2017年我国海洋经济总体发展情况和主要海洋产业发展特征,并通过分析海洋领域供给侧结构性改革取得的成效,得出基本结论:2017年,海洋经济总体稳中向好,海洋产业结
自海宁市有线电视台成立16年以来,海宁有线网络规模日益扩大。传统的强烈依靠人工、文档分散、不规范的有线电视网络资源管理模式,导致了网络资源状况不明,网络资源统计数据
中小企业融资困境作为一个普遍性问题,长期受到各界的关注,但对于困境的解决一直收效甚微。因为行业原因,涉海中小企业的发展更受到融资瓶颈的制约。根据已有的理论分析,中小
分离灌注与局部灌注透析技术治疗盆腔肿瘤已有很多年的历史.近年来随着介入技术的发展,使这两项技术创伤更小,更易于操作,可以多次重复进行.这项技术可以明显提高局部的血药
以海洋功能区划中海域分类为对象,在借鉴国内外自然资源资产核算方法的基础上,设计了海域资源资产核算的实物型和价值型账户.对已确权进入经济使用中的海域资源进行经营权益核算
肝移植是目前末期肝病的一种治疗选择,成功率不断提高,移植术前病人的选择及移植术后预防并治疗其并发症是十分重要的.影像学的各种检查已越来越多地应用在这些方面,对术前肝