基于AMR图的文本摘要技术研究

来源 :战略支援部队信息工程大学 | 被引量 : 1次 | 上传用户:zmz28859330
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
面对互联网上信息爆炸式的增长,作为从海量信息中提取有用信息的关键方法,文本摘要技术一直备受各领域学者的关注。文本摘要是自然语言处理领域的研究热点和难点,它主要研究从海量文档信息中压缩提炼出便于读者阅读理解的概括性文字描述,从而有效降低用户的信息过载问题。文本摘要技术的研究有着众多应用场景,例如新闻标题生成、科技文献摘要生成、搜索结果片段生成、商品评论摘要等,具有广泛的应用价值。目前,伴随着新技术浪潮涌现出了一大批相应的文本摘要方法。但是相关研究仍然存在以下不足和局限性:(1)现有语义摘要方法大多停留在利用浅层语义信息生成摘要,无法充分利用篇章级完整语义信息导致文本摘要质量降低。(2)现有文本摘要的去冗余方法大多基于相同的字词来去除冗余信息,缺少有效去除语义冗余信息的方法。(3)虽然现有文本摘要技术能够有效提取重要字词内容,但是生成摘要的字词之间的语义连贯性仍有待提高,缺少一种完善摘要语义结构的方法。抽象语义图(Abstract Meaning Representation graph,AMR图)的方法能够较好地描述出句子的完整语义结构,但是现有AMR图的文本摘要方法只利用到句子级语义信息。在此基础上,论文基于抽象语义图的方法,进一步利用篇章级语义信息生成文本摘要。本文主要针对文本摘要流程中提取重要语义内容、去除语义冗余信息、完善摘要语义结构这三个重要步骤展开研究。论文的主要内容和创新点如下:1.提出基于加权AMR图的语义摘要子图算法。通过利用AMR总图构建文档整体语义图来利用篇章级语义信息,并提出了一种利用稀疏自编码器来融合多个特征的方法,在AMR图的基础上进行创新改进,根据融合特征对原本不具有权值的抽象语义图节点赋予相应权值,依据权值大小从中抽取重要语义内容生成语义摘要子图,并恢复出文本摘要。实验结果中,ROUGE值的显著提高表明,该算法有效地提高了文本摘要内容的正确性。2.提出基于AMR图的语义冗余信息过滤算法。针对现有文本摘要中存在的语义冗余问题,提出了语义冗余性的概念来描述语义冗余信息,并介绍了利用Word Net语义字典来判断AMR图语义冗余信息的方法,最后通过AMR图融合的方法对摘要冗余信息进行过滤。相关摘要数据集实验表明,ROUGE值提升的同时Smatch值也有较大地提升,相比现有的基于相同字词去除冗余信息的方法,该算法有效地减少了摘要中语义冗余信息的出现。3.提出基于整数线性规划(Integer Linear Programming,ILP)重构AMR图结构的语义摘要算法。为了改善AMR图节点之间语义结构关系,提出基于整数线性规划的方法对AMR图语义结构进行重构,有效地提高了文本摘要的可读性。由于摘要子图节点语义结构不完整,本文利用整数线性规划的方法,通过确定目标函数和约束条件,对重要语义节点之间的语义边关系进行重构,生成语义完整的文本摘要。摘要数据集的实验结果中,该算法的语义特征结构Smatch评价指标的显著改善表明,该算法提高了摘要的语义连贯性,使生成摘要的可读性得以有效提高。
其他文献
长期以来,由于农地发展权保护的立法缺位、农地征收法律制度不健全和严格的法律责任追究制弱化等原因,不合理的农地征收直接损害了农民的土地权益,危害农民自身发展。介绍了
储能技术可以用于可再生能源的高效开发,是解决环境污染和能源危机的关键技术之一。超级电容器是介于锂离子电池和传统电容器之间的新型储能元件,具有廉价环保、功率密度高、
本文从话轮的视角分析了话轮转换、话轮并存、话轮交互、话轮保持对提高学生在真实情境下运用英语进行有效、得体交流,实现交际维持,提高交际能力的重要意义。
针对目前高层建筑设计过程中应用生态建筑学过程存在的问题,本文从实践角度出发,分析了生态建筑学在高层建筑设计中的应用局限,并提出了优化控制的方法策略,其目的是为相关建
动词是句子的结构中心,动词的语义范畴、词义结构是提取句法模式的基础。句法模式只有继承动词相应的语义元素、属性特征才能生成合格的语句。只有动词词义结构中的交际因素
<正>教材与学情分析本单元的教学内容主要是7~9的乘法口诀和用7~9的乘法口诀求商;其中还穿插了乘法竖式、除法竖式,以及连乘、连除、乘除混合运算的教学,最后还安排了"算24点"
肺功能的影像学研究主要是通过形态、密度或信号的改变来反映肺功能的变化,以揭示呼吸的生理病理机制。介绍了用CT和MRI进行肺功能研究的方法、临床意义及其优缺点,并回顾了
体验式营销尤其注重消费者参与及感知的过程,带给消费者难忘和满意的体验过程,往往比产品整体属性更能俘获消费者的青睐,优质的消费体验有利于创造较高的顾客满意度和提升企
加快民族地区经济发展必须发展民族特色的经济。针对黔东南丹寨县两个少数民族村寨的家庭手工业考察结果,总结了民族地区家庭手工业发展的特点,剖析了家庭手工业在发展过程中
本文调查分析了高校部分同学的保险意识,并探究了同学们对待保险的态度。调查发现,通过保险学课程的学习,同学们对于保险的认识更为准确、全面,保险意识明显提高,但仍存在对