图像语义分割中困难区域挖掘及分割模型的研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:liwang0113
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
语义分割是计算机视觉领域的核心问题之一,它是指机器自动识别图像,对图像进行像素级别的分类,为物体提供类别、位置和形态信息,在自动驾驶、遥感图像处理、医疗诊断和时尚搭配等领域有较好的应用前景,因此语义分割具有十分重要的研究价值。
  本文对基于卷积神经网络的语义分割方法进行总结分析,对以下问题展开研究:第一,语义分割中存在较难训练的区域影响分割精度;第二,U型架构通过前后层特征融合,对细节信息进行了相应的补充,但没有考虑图像的上下文信息和前后层特征的差异;第三,在语义分割任务中,精度和速度同样重要,如何在速度和精度之间获得较好的平衡是一个较为重要的问题。上述问题对于提升分割网络的性能具有重要作用,本文具体工作如下:
  (1)对目前存在的困难区域影响分割精度的问题展开研究,提出了一种困难区域挖掘的训练方法。无差别的训练方法使图像中困难区域训练不充分,进而导致了误分类问题。为了让模型在训练过程中增加对困难区域的关注,本文提出了一种困难区域挖掘的训练方法,该方法通过在训练过程中自动挖掘困难区域,增加对困难区域的关注,从而提高分割精度。由于是对训练方法的改进,因此适用于各种网络架构,且不会增加网络的推断时间。实验结果表明,该方法对不同数据集和不同模型,均可以有效增加分割精度,减少误分类情况的出现。
  (2)针对U型架构的不足,提出了一种新的语义分割模型MSFFNet(Multi-scale feature fusion network)。该模型在U型架构基础上,引入上下文特征聚合模块(Context Feature Aggregation Module,CFA)和注意力模块(Attention Module,AM),前者可以聚合上下文信息,后者可以增加前后层特征融合的有效性。实验结果表明,上下文特征聚合模块和注意力模块均可以有效提高分割精度。与现有的语义分割网络对比,MSFFNet可以在25FPS的情况下获得75.7%的平均交并比。
  (3)综合考虑速度和精度,提出了一种快速语义分割模型Fasnet(Fast segmentation network)。Fasnet结合编码解码架构和稠密空洞空间金字塔池化模块的优点,有效地利用了多种信息。为了增加分割速度,对编码端、解码端和DenseASPP模块进行了不同程度的压缩,保证在有限的参数下,提取更多特征。Cityscapes数据集的实验结果表明,该网络可以在62.5帧每秒的速度下获得71.37%的平均交并比。速度精度对比图表明Fasnet在速度和精度上获得了较好的平衡。
其他文献
摘要:公司治理结构中包含了不同的利益者,比如股东和董事等等,在实际工作中为了促进公司的稳定性发展,要加強对各个利益方之间的协调,明确主要战略发展思路,并且还要严格遵循我国的相关法律法规,优化公司的治理结构,从而凸显公司现代化的发展水平,促进我国社会经济的稳定性发展。因此在实际工作中需要加强对公司法和公司治理结构的有效认识和了解,从而推动公司的稳定发展。  关键词:公司法;公司治理结构;研究  在我
期刊
摘 要:立足边疆、边境、民族地区实际,深化边疆党建长廊建设对当地经济社会发展有重要意义。本文据镇康县党建扶贫维稳“三推进”工作的实际开展情况,针对当前存在的一些主要问题,提出了一些改进完善的建议,以期使此项工作达到“凝聚人心、汇聚力量、强化服务”和“党的光辉照边疆、边疆人民心向党”主题教育的总体目标。  关键词:边疆;党建长廊;建设;研究  镇康县地处云南省西南部,临沧市西部,国境线长达100公里
期刊
摘要:较之传统的植入式广告模式,新媒体环境下广告信息与媒介内容的边界更加模糊,植入式广告具有更强的隐匿性。未成年人受其心智发展水平的限制,对商业宣传中的劝服诉求缺乏足够的辨识能力,导致植入式广告中所携带的价值观念更容易对未成年人造成影响。从伦理价值角度出发,新媒体内容中电子烟产品、酒类产品、整容及减肥类产品的广告植入,都存在误导未成年人价值观念的风险,政府及相关行业应予以重视,加强监管。  关键词
期刊
摘要:随着“一带一路”倡议的推进,经济全球化进程加快,中国与国际间的合作日益加强。在此背景下,中国迫切需要懂法律又能与世界各国进行交流的人才来帮助国家处理涉外事务。本文通过对“法律+英语”复合型人才的现状和困境进行分析,结合当前中国法治建设进程,对法律英语未来的发展提出对策性建议。  关键词:“法律+英语”复合型人才;发展困境;人才培养机制  引言  法律英语是一门工具性语言,属于“特殊用途英语分
期刊
摘要:美是无处不在的,伴随中国油画美学思想的形成,油画艺术的美分为多种种类,而艺术的典型美感就是一种特例,即油画作品的美作用于观者而引起的一种自我的意识活动和情感活动。笔者接下来将对我国当代油画大家的著名作品加以阐释其艺术的典型性,在深入探讨过程中主要从罗中立、董希文,赵无极,靳尚谊的作品入手论证,分析解读,说明其绘画的美感典型性。  艺术典型有着很强的独特性,与不同的用技法相结合会产生不同的艺术
期刊
摘要:在高校的教育教学过程中,教师应该注重对学生的心理健康教育与管理。在实际的教学过程中,不断地寻求更为科学的心理健康教育与管理方法及路径,能够保证大学生心灵的健康成长,能够在我国教育体系不断完善的基础上,逐渐提高大学生的心理健康认知。这样一来,大学生的心理素质才会更强,更为优化,有利于引导他们树立正确的人生价值观,为他们后续的发展奠定更为坚实的基础。文章基于此点,对高校大学生心理健康教育与管理方
期刊
摘要:伴随我国经济的不断发展,社会各个行业的竞争愈演愈烈,高等教育作为人才培养的主阵地,特别是这些年来不断扩大高校的招生名额,更是对教育提出了更高的要求。英语作为高校学生的重要课程,对进一步提升学生的跨文化交际意识以及提升学生的英语运用能力发挥着重要的作用。作为高校的英语教师要不断深入分析目前大学英语教学中存在的问题,同时结合实际教学情况采取科学有效的措施不断优化教学模式,进而促进学生更能全身心投
期刊
摘要:在高职院校教学过程中,教师需要不断寻找突破点,对教学方法进行创新,对教学内容进行调整,使学生学到的内容能够与社会发展相联系,增强知识的实用价值。而高职院校的财务管理和管理会计是两门非常重要的必修课程,随着两门课程的创新与发展,我们发现二者内容具有交叉的部分,联系十分密切,如何在短时间内教给学生二者的差别,达到教育教学的目标是困惑授课教师的一大问题。本文主要围绕高职院校财务管理和管理会计两门课
期刊
摘要:我国正处于十四五的开端之年,社会经济得到不断发展,这也导致航空行业同样对自身服务进行不断完善,飞机属于最快捷的交通工具之一,人民群众选择乘坐飞机最关键的一个原因就是其具有比较优秀的航空服务。因此,人们愈发重视航空服务质量,航空企业同样非常重视航空服务人员素养。基于此,通过对航空服务人员素质提升的课堂教学展开分析,发现航空服务人员的服务原则,并提出航空服务人员素质提升的课堂教学方法,为后续相关
期刊
摘要:材料作为一种全新的艺术表现载体,不仅对当代艺术影响深远,同时也为中国当代油画注入了新鲜的血液,并为当代油画的发展开辟了一个薪新的空间。研究油画创作中材料载体的应用,对于丰富和扩大绘画语言的表现力,开发艺术家的潜能,发挥材料本身的特征具有重要意义。本文将从实物载体、无实物载体、材料载体在油画中的表现等三个方面来论述油画创作中材料载体的表现运用。  关键词:材料;油画;表现;实物载体;无实物载体
期刊