基于多特征注意力语义分割网络的研究

来源 :黑龙江大学 | 被引量 : 0次 | 上传用户:lz274458795
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像语义分割任务中,难点之一便是如何在卷积神经网络的计算复杂性和分割精度之间达到高效平衡。为了追求高分割精度,通常采用深层网络作为主干网络,例如ResNet50和Xception65等,同时采用小步幅下采样,尽可能保留细节信息,避免细节信息过度丢失。这带来的弊端就是参数量和计算量剧增,网络的计算复杂性大,具有代表性的算法是Google提出的DeepLabV3+。为了追求低计算复杂性,使网络尽可能达到实时性,通常采用轻量级网络作为主干网络,例如ShuffleNetV2和MobileNetV2等,弊端是网络的分割精度有限。为了实现网络训练成本的降低,在保持高精度的同时大大降低计算复杂性,本文提出了多特征注意力有效聚合模块(MAEA)。MAEA模块选取主干网络中不同阶段提取的不同分辨率的低级特征,这些多特征保留着对应阶段提取的细节信息。MAEA通过空间注意力机制对多特征进行处理,产生语义级注意,使模型注意特征图中感兴趣的特征空间区域,由低分辨率向高分辨率学习相邻多特征之间的语义流,逐级聚合多特征的语义级注意,凸显出重要的特征域,获得具有强大语义表示的高分辨率特征,为解码器提供足够的重要细节信息,实现高精度分割。针对语义分割网络的分割精度与计算复杂性之间的平衡问题,本文基于多特征注意力有效聚合模块,提出了MAEA-DeepLab深层网络。MAEA-DeepLab对Xception65网络稍作修改,采用16步幅下采样的Xception65网络变体作为编码器主干网络。大步幅下采样提取小分辨率特征,虽然会造成过多的细节信息的丢失,影响分割精度,但在解码器中嵌入MAEA模块后可以恢复足够的细节信息,实现高精度分割。同时小分辨率高级特征的提取大大降低网络的参数量和计算量,实现了网络的高分割精度与低计算复杂性之间的平衡。为了验证多特征注意力语义分割网络的有效性,本文在PASCALVOC2012数据集和Cityscapes数据集上分别进行了语义分割基准测试。MAEA-DeepLab不经过COCO数据集的预训练,仅使用两张RTX 2080ti GPU,在PASCAL VOC 2012数据集和Cityscapes数据集的测试集上,m IOU分数分别达到了87.5%和79.9%。MAEA-Deep Lab的参数量为78.9M,浮点运算量FLOPs为395.8G,计算量仅为Deep Lab V3+架构的30.9%,不但计算复杂性大大降低,而且分割精度与Deep Lab V3+几乎持平。由于本文仅使用两张RTX 2080ti GPU,所以网络在Cityscapes这种大分辨率图像数据集上训练不够充分,精度上存在缺欠,这表明MAEA-Deep Lab网络计算复杂性相对于轻量级网络来说依旧较大。针对MAEA-Deep Lab网络不够轻量的问题,本文基于多特征注意力有效聚合模块,提出了MAEA-MobileNet轻量级语义分割网络。MAEA-MobileNet的参数量为5.0M,浮点运算量FLOPs为44G,在PASCAL VOC 2012和Cityscapes的测试集上mIOU分数分别达到了78.1%和74.3%,网络具有较高的分割精度的同时实现了轻量级,MAEA-MobileNet性能优于LiteSeg等大多数主流轻量级语义分割网络,可以部署到具有实时性应用需求的移动端,实现了分割精度和计算复杂性之间的平衡。
其他文献
本症按现代医学认为是嘌呤代谢紊乱所致疾病,其临床表现为“高尿酸血症伴痛风性急性关节炎”。本症早期局部软组织肿胀。病情进展各关节时可引起不同程度的关节骨质变形、变态或软骨破坏,最终可产生退行性骨关节病,出现脱位或关节强直。临床症状是单一关节或局部关节红、肿、
会议
禽尿石病为何频频发生■谢善勤(中国畜牧兽医学会家禽学分会)禽尿石病又称痛风,另名中毒性肾炎、肾性痛风、肾结石、内脏或营养性痛风等等。特征剖检病变为石粉状沉积物布满各内脏器官表面,有时仅见输尿管粗大,肾脏肿胀数倍,肾小管中充满尿酸液清晰可见,或在输尿管...
期刊
本论文的翻译材料选自《俄罗斯与世界:2020年经济与外交政策年度预测》的第二部分,此报告是俄罗斯科学院世界经济和国际关系研究所所发布的权威性报告。报告的第二部分为外交政策,分析了俄罗斯面临的主要外部挑战以及应对措施,全球安全与军备控制问题,对国际关系的发展进行了预测。通过对此类文本的翻译可以了解国际形势的最新动态以及俄罗斯的外交政策,具有重要的现实意义。本文属于科学语体,书面性强,词汇上多采用社会
在经济全球化的今天,日新月异的数字化技术加速了跨境贸易的发展进程,跨境电商平台如雨后春笋纷纷涌现,这在很大程度上冲击了传统的贸易模式。本文以传统外贸企业建设阿里巴巴国际站为例,着重探讨了传统外贸企业发展跨境电商业务所面临的问题与挑战,并对其未来发展路径提出了相关建议,以供参考。
我国全面建成小康社会工作已完成,国民素质得到很大的提高,人们想要寻求更好发展的需求也越来越强烈。而在社会发展过程中,城市建设的主力军依然是农民工,但是他们在进城务工的过程中面临的问题仍然得不到很好的解决,尤其是女性农民工,她们在城市中的就业、社会保障和日常生活等各方面都更加困难。研究运用个案访谈的方法对12名女性农民工进行深度访谈,从经济生活、社会保障和社会融入三个方面了解女性农民工的生存现状,并
近些年关于捕食模型的研究成果已经相当丰富,但考虑植物地下部分对植物生长影响的模型并不多见.传统的生物模型植物多以Logistic形式增长,然而自然界中植物根部具有再生能力,因此,综合考虑植物地上部分和地下部分对生物种群的影响,基于此本文研究了具Logistic增长和再增长的扩散草本植物与植食者模型,主要工作如下:首先,概述课题研究的背景和现状,建立具Logistic增长和再增长的扩散草本植物与植食
随着船舶排放法规的日趋严苛和世界能源的日益短缺,高热效率、低排放的节能环保发动机成为船舶动力发展技术的主导方向,液化天然气具有能量密度高、排放低、便于运输等优点,被认为是船舶动力最有发展潜力的绿色燃料之一。在未来的船舶动力中,天然气柴油双燃料发动机以其生产改制方便、燃料可选择性灵活,以及其良好的环保性、经济性等多重优点,已成为国内外船舶绿色动力前进的方向。正文以理论分析和台架试验的方法,研究了船舶
热传导方程逆源问题是一类重要的热传导反问题.本文研究一类带有Riemann-Liouville导数的分数阶热传导方程逆源问题.这类方程被用于描述众多反常扩散问题,比如污染物的扩散,热量的传输等,反演分数阶热传导方程源项问题具有实际研究意义.由于热传导方程逆源问题在Hadmard意义下是不适定的,求解该问题,关键是寻找一种稳定的算法来克服问题的不适定性.本文利用Tikhonov正则化方法及Landw
随着互联网的快速发展,复杂且相互关联的数据大量增长,这些复杂且相互关联的数据通常用图模型表示,随着图的广泛应用,高效的图数据管理技术也变得越来越重要。图搜索操作频繁使用在大规模图数据库的检索中,因此受到广泛关注。图相似性搜索是一种常见的图数据库操作,其中最常用来衡量图相似性搜索问题中的相似性度量为图编辑距离(Graph edit distance,GED),它可以应用于任意类型的图结构,并且可以精
隋唐时期,山水画逐渐成为一门独立的画种开始大量出现。先后出现了青绿、水墨等山水表现技法。在青绿山水画中《明皇幸蜀图》则是典型代表,对于研究早期山水画的发展及面貌特点具有重要价值。现存山水范本有限,也给研究早期山水画带来了诸多不便于困难。而这一时期的壁画山水也受到了青绿技法的影响,217窟的《化城喻品》则是其中的典型代表,与早期的壁画山水相比技法更加完善,多用墨线勾勒再用矿物颜料上色,层次丰富,此时