引入注意力机制的RGB-D语义地图研究

来源 :安徽工程大学 | 被引量 : 0次 | 上传用户:zmy_java
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
传统同时定位与地图构建(Simultaneous Localization And Mapping,SLAM)技术得到的三维地图没有语义信息,只能在一定程度上满足定位需要。为了进一步提高机器人的智能化水平,需要得到更加有利于交互的环境地图。同时,针对现有的大多数视觉SLAM算法存在的问题,本文提出基于语义的SLAM系统来构建环境语义地图,能够帮助机器人在复杂室内场景中实现更高层次的环境感知和智能交互任务。为了完成地图的更新、校正,并且提高地图的实用性,将得到的语义地图进行存储方式转换。主要研究内容包括:(1)针对室内场景中RGB图像受光照不均影响较大这一问题,引入了深度数据对光照变化具有鲁棒性,能够更好地区分室内环境语义类别,采用了融合深度信息的语义分割方法。在此基础上,为有效融合RGB图像和深度图像特征信息,提出了一种用于优化通道特征融合的语义分割方法,引入注意力机制用于提取重要特征,接着对其做优化处理,在上采样过程中将RGB-D特征逐层有效的融合,捕获丰富的特征信息,提高了图像语义分割精度。在室内数据集NYUD v2和SUN-RGBD上的实验结果表明,本章提出的语义分割网络可以较好地用于室内环境。(2)针对移动机器人自主定位及环境建图的需要,本文研究并设计了视觉SLAM系统。由于传统的ORB-SLAM2构建的地图点云信息稀疏,会造成定位信息丢失。因此,本文在ORB-SLAM2基础上先对输入的关键帧图像进行特征提取,再将其转换成点云的形式表现,最后将点云序列进行融合和拼接,从而得到全局场景的三维稠密点云地图。通过实验验证了该算法在一定程度上减少了由于无效信息导致的误匹配现象,提高了建图精度。(3)通过学习图像语义分割模型,分析视觉SLAM的算法流程,提出了一种语义标注的环境地图构建方法。首先通过语义分割网络获取二维图像中物体的语义信息,然后利用视觉SLAM算法中建立的相邻图像间的像素关联,通过贝叶斯更新方法不断更新、融合二维语义信息到三维环境地图中,最后以点云地图形式保存得到语义地图。(4)为了进一步压缩地图的储存空间,用体素取代点云来构建语义八叉树地图,以便移动机器人更好地完成避障和导航任务。综上所述,整个过程先是对场景中RGB-D图像进行语义标注,然后使用基于特征点法的SLAM技术完成室内场景的三维稠密地图构建,最后将语义信息融合进三维地图中,可得到含有语义信息的三维稠密地图。实验结果表明,提出的语义分割算法和语义地图构建方法都取得了较好的实验结果,为以后移动机器人执行更复杂的高层次任务打下了基础。
其他文献
<正>模切是不干胶标签制造过程中的一个重要印后环节,尤其是大多数的卷筒不干胶标签在印刷后都需要模切成型。目前,市场上的模切方式有很多种,如平刀、圆刀、激光、数字模切等。其中,平刀和圆刀模切是目前较为主流的模切方式。那么,这两种模切方式有哪些优缺点呢?标签印刷企业最关心的使用成本与寿命又是怎样的呢?本文,笔者和大家一起来探讨分析一下,希望可以给读者些许帮助。
期刊
对甲苯磺酸(p-TsOH)是非氧化性的有机强酸,其对纤维素中半纤维素和低聚糖类等非结晶区成分有较好的选择性降解作用,利用其制备纤维素纳米晶体(CNC),降低了CNC中活性基团酸根基团的产生,显著提高了CNC的热稳定性。在p-TsOH质量分数为60%、温度为70℃、反应时间为4 h的条件下,酸解针叶浆纤维制备了CNC。采用粒度测试仪、透射镜(TEM)、X射线衍射(XRD)、傅里叶变换红外光谱(FT-
形式主义与功能主义是世界范围内对所有权保留采取的两条主要立法路径。形式主义承认所有权保留与典型担保物权之间的类型差异,通过合同法等单行法对所有权保留进行规制;功能主义则侧重于交易的目的而非形式,将所有权保留与典型担保物权置于同一立法框架下进行规制。在不同的立法路径下,所有权保留的实质相应存在不同观点。在形式主义下,所有权保留的实质剖析基于所有权构成理论,有附停止条件所有权移转说、附解除条件所有权移
目的 研究温针灸联合康复训练对腰椎间盘突出症(lumbar disc herniation, LDH)患者经皮椎间孔镜下髓核摘除(percutaneous endoscopic lumbar discectomy, PELD)术后恢复进程的影响。方法 将2018年1月—2020年6月医院94例LDH患者采用随机数字表法均分为观察组和对照组各48例,均在PELD术后给予常规治疗和康复训练,时间为3个
档案精准服务是基于满足档案用户精准化信息需求,由传统的档案信息服务模式“进化”而来的一种服务模式。档案精准服务有其逻辑前提,强调的是对用户需求的精准识别、资源的精准供给、对服务的精准管理和精准评估等,要着力从理念、制度、技术等层面破解档案精准服务的制约要素,铺设出精准服务的清晰路径。
在国家治理能力与治理体系现代化建设的背景下,包括聘任制公务员改革、公务员招录、公务员分类管理改革等单项公务员制度在内的我国公务员制度多年来一直处于不断完善的状态。回顾已有公务员制度改革多运用试点这一方式逐步推进,而“摸着石头过河”的政策试点作为富有中国特色的政策模式,在中国语境下有助于新政策渐进、平稳的推进实施。试点的“先试先行”阶段是政策创新推广的前置环节,因而充分发挥试点执行阶段的作用,以最大
随着4K超高清电视推广和音频技术的发展,用户追求高品质音频体验的需求更加迫切,作为传统视音频传播者,广电运营商必须紧跟时代的步伐,为用户提供高质量的音频服务。因此本文设计了基于机顶盒终端音频多模展现并进行推广应用,满足不同用户的业务需求,为用户提供极为震撼的听觉感受。
<正>《背德者》是纪德发表于一九○二年的作品,纪德本人将《背德者》的文体定义为"叙述"(récit),认为"叙述"不同于"小说"(roman),但出于中文习惯,在本文中依然笼统地称其为"小说"。此书初版仅刊行三百册,问世后在法国文坛立即遭遇了一场惨败,甚至几乎成为一出"丑闻",纪德的不少亲密好友由于这部小说的出版与他发生尖锐的争执。
期刊
为探讨露天矿山爆破安全问题与防治措施,采用实际案例结合理论实践的方法,分析了露天矿山爆破中常见的安全问题,并提出相应的防治措施。分析结果表明,爆破是露天矿山开采的时常用的方法,露天矿山自身就存在很多安全隐患,再加上爆破形成的震动和破坏,极易发生各种各样的安全问题,针对安全问题的特点和成因,选择有针对性的防治措施,才能更好的保障露天矿山开发的安全性,提升产量,获得更大的经济效益,缓减金属矿产资源日益
露天矿山边坡存在一定的安全隐患,较容易出现滑坡事故、崩塌事故、倾倒事故,必须认真做好露天矿山边坡安全问题的防护与治理,确保露天矿山的安全。本文先简要分析影响露天矿山边坡安全的因素,进而结合当前的研究成果谈一谈露天矿山边坡稳定性监测与评定的方法,最后分析论述露天矿山边坡安全问题的治理措施,主要包括疏干排水法、削坡减载、挂防护网、机械加固法、控制爆破法,期望可以为从事此类研究的朋友们提供些许建设意见。