基于点云深度学习的机器人抓取系统设计

来源 :浙江大学 | 被引量 : 0次 | 上传用户:dingyougui1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着中国经济高质量发展需求的不断增加和“智能制造2025”战略的持续推进,传统制造业面临越来越大的转型升级压力。制造部门越来越多的工作由工业机器人完成。但是,目前实际生产应用中,工业机器人通常只能通过示教编程的方式按照事先设置好的路径执行规定的动作,而对周围环境缺乏感知能力和应变能力。尽管2D视觉系统在一定程度上提高了工业机器人的感知能力,但仍然无法满足智能制造中常见的对三维物体的抓取和搬运等需要。近年来,深度学习以其强大的拟合能力在工业制造部门得到越来越多的应用,特别是在计算机视觉领域取得了巨大成功。本文针对机器人对零件的智能化抓取这一应用需求进行研究,设计了一套基于红外双目结构光相机的机器人抓取系统,并对其进行实验验证。第一章,先介绍本文的研究背景和意义,然后分析了机器人抓取技术的发展现状,最后讨论了结合深度学习物体位姿检测研究现状,并对研究现状进行总结以突出本文工作的必要性。第二章,对系统需求进行分析后,设计了机器人抓取系统总体方案,并选择相应关键零部件。分析了几种3D相机工作原理,选择了工业用红外双目结构光相机作为本项目视觉感光部件。然后确定选择UR10机器人作为本课题的机器人,并配置了相应的气动夹爪。最后,基于ROS(Robot Operating System)设计了抓取系统的软件框架。第三章,研究点云数据获取及点云前处理算法。首先分析相机单目和双目成像模型,并对相机进行单目和双目的标定。将经过标定的相机获取数据转换为点云后,研究点云滤波、分割、降采样等前处理问题。滤波主要去除点云中的离群点;分割主要用于分离零件数据和工作台背景数据,根据随机采样一致性算法计算工作台背景平面,以该平面为界进行分割,获得只包含零件点云的点云数据。降采样主要用于在尽可能保留零件点云关键信息情况下,降低点云密度,提高后续计算速度,本文实现一种基于体素的点云降采样算法对点云数据进行降采样。第四章,设计了一种基于Point Net模型的点到点机器人抓取算法。首先提出基于Point Net模型的点云深度学习网络总体框架,然后详细分析了Point Net网络模型原理,包括STN模型和感知机模型,并针对点云数据无序、多视角特性进行针对性设计,然后基于该模型提取点云特征的特性搭建用于本文的机器人抓取检测算法。第五章,在Linux下基于ROS搭建了包含PC、红外双目结构光相机、机器人、气动夹爪、控制柜的三维视觉引导机器人抓取系统,对点云数据集的制作进行了阐述。最后对机器人抓取系统进行实验。第六章,对本课题研究的基于点云深度学习的机器人抓取系统设计工作进行总结和展望。
其他文献
本文在工业物联网背景下,从当前数据采集系统国内外发展的情况出发,结合制造工厂实际情况分析,发现当前系统发展主要面临可扩展性、互通性、实时性三方面的挑战。面对这些挑战,在总结历史经验和工作中的项目经验的基础上,文章提出了以嵌入式系统和工业无线通信为技术基础,以无线数据采集模块为核心的数据采集系统。本文主要阐述了系统的整体架构、硬件设计和软件设计。本系统的关键是以STM32F4微处理器为核心的数据采集
为引领未来制造业的发展趋势,推动智能装备业的发展,我国提出“中国制造2025”强国战略,物联网、智能化和网络制造一体化被列为优先发展的三大领域。在此背景下,对老旧设备的优化升级来革新制造现场,不仅可以节约大笔新设备的采购费用,还可以提升产品的品质。电子束镀膜机的发展与计算机技术的发展密切相关。本文在深入研究电子束镀膜工艺原理和控制流程的基础上,针对目前电子束蒸发设备控制系统常规PID参数整定不足、
在传统的机器人电商物流箱体分拣和码垛领域,通常都只需要完成单一的任务,要么只完成箱体分拣任务,要么只完成箱体码垛任务,很少去考虑将箱体分拣和箱体码垛任务结合起来。但现在越来越多的工厂需要采用柔性生产模式,涉及不同尺寸的箱体,在分拣的同时还需要将分拣后的箱体直接进行码垛装箱打包,那么原来的单一箱体分拣或者码垛的生产模式就存在问题。本文针对以上问题,对电商物流场景中机器人箱体分拣与码垛相结合的相关问题
生物土壤结皮在增强土壤抵抗水蚀风蚀能力、改善土壤养分等方面发挥着重要作用,土壤胞外酶活性可作为土壤生化反应强度的微生物指标,对理解荒漠生态系统微生物参与的养分循环过程具有重要意义。选取黄土高原神木县六道沟小流域5个生物结皮发育阶段(裸沙地、全藻结皮、藻-藓混生结皮、藓-藻混生结皮、全藓结皮)的土壤作为研究对象,研究生物结皮发育过程中土壤胞外酶活性(β-1,4-葡萄糖苷酶、β-1,4-N-乙酰基氨基
心率快慢与心律正异常是描述人体心脏健康状态的重要指标。虽然研究者们已经对心率估计与心律失常诊断方法开展了众多有益的研究,但现已提出的心率估计方法与心律失常诊断方法分别依然存在一些不足。心率估计方法依然存在普适性不足的问题,如无法对受噪声影响严重的心电信号或包含某些心律失常的心电信号取得较好的准确性等。现已提出的心律失常诊断方法普遍存在准确性不足的问题。鉴于心率估计和心律失常诊断,这两大任务在心电图
物联网“Internet of Things(IoT)”是引领全球电子信息产业发展的新引擎,在过去的几年里,物联网及物联网传感器的市场容量及贸易规模一直保持着快速增长。物联网传感器由于其应用场景和特殊结构对制造工艺提出了新的要求,比如MEMS加速度和陀螺仪惯性传感器由于其内部包含可移动悬臂梁质量块,这些质量块微结构具有高的表面积/体积比,表面作用力对这些微结构的影响会显著增加,微结构表面作用力主要
核桃(Juglans regia L.)和枣(Ziziphus jujuba Mill.)是新疆特色林果产业规模最大的两个树种。作为药食同源的果品,核桃仁和枣果实具有重要的食用价值和营养保健功能,是生物活性化合物的重要来源。近年来,虽然有关核桃和枣的功能性成分-核桃油脂和枣多酚的组成、含量及其健康益处被广泛研究,但涉及不同品种核桃油脂积累和枣原花青素合成的分子机制却鲜有报道。因此,本研究以不同发育
随着互联网、物联网以及人工智能技术的普及,工业领域对于个性化定制产品和服务有着迫切的需求,论文研发了个性化定制茶叶罐生产线总控系统,对其订单任务的调度问题进行了研究。首先,综合分析了研究背景、意义及课题来源,指出了个性化定制将成为未来企业生产制造的主流方向,并对生产线总控系统和生产调度问题研究现状进行简要的介绍。针对个性化定制茶叶罐生产线的实际需求,确定了论文的研究课题,并提出了主要研究内容和组织
一个合理的项目管理方式是中国船舶制造企业进行项目计划、管理、控制、反馈、更新的重要保障,尤其在船市不景气、订单剧减、船价偏低的买方市场下,卓越高效的船舶建造管理也是船舶制造企业提高核心竞争力的重要手段之一。本篇论文以采用现代造船模式的ZZ船厂为研究背景,以该船厂的5000DWT多用途系列船1号船-4号船项目管理中存在的每船进度管理和建造周期问题为主要研究和分析对象,以项目组织构架和权责分配问题研究
随着“中国制造2025”计划的推进,我国工业制造行业的智能化程度不断提升,但依然有部分环节的关键技术有待研究。纺织品质量检测问题一直是纺织行业在实现自动化生产过程中的薄弱环节,大量的质量检测工作仍依赖人力,但依赖人力的质量检测环节成本较高,且质量状况不稳定。根据以上问题,本文旨在设计基于深度学习技术的纺织物质量图像检测系统,主要研究了以下几点内容:1.设计了适用于工业现场的图像采集系统,并对纺织物