基于异构双目视觉的目标双极线匹配与双重定位技术研究

来源 :天津理工大学 | 被引量 : 0次 | 上传用户:wj3722858
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,智能机器人技术产业不断发展,人工智能、图像识别、多源传感器融合等技术逐渐应用到各行各业。随着家畜设施化养殖产业不断规模化、系统化,巡检机器人在家畜健康检测应用场景中得到了广泛的应用。巡检机器人可以搭载红外热像仪、高清彩色相机等感知元件,进而采集多源信息,为家畜目标健康行为分析提供数据支持。本文针对巡检机器人在家畜健康巡检任务中异构双目视觉的目标匹配与定位技术需求,创新性地提出了一种异源图像相同标定点检测排序算法,完成对异构双目立体视觉系统标定;提出一种异源图像ROI区域双极线约束匹配算法,对异源图像上的相同目标进行匹配;结合RFID技术和设施化环境信息,研究基于异构双目立体视觉的目标双重定位技术,实现家畜目标身份信息感知。首先,针对由红外热像仪和高清彩色相机所组成的异构双目立体视觉系统,设计了一种异构双目立体标定方法,实现了异源图像相同标定点检测排序,同时基于张正友标定法完成巡检机器人异构双目视觉系统的标定,得到相机系统的内外参数。然后,结合异构双目视觉数学模型,提出一种异源图像ROI区域双极线匹配方法,实现了异源图像目标匹配;针对“一对多”匹配失败情况,采用待匹配区间约束法和自适应视差约束法相结合的策略,实现高精度异源图像目标匹配。该匹配方法可以满足家畜巡检的实时性和精确度要求。其次,基于三维重建技术,使用异构双目视觉系统完成目标视觉定位。结合巡检机器人结构参数模型,构建相机、云台、升降杆、机器人底盘与世界坐标系之间的坐标变换数学模型。在获得目标在世界坐标系下位姿的同时,结合RFID定位技术和设施化养殖环境,研究目标的双重定位技术,实现家畜目标身份信息感知。最后,将上述算法部署到Jetson Xavier NX嵌入式开发板并接入巡检机器人系统。通过行人目标实验,验证了算法的准确性。通过奶牛和生猪殖场现场试验,验证了系统的稳定性和可行性。此外,基于QT开发了一个可视化界面,进而便于畜禽养殖专家调取视频并对家畜目标健康分析。
其他文献
随着互联网的飞速发展,在相关领域产生了大量的数据,硬件的计算能力也产生了翻天覆地的变化,逐渐地使得深度学习在人工智能领域有了更多的发展。但是很多深度学习方法依赖于大量的标注数据,数据量的庞大让标注变得费时费力,为应对这种实际情况,弱监督学习引起了研究者们浓厚的兴趣。多示例学习作为弱监督学习中的不确切监督算法,在诸如计算机视觉,音频检测等相关领域得到大量应用。本文将对基于包空间的多示例学习算法进行研
白细胞是人体免疫系统的重要组成部分。白细胞的类别和数量提供了关于人体健康状况的重要信息。近些年来,白细胞的自动检测是医学图像处理中具有代表性的课题之一。现有一些专门针对医学图像分割的网络,但对于多尺度和多染色情况的白细胞显微图像,还没有更合适的方法。针对上述问题,本文做了如下工作:本文建立了一个新的白细胞数据集,由两部分组成,一部分是由天津医科大学提供的白细胞显微图像,共302张;另一部分是来自公
全固态锂金属电池因其高能量密度和高安全性能而引起科研人员的广泛关注。然而,固态电池中的关键部分固态电解质还存在一系列亟待解决的问题,比如离子电导率低,电化学窗口窄,金属锂负极-固态电解质的界面接触差、锂枝晶易生长等问题。本论文以PEO基固态电解质为基础,通过加入双填料(即活性填料LLZTO颗粒和惰性填料纳米Ti O2)的方法,对PEO基固态电解质进行改性,着重研究了纳米Ti O2填料对PEO基复合
随着碳达峰、碳中和目标的提出,全球各国家对清洁能源的需求不断增加,可再生能源得到了广泛的关注。风能资源丰富,具有高可用性和高成本效益,是目前全球发展最快的可再生能源领域之一。然而,大多数风电厂通常位于低温、高湿度的海上或高原山区,导致风机常常面临叶片积冰的问题。叶片上积冰不仅会影响风力涡轮机的发电性能,还会对风机本身造成损害,甚至可能会给电厂附近带来安全问题。所以风机叶片积冰检测工作至关重要。传统
在众多新型智能材料中,形状记忆合金因具有形状记忆效应和超弹性,引起了研究人员的广泛关注。本文首先基于Boyd和Lagoudas本构模型对形状记忆合金材料的相关力学行为进行了有限元模拟研究,对形状记忆合金材料进行了力-热耦合分析和局部循环加载-卸载分析,并分别研究分析了在两者情况下的马氏体体积分数的变化情况。除此之外,对形状记忆合金材料的形状记忆效应也进行了分析。最后通过已有的实验结果验证了有限元数
橄榄苦苷取自于橄榄树的枝叶,分子式为C25H32O13,是一种无毒的裂环烯醚萜苷类化合物;研究表明橄榄苦苷具有抗真菌、抗病毒、抗氧化以及抗癌等多种药效作用。本文以纯度作为指标,详细研究了硅胶柱层析、葡聚糖凝胶层析及制备型色谱等技术纯化橄榄苦苷的工艺条件,并采用响应面分析法优化了纯化技术参数,得到高纯度产品;对橄榄苦苷进行了定性定值以及体外抗氧化能力的研究。首先详细考察了橄榄苦苷的超声提取条件,确定
目前,表面采用复杂曲面的机械零件越来越多,切削加工零件表面的成形运动也趋于复杂化。机床切削加工时,刀具切削刃曲线/刀具曲面、机床运动和工件表面三者之间有严谨的几何学关系,另外,机床运动还和刀具的类型有关。本文首先研究了基于几何学和刀具分类的机械零件切削成形方法,包括:(1)使用非旋转刀具,由切削刃曲线的运动扫描形成工件表面;(2)使用旋转刀具,工件表面为刀具曲面运动所形成曲面族的包络。在上述研究的
目标跟踪指在连续视频序列中对目标进行定位,被广泛应用于安防监控、定位建图和智慧城市等多个领域。在实际跟踪过程中,往往同时存在多种挑战性因素,如背景光照变化、目标快速运动和非刚性变形等。一方面,当跟踪准确率较低时,传统算法往往继续进行模板更新,导致跟踪框逐渐漂移无法恢复定位。另一方面,在长时目标跟踪中,存在目标被严重遮挡甚至短暂离开视野的情况,传统算法不具备再次找回目标的能力。因此,本文针对上述问题
当今世界各国面临能源与新冠疫情的双重危机,工业生产受到明显抑制。在严控疫情的当下,我国不仅保持工业生产活力的持久性,且提出了新能源开发与金属腐蚀防控的开源节流战略方针。摩擦纳米发电机(TENG),作为一种新型能源器件受到越来越多研究者的关注,在能源开发、金属腐蚀防护、生物医疗等多个领域做出了重要贡献。TENG具有稳定性高、无需维护、成本低廉无环境污染等优势,是对能源利用革命性的创新。本文在对TEN
聚乳酸(poly(lactic acid),PLA)是一种环境友好型的可生物降解材料,因其良好的生物相容性和生物降解性而成为替代传统石油基材料最有前途的候选者之一。但由于PLA的易燃性、结晶能力差等缺陷使其在许多应用领域中受到了极大的限制。因此,提高PLA的阻燃性能和结晶性能具有十分重要的意义。本文以4,4’-二氨基二苯甲酮(4,4’-diaminobenzophenone,DABP)和9,10-