基于立体视觉的微创手术导航系统

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:zzuli666
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
手术导航系统是利用CT等一系列工具扫描出患者数据并重建出三维立体模型,利用配准算法将手术空间中患者模型与扫描重建出的三维立体模型进行匹配,在手术中跟踪定位手术器械,计算出手术器械空间姿态,显示在扫描重建出的三维立体模型上,让医生可实时观测当前手术器械在患者身体上的具体位置。相对于传统手术而言,手术导航系统具有便于医生对病例进行分析从而术前诊断,对患者进行手术规划、模拟手术,医学教学等诸多优势,除此之外,手术导航系统还具有安全性高、手术时间短、创伤小等优点。本文对手术导航系统手术器械的跟踪方法进行深入研究分析,针对手术器械上定位标记物的选取、检测算法进行研究分析,研究手术器械姿态解析方法,同时对手术器械姿态跟踪方法深入研究,主要研究内容如下:(1)针对手术器械上定位标记对手术器械姿态解析精度具有巨大影响的问题,对手术械手术定位标记的选取进行研究,研究黑白格定位标记的识别算法,其对手术器械定位精度的影响因素,并进行实验分析。提出一种基于对称性的黑白格检测算法,算法中利用多分辨率和多级筛选的算法框架,提前过滤大部分非黑白格区域,显著减少算法计算量,提高算法运行速度。(2)针对手术器械的刚体特性,即手术器械上定位标记的相对位置为已知信息,对于术中识别到的定位标记利用其相对位置关系可以优化求解出手术器械的姿态参数,为进一步提高精度。另外,本文使用一种将该姿态下手术器械上定位标记区域重映射到成像平面,以重映射到成像平面上定位标记区域到实际检测到的定位标记区域之间的误差为损失函数,以此优化姿态估计精度的方法。(3)针对手术器械的运动特性,利用LSTM循环神经网络对手术器械姿态进行跟踪。将手术器械上定位标记空间坐标重映射回成像平面,确定定位标记在成像平面上的区域,减少定位标记的识别的范围,提高算法运行速度,在处理大分辨率图像时,算法运行时间的提升效果更为显著。(4)系统算法移植。针对本文涉及的手术导航系统算法及硬件需求考虑,选取英伟达的Jetson Nano二代嵌入式开发板,该开发板提供多个相机接口,支持Open GL ES,本文将涉及的硬件及算法移植到该开发板上,并进行开发调试。
其他文献
磁约束托卡马克聚变研究涉及众多前沿科学和工程技术难题,理论预测和实验诊断共同发展的状态。然而单独依靠诊断难以满足放电实验数据实时重构的需求,如温度密度长期难以得到完整的剖面数据,分辨率不足导致磁约束托卡马克装置物理剖面无法描述高约束模式(H模)放电的台基物理参数剖面。基于此,本研究基于通用原子能公司(General Atom,GA)为主开发的OMFIT集成模拟平台,结合HL-2A/M实验数据和理论
吸波涂层一般指一种喷覆于材料和器材表面,具有特殊微波性能的材料涂层,其使用的涂料一般又被称为微波吸收涂料,在军用以及涉密航空器应用领域也被称为雷达波吸收涂料。目前被广泛运用于相关领域的涂层材料吸收剂主要分为非金属材料基材与含金属材料基材两大部分,其中运用相对广泛的含金属材料基材可分为导电聚合物系列、多晶铁纤维系列以及铁氧体系列等。涂层本身的材料特性,基材本身的材料特性和涂覆表面的物理特性是影响涂层
随着工艺技术的发展,现代VDMOS可承受的击穿电压值越来越高,常规的VDMOS结构由于极厚的外延层,因此导通电阻值随着耐压的增加而大幅增加,高压VDMOS器件为了降低导通电阻只能通过增加芯片面积的方法,但随之而来的成本的增加又是商业生产不可忽视的因素。目前国内具有优良特性的高压VDMOS产品较少,大多微电子公司选择进口国外的VDMOS器件,而随着半导体进口量超越石油成为进口量最大的商品,自主研发高
随着科学技术与社会向前发展,无人驾驶技术的发展日新月异,登机桥也随之朝着自动对接方向发展。环境感知传感器作为无人驾驶的“眼睛”,一般有毫米波雷达、超声波雷达、激光雷达以及摄像头,但是单一传感器由于各种原因对环境的感知存在局限性。多传感器融合技术能够综合各传感器优势,实现相互之间信息互补,为系统提供信息冗余。因此本文基于两种感知系统中主流的传感器提出一种毫米波雷达与视觉融合的登机桥前方目标识别方法,
大数据是网络信息时代的客观存在,其产生的意义在于对数据进行专业存储和处理,并从中挖掘和提取所需要的知识和信息。Hadoop作为数据分布式处理系统的典型代表,在数据的分布式存储、计算、分析等多方面性能优越,为提升资源的利用率,Hadoop引入了资源统一管理调度系统YARN。YARN自带了三种资源调度器用于同构集群环境资源的分配,随着虚拟机在各大数据中心的普及,集群异构性凸显,这些内置的调度器性能极速
随着深度学习的逐步发展和计算机视觉应用领域的不断扩大,基于实验室环境下的非自发人脸表情识别已经不再是一个挑战,学界的研究重点已经转向自然环境下的人脸表情识别。尽管自然人脸表情数据集更加贴近于真实场景,但由于其样本偏小,且存在遮挡、姿态变化、光照不均等外在干扰因素,导致所训练出来的表情分类模型容易出现严重的过拟合现象。目前,如何准确地识别自然环境下的人脸表情已经成为人脸表情识别领域的主要难点之一。本
随着高速数字电路的发展,模数转换器(analog-to-digital converter,ADC)已经成为现代数字处理系统中不可或缺的组成部分。ADC的性能指标对数字处理系统整体的指标和性能的影响都十分显著,随着ADC分辨率的不断提高,现有的标准测试方法实施过程越发的困难,传统基于正弦拟合的测试方法,具有更高的测试精度,但该算法测试时间较长,限制该算法在实际测试中的应用。本文主要基于极大似然估计
在自然语言处理任务中,对话系统是其最具有发展前景的关键应用方向之一。基于检索和基于生成是目前现有对话系统实现的主流方法。检索式的方法是从候选回复进行打分并选择,提供相对固定模式化的回复,基于检索的系统严重依赖语料库的大小和质量,导致候选回复可能会缺失上下文中的重要信息,而且基于检索的方法限制了产生回复的丰富性,输出结果比较生硬。因此,为了让对话系统更好地完成信息表述以及情感表达等任务,使用基于生成
近年来,随着虚拟现实(VR)技术越发成熟,VR头戴设备逐渐进入大众视野。然而国内现有的产品中,VR设备及其控制器的定位问题还没有十分完善的解决方案,一些基于激光雷达传感器的定位技术价格昂贵,体积较大。本文聚焦于VR领域定位问题,提出了一套体积小、成本低的实时六自由度(6DOF)手柄控制器定位方案。本文提出在手柄控制器上设计一种环状定位结构,红外LED按照一定规律均匀的分布在该结构上。通过带有红外滤
在芯片集成度越来越高的趋势下,FPGA公司开始为芯片嵌入处理器系统,So C型FPGA正是这一趋势下诞生的芯片产品。So C型FPGA又称SOPC(Systemon-a-Programmable-Chip),即可编程片上系统。通常FPGA在测试过程中必须先配置成特定功能再进行功能和参数测试,因此FPGA在测试时必须能够快速进行配置码流加载。而So C型FPGA为了在处理器系统启动的同时就将FPGA