变分偏微分方程与深度学习融合的医学图像分割方法研究

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:stepbystep
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
智能诊疗是国家目前的重大战略需求,需要现代医学、数学、生物和信息科学等多学科深度交叉和融合。医学图像精准分析是实现智能诊疗的基础与前提,而精准分析离不开数学的建模、算法和理论分析。医学图像分割是其中的核心技术之一,主要任务是从医学图像中提取出对诊断有帮助的感兴趣区域,如病变、器官及其周边组织等,这些在临床中有广泛的应用价值,譬如器官和病变的量化分析、疾病的诊断和进展评估、术前规划等等,同时也是配准和三维重建的前提。从方法学角度,变分偏微分方程模型和深度学习是两类最主要的分割方法。基于变分模型的方法把图像分割建模为能量泛函极小化问题,可以在能量泛函中显式地刻画目标边界、先验以及整体信息等,其不足是对超参数较为敏感以及难以从数据中自动学习特征。根据能量泛函中主要依赖的图像信息,已有的变分模型可分为基于边界的、基于区域的和混合变分模型。基于深度学习的方法直接学习从图像到分割标注的端到端映射,能自动从数据中学习目标的特征表达,但其缺乏对目标整体信息的刻画、结果可解释性弱和需要大量训练数据。本文针对目前医学图像分割中存在的问题,通过融合这两类方法的优势,提出了一系列更加精确、鲁棒和高效的分割方法和算法。本文贡献包括以下四个方面:1.针对全卷积神经网络无法有效捕捉目标整体信息的不足,我们融合基于边界的变分模型和深度学习,提出一种测地活动轮廓能量引导的水平集函数回归的深度学习网络。通过全卷积神经网络直接回归分割目标的水平集函数,可以把目标像素之间的依赖关系嵌入到学习过程中,使得网络对小的孤立误分割更加敏感。此外,在损失函数中引入测地活动轮廓模型能量泛函,网络在学习过程中会端到端地极小化该能量泛函,进而引导分割结果逼近目标真实边界。在四个MR和CT图像数据集上的大量实验表明,我们所提的方法比六个当前先进的分割方法获得了更加精确的分割边界,同时显著减少了孤立的误分割。2.针对实践中仅有少量标注样本的现状,我们融合基于区域的变分模型和深度学习,提出一种区域自适应活动轮廓模型正则的半监督学习框架并应用于新冠CT病变分割,可以充分利用无标注数据提升分割性能。已有的半监督学习方法主要通过生成伪标签的方式来利用无标注数据,但这些伪标签往往精度不高,会降低后续学习过程中网络的性能。我们引入区域自适应拟合的活动轮廓模型来优化这些伪标签,可以显著提升伪标签的质量。模型数值求解过程中采用了基于示性函数的快速算法,比经典的水平集方法有更高的计算效率,更适合处理大规模图像。分别在我们建立的新冠CT基准数据集和集成国内外860个病例的大规模数据集上的分割实验表明,该方法能获得比不使用无标记数据和已有的不对伪标签优化的半监督学习方法更精确的病变分割结果。此外,我们基于860例早期新冠CT图像建立了首个新冠发病位置图谱,从中发现左右肺下叶背段和后基底段是早期新冠病变的高发区域。3.针对水平集方法求解测地活动轮廓模型计算效率低的问题,我们对测地活动轮廓模型提出了一种基于示性函数的近似表示,并设计了一个基于卷积和阈值运算的快速算法。相比基于水平集函数的测地活动轮廓模型,我们所提的基于示性函数的模型减少了超参数数量,不再需要引入额外的正则项来维持轮廓演化过程中的稳定性。此外,水平集方法每次迭代都需要求解一个偏微分方程,而我们设计的求解算法主要运算仅包含卷积和阈值,计算过程更加简洁和高效。最后我们从理论上分析了算法收敛性,证明了总能量在迭代过程中持续下降,不依赖于自由参数的选择。在合成图像、超声图像、CT图像和MR图像上的大量实验表明,我们的方法能获得与水平集方法相当或者更好的分割结果,而所需要的迭代步数和时间实现了数倍到数十倍的加速。4.针对多模态医学图像分割中如何发掘并利用不同模态互补信息的问题,我们融合混合变分模型和深度学习,提出一个包含边界项、区域项和先验项的混合变分模型并应用于头颈癌PET/CT图像分割,充分利用多模态信息提升了分割精度。我们首先采用多通道的U-Net将两个模态图像同时输入到网络中获得初始分割结果,然后设计了一个基于集成方法的不确定性指标来量化分割结果的质量,进一步提出混合活动轮廓模型对不确定性高的病例进行优化,模型能量泛函中包含基于CT图像的边界项、基于PET图像的区域项和基于多通道U-Net预测的先验项。针对所提模型,我们设计了迭代卷积阈值快速算法,并从理论上给出了算法的收敛性分析。该方法在医学图像分析顶会MICCAI 2020举办的头颈癌PET/CT分割国际挑战赛中获得了第二名(DSC得分0.752),与第一名(DSC得分0.759)无统计显著性差异,显著优于第三名(DSC得分0.735)等其它方法的分割结果。
其他文献
大学生群体的法治信仰状况影响社会整体的法治信仰水平,培育大学生法治信仰,是我国高校落实立德树人根本任务的需要,是新时期加快推进依法治国方略的需要,是国家治理体系和治理能力现代化的内在要求。推进大学生法治信仰养成,需要在深刻理解法治信仰的内涵构成的基础上,把握其影响因素,并进而探究其主要路径。首先,理解大学生法治信仰的内涵构成是推进大学生法治信仰养成的前提。大学生法治信仰是大学生在理性认知法治的基础
学位
在一个视频监控系统中,最基本的两个问题是:1)如何在一张高分辨率图像中锁定行人的位置,以及2)如何在一组形形色色的行人图像中找到一个特定的目标行人。上述两个问题通常作为“行人检测”和“行人重识别”(re-ID)这两个独立的任务来研究。然而,在实际应用中,这两个任务通常成对出现。因此,在一个联合框架中同时解决这两个任务不仅能更高效,而且还能获得更好的综合性能。基于此,“行人搜索”这个任务逐渐引起了学
近年来,随着技术的进步和制造成本的降低使得无线传感器网络(WSNs,Wireless Sensor Networks)领域得到了长足的发展。WSNs利用传感器节点的易部署性和多功能性,被广泛应用到各种领域,如工业制造、智能家电、智慧农业、医疗卫生、灾害救援等。在此过程中传感器节点的主要任务是收集、保存数据,并将数据传输汇聚。而进一步的数据分析操作通常是在数据中心完成,并通过网络将数据的分析结果反馈
光电探测器作为人类探索世界感知世界的“千里眼”,在军事和民用领域都有着极为重要的作用和广泛的应用,例如导弹告警、火灾探测、医疗卫生和能源探测等方面。β-Ga2O3材料是一种直接带隙的III-VI族宽带隙氧化物半导体,超宽的禁带宽度约为4.9e V。这给β-Ga2O3材料带来了高达8 MV/cm的击穿场强、比Ga N材料大4倍的巴利加优值和优异的日盲紫外波段响应特性,同时还具有非常优秀的热稳定性和抗
随着现代复杂结构机构逐渐向着多元化、复杂化和精密化方向发展,其可靠性问题日益凸显,如何提高结构机构质量可靠性已成为人们在现代工业产品制造和使用过程中亟待解决的重要问题。由于搜集到的数据和信息常常包含大量与时间相关的不确定性,而传统可靠性优化设计在标准和量化这类不确定性时存在诸多局限,使得复杂结构机构设计方案往往难以满足工程实践要求。代理模型(例如SVR、Kriging、RBF、PCE、GP)方法具
当前轨道交通在城市公共交通系统中扮演者重要的角色,随着城市轨道交通的快速发展,地铁是涵盖了城市地区各种地下与地上地路权专有、高密度、高运量地城市轨道交通系统。我国现已开通地铁里程达6000公里,作为城市人口出行的一种重要交通工具,其极大地缓解着城市地面交通的压力。因此,确保地铁列车的行驶安全不仅有助于维护地铁的正常运营,更对保障乘客的生命财产安全有着至关重要的作用。地铁轨道环境中可能存在的障碍物是
幼儿园教育质量是衡量学前教育发展水平的重要指标,提高幼儿园教育质量是学前教育改革与发展的重要课题。2018年国务院印发的《学前教育深化改革规范发展的若干意见》,其中第八部分着重强调了"寓教于乐的游戏"。著名的儿童教育家陈鹤琴也说过:"小孩子是生来好动的,是以游戏为生命的"。游戏化教学是基于幼儿发展规律,运用到幼儿园教学环节的一种教学模式,这对于推动幼儿园提高教育质量,促进幼儿健康发展都有着积极意义
期刊
Monge-Ampèere型方程是一类非常重要的完全非线性二阶椭圆偏微分方程,与分析和几何问题密切相关,例如Minkowski问题,Weyl问题等。我们考虑如下形式的Monge-Ampère型方程det[D2u-A(x,u,Du)]=B(x,u,Du),在Ω内,(1)其中Ω(?)Rn是一个有界区域,Du和D2u分别为未知函数u:Ω→R的梯度向量和Hessian 矩阵,A:Ω×R×Rn→Rn×n 是
能源、信息与材料是二十一世纪的三大支柱产业,而新型半导体材料的出现为能源和信息领域的发展提供了物质基础。近年来,卤素钙钛矿凭借其优异的光电性能成为半导体材料领域的研究热点。其中,卤素钙钛矿纳米晶材料因其独特的量子效应和简单的制备工艺,吸引了众多研究者的关注,在发光二极管、太阳能电池、光电探测器等领域都展现出了极大的应用前景。但是,卤素钙钛矿纳米晶在其合成和应用中还存在着一些问题。首先,高质量的钙钛