【摘 要】
:
磁共振成像(Magnetic Resonance Imaging,MRI)技术在医疗诊断的临床应用中使用广泛。MR图像通常具有不同模态,多模态图像信息融合有助于提高自动医学图像分析诊断系统的准确性和可靠性。考虑到多模态医学图像获取的困难,研究医学图像的跨模态合成技术,即从一种模态医学图像自动生成另一种模态医学图像的技术,可以从已知模态生成未知模态数据,减少多模态采集成本、实现数据集曾广、减少模态之
论文部分内容阅读
磁共振成像(Magnetic Resonance Imaging,MRI)技术在医疗诊断的临床应用中使用广泛。MR图像通常具有不同模态,多模态图像信息融合有助于提高自动医学图像分析诊断系统的准确性和可靠性。考虑到多模态医学图像获取的困难,研究医学图像的跨模态合成技术,即从一种模态医学图像自动生成另一种模态医学图像的技术,可以从已知模态生成未知模态数据,减少多模态采集成本、实现数据集曾广、减少模态之间的不平衡性,具有实践意义。医学图像的跨模态合成,是图像翻译的一个应用分支,近年来以基于生成对抗网络的方法为主。在现有的MR图像跨模态合成应用中,出现了诸多难点与不足。基于2D切片的2D方法,没有考虑医学图像的3D特性,欠缺对不同切片之间体素关系的考量,存在局限性。基于3D体素块的3D方法,虽然从原理上弥补了2D方法的局限性,但依赖于高性能硬件,执行成本高,实用性低。现有的跨模态合成工作对生成对抗网络理论的应用探究较少。本文首先针对上述问题开展研究,基于生成对抗网络,提出了一个新颖的MR图像跨模态合成3D方法——MRi-Trans-GAN(MR Images Translation GAN)。以峰值信噪比(Peak Signal-to-Noise Ratio,PSNR)与结构相似性(Structural SIMilarity,SSIM)进行合成质量评估,在人脑胶质瘤数据集Bra Ts2020与健康脑部数据集IXI上超越了先进的2D、3D方法。该模型采用了尺度不均衡的3D体素块(128×128×3)和对应的不均衡3D卷积,兼顾了医学图像3D特性与模型实用性;采用先进的对抗损失函数理论(WGAN-GP-SN),即带梯度惩罚的沃森斯坦森距离损失函数(WGAN-GP)与谱范数正则化(SN)的联合,相比于跨模态合成中常用的对抗损失函数有了更好的性能提升。其次,本文针对MRi-Trans-GAN的重建损失展开研究,发现了体素级别的平均绝对误差(Mean Absolute Error,MAE)重建损失会带来过拟合问题。受2D自然图像领域感知损失的启发,本文采用迁移学习手段,创新性地提出了一个特征级别的3D感知损失,其基于在Image Net上预训练的Vgg16模型进行计算,并通过3D卷积予以加速。该3D感知损失作为对MAE重建损失的正则项,适用于MRi-Trans-GAN这一3D模型,进一步提升了跨模态合成的质量。最后,本文借助混合精度技术对MRi-Trans-GAN进行加速。在全局的混合精度模式下,针对模型中的实例归一化计算、谱范数正则化计算与3D感知损失计算进行了适应性优化,保证了数值稳定性,维持了模型的合成质量。相比于单精度下的模型训练与推理,混合精度下的MRi-Trans-GAN在拥有更快的训练、推理速度,更小的资源占用的同时,没有合成质量上的衰减。
其他文献
人类社会的发展步入信息时代以来,随着通信需求的剧烈增长以及通信技术的不断革新,高功率器件在现代通讯系统中扮演的角色也愈发关键和重要。与固态器件相比,真空电子器件可以提供更大的功率,更宽的带宽以及更优的效率,因此在未来通信系统具有一定应用前景。集中衰减器是真空高功率器件的重要组成部分并直接影响着行波管的性能表现。然而,传统衰减器在面对行波管小型化、标准化、高定制化以及规模化生产等紧迫诉求时,已经表现
社会生产生活用电量的不断扩大和城市面积的扩张,,造成配电变电站越来越接近城市居住密集区,配电变压器噪声已成为影响变电站附近居民生活品质的重要问题。为尝试解决配电变压器的噪声辐射问题,本文基于配电变压器的声振特性和约束阻尼复合结构,研究并开发了一种适用于典型配电变压器本体降噪的新型高效隔声结构。本文主要开展了以下几个方面的研究内容:首先,基于实际测量,分析探讨35k V和110k V两种典型配电变压
我国装配式建筑进入快速发展期,由于技术的不成熟、各专业之间信息链断裂等因素,导致装配式建设项目普遍出现施工进度延误和由于施工误差引起的质量问题,对装配式建筑施工过程进行有效监控是项目成功的关键因素之一。然而,目前施工现场数据的采集主要依靠人工的方式,耗时耗力、信息不全面,三维激光扫描技术的出现为采集施工现场数据提供了一条新的途径。为了更好地对装配式建筑施工过程进行管理,本文提出一种基于点云模型特征
石墨烯作为典型的二维晶体材料,由单层碳原子构成。它凭借自身优异的力学、电学、热力学特性和稳定的化学特性,在全球范围内引起了广泛的关注,并在柔性电子元器件、能量存储、散热材料等领域具有潜在的应用前景。然而,在器件的设计和应用过程中,需要考虑摩擦这一常见的物理现象。因此,观察石墨烯微观的摩擦行为,预测不同因素影响下摩擦现象的变化规律,并在此基础上探究摩擦的起源是进一步根据设计需求调控摩擦力的前提。本文
随着人工智能科技的发展,机房智能化安全管理和运维将成为必然趋势。为了实现机房巡检的自动化、智能化,国内多家企业和科研机构开始研究应用于机房设备巡检的移动机器人。为了克服现有轨道式巡检机器人机械系统存在的不足,本文研发设计一款新型轨道式机房巡检机器人,用于代替人工对机房设备进行巡检,有效避免人工巡检存在的安全隐患,提高设备巡检的效率。本文在调研分析国内外巡检机器人研究现状的基础上,结合机房内部环境特
大型工程项目建设如火如荼,促进了经济和社会的快速发展,但同时带来了征地拆迁、资源占用、环境污染等诸多复杂的社会性问题。大型工程开发建设带来的社会影响具有累积性特征,负面影响持续性累积极易引发社会矛盾,破坏社会和谐。目前,社会影响评估领域缺乏关于累积性社会影响评估方法的研究。本文为推动累积性社会影响评估的实践,对大型工程累积性社会影响评估方法论进行探讨,并逐步构建累积性社会影响评估方法框架。本文通过
随着天然气工业的快速发展,作为天然气采输作业中关键的中转站,集气站的正常运作尤为重要。集气站中的大量仪表时刻监控并显示着集气站作业的运行情况,而人工统计仪表数据尤为繁琐,且耗时耗力,效率低下。同时集气站位置偏远,环境恶劣,天然气本身属于危险气体,人工巡检存在安全风险,所以集气站巡检机器人的研究势在必行。本文以集气站巡检机器人为载体,集气站中的指针式仪表和数字仪表为研究对象,研究可用于集气站环境下的
钢货架结构以其轻质、高强的力学性能优势被广泛运用在仓储物流行业,其中框桁式钢货架结构应用较为广泛。框桁式钢货架结构在垂直于巷道向与沿巷道向表现出力学性能各向异性的力学特点,垂直于巷道向刚度较大,地震作用时货物容易发生脱落,冲击其他货架造成连续倒塌,因此垂直于巷道向的隔震问题至关重要。针对该问题结合课题组前期研究成果,提出了以隔震为主的复合式隔震支座系统,采用隔震技术实现垂直于巷道向的抗震目标,防止