利用多视角数据进行无注释的前列腺 MRI 分割:对比方法
该研究提出了一种高效的多视图学习框架,通过与各种变换的多个增强视图进行比较,对比学习不变的血管特征表示,以克服数据短缺问题并提高泛化能力,同时将注意机制集成到卷积神经网络中,用于进一步捕捉复杂的连续曲线状血管结构。该方法在 CHASE-DB1 数据集上验证,使用 UNet 结构获得 83.46% 的最高 F1 得分和 71.62% 的最高 IoU 得分,分别超过现有基准 UNet 方法的 1.95% 和 2.8%。该方法的快速训练和高效实施特性支持实际应用和部署。
Nov, 2023
建立了一种深度学习方法,探索了稀疏标注,即每个 3D 训练 MR 图像只有一个 2D 切片进行标注,与 ICT 相比,该方法在分割准确性方面取得了显著提升,对于前列腺分割,平均 B-IoU 增加了 10.0% 以上(提出的方法 B-IoU:70.3% vs. ICT B-IoU:60.3%),对于左心房分割,平均 B-IoU 增加了 6.0% 以上(提出的方法 B-IoU:66.1% vs. ICT B-IoU:60.1%)。
Dec, 2023
介绍了一个无监督的癌症组织分割框架,利用深度 U-Net 和对比学习来提取特征并通过卷积随机场进行平滑和去噪,实验表明该方法在癌症分割方面表现竞争力更优于一些常见的有监督网络。
Jun, 2022
本论文提出了一种基于深度学习的图像分割框架 UMCT,通过协同训练和利用未标注数据来实现半监督和无监督领域自适应的任务,实现针对大量未标注数据的高效分析处理和标注,获得了半监督医学影像分割方面的最佳表现,并成功将模型应用于医学影像解剖结构的领域自适应。
Jun, 2020
我们提出了一种使用两个不同子网络来探索和利用它们之间差异的方法,最终纠正错误的预测结果,通过有针对性的验证训练过程识别不一致预测的区域并进行微调,从而提高上下文信息的利用;此外,为了自适应地调整网络的表示能力并降低预测不确定性,我们采用了自监督对比学习范式,利用网络的置信度区分可靠和不可靠的预测,并训练模型有效地最小化不可靠的预测;我们的实验结果来自于临床 MRI 和 CT 扫描的器官分割,与最先进的方法相比,证明了我们方法的有效性。
Nov, 2023
本文提出了一种基于卷积神经网络的方法,借助高水平结构对应信息(即解剖标记)推测像素变化,从而实现多模态图像对齐。结果表明,该方法具有广泛的适用性,可在训练过程中利用各种不同类型的解剖标记,并能实现实时自动化、无需标记或初始化的三维图像对齐。
Jul, 2018
提出了一种利用正交标注和稠密 - 稀疏共训练的半监督学习方法来应对 3D 医学图像分割中的标注问题。实验结果表明,该方法在表现和效率上都具有较高的水平。
Mar, 2023
在肿瘤学研究中,准确的 CT 扫描病灶 3D 分割对于病灶生长动力学的建模至关重要。然而,根据 RECIST 准则,放射科医生通常仅在显示最大横截面面积的轴位切片上勾画每个病灶,并在研究目的上勾画少量的 3D 病灶。因此,我们有大量未标记的 3D 体积和带标签的 2D 图像,以及稀缺的标记的 3D 体积,这使得训练深度学习 3D 分割模型成为一项具有挑战性的任务。本研究提出了一种新模型,称为多维统一的 Swin Transformer (MDU-ST),用于 3D 病灶分割。MDU-ST 由一个偏移窗口变换器 (Swin-transformer) 编码器和一个卷积神经网络 (CNN) 解码器组成,使其能够适应 2D 和 3D 输入,并在同一编码器中学习相应的语义信息。基于该模型,我们引入了一个三阶段框架:1) 通过自我监督的先验任务利用大量未标记的 3D 病灶体积来学习 Swin-transformer 编码器中病灶解剖学的潜在模式;2) 对 Swin-transformer 编码器进行微调,以使用 2D RECIST 切片执行 2D 病灶分割,学习切片级分割信息;3) 进一步对 Swin-transformer 编码器进行微调,以使用带标签的 3D 体积执行 3D 病灶分割。该网络的性能通过 Dice 相似系数 (DSC) 和 Hausdorff 距离 (HD) 在一个内部的 3D 病灶数据集上进行评估,其中包含来自多个解剖位置的 593 个病灶。所提出的 MDU-ST 相比竞争模型表现出显著改进。该方法可用于进行自动化的 3D 病灶分割以辅助放射组学和肿瘤生长建模研究。本论文已被 IEEE 国际生物医学成像研讨会 (ISBI) 2023 接受。
Sep, 2023
本文提出了一种基于 3D 注意力的 U-Net 架构,用于使用由三个非本地 MRI 卷积组合而成的单一堆叠的多模态体积进行大脑肿瘤的多区域分割。该方法通过在 U-Net 的解码器端添加注意机制来提高分割精度,从而减少了对健康组织的侧重和突出了恶性组织,提高了泛化能力并减少了计算资源。该方法在 BraTS 2021 任务 1 数据集上进行训练和评估,证明其在精度上优于其他方法。实验结果表明,该方法潜在地提高了使用多模态 MRI 数据进行大脑肿瘤分割的能力,有望为更好地理解和诊断脑部疾病做出贡献。这项工作强调了在大脑肿瘤分割中结合多种成像模式和引入注意机制以提高精度的重要性。
May, 2023
本研究提出了一种基于增强的 Transformer U-Net 架构的多功能多任务神经网络框架,可以同时、选择性和自适应地解决医学图像中的图像分割、实值预测和跨模态转换等关键挑战。通过对人脑 MR 和 CT 图像的公共数据集进行验证,我们将合成 CT 图像的传统问题分解为不同的子任务,包括颅骨分割、HU 值预测和图像顺序重建。为了增强该框架处理多模态数据的多功能性,我们在模型中添加了多个图像通道,并进行了基于 T1 加权和 T2-Flair 图像合成的 CT 图像比较,评估了模型从形态学和像素值角度集成多模态信息的能力。
Dec, 2023