利用潜在扩散模型进行跨模态 3D 脑 MRI 合成
利用切片扩散架构,从医学图像生成融合体数据和对应掩膜,以解决医学图像分割中数据获取不足的问题,并考虑肿瘤特征进行生成,通过对 BRATS2022 数据集的实验证明生成数据对数据增强的有效性。
Jun, 2024
本研究提出了一种基于深度学习框架的方法,旨在利用 Pix2Pix GAN 模型从三维超声图像合成三维 MRI 体积。利用 3D 超声卷积数据集输入到 UNET 生成器和修补鉴别器,创建相应的 3D MRI 体积。通过对 3D 超声和 MRI 图像数据集应用鉴别器和生成器的损失函数来评估模型性能。结果表明合成的 MRI 图像与预期结果存在一定的相似性。尽管在数据集大小、计算资源和技术复杂性方面存在挑战,但该方法成功生成了具有满意相似性评分的 MRI 体积,并可作为进一步研究的基线。它突显了基于深度学习的体积合成技术在超声到 MRI 转换中的潜力,展示了其在医学应用中的可行性。需要进一步改进和探索以提高临床相关性。
Oct, 2023
通过生成逼真且多样化的医学 2D 和 3D 图像,基于指令的文本导向潜在扩散模型 MediSyn 为算法的训练和研究提供了一个丰富且尊重隐私的资源,并通过已建立的指标展示了在医学图像和视频综合中以文本提示为导向的显著改进。
May, 2024
本研究提出了一种通用的交叉模态医学图像合成方法,通过端到端的三维卷积神经网络实现具有真实感的立体图像合成和分割任务,以便作为补充训练样本,进一步提高分类器的泛化能力,生成放射疗法计划所需的 X-ray 衰减图等。对 4,496 个 CT 和磁共振成像 (MRI) 心血管体积的广泛实验表明,两个任务相互促进,耦合这两个任务比单独解决它们更有利。
Feb, 2018
GEM-3D 是一种基于条件扩散模型的新型生成方法,通过将 3D 医学图像分解为掩模和患者信息,从现有数据集中生成不同变化的高质量 3D 医学图像,实现了数据集的增强。
Mar, 2024
提出了基于潜在扩散模型的多模态图像转换模型,通过使用切换块进行图像到图像转换,解决了临床实践中获取多种模态图像的难题,实现了高质量的目标模态生成。
Nov, 2023
利用三维生成对抗网络(GANs)能够高效地生成高分辨率的医学体积,实现模型可解释性和应用,包括图像变形、属性编辑和样式混合,并在三维 HR-pQCT 示例数据库上进行了广泛验证。
Oct, 2023
提出了一种基于 generative 模型和 synthetic 数据的 3D 脑 MRI 和分割模型 brainSPADE3D,可以调节病理表型和对比度,生成高保真的合成图像和相关分割,以改善在数据中存在意外病变时的分割模型性能问题。
Nov, 2023
使用基于扩散的模型,结合现有的二维扩散骨架和三维特征体,进行三维感知的图像生成,同时具备自回归生成 3D 一致的序列能力。在合成渲染图像和实际物体上展示了最先进的效果。
Apr, 2023
X-Diffusion 是一种为磁共振成像 (MRI) 数据量身定制的横截面扩散模型,能够从一张或少量多张 MRI 切片中生成完整的 MRI 体积,实现了从极度稀疏的观测得到合成 MRI 的精度方面的新突破。
Apr, 2024