3DSAM-adapter:将 SAM 从 2D 完整地适应到 3D,用于医学图像分割
引入了名为 MA-SAM 的适用于各种体积和视频医学数据的模态无关 SAM 适应框架,通过在图像编码器的转换器块中注入一系列的 3D 适配器,使预训练的 2D 主干从输入数据中提取第三维信息。在四个医学图像分割任务上,使用了 CT、MRI 和外科手术视频数据的 10 个公共数据集进行全面评估,结果显示,我们的方法在不使用任何提示的情况下,始终表现优于各种最先进的三维方法,在 CT 多器官分割、MRI 前列腺分割和外科手术场景分割的 Dice 指标上分别超过 nnU-Net 0.9%、2.6% 和 9.9%。在使用提示时,我们的模型也表现出强大的泛化能力,并在具有挑战性的肿瘤分割任务中表现出色。
Sep, 2023
介绍了一种用于 3D 多器官 CT 基于分割的新方法,即 AutoSAM Adapter,通过自动提示学习范式来促进 Segment Anything Model(SAM)模型能力向 3D 医学图像分割的转变,从而消除了手动生成提示的需求,并成功将获得的知识传递给其他专门为 3D 医学图像分析量身定制的轻量级模型,实现了在医学图像分割任务上的最先进性能。
Aug, 2023
该研究提出了 SAM-Med3D,对 3D 医学图像进行了全面研究和修正,通过训练在大规模数据集上的全面处理的 3D 体系结构,提供了全面的性能评估。与 SAM 相比,SAM-Med3D 在三维体积医学图像的分割能力和效率上都具有显著的增强。
Oct, 2023
本研究提出了一种综合且可扩展的 3D SAM 模型,名为 CT-SAM3D,用于全身 CT 分割,通过使用一个(几乎)完全标记的 CT 数据集,建立了一个 3D 可提示的分割模型。我们的模型可以有效地响应更高维度的空间提示,通过减少大规模器官的交互提示工作量,以较少的点击提示显著提高了所有以前基于 SAM 的模型的定量性能。
Mar, 2024
借鉴了 Segment Anything Model (SAM) 的方法,我们提出了 SAM3D,该方法针对 3D 体积医学图像,利用 SAM 编码器的预训练特征来捕捉输入图像的意义表示,并通过整体处理 3D 图像而避免了大量参数的训练,实验结果表明,在 3D 医学分割任务中,我们的网络相对于其他最先进的方法具有竞争力且参数效率明显。
Sep, 2023
在医学图像分割中,Segment Anything Model (SAM) 的应用受到其在自然图像分割中的良好表现的限制。为此,我们引入了 Slide-SAM,将 SAM 扩展到 3D 医学图像分割中,并通过使用单个切片提示来减少专业人员的负担,实现更高分辨率的训练以实现最优学习结果,并通过充分评估和分析不同特征、解剖结构和器官的 Slide-SAM 在医学图像分割中的表现,证明其具有最先进的 3D 分割性能。
Nov, 2023
本文提出了一种称为 Med SAM Adapter 的方法,它通过将医学特定领域知识与分析模型进行简单而有效的适应技术的集成,将 SAM 模型的强分割能力扩展到医学图像分割,在多种图像模态下优化 19 项医学图像分割任务,并超过各种已有的基于医学图像分割的最新技术,并与全面优化的 MedSAM 相比有不错的性能优势。
Apr, 2023
快速交互式的基于 SAM 的三维医学图像分割方法 FastSAM3D 通过层次递进提取复杂 12 层 ViT-B 和轻量级 6 层 ViT-Tiny 变种编码器之间的知识传递,并使用稀疏闪光注意力代替传统的注意力操作符,大幅减少内存需求和提高并行化,从而在相同体积上与 2D SAMs 相比,实现了 527.38 倍的加速,在与 3D SAMs 相比,实现了 8.75 倍的加速,并且性能下降不明显,为常用 GPU 硬件实现低成本、真正交互式的基于 SAM 的三维医学图像分割开辟了道路。
Mar, 2024
手术场景分析中使用人工智能的分割是一个基本问题。然而,这个领域内固有的数据稀缺性使得为该任务调整传统分割技术变得具有挑战性。因此,我们提出了一种名为 AdaptiveSAM 的改进模型,可以快速有效地适应新的数据集,并可以使用文本提示进行分割,其在各种医学图像数据集上优于当前最先进的方法。
Aug, 2023