红队测试分段一切模型
介绍了 Segment Anything (SA) 项目 —— 一项新的任务、模型和图像分割数据集,该模型具有任务迁移和零样本学习的能力,并通过大规模数据集的训练,达到或超过以前完全监督结果的性能,旨在为计算机视觉的基础模型研究提供支持。
Apr, 2023
深度学习模型在大量数据训练下已成为最近有效的预测问题解决方法,研究了基于自然图像训练的基础模型在磁共振成像数据上的分割任务性能,结果表明这些模型虽然在少数情况下可接受,但根据整体趋势,它们在整个体积的磁共振成像分割上不够有效,而在少数特定切片上表现良好,这提示基于自然图像训练的基础模型可能在其他成像模态上效果不佳。
Dec, 2023
该研究综述了近年来提出的一种称为 SAM 的基础模型,对其的应用于图像处理的各种任务和数据类型进行了分析和总结,并指出了其优点和局限性,为开发更多功能的基础模型和改善 SAM 架构提供了启示。
May, 2023
该文通过第一次全面调查介绍了受到重大关注的 Meta AI Research 开发的 Segment anything model(SAM)的性能表现和多种应用情况,并呼吁读者对该模型进行新的研究以促进其进一步发展。
May, 2023
研究了针对视觉任务开发的第一个基础模型,称为 Segment Anything Model(SAM)。SAM 可以基于便宜的输入提示,如一个或多个点、边界框或掩码,在输入的图像中分割对象。作者在大量的视觉基准任务中研究了 SAM 的零样本图像分割准确性,并发现 SAM 通常实现了与目标任务上进行了训练的视觉模型类似或有时超过其识别精度。他们检查了 SAM 在多样化、广泛研究的基准任务集上的表现。然而,作者还研究了 SAM 在航空图像问题中的表现,他们发现虽然 SAM 在航空图像上通常表现良好,但在某些情况下由于航空图像和目标对象的独特特征而失败。
Apr, 2023
对于自动分割医学图像的研究,本文总结了目前的微调策略,并在包括所有常见放射学模态的 17 个数据集上进行评估,研究发现微调 Segment Anything Model (SAM) 相较于以前的分割方法具有稍微更好的性能,使用参数效率高的学习在编码器和解码器中进行微调的策略优于其他策略,网络架构对最终性能影响不大,通过自监督学习进一步训练 SAM 可以提高最终模型性能。
Apr, 2024
利用基于 Vision Transformer (ViT) 的基础模型和无监督聚类生成方案,构建了一个图像分割框架,将其应用于实时孔隙分割,并在没有监督微调的情况下获得较高的骰子相似系数 (DSC),从而实现了轻量级模型推理和无监督提示生成,旨在革新当前基于激光的增材制造流程,促进无缺陷生产和运营效率,并实现工业 4.0 的转型。
Dec, 2023
评估新兴的计算机视觉基础模型及其在自然景观要素分割中的性能,通过测试 Meta 的 Segment Anything Model (SAM) 在零样本性能、领域适应性和理论上限预测准确性等方面来评估其大型 AI 视觉模型的性能,并指出了改进的空间,以在具有挑战性的地理空间领域中支持 AI 辅助的地形制图。
Jan, 2024
本文介绍了一种新的 MRI 图像中肿瘤分割算法 ——Segment Anything,该算法通过对 Glioma 脑肿瘤的满足点任务进行了评估,并成功实现高精度的肿瘤自动分割,不仅如此,该算法能够加速和便利放射治疗规划。
Apr, 2023
Segment Anything Model (SAM) 是第一个用于图像分割的基础模型,本研究评估了 SAM 在虚拟现实环境下记录的眼部图像中分割特征的能力。结果表明,SAM 的分割效果可以与专门模型相媲美,且使用提示工具可以提高其性能,示例数据集中瞳孔分割的 IoU 达到 93.34%。SAM 等基础模型有望通过快速且易用的图像分割方法,革新注视估计领域,减少对专门模型和繁琐手动标注的依赖。
Nov, 2023