ALPS:遥感分割的自动标注和预训练方案
本研究提出 SAMRS,通过整合 SAM 和现有的遥感物体检测数据集以生成大规模遥感分割数据集,该数据集在大小上超过了现有的高分辨率遥感分割数据集。SAMRS 可用于语义分割、实例分割和目标检测等研究领域。同时,我们对 SAMRS 进行了全面的分析并希望它能促进遥感分割、特别是大规模模型预训练等方面的研究。
May, 2023
由于高分辨率遥感卫星的发展,遥感相关研究工作获得了极大的便利。SAM 引入了一种普适的预训练模型用于图像分割任务,但是直接应用于遥感图像分割任务效果欠佳。为此,我们提出了 RSAM-Seg,即在 SAM 的基础上进行了适应性修改,消除了对手动干预提供提示的需求。在 SAM 的编码器部分的多头注意力块中,我们提出了 Adapter-Scale 和 Adapter-Feature 模块,它们旨在将高频图像信息和图像嵌入特征融入生成的图像引导提示中。在包括云检测、场地监测、建筑物检测和道路制图任务的四个不同遥感场景上进行了实验证明,RSAM-Seg 不仅改善了原始 SAM 和 U-Net 在云、建筑物、场地和道路场景中的效果,还突出了其作为辅助注释方法的潜力,可以识别某些数据集的真实值中的缺失区域。此外,在少样本情况下的表现也值得称赞,凸显了其在处理有限数据集时的潜力。
Feb, 2024
通过将可视化基础模型 Segment Anything(SAM)注入到隐式神经场模型 - INF 中,我们提出了一种新的多视图遥感图像分割方法,通过对测试视图和训练视图之间的 SAM 特征进行对比,得出每个测试视图的伪标签,从而增强整个场景的标注信息,实验证明我们的方法在有限的训练数据情况下优于主流方法,从而证实了 SAM 作为 INF 的一种补充在这一任务中的有效性。
May, 2024
本研究介绍了一种用于自动化少样本语义分割的结构化框架,利用 Segment Anything Model(SAM)模型,并借助先前引导的掩模生成粗略像素级提示,以获得更高效的语义可辨别分割结果,实验证明该方法在 DLRSD 数据集上优于其他可用的少样本方法。
Nov, 2023
本研究旨在将 Meta AI 的创新图像分割模型 Segment Anything Model(SAM)应用于遥感图像分析领域,特别是处理来自不同地理背景的航空和轨道影像,实现 SAM 在遥感影像处理中的潜力。
Jun, 2023
本文提出了一种基于 SAM 模型和 Prompt 学习的自动遥感图像实例分割方法(RSPrompter),并将其与其他常用的方法进行比较,结果证明该方法有效。
Jun, 2023
该研究提出一种基于 Segment Anything Model(SAM)的预训练框架,利用 SAM 对热成像图像进行伪标签生成,从而提高特定类别的分割结果精度,为处理特殊领域的问题提供了一种有效的解决方案,并生成了一个包含 100,000 多个像素注释标签的大规模热红外分割数据集。
Apr, 2023
我们提出了一个名为 SAL(Segment Anything in Lidar)的方法,包括一个可文本提示的零样本模型用于在 Lidar 中分割和分类任何物体,以及一个无需手动监督的伪标签引擎用于模型训练。通过利用 2D 视觉基础模型生成免费的 3D 监督,我们的模型在无需手动标签的情况下在类别无关分割上达到 91%和零样本 LPS 上达到 44%,超越了不使用蒸馏而仅将图像特征提升到 3D 的基线模型,并且支持任意类别提示,并且可以轻松地扩展到新数据集,并显示出随着自标记数据的增加而提高的潜力。
Mar, 2024
Segment Anything Model 是一种新的模型,可以用于零样本目标分割,可以使用边界框、多边形或点等提示进行模型训练,也可以使用后处理步骤,在植物表型学领域具有广泛的应用。在与 Mask R-CNN 模型的比较中,Leaf Only SAM 方法的召回率为 63.2,精确度为 60.3;相比之下,Mask R-CNN 的召回率为 78.7,精确度为 74.7。这表明使用后处理步骤的 SAM 模型可能具有零样本分类器的潜力,而无需训练新的数据集。
May, 2023
利用遥感卫星监测和缓解人为气候变化的影响在关键的干预和政策决策方面有着重要作用。合成孔径雷达 (SAR) 提供了一种强大的光学数据替代方案,通过自监督预训练方法在预测植被覆盖和土地分类关键任务上减少了标记数据需求,从而大大推进了气候变化监测的发展。
Oct, 2023