利用少量数据进行学习是一项具有挑战性的计算机视觉任务,本文通过引入高质量的语义以及使用简单的网络结构,设计了一个名为 “语义进化” 的自动化方式来解决少样本学习中的问题,实验证明该方法在少样本分类任务中表现优异。
Nov, 2023
提出基于任务语义角度构建的语境提示学习模型 STPrompt,其中两种基于语义依存关系树和任务特定元数据描述的新型提示被构建到提示增强池中,能自动选择合适的语义提示来激发提示学习过程,并在五种不同的少样本文本分类数据集上取得了最先进的性能。
Oct, 2022
通过使用 SegGPT 作为基础模型,分别为每个新类别使用可学习的提示语进行预测,并通过图像修复任务解决遥感领域中存在的对象大小不一致性和补丁边界的不连续性问题,同时利用图像嵌入的相似性搜索来选择提示语和减少误报预测,实验结果表明我们的方法将简单微调的 SegGPT 在 Few-shot OpenEarthMap 数据集验证集上的加权 mIoU 从 15.96 提升到 35.08。
Apr, 2024
本文提出了一种基于内部语义关系的交互心理测量学方法,旨在解决少样本图像分类问题中标签监督性与复杂概念关系不兼容的挑战性场景,实验结果表明我们的方法在 CIFAR-100 数据集上有很好的表现以及优越性。
Dec, 2021
本文介绍了一种对称的对齐机制,用于学习从极少的例子中获取更广义的视觉概念的方法。实验结果表明,该方法是通用的,并提供了一个强大的基准。
通过语言信息进行语言指导的少样本语义分割,使用视觉 - 语言预训练模型和遮罩优化来生成高质量伪语义遮罩,引入分布式原型监督方法和互补相关匹配模块来指导模型挖掘支持和查询图像的精确语义关系。在两个基准数据集上的实验表明,我们的方法为语言指导的少样本语义分割建立了新的基准,并达到了与最近的视觉指导方法竞争的结果。
本研究关注于使用额外语义信息以便在少量样本时进行图像分类,研究表明组合多种语义信息可以带来更好的效果。
Jun, 2019
本论文提出了一种检索增强的提示学习方法(RePrompt),通过引入检索机制来对下游任务进行知识表示的缓存,该方法在 15 个视觉数据集上进行了广泛实验,包括 11 个在少样本设置下的下游任务和 4 个域泛化基准,在处理领域差异增加时取得了明显的改进。
Jun, 2023
我们介绍了一种名为 I-Prompt 的方法,它是一种与任务无关的方法,专注于图像令牌的视觉语义信息,以消除任务预测,并在四个基准测试中达到了竞争性能,同时与最先进的方法相比显著减少了训练时间。通过大量实验,我们证明了我们的方法在各种场景下的优越性。
Mar, 2024
本研究提出了一个基于知识注入和预训练语言模型的本体增强提示调整(OntoPrompt)方法,能够处理结构数据缺失、噪声和异质性问题,该方法在关系抽取、事件提取和知识图谱完成等三个任务中得到了比基准更好的性能。
Jan, 2022