grounded situation recognition | BriefGPT

关键词grounded situation recognition

搜索结果 - 7

超越类别：通过语言解释实现零样本情境识别
通过引入 Language EXplainer (LEX) 方法，本文在 SWiG 数据集上验证了预训练的视觉语言模型在零样本场景理解和基于场景的情境识别方面的有效性和互操作性。
PDF2 months ago
开放式场景理解：基于情景的认知结合图像分割技术，为视觉受损人群提供帮助
本研究提出了一种 Open Scene Understanding 系统，使用 GSR 和 SAM 来生成像素级密集分割掩模，旨在帮助视力受损者增强场景理解，并通过在 SWiG 数据集上的性能达到最新水平。
PDFa year ago
GSRFormer: 基于交替语义注意力精炼的基础情境识别转换器
本文提出了一种基于双向关系的新的两阶段框架，旨在利用动词和语义角色之间的双向关系，生成结构化的图像语义摘要，实现类人事件理解，实验结果表明该框架在挑战性的 SWiG 基准测试中优于其他最先进的方法。
PDF2 years ago
CVPR基于协同注意力的情境识别 Transformer
本文提出了一种用于情境识别的新方法，称为 Collaborative Glance-Gaze TransFormer，该方法结合了活动分类和实体估计的互动和互补作用，使用 Glance transformer 和 Gaze transfor
PDF2 years ago
AAAI重新思考基于场景的情境识别的双阶段框架
该论文提出了一种新的包含粗粒度到细粒度动词模型和基于 Transformer 的名词模型的 SituFormer 方法，用于地面情境识别，其全面探索了角色之间的统计依赖关系，相比其他方法在各种指标下具有显著性提升，代码公开可用。
PDF3 years ago
使用 Transformers 进行基于场景的情境识别
本文将基于 Transformer 编码解码框架提出一种 Grounded Situation Recognition 模型，通过有效地捕获图像的高层语义特征实现动词的精确定位，进而在处理实体间复杂的、依赖于图像的关系时进行名词的分类和定位
PDF3 years ago
基于场景的情境识别
本文提出了 Grounded Situation Recognition（GSR）这一任务，研究如何利用图像来生成结构化的语义摘要，重点关注图像中的活动、相关主体的角色和范围、以及实例的语义示踪；通过在 Situation With Gro
PDF4 years ago