multimodal relation extraction | BriefGPT

关键词multimodal relation extraction

搜索结果 - 6

合成数据训练在多模态关系抽取中胜过真实数据
使用 Mutual Information-aware Multimodal Iterated Relational dAta GEneration (MI2RAGE) 方法，通过 Chained Cross-modal Generatio
PDF7 months ago
多模态命名实体和多模态关系抽取的思维链提示蒸馏
本研究探索了如何通过生成 “思考链” 从大型语言模型中提取出推理能力并综合常识推理能力，进而实现条件提示蒸馏，提高学生模型在 MNER 和 MRE 数据集上的效果。
PDFa year ago
ACL跨模态检索和综合的多模式关系抽取
本研究提出了一种多模态关系抽取方法，通过检索对象、句子和整个图像的文本和视觉证据，综合考虑了同一和不同模态之间的信息，从而比现有的方法更准确地识别语义关系并显著提高了效果。
PDFa year ago
利用信息筛选进行多模态关系抽取！采用特征去噪和多模态主题建模技术
我们提出了一种新颖的框架，该框架同时实现了内部信息筛选和外部信息利用的想法，通过对图形信息瓶颈原则的引导进行结构细化，将视觉和文本场景图进一步融合成统一的跨模式图形 (CMG)，通过加入潜在多模态主题特征来丰富语境，在基准 MRE 数据集上
PDFa year ago
基于变分信息瓶颈的多模态实体与关系抽取增强
文章研究了多模态命名实体识别和多模态关系提取的方法，并提出了一种基于信息瓶颈的多模态表示学习方法，该方法在三个公共基准测试上取得了最先进的性能。
PDFa year ago
AAAI关于图像对于视觉增强关系抽取作用的分析
本研究对视觉场景图的不准确信息对多模态关系提取的影响进行了分析，提出了一种基于 Transformer 的隐式精细多模态对齐的强基准方法，并通过实验表明了该方法的优越性。
PDF2 years ago