cross-modal knowledge transfer | BriefGPT

关键词cross-modal knowledge transfer

搜索结果 - 4

ELiTe: 高效的图像到 LiDAR 的知识转移用于语义分割
通过跨模态知识转移增强了点云表示学习在激光雷达语义分割中的应用，引入有效的知识转移策略和众多优化方法，得到了领先的性能并且具有较低的模型参数。
PDF2 months ago
ACL利用视觉知识在语言任务中：跨模态知识转移的中间预训练的实证研究
本研究探索了将视觉知识整合到语言模型中以填补现有文本信息中缺失的相关性和物体属性信息的空白。研究发现，视觉知识传递可以在低资源和完全监督设置下均有效提高预先训练的语言模型在需要视觉知识的下游任务中的性能。
PDF2 years ago
CVPRX-Trans2Cap：使用 Transformer 进行跨模态知识转移的 3D 密集字幕生成
本研究提出一种名为 X-Trans2Cap 的 3D 密集字幕生成模型，通过跨模态知识转移实现对单模态 3D 字幕生成性能的有效提升，该模型使用 Transformer，并采用师生框架来构建。在实验中，通过对特征进行对齐和融合，提出的方法不
PDF2 years ago
基于跨任务知识迁移的场景结构指导学习：单深度超分辨率
在没有 RGB-D 成对数据的情况下，为第一次探索如何在训练阶段学习跨模态知识，并在单一深度模态的目标数据集上进行测试。通过构建一个辅助深度估计任务，实现了 RGB 模态中的场景结构指导知识到单一深度模态下的 DSR 任务的跨任务交互。广泛
PDF3 years ago