multi-modal embeddings | BriefGPT

关键词multi-modal embeddings

搜索结果 - 5

概念可视化：使用 WordNet 解释 CLIP 多模态嵌入
我们提出了一个新的显著性方法，称为 Concept Visualization (ConVis)，通过利用嵌入式多模态信息解释图像的 CLIP 嵌入。我们使用 WordNet 中的词汇信息计算任何概念的与任务无关的显著性图，并验证了我们对
PDFa month ago
3D-MIR：放射学中三维医学图像检索的基准和经验研究
通过引入一个新的基准系统，本文探讨了使用聚合的 2D 切片、3D 体积和流行的多模态基模型的多模态嵌入作为查询，在医学影像领域中进行三维医学图像检索的多种搜索策略，并提供了定量和定性评估，为未来研究提供了深入讨论和见解。
PDF7 months ago
基于多模态弱信号的无监督领域无关假新闻检测
本研究提出了一个有效的无监督框架，用于利用社交媒体中四种信息类型的知识，从而检测 COVID-19 相关新闻中的虚假信息。该框架使用一个强大的噪声鲁棒的自监督学习技术和一种新颖的数据集构建技术来提高检测性能，并在现有的标记数据集上取得了显著
PDFa year ago
ACL表意文字信息帮助学习自然语言推理的更好表示
本文通过自然语言推理任务探讨提供语言模型与既有表意图形（glyph）信息相结合的多模态特征，在语义表示学习中获得更好的性能，表明在使用表意文字的语言中，特别是对于使用频率较低的词，使用多模态嵌入有显著效果。
PDF2 years ago
PinnerSage: Pinterest 多模态用户嵌入式框架推荐
本文介绍了一种名为 PinnerSage 的个性化推荐系统，其中通过聚类用户的行为并对其进行代表性汇总，使用多模态嵌入为每个用户表示提供了丰富的表示，从而提供了高质量的个性化建议。作者通过离线和在线 A/B 实验表明，与单个 embeddi
PDF4 years ago