Nov, 2023
对比式视觉 - 语言对齐提高指示学习效率
Contrastive Vision-Language Alignment Makes Efficient Instruction Learner
Lizhao Liu, Xinyu Sun, Tianhang Xiang, Zhuangwei Zhuang, Liuren Yin...
TL;DR通过将 Contrastive 和 Generative 方法应用于 ViT 和 LLM 的表示对齐,我们提出了 CG-VLM 模型,有效地实现了视觉 - 语言的对齐,成为一种高效的指令学习器。