Dec, 2023

基础模型嵌入的接口

TL;DR我们介绍了 FIND,一个用于对齐基础模型嵌入的广义接口。该接口具有通用性,适用于涵盖检索、分割等各种任务,在相同的架构和权重下。通过原型化注意掩码和嵌入类型,不同的任务可以实施。该接口对新任务和新模型具有适应性。通过多任务多模态训练,该接口创建了一个交替共享的嵌入空间。在 FIND-Bench 上,我们的方法达到了最先进的性能,并在标准的检索和分割设置上取得了有竞争力的性能。