ACLFeb, 2024
三重编码器:共同激活的表示共同连接
Triple-Encoders: Representations That Fire Together, Wire Together
Justus-Jonas Erker, Florian Mai, Nils Reimers, Gerasimos Spanakis, Iryna Gurevych
TL;DR通过基于搜索的对话模型和曲线对比学习,引入三重编码器来有效地计算独立编码的话语的混合分布,通过一种新颖的 Hebbian 启发的共现学习目标,实现了高效计算,而无需重新编码,从而实现了更好的零样例泛化。