EMNLPOct, 2023
探测是否足够?指示性任务作为探测嵌入空间的替代方法
Is Probing All You Need? Indicator Tasks as an Alternative to Probing Embedding Spaces
Tal Levy, Omer Goldman, Reut Tsarfaty
TL;DR通过引入非可训练任务(指标任务),我们展示了利用适当的指标可以更准确地获取嵌入表示中的信息,并较之探测任务的结果更能反映嵌入空间中存在的属性。因此,我们认为在提取嵌入表示的信息时应考虑实施和考虑指标任务。