Jul, 2023
基于提示的微调总是比基本微调更好吗?来自于跨语言理解的洞见
Is Prompt-Based Finetuning Always Better than Vanilla Finetuning? Insights from Cross-Lingual Language Understanding
Bolei Ma, Ercong Nie, Helmut Schmid, Hinrich Schütze
TL;DR本文提出 ProFiT 管道,研究 Prompt-Based Finetuning 的跨语言能力,发现在语言理解中 Prompt-Based Finetuning 的效果和适用性优于 Vanilla Finetuning,且在少样本场景下表现出更大的优势。