Feb, 2024

GumbelSoft: 利用 GumbelMax 技巧实现多样化的语言模型水印

TL;DR通过引入新型的 GM 水印 ——Logits-Addition 水印及其三个变种,以提高生成多样性;其中,GumbelSoft 水印在高多样性条件下表现出优越的性能,其 AUROC 得分优于其他两种变体的得分 0.1 至 0.3,并超过其他解码水印方法至少 0.1。