Jan, 2020

使用复权无序多重集自动机表示无序数据

TL;DR该论文提出使用复数加权多重集自动机来表示多重集,并展示了某些现有神经结构的多重集表示可以被视为我们方法的特殊情况,进而提供了Transformer模型使用正弦函数表示位置的新理论和直观证明,并扩展DeepSets模型以使用复数,在拓展任务上优于现有模型。