Mar, 2022

minicons: 用于Transformer语言模型的灵活行为和表征分析

TL;DR本论文描述了一个名为minicons的开源库,该库提供了一种标准API,使研究者能够研究基于transformer的语言模型的行为和表征分析。minicons库可用于两个级别的分析:即在预测水平上和在表征水平上。通过两个案例研究,证明了该库的有效性和可用性。