BriefGPT.xyz
Ask
alpha
关键词
universal attention heads
搜索结果 - 1
EMNLP
基于预训练语言模型的多语言基于图表的成分句法分析提取
本研究开发了一种基于图表的方法和有效的 top-K 集成技术,通过应用这种方法到多语言的预训练语言模型中,可以在集成和语言无关的方式下诱导出九种语言的句子的非平凡解析,同时发现了普遍的注意力头,这些头与句法信息的感知是一致的,验证了该方法的
→
PDF
4 years ago
Prev
Next