Mar, 2022
NMT 能理解我吗?朝着基于扰动的 NMT 模型代码生成评估的方向
Can NMT Understand Me? Towards Perturbation-based Evaluation of NMT Models for Code Generation
Pietro Liguori, Cristina Improta, Simona De Vivo, Roberto Natella, Bojan Cukic...
TL;DR本文研究了神经机器翻译在代码生成中的鲁棒性检验方法和评价指标,提出了一组针对性的扰动和度量方式以验证模型的稳健性。通过初步的实验评估,得出了哪种扰动最影响模型以及对未来研究方向的有用见解。