BriefGPT.xyz
Ask
alpha
关键词
self-stabilization
搜索结果 - 1
ICLR
自稳定性:梯度下降在稳定边缘的隐性偏差
本研究发现梯度下降在稳定边缘状态下具有自我稳定性和隐式偏差,可以通过投影梯度下降来描述,并对其在训练过程中的损失、尖锐度和偏差进行了详细预测和验证。
PDF
2 years ago
Prev
Next