BriefGPT.xyz
Ask
alpha
关键词
implicit self-regularization
搜索结果 - 1
神经网络模型中的传统自我正则化和重尾自我正则化
本研究运用随机矩阵理论分析了深度神经网络的权重矩阵,通过实验和理论结果表明神经网络层矩阵的经验谱密度显示出传统正则化统计模型的特征。并且发现随着训练阶段的增加,隐式自正则化逐渐显现,这种隐式自正则化可以像传统的 Tikhonov 正则化一样
→
PDF
5 years ago
Prev
Next