Jun, 2024
通过极端稀疏化物理约束神经网络模型,提高斯坦变分推理的性能
Improving the performance of Stein variational inference through extreme sparsification of physically-constrained neural network models
Govinda Anantha Padmanabha, Jan Niklas Fuhg, Cosmin Safta, Reese E. Jones, Nikolaos Bouklas
TL;DR科学机器学习的应用中,$L_0$ 稀疏化优于直接应用 Stein 变分梯度下降 (SGVD) 或投影 SGVD 方法,具有更好的鲁棒性、计算效率和性能,并且在噪声环境、外推区域以及收敛速度方面表现出卓越优势。