ICMLFeb, 2018
神经网络应足够宽以学习不连续的决策区域
Neural Networks Should Be Wide Enough to Learn Disconnected Decision Regions
Quynh Nguyen, Mahesh Chandra Mukkamala, Matthias Hein
TL;DR研究表明,深度学习中的 “宽度” 同样重要,特别是激活函数包含泄漏整流线性单元的金字塔结构前馈神经网络可以保证产生连通的决策区域,这对神经网络的构建和分类器的对抗性攻击有着重要的意义。