BriefGPT.xyz
Sep, 2024
谱小波 dropout:在小波域中的正则化
Spectral Wavelet Dropout: Regularization in the Wavelet Domain
HTML
PDF
Rinor Cakaj, Jens Mehnert, Bin Yang
TL;DR
本文针对卷积神经网络(CNN)的过拟合问题,提出了一种新颖的正则化方法——谱小波 dropout(SWD),通过在特征图的离散小波分解中随机丢弃详细频带,提高模型的泛化能力。与现有的傅里叶 dropout 方法相比,SWD 使用单一超参数,并在多个基准测试中表现出更低的计算复杂性与更优的性能。
Abstract
Regularization
techniques help prevent
Overfitting
and therefore improve the ability of
Convolutional Neural Networks
(CNNs) to generalize
→