Mar, 2024

线性动态系统的连续时间神经网络的系统构建

TL;DR本文讨论了一种构建神经网络架构的系统方法,用于模拟一类动力系统,即线性时不变 (LTI) 系统。我们使用一种变种的连续时间神经网络,其中每个神经元的输出连续演化为一阶或二阶常微分方程的解。我们提出了一种无梯度算法,从给定的 LTI 系统中直接计算稀疏架构和网络参数,利用其特性。我们提出了一种横向隐藏层的新型神经网络架构范例,并解释了为什么使用传统的纵向隐藏层神经网络可能不是理想选择。我们还给出了该神经网络数值误差的上界,并展示了我们构建的网络在三个数值示例上的高精度。