GFN-SR: 基于生成流网络的符号回归
介绍了一种名为 GSR 的基于遗传编程的符号回归方法,该方法通过基函数的加权和发现自变量与目标变量之间的关系,并获得了与强符号回归基准方法相当的实验性能,并引入了一种新的符号回归基准集 SymSet。
May, 2022
我们提出了 DySymNet,这是一个新颖的神经引导的动态符号网络,用于符号回归。通过对各种结构进行优化,我们能够更好地识别与数据更匹配的表达式,在低维和高维问题中都能取得卓越的性能。
Sep, 2023
本文提出了一种新的基于贝叶斯的符号回归 (SR) 方法,通过添加先验知识,控制复杂度,并利用马尔可夫链蒙特卡罗方法从后验分布中采样符号树,从而提高 SR 模型的可解释性和准确性。与遗传编程相比,该方法更节省计算机内存。
Oct, 2019
本篇论文提出一种利用符号回归技术和 FPGA 实现的机器学习模型优化算法,成功地将一个由 3 层神经元组成的模型大幅优化,准确率超过 90%,执行时间缩短了 13 倍。
May, 2023
在函数分析的新视角下,我们提出了一种名为傅里叶树生长(FTG)的新颖符号回归方法,以解决遗传编程在树状表示用于符号回归时的性能限制问题,并在经典一维基准问题上取得了显著的性能改进,同时揭示了遗传编程在符号回归问题上的局限,并为进一步推动符号回归和可解释机器学习相关领域的发展指明了方向。
Feb, 2024
本研究提出了一种名为 DGP 的可微分方法,用于高维符号回归,其包括新的数据结构、采样方法和多样化机制等。实验证明,该方法能够有效地优化生成树,取得了在高维回归基准测试中优于同行竞争者的性能,并且即使在不同噪声水平下,也能够实现最佳恢复率。
Apr, 2023
基于深度策略梯度的垂直符号回归(VSR-DPG)可以通过将代数规则迭代应用,建立起包含多个输入变量的等式,显著超越了基于深度强化学习的方法和以往的 VSR 变种。
Feb, 2024
本文研究了将预训练的大型语言模型(LLMs)整合到 Symbolic Regression(SR)流程中,利用 LLMs 依据观测数据提出可能的函数,并通过模型自身和外部优化器逐步优化,取得令人满意的结果。同时,分析了在这一背景下的视觉 - 语言模型,在输入中包含图像以辅助优化过程,研究结果显示 LLMs 能够成功恢复适合给定数据的符号方程,优于基于遗传编程的 SR 基准方法,并且将图像加入输入具有较好的效果,尤其对于复杂的基准问题。
Apr, 2024