利用大型语言模型进化成本感知的获取函数
该论文提出了一种基于大型语言模型的方法 FunBO,可以学习用于函数优化的新的采集函数,并在各种全局优化基准和超参数优化任务中取得竞争性性能。
Jun, 2024
本文介绍了一种基于强化学习技术的数据驱动式采样函数选择策略,称为强化学习辅助贝叶斯优化(RLABO),用于高昂的黑盒优化问题,取得了具有竞争力和鲁棒性的优化效果。
Oct, 2022
利用大型语言模型进行算法进化,能够自动生成优化算法,减少人工专家和领域知识的需求,在解决推销员旅行问题方面表现优异,具有出色的可伸缩性,与先前的利用语言模型作为搜索操作符的尝试大不相同。
Nov, 2023
融入大型语言模型的进化算法为分子发现问题的优化提供了一个优越性能的解决方案,通过重新设计进化算法的交叉和变异操作,利用大型化学信息语言模型进行大规模的实证研究,在单目标和多目标环境中,对于性能优化、分子重发现和基于结构的药物设计等多个任务表现出优于基线模型的优越性能,提高了最终解的质量和收敛速度,同时减少了所需的目标评估次数。
Jun, 2024
演化计算(EC)是一种强大的优化算法,已在各个领域得到应用。大型语言模型(LLMs)的出现不仅改变了自然语言处理,还将其能力扩展到各个领域。通过利用 LLMs 的丰富知识和自适应能力,我们提供了一个前瞻性的概述,介绍了 LLMs 对 EC 可能带来的改进,重点关注算法本身、种群设计和其他增强措施。这为 LLMs 和 EC 交叉研究的未来方向提供了一个有希望的方向。
May, 2024
本研究提出了一种名为 Evolver 的知识融合方法,它可以将不同语言模型的权重进行集成,通过进化算法生成新的模型并与父模型进行评估,达到在不同数据领域通用且性能优越的目的,这种方法与现有模型合并框架无缝集成,为模型增强提供了一种多功能工具。
Jun, 2024
基于大型语言模型(LLMs)和进化算法(EAs)的优势和互补性,本文提出了一篇综合综述和展望性的论文,将它们的相互启示分为 LLM 增强进化优化和 EA 增强 LLM 两个方面,并介绍了一些整合方法来论证在各种应用场景中 LLMs 与 EAs 的融合。这篇论文是围绕 LLMs 时代的 EA 研究的首个综合综述,为了解和利用 LLMs 与 EAs 之间的协作潜力奠定了基础,并提供了挑战和未来方向的指导。
Jan, 2024
我们用大型语言模型结合进化计算范式提出了一种新的算法进化(AEL)框架,用于自动算法设计,并在旅行商问题中使用 AEL 设计了引导算法。实验证明,AEL 设计的引导算法在相同迭代预算下优于人工设计的引导算法,标志着自动算法设计的新纪元的出现。
Jan, 2024