Apr, 2024
SilverSight: 基于自适应语义空间学习的多任务中国金融大语言模型
SilverSight: A Multi-Task Chinese Financial Large Language Model Based on Adaptive Semantic Space Learning
Yuhang Zhou, Zeping Li, Siyu Tian, Yuchen Ni, Sen Liu...
TL;DR大型语言模型被广泛应用于各个专业领域,本研究引入了一种自适应语义空间学习框架(ASSL),通过对语义空间内数据分布的自适应重组,增强了多专家模型的性能和选择效果。我们使用此框架训练了一个名为 “SilverSight” 的金融多任务 LLM,在只使用 10% 的数据情况下,取得接近完整数据训练的结果,并展现出强大的泛化能力。