BriefGPT.xyz
大模型
Ask
alpha
关键词
multilora
搜索结果 - 1
MultiLoRA: 提升多任务学习效果的 LoRA 民主化
提出了 MultiLoRA,通过减少 LoRA 中观察到的顶层奇异向量的主导性,通过水平扩展 LoRA 模块和改变适应矩阵的参数初始化来减少参数依赖性,从而产生更平衡的单元子空间,从而实现更好的多任务适应性。MultiLoRA 在多个基准和
→
PDF
7 months ago
Prev
Next