BriefGPT.xyz
大模型
Ask
alpha
关键词
layer-selective rank reduction
搜索结果 - 1
其中隐藏真理:使用层选择性排名降低改善语言模型的推理能力
通过选择性删除大型语言模型(LLMs)的高阶权重矩阵组成部分,可以显著提高其性能,称为 LASER(LAyer-SElective Rank reduction)方法。该方法在训练完成后对模型进行简单介入,不需要额外的参数或数据,并通过广泛
→
PDF
6 months ago
Prev
Next