BriefGPT.xyz
Ask
alpha
关键词
low-rank decomposition-based fine-tuning
搜索结果 - 1
AdaFish:利用二阶信息进行快速低秩参数高效微调
介绍了一种高效的 AdaFish 算法,用于加快在低秩分解为基础的微调框架中的训练过程,该算法证明了全局收敛性和迭代 / 预言机复杂性,并通过数值实验与 AdamW 方法进行了竞争性比较。
PDF
4 months ago
Prev
Next