Nov, 2023
通过自监督的数据选择和合成实现设备端大规模语言模型个性化训练
Enabling On-Device Large Language Model Personalization with Self-Supervised Data Selection and Synthesis
Ruiyang Qin, Jun Xia, Zhenge Jia, Meng Jiang, Ahmed Abbasi...
TL;DR通过提出一种新的框架来选择和存储在线上最具代表性的数据,本文解决了在设备上进行个性化的大型语言模型优化的问题,考虑了稀疏标注和有限的设备存储空间。