Oct, 2023
混合任务连续学习的子网络发现与软遮罩
Sub-network Discovery and Soft-masking for Continual Learning of Mixed Tasks
Zixuan Ke, Bing Liu, Wenhan Xiong, Asli Celikyilmaz, Haoran Li
TL;DR本文提出了一种新的连续学习方法,通过发现为每个任务建立子网络来解决灾难性遗忘,同时引入了软掩模机制来保留先前的知识并实现知识传递,实验结果显示该方法始终优于强基线模型。