通过元学习在 CTR 预测中利用残差用户偏好来热身冷用户
本文提出了一种推荐系统,名为 MeLU,基于元学习方法,在用户冷启动状态下能够快速预测用户偏好并提供个性化推荐,其关键在于选择特异性证据进行预测,该方法成功优于其他两种比较模型并被用户研究实验所验证。
Jul, 2019
我们提出了基于专家模型的冷启动与热身网络,专家模型分别负责冷启动和热身用户建模,门控网络用于整合两个专家的结果,引入动态知识蒸馏作为教师选择器,以帮助专家更好地学习用户表示,通过综合的互信息选择与用户行为高度相关的特征用于显式建模用户行为偏差,最终在公共数据集上评估了我们的冷启动与热身网络,在匹配阶段常用模型的比较中表现优异,对于所有用户类型,我们的模型胜过其他模型,还将该模型应用于一个工业级短视频平台,在应用停留时间和用户留存率方面实现了显著的增加。
Sep, 2023
本文提出了一种名为 Meta-Embedding 的元学习方法,通过先前学习的广告嵌入来生成新的广告 ID 的初始化嵌入,进而提高了 Click-through rate (CTR) 预测的性能,并通过实验结果证明了 Meta-Embedding 在冷启动和预热阶段都能显著提高 CTR 预测模型的精度。
Apr, 2019
本文通过基于元强化学习的会话推荐系统策略学习,提出了三个协同的组件,包括专注于识别用户偏好的元探索策略、为每个用户调整项目推荐模块以最大化推荐质量、基于 Transformer 的状态编码器,以在会话期间建模正反馈之间的复杂关系,实现对新用户的快速个性化适应,为冷启动挑战提供解决方案。实验结果表明,与一组最先进的 CRS 解决方案相比,我们的解决方案在为新用户提供服务方面具有优势。
May, 2022
提出了一种名为个性化用户偏好传递跨域推荐的新框架,在现有的基于特征桥的方法的基础上,使用元网络来为每个用户生成个性化的桥函数,以此实现每个用户偏好的个性化传递。使用大型真实数据集进行了实验验证新框架的有效性。
Oct, 2021
该研究通过对协同过滤模型的信息论解释,提出一种基于对比学习的冷启动推荐框架 (CLCCre),该框架结合了内容特征和协同表示,并通过保留内容表示中的协同信号来提高冷启动推荐的效果。在四个公开数据集的实验中,该方法在热启动和冷启动场景中均取得了显著的改进。
Jul, 2021
该研究提出了一种叫做 ETA 的局部敏感哈希方法,可以大大降低训练和推理成本,并使得可以使用长期用户行为序列进行端到端训练,以实现更好的点击率预测表现。
Aug, 2021
提出了一种基于 Multi-Interest Self-Supervised learning 的 CTR 预测框架,使用 CNN-based multi-interest extractors 提取不同兴趣表示中的自监督信号,并应用对比学习损失来提高特征表示学习。实验证明,该框架可以有效应用于现有 CTR 预测模型中并显著提高性能。
Nov, 2021
本论文提出了一种基于数据检索的用户行为检索框架(UBR4CTR),通过可学习的搜索方法从整个用户历史序列中检索出最相关和最适当的用户行为,然后将这些检索到的行为馈入深度模型进行最终预测,该框架能够在低成本下被高度可行地部署到工业模型流水线中,三个实际大规模数据集上的实验证明了该框架的优越性和功效。
May, 2020
本文提出了一种名为 Meta-Wrapper 的深度学习框架,在 CTR 预测中用于用户兴趣筛选,该方法采用了注意力机制和元学习算法以实现包装器方法的特征选择,并在三个公共数据集上进行了广泛实验验证。
Jun, 2022