Feb, 2024

组合式客户端 - 主节点多智能体深度强化学习在移动边缘计算中的任务卸载

TL;DR近年来,移动应用程序的爆发性增长引起了人们的关注,但用户设备在处理计算需求方面存在局限性。移动边缘计算作为应对用户设备不断增长的计算需求的一项有前途的技术,通过在用户设备和移动边缘计算服务器之间分配任务来满足用户设备的需求。深度强化学习在任务卸载问题中受到关注,因为它能够适应动态变化并减少在线计算复杂性。然而,用户设备和移动边缘计算服务器上的各种连续和离散资源约束给有效基于深度强化学习的任务卸载策略的设计带来了挑战。我们提出了一种新颖的组合客户端 - 主控深度强化学习算法(CCM_MADRL_MEC),用于移动边缘计算中的任务卸载,使得用户设备能够决定其资源需求,并使服务器基于用户设备的需求做出组合决策。CCM_MADRL_MEC 是任务卸载中首个考虑服务器存储容量以及用户设备约束的多智能体深度强化学习算法。通过利用组合动作选择,CCM_MADRL_MEC 相对于现有的多智能体深度确定性策略梯度算法和启发式算法具有更好的收敛性。