Dec, 2022

异构人工智能工作负载精确能耗测量

TL;DR近年来人工智能的兴起和模型复杂度的增加已开始带来计算资源需求上的挑战,本文针对大规模 AI 方法的能源效率问题,通过对不同计算节点上深度学习模型进行测量,说明了在算法层面和未来计算集群和硬件设计方面,准确测量 AI 工作量的功耗需求之重要性,以及模型训练和推理的能耗差异,提供了降低成本、提高用户意识的解决方案。