超越效率:可持续扩展人工智能
本篇研究从数据、算法和硬件系统综合视角探讨了 AI 的超线性增长趋势对环境的影响,着重分析了 AI 计算的碳足迹和硬件系统的全生命周期,并提出了硬件 - 软件设计和优化对减少 AI 总体碳足迹的重要性,讨论了 AI 领域的挑战和发展方向。
Oct, 2021
人工智能 AI 目前以深度学习等机器学习方法为核心,然而这些方法在计算、能源消耗和碳排放等方面存在环境问题。提高机器学习系统的效率仅仅是解决环境影响的一方面,系统思维则被认为是改善机器学习环境可持续性的可行途径。
Sep, 2023
通过将深度学习的效率作为评估标准之一,并建议报告开发、训练和运行模型的财务成本,以提供研究越来越高效方法的基准,本文旨在使人工智能更加绿色和包容,实现任何有灵感的本科生都可以编写高质量的研究论文。
Jul, 2019
人工智能在技术和研究方面取得了显著的进展,并广泛应用于计算视觉、自然语言处理、时间序列分析、语音合成等多个领域。然而,随着大型语言模型的出现,研究人员的注意力主要集中在追求最新的技术成果,导致模型规模和计算复杂性不断增加,需要更高的计算能力,进而产生更高的碳排放量,阻碍了资金有限的中小型研究机构和公司参与研究,并引发研究公平性的问题。为应对计算资源和人工智能的环境影响,绿色计算已成为一个热门的研究课题。在本调研中,我们对绿色计算中使用的技术进行了系统概述,并提出绿色计算的框架,将其分为四个关键组成部分:(1) 绿色度量指标,(2) 能效人工智能,(3) 能效计算系统和 (4) 可持续发展的人工智能应用案例。针对每个组成部分,我们讨论了研究进展及常用的优化技术,结论表明这个新的研究方向有潜力解决资源限制与人工智能发展之间的冲突。我们鼓励更多的研究人员关注这个方向,使人工智能更加环保友好。
Nov, 2023
该论文介绍了一个名为 eco2AI 的开源工具,可以帮助科学家跟踪深度神经网络模型训练和推理的能量消耗和等效二氧化碳排放,并鼓励研究社区寻找具有较低计算成本的新型人工智能(AI)架构,并建立可持续 AI 和绿色 AI 的路径。
Jul, 2022
本文全面研究了利用云计算的可扩展和分布式人工智能框架以提高深度学习性能和效率的关键方面,包括数据存储和管理、优化策略、模型部署与服务等,并讨论了云计算人工智能的挑战、限制和未来研究方向。
Apr, 2023
近年来人工智能的兴起和模型复杂度的增加已开始带来计算资源需求上的挑战,本文针对大规模 AI 方法的能源效率问题,通过对不同计算节点上深度学习模型进行测量,说明了在算法层面和未来计算集群和硬件设计方面,准确测量 AI 工作量的功耗需求之重要性,以及模型训练和推理的能耗差异,提供了降低成本、提高用户意识的解决方案。
Dec, 2022
本文探讨了绿色人工智能的前景,以实现更可持续、能效更高和更能意识到能源生态系统,在人工智能研究、计算和从业者社区中进行开发。包括对操作和硬件优化、数据中心 / 高性能集群的潜在变化和改进的鸟瞰,以及人工智能研究和实践世界中现有的激励结构。
Jan, 2023
应对气候变化是可持续发展和应对气候变化的 AI 技术的一个重要方向,研究中提出了 DeepEn2023 的大规模能源数据集,以测量、分析和优化边缘 AI 系统和应用的环境可持续性。
Nov, 2023