Apr, 2024

语言模型在自动化心理医疗中的风险:伦理和实施结构

TL;DR通过对有关心理健康支持的批判性问题的评估,本文提出了一个结构化框架,旨在应对与自主任务 AI 在心理健康领域的发展所相关的伦理和实际挑战,并定义了 AI 代理在支持心理健康方面的等级自主性、伦理要求和有益的默认行为。此外,评估了十种先进的语言模型,结果发现这些现有模型不能达到人类专业人员的标准,不能适应细微差别和理解上下文,可能导致用户受伤甚至加重症状。因此,需要探索解决方案来增强当前模型的安全性,以确保它们能可靠地检测和管理常见心理障碍的症状,从而避免对用户的伤害。这需要与我们研究中提出的伦理框架和默认行为相一致,强调模型开发人员有责任根据这些指南改进其系统,以防止当前人工智能技术对用户心理健康和安全造成风险。