evaluation approaches | BriefGPT

关键词evaluation approaches

搜索结果 - 7

PRePair: 增强逐点推理的鲁棒指令遵循评估
通过比较点对和逐点评估方法，研究发现逐点评估方法对不必要的偏好具有更强的鲁棒性，而逐点评估器在判断错误时仍能准确识别低质量输出的缺点，这表明大型语言模型在点对评估设置中更受其偏见的影响；为了缓解这个问题，该研究提出了一种将逐点推理方法整合到
PDF18 days ago
先进人工智能模型的整体安全和责任评估
高级 AI 模型的安全性和责任评估是研究和实践的一个关键但发展中的领域。该报告总结了 Google DeepMind 在高级 AI 模型的开发中创新并应用了一系列广泛的安全评估方法，并分享了其演变过程中的方法以及从中得出的教训。
PDF2 months ago
绿色跑者：高效的深度学习组件选择工具
通过大语言模型的推理能力，本研究提出了一种新颖的工具 oolname，可以基于自然语言提供的应用场景自动选择和评估模型，并通过将问题描述中的约束和权衡因素整合到模型选择过程中来实现资源高效的实验引擎。初步评估结果表明，与临时评估和蛮力方法相
PDF5 months ago
稀有事件预测的综述
稀有事件预测是使用机器学习和数据分析识别和预测低概率事件。由于数据分布不均衡，普通事件的频率远远超过稀有事件，需要在机器学习流程中的每个步骤中使用专门的方法，从数据处理到算法到评估协议。该论文全面综述了稀有事件预测的当前方法在四个方面：稀有
PDF10 months ago
关于下一个活动预测的概括讨论
现有研究使用深度学习技术并使用公开的事件日志评估其预测性能，但本文通过实验证据对这些评估方法的有效性提出了质疑，揭示了常用的事件日志中存在大量的样本泄漏，使得相对简单的预测方法与利用深度学习的方法几乎同样表现。我们进一步指出，设计稳健的评估
PDF10 months ago
有帮助、误导或使人困惑：人类如何感知人工智能解释的基本构建块
这篇论文探讨了可解释的人工智能技术和其评估方法之间的差距，介绍了使用简单的数学模型来评估不同模型表述的易理解程度，以及如何设置和执行相关用户研究的概念和实践框架。
PDFa year ago
网络嵌入调查
本文介绍了网络嵌入方法的发展和分类，包括结构、属性、有监督、非监督等多种方法，并讨论了其评价指标和未来发展方向以及在构建有效系统中的应用。
PDF7 years ago