codex | BriefGPT - AI 论文速递

关键词codex

搜索结果 - 8

探索大型语言模型在解决编程问题中的鲁棒性
该研究探讨了大型语言模型在编程问题中的应用，发现最新技术如 InstructGPT 和 ChatGPT 在处理指令时表现优异，而早期使用变量名如 Codex 的模型的性能受描述问题时表浅的指标较大影响。
PDFa year ago
大型语言模型与简单愚蠢的错误
本研究检验了 AI 助手 Copilot 使用 Codex 生成代码时存在的简单错误（SStuBs），发现 Codex 和其他大型语言模型确实可以避免一些 SStuBs，但会生成已知的错误。我们探讨了这些错误的后果，并提出了一些避免策略，可
PDFa year ago
通过 Codex 引导的神经符号推理检测故事不一致性
本文研究利用符号方法跟踪故事状态和帮助故事理解，通过对 CoRRPUS 系统和抽象提示过程的研究，表明我们的方法可以在最小的手动工程条件下，打败当前的有结构的语言模型技术，希望这项研究能够强调符号表示和专门提示对 LLM 的重要性。
PDFa year ago
使用几乎免费的代码生成工具？对预训练语言模型在代码上进行少量学习的研究
本文研究使用预训练的代码语言模型 Codex 进行 few-shot 学习的三个代码操作和生成任务，实现手动开发工具所需的更少的工作量，并提供关于如何设计适当输入和影响模型大小的见解，结果表明 few-shot 语言模型是出乎意料地有效的，
PDF2 years ago
评估大型语言模型的文本到 SQL 能力
通过对 Codex 语言模型的 Text-to-SQL 能力进行实证评估，我们发现 Codex 在 Spider 基准测试中是一个强有力的基线，并分析了 Codex 在该设置中的失败模式。此外，我们展示了在 GeoQuery 和 Schol
PDF2 years ago
使用 OpenAI 的 Codex 进行自动程序修复：评估 QuixBugs
本文研究了 OpenAI 的 Codex 是否能够定位和修复软件中的错误，发现 Codex 的泛用性使其非常有效，而且在修复 Python 中的错误方面具有一定的优势。
PDF3 years ago
对基于代码训练的大型语言模型的评估
本文介绍了从 GitHub 公开可用的代码细调的 Codex 语言模型，并研究了其 Python 代码编写能力。在新的评估集 HumanEval 上，我们的模型可解决 28.8% 的问题，并发现重复采样模型是解决难题的有效策略。但我们也发现
PDF3 years ago
EMNLPCoDEx：一个全面的知识图谱补全基准
介绍 CoDEx，这是一组知识图谱补全数据集，来源于 Wikidata 和 Wikipedia。与现有的补全基准相比，CoDEx 在范围和难度上都有所改进，包含三个大小和结构差异的知识图谱、实体和关系的多语言描述以及数万个可信但已经被验证为
PDF4 years ago