language generation | BriefGPT

关键词language generation

搜索结果 - 62

真相与唯一的真相：使用数据流传输和受限解码的忠实可控对话响应生成
介绍了一种基于规则式与神经式语言生成结构的对话回复生成方法，该系统在流畅性，相关性和真实性方面在人类评估中的性能都优于基于规则式和学习式的方法。
PDF2 years ago
不要忘记代词：消除语言模型中的性别偏见，同时保留事实性别信息
本研究探讨大型语言模型中的性别信号，并重点关注英语文本中的两种信号类型：事实性性别信息和性别偏见，在保留事实性性别信号的同时试图减弱刻板印象。研究发现，可以通过过滤方法减少性别中立的专业名称的刻板印象，而不会对语言建模能力造成显着的恶化。这
PDF2 years ago
关于使用嵌入、聚类和字符串进行文本生成器评估的实用性
本文探究了自然语言生成中，自动评价方法之一的 Mauve metric 在理论与实践中的缺陷，并提出了基于聚类的代替方案，通过编码句法和一致性特征来评估文本生成方法。
PDF2 years ago
ACL通过开放式语言生成测量偏见的挑战
本文分析了影响社会偏见结果的文本补全的具体选择、度量、自动工具和抽样策略，发现在不同的实验设置下，测量偏见的实践很容易产生相互矛盾的结果，并提供了有关开放式语言生成中报告偏见的建议，从而更完整地展示给定语言模型所展示的偏见。
PDF2 years ago
AI 人格化：评估语言模型的人格特质
研究表明，大规模语言模型虽然可以输出流畅的文本，但它们也捕捉到人类偏见。本文研究了面向开放式文本生成的几种大规模语言模型的人格特征和训练集，使用问卷设计了人格评估，并用零 - shot 分类器将文本回答分类到可量化的特征中，研究了可以改变这
PDF2 years ago
COLING预训练语言模型在词序中的作用：以 BART 为例的案例研究
使用 BART 语言生成模型进行词序排序能够提高性能，其作用原因是 BART 模型中的句法依赖知识。相关线性化任务也可得到改进。
PDF2 years ago
ACL重新思考和完善区别度量
通过缩放词汇期望值来计算独特分数，我们提出了一种新的期望调整独特分数方法（EAD），能有效消除原始独特分数中存在的偏差，与人类判断更为相关。
PDF2 years ago
利用对比解释解读语言模型
该研究关注对语言模型的对比解释，证明对比解释在验证大型语法现象和改善对相互模拟性上是可量化地更好的，并且可以表征模型在各种语言生成决策中使用的输入令牌。
PDF2 years ago
MMCIS2：故事散文通识推理简化评估
通过 CIS2 任务避免语言生成误导，强调解开自然语言处理中的任务与语言生成之间相互混淆的必要性，并探讨了 Transformer 模型在通识推理任务中的表现限制。
PDF2 years ago
WSDM通过自然语言生成技术实现人类移动性预测
本文提出一种基于语言生成的人类移动趋势预测方法 SHIFT，通过将输入移动趋势描述句子转化为未来的移动状态描述，提高了移动预测模型的有效性和准确性。
PDF3 years ago
VUT: 面向多模态多任务用户界面建模的通用 UI Transformer
本研究提出了一种 VUT 多任务模型，可以同时完成 UI 镜像和结构编码、UI 对象检测、问题回答和命令接地等 5 个不同的任务。实验结果表明，VUT 在减少多任务模型数量和占用空间的同时，准确度也不逊于单独训练的基准模型。
PDF3 years ago
因果语言模型中的交叉偏差
这篇研究论文主要研究了 GPT-2 和 GPT-NEO 语言生成模型中存在的交叉偏见问题，发现单一类别偏见解决方法的局限性，需要采用综合的技术和社区方法来应对复杂的交叉偏见问题。
PDF3 years ago
ACL基于语境的对话生成
本研究探讨了如何利用预训练语言模型生成会话摘要，并通过将生成的会话与真实数据集相结合来提高自动生成的会话总结的准确性。
PDF3 years ago
ACL神经语言模型中的隐含意义表示
研究表明预先训练的神经语言模型中的预测至少部分地由意义的动态表示和实体状态的隐含模拟支持，并且这种行为可以仅依靠文本作为训练数据来学习。
PDF3 years ago
ACL语言生成中的社会偏见：进展与挑战
通过调查，我们着重讨论了语言生成中社会偏见的数据和技术对偏见的影响及降低偏见的进展，并进行了实验来量化解码技术的影响，提出了语言生成应用公平和包容性考虑的重要性。
PDF3 years ago
ACL神经形态变化中的搜索错误探寻
该研究探讨了神经序列到序列模型在语言生成任务中的应用，发现在单词级任务中，准确推断这些模型会发现空字符串常常是全局最优解，但在形态学变化的情况下，空字符串几乎不是模型最可能的解，且贪婪搜索通常能找到全局最优解。这表明，许多神经模型的不良校准
PDF3 years ago
COLINGApposCorpus：面向事实陈述的新型多语言、多领域数据集的同位语生成
本文对提出的一种新方法，即生成同位语名词短语，对包括人物和组织在内的实体进行识别并提供背景信息的任务进行了研究和分析，并说明了任务存在的各种建模挑战和改进空间。
PDF4 years ago
COLINGVec2Sent: 用自然语言生成探究句子嵌入
使用生成模型从灰盒句子嵌入中检索离散句子作为一项新的非监督探测任务，并表明其与下游任务性能的相关性，同时展示不同编码器生成的语言存在差异。应用该方法从句子嵌入中生成句子类比。
PDF4 years ago
EMNLP内容优先：以文档为级别的目标内容转移
本文介绍了将文档级别的有针对性的内容转移应用于配方领域中，通过生成式预训练语言模型 (GPT-2) 模型来实现，在保持原始文档的情况下，生成了遵守限制且连贯多样的改写，并评估了改写效果。同时，倡导语言生成更具有实质性的限制性。
PDF4 years ago
COLING使用群体估计方法评估语言生成的方法
本文提出了一系列基于生态学中广泛使用的种群估计方法的语言生成评价度量，包括三个新的评价度量，用于从质量和多样性两个方面评估生成的语言的质量和多样性，并在未经训练的语言生成、机器翻译和文本摘要等多个方面表现出比现有度量更高的与人类评估结果的相
PDF4 years ago