text generation | BriefGPT - AI 论文速递

关键词text generation

搜索结果 - 391

见之于眼：通过 CLIP 引导解码减轻大型视觉语言模型产生的幻觉
大规模视觉语言模型容易出现对象幻觉问题，本文提出了使用 CLIP 引导解码的方法来减少对象幻觉，通过增强生成文本与图像之间的视觉联系，有效缓解了多个视觉语言模型家族中的对象幻觉问题，并且保持了文本生成的实用性。
PDF4 months ago
ACLCEV-LM：控制编辑向量语言模型用于塑造自然语言生成
本文介绍了 CEV-LM，一种轻量级半自回归语言模型，利用约束编辑向量来控制文本的速度、音量和曲折度这三个衡量文本形状的指标，研究表明 CEV-LM 能够更精确地控制这三个指标，同时保持语义内容、使用更少的训练数据和参数。
PDF4 months ago
塞尔维亚语的新语言模型
本文简要介绍了用于塞尔维亚语的基于 Transformer 的语言模型的发展历史，同时还提出了几个使用塞尔维亚语资源进行训练的文本生成和矢量化模型。在四个自然语言处理任务上比较了十个选择的塞尔维亚语矢量化模型，包括两个新的模型。本文分析了在
PDF4 months ago
LLM 通过超参数感知生成实现自我调节
通过利用自动调参指令调节，我们提出了一种新的文本生成范式 —— 超参数感知生成（Hyperparameter Aware Generation，HAG）模型，能够让大型语言模型（LLMs）自主决定最佳的解码策略和配置，实现自我调节的行为。实
PDF5 months ago
探索精确度和召回率以评估 LLMs 的质量和多样性
该论文介绍了一个评估大型语言模型的新颖框架，重点是将图像生成的精确性和召回率指标应用于文本生成。通过对最先进的语言模型进行全面评估，揭示了它们在开放式生成任务上的性能问题，传统基准测试无法充分捕捉到。研究结果表明，在模型通过人类反馈进行微调
PDF5 months ago
ACLSyntaxShap: 一种文本生成的语法感知解释性方法
为了在安全关键领域利用大型语言模型的力量，我们需要确保其预测的可解释性。本文介绍了 SyntaxShap，一种针对文本生成的局部、模型无关的可解释性方法，考虑了文本数据中的句法结构。通过扩展 Shapley 值来考虑基于解析的句法依赖关系，
PDF5 months ago
当心言辞：评估会话式大型语言模型的词汇丰富性
评估使用语言模型生成的文本的词汇丰富性及其与模型参数的相关性。
PDF5 months ago
LiFi：轻量级受控文本生成与细粒度控制编码
在文本生成领域，为了满足更精确的控制需求，我们提出了一种名为 LIFI 的新方法，它提供了一种轻量级的方法，可实现精细控制的文本生成。与之前的研究不同，LIFI 在连续、相对和非排他性控制代码的指导下学习控制文本生成。我们通过属性分类器自动
PDF5 months ago
ACL通过 LLM 后编辑改进跨领域低资源文本生成：一种程序员 - 口译员方法
通过提出一种神经程序解释器方法，将后编辑动作专门设计用于文本生成，以解决大型语言模型的后编辑方法在跨领域时的泛化能力不足的问题。大量实验证明，该方法在逻辑形式到文本转换和低资源机器翻译中显著提高了 GPT-3.5 的性能，并超过了其他最先进
PDF5 months ago
个性化文本生成与细粒度语言控制
对于控制细粒度属性的文本生成研究，本文通过引入新的基准测试，系统调查了不同大型语言模型在生成个性化文本方面的性能，并从影响性能的因素中获得了一些见解。
PDF5 months ago
线性时间最小贝叶斯风险解码与参考汇聚
提出一种将成对度量分数近似为与聚合参考表示相对比的方法，从而将效用度量的复杂度从二次降低到线性，同时在实证中保留大部分 MBR 解码所带来的质量提升。
PDF5 months ago
ACL用于引导生成式大型语言模型的风格向量
本研究通过在文本生成过程中向隐藏层的激活添加风格向量，探索将大型语言模型 (LLMs) 的输出引导到特定风格 (如情感、情绪或写作风格) 的策略。通过一系列实验，我们展示了使用这种风格向量进行激活工程对生成文本的风格产生影响的有效性和可调节
PDF5 months ago
非可交换的最近邻一致性语言生成
通过利用最近对非交换式依从预测的研究结果，我们提出了一种新的统一预测框架的扩展，名为非交换式依从核心采样，用于基于最近邻的生成。我们的方法可以后处理任意模型，提供具有统计保证的标记级预测集，并且在机器翻译和语言建模实验中展示了令人鼓舞的生成
PDF5 months ago
纬纱：创意写作的基础模型
Weaver 是一种专注于内容创作的大型语言模型（LLM）系列，通过精心挑选的语料库进行预训练，再通过创造性和专业写作目的进行微调，使其能够生成更接近人类风格的文本并满足更多样化的内容创作指令。Weaver 系列各个模型规模适用于不同应用，
PDF5 months ago
SemScore：基于语义文本相似度的指导调整 LLMs 的自动评估
提出一种称为 SemScore 的直接将模型输出与目标响应进行语义文本相似度比较的简单但非常有效的评估度量，对于评估调整教学语言模型在人工评估方面具有优势。
PDF5 months ago
EMNLP生成和量化不太可能的文本：要爆发还是不要爆发
大型语言模型在文本生成方面具有极高的能力，但其输出仍可与人为生成的文本区分开。我们在文本、取样技术、文本数据类型和两个热门的大型语言模型（LLaMA 和 Vicuna）上探讨了这种区别，并提出了一种新的指标，可恢复性，用于凸显人工文本和机器
PDF5 months ago
加速单语文本生成的多语言语言模型的简单框架
最近大型语言模型的进展不仅在英语中，还在非英语语言中完成了复杂语言任务的执行。然而，大多数语言模型的分词器（如 Llama）在训练时采用的是以英语为中心的语料库，往往会在非英语语言中过度分词。针对这个问题，我们的研究引入了一种新颖的框架，旨
PDF5 months ago
很抱歉，先生？您的语言模型正在泄露（信息）
使用加密方法在大型语言模型的回应中隐藏任意秘密负载，需要秘密密钥提取模型回应中的负载，负载不会影响生成文本的质量，扩展了 Christ、Gunn 和 Zamir（2023 年）引入的大型语言模型不可检测的水印方案。
PDF6 months ago
多语言机器生成文本检测中的作者混淆
最新大型语言模型的高质量文本生成能力引起了对其滥用（例如，大规模生成 / 传播虚假信息）的关注。机器生成文本（MGT）的检测对应对此类威胁至关重要。然而，它容易受到作者身份混淆（AO）方法的影响，例如改写，这可能使 MGT 逃避检测。到目前
PDF6 months ago
多作者文档的文体分析和作者风格变化检测
本文研究了基于文体分析技术的三项主要任务：单作者和多作者文档的分类、单一变换检测以及多作者文档中的作者变换检测。通过整合多种自然语言处理算法和权重优化技术的基于优势的融合框架，本文提出了一种解决方案，并通过对清洗和原始数据集的大量实验探索了
PDF6 months ago