关键词sequence-to-sequence language models
搜索结果 - 3
- 基于语言模型的问题与选项生成
基于序列到序列语言模型的三种不同方法,本文开发了问题选项生成(QOG)模型,实验证明这种端到端 QOG 模型在训练和推断过程中具有计算效率高且稳定的特点,优于其他方法,与大型语言模型 Llama 3-8B 相比,我们的分析表明,我们的 QO - 序列到序列模型的结构剪枝:提高推理效率的非对称方法
该研究研究了模型大小、结构修剪、推理效率和摘要准确性之间的关系,发现准确性与编码器大小相关,而推理效率与解码器相关,使用非对称修剪可以在保持相同摘要准确性的情况下将推理延迟减少近 3 倍。
- AAAI细粒度捷克新闻文章数据集:信誉度分析的跨学科方法
介绍 Verifee 数据集,其中分类了四种不同的新闻可信度等级,通过调整多种流行序列到序列语言模型,在信任度分类任务中达到了最佳的 F-1 得分 0.52,并通过开源数据集和注释方法有助于防止虚假报道和提高公众媒体素养。