parallelizable | BriefGPT - AI 论文速递

关键词parallelizable

搜索结果 - 7

ACLHexatagging: 投影依存句法分析作为标记化
本文介绍了一种新的依赖性分析器：Hexatagger，通过标记句子中的单词，并使用可能标记的有限集合来构建依赖关系树。我们的方法是完全可并行化的，并获得了 96.4 LAS 和 97.4 UAS 的最新性能。同时，我们的解析器的线性时间复杂
PDFa year ago
AtMan: 通过内存高效的关注力操作理解 Transformer 的预测
提出了一种类别不可知扰动方法 AtMan，通过操纵 Transformer 的注意力机制产生与输出预测相关的输入关联图，相较于背向传播方法更兼并且计算量更小，已在文本和图像文本基准测试中取得了优异的表现。
PDFa year ago
注意力全是你需要的
本文提出一种基于注意力机制的 Transformer 模型，优于使用循环或卷积神经网络的现有机器翻译模型，且可并行训练、训练时间更短，使得 BLEU 评分得以显著提高，并成功将该模型应用于英语句法分析等任务。
PDF7 years ago
GaKCo：一种使用计数的快速 Gapped k-mer 字符串核函数
该论文提出了一种使用累计计数和关联阵列计算子字符串共出现的算法（GaKCo），用于快速分类 DNA、蛋白质和字符文本。和最先进的 gk-SK 相比，GaKCo 算法的时间复杂度独立于标兵符号数，并且实验结果表明它的精度相同，速度快两倍到
PDF7 years ago
EMNLP自然语言推理可分解注意模型
本文提出了一种简单的神经体系结构来解决自然语言推理问题，该方法通过注意力机制将问题分解成可分别解决的子问题，从而使其可以轻松并行。在斯坦福自然语言推理（SNLI）数据集上，我们获得了最先进的结果，并且参数比先前的研究少了近一个数量级，而且不
PDF8 years ago
基于噪声并行的条件循环语言模型近似解码
本文主要探究了条件循环语言建模方面的一些进展和应用，提出了一个新的非常并行化的解码策略，并在诸如注意力机制和深度神经网络的领域进行了广泛的评估。
PDF8 years ago
离散随机场的基于原则的并行均场推断
本文提出了一种基于近端梯度的方法，用于优化变分目标，该方法天然可并行化且易于实施，证明了其收敛性，并且实践证明其收敛速度更快，并且通常能找到更好的最优解，此外我们的方法对参数选择的敏感性更低。
PDF9 years ago