self-attention model | BriefGPT

关键词self-attention model

搜索结果 - 8

通过物理知识导向模型优化锂离子电池的循环寿命预测
用基于物理的方程和自注意力模型结合的新方法，通过早期循环数据预测商业锂铁磷图层石墨电池的循环寿命，并通过拟合容量损耗曲线到这个基于物理的方程，利用自注意力层重构整个电池的容量损耗曲线。我们的模型在预测更多信息（整个容量损耗曲线而不是循环寿命
PDF2 months ago
使用自注意力模型检测音节级发音重音
本文介绍了一种自注意力模型，用于识别英语口语每个音节的重音级别，通过探索音高、强度、持续时间、音节类型和核心（音节的元音）等韵律和范畴特征，将这些特征输入到自注意力模型中，预测音节级别的重音。该研究表明自注意力模型在重音级别检测中具有良好的
PDF8 months ago
MM构建和评估一种自注意力模型，用于句末语气词的语义理解
本文介绍了 Subjective BERT，一种自注意力模型，能够获取日语中表达话者态度的句末助词（sentence-final particles）的意义和应用，并通过评估实验证明模型对 'yo' 和 'ne' 的使用具有能力。
PDF2 years ago
ReadNet: 用于 Web 文章可读性分析的分层 Transformer 框架
本文提出了一种基于自注意力模型的新的综合框架，用于分析文档易读性，并在多个基准数据集上证明该方法在估计各种网络文章和文学阅读易读性方面的表现优于现有的基线方法。
PDF3 years ago
EMNLP序列标注中的不确定性感知标签精炼
引入了一种新的两阶段标签解码框架来建模长期标签依赖关系，并使用双流自注意力模型和贝叶斯神经网络来加快推断过程并减少错误传播。实验结果表明，该方法不仅优于基于 CRF 的方法，而且大大加快了推断进程。
PDF4 years ago
AAAI上下文感知自注意力网络
通过上下文信息来提高自注意力网络有效性的研究表明，利用内部嵌入全局和深度上下文的方式来上下文化查询和键层变换可以提高翻译任务的性能.
PDF5 years ago
文本填充
本文研究了文本生成和填充相关的问题，设计并实现了一种基于自注意力和双向上下文建模的模型，并通过有监督的学习方法进行了实验验证。结果表明，该模型在文本填充任务上表现出色，为未来的相关研究提供了强有力的基线。
PDF6 years ago
ECCV交互感知的时空金字塔注意力网络用于动作分类
本研究提出一种基于主成分分析的互动感知自注意模型，通过利用多尺度信息构建空间金字塔，实现对特征图中所有空间位置的本地特征加权得到注意图，并将其嵌入卷积神经网络中以形成端到端的注意力网络，实现动作分类中的最先进结果。
PDF6 years ago