american sign language | BriefGPT

关键词american sign language

搜索结果 - 21

DiffSLVA：利用扩散模型实现手语视频匿名化
通过 DiffSLVA 方法，利用预训练的大规模扩散模型和低级图像特征来进行零样本文本引导的手语视频匿名化，解决了手势识别的复杂性和对数据集的依赖性的问题，实现了更好地保护原始签名者的重要语言内容。
PDF7 months ago
手语姿态网络：基于姿态的 Transformer 模型增强手语翻译
我们在野外使用视频来处理美国手语拼写翻译的任务。我们利用更精确的手部姿势估计和提出了一种新的架构，它利用基于 Transformer 的编码 - 解码模型，实现了无缝上下文单词翻译。翻译模型通过一种新的损失项，准确预测指拼单词的长度，从而有
PDF7 months ago
面向美国手语的基于语言的计算机手势识别的挑战
电脑识别视频中孤立符号存在着一些困难，其中包括手语者之间的口头和非口头的同步变化以及特定符号的实现中存在的社会语言学变化。本文概述了这些挑战，并基于大规模的语言学注释视频数据的发现，对美国手语的符号结构中的某些规律进行了讨论。
PDF8 months ago
Sem-Lex 基准测试：对 ASL 手势及其音素模型化
手语识别和翻译技术有潜力提高聋人手语社区的参与和包容性，但由于缺乏代表性数据，研究进展受到限制。我们引入了美国手语（ASL）建模的新资源，即 Sem-Lex 基准。该基准是目前最大的资源，包含超过 84,000 个由同意并得到补偿的聋人 A
PDF9 months ago
检测美国手语中的未知多词表达
建立和测试了两个系统，应用 GloVe 中的词嵌入来确定词汇的词嵌入是否可以用于预测是否构成多词表达式，并发现词嵌入可以准确地检测非组合性。
PDF9 months ago
SignDiff: 学习美国手语表达的扩散模型
该研究论文介绍了一个基于深度学习的大规模美国手语（ASL）生成预训练模型，以解决对 ASL 依赖的残障人士之间的沟通障碍，并提出了用于 ASL 生成的基于条件扩散的预训练模型，同时改进了模型的准确性和质量，以及图像指标的优化。
PDF10 months ago
EdGCon：基于词汇属性的基本形象评分自动分配器，以协助生成技术手势
使用 ASL-LEX 词库，结合三项 ASL 子词汇属性的自动化识别方法，通过分析技术手势的符号性和它们与其他手势的关联性，研究了使用相似表达方式的手势与 Deaf and Hard of Hearing Group 之间的认知障碍。
PDFa year ago
Mediapipe 和 CNNs 实时美式手语手势识别
本研究描述了一种使用现代计算机视觉和机器学习方法的实时美国手语识别系统，该方法使用 Mediapipe 库进行特征提取和卷积神经网络进行手势分类。测试结果显示，该系统能够以 99.95％的准确率检测所有 ASL 字母，表明其在听障人士的通信
PDFa year ago
利用音韵学提高符号识别效果
通过将语音学应用于手语产生过程中，训练出的模型预测手势及其语音学特征，从而实现对独立手语识别（ISLR）的模型训练，提高了在 WLASL 基准测试上的手势识别准确性达到了近 9% 的绝对增益，帮助缩小聋听者之间的沟通鸿沟。
PDFa year ago
MM使用神经形态硬件进行美式手语的静态手势识别
该论文研究使用 4 种脉冲神经网络模型对美国手语静态手势进行分类，分别使用 ASL 字母和 ASL 数字的数据集进行相关实验，使用英特尔神经形态平台 Loihi 进行比较。结果表明，相较于英特尔神经计算棒 2，Loihi 实现方式在精度、延
PDF2 years ago
ASL-Homework-RGBD Dataset：一个包含 45 名流利和非流利手语者，展示美国手语作业的注释数据集
我们发布了一个数据集，其中包含流利和不流利使用美国手语（ASL）的人的视频，该数据集是作为一个项目的一部分收集的，以开发和评估计算机视觉算法，以支持自动检测 ASL 流利度属性的新技术。该数据集可能对 ASL 教育研究人员也很有趣，因为它可
PDF2 years ago
ACLWLASL-LEX：美国手语音韵属性识别数据集
本研究介绍了自然语言处理（NLP）领域中较为被忽视的手语处理任务，其中重点关注手语音系学建模的任务。通过构建一个大规模的美国手语数据集并运用数据驱动的端到端和基于特征的方法，研究表明使用基于骨骼特征提取的基于图的神经网络模型可以在不同程度
PDF2 years ago
ASL 视频语料库和手语库：美国手语语言研究项目（ASLLRP）提供的资源
该研究介绍了 ASLLRP 项目，该项目提供了美国手语视频数据，包括注释的手势和面部运动信息，并开发了数据访问界面（DAI 2）和手语库 Sign Bank 来支持复杂搜索和语言学研究。
PDF2 years ago
ASL-Skeleton3D 和 ASL-Phono：美式手语两个新数据集
本文介绍了两个新的数据集，分别为三维表示和语言学表示，以提高手语识别领域的研究进展。
PDF2 years ago
视频中基于单词的深度手语识别：一个新的大规模数据集和方法比较
本文介绍了一个新的大规模美国手语单词语义（WLASL）数据集，并实现了基于外观和人体姿态的 2 个模型，以及提出了一种新的基于姿态的时态图卷积网络（Pose-TGCN）方法，同时模拟人体姿态轨迹中的空间和时间依赖关系，为手语识别研究提供了一
PDF5 years ago
ICCV基于图像的神经形态视觉传感器对象分类
本研究提出了一种新型的神经视觉感测器设备，可以实现更高效的事件采样率，更高的能量效率，更强的抗干扰性，同时提出了一种用于神经视觉感测器设备的紧凑图表征方法和残差图卷积神经网络架构，同时提出了一个大型的美国手语字母 NVS 数据集，用于复杂手
PDF5 years ago
野外环境中的美式手语手指拼写识别
本研究针对美国手语中的手指拼字识别进行了研究，并提出了迄今为止最大的数据集用于手指拼字识别。使用这个数据集，我们提出了在自然出现的视频数据中识别手指拼字序列的第一次尝试，并利用手的检测器和序列模型进行识别。通过对模型变量的影响分析，本研究提
PDF6 years ago
利用循环神经网络和手势控制器进行手势和旗语识别
本文基于一种使用手部骨骼的角度作为特征的 RNN 方法，旨在解决手势识别的问题，并在 ASL 数据集和 SHREC 数据集上测试和证明了该方法的有效性和优越性。
PDF6 years ago
使用未标注数据进行多任务训练，以实现端到端手语手指拼写识别
本研究提出了一个基于自动编码器和注意力机制的神经编码器 - 解码器模型用于视频中美国手语手指拼写字的自动识别，不需要帧级别的标签或手工特征，并且可以利用未标记数据来提高特征学习。该模型在无需训练标签的情况下，识别出视频序列中的手指拼写的单词
PDF7 years ago
视频中无词典手语识别：数据、模型和手势者自适应
研究美国手语中指拼字字母的视频序列识别问题，并通过收集和注释新的连续指拼视频数据集，比较多种类型的识别器，探索签名者差异问题。基于深度神经网络的特征，我们的半马尔可夫条件随机场模型在签名者依赖和多签名者情景下均取得较高的字母识别准确率。
PDF8 years ago