跨语言认知洞察:提升多模式面试分析
记忆障碍是老年人功能和日常活动衰退的核心因素。该研究采用自动特征选择和机器学习技术,通过语音分析来诊断认知能力下降和痴呆症患者,取得了高于国际研究水平的分类准确度。
Feb, 2024
使用多模式深度学习方法通过语音和相应的文本同时检测多种言语段落的诊断,其模型在 Dementiabank Pitt 语料库上获得了 85.3% 的准确率。
Nov, 2020
本研究提出一个分析候选人面试情景中行为提示的多模态分析框架,并使用视频、音频和文本转录数据进行面部表情、语音和韵律信息全面分析,该分析用于训练机器学习分类器以预测类别标签,并为应聘者提供有益的反馈意见。实验表明该方法达到了良好的效果。
Jun, 2020
提出了一种集成声学、认知和语言特征的多模式系统,使用带时间特征的专业人工神经网络以检测阿尔茨海默病和其严重程度,并在 ADReSS 挑战数据集上获得了 83.3%的精度并在 DementiaBank Pitt 数据库上获得了 88.0%的分类精度,验证了无意识语音的通用性和可移植性。
Aug, 2020
这项研究通过使用患者的语音和剧本数据,通过预训练语言模型和图神经网络来构建语音剧本的图,并提取特征进行阿尔茨海默病检测,同时引入音频数据和对小数据集进行增强处理,进而将音频特征与文本特征融合,最后尝试将语音剧本转化为音频进行对比学习,研究结果揭示了在使用语音和音频数据进行阿尔茨海默病检测中的挑战和潜在解决方案。
Jul, 2023
随着医疗技术、预防保健和老年健康的日益重视,全球平均寿命不断增长。因此,开发能够检测和追踪老年人群中与认知功能有关的老化相关疾病的技术至关重要。特别是,自动检测和评估阿尔茨海默病(AD)的研究具有重要性,因为该疾病的流行度以及现有方法的成本。在该研究中,我们使用自然语言处理和机器学习等技术,比较和对比了 10 种线性回归模型在 ADReSS 挑战数据集上对 Mini-Mental 状态检查得分进行预测的性能。通过使用两种方法选择的 54 种最佳特征的子集(1)递归淘汰和(2)相关性得分,我们超越了用于相同任务的最先进的基线。在评分和评估每个模型的每个所选特征子集的统计显着性时,我们发现,对于给定的任务,手工制作的语言特征比声学和学习特征更具有显着性。
Sep, 2022
本文利用多模态方法,结合语音和文本特征,提出了自动检测阿尔茨海默病的分类框架,并发现语言特征对于阿尔茨海默病的分类比声学特征更为重要,能够提高分类准确率。
May, 2020