Dec, 2023

面向目标导向对话系统的自动意图提取和话语分类算法

TL;DR自然语言处理领域的现代机器学习技术可用于自动生成目标导向对话系统的脚本。本文提出了一个研究自动生成目标导向对话系统脚本的通用框架,并描述了一种用于预处理 JSON 格式对话数据集的方法。比较了基于 BERTopic 和潜在狄利克雷分配的两种提取用户意图的方法,并比较了基于逻辑回归和 BERT transformer 模型的两种分类用户语句的算法实现。与其他方法相比,使用 bert-base-uncased 模型的 BERT transformer 方法在精确度(0.80),F1 分数(0.78)和马修斯相关系数(0.74)等三个指标上表现更好。