-
题名基于提示学习的生成式医疗对话理解方法
- 1
-
-
作者
柳俊
阮彤
张欢欢
-
机构
华东理工大学信息科学与工程学院
-
出处
《计算机科学》
CSCD
北大核心
2024年第5期258-266,共9页
-
基金
国家重点研发计划(2021YFC2701800,2021YFC2701801)。
-
文摘
任务型对话系统中的对话理解模块的目标是将用户输入的自然语言转换成结构化的形式,但在面向诊断的医疗对话系统中,现有方法存在如下问题:1)无法支持精准医疗所需的信息粒度,如给出某一症状的严重程度;2)难以同时满足医疗领域中多样化的槽值表示形式,如“症状”等可能含有非连续与嵌套实体的抽取型槽以及“否定”等分类型槽。文中提出了一种基于提示学习的多层次生成式医疗对话理解方法。针对问题1),用多层次槽结构替代当前对话理解任务中单层的槽结构,以表示更细粒度的信息,之后采用一种基于对话风格提示的生成式方法,利用提示字符模拟医患对话,从多轮交互中获得多层次信息。针对问题2),提出在推理过程中使用一种受限的解码策略,使模型能够以统一的方式处理意图识别与分类型和抽取型的槽填充任务,避免复杂的建模。此外,针对医疗领域缺少标注数据的问题,提出了一种两阶段训练策略,以充分利用大规模的无标注医疗对话语料来提升性能。针对含有多层次槽结构的医疗对话理解任务标注并发布了一个数据集,包含4722条对话,涉及17种意图与74种槽。实验结果表明,所提方法能够有效解析医疗对话中的各种复杂实体,相比已有的生成方法,其性能高出2.18%,而在小样本的场景下两阶段训练最高能提高模型5.23%的性能。
-
关键词
提示学习
自然语言理解
医疗对话系统
生成式模型
两阶段训练
-
Keywords
Prompt learning
Natural language understanding
Medical dialogue system
Generative model
Two-stage training
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-