-
题名基于深度编码与知识增强的句子匹配方法
- 1
-
-
作者
姜克鑫
赵亚慧
崔荣一
陈科
-
机构
广东外语外贸大学南国商学院计算机学院
延边大学工学院
南京审计大学计算机学院
-
出处
《计算机工程与应用》
北大核心
2025年第8期126-134,共9页
-
基金
国家自然科学基金(62162062)
吉林省科技厅发展计划项目(20220203127SF)
江苏省高校自然科学研究项目-面上项目(20KJB630012)。
-
文摘
自然语言句子匹配是比较两个句子并识别它们之间关系的任务。针对现有模型泛化能力弱和缺少外部知识等问题,提出了一种基于深度编码与知识增强的句子匹配方法。从两个部分引入知识,即从Wiktionary提取文本的单词定义以及从知识图谱提取文本三元组信息作为外部知识;为了提取深层次语义信息,分别对文本和知识进行编码,在文本编码模块首先在编码单个句子的过程中,参照了另一个句子的信息,同时将三元组的信息加入其中;采用启发式的融合算法,将文本信息和知识进行融合,使用门控机制过滤引入知识产生的噪声;在交互过程中,使用双向注意力机制获取深层语义信息,并使用前馈神经网络输出。在SNLI、SciTail、SICK、Quora数据集上的准确率分别为91.0%、92.8%、87.6%、91.3%,准确率较多个模型均有所提升,验证了模型的有效性。
-
关键词
自然语言句子匹配
注意力机制
知识增强
启发式融合
-
Keywords
natural language sentence matching
attention mechanism
knowledge enhancement
heuristic fusion
-
分类号
TP391.1
[自动化与计算机技术—计算机应用技术]
-
