期刊文献+
共找到2篇文章
< 1 >
每页显示 20 50 100
知识图谱和大语言模型在航天测控问答系统中的融合应用研究 被引量:3
1
作者 孙岩 周立新 +2 位作者 孙连君 叶彬 王国林 《上海航天(中英文)》 CSCD 2024年第5期178-184,共7页
随着自然语言处理技术的发展,智能化检索与问答系统不断发展,为改善传统知识图谱语义解析能力不足和当前通用大语言模型在垂直领域对知识学习不够深入的问题,提出了融合知识图谱的大语言模型方法,进行了两步优化:首先,利用知识图谱在命... 随着自然语言处理技术的发展,智能化检索与问答系统不断发展,为改善传统知识图谱语义解析能力不足和当前通用大语言模型在垂直领域对知识学习不够深入的问题,提出了融合知识图谱的大语言模型方法,进行了两步优化:首先,利用知识图谱在命名实体识别和关系抽取的基础上,构建大模型提示Prompt模板,进行辅助增强生成,利用图谱中存储的数据提供相关来源;其次,利用低阶适应性微调(LoRA)策略冻结大模型原有参数,增加部分网络参数进行微调训练,优化模型在航天测控领域的知识储备与理解。通过两步改进提高了模型整体在语义解析和知识细节上的理解掌握,结合航天测控领域的相关教材、报告和手册等资料,搭建了知识问答系统,取得了较好的效果,说明了该方法具有一定的应用价值。 展开更多
关键词 知识图谱 大语言模型 两步优化 低阶适应性微调(LoRA) prompt模板 航天测控
在线阅读 下载PDF
用于小样本的网络安全领域信息抽取统一模型
2
作者 卜天 张龙 +3 位作者 顾杜娟 袁军 章瑞康 李文瑾 《信息安全研究》 CSCD 2023年第11期1067-1075,共9页
互联网中的威胁情报与日俱增,各大网络安全平台趋于使用自动化手段抽取其中的重要信息.然而,过去的诸多研究对实体识别、关系抽取和事件抽取等任务分开建模,导致多模型管理成本高、数据量需求大、知识共享能力差等问题.为此,将统一式抽... 互联网中的威胁情报与日俱增,各大网络安全平台趋于使用自动化手段抽取其中的重要信息.然而,过去的诸多研究对实体识别、关系抽取和事件抽取等任务分开建模,导致多模型管理成本高、数据量需求大、知识共享能力差等问题.为此,将统一式抽取应用到网络安全领域上,提出了一种网络安全领域信息抽取模型——MRC-UIE.同时,还对网络安全领域的实体构建、prompt模板设计和模型优化等内容进行了设计.最后,将MRC-UIE在多个网络安全数据集上进行测试.结果表明,MRC-UIE在83%的数据集上均有提升,其F1值优于单一抽取模型1%~3%,优于统一式抽取模型9%~14%.随后,将MRC-UIE在小样本上进行测试,发现模型仅需要10个样本就能得到较好效果,验证了MRC-UIE的小样本能力. 展开更多
关键词 网络安全 信息抽取 统一式信息抽取 小样本 prompt模板
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部