-
题名航空安全事件图文关联方法的研究
被引量：2
- 1
-
-
作者
王红
白云清
卢林燕
-
机构
中国民航大学计算机科学与技术学院
-
出处
《计算机应用与软件》
北大核心
2020年第12期127-132,183,共7页
-
基金
国家自然科学基金项目(U1633110)。
-
文摘
针对航空安全事件信息管理主要基于文本信息的问题,提出一种航空安全事件图文关联方法(HG-RRF)。针对文本与图像两种不同模态的数据,分别采用混合高斯拉普拉斯模型+高斯模型(HGLMM+GMM)与全卷积网络(Fully Convolutional Network,FCN)进行特征提取,并将提取的特征分别输入到一个部署了循环残差融合模块(Recurrent Residual Fusion,RRF)的网络中。通过双向损失函数计算相似度,从而获得双向的跨模态关联结果。实验结果表明,该方法在公共数据集前K个检索结果的召回率上有所提升,将该方法应用在航空安全事件数据集上,有效实现了图文信息的关联,为航空安全事件多模态数据的融合提供了方法支撑。
-
关键词
航空安全事件
图文关联
特征提取
循环残差融合
双向损失函数
-
Keywords
Civil aviation incident
Image and text relevance
Feature extraction
Recurrent residual fusion
Bi-rank loss function
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
