-
题名多层特征融合和并行自注意力的孪生网络目标跟踪算法
被引量：2
- 1
-
-
作者
束平
许克应
鲍华
-
机构
安徽大学电气工程与自动化学院
-
出处
《计算机应用研究》
CSCD
北大核心
2022年第4期1237-1241,1246,共6页
-
基金
安徽省自然科学基金资助项目(1908085MF217)
安徽省教育厅自然科学重点资助项目(KJ2019A0022)。
-
文摘
目标跟踪是计算机视觉方向上的一项重要课题,其中尺度变化、形变和旋转是目前跟踪领域较难解决的问题。针对以上跟踪中所面临的具有挑战性的问题,基于已有的孪生网络算法提出多层特征融合和并行自注意力的孪生网络目标跟踪算法(MPSiamRPN)。首先,用修改后的ResNet50对模板图片和搜索图片进行特征提取,为处理网络过深而导致目标部分特征丢失,提出多层特征融合模块(multi-layer feature fusion module,MLFF)将ResNet后三层特征进行融合;其次,引入并行自注意力模块(parallel self-attention module,PSA),该模块由通道自注意力和空间自注意力组成,通道自注意力可以选择性地强调对跟踪有益的通道特征,空间自注意力能学习目标丰富的空间信息;最后,采用区域提议网络(regional proposal network,RPN)来完成分类和回归操作,从而确定目标的位置和形状。实验显示,提出的MPSiamRPN在OTB100、VOT2018两个测试数据集上取得了具有可竞争性的结果。
-
关键词
目标跟踪
多层特征融合
空间自注意力
通道自注意力
区域提议网络
孪生网络
-
Keywords
object tracking
multi-layer feature fusion
spatial self-attention
channel self-attention
regional proposal network
Siamese network
-
分类号
TP391.41
[自动化与计算机技术—计算机应用技术]
-
