-
题名在线多类别逐点式多目标跟踪与分割
- 1
-
-
作者
毕鑫
谭锦钢
张广慧
-
机构
中国科学院上海微系统与信息技术研究所仿生视觉系统实验室
中国科学院大学
-
出处
《计算机工程与应用》
CSCD
北大核心
2022年第19期193-201,共9页
-
基金
中国科学院前沿科学重点研究项目(QYZDY-SSW-JSC034)。
-
文摘
现有基于深度学习的多目标跟踪算法大多利用目标检测任务预测的边界框跟踪目标,当目标间存在遮挡时,边界框会产生重叠进而影响跟踪准确度,针对这个问题,提出了一种在线多类别逐点式多目标跟踪与分割(cate-gory-free point-wise multi-object tracking and segmentation,CPMOTS)算法。该算法摒弃了边界框的目标表征方式,利用实例分割的像素级掩码表征目标进行跟踪,网络采用并行结构同时分割与跟踪多类别目标,并保证了运行效率,这在真实场景中有很强的实用性。CPMOTS首先利用实例分割网络得到实例分割掩码,对其采样得到无序点集;然后将点集的特征输入跟踪网络得到判别性的实例级嵌入向量;最后将该嵌入向量通过直观高效的注意力模块以显式建模其通道间的依赖关系,自适应学习每个特征通道的重要程度,依照这个重要程度选择性地强化有用的特征,抑制无用的特征,实现通道特征重标定,从而提高算法的性能。在多目标跟踪与分割基准数据集KITTI MOTS的实验表明,CPMOTS跟踪的精度优于大部分其他对比方法,并达到了16 frame/s的近实时速度。
-
关键词
深度学习
多目标跟踪与分割
实例分割
注意力模块
特征重标定
-
Keywords
deep learning
multi-object tracking and segmentation
instance segmentation
attention module
feature re-calibration
-
分类号
TP391.4
[自动化与计算机技术—计算机应用技术]
-
