-
题名基于调制-全局推理的弱监督语义分割算法研究
- 1
-
-
作者
刘洲峰
李冰芮
杨瑞敏
李春雷
何媛
丁淑敏
-
机构
中原工学院电子信息学院
-
出处
《计算机工程》
北大核心
2025年第2期344-355,共12页
-
基金
国家自然科学基金(62072489)
河南省高校科技创新团队项目(21IRTSTHN013)
+1 种基金
中原科技创新领军人才项目(234200510009)
河南省科技攻关项目(222102210008,232102211002,232102211030)。
-
文摘
基于图像级标签的弱监督语义分割方法可利用少量带有图像级标签的注释对网络进行训练,从而减轻注释负担。然而,现有基于类激活映射的方法存在分割区域不完整的问题。为使最终分割预测结果包含更多前景目标,提出一种基于调制-全局推理的弱监督语义分割方法。在分类网络中,首先设计空间-通道激活调制模块以提取更完整的目标对象特征,从而避免类激活图过度关注显著性区域;其次提出全局推理单元模块,利用该模块捕获特征图中不相交区域和较远区域之间的全局关系以便选出包含更完整的目标对象,从而进一步增强非显著区域的特征;最后通过设计潜在目标挖掘模块以降低伪标签中的假阴性率,进而提取其中的丢失信息,从而有效缓解初始伪标签中目标区域不完整的问题。在分割网络中,将分类网络生成的初始预测和伪标签相结合,并通过非显著区域挖掘模块进一步生成掩蔽伪标签从而提升分割效果。实验结果表明,该方法在仅使用图像级标签的情况下,在Pascal VOC 2012验证集和测试集上的精度分别为69.5%和69.8%,在MS COCO 2014验证集上的精度为32.8%,同时可有效解决分割区域不完整的问题,优于已有方法。
-
关键词
语义分割
弱监督
非显著区域
激活调制
全局推理单元
-
Keywords
semantic segmentation
weakly supervised
non-saliency region
activation modulation
global inference unit
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
