期刊文献+
共找到6篇文章
< 1 >
每页显示 20 50 100
二值化图像与双流网络在跨模态行人重识别的应用
1
作者 崔洪刚 曹钢钢 苏荻翔 《计算机应用与软件》 北大核心 2025年第2期216-226,共11页
在现有的跨模态行人重识别方法中,很少有方法会利用图像中人的姿态信息进行网络的学习。考虑到姿态信息在行人重识别网络学习中的重要性,提出一种融合局部阈值二值化图像特征的端到端的行人重识别方法。该方法使用ResNet50作为骨干网络... 在现有的跨模态行人重识别方法中,很少有方法会利用图像中人的姿态信息进行网络的学习。考虑到姿态信息在行人重识别网络学习中的重要性,提出一种融合局部阈值二值化图像特征的端到端的行人重识别方法。该方法使用ResNet50作为骨干网络对三种模态图像进行特征提取和特征融合,使用交叉熵损失和改进的难样本三元组损失进行网络训练。在使用简单网络结构的同时使用姿态信息。实验结果表明,在跨模态行人重识别网络中融合局部阈值二值化图像信息,能提高网络对行人重识别的准确率,显著提升最难样本的挖掘能力。 展开更多
关键词 跨模态行人重识别 卷积神经网络 局部阈值二值化
在线阅读 下载PDF
利用局部监督的跨模态行人重识别研究 被引量:1
2
作者 江锴威 王进 +2 位作者 张琳钰 芦欣 刘国庆 《计算机应用研究》 CSCD 北大核心 2023年第4期1226-1232,共7页
跨模态行人重识别技术旨在从非重叠视域不同模态的摄像头捕获的行人图像中,识别出特定行人,行人图像间存在巨大的跨模态差异以及模态内部差异,导致识别率不高。为此,提出了一种利用局部监督的跨模态行人重识别方法(LSN)。首先将可见光... 跨模态行人重识别技术旨在从非重叠视域不同模态的摄像头捕获的行人图像中,识别出特定行人,行人图像间存在巨大的跨模态差异以及模态内部差异,导致识别率不高。为此,提出了一种利用局部监督的跨模态行人重识别方法(LSN)。首先将可见光图像转换成与红外图像更为接近的灰度图像,在图像层面缓解跨模态的差异,并使用共享参数的双流网络,提取具有判别性的共享特征,在特征层面缓解跨模态差异;其次,设计了局部监督网络,增强了对背景、遮挡等噪声的鲁棒性,缓解了模态内部差异;最后,设计了跨模态分组损失、联合身份损失对网络进行约束。实验结果显示,在SYSU-MM01数据集上,评价指标rank-1和mAP分别达到了53.31%、50.88%;在RegDB数据集上,达到了73.51%、68.55%,实验结果优于同类方法,验证了该方法的有效性和先进性。 展开更多
关键词 跨模态行人重识别 智能安防 双流网络 局部监督 模态分组损失
在线阅读 下载PDF
互惠双向生成对抗网络用于跨模态行人重识别 被引量:1
3
作者 魏梓钰 杨曦 +2 位作者 王楠楠 杨东 高新波 《西安电子科技大学学报》 EI CAS CSCD 北大核心 2021年第2期205-212,共8页
为提高跨模态行人重识别的准确率,提出一种基于互惠双向生成对抗网络的跨模态行人重识别方法。首先,建立两个生成对抗网络以生成跨模态异质图像;其次,设计一种联合损失在可见光与红外图像相互转换过程中拉近隐藏空间特征的分布,促使网... 为提高跨模态行人重识别的准确率,提出一种基于互惠双向生成对抗网络的跨模态行人重识别方法。首先,建立两个生成对抗网络以生成跨模态异质图像;其次,设计一种联合损失在可见光与红外图像相互转换过程中拉近隐藏空间特征的分布,促使网络生成更接近真实图像的伪异质图像;最后,通过将原始图像与生成的异质行人图像相结合并输入至区别性特征提取网络中,使得不同模态的图像统一至相同模态,消减了跨模态差异。利用表征学习与度量学习,使网络提取出更具有判别性的行人特征。通过在跨模态数据集SYSU-MM01和RegDB上做对比实验,分析了该方法在不同损失函数下的识别效果。对比于其他前沿跨模态行人重识别方法,这种方法具有更高准确率和更强鲁棒性。 展开更多
关键词 生成对抗网络 图像转换 特征提取 跨模态行人重识别
在线阅读 下载PDF
基于边缘智能终端的跨模态行人重识别方法及应用
4
作者 卞紫阳 许廷发 +1 位作者 马亮 李佳男 《兵工学报》 EI CAS CSCD 北大核心 2023年第9期2631-2638,共8页
跨模态行人重识别技术旨在可见光、红外等不同模态图像中识别出同一个人,其在人机协同、万物互联、跨界融合、万物智能的智能系统与装备中具有重要应用。提出一种数据增强的跨模态行人重识别方法,在波长域进行数据增强的同时保留可见图... 跨模态行人重识别技术旨在可见光、红外等不同模态图像中识别出同一个人,其在人机协同、万物互联、跨界融合、万物智能的智能系统与装备中具有重要应用。提出一种数据增强的跨模态行人重识别方法,在波长域进行数据增强的同时保留可见图像的结构信息,以弥合不同模态之间的差距。在此基础上,基于瑞芯微的RK3588芯片设计实现了一套边缘智能终端,并部署了跨模态行人重识别算法。在边缘计算部署的硬件设计、软件开发中,通过模块化的设计、层级配置的方案,实现了系统弹性可扩展,降低了数据集中处理的计算压力。实验结果表明,新方法在两个基准数据集SYSU-MM01和RegDB上取得了较好的性能,并能够在实际场景中进行应用部署。 展开更多
关键词 跨模态行人重识别 数据增强 边缘智能终端
在线阅读 下载PDF
基于多维互信息特征的跨模态行人重识别方法
5
作者 吴林涛 王文明 《实验技术与管理》 CAS 北大核心 2023年第12期82-91,共10页
针对如何缓解跨模态行人重识别任务中行人模态之间的差异性问题,提出一种随机通道邻近数据增强方法RCNA和一种结合多维互信息的U型网络UMME。RCNA通过选取同类别的可见光图像和红外图像进行数据增强生成新的行人图像,既满足了真实数据分... 针对如何缓解跨模态行人重识别任务中行人模态之间的差异性问题,提出一种随机通道邻近数据增强方法RCNA和一种结合多维互信息的U型网络UMME。RCNA通过选取同类别的可见光图像和红外图像进行数据增强生成新的行人图像,既满足了真实数据分布,又融合了可见光图像的形状和结构信息以及红外图像的语义信息,缓解了可见光图像与红外图像之间的模态差异性。UMME通过互信息提取模块UMI提取同类别行人之间的互信息特征,再经过特征整合模块MSIF将互信息特征嵌入语义特征,增强了同类别行人之间语义特征的一致性。所提出的方法在数据集SYSU-MM01和RegDB上的Rank-1和mAP分别达到70.48%、68.34%和91.70%、88.42%,与现有研究方法相比,取得了优异的识别效果。 展开更多
关键词 跨模态行人重识别 深度学习 数据增强 互信息
在线阅读 下载PDF
多模态特征融合和自蒸馏的红外-可见光行人重识别 被引量:1
6
作者 万磊 李华锋 张亚飞 《计算机辅助设计与图形学学报》 EI CSCD 北大核心 2024年第7期1065-1076,共12页
现有跨模态行人重识别方法大多挖掘模态不变的特征,忽略了不同模态内的具有判别性的自有特征.为了充分地利用不同模态内的自有特征,提出一种多模态特征融合和自蒸馏的红外-可见光行人重识别方法.首先提出一种基于双分类器的注意力融合机... 现有跨模态行人重识别方法大多挖掘模态不变的特征,忽略了不同模态内的具有判别性的自有特征.为了充分地利用不同模态内的自有特征,提出一种多模态特征融合和自蒸馏的红外-可见光行人重识别方法.首先提出一种基于双分类器的注意力融合机制,为各模态的自有特征赋予较大的融合权重,共有特征赋予较小的融合权重,得到含有各模态判别性自有特征的多模态融合特征;为了提升网络特征的鲁棒性以适应行人外观的变化,构建一个记忆存储器来存储行人的多视角特征;还设计了一种自蒸馏无参数动态引导策略,在多模态融合特征和多视角特征的引导下,利用该策略动态强化网络的多模态推理和多视角推理能力;最后网络能够从一个行人的单模态图像推理出另一模态不同视角行人特征,提升模型跨模态行人重识别的性能.基于PyTorch深度学习框架,在公开数据集SYSU-MM01和RegDB上与当前主流的方法进行对比实验,结果表明,所提方法的Rank-1分别达到63.12%和92.55%, mAP分别达到61.51%和89.55%,优于对比方法. 展开更多
关键词 跨模态行人重识别 特征融合 注意力机制 记忆存储机制 自蒸馏
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部