期刊文献+
共找到558篇文章
< 1 2 28 >
每页显示 20 50 100
面向红外与可见光图像融合的改进双鉴别器生成对抗网络算法
1
作者 廖光凤 关志伟 陈强 《红外技术》 北大核心 2025年第3期367-375,共9页
针对现有的红外与可见光图像融合算法对全局和多尺度特征提取不充分,对不同模态图像的关键信息提取不精准的问题,提出了基于双鉴别器生成对抗网络的红外与可见光图像融合算法。首先,生成器结合卷积和自注意力机制,捕获多尺度局部特征和... 针对现有的红外与可见光图像融合算法对全局和多尺度特征提取不充分,对不同模态图像的关键信息提取不精准的问题,提出了基于双鉴别器生成对抗网络的红外与可见光图像融合算法。首先,生成器结合卷积和自注意力机制,捕获多尺度局部特征和全局特征;其次,将注意力机制与跳跃连接结合,充分利用多尺度特征并减少下采样过程中的信息丢失;最后,两个鉴别器引导生成器关注红外图像的前景显著目标和可见光图像的背景纹理信息,使融合图像保留更多关键信息。在公开数据集M~3FD和MSRS上的实验结果表明,与对比算法相比,6种评价指标结果显著提高,其中平均梯度(Average Gradient, AG)在两个数据集上相较于次优结果分别提高了27.83%和21.06%。本文算法的融合结果细节丰富,具有较好的视觉效果。 展开更多
关键词 图像融合 生成对抗网络 双鉴别器 红外图像
在线阅读 下载PDF
基于多尺度对比度增强和跨维度交互注意力机制的红外与可见光图像融合
2
作者 邸敬 梁婵 +2 位作者 任莉 郭文庆 廉敬 《红外技术》 CSCD 北大核心 2024年第7期754-764,共11页
针对目前红外与可见光图像融合存在特征提取不足、融合图像目标区域不显著、细节信息缺失等问题,提出了一种多尺度对比度增强和跨维度交互注意力机制的红外与可见光图像融合方法。首先,设计了多尺度对比度增强模块,以增强目标区域强度... 针对目前红外与可见光图像融合存在特征提取不足、融合图像目标区域不显著、细节信息缺失等问题,提出了一种多尺度对比度增强和跨维度交互注意力机制的红外与可见光图像融合方法。首先,设计了多尺度对比度增强模块,以增强目标区域强度信息利于互补信息的融合;其次,采用密集连接块进行特征提取,减少信息损失最大限度利用信息;接着,设计了一种跨维度交互注意力机制,有助于捕捉关键信息,从而提升网络性能;最后,设计了从融合图像到源图像的分解网络使融合图像包含更多的场景细节和更丰富的纹理细节。在TNO数据集上对提出的融合框架进行了评估实验,实验结果表明本文方法所得融合图像目标区域显著,细节纹理丰富,具有更优的融合性能和更强的泛化能力,主观性能和客观评价优于其他对比方法。 展开更多
关键词 红外与可见光图像融合 多尺度对比度增强 跨模态交互注意力机制 分解网络
在线阅读 下载PDF
基于混合注意力残差密集网络的红外与可见光图像融合
3
作者 刘培培 张宇晓 +2 位作者 袁硕智 王烁 徐湖洋 《激光杂志》 北大核心 2024年第12期106-115,共10页
针对红外与可见光图像融合算法在融合过程中细节信息特征易丢失的问题,提出了一种基于混合注意力残差密集网络的红外与可见光图像融合算法。首先编码网络对源图像进行不同尺度的下采样,得到带有丰富语义信息的特征图;然后混合注意力残... 针对红外与可见光图像融合算法在融合过程中细节信息特征易丢失的问题,提出了一种基于混合注意力残差密集网络的红外与可见光图像融合算法。首先编码网络对源图像进行不同尺度的下采样,得到带有丰富语义信息的特征图;然后混合注意力残差融合网络对编码网络提取的特征图进行融合,混合注意力机制通过通道注意力和空间注意力混洗对特征图进行聚合,并利用残差密集连接对聚合的特征图最大程度地保留图像有效信息;最后在解码网络通过上采样进行重构得到融合图像。与其他融合算法相比,在主观评价中,所提算法的融合图像在清晰度方面表现出明显的优势,尤其在处理模糊、受挡光和烟雾等复杂情况下的图像时,融合效果良好;在客观指标对比中,所提算法的融合图像在信息熵、互信息、峰值信噪比等指标均有不同程度的提升并取得最优值,分别为6.930、13.860、17.144、0.574。 展开更多
关键词 红外与可见光图像融合 自编码网络 混合注意力 残差密集网络
在线阅读 下载PDF
基于注意力机制与光照感知网络的红外与可见光图像融合 被引量:1
4
作者 杨艳春 闫岩 王可 《西南交通大学学报》 EI CSCD 北大核心 2024年第5期1204-1214,共11页
部分图像融合方法未充分考虑图像环境的光照状况,导致融合图像中出现红外目标亮度不足以及整体画面亮度较低,从而影响纹理细节的清晰度.为解决上述问题,提出一种基于注意力机制与光照感知网络相结合的红外与可见光图像融合算法.首先,在... 部分图像融合方法未充分考虑图像环境的光照状况,导致融合图像中出现红外目标亮度不足以及整体画面亮度较低,从而影响纹理细节的清晰度.为解决上述问题,提出一种基于注意力机制与光照感知网络相结合的红外与可见光图像融合算法.首先,在训练融合网络之前利用光照感知网络计算当前场景是日间或夜间的概率,将其运用至融合网络损失函数中,用以指导融合网络训练;然后,在网络的特征提取部分采用空间注意力机制和深度可分离卷积对源图像进行特征提取,得到空间显著信息后,输入卷积神经网络(CNN)以提取深度特征;最后,将深度特征信息进行拼接用于图像重建,进而得到最终的融合图像.实验结果表明:本文方法的互信息(MI)、视觉保真度(VIF)、平均梯度(AG)、融合质量(Qabf)与空间频率(SF)较对比方法分别平均提高39.33%、11.29%、26.27%、47.11%和39.01%;融合后的图像能够有效保留红外目标亮度,且包含丰富的纹理细节信息. 展开更多
关键词 图像融合 注意力机制 卷积神经网络 红外特征提取 深度学习
在线阅读 下载PDF
基于目标增强与鼠群优化的红外与可见光图像融合算法
5
作者 郝帅 孙曦子 +4 位作者 马旭 安倍逸 何田 李嘉豪 孙思雅 《西北工业大学学报》 EI CAS CSCD 北大核心 2024年第4期735-743,共9页
针对传统红外与可见光图像融合结果存在目标模糊、信息丢失问题,提出一种基于目标增强与鼠群优化的红外与可见光图像融合方法,记为TERSFuse。为了减少融合结果中原始图像细节信息丢失,分别构建了红外对比度增强模块和基于亮度感知的可... 针对传统红外与可见光图像融合结果存在目标模糊、信息丢失问题,提出一种基于目标增强与鼠群优化的红外与可见光图像融合方法,记为TERSFuse。为了减少融合结果中原始图像细节信息丢失,分别构建了红外对比度增强模块和基于亮度感知的可见光图像增强模块;利用拉普拉斯金字塔变换对红外和可见光增强图像进行多尺度分解,从而得到对应的高、低频图像;为了使融合结果充分保留原始图像信息,分别采用“最大绝对值”规则对红外和可见光高频图像进行融合以及通过计算权重系数对低频图像进行融合;设计了基于鼠群优化的图像重构模块以实现高频图像和低频图像重构权重的自适应分配,进而提高融合图像的视觉效果。为了验证所提算法优势,与7种经典融合算法进行比较,实验结果表明所提算法不仅具有良好的视觉效果,而且融合图像能够保留原始图像丰富的边缘纹理和对比度信息。 展开更多
关键词 图像融合 红外与可见光图像 多尺度变换 鼠群优化
在线阅读 下载PDF
基于自编码器的红外与可见光图像融合算法
6
作者 陈海秀 房威志 +3 位作者 陆成 陆康 何珊珊 黄仔洁 《兵器装备工程学报》 CAS CSCD 北大核心 2024年第9期283-290,共8页
针对目前红外与可见光图像融合过程中,图像特征提取不充分、中间层信息丢失以及融合图像细节不够清晰的问题,提出了一种基于自编码器的端到端图像融合网络结构。该网络由编码器、融合网络和解码器3部分组成。将高效通道注意力机制和混... 针对目前红外与可见光图像融合过程中,图像特征提取不充分、中间层信息丢失以及融合图像细节不够清晰的问题,提出了一种基于自编码器的端到端图像融合网络结构。该网络由编码器、融合网络和解码器3部分组成。将高效通道注意力机制和混合注意力机制引入到编码器和融合网络中,利用卷积残差网络(convolutional residual network,CRN)基本块来提取并融合红外图像和可见光图像的基本特征,然后将融合后的特征图输入到解码器进行解码,重建出融合图像。选取目前具有典型代表性的5种方法在主客观方面进行对比。在客观方面,较第2名平均梯度、空间频率和视觉保真度分别提升了21%、10.2%、7.2%。在主观方面,融合后的图像目标清晰、细节突出、轮廓明显,符合人类视觉感受。 展开更多
关键词 红外图像 可见光图像 图像融合 注意力机制 编码解码结构
在线阅读 下载PDF
基于特征相似性的红外与可见光图像融合方法
7
作者 秦伟 段俊阳 《激光杂志》 CAS 北大核心 2024年第2期119-123,共5页
单一图像无法全面描述目标的信息,实际应用价值低,针对当前红外与可见光图像融合方法存在的一些不足,如:融合质量差等,为了获得更加理想的红外与可见光图像融合效果,提出了基于特征相似性的红外与可见光图像融合方法。首先分析当前红外... 单一图像无法全面描述目标的信息,实际应用价值低,针对当前红外与可见光图像融合方法存在的一些不足,如:融合质量差等,为了获得更加理想的红外与可见光图像融合效果,提出了基于特征相似性的红外与可见光图像融合方法。首先分析当前红外与可见光图像融合的研究进展,指出各种方法的局限性,然后采用红外图像和可见光图像,并对它们进行图像去噪、增强处理,采用卷积神经网络提取红外与可见光图像的特征,最后根据特征相似性进行红外与可见光图像融合,并对红外与可见光图像融合效果进行了测试,结果表明,本方法提升了红外与可见光图像融合质量,融合效果要明显优于其他红外与可见光图像融合方法。 展开更多
关键词 卷积神经网络 红外图像 可见光图像 图像融合 图像质量
在线阅读 下载PDF
基于RPCA的红外与可见光图像融合
8
作者 江源 张梦 +2 位作者 周锦 高天 朱金荣 《激光杂志》 CAS 北大核心 2024年第7期137-141,共5页
图像融合中,多数边缘保持滤波器在优化过程中会损坏细节和纹理信息,并且噪声也会严重影响融合结果,使得融合结果之间出现边界模糊和细节丢失问题。提出了一种基于RPCA(Robus principal compo-nent association)算法的红外光和可见光图... 图像融合中,多数边缘保持滤波器在优化过程中会损坏细节和纹理信息,并且噪声也会严重影响融合结果,使得融合结果之间出现边界模糊和细节丢失问题。提出了一种基于RPCA(Robus principal compo-nent association)算法的红外光和可见光图像融合方法,可有效提高图象清晰度和视觉信息的保真度。首先,利用鲁棒主成分分析(RPCA)分解源图像为低秩部分和稀疏部分,并运用相对全变分和平均能量法对两者进行处理,最后通过NSCT逆变换获得融合图像。实验结果表明,与其他方法相比,该方法所得融合图像的平均梯度、空间频率、边缘强度、互信息量均有提升,提升量级分别为10.6%到72.6%、15%到60.2%、9.7%到69.6%,22.7%到229.7%。 展开更多
关键词 红外与可见光图像融合 鲁棒主成分分析 相对全变分 平均能量
在线阅读 下载PDF
孪生Swin Transformer的红外与可见光图像融合算法
9
作者 苗壮 毕翔鹤 +2 位作者 马鑫骥 李一 李阳 《陆军工程大学学报》 2024年第3期26-35,共10页
为解决基于卷积神经网络(convolutional neural networks,CNN)的红外与可见光图像融合算法融合过程中未考虑原图像远程依赖关系的问题,提出了一种孪生Swin Transformer的红外与可见光图像融合算法,构建了孪生网络模型。使用潜在低秩表示... 为解决基于卷积神经网络(convolutional neural networks,CNN)的红外与可见光图像融合算法融合过程中未考虑原图像远程依赖关系的问题,提出了一种孪生Swin Transformer的红外与可见光图像融合算法,构建了孪生网络模型。使用潜在低秩表示(latent low-rank representation,LatLRR)分解方法将原图像分解,再分别融合以提升图像融合的精度;使用Swin Transformer分别提取分解后图像的特征,获取图像的远程依赖关系;使用l1-norm正则化方法求解特征范数,利用Softmax分别获得分解后图像的权重图;利用线性加权方法重构融合图像,通过简单的线性加和获得最终融合图像。在评测基准VIFB上对所提算法进行评测,实验结果表明,所提算法与20种融合算法相比,定性性能优良;定量分析,在由13种评价指标组成的评价体系中,该算法能够取得3个最优值,超过大部分融合算法;在运行时间方面,该算法的运行时间成本低于大部分融合算法。所提融合算法相较于其他融合算法,在主观和客观方面均表现出更好的融合性能。 展开更多
关键词 红外与可见光图像融合 潜在低秩表示分解 孪生Swin Transformer 远程依赖关系 加权平均
在线阅读 下载PDF
基于多层卷积的红外与可见光图像融合算法
10
作者 陈海秀 房威志 +3 位作者 陆康 陆成 黄仔洁 陈子昂 《电光与控制》 CSCD 北大核心 2024年第9期12-17,44,共7页
针对复杂背景下纹理细节信息丢失、融合图像视觉感受较差等问题,提出了一种基于多层卷积的红外与可见光图像融合算法。该算法的网络框架分为编码器、解码器和融合网络3个部分。在编码器中引入高效通道注意力机制对源图像进行编码处理,... 针对复杂背景下纹理细节信息丢失、融合图像视觉感受较差等问题,提出了一种基于多层卷积的红外与可见光图像融合算法。该算法的网络框架分为编码器、解码器和融合网络3个部分。在编码器中引入高效通道注意力机制对源图像进行编码处理,融合多层卷积块、梯度卷积块、下采样卷积块以及卷积空间通道注意力机制等形成多层卷积融合网络(MCFN),通过该融合网络进行特征融合,利用解码器重建输出融合图像。选取了5种现有算法与所提算法用8种客观评价指标在两种数据集上进行比较,结果表明,所提算法融合后的图像目标突出、细节清晰、轮廓明显、指标提升显著,符合人体视觉感受。 展开更多
关键词 图像融合 红外图像 可见光图像 多层卷积 融合网络 注意力机制
在线阅读 下载PDF
基于预训练固定参数和深度特征调制的红外与可见光图像融合网络
11
作者 徐少平 周常飞 +2 位作者 肖建 陶武勇 戴田宇 《电子与信息学报》 EI CAS CSCD 北大核心 2024年第8期3305-3313,共9页
为了更好地利用红外与可见光图像中互补的图像信息,得到符合人眼感知特性的融合图像,该文采用两阶段训练策略提出一种基于预训练固定参数和深度特征调制的红外与可见光图像融合网络(PDNet)。具体地,在自监督预训练阶段,以大量清晰的自... 为了更好地利用红外与可见光图像中互补的图像信息,得到符合人眼感知特性的融合图像,该文采用两阶段训练策略提出一种基于预训练固定参数和深度特征调制的红外与可见光图像融合网络(PDNet)。具体地,在自监督预训练阶段,以大量清晰的自然图像分别作为U型网络结构(UNet)的输入和输出,采用自编码器技术完成预训练。所获得编码器模块能有效提取输入图像的多尺度深度特征功能,而解码器模块则能将其重构为与输入图像差异极小的输出图像;在无监督融合训练阶段,将预训练编码器和解码器模块的网络参数保持固定不变,而在两者之间新增包含Transformer结构的融合模块。其中,Transformer结构中的多头自注意力机制能对编码器分别从红外和可见光图像提取到的深度特征权重进行合理分配,从而在多个尺度上将两者融合调制到自然图像深度特征的流型空间上来,进而保证融合特征经解码器重构后所获得融合图像的视觉感知效果。大量实验表明:与当前主流的融合模型(算法)相比,所提PDNet模型在多个客观评价指标方面具有显著优势,而在主观视觉评价上,也更符合人眼视觉感知特点。 展开更多
关键词 红外与可见光图像 图像融合 自监督预训练 无监督融合训练 固定参数 深度特征调制
在线阅读 下载PDF
基于AGF和CNN的红外与可见光图像融合
12
作者 杨艳春 杨万轩 雷慧云 《激光与红外》 CAS CSCD 北大核心 2024年第7期1141-1148,共8页
针对红外与可见光图像融合中出现的边缘模糊和细节丢失等问题,本文提出了一种基于交替引导滤波器(AGF)与掩膜引导卷积神经网络(CNN)的融合算法。首先,将源图像通过交替引导滤波分解为基础层与细节层;然后,将基础层通过能量属性的融合规... 针对红外与可见光图像融合中出现的边缘模糊和细节丢失等问题,本文提出了一种基于交替引导滤波器(AGF)与掩膜引导卷积神经网络(CNN)的融合算法。首先,将源图像通过交替引导滤波分解为基础层与细节层;然后,将基础层通过能量属性的融合规则得到基础融合图像,细节层在基于掩膜引导的损失函数的指导下,通过卷积神经网络得到融合后的细节图像;最后,将基础融合图像与细节融合图像相加得到最终融合图像;实验结果表明,本文方法能够在突出显著热目标的同时保留丰富的背景边缘纹理信息,在客观评价指标上相较对比方法取得了更好的效果,证明了本文算法的优越性。 展开更多
关键词 图像处理 红外与可见光图像 交替引导滤波 卷积神经网络 图像融合
在线阅读 下载PDF
基于快速联合双边滤波器和改进PCNN的红外与可见光图像融合
13
作者 杨艳春 雷慧云 杨万轩 《红外技术》 CSCD 北大核心 2024年第8期892-901,共10页
针对红外与可见光图像融合结果中细节丢失、目标不显著和对比度低等问题,提出了一种结合快速联合双边滤波器(fast joint bilateral filter,FJBF)和改进脉冲耦合神经网络(pulse coupled neural network,PCNN)的红外与可见光图像融合方法... 针对红外与可见光图像融合结果中细节丢失、目标不显著和对比度低等问题,提出了一种结合快速联合双边滤波器(fast joint bilateral filter,FJBF)和改进脉冲耦合神经网络(pulse coupled neural network,PCNN)的红外与可见光图像融合方法,在保证融合图像质量的前提下有效提高运行效率。首先,利用快速联合双边滤波器对源图像进行分解;其次,为了更好地提取图像中显著结构和目标信息,针对基础层图像采用一种基于视觉显著图(visual significance map,VSM)的加权平均融合规则,针对细节层图像采用改进脉冲耦合神经网络模型进行融合,其中PCNN的所有参数都可以根据输入波段自适应调节;最后,将基础层融合图与细节层融合图叠加重构得到融合图像。实验结果表明,该方法提高了融合图像的效果,有效地保留了目标、背景细节和边缘等重要信息。 展开更多
关键词 图像处理 快速联合双边滤波器 脉冲耦合神经网络 红外与可见光图像 图像融合
在线阅读 下载PDF
多尺度和卷积注意力相结合的红外与可见光图像融合
14
作者 祁艳杰 侯钦河 《红外技术》 CSCD 北大核心 2024年第9期1060-1069,共10页
针对红外与可见光图像融合时,单一尺度特征提取不足、红外目标与可见光纹理细节丢失等问题,提出一种多尺度和卷积注意力相结合的红外与可见光图像融合算法。首先,设计多尺度特征提取模块和可变形卷积注意力模块相结合的编码器网络,多感... 针对红外与可见光图像融合时,单一尺度特征提取不足、红外目标与可见光纹理细节丢失等问题,提出一种多尺度和卷积注意力相结合的红外与可见光图像融合算法。首先,设计多尺度特征提取模块和可变形卷积注意力模块相结合的编码器网络,多感受野提取红外与可见光图像的重要特征信息。然后,采用基于空间和通道双注意力机制的融合策略,进一步融合红外和可见光图像的典型特征。最后,由3层卷积层构成解码器网络,用于重构融合图像。此外,设计基于均方误差、多尺度结构相似度和色彩的混合损失函数约束网络训练,进一步提高融合图像与源图像的相似性。本算法在公开数据集上与7种图像融合算法进行比较,在主观评价和客观评价方面,所提算法相较其它对比算法具有较好的边缘保持性、源图像信息保留度,较高的融合图像质量。 展开更多
关键词 红外与可见光图像 混合损失函数 多尺度特征提取 注意力机制 图像融合
在线阅读 下载PDF
多重关系感知的红外与可见光图像融合网络 被引量:1
15
作者 李晓玲 陈后金 +3 位作者 李艳凤 孙嘉 王敏鋆 陈卢一夫 《电子与信息学报》 EI CAS CSCD 北大核心 2024年第5期2217-2227,共11页
为充分整合红外与可见光图像间的一致特征和互补特征,该文提出一种基于多重关系感知的红外与可见光图像融合方法。该方法首先利用双分支编码器提取源图像特征,然后将提取的源图像特征输入设计的基于多重关系感知的跨模态融合策略,最后... 为充分整合红外与可见光图像间的一致特征和互补特征,该文提出一种基于多重关系感知的红外与可见光图像融合方法。该方法首先利用双分支编码器提取源图像特征,然后将提取的源图像特征输入设计的基于多重关系感知的跨模态融合策略,最后利用解码器重建融合特征生成最终的融合图像。该融合策略通过构建特征间关系感知和权重间关系感知,利用不同模态间的共享关系、差分关系和累积关系的相互作用,实现源图像一致特征和互补特征的充分整合,以得到融合特征。为约束网络训练以保留源图像的固有特征,设计了一种基于小波变换的损失函数,以辅助融合过程对源图像低频分量和高频分量的保留。实验结果表明,与目前基于深度学习的图像融合方法相比,该文方法能够充分整合源图像的一致特征和互补特征,能够有效保留可见光图像的背景信息和红外图像的热目标,整体融合效果优于对比方法。 展开更多
关键词 图像融合 红外图像 可见光图像 多重关系感知 小波变换
在线阅读 下载PDF
基于GAN轻量化改进的红外与可见光图像融合算法 被引量:2
16
作者 鲁晓涵 李洋 +2 位作者 邰昱博 徐宇 贾耀东 《电光与控制》 CSCD 北大核心 2024年第8期58-62,85,共6页
普通神经网络难以生成符合人眼视觉的红外与可见光融合图像,且网络模型复杂、占用内存过大。本文改进现有的生成对抗网络(GAN)框架:首先,在生成器中融入深度卷积和逐点卷积,设计小卷积核的卷积网络以减少网络参数;其次,对源图像进行掩... 普通神经网络难以生成符合人眼视觉的红外与可见光融合图像,且网络模型复杂、占用内存过大。本文改进现有的生成对抗网络(GAN)框架:首先,在生成器中融入深度卷积和逐点卷积,设计小卷积核的卷积网络以减少网络参数;其次,对源图像进行掩膜处理以减少提取特征过程中源图像信息的丢失;然后将处理后的图像和生成器得到的融合图像共同输入到鉴别器中,以增强网络对可见光图像保留源图像信息的能力;最后,在性能评价阶段将损失函数设置为梯度损失、对抗损失和内容损失函数,以约束融合图像,使其包含更多的可见光图像的背景信息以及红外图像的目标信息。在TNO image fusion dataset上进行了仿真实验,结果表明所提算法在降低网络复杂度、减少运算参数的同时可得到细节丰富、目标明确的融合图像。 展开更多
关键词 图像融合 红外与可见光图像 生成对抗网络 深度可分离卷积网络
在线阅读 下载PDF
基于多尺度及多头注意力的红外与可见光图像融合
17
作者 李秋恒 邓豪 +4 位作者 刘桂华 庞忠祥 唐雪 赵俊琴 卢梦圆 《红外技术》 CSCD 北大核心 2024年第7期765-774,共10页
针对红外与可见光图像融合容易出现细节丢失,且现有的融合策略难以平衡视觉细节特征和红外目标特征等问题,提出一种基于多尺度特征融合与高效多头自注意力相结合的红外与可见光图像融合方法。首先,为提高目标与场景的描述能力,采用了多... 针对红外与可见光图像融合容易出现细节丢失,且现有的融合策略难以平衡视觉细节特征和红外目标特征等问题,提出一种基于多尺度特征融合与高效多头自注意力相结合的红外与可见光图像融合方法。首先,为提高目标与场景的描述能力,采用了多尺度编码网络提取源图像不同尺度的特征;其次,提出了基于Transformer的多头转置注意力结合残差密集块的融合策略以平衡融合细节与整体结构;最后,将多尺度特征融合图输入基于巢式连接的解码网络,重建具有显著红外目标和丰富细节信息的融合图像。基于TNO与M^(3) FD公开数据集与7种经典融合方法进行实验,结果表明,本文方法在视觉效果与量化评价指标上表现更佳,生成的融合图像在目标检测任务上取得更好的效果。 展开更多
关键词 图像融合 红外与可见光图像 多尺度特征 多头自注意力 TRANSFORMER
在线阅读 下载PDF
基于Transformer和空间注意力的红外与可见光图像融合 被引量:1
18
作者 耿俊 吴子豪 +1 位作者 李文海 李晓瑜 《激光与红外》 CAS CSCD 北大核心 2024年第3期457-465,共9页
目前,已经有很多研究人员将卷积神经网络应用到红外与可见光图像融合任务中,并取得了较好的融合效果。其中有很多方法是基于自编码器架构的网络模型,这类方法通过自监督方式进行训练,在测试阶段需要采用手工设计的融合策略对特征进行融... 目前,已经有很多研究人员将卷积神经网络应用到红外与可见光图像融合任务中,并取得了较好的融合效果。其中有很多方法是基于自编码器架构的网络模型,这类方法通过自监督方式进行训练,在测试阶段需要采用手工设计的融合策略对特征进行融合。但现有的基于自编码器网络的方法很少能够充分地利用浅层特征和深层特征,而且卷积神经网络受到感受野的限制,建立长距离依赖较为困难,因而丢失了全局信息。而Transformer借助于自注意力机制,可以建立长距离依赖,有效获取全局上下文信息。在融合策略方面,大多数方法设计的较为粗糙,没有专门考虑不同模态图像的特性。因此,在编码器中结合了CNN和Transformer,使编码器能够提取更加全面的特征。并将注意力模型应用到融合策略中,更精细化地优化特征。实验结果表明,该融合算法相较于其他图像融合算法在主观和客观评价上均取得了优秀的结果。 展开更多
关键词 图像融合 深度学习 TRANSFORMER 红外图像 可见光图像
在线阅读 下载PDF
基于卷积神经网络的红外与可见光图像融合方法 被引量:2
19
作者 李景景 杜梅 孙滨 《激光杂志》 CAS 北大核心 2024年第2期135-139,共5页
针对当前红外与可见光图像融合方法存在融合效果差、效率低等问题,为了获得更优的红外与可见光图像融合结果,提出了基于卷积神经网络的红外与可见光图像融合方法。首先收集待融合红外与可见光图像,采用Retinex算法对图像进行增强操作,... 针对当前红外与可见光图像融合方法存在融合效果差、效率低等问题,为了获得更优的红外与可见光图像融合结果,提出了基于卷积神经网络的红外与可见光图像融合方法。首先收集待融合红外与可见光图像,采用Retinex算法对图像进行增强操作,提升图像亮度和细节信息,然后采用卷积神经网络提取图像融合特征,并设计红外与可见光图像融合规则,根据规则得到图像融合结果,最后应用多个数据集进行红外与可见光图像融合性能测试实验,结果表明,卷积神经网络的图像融合后整体视觉效果好,重要细节信息丰富,熵和平均梯度的值超过了6,融合时间低于1 s,整体性能优于其它红外与可见光图像对比融合方法。 展开更多
关键词 红外成像系统 可见光成像系统 卷积神经网络 融合规则 均梯度值
在线阅读 下载PDF
基于多判别器双流生成对抗网络的红外与可见光图像融合 被引量:1
20
作者 武凌霄 康家银 +1 位作者 姬云翔 马寒雁 《兵工学报》 EI CAS CSCD 北大核心 2024年第6期1799-1812,共14页
针对现有的红外与可见光图像融合方法对源图像信息保留不充分的问题,改进了一种基于多判别器双流生成对抗网络(Generative Adversarial Network,GAN)的红外与可见光图像融合算法。改进的GAN融合框架包含一个生成器与四个判别器,将差分... 针对现有的红外与可见光图像融合方法对源图像信息保留不充分的问题,改进了一种基于多判别器双流生成对抗网络(Generative Adversarial Network,GAN)的红外与可见光图像融合算法。改进的GAN融合框架包含一个生成器与四个判别器,将差分图像作为辅助信息,从而进一步提升网络的融合性能。算法中的差分图像不仅被作为源图像的附加信息,引导生成器关注不同模态图像的独特信息,还被用作真实数据分布,协助差分判别器与生成器进行对抗训练。所改进网络模型中,生成器采用双编码器-单解码器结构,其中编码器旨在提取不同模态特征,主要采用密集连接结构,并结合注意力模块;解码器旨在根据联结高维特征重构出融合图像。判别器对输入图像是来自真实图像还是融合图像进行判断,并根据判断的结果对生成器进行约束优化。实验结果表明,相较于对比算法,所提算法在主观判读和客观指标评价两方面均取得了更优异的融合效果。 展开更多
关键词 图像融合 红外图像 差分图像 生成对抗网络 注意力机制
在线阅读 下载PDF
上一页 1 2 28 下一页 到第
使用帮助 返回顶部