稀疏可变形卷积与高分辨率融合的接触网螺栓病害检测

1

作者 陈永 安卓奥博 张娇娇 《铁道科学与工程学报》 EI CAS CSCD 北大核心 2024年第7期2989-3000,共12页

列车长期运行产生的震动易导致接触网螺栓处于松动、脱落等不良状态,接触网取流异常会严重影响行车安全。针对高速铁路接触网螺栓病害检测时,易受复杂背景干扰及螺栓松动病害难以检测等问题,提出一种稀疏可变形卷积与高分辨率融合的接... 列车长期运行产生的震动易导致接触网螺栓处于松动、脱落等不良状态,接触网取流异常会严重影响行车安全。针对高速铁路接触网螺栓病害检测时,易受复杂背景干扰及螺栓松动病害难以检测等问题,提出一种稀疏可变形卷积与高分辨率融合的接触网螺栓病害检测方法。首先,构建稀疏动态可变形卷积构成的特征提取网络,通过增大感受野范围,来捕捉不同尺度下螺栓的形状特征,加强模型对螺栓小尺寸对象特征的提取能力。然后,设计高分辨率特征金字塔融合模块,将螺栓深层特征和浅层特征的高分辨率特征图进行充分融合,提高多尺度特征图的利用率。其次,提出基于连通域统计的螺栓松动判别方法,通过统计被截断螺栓的连通域个数,完成螺栓松动病害状态检测。最后,由高速铁路接触网螺栓检测试验得出:所提方法可以准确检测螺栓的缺失和松动病害,且具有较高的检测精度,相比改进前Mask R-CNN检测方法准确率增加了41.4个百分点、召回率增加了27.3个百分点、像素精确度提升28.11个百分点、F1-score达83.4%。同时,对接触网螺栓网络模型的检测效率进行试验,较Mask R-CNN的浮点计算效率提升了36.23%。对不同场景下接触网螺栓检测对比试验表明,所提方法具有良好的适应性和精确度,对于螺栓松动和缺失病害检测提供了更为准确的方法,对后期接触网智能化检测具有一定的参考意义。 展开更多

关键词 高铁接触网 螺栓病害检测 稀疏动态可变形卷积 Mask R-CNN 高分辨率融合

在线阅读 下载PDF 职称材料

基于多分辨率融合的无人机图像拼接匀色研究 被引量：15

2

作者 王晓丽 戴华阳 +2 位作者 余涛 谢东海 吴俣 《测绘通报》 CSCD 北大核心 2013年第6期27-30,共4页

虽然图像的拼接技术已经得到了深入研究,但是无人机图像的拼接并没有取得理想效果,其在拼接过程中的鬼影和曝光差异问题仍然没有得到有效解决,拼接后图像的匀色效果也并不理想。本文将最佳缝合线和多分辨率融合技术联合应用于无人机图... 虽然图像的拼接技术已经得到了深入研究,但是无人机图像的拼接并没有取得理想效果,其在拼接过程中的鬼影和曝光差异问题仍然没有得到有效解决,拼接后图像的匀色效果也并不理想。本文将最佳缝合线和多分辨率融合技术联合应用于无人机图像拼接,以待有效解决上述两大问题。试验表明,该方法用于无人机图像拼接可以有效消除鬼影和曝光差异,图像的拼接匀色能够达到理想的目视效果。 展开更多

关键词 无人机图像 拼接匀色 鬼影 最佳缝合线 曝光差异 多分辨率融合

在线阅读 下载PDF 职称材料

保细节自适应超分辨率融合算法 被引量：1

3

作者 杨爱萍 侯正信 +1 位作者 王成优 何凯 《天津大学学报》 EI CAS CSCD 北大核心 2009年第8期727-732,共6页

超分辨率融合是把配准好的低分辨率图像信息进行综合,形成高分辨率栅格上的均匀采样为了改善图像超分辨率融合效果,对鲁棒超分辨率融合算法进行改进.分析图像局部模式,给出角点和连接点的识别方法,进而设计了保细节自适应适用度函数,提... 超分辨率融合是把配准好的低分辨率图像信息进行综合,形成高分辨率栅格上的均匀采样为了改善图像超分辨率融合效果,对鲁棒超分辨率融合算法进行改进.分析图像局部模式,给出角点和连接点的识别方法,进而设计了保细节自适应适用度函数,提出了保细节自适应超分辨率融合算法.实验结果表明,算法不仅对配准误差具有鲁棒性,而且能很好地保存图像的边缘和细节特征,提高了融合图像的质量. 展开更多

关键词 超分辨率融合 保细节 自适应 归一化卷积(NC)

在线阅读 下载PDF 职称材料

全相位内插交错采样超分辨率融合 被引量：1

4

作者 杨爱萍 侯正信 +1 位作者 王成优 何凯 《计算机工程与应用》 CSCD 北大核心 2009年第8期16-19,共4页

利用超分辨率重建技术可提高图像的空间分辨率,但是低分辨率图像序列的配准精度直接影响超分辨率重建的效果。如果能在现有硬件设备的基础上,通过合理安排CCD线阵对图像进行错位,就能对图像间的子像素位移进行精确控制,消除运动参数估... 利用超分辨率重建技术可提高图像的空间分辨率,但是低分辨率图像序列的配准精度直接影响超分辨率重建的效果。如果能在现有硬件设备的基础上,通过合理安排CCD线阵对图像进行错位,就能对图像间的子像素位移进行精确控制,消除运动参数估计对图像超分辨率重建的制约,从而提高图像的空间分辨率。对超模式影像所代表的交错采样图像的超分辨率重建进行了研究,基于全相位滤波理论,构造了具有交错采样结构的全相位内插滤波器,并将其用于交错采样图像超分辨率内插融合。为交错采样图像超分辨率重建提供了快速、实用且性能优异的高分辨率图像初始估计,大大提高了图像超分辨率重建质量。 展开更多

关键词 图像配准 交错采样 全相位内插 超分辨率融合

在线阅读 下载PDF 职称材料

高分辨率融合降水驱动下的WRF/WRF-Hydro耦合模拟研究 被引量：6

5

作者 王维 刘佳 +3 位作者 李传哲 于恩涛 王一之 邱庆泰 《水资源保护》 EI CAS CSCD 北大核心 2023年第5期125-134,共10页

为了满足陆面水文模式和数值大气模式耦合构建降雨径流模拟系统的需求,构建了基于天气雷达与雨量站观测降水的3种高分辨率降水数据(雷达估测降水、雨量站插值降水和基于雷达与雨量站观测数据的融合降水),采用雨量站插值降水和融合降水... 为了满足陆面水文模式和数值大气模式耦合构建降雨径流模拟系统的需求,构建了基于天气雷达与雨量站观测降水的3种高分辨率降水数据(雷达估测降水、雨量站插值降水和基于雷达与雨量站观测数据的融合降水),采用雨量站插值降水和融合降水数据对陆面水文模式WRF-Hydro的关键产汇流参数进行率定,探讨了不同降水驱动WRF-Hydro开展径流模拟在我国北方山区中小尺度流域的适用性。结果表明:融合降水的误差指标相比传统插值降水有不同程度的改善,融合降水的时空准确性也更为突出;采用雨量站插值降水和融合降水均可有效改善WRF-Hydro的关键产汇流参数,其中融合降水率定参数组的洪水模拟效果要优于雨量站插值降水;以高分辨率融合降水数据为驱动,可获得更准确的WRF-Hydro关键产汇流参数,有效提高WRF/WRF-Hydro陆气耦合系统在研究流域的适用性。 展开更多

关键词 降雨径流模拟 高分辨率融合降水 雨量站插值降水 WRF WRF-Hydro 天气雷达

在线阅读 下载PDF 职称材料

基于模型集成的高分辨率融合车道线检测算法 被引量：4

6

作者 袁鑫 江聪世 《计算机辅助设计与图形学学报》 EI CSCD 北大核心 2022年第9期1402-1410,共9页

针对无人机航拍视角下车道线形状复杂、细节特征易丢失、车道线前后景像素占比不均衡等问题,提出一种基于模型集成的高分辨率融合车道线检测算法.首先使用高分辨率融合结构和双线性插值算法改进全卷积神经网络的卷积模块和上采样模块;... 针对无人机航拍视角下车道线形状复杂、细节特征易丢失、车道线前后景像素占比不均衡等问题,提出一种基于模型集成的高分辨率融合车道线检测算法.首先使用高分辨率融合结构和双线性插值算法改进全卷积神经网络的卷积模块和上采样模块;然后依据模型集成思想,使用改进后的模型结构作为车道线前后景语义分割模型及车道线多类别语义分割模型,用于分步骤解决车道线检测问题,并使用阈值化交叉熵损失函数和Lovasz损失函数组成联合损失函数对2种模型进行训练;最后使用局部色选区域生长算法为检测结果添补细节.实验结果表明,所提算法在自定义无人机航拍视角的15类车道线语义分割数据集中达到0.5484的平均交并比和0.9931的像素精度,在NVIDIA Tesla V100平台对分辨率为512×512的图像的检测速度达到23.08帧/s. 展开更多

关键词 卷积神经网络 高分辨率融合 车道线检测 数据不均衡 模型集成

在线阅读 下载PDF 职称材料

面向螺丝锁附序列的多分辨率融合卷积神经网络 被引量：1

7

作者 刘天宇 周稻祥 +1 位作者 李明 李心宇 《西安交通大学学报》 EI CAS CSCD 北大核心 2020年第3期161-168,178,共9页

为了准确识别螺丝锁附是否发生故障和具体故障类型,提出了一种多分辨率融合卷积神经网络。使用原始序列数据作为输入以提高识别速度和精度;为了提取多尺度特征,分别在分辨率(数据长度)为4 000、2 000和1 000的特征向量上进行一维卷积运... 为了准确识别螺丝锁附是否发生故障和具体故障类型,提出了一种多分辨率融合卷积神经网络。使用原始序列数据作为输入以提高识别速度和精度;为了提取多尺度特征,分别在分辨率(数据长度)为4 000、2 000和1 000的特征向量上进行一维卷积运算;在Fusion层通过上采样、下采样和1×1卷积等策略,将各分辨率特征向量融合得到3组新特征向量,使得该网络能够获得锁附序列的整体和局部特征信息;在输出层使用类别加权交叉熵(CWCE)损失,通过为损失函数设置惩罚系数来加大对样本较少类别的惩罚力度,缓解了各类别数据不平衡的问题。收集了3 149条螺丝锁附序列,并在该数据集上进行了实验,结果表明:在6分类实验中,所提方法的准确率为96.00%,宏F1为93.93%,均高于其他方法;在2分类实验中,所提方法的准确率为99.36%,CWCE损失的有效性得到了验证;所提方法能够有效地判别锁附故障,并具有较好的实时性。 展开更多

关键词 螺丝 锁附故障 多分辨率融合 卷积神经网络 类别加权交叉熵

在线阅读 下载PDF 职称材料

面向注意力缺陷多动障碍分类的多分辨率时空融合图卷积网络

8

作者 宋笑影 郝春雨 柴利 《电子与信息学报》 北大核心 2025年第6期1927-1936,共10页

神经发育障碍疾病患者的精准分类是医学领域的一项重要挑战,对于疾病诊断和指导治疗至关重要。然而,现有基于图卷积网络(GCNs)的方法通常采用单一分辨率空间特征,忽视了多分辨率下的空间信息以及时间信息。为了克服上述局限性,该文提出... 神经发育障碍疾病患者的精准分类是医学领域的一项重要挑战,对于疾病诊断和指导治疗至关重要。然而,现有基于图卷积网络(GCNs)的方法通常采用单一分辨率空间特征,忽视了多分辨率下的空间信息以及时间信息。为了克服上述局限性,该文提出一种多分辨率时空融合图卷积网络(MSTF-GCN)。在多个分辨率空间下构建多个大脑功能连通性网络,使用支持向量机-递归特征消除提取最优空间特征。为了保留全局时间信息并使网络具有捕获信号不同层次变化的能力,将全局时间信号及其差分信号输入到时间卷积网络中学习复杂时间维度的依赖关系,提取时间特征。结合时空信息构建群体图,利用多通道图卷积网络灵活地融合不同分辨率的群体图数据,最后融入非成像数据信息生成有效的多通道多类型时空融合分类特征,有效提升了MSTF-GCN模型的分类性能。将MSTF-GCN应用于注意力缺陷多动障碍(ADHD)患者分类识别,在ADHD-200数据集两个成像站点上的分类准确率分别达到了75.92%和82.95%,实验结果优于已有的流行算法,验证了MSTF-GCN的有效性。 展开更多

关键词 多分辨率时空融合图卷积网络 时空融合 多分辨率 注意力缺陷多动障碍

在线阅读 下载PDF 职称材料

无人机影像拼接多分辨率自适应无缝融合方法 被引量：2

9

作者 石耀榕 肖敬达 《测绘通报》 CSCD 北大核心 2024年第6期36-40,共5页

本文针对无人机影像拼接中存在的几何错位和拼接缝问题,提出了一种联合应用最佳拼接缝算法和图像融合的方法,对影像几何错位和拼接缝区域进行修复和无缝融合。首先利用图切割算法搜索帧间拼接最小差异线,修复帧间几何错位;然后基于差异... 本文针对无人机影像拼接中存在的几何错位和拼接缝问题,提出了一种联合应用最佳拼接缝算法和图像融合的方法,对影像几何错位和拼接缝区域进行修复和无缝融合。首先利用图切割算法搜索帧间拼接最小差异线,修复帧间几何错位;然后基于差异线建立条带融合兴趣区,且融合兴趣区范围大小随帧间色调曝光差异大小自适应变化;最后引入融合兴趣区掩膜改进拉普拉斯多分辨率图像融合算法,对帧间色调曝光差异进行平滑处理,实现无人机影像拼接的无缝融合。试验结果表明,相较于传统拉普拉斯融合算法,本文影像融合成果互信息平均提升了12.79%,峰值信噪比平均提升了21.48%,取得了自然无缝的目视效果,具有一定应用价值。 展开更多

关键词 无人机 几何错位 拼接缝 图切割 多分辨率融合

在线阅读 下载PDF 职称材料

Piella像素级多分辨率图像融合框架的扩展及其算法 被引量：10

10

作者 李光鑫 徐抒岩 +2 位作者 吴伟平 孙天宇 郝伟 《光学精密工程》 EI CAS CSCD 北大核心 2012年第12期2773-2780,共8页

为了优化加权多分辨率图像融合的算法结构,在Piella像素级多分辨率图像融合框架基础上,提出一种只用匹配测度控制决策模块的加权多分辨率图像融合扩展模式,改变了传统加权多分辨率图像融合模式必须由活性测度和匹配测度共同决定决策因... 为了优化加权多分辨率图像融合的算法结构,在Piella像素级多分辨率图像融合框架基础上,提出一种只用匹配测度控制决策模块的加权多分辨率图像融合扩展模式,改变了传统加权多分辨率图像融合模式必须由活性测度和匹配测度共同决定决策因子的格局。相对于传统模式,提出的扩展模式去除了活性测度,相应的算法结构更为简单。以相关信号强度比作为匹配测度,给出了一种基于扩展模式的加权多分辨率图像融合算法。对红外和可见光图像的融合实验表明,该算法融合性能优于传统加权多分辨率图像融合算法,其边缘融合质量指标(EFQI)和加权融合质量指标(WFQI)分别提高了2.9%和1.8%;而且计算复杂度更低,计算决策因子所需的乘法和加法运算次数分别减少了66.7%和33.3%。 展开更多

关键词 Piella框架 多分辨率图像融合 匹配测度 活性测度

在线阅读 下载PDF 职称材料

基于多分辨率特征融合的葡萄尺寸检测 被引量：3

11

作者 李颀 杨军 《江苏农业学报》 CSCD 北大核心 2022年第2期394-402,共9页

针对葡萄特征提取不够充分且果粒排列密集相互遮挡难以准确检测的问题,以陕西省鄠邑区户太8号葡萄为研究对象,提出一种基于特征金字塔网络(FPN)特征融合的Faster R-CNN卷积神经网络模型完成复杂背景情况下葡萄果粒的检测与识别。以ResNe... 针对葡萄特征提取不够充分且果粒排列密集相互遮挡难以准确检测的问题,以陕西省鄠邑区户太8号葡萄为研究对象,提出一种基于特征金字塔网络(FPN)特征融合的Faster R-CNN卷积神经网络模型完成复杂背景情况下葡萄果粒的检测与识别。以ResNet50为主干网络,引入金字塔结构,增强网络模型对葡萄果粒不同分辨率特征的提取能力,同时加入GA-RPN网络生成自适应锚框,引入遮挡补偿机制,以解决密集葡萄果粒存在的遮挡问题。模型验证结果表明,本研究提出的模型精度均值(AP)在候选框与原标记框的重叠率(IOU)阈值为50时可达95.9%,对葡萄果粒、果穗的检测准确率分别为95.8%、96.1%,相比于原始Faster R-CNN模型识别性能更优。利用双目视觉算法对葡萄果粒进行尺寸测量,在最佳测量距离(0.6~1.4 m)其相对误差可控制在2%以内。 展开更多

关键词 葡萄无损检测 多分辨率特征融合 遮挡补偿 机器视觉

在线阅读 下载PDF 职称材料

针对高分辨率遥感图像的融合拼接算法 被引量：5

12

作者 么鸿原 林雪原 +1 位作者 王海鹏 郭强 《计算机工程与设计》 北大核心 2019年第11期3230-3235,共6页

为给观测人员提供视角宽广、内容丰富、真实客观的全景图像,通过对无人机航拍相邻图像间的位置关系的研究结合改进的特征检测与描述算法,提出一种针对高分辨率遥感图像的特征查找与匹配算法,同时提出一种基于最佳缝合线的多分辨率融合算... 为给观测人员提供视角宽广、内容丰富、真实客观的全景图像,通过对无人机航拍相邻图像间的位置关系的研究结合改进的特征检测与描述算法,提出一种针对高分辨率遥感图像的特征查找与匹配算法,同时提出一种基于最佳缝合线的多分辨率融合算法,制定多幅高分辨率遥感图像的分层拼接策略。在实验阶段,特征点匹配数目相比传统SURF算法平均减少44%,运行时间减少37%,相比文献[10]算法匹配数目平均减少26%,运行时间减少22%,结合最终给出的50幅高分辨率遥感图像拼接结果,说明了优化算法在多幅高分辨率遥感图像拼接中的有效性,为进一步研究打下坚实基础。 展开更多

关键词 无人机 高分辨率遥感图像 最佳缝合线 多分辨率融合 分层拼接

在线阅读 下载PDF 职称材料

基于多分辨率相干融合的管道小泄漏识别方法研究

13

作者 梁伟 张来斌 +1 位作者 王朝晖 秦先勇 《科学技术与工程》 2008年第20期5608-5611,共4页

成品油管道内径小、站间距大使得泄漏信号小而难以识别。本文将小波多分辨率分析与相干分析相结合,提出了基于多分辨率相干融合的小泄漏识别方法。通过对信号的小波多分辨率分析,得到不同尺度下的信号,然后将小泄漏信号和干扰信号序列... 成品油管道内径小、站间距大使得泄漏信号小而难以识别。本文将小波多分辨率分析与相干分析相结合,提出了基于多分辨率相干融合的小泄漏识别方法。通过对信号的小波多分辨率分析,得到不同尺度下的信号,然后将小泄漏信号和干扰信号序列在细节尺度上的重构信号进行相干融合分析。利用模糊C均值聚类得到细节尺度上的频率相干特征向量,解决小泄漏识别难题。现场应用结果表明该方法的有效性。 展开更多

关键词 多分辨率相干融合 小泄漏识别 模糊C均值

在线阅读 下载PDF 职称材料

基于多任务卷积神经网络的红外与可见光多分辨率图像融合 被引量：11

14

作者 朱雯青 张宁 +2 位作者 李争 刘鹏 汤心溢 《光谱学与光谱分析》 SCIE EI CAS CSCD 北大核心 2023年第1期289-296,共8页

红外与可见光图像融合一直是图像领域研究的热点,融合技术能弥补单一传感器的不足,为图像理解与分析提供良好的成像基础。因生产工艺以及成本的限制,红外探测器的分辨率远低于可见光探测器,并在一定程度上因源图像分辨率的差异阻碍了实... 红外与可见光图像融合一直是图像领域研究的热点,融合技术能弥补单一传感器的不足,为图像理解与分析提供良好的成像基础。因生产工艺以及成本的限制,红外探测器的分辨率远低于可见光探测器,并在一定程度上因源图像分辨率的差异阻碍了实际应用。针对红外与可见光图像分辨率不一致的问题,提出了用于红外图像超分辨率重建与融合的多任务卷积网络框架,应用于多分辨率图像融合。在网络结构方面,首先设计了双通道网络分别提取红外与可见光特征,使算法不受源图像分辨率的限制;其次提出了特征上采样模块,先用双线性插值方法增加像素个数,再通过多层感知器精细化拟合像素平滑空间与高频空间的映射关系,无需重新训练模型即可实现任意尺度的红外图像上采样;接着将线性注意力引入网络,学习特征空间位置间的非线性关系,抑制无关信息并增强网络对全局信息的表达。在损失函数方面,提出了梯度损失,保留红外与可见光图像中绝对值较大的滤波器响应值,并计算该值与重建的融合图像响应值的Frobenius范数,无需理想的融合图像作为真值监督网络学习就能生成融合图像;此外,在梯度损失、像素损失的共同作用下对多任务模型进行优化,可以同时重建融合图像和高分辨率红外图像。算法在RoadScene数据集上进行训练,与其他4种相关算法在TNO数据集上进行对比,主观性能上该方法可以输入任意分辨率的源图像,融合图像红外目标突出、可见光细节纹理丰富,在源图像分辨率相差较大时能重建特征清晰的高分辨率红外图像,模型泛化性能强;客观性能上在信息熵、差异相关性总量、空间频率等多个评价指标上表现优异,结果表明重建的融合图像信息丰富、信息转化率高、清晰度高,验证了算法的有效性。 展开更多

关键词 红外与可见光融合 多分辨率图像融合 线性注意力 梯度损失 红外图像超分辨率

在线阅读 下载PDF 职称材料

基于多分辨率特征融合的任意尺度图像超分辨率重建 被引量：7

15

作者 范文卓 吴涛 +4 位作者 许俊平 李庆庆 张建林 李美惠 魏宇星 《计算机工程》 CAS CSCD 北大核心 2023年第9期217-225,共9页

传统深度学习的图像超分辨率重建网络仅在固定分辨率上提取特征,存在无法综合高级语义信息、只能以特定尺度因子重建图像、泛化能力较弱、网络参数量较大等问题。提出一种基于多分辨率特征融合的任意尺度图像超分辨率重建算法MFSR。在... 传统深度学习的图像超分辨率重建网络仅在固定分辨率上提取特征,存在无法综合高级语义信息、只能以特定尺度因子重建图像、泛化能力较弱、网络参数量较大等问题。提出一种基于多分辨率特征融合的任意尺度图像超分辨率重建算法MFSR。在多分辨率特征融合编码阶段设计多分辨率特征提取模块以提取不同分辨率特征,通过构建双重注意力模块增强网络特征提取能力,使不同分辨率特征之间进行充分交互,以获取信息丰富的融合特征图。在图像重建阶段利用多层感知机对融合特征图进行解码,实现任意尺度的图像超分辨率重建。实验结果表明,在Set5数据集上分别以尺度因子2、3、4、6、8进行测试,所提算法的峰值信噪比分别为38.62、34.70、32.41、28.96、26.62 dB,模型参数量为0.72×106,在大幅减少参数量的同时能保持重建质量,可以实现任意尺度的图像超分辨率重建,性能优于SRCNN、VDSR、EDSR等主流算法。 展开更多

关键词 多分辨率特征融合 超分辨率重建 任意尺度 双重注意力 特征交互

在线阅读 下载PDF 职称材料

融入双注意力的高分辨率网络人体姿态估计 被引量：8

16

作者 罗梦诗 徐杨 叶星鑫 《计算机工程》 CAS CSCD 北大核心 2022年第2期314-320,共7页

在人体姿态估计任务中,针对高分辨率网络提取和融合特征图的特征信息时不能有效获取多通道信息和空间特征信息,导致人体姿态估计结果不够精确。在高分辨率网络(HRNet)的基础上,提出一种融入双注意力的高分辨率人体姿态估计网络ENNet。... 在人体姿态估计任务中,针对高分辨率网络提取和融合特征图的特征信息时不能有效获取多通道信息和空间特征信息,导致人体姿态估计结果不够精确。在高分辨率网络(HRNet)的基础上,提出一种融入双注意力的高分辨率人体姿态估计网络ENNet。通过引入通道注意力,构造E-ecaneck模块和E-ecablock模块作为基础模块,最大程度地对多通道提取足够多的有用信息,在每一阶段子网的多分辨率融合阶段融入空间注意力机制,提取并融合不同分辨率特征信息,通过上采样的方式输出所有融合低分辨率的高分辨率表征。在公开数据集MS COCO2017上进行验证和测试,结果表明,相比于高分辨率网络,该方法mAP提高3.4%,有效改善网络多分辨率表征的信息融合能力,明显提升基础高分辨率网络HRNet的估计精确度。 展开更多

关键词 人体姿态估计 高分辨率网络 多分辨率融合 通道注意力 空间注意力

在线阅读 下载PDF 职称材料

基于优化HRNetV2的高分辨率遥感影像土地利用自动分类 被引量：4

17

作者 常秀红 李纯斌 +2 位作者 吴静 李颖 李全红 《中国土地科学》 CSSCI CSCD 北大核心 2022年第2期96-105,共10页

研究目的:基于语义分割模型HRNetV2实现高分辨率遥感影像的土地利用自动分类,以期推动深度学习语义分割方法实现遥感影像的土地利用自动分类研究,并为该类研究提供可参考的案例。研究方法:首先对语义分割模型HRNetV2从损失函数、特征提... 研究目的:基于语义分割模型HRNetV2实现高分辨率遥感影像的土地利用自动分类,以期推动深度学习语义分割方法实现遥感影像的土地利用自动分类研究,并为该类研究提供可参考的案例。研究方法:首先对语义分割模型HRNetV2从损失函数、特征提取方面进行优化,以提高模型的分割精度;其次用优化后的HRNetV2模型对民乐县2 m的高分辨率遥感影像进行土地利用分类,并基于混淆矩阵对分类的结果进行评估。研究结果:(1)优化后的HRNetV2语义分割模型的MIOU达81.9%,相较于优化前提高了4.4%,证明了优化方法的有效性;(2)针对民乐县进行的土地利用自动分类总体精度达89.72%,Kappa系数达0.888。研究结论:优化后的HRNetV2语义分割模型在高分辨率遥感影像的土地利用自动分类中具有较强的应用前景。 展开更多

关键词 土地信息 土地利用分类 高分辨率遥感影像 HRNetV2 多层次分辨率特征融合

在线阅读 下载PDF 职称材料

基于多谱注意力高分辨率网络的人体姿态估计 被引量：7

18

作者 马皖宜 张德平 《计算机辅助设计与图形学学报》 EI CSCD 北大核心 2022年第8期1283-1292,共10页

针对人体姿态估计中多分辨率特征融合时出现的特征信息丢失的问题,基于Lite-HRNet引入多谱注意力机制,设计了一个轻量级的结合多谱注意力机制的高分辨率人体姿态估计网络LiteMSA-HRNet.将多谱注意力机制融入Lite-HRNet,利用多个频率分量... 针对人体姿态估计中多分辨率特征融合时出现的特征信息丢失的问题,基于Lite-HRNet引入多谱注意力机制,设计了一个轻量级的结合多谱注意力机制的高分辨率人体姿态估计网络LiteMSA-HRNet.将多谱注意力机制融入Lite-HRNet,利用多个频率分量,提取更丰富的特征信息,获得更优的多分辨率特征重复融合的效果;在主体网络后利用一个反卷积模块,将其生成的更高分辨率特征和主体网络生成的高分辨率特征进行融合;引入通道置换、逐点分组卷积和深度可分离卷积,轻量化反卷积模块中的残差块,提升网络定位关键点的速度.在COCO2017数据集上的实验结果表明,与其他网络相比,Lite MSA-HRNet在人体姿态估计精度和复杂度之间取得了较好的平衡结果. 展开更多

关键词 人体姿态估计 多谱注意力 高分辨率网络 轻量化网络 多分辨率特征融合

在线阅读 下载PDF 职称材料

引入注意力机制的多分辨率人体姿态估计研究 被引量：4

19

作者 张越 黄友锐 刘鹏坤 《计算机工程与应用》 CSCD 北大核心 2021年第8期126-132,共7页

针对人体姿态估计任务中多分辨率特征表征直接融合时存在无法有效利用特征图空间特征信息的问题,基于High-Resolution Net(HRNet)进行结构设计,构建出结合了通道域注意力和空间域注意力机制的多分辨率人体姿态估计网络GCT-Nonlocal Net(... 针对人体姿态估计任务中多分辨率特征表征直接融合时存在无法有效利用特征图空间特征信息的问题,基于High-Resolution Net(HRNet)进行结构设计,构建出结合了通道域注意力和空间域注意力机制的多分辨率人体姿态估计网络GCT-Nonlocal Net(GNNet),提出了一种基于注意力机制的多分辨率表征融合方法,在不同分辨率表征融合前由空间注意力提取出各分辨率表征更有用的空间特征信息来改进融合单元,使得各分辨率表征间的信息融合效果更佳,最终输出的高分辨率表征含有更丰富的特征信息,同时构造了Gateneck模块和Gateblock模块,其通过引入通道注意力更明确地对通道关系建模从而高效地提取通道信息。在MS COCOVAL 2017进行验证,结果显示提出的GNNet相较于SOTA级表现的HRNet在相当参数量与运算量的情况下获得了更高的准确度,mAP提高了1.4个百分点。实验结果表明,所提方法有效地提高了多分辨率特征表征融合效果。 展开更多

关键词 卷积神经网络 人体姿态估计 多分辨率特征表征融合 空间域注意力机制 通道域注意力机制

在线阅读 下载PDF 职称材料

基于多尺度稀疏字典的多聚焦图像超分辨融合 被引量：29

20

作者 彭真明 景亮 +1 位作者 何艳敏 张萍 《光学精密工程》 EI CAS CSCD 北大核心 2014年第1期169-176,共8页

由于传统的多聚焦图像融合算法不能对图像中聚焦区域划分进行有效度量,提出了一种新的多聚焦图像超分辨融合方法来改善图像融合效果。该方法对图像清晰区和模糊区进行度量,并利用稀疏表示方法对度量后的清晰区域进行超分辨重建。首先,... 由于传统的多聚焦图像融合算法不能对图像中聚焦区域划分进行有效度量,提出了一种新的多聚焦图像超分辨融合方法来改善图像融合效果。该方法对图像清晰区和模糊区进行度量,并利用稀疏表示方法对度量后的清晰区域进行超分辨重建。首先,采用空间频率方法提取源图像中清晰区域与模糊区域,然后确定清晰区域中的主清晰区和次清晰区,并计算它们的真实下采样尺度。最后,通过学习多尺度稀疏表示字典对图像中次清晰区域进行超分辨率重建,并与清晰区域结合形成最终融合图像。实验及各种定量评价结果表明,提出的方法较常规方法具有更好的融合性能,得到的图像更清晰。对比Harr小波,非下采样轮廓波变换(NSCT),剪切波(Shearlet)变换等方法,其熵(EN)提升了1%,峰值信噪比(PSNR)提升了0.62dB,清晰度(SP)和空间频率(SF)提升30%,均方误差(MSE)下降了6%左右。 展开更多

关键词 图像融合 超分辨率融合 降采样尺度 稀疏字典 多聚焦图像 空间频率

在线阅读 下载PDF 职称材料