期刊文献+
共找到86篇文章
< 1 2 5 >
每页显示 20 50 100
基于通道注意力机制增强DGNN的外骨骼机器人步态相位预测 被引量:1
1
作者 颜建军 许赢家 +2 位作者 林越 金理 江金林 《华东理工大学学报(自然科学版)》 北大核心 2025年第1期110-118,共9页
利用一种基于通道注意力机制增强的有向图神经网络(Channel Attention Enhanced Directed Graph Neural Network,CA-DGNN)的外骨骼机器人步态相位预测方法,提高了步态相位预测的准确性和可靠性。首先,研制了人体下肢姿态信息采集装置,... 利用一种基于通道注意力机制增强的有向图神经网络(Channel Attention Enhanced Directed Graph Neural Network,CA-DGNN)的外骨骼机器人步态相位预测方法,提高了步态相位预测的准确性和可靠性。首先,研制了人体下肢姿态信息采集装置,采集人体下肢的行走步态数据并构建人体下肢的骨架模型;之后,建立了基于CA-DGNN步态相位的预测模型,提取人体步态相位的运动特征,并基于当前时刻数据预测未来时刻的步态相位;最后,探讨了滑动窗口大小对算法性能的影响。本文提高了外骨骼机器人步态相位预测的准确性和鲁棒性,为此方向研究提供了一种新的思路和方法。 展开更多
关键词 步态相位预测 惯性传感器 骨架 时空图卷积网络 通道注意力机制
在线阅读 下载PDF
基于引导图卷积网络的人体动作轮廓动态识别
2
作者 鲁光男 李柯景 岳莉 《现代电子技术》 北大核心 2025年第21期101-104,共4页
为捕捉节点信号随时间的演变规律,准确预测人体动作,提升人员安全性,文中提出基于引导图卷积网络的人体动作轮廓动态识别方法,全面地理解人体动作的动态变化。利用OpenPose模型获取动作视频中人体各个关节点的位置,构建人体动作骨架图;... 为捕捉节点信号随时间的演变规律,准确预测人体动作,提升人员安全性,文中提出基于引导图卷积网络的人体动作轮廓动态识别方法,全面地理解人体动作的动态变化。利用OpenPose模型获取动作视频中人体各个关节点的位置,构建人体动作骨架图;建立跨时空图结构,描述不同视频帧人体关键点之间的时间依赖关系,设计多尺度邻接矩阵,捕捉人体动作的跨时空相关性;引入注意力机制对不同尺度的邻接矩阵进行权重分配,确定关键关节点间的关系;基于频谱图理论对人体骨架时空图进行时空卷积操作,深入挖掘空间维度上的信号关联性,并捕捉节点信号随时间的演变,通过全连接层进行降维和激活函数处理,输出人体动作轮廓动态识别结果。结果表明:文中方法能够有效地捕捉人体动作的时空特征,对于不同场景下和不同复杂程度的动作类型,该方法的人体动作轮廓动态识别准确性均在90%以上,证明所提方法具有较高的准确性和鲁棒性。 展开更多
关键词 OpenPose模型 图卷积网络 注意力机制 频谱图理论 人体骨架时空图 时空特性
在线阅读 下载PDF
基于时空特征融合与注意力机制的图卷积动作识别方法
3
作者 王晓路 谭永辉 李晓婷 《电讯技术》 北大核心 2025年第11期1789-1797,共9页
为了进一步提高人体动作识别的精度和充分发掘动作序列的时空特征,提出了基于时空特征融合与注意力机制的图卷积动作识别方法。采用空间注意力图卷积对拓扑图进行通道级细化,捕捉不同运动类型下关节的相关性特征,并采用时域多尺度图卷... 为了进一步提高人体动作识别的精度和充分发掘动作序列的时空特征,提出了基于时空特征融合与注意力机制的图卷积动作识别方法。采用空间注意力图卷积对拓扑图进行通道级细化,捕捉不同运动类型下关节的相关性特征,并采用时域多尺度图卷积模块扩展时间卷积结构以捕获多尺度时间特征。构建多层次特征融合模块将初始特征与时域多尺度图卷积输出特征作为模块输入,采用双分支结构分别获取全局和局部通道特征,并在通道维度进行时空特征融合以增强模型特征提取能力;在此基础上,提出一种肢体注意力机制对人体拓扑结构进行划分并分别计算其在通道维度上的注意力权重,加强模型对局部动作特征的关注能力。实验结果表明,在NTU RGB+D数据集的CS和CV评估模式下分别达到了93.0%和96.9%的识别准确率,在NTU RGB+D 120数据集的X-Sub和X-Set评估模式下分别达到了89.8%和91.1%的识别准确率,均高于ST-GCN、CTR-GCN等模型的识别准确率。 展开更多
关键词 动作识别 人体骨架 图卷积 时空特征融合 注意力机制
在线阅读 下载PDF
基于超图卷积和多角度拓扑细化的骨骼行为识别方法
4
作者 黄倩 苏新凯 +1 位作者 李畅 巫义锐 《计算机科学》 北大核心 2025年第5期220-226,共7页
由于人体骨架是一个天然存在的拓扑结构,因此图卷积网络(GCNs)被广泛地应用于基于骨骼的人体行为识别。然而,目前的基于GCN的方法只关注关节点对之间的低阶关系,而忽略了潜在的关节点在关节点群中的高阶关系。同时,现有的方法忽略了空... 由于人体骨架是一个天然存在的拓扑结构,因此图卷积网络(GCNs)被广泛地应用于基于骨骼的人体行为识别。然而,目前的基于GCN的方法只关注关节点对之间的低阶关系,而忽略了潜在的关节点在关节点群中的高阶关系。同时,现有的方法忽略了空间拓扑随时间的动态变化。这些不足影响了模型的表现。为此,利用K-NN计算出相关性高的关节点构成超边,提出了超图构建方法和超边图卷积来动态地学习关节点间的高阶关系。此外,设计了一个从时间和通道角度细化的拓扑图来学习帧级的和通道级的关节点对之间的相关性。最后,开发了一个多角度拓扑细化的超图卷积网络(HyperMTR-GCN)用于骨骼行为识别,其在NTU RGB+D和NTU RGB+D 120数据集上具有显著优势。具体地,所提方法在NTU RGB+D的X-sub基准上比2s-AGCN提高了3.7%,在NTU RGB+D 120的X-sub基准上比2s-AGCN提高了5.7%。 展开更多
关键词 行为识别 图卷积网络 超图神经网络 骨架建模 拓扑细化
在线阅读 下载PDF
基于骨架识别的城轨车站监控视频乘客行为特征辨识研究 被引量:2
5
作者 管洋 贾利民 +1 位作者 陶思涵 豆飞 《都市快轨交通》 北大核心 2025年第1期106-111,共6页
城市轨道交通领域传统监控分析方法对视频监控图像(如摔倒、晕倒和打斗等异常行为识别)漏识率高、参数调整复杂,且难以高效地应用于现实城轨车站监控场景,针对此问题,采用基于骨架模式识别的人体姿态特征辨识框架,引入基于人体骨架的姿... 城市轨道交通领域传统监控分析方法对视频监控图像(如摔倒、晕倒和打斗等异常行为识别)漏识率高、参数调整复杂,且难以高效地应用于现实城轨车站监控场景,针对此问题,采用基于骨架模式识别的人体姿态特征辨识框架,引入基于人体骨架的姿态估计技术,采用Alpha Pose模型对乘客姿态进行精确估计,并结合时空图卷积网络(spatial temporal graph convolutional networks,ST-GCN)模型的方法,实现对城轨车站监控场景中异常行为的辨识。在COCO数据集和MPII数据集上分别达到了72.3 mAP和82.1 mAP的效果,相比较于Open Pose模型提升高达17%,验证了模型的有效性和实用性。结果表明,本文所提出的方法不仅提高了乘客行为的识别速度,同时具备对复杂场景的适应能力,为城轨安全监控提供一种新的技术方案。 展开更多
关键词 轨道交通 骨架识别 模式识别 城轨车站安全 乘客行为特征辨识 ST-GCN
在线阅读 下载PDF
融合内在拓扑与多尺度时间特征的骨架动作识别 被引量:2
6
作者 王琪 何宁 《计算机工程与应用》 北大核心 2025年第4期150-157,共8页
图卷积网络在基于骨架的人体动作识别任务中发挥着关键作用。为了解决现有的图卷积网络忽略内在关系,时间卷积功能受限,以及未能充分探索关节与骨骼之间潜在功能相关性等问题,提出一种融合内在拓扑与多尺度时间特征的骨架动作识别方法... 图卷积网络在基于骨架的人体动作识别任务中发挥着关键作用。为了解决现有的图卷积网络忽略内在关系,时间卷积功能受限,以及未能充分探索关节与骨骼之间潜在功能相关性等问题,提出一种融合内在拓扑与多尺度时间特征的骨架动作识别方法。为推断上下文内在拓扑关系,模型利用多头自注意力机制和共享拓扑构建内在拓扑空间图卷积模块;基于复杂的动作序列分析构建多尺度时间卷积模块,旨在扩展时间卷积结构并捕捉多尺度时间特征;模型搭建关节和骨骼信息交互桥梁,实现两者信息的有效传输和融合,以便更深入地探索它们之间的功能相关性。对所提出的方法进行验证,在NTU-RGB+D 60数据集上取得了CS基准91.5%和CV基准96.9%的识别准确率,在NTU-RGB+D 120数据集上分别取得了C-Sub基准89.0%和C-Set基准90.8%的准确率。实验结果表明所提出方法能够更加有效地提取骨架时空特征,进而提升识别精度。 展开更多
关键词 骨架动作识别 图卷积 内在拓扑 多尺度 信息融合
在线阅读 下载PDF
基于多尺度图卷积网络的骨架行为识别方法
7
作者 安文志 冯宇平 +2 位作者 李云文 赵军 董金宇 《高技术通讯》 北大核心 2025年第1期37-46,共10页
针对现有基于骨架行为识别的方法缺乏对远距离节点之间关系的建模从而导致识别准确率低和泛化能力差的问题,提出一种基于多尺度图卷积网络(multi-scale graph convolutional metwork,MS-GCN)的行为识别方法。首先,通过多跳邻接矩阵实现... 针对现有基于骨架行为识别的方法缺乏对远距离节点之间关系的建模从而导致识别准确率低和泛化能力差的问题,提出一种基于多尺度图卷积网络(multi-scale graph convolutional metwork,MS-GCN)的行为识别方法。首先,通过多跳邻接矩阵实现扩张图卷积的构建,并结合不同跳数的扩张图卷积构建多尺度空间图卷积;其次,提出空间通道注意力(spatial channel attention,SCA)以激发空间敏感通道进一步增强空间特征;最后,采用均匀采样的数据增强方式生成多样化的训练样本,增强模型的鲁棒性和泛化能力。所提方法在数据集NTU-RGB+D 60、NTU-RGB+D 120和Northwestern-UCLA上准确率分别达到了97.24%(X-View)、90.43%(X-Set)和96.34%,验证了该方法的有效性。 展开更多
关键词 骨架行为识别 多尺度 图卷积 空间通道注意力
在线阅读 下载PDF
改进时空图归一化流的异常行为识别方法
8
作者 许辰月 王蓉 +1 位作者 郭放 曾昭龙 《科学技术与工程》 北大核心 2025年第18期7693-7699,共7页
针对异常行为识别中人体动态骨架特征表达能力不充分的问题,提出了一种基于改进时空图归一化流的无监督异常行为识别方法,利用Transformer和卷积块注意力模块,在全局域和时空域中提高模型的特征表达能力,提升异常行为识别算法性能。首先... 针对异常行为识别中人体动态骨架特征表达能力不充分的问题,提出了一种基于改进时空图归一化流的无监督异常行为识别方法,利用Transformer和卷积块注意力模块,在全局域和时空域中提高模型的特征表达能力,提升异常行为识别算法性能。首先,将Transformer模块引入归一化流的仿射层,在全局层面增强动态骨架特征信息的有效性;然后,分别在空间与时间图卷积模块中引入卷积注意力,有效地提升动态骨架特征的空间和时间表达能力;最后,在ShanghaiTech数据集和UBnormal数据集上进行仿真验证,识别精确度分别达到86.4%和70.2%,证明了方法的有效性。 展开更多
关键词 异常行为识别 时空图卷积 归一化流 动态骨架特征
在线阅读 下载PDF
多分支骨架特征输入下的歧义行为识别
9
作者 王超亚 韩华 +1 位作者 王春媛 田瑾 《计算机应用研究》 北大核心 2025年第11期3497-3505,共9页
基于骨架的人体动作识别是计算机视觉中的一个重要研究课题,其核心在于提取和学习具有区分度的骨架特征,以实现高精度的动作分类。但是由于歧义行为的存在,严重影响了分类识别的准确性,为此,围绕数据优化与计算复杂度降低,以及时空特征... 基于骨架的人体动作识别是计算机视觉中的一个重要研究课题,其核心在于提取和学习具有区分度的骨架特征,以实现高精度的动作分类。但是由于歧义行为的存在,严重影响了分类识别的准确性,为此,围绕数据优化与计算复杂度降低,以及时空特征精细化建模两个核心方向提出两项关键创新。首先在数据输入的初期阶段,采用多分支输入结构,实现早期特征融合,使模型能够更高效地学习不同模态间的互补信息,从而提升计算效率并增强模型的泛化能力;其次,提出模糊特征细化模型,该模型有助于提取独特的时空特征,增强了对动作细节的敏感性以帮助区分高相似度行为,从而实现更精细的时空特征建模。将所提多分支骨架特征输入下的歧义行为识别(GCN+)模型在D60和D120两个大规模公共数据集上进行实验证。实验范围涵盖四种单一模态及其融合模态。在单一模态下相较于基线模型,GCN+在D120的X-Sub下提升了2.6个百分点,表明其在复杂环境下对不同主体的识别能力更强;在融合模态下,GCN+在D120数据集的X-Sub评估下提升了3.2个百分点,在X-Set评估下提升了3.0个百分点。进一步验证了该模型在大规模数据场景下的适用性,和在跨主体和跨视角识别任务方面展现的卓越性能。 展开更多
关键词 骨架识别 图卷积神经网络 多分支输入 歧义行为 模糊特征细化
在线阅读 下载PDF
基于时空图注意力状态空间模型的人体姿态异常检测研究
10
作者 李航 陈志刚 +3 位作者 王易杰 张心宇 雷惊鸿 刘凌枫 《计算机工程与科学》 北大核心 2025年第10期1830-1840,共11页
视频异常检测在公共安防、交通和医疗等领域应用广泛,人体姿态异常检测存在易受环境影响、骨架时序难处理、计算复杂度高和运动区域的局部重要特征易忽略等问题。为解决上述问题,提出了一种新的基于人体骨架的时空图正则化流混合注意力... 视频异常检测在公共安防、交通和医疗等领域应用广泛,人体姿态异常检测存在易受环境影响、骨架时序难处理、计算复杂度高和运动区域的局部重要特征易忽略等问题。为解决上述问题,提出了一种新的基于人体骨架的时空图正则化流混合注意力状态空间模型STG-FAM。该模型通过在时空图卷积网络中引入选择性状态空间模型和正则化流,有效捕获骨架时序中的时间动态特征,利用混合注意力机制学习跨通道域和空间域的注意力权重,增强模型对时序骨架关键节点与时空边的关注,提升模型表征能力和异常检测能力。通过在2个视频异常检测数据集ShanghaiTech Campus和UBnormal上进行验证,表明了所提模型的有效性。 展开更多
关键词 视频异常检测 人体骨架 图神经网络 状态空间模型 注意力机制
在线阅读 下载PDF
利用可选择多尺度图卷积网络的骨架行为识别
11
作者 曹毅 李杰 +2 位作者 叶培涛 王彦雯 吕贤海 《电子与信息学报》 北大核心 2025年第3期839-849,共11页
针对目前骨架行为识别方法忽视骨架关节点多尺度依赖关系和无法合理利用卷积核进行时间建模的问题,该文提出了一种可选择多尺度图卷积网络(SMS-GCN)的行为识别模型。首先,介绍了人体骨架图的构建原理和通道拓扑细化图卷积网络的结构;其... 针对目前骨架行为识别方法忽视骨架关节点多尺度依赖关系和无法合理利用卷积核进行时间建模的问题,该文提出了一种可选择多尺度图卷积网络(SMS-GCN)的行为识别模型。首先,介绍了人体骨架图的构建原理和通道拓扑细化图卷积网络的结构;其次,构建成对关节邻接矩阵和多关节邻接矩阵以生成多尺度通道拓扑细化邻接矩阵,并引入图卷积网络,进一步提出多尺度图卷积(MS-GC)模块,以期实现对骨架关节点的多尺度依赖关系的建模;然后,基于多尺度时序卷积和可选择大核网络,提出可选择多尺度时序卷积(SMS-TC)模块,以期实现对有用的时间上下文特征的充分提取,同时结合MS-GC和SMS-TC模块,进而提出可选择多尺度图卷积网络模型并在多支流数据输入下进行训练;最后,在NTU-RGB+D和NTU-RGB+D 120数据集上进行大量实验,实验结果表明,该模型能够捕获更多的关节特征和学习有用的时间信息,具有优异的准确率和泛化能力。 展开更多
关键词 骨架行为识别 图卷积网络 多尺度通道拓扑细化邻接矩阵 可选择多尺度时序卷积 可选择多尺度图卷积网络
在线阅读 下载PDF
基于骨架和3D热图的注意缺陷多动障碍患者动作识别算法
12
作者 石超 周昱昕 +3 位作者 扶倩 唐万宇 何凌 李元媛 《计算机应用》 北大核心 2025年第9期3036-3044,共9页
注意缺陷多动障碍(ADHD)是一种常见于儿童期的神经发育障碍,以注意力不集中、多动和冲动为主要特征,常表现出特定的动作模式。传统的动作识别算法在处理这些特定动作时存在识别准确率低和响应慢等问题。为解决这些问题,提出基于骨架和3... 注意缺陷多动障碍(ADHD)是一种常见于儿童期的神经发育障碍,以注意力不集中、多动和冲动为主要特征,常表现出特定的动作模式。传统的动作识别算法在处理这些特定动作时存在识别准确率低和响应慢等问题。为解决这些问题,提出基于骨架和3D热图的注意缺陷多动障碍患者动作识别算法,并通过高斯分布精确地表示关节点间的空间关系,以有效地保留时空信息。针对单一模态数据的限制,引入基于骨架和3D热图的多模态集成方法。同时,通过融合Short 3D-CNN(3D Convolutional Neural Network)和自适应图卷积网络(AGCN)的输出特征,充分利用两种模态数据的优势,从而提升动作识别性能。在四川大学华西医院心理卫生中心采集的ADHD患者数据集上的实验结果表明,对于8种不同类型的动作,所提算法的Top-1识别准确率为0.8604,Top-5识别准确率为0.9873。此外,提出基于动作类型的ADHD自动分型算法,该算法将ADHD分型为头面部体动型、躯干体动型和四肢体动型,它的识别准确率为75%,响应时间为5 s。与2s-AGCN(two-stream AGCN)和PoseConv3D相比,所提算法在复杂动作场景下具有更高的识别精度,为ADHD的个性化干预提供了新的技术手段。 展开更多
关键词 注意缺陷多动障碍 动作识别 骨架数据 图卷积网络 3D卷积神经网络
在线阅读 下载PDF
语义信息提取和图结构挖掘的事件骨架生成方法
13
作者 黄凯 马廷淮 +3 位作者 孙圣杰 龚智恒 汤毅翔 陈思 《计算机工程与应用》 北大核心 2025年第12期187-195,共9页
事件骨架生成旨在从一系列的事件图中归纳出包含事件类型及其时序关系的事件骨架图。这是在时间复杂事件模式归纳任务中的一个核心步骤。尽管现有的方法在这项任务上已经取得了一定的效果,但是由于事件图的复杂性和多变性,这些方法在挖... 事件骨架生成旨在从一系列的事件图中归纳出包含事件类型及其时序关系的事件骨架图。这是在时间复杂事件模式归纳任务中的一个核心步骤。尽管现有的方法在这项任务上已经取得了一定的效果,但是由于事件图的复杂性和多变性,这些方法在挖掘事件图的结构信息和语义信息方面仍显不足。因此,为解决该问题,提出了一种事件骨架生成模型。在图编码阶段,模型使用了拉普拉斯位置编码,以精准捕捉和编码图结构的局部信息。同时,模型采用了多头注意力机制和图卷积网络,以提取语义信息和图结构信息,全面总结事件发展的全局结构信息,构建出更泛化、更全面的事件骨架图。实验证明,在事件骨架生成任务上,该模型在Event Match指标上提升了8.83%,Event Sequence Match指标上提升了11.2%(L=2)和7.6%(L=3),实现了较大的性能提升。 展开更多
关键词 事件模式归纳 事件骨架生成 图生成 语义信息提取 图结构挖掘
在线阅读 下载PDF
基于运动感知和时间增强的人体跌倒检测方法
14
作者 闵晨宇 罗小龙 +1 位作者 相龙伟 彭真 《传感器与微系统》 北大核心 2025年第11期38-41,46,共5页
跌倒是全球意外死亡的重要原因之一,尤其对老年人构成严重威胁。提出了一种基于视频的人体姿态跌倒检测方法,旨在解决现有技术跨场景鲁棒性及实时性方面的不足。主要创新点包括:设计了行为特征提取(BFE)模块,能够有效地捕捉相邻骨骼节... 跌倒是全球意外死亡的重要原因之一,尤其对老年人构成严重威胁。提出了一种基于视频的人体姿态跌倒检测方法,旨在解决现有技术跨场景鲁棒性及实时性方面的不足。主要创新点包括:设计了行为特征提取(BFE)模块,能够有效地捕捉相邻骨骼节点的动态变化和关系;并改进了时空图卷积网络(ST-GCN)框架,引入了动态图卷积网络(D-GCN)模块和多尺度时序卷积网络(MS-TCN)模块,能够有效地利用骨架特征捕捉运动信息和时间维度上长距离依赖。实验表明,该方法在多个公开数据集上均能保持高准确率(最高达99.45%),并展现出良好的跨场景泛化能力。此外,模型在非GPU平台上达到了56 fps的实时性能,在GPU平台上达到92 fps的实时性能。 展开更多
关键词 人体跌倒检测 图神经网络 基于骨架的行为识别
在线阅读 下载PDF
基于扩展时间和时空特征融合图卷积网络的骨架行为识别
15
作者 徐永刚 孙琦烜 +2 位作者 李凡甲 程健维 戴佳俊 《计算机工程》 北大核心 2025年第4期281-292,共12页
在基于骨架的人体行为识别领域,图卷积网络(GCN)在近年来取得了很大的进展,但现有GCN大多将时间卷积和空间卷积简单串联,导致时空特征融合效果不佳。另外,现有模型还存在无法高效提取时间特征的问题。为此,提出扩展时间和时空特征融合... 在基于骨架的人体行为识别领域,图卷积网络(GCN)在近年来取得了很大的进展,但现有GCN大多将时间卷积和空间卷积简单串联,导致时空特征融合效果不佳。另外,现有模型还存在无法高效提取时间特征的问题。为此,提出扩展时间和时空特征融合图卷积网络(ETFF-GCN)。该网络采用通道聚合的方法对动态空间拓扑和时序特征进行一次融合,然后运用注意力机制进行二次融合,进一步增强融合效果。在此基础上,为了全面提取时序特征,采用多个不同大小的卷积核构建时域图卷积,以提取多尺度和多粒度的时间特征,并引入有效压缩激励模块进行特征增强,提升特征表达能力。在3个大型数据集上对所提出的方法进行评估,实验结果表明,该方法的性能优于现有的方法。 展开更多
关键词 人体骨架行为识别 图卷积网络 时空特征融合 注意力机制 扩展时间
在线阅读 下载PDF
3D multipath planning for UAV based on network graph 被引量:1
16
作者 Xin Liu Chengping Zhou Mingyue Ding 《Journal of Systems Engineering and Electronics》 SCIE EI CSCD 2011年第4期640-646,共7页
According to the characteristic and the requirement of multipath planning, a new multipath planning method is proposed based on network. This method includes two steps: the construction of network and multipath searc... According to the characteristic and the requirement of multipath planning, a new multipath planning method is proposed based on network. This method includes two steps: the construction of network and multipath searching. The construction of network proceeds in three phases: the skeleton extraction of the configuration space, the judgment of the cross points in the skeleton and how to link the cross points to form a network. Multipath searching makes use of the network and iterative penalty method (IPM) to plan multi-paths, and adjusts the planar paths to satisfy the requirement of maneuverability of unmanned aerial vehicle (UAV). In addition, a new height planning method is proposed to deal with the height planning of 3D route. The proposed algorithm can find multiple paths automatically according to distribution of terrain and threat areas with high efficiency. The height planning can make 3D route following the terrain. The simulation experiment illustrates the feasibility of the proposed method. 展开更多
关键词 path planning skeleton graph iterative penaltymethod (IPM) network graph.
在线阅读 下载PDF
基于多尺度骨架图和局部视觉上下文融合的驾驶员行为识别方法 被引量:2
17
作者 胡宏宇 黎烨宸 +3 位作者 张争光 曲优 何磊 高镇海 《汽车工程》 EI CSCD 北大核心 2024年第1期1-8,28,共9页
识别非驾驶行为是提高驾驶安全性的重要手段之一。目前基于骨架序列和图像的融合识别方法具有计算量大和特征融合困难的问题。针对上述问题,本文提出一种基于多尺度骨架图和局部视觉上下文融合的驾驶员行为识别模型(skeleton-image base... 识别非驾驶行为是提高驾驶安全性的重要手段之一。目前基于骨架序列和图像的融合识别方法具有计算量大和特征融合困难的问题。针对上述问题,本文提出一种基于多尺度骨架图和局部视觉上下文融合的驾驶员行为识别模型(skeleton-image based behavior recognition network,SIBBR-Net)。SIBBR-Net通过基于多尺度图的图卷积网络和基于局部视觉及注意力机制的卷积神经网络,充分提取运动和外观特征,较好地平衡了模型表征能力和计算量间的关系。基于手部运动的特征双向引导学习策略、自适应特征融合模块和静态特征空间上的辅助损失,使运动和外观特征间互相引导更新并实现自适应融合。最终在Drive&Act数据集进行算法测试,SIBBR-Net在动态标签和静态标签条件下的平均正确率分别为61.78%和80.42%,每秒浮点运算次数为25.92G,较最优方法降低了76.96%。 展开更多
关键词 驾驶员行为识别 多尺度骨架图 局部视觉上下文 多模态数据自适应融合
在线阅读 下载PDF
基于多流语义图卷积网络的人体行为识别 被引量:2
18
作者 刘锁兰 王炎 +1 位作者 王洪元 朱生升 《计算机工程》 CAS CSCD 北大核心 2024年第8期64-74,共11页
与基于图像的行为识别方法相比,利用人体骨架信息进行识别能有效克服复杂背景、光照变化以及外貌变化等因素影响。但是,目前主流的基于人体骨架的行为识别方法存在参数量过大、运算速度慢等问题。对此,提出一种多流轻量级语义图卷积的... 与基于图像的行为识别方法相比,利用人体骨架信息进行识别能有效克服复杂背景、光照变化以及外貌变化等因素影响。但是,目前主流的基于人体骨架的行为识别方法存在参数量过大、运算速度慢等问题。对此,提出一种多流轻量级语义图卷积的行为识别方法。设计多流语义引导的图卷积网络(MS-SGN),将骨架信息分别表达为骨长流、关节流和细粒度流3种数据流形式,再对嵌入语义信息的数据流通过自适应图卷积提取空间特征,并采用不同内核和膨胀率的多尺度时域卷积提取时域特征,最后对各流分类结果进行加权融合。实验结果表明,该方法在NTU60 RGB+D数据集上的识别精度分别为90.0%(X-Sub)和95.83%(X-View),在NTU120 RGB+D数据集上的识别精度分别为83.4%(X-Sub)和84.0%(X-View),优于SGN、Logsin-RNN等主流方法,且网络框架更为轻量化。 展开更多
关键词 行为识别 人体骨架 特征融合 图卷积网络 多尺度
在线阅读 下载PDF
基于多维动态拓扑学习图卷积的骨架动作识别 被引量:3
19
作者 罗会兰 曹立京 《电子学报》 EI CAS CSCD 北大核心 2024年第3期991-1001,共11页
图卷积由于其对图数据的强大表示能力被广泛应用于基于骨架的动作识别任务中.但是现有的图卷积方法在所有帧或通道上都使用共享的图拓扑进行特征聚合,这极大限制了图卷积网络的表示能力.为了解决这些问题,本文提出多维动态拓扑学习图卷... 图卷积由于其对图数据的强大表示能力被广泛应用于基于骨架的动作识别任务中.但是现有的图卷积方法在所有帧或通道上都使用共享的图拓扑进行特征聚合,这极大限制了图卷积网络的表示能力.为了解决这些问题,本文提出多维动态拓扑学习图卷积用于动态建模具有时序与通道特异性的拓扑结构.多维动态拓扑学习图卷积主要包含三个组成部分:纯粹节点拓扑学习图卷积(pure Joint topology learning Graph Convolution,J-GC)、动态时序特异性拓扑学习图卷积(Dynamic Temporal-Wise topology learning Graph Convolution,DTW-GC)和通道特异性拓扑学习图卷积(Channel-Wise topology learning Graph Convolution,CW-GC).特别地,在DTW-GC中使用了动态骨架拓扑建模方法(Dynamic Skeleton Topology Learning,DSTL),以高效地建模富含全局时空拓扑特征的动态骨架拓扑.将多维动态拓扑学习图卷积与多尺度时间卷积(Multi-Scale Temporal Convolution,MS-TC)相结合,本文构建了具有强大建模能力的图卷积网络.此外,为了对骨架数据的空间信息进行补充,本文额外引入了相对节点数据和相对骨骼数据进行多流网络的融合.本文所提出的方法在NTU-RGB+D与NTU-RGB+D 120数据集上分别取得了92.64%和89.29%的准确率,超过了当前最先进方法. 展开更多
关键词 动作识别 深度学习 图卷积 动态骨架拓扑 数据融合
在线阅读 下载PDF
基于运动特征的骨骼行为识别方法 被引量:3
20
作者 孙浩 何宏 +1 位作者 汪焰兵 朱子豪 《计算机工程与设计》 北大核心 2024年第6期1836-1842,共7页
针对现有的骨骼行为识别方法对人体行为的运动信息利用不足的问题,提出一种基于运动特征的时空注意力图卷积(STA-GCN)行为识别模型。对动作捕捉设备采集到的关节点运动轨迹和速度信息进行建模,在时间和空间构建注意力权重矩阵,结合图卷... 针对现有的骨骼行为识别方法对人体行为的运动信息利用不足的问题,提出一种基于运动特征的时空注意力图卷积(STA-GCN)行为识别模型。对动作捕捉设备采集到的关节点运动轨迹和速度信息进行建模,在时间和空间构建注意力权重矩阵,结合图卷积网络进行特征提取,能够关注到具有判别力的关节点和时间帧。通过在自建动作捕捉数据集和NTU-RGB+D数据集的CS和CV标准上进行实验,其结果表明,该模型增强了对人体骨骼行为信息的理解能力,验证了模型对行为识别的有效性。 展开更多
关键词 行为识别 深度学习 动作捕捉 骨骼信息 特征提取 图卷积 时空注意力
在线阅读 下载PDF
上一页 1 2 5 下一页 到第
使用帮助 返回顶部