期刊文献+
共找到20篇文章
< 1 >
每页显示 20 50 100
基于关联分区和ST-GCN的人体行为识别 被引量:10
1
作者 刘锁兰 顾嘉晖 +1 位作者 王洪元 张云鹏 《计算机工程与应用》 CSCD 北大核心 2021年第13期168-175,共8页
基于骨骼的动作识别因不受人体物理特征的影响,简单清晰地传达了人体行为识别的重要信息而受到广泛关注。传统的应用程序骨架建模通常依赖遍历规则的人为设置而导致表达能力有限和推广困难。因此,在近年来热门的时空图卷积网络(ST-GCN)... 基于骨骼的动作识别因不受人体物理特征的影响,简单清晰地传达了人体行为识别的重要信息而受到广泛关注。传统的应用程序骨架建模通常依赖遍历规则的人为设置而导致表达能力有限和推广困难。因此,在近年来热门的时空图卷积网络(ST-GCN)模型基础上提出了一种新的划分骨架关节点的分区策略。该策略相比于原始分区方法加强了身体相对位置之间的关系,从而有利于提高骨架关节点信息在时间和空间上的关联。与此同时,在训练过程中通过设置不同的迭代学习率以进一步提高识别精度。在两个不同性质的大规模数据集Kinetics和NTURGB+D上与现有方法进行识别效果的比较,实验结果表明了该方法的有效性。 展开更多
关键词 行为识别 关节点 时空图卷积网络(st-gcn) 分区策略 学习率
在线阅读 下载PDF
基于ST-GCN的空中交通管制员不安全行为识别 被引量:5
2
作者 王超 徐楚昕 +1 位作者 董杰 王志锋 《中国安全科学学报》 CAS CSCD 北大核心 2023年第5期42-48,共7页
为预防和监督空中交通管制(ATC)工作中的违章行为,利用智能视频分析技术,研究适用于管制员坐姿工作的不安全行为识别模型。首先,分析管制员不安全工作行为的隐蔽性特征,总结5种典型管制员不安全行为,包括伸懒腰、瞌睡、低头入睡、歪头... 为预防和监督空中交通管制(ATC)工作中的违章行为,利用智能视频分析技术,研究适用于管制员坐姿工作的不安全行为识别模型。首先,分析管制员不安全工作行为的隐蔽性特征,总结5种典型管制员不安全行为,包括伸懒腰、瞌睡、低头入睡、歪头入睡和半躺入睡,并构建管制员不安全工作状态视频数据集(CUWS);其次,提出一种能描述管制员坐姿的骨架关键点拓展算法,基于时空图卷积网络(ST-GCN)搭建适用于管制员坐姿与腿部遮蔽情况下的不安全行为识别模型ATC-ST-GCN,并给出管制员不安全行为识别的工作流程;最后,利用CUWS数据集进行ATC-ST-GCN模型的训练和测试,并利用管制室实际监控视频开展验证试验。结果表明:该模型能够在有限验证数据集上实现5种典型不安全行为识别,准确率达到93.65%。试验结果证明该模型具有一定的科学性与有效性。 展开更多
关键词 时空图卷积网络(st-gcn) 空中交通管制(ATC) 不安全行为 管制员 行为识别
在线阅读 下载PDF
ST-GCN在建筑工人不安全动作识别中的应用 被引量:23
3
作者 刘耀 焦双健 《中国安全科学学报》 CAS CSCD 北大核心 2022年第4期30-35,共6页
为准确及时地识别施工现场工人的不安全动作,运用计算机视觉的方法,结合图像识别技术和建筑安全知识,提出一种基于骨架的实时识别方法。将姿态估计算法与动作识别算法结合搭建组合模型,通过全面的数据进行模型训练,进而实现动作分类和... 为准确及时地识别施工现场工人的不安全动作,运用计算机视觉的方法,结合图像识别技术和建筑安全知识,提出一种基于骨架的实时识别方法。将姿态估计算法与动作识别算法结合搭建组合模型,通过全面的数据进行模型训练,进而实现动作分类和不安全动作的识别,其中,AlphaPose用于姿态估计提取骨骼关键点坐标位置,时空图卷积网络(ST-GCN)用于动作识别,并通过试验进行验证。结果表明:该方法识别爬梯危险动作的准确率可以达到98.48%,同时,ST-GCN与支持向量机、随机森林、长短期记忆网络(LSTM)相比,具有更强的泛化能力。该方法通过对现场工人的不安全动作进行实时识别和预警,可改善传统安全管理模式,提高安全管理信息化水平。 展开更多
关键词 时空图卷积网络(st-gcn) 建筑工人 不安全行为 动作识别 AlphaPose 长短期记忆网络(LSTM)
在线阅读 下载PDF
基于改进ST-GCN的10 kV带电作业人员视频异常行为识别方法 被引量:9
4
作者 吴田 万亚旭 +3 位作者 王申华 肖宾 方春华 黎鹏 《南方电网技术》 CSCD 北大核心 2024年第10期31-39,72,共10页
为确保常态化配网带电作业时人员和设备的安全,异常行为识别是必不可少的技术手段,但现有带电作业行为识别方法存在准确率低、可识别种类少以及受背景干扰导致漏检和误检等问题。提出了一种基于改进时空图卷积网络(spatial temporal gra... 为确保常态化配网带电作业时人员和设备的安全,异常行为识别是必不可少的技术手段,但现有带电作业行为识别方法存在准确率低、可识别种类少以及受背景干扰导致漏检和误检等问题。提出了一种基于改进时空图卷积网络(spatial temporal graph convolutional networks,ST-GCN)的10 kV带电作业视频异常行为识别方法。首先,采用目标检测与跟踪的方法在视频人体区域添加掩膜,排除复杂背景的影响;然后,利用轻量化改进姿态估计模型获取人体骨架,以多帧骨架序列构建时空图;最后,由ST-GCN提取时空图的空间姿态与时序信息并引入通道注意力(squeeze-and-excitation networks,SENet)模块强化动作特征后完成带电作业行为识别。以带电作业视频构建行为数据集,选取绝缘检测等5类典型行为进行验证。试验结果表明,该方法提升了人体姿态估计的速度,约束了骨架检测区域,降低了肢体误检率和漏检率;能有效识别带电作业行为,平均准确率达88%;在复杂环境下有良好的泛化性,为带电作业安全监护的智能化提供了有效参考。 展开更多
关键词 行为识别 带电作业 时空图卷积网络 人体姿态估计 安全监护
在线阅读 下载PDF
基于ST-GCN警用巡逻机器人警情识别系统设计 被引量:5
5
作者 胡丽军 吴燕玲 +1 位作者 宋全军 徐湛楠 《传感器与微系统》 CSCD 北大核心 2023年第6期78-81,共4页
针对现有警用巡逻机器人警情识别系统识别种类单一、识别率较低等问题,基于时空—图卷积网络(ST-GCN)和OpenPose算法的融合,面向跌倒(fall)、打砸(smash)和推搡(push)3种警情,设计了警用巡逻机器人警情识别系统。通过在真实场景测试,3... 针对现有警用巡逻机器人警情识别系统识别种类单一、识别率较低等问题,基于时空—图卷积网络(ST-GCN)和OpenPose算法的融合,面向跌倒(fall)、打砸(smash)和推搡(push)3种警情,设计了警用巡逻机器人警情识别系统。通过在真实场景测试,3种警情识别率分别为:跌倒85%,打砸80%,推搡83%;实时识别帧率为10 fps。实验结果表明:所设计的警情识别系统可以实现多种警情的实时、准确、可靠识别,具有较高的应用价值。 展开更多
关键词 时空—图卷积网络 OpenPose算法 警情识别 警用巡逻机器人
在线阅读 下载PDF
边云协同计算下基于ST-GCN的监控视频行为识别机制 被引量:3
6
作者 蒋伟进 孙永霞 +3 位作者 朱昊冉 陈萍萍 张婉清 陈君鹏 《南京大学学报(自然科学版)》 CAS CSCD 北大核心 2022年第1期163-174,共12页
智慧城市的迅速发展为人们的日常生活带来了极大的便捷,其中视频监控系统越来越智能化是信息技术逐渐成熟的必然结果.人体行为识别是智能安防监控领域的重要任务之一,但大量的边缘监控设备产生了井喷式图像视频数据,传统单一的云计算模... 智慧城市的迅速发展为人们的日常生活带来了极大的便捷,其中视频监控系统越来越智能化是信息技术逐渐成熟的必然结果.人体行为识别是智能安防监控领域的重要任务之一,但大量的边缘监控设备产生了井喷式图像视频数据,传统单一的云计算模式已无法全面有效地应对海量数据的计算与处理.提出一种大数据驱动下采用边云协同计算的人体行为识别机制,将以往中心化的计算扩展为边缘、云端协同处理.首先,在边缘节点n0对视频进行相似帧去除的预处理并对提取的骨架序列进行多层次表不,然后云端对时空图卷积神经网络(Spatial Temporal Graph ConvNet,ST-GCN)模型进行训练并将其部署至边缘节点N1-Nm,边缘节点使用训练好的模型完成行为识别任务并将结果上传至云端进行融合得出最终行为类别.实验结果证明,所提方案能有效减少以往中心化计算的网络传输量及云端存储压力问题,且边云协同的优势使得模型识别的准确率稳定提升了2.2%以上. 展开更多
关键词 边云协同 行为识别 时空图卷积 骨架序列 相似帧去除
在线阅读 下载PDF
基于骨架识别的城轨车站监控视频乘客行为特征辨识研究 被引量:4
7
作者 管洋 贾利民 +1 位作者 陶思涵 豆飞 《都市快轨交通》 北大核心 2025年第1期106-111,共6页
城市轨道交通领域传统监控分析方法对视频监控图像(如摔倒、晕倒和打斗等异常行为识别)漏识率高、参数调整复杂,且难以高效地应用于现实城轨车站监控场景,针对此问题,采用基于骨架模式识别的人体姿态特征辨识框架,引入基于人体骨架的姿... 城市轨道交通领域传统监控分析方法对视频监控图像(如摔倒、晕倒和打斗等异常行为识别)漏识率高、参数调整复杂,且难以高效地应用于现实城轨车站监控场景,针对此问题,采用基于骨架模式识别的人体姿态特征辨识框架,引入基于人体骨架的姿态估计技术,采用Alpha Pose模型对乘客姿态进行精确估计,并结合时空图卷积网络(spatial temporal graph convolutional networks,ST-GCN)模型的方法,实现对城轨车站监控场景中异常行为的辨识。在COCO数据集和MPII数据集上分别达到了72.3 mAP和82.1 mAP的效果,相比较于Open Pose模型提升高达17%,验证了模型的有效性和实用性。结果表明,本文所提出的方法不仅提高了乘客行为的识别速度,同时具备对复杂场景的适应能力,为城轨安全监控提供一种新的技术方案。 展开更多
关键词 轨道交通 骨架识别 模式识别 城轨车站安全 乘客行为特征辨识 st-gcn
在线阅读 下载PDF
基于深度学习的井下人员不安全行为识别与预警系统研究 被引量:23
8
作者 李雯静 刘鑫 《金属矿山》 CAS 北大核心 2023年第3期177-184,共8页
井下作业人员的不安全行为是矿山事故发生的主要原因之一,现有的井下监控方式仍然以人工监控为主,无法快速识别作业人员的不安全行为,导致难以实时预警。设计了一种基于深度学习的井下人员不安全行为识别与预警系统开发方案,首先制作以... 井下作业人员的不安全行为是矿山事故发生的主要原因之一,现有的井下监控方式仍然以人工监控为主,无法快速识别作业人员的不安全行为,导致难以实时预警。设计了一种基于深度学习的井下人员不安全行为识别与预警系统开发方案,首先制作以井下环境为背景的数据集,然后采用YOLOv4网络模型对矿工及安全帽等进行识别以判断安全帽佩戴情况,再采用OpenPose算法及ST-GCN模型对监控视频中的矿工行为进行识别,最后通过系统对不安全行为进行自动预警。结合多种深度学习和计算机开发技术开发了一种井下人员不安全行为识别与预警系统,为井下人员的安全管理提供了新的思路,对于智慧矿山建设具有参考意义。 展开更多
关键词 智慧矿山 深度学习 st-gcn YOLOv4 监控系统
在线阅读 下载PDF
时空上下文感知的下一个PoI推荐方法
9
作者 海燕 王静 刘志中 《计算机应用研究》 北大核心 2025年第11期3275-3283,共9页
随着基于位置的社交网络的快速发展,下一个PoI(point of interest)推荐已成为推荐领域的研究热点。然而现有研究模型忽略了PoI的时空特征以及上下文信息对下一个PoI推荐的效果。针对该问题,提出一种时空上下文感知的下一个PoI推荐方法... 随着基于位置的社交网络的快速发展,下一个PoI(point of interest)推荐已成为推荐领域的研究热点。然而现有研究模型忽略了PoI的时空特征以及上下文信息对下一个PoI推荐的效果。针对该问题,提出一种时空上下文感知的下一个PoI推荐方法。首先,利用图注意力网络(GAT)学习包含社交关系的用户表征;并且通过流行度增强二部图神经网络(PEBGNN)学习含有PoI交互偏好的用户表征和PoI表征;同时,利用时空图卷积网络(ST-GCN)学习PoI时空转移偏好的PoI表征;最后,通过融合所学到的用户表征和PoI表征,计算出用户对于各个PoI的预测评分,以此为基础为用户推荐下一个PoI。为了验证该方法的有效性,在Gowalla、Foursquare以及Yelp这三个公开的数据集上进行了测试。实验结果显示,相比于多个基准模型,所提方法在准确率和召回率方面均展现出了显著的优势,分别平均提升28.53%和7.65%。 展开更多
关键词 下一个PoI推荐 PoI流行度 时空上下文 时空转移图 图注意力网络 时空图卷积网络
在线阅读 下载PDF
基于多元复合深度学习的肉鸽行为识别算法研究
10
作者 朱立学 陈品岚 +2 位作者 黄伟锋 张世昂 李小敏 《中国家禽》 北大核心 2023年第11期112-125,共14页
为实现肉鸽行为准确识别,研究提出一种基于多元复合深度学习的肉鸽行为识别算法。该算法通过使用YOLOX-s模型检测肉鸽目标区域作为AlphaPose肉鸽姿态预估模型输入预估肉鸽骨架每个关键点,结合连续视频帧的骨架变化关键点数据构建肉鸽骨... 为实现肉鸽行为准确识别,研究提出一种基于多元复合深度学习的肉鸽行为识别算法。该算法通过使用YOLOX-s模型检测肉鸽目标区域作为AlphaPose肉鸽姿态预估模型输入预估肉鸽骨架每个关键点,结合连续视频帧的骨架变化关键点数据构建肉鸽骨架时空图作为ST-GCN肉鸽行为识别模型输入,实现肉鸽行为识别。对YOLOX-s模型使用CSPResNet替代其主干网络,并减少CSP模块中的残差块以保留更多肉鸽图像的中层细节特征,在姿态预估模型中使用ECCWB-LiteHRNet作为其单目标姿态估计器,以提高肉鸽关键点特征识别能力。结果显示,改进后的YOLOX-s模型平均精度、检测速度分别为0.985、40.2fps,较原模型提高了0.002、6.9 fps;姿态预估模型平均精度、平均召回率和检测速度分别为0.887、0.921和28.5 fps,较原模型提高了0.036、0.016和12.9fps;ST-GCN模型行为识别平均准确率为0.970,单帧推理时间约为15 ms,最终多进程模型并行推理平均帧处理速度为28.5 fps,经过Tensorrt加速后平均帧处理速度可达50.8 fps。研究表明,ST-GCN模型能够快速准确地识别出肉鸽当前行为,且改进后的姿态预估模型可为ST-GCN模型提供更加稳定的骨架数据,为通过行为特征感知肉鸽身体信息及开展数字化健康管理提供技术支撑。 展开更多
关键词 肉鸽 行为识别 YOLOX AlphaPose st-gcn
在线阅读 下载PDF
时空图卷积网络的骨架识别硬件加速器设计
11
作者 谭会生 严舒琪 杨威 《电子测量技术》 北大核心 2024年第11期36-43,共8页
随着人工智能技术的不断发展,神经网络的数据规模逐渐扩大,神经网络的计算量也迅速攀升。为了减少时空图卷积神经网络的计算量,降低硬件实现的资源消耗,提升人体骨架识别时空图卷积神经网络(ST-GCN)实际应用系统的处理速度,利用现场可... 随着人工智能技术的不断发展,神经网络的数据规模逐渐扩大,神经网络的计算量也迅速攀升。为了减少时空图卷积神经网络的计算量,降低硬件实现的资源消耗,提升人体骨架识别时空图卷积神经网络(ST-GCN)实际应用系统的处理速度,利用现场可编程门阵列(FPGA),设计开发了一个基于时空图卷积神经网络的骨架识别硬件加速器。通过对原网络模型进行结构优化与数据量化,减少了FPGA实现约75%的计算量;利用邻接矩阵稀疏性的特点,提出了一种稀疏性矩阵乘加运算的优化方法,减少了约60%的乘法器资源消耗。经过对人体骨架识别实验验证,结果表明,在时钟频率100 MHz下,相较于CPU,FPGA加速ST-GCN单元,加速比达到30.53;FPGA加速人体骨架识别,加速比达到6.86。 展开更多
关键词 人体骨架识别 时空图卷积神经网络(st-gcn) 硬件加速器 现场可编程门阵列(FPGA) 稀疏矩阵乘加运算硬件优化
在线阅读 下载PDF
基于人-物交互关系检测的带电作业人员行为识别方法研究 被引量:4
12
作者 冯兴龙 吴田 +4 位作者 万亚旭 肖宾 方春华 黎鹏 赵慧敏 《中国安全生产科学技术》 CAS CSCD 北大核心 2024年第9期205-211,共7页
为解决现有视频行为识别方法难以区分带电作业过程中某些相似行为、可识别行为种类少、未高效利用人员与物品间交互关系等问题,提出1种基于人-物交互关系检测的配网带电作业人员行为识别方法。利用轻量化姿态估计算法识别人员骨架序列,... 为解决现有视频行为识别方法难以区分带电作业过程中某些相似行为、可识别行为种类少、未高效利用人员与物品间交互关系等问题,提出1种基于人-物交互关系检测的配网带电作业人员行为识别方法。利用轻量化姿态估计算法识别人员骨架序列,然后通过时空图卷积网络(spatial temporal graph convolutional networks,ST-GCN)提取人体运动的时空间特征并进行初步分类。对于由骨骼姿态无法有效区分的相似行为,采用目标检测算法识别人员所用工器具及使用状态,并通过融合人体动作与作业工器具所含行为信息,实现视频行为的精确识别。研究结果表明:该方法能有效识别带电作业行为,对相似行为的识别准确率约为88.9%,相较于现有基于骨架序列的带电作业人员行为方法提升约53个百分点。研究结果可为提高现场安全管控水平提供参考思路。 展开更多
关键词 带电作业 人-物交互关系 行为识别 st-gcn 骨架序列
在线阅读 下载PDF
基于图卷积网络的儿童坐姿检测学习桌椅设计方法研究 被引量:6
13
作者 张飞宇 兰扬 +4 位作者 朱伟 宋玲 王张恒 李芳 孙德林 《家具与室内装饰》 北大核心 2024年第1期96-100,共5页
儿童长期处于伏案学习的状态,不良坐姿对儿童生长发育容易造成严重影响,对儿童坐姿的矫正已刻不容缓。通过对儿童在学习桌椅上的坐姿行为调研,基于OpenPose姿态估计算法进行坐姿检测分析,引入ST-GCN模型进行坐姿识别与评判,结果表明:使... 儿童长期处于伏案学习的状态,不良坐姿对儿童生长发育容易造成严重影响,对儿童坐姿的矫正已刻不容缓。通过对儿童在学习桌椅上的坐姿行为调研,基于OpenPose姿态估计算法进行坐姿检测分析,引入ST-GCN模型进行坐姿识别与评判,结果表明:使用ST-GCN模型能够快速准确识别儿童的八种坐姿,并根据识别结果对儿童进行有效的错误坐姿提示,其Macro-F1和Micro-F1评价指标分别提高了6.8%和7.4%。同时表明儿童坐姿矫正在自适应儿童学习桌椅上应用的可行性及有效性,可为智能儿童课桌椅的设计提供技术支撑。 展开更多
关键词 时空图卷积网络(st-gcn) 儿童坐姿识别 学习桌椅
在线阅读 下载PDF
用于人体动作识别的多尺度时空图卷积算法 被引量:13
14
作者 赵登阁 智敏 《计算机科学与探索》 CSCD 北大核心 2023年第3期719-732,共14页
基于骨骼数据的时空图卷积人体动作识别网络(ST-GCN)存在时间卷积层结构单一、固定的问题,难以全面提取每个动作类别所需的全部重要阶段特征。针对这一问题,提出了包含多个不同尺度卷积核和多种结构的时间图卷积层,构造了多尺度时空图... 基于骨骼数据的时空图卷积人体动作识别网络(ST-GCN)存在时间卷积层结构单一、固定的问题,难以全面提取每个动作类别所需的全部重要阶段特征。针对这一问题,提出了包含多个不同尺度卷积核和多种结构的时间图卷积层,构造了多尺度时空图卷积网络(SMT-GCN),利用不同的时间图卷积操作抽取并融合不同尺度的时间轨迹特征。同时,为了强化人体长距离关联信息和空间结构化特征,在SMT-GCN中融合了构造的变换残差模块(Tran-Res)和轻量级注意力模块(CBAM),构造了多尺度时空图注意卷积网络(SAMTGCN)。实验在NTU RGB+D数据集和HDM05数据集上进行,提出的SMT-GCN和SAMT-GCN均获得了识别精度的提升;另外,设计的多尺度时间图卷积模块可以融合于其他基线网络中并提高性能。为探究卷积核尺度及结构对算法的影响,设计了相应消融实验,实验结果表明卷积核大小为1、5、9的SAMT-GCN性能最优,并且具有稠密结构的网络识别精度要高于具有串行和并行结构的网络。 展开更多
关键词 人体动作识别 时空图卷积网络(st-gcn) 多尺度时间图卷积 变换残差模块(Tran-Res) 轻量级注意力
在线阅读 下载PDF
基于双流图卷积网络的人体行为识别算法 被引量:10
15
作者 王宪伦 王广宇 孙宇轩 《传感器与微系统》 CSCD 北大核心 2023年第7期140-143,147,共5页
针对传统的卷积网络对人体行为识别速度不高或识别精度偏低的问题,提出了基于图卷积网络(GCN)的人体行为识别算法。首先,介绍了时空图卷积网络(ST-GCN)算法,该算法将人体骨架信息归类于图信息,并在时域和空间域上对人体信息进行图卷积运... 针对传统的卷积网络对人体行为识别速度不高或识别精度偏低的问题,提出了基于图卷积网络(GCN)的人体行为识别算法。首先,介绍了时空图卷积网络(ST-GCN)算法,该算法将人体骨架信息归类于图信息,并在时域和空间域上对人体信息进行图卷积运算;其次,使用双流GCN进行模型的搭建,双流GCN是对ST-GCN的一种改进,为某些相距很远但某些动作中关系密切的点创建“不可能连接”,并提出骨骼的长度和方向对人体行为识别也起到重要作用的观点。实验结果表明:对于选取的4个行为的平均识别率达到了92.2%,因此,基于双流GCN算法的人体行为识别方法具有可行性。 展开更多
关键词 图卷积网络 人体行为识别 时空图卷积网络 双流图卷积网络
在线阅读 下载PDF
基于人体骨架的扶梯乘客异常行为识别方法 被引量:3
16
作者 杨学存 李杰华 +2 位作者 陈丽媛 季韦 张尚辉 《安全与环境学报》 CAS CSCD 北大核心 2024年第2期636-643,共8页
为准确识别乘客搭乘自动扶梯时的异常行为,避免安全事故的发生,提出了一种基于人体骨架的扶梯乘客异常行为识别方法。首先使用YOLOX-Tiny对视频中乘客位置进行检测,通过Alphapose算法提取骨骼关键点坐标,降低复杂背景的干扰;再使用多流... 为准确识别乘客搭乘自动扶梯时的异常行为,避免安全事故的发生,提出了一种基于人体骨架的扶梯乘客异常行为识别方法。首先使用YOLOX-Tiny对视频中乘客位置进行检测,通过Alphapose算法提取骨骼关键点坐标,降低复杂背景的干扰;再使用多流膨胀3D卷积模块增强时空特征提取能力,聚合乘客骨架的全局特征;然后将其输入改进后的时空图卷积网络中提取乘客骨架信息,通过MS-TCN模块扩大接受域以增强时间特征的提取,联合人体关键点注意力模块(Key Point Attention Module,KPAM)提升网络对相似动作的关键骨架的关注度;最后通过Softmax对异常动作进行分类。采集扶梯运行现场视频制作数据集,试验结果表明,本文算法对乘客异常行为的识别精度达到96.1%,可应用于扶梯现场的视频监控系统,提高安全管理信息化水平。 展开更多
关键词 安全工程 扶梯乘客异常行为 时空图卷积网络 人体骨架信息 行为识别
在线阅读 下载PDF
时空图卷积网络在人体异常行为识别中的应用 被引量:15
17
作者 张蔚澜 齐华 李胜 《计算机工程与应用》 CSCD 北大核心 2022年第12期122-131,共10页
在监控场景下,由于监控资源短缺,行人异常行为容易发生漏检。针对该问题,提出了一种视频监控场景下的人体异常行为识别的方法,辅助监控人员及时发现异常。使用OpenPose对图像中行人进行人体骨架提取。针对图卷积网络对关节点特征聚合方... 在监控场景下,由于监控资源短缺,行人异常行为容易发生漏检。针对该问题,提出了一种视频监控场景下的人体异常行为识别的方法,辅助监控人员及时发现异常。使用OpenPose对图像中行人进行人体骨架提取。针对图卷积网络对关节点特征聚合方式单一的问题,融合了基于图注意力网络(graph attention network,GAT)的图注意力机制。在改进后的图卷积网络的基础上,利用时空图卷积神经网络(spatial temporal graph convolutional networks,ST-GCN),对行人关节点信息进行异常行为识别。实验结果表明,提出的识别算法对定义的行为识别准确率达85.48%,能够准确地识别监控视频中行人的异常行为。 展开更多
关键词 OpenPose算法 时空图卷积网络 图注意力机制 行为识别
在线阅读 下载PDF
交互关系超图卷积模型的双人交互行为识别 被引量:4
18
作者 代金利 曹江涛 姬晓飞 《智能系统学报》 CSCD 北大核心 2024年第2期316-324,共9页
为提高学校、商场等公共场所的安全性,实现对监控视频中的偷窃、抢劫和打架斗殴等异常双人交互行为的自动识别,针对现有基于关节点数据的行为识别方法在图的创建中忽略了2个人之间的交互信息,且忽略了单人非自然连接关节点间的交互关系... 为提高学校、商场等公共场所的安全性,实现对监控视频中的偷窃、抢劫和打架斗殴等异常双人交互行为的自动识别,针对现有基于关节点数据的行为识别方法在图的创建中忽略了2个人之间的交互信息,且忽略了单人非自然连接关节点间的交互关系的问题,提出一种基于交互关系超图卷积模型用于双人交互行为的建模与识别。首先针对每一帧的关节点数据构建对应的单人超图以及双人交互关系图,其中超图同时使多个非自然连接节点信息互通,交互关系图强调节点间交互强度。将以上构建的图模型送入时空图卷积对空间和时间信息分别建模,最后通过SoftMax分类器得到识别结果。该算法框架的优势是在图的构建过程中加强考虑双人的交互关系、非自然连接点间结构关系以及四肢灵活的运动特征。在NTU数据集上的测试表明,该算法得到了97.36%的正确识别率,该网络模型提高了双人交互行为特征的表征能力,取得了比现有模型更好的识别效果。 展开更多
关键词 双人交互 行为识别 关节点数据 深度学习 时空图卷积网络 超图 图结构 神经网络
在线阅读 下载PDF
基于RPEpose和XJ-GCN的轻量级跌倒检测算法框架
19
作者 梁睿衍 杨慧 《计算机应用》 CSCD 北大核心 2024年第11期3639-3646,共8页
传统的以ViT(Vision Transformer)模型为基准架构的关节点检测模型通常采用二维正弦位置编码,易丢失图像关键的二维形状信息,导致精度下降;而行为分类模型中,传统的时空图卷积网络(ST-GCN)在单标签分区策略中存在非物理连接的关节连接... 传统的以ViT(Vision Transformer)模型为基准架构的关节点检测模型通常采用二维正弦位置编码,易丢失图像关键的二维形状信息,导致精度下降;而行为分类模型中,传统的时空图卷积网络(ST-GCN)在单标签分区策略中存在非物理连接的关节连接间关联度缺失问题。针对上述问题,设计一种轻量化实时跌倒检测算法框架,以快速准确地检测跌倒行为。该框架包含关节点检测模型RPEpose(Relative Position Encoding pose estimation)和行为分类模型XJ-GCN(Cross-Joint attention Graph Convolutional Network)。一方面,RPEpose模型采用相对位置编码克服原有位置编码的位置不敏感的缺陷,提升ViT架构在关节点检测中的性能;另一方面,提出X-Joint(Cross-Joint)注意力机制,将分区策略重构为XJL(X-Joint Labeling)分区策略后,对所有关节连接之间的依赖关系建模,能获得关节连接潜在相关性,具有分类性能优异且参数量小的优势。实验结果表明,在COCO 2017验证集上,对于分辨率为256×192的图像,RPEpose模型的计算开销仅为8.2 GFLOPs(Giga FLOating Point of operations),测试平均精度(AP)为74.3%;在以交叉目标(X-Sub)为划分标准的NTU RGB+D数据集上,XJ-GCN模型的测试Top-1准确率为89.6%,所提框架RPEpose+XJ-GCN的处理速度为30 frame/s,预测准确率为87.2%,具有较高的实时性和准确性。 展开更多
关键词 跌倒检测 关节点检测 相对位置编码 时空图卷积网络 注意力机制
在线阅读 下载PDF
基于时空位置关注图神经网络的交通流预测方法 被引量:2
20
作者 何婷 周艳秋 辛春花 《计算机应用研究》 CSCD 北大核心 2024年第10期2932-2938,共7页
针对现有交通流预测方法存在难以构建空间和时间依赖关系的问题,提出了新的利用时空位置注意力的图神经网络(ST-PAGNN)方法。首先,该图神经网络中包含有位置关注机制,由此能够更好地对城市道路网络中交通节点的空间依赖关系进行有效捕捉... 针对现有交通流预测方法存在难以构建空间和时间依赖关系的问题,提出了新的利用时空位置注意力的图神经网络(ST-PAGNN)方法。首先,该图神经网络中包含有位置关注机制,由此能够更好地对城市道路网络中交通节点的空间依赖关系进行有效捕捉;然后,利用带有trend adaptive Transformer(Trendformer)的门控递归神经网络来捕捉交通流序列在时间维度上的局部和全局信息;最后,利用改进的网格搜索优化方法对模型的引入参数进行优化,并以较高的时间效率获得全局最优解。实验结果表明,在数据集PEMS-BAY中,预测步长分别为15 min,30 min,60 min时,ST-PAGNN的评价指标RMSE、MAE和MAPE分别为1.37,2.57,2.67%,1.55,3.64,3.37%,1.97,4.37,4.43%;在数据集METR-LA中,预测步长分别为15 min,30 min,60 min时,ST-PAGNN的评价指标RMSE、MAE和MAPE分别为2.73,5.16,7.13%,2.99,5.97,7.86%,3.53,7.16,9.96%。结论表明,ST-PAGNN在不同粒度下的评价指标中均高于现有模型,从而说明了ST-PAGNN在解决交通预测问题方面的有效性和优越性。 展开更多
关键词 ST-PAGNN 交通流预测 深度学习 图卷积神经网络 门控循环单元 Trendformer
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部