期刊文献+
共找到4篇文章
< 1 >
每页显示 20 50 100
融合rPPG和人脸三维法向量的非接触情绪感知技术 被引量:1
1
作者 王宇 刘宇昂 +9 位作者 赵梦洁 涂晓光 牛知艺 杨明 刘建华 殷举航 朱新宇 石臣鹏 章超 张铖方 《电讯技术》 北大核心 2024年第10期1667-1676,共10页
近年来,基于深度学习的情绪识别技术取得了显著进展。然而,现有方法主要集中在面部图像或视频上,忽略了其他模态信息,导致鲁棒性和稳定性不足。为了解决这一问题,提出了一种融合多模态信息的面部表情识别方法。首先将输入的人脸视频进... 近年来,基于深度学习的情绪识别技术取得了显著进展。然而,现有方法主要集中在面部图像或视频上,忽略了其他模态信息,导致鲁棒性和稳定性不足。为了解决这一问题,提出了一种融合多模态信息的面部表情识别方法。首先将输入的人脸视频进行远程光电容积脉搏波(Remote Photo plethysmography,rPPG)信号和人脸三维法向量的提取,其次将这两种模态的信息输入其相应的情绪特征提取子网络,提取出对应的情绪特征向量。然后,将这两种模态提取出的情绪特征向量进行融合,生成一个丰富的特征向量,最后将其输入分类器进行情绪分类任务。通过这种多模态信息融合的方式,提高了面部表情识别的准确性和稳定性。对所提方法在不同数据集上进行了验证,实验结果表明,该方法在多样化面部表情识别中的表现优于当前先进的情感识别方法,具有更高的鲁棒性和稳定性。 展开更多
关键词 非接触情绪感知 多模态表情识别 远程光电容积脉搏波(rppG) 人脸三维向量
在线阅读 下载PDF
基于交叉滑动窗口模型算法的非接触心率测量方法 被引量:1
2
作者 汤春明 张凯凯 +2 位作者 王慧泉 田磊 于翔 《天津工业大学学报》 CAS 北大核心 2020年第2期54-60,共7页
为解决传统接触式心率测量系统设备昂贵、操作复杂的问题,在远程光电容积描记法(remote photoplethysmography,r PPG)测量心率的基础上,提出一种基于交叉滑动窗口模型(cross sliding window model,CSWM)算法的非接触心率测量方法。首先... 为解决传统接触式心率测量系统设备昂贵、操作复杂的问题,在远程光电容积描记法(remote photoplethysmography,r PPG)测量心率的基础上,提出一种基于交叉滑动窗口模型(cross sliding window model,CSWM)算法的非接触心率测量方法。首先调用人脸检测模型SSD300检测视频中的人脸,然后使用Otsu算法对人脸皮肤区域进行分割,并用形态学方法腐蚀皮肤之间的眼睛、嘴巴区域,同时用KCF算法跟踪人脸,并将人脸区域均分为2×2的大小,然后使用CHROM算法提取rPPG波形,最后运用CSWM方法对rPPG波形进行处理,得到实时变化的心率。实验结果表明:该方法计算出的心率与同时用脉搏血氧仪测出的心率之间的平均准确率为97.9217%,Bland-Altman一致性系数达0.962302,完全满足临床要求。 展开更多
关键词 远程光电容积描记法(rPPG) 人脸检测模型SSD300 OTSU算 KCF算 交叉滑动窗口模型(CSWM) 非接触心率测量
在线阅读 下载PDF
基于生成对抗学习的标准rPPG信号生成
3
作者 涂晓光 胡哲昊 +5 位作者 胡俊强 刘建华 雷霞 刘宇昂 王宇 冯子亮 《电讯技术》 北大核心 2024年第7期1088-1094,共7页
为了提高生成远程光电容积脉搏波描记法(remote Photoplethysmography,rPPG)信号的波形规律性,降低心率计算难度,提出了一种标准化rPPG的信号生成方法。将人脸视频输入到生成对抗网络的生成器中,生成器通过有标签数据进行监督训练,预测... 为了提高生成远程光电容积脉搏波描记法(remote Photoplethysmography,rPPG)信号的波形规律性,降低心率计算难度,提出了一种标准化rPPG的信号生成方法。将人脸视频输入到生成对抗网络的生成器中,生成器通过有标签数据进行监督训练,预测得到人脸视频中蕴含的rPPG信号。为了进一步优化生成器的预测结果,使用数学建模方法生成标准的rPPG信号,并将其与生成器预测的信号同时输入至判别器中进行对抗学习,不断优化生成器参数,使得生成器能够学习标准信号的波形分布。这样,生成器预测的信号波形在形态上更接近于真实rPPG信号的波形分布,从而有利于后续心率计算。在不同数据集上进行的实验结果表明,该方法可以显著提高预测的准确性,且拥有更高的信噪比。 展开更多
关键词 非接触式心率测量 远程光电容积脉搏波 生成式对抗网络
在线阅读 下载PDF
模型和盲源分离融合的运动鲁棒视频心率检测 被引量:1
4
作者 成娟 武梦影 +2 位作者 宋仁成 刘羽 陈勋 《仪器仪表学报》 EI CAS CSCD 北大核心 2023年第8期289-298,共10页
远程光电容积描记法(rPPG)是一种基于视频的非接触心率检测技术,由于其携带的血容量脉搏(BVP)信号幅值微弱易受运动噪声影响。本文提出一种融合色差模型和盲源分离的运动鲁棒视频心率检测技术。一方面,对每个感兴趣区域(ROIs)采用色差... 远程光电容积描记法(rPPG)是一种基于视频的非接触心率检测技术,由于其携带的血容量脉搏(BVP)信号幅值微弱易受运动噪声影响。本文提出一种融合色差模型和盲源分离的运动鲁棒视频心率检测技术。一方面,对每个感兴趣区域(ROIs)采用色差模型并时延构建多通道数据集,凸显准周期变量同时抑制无规律运动噪声;另一方面,采用联合盲源分离提取共同包含于两个数据集中的BVP源分量向量(SCVs),筛选合适的SCV确定为BVP信号,从而计算心率值。所提方法在数据库UBFC-RPPG和ECG-Fitness上验证并与其他方法对比,在剧烈运动场景下性能最佳,心率HR_(mae)=9.93 bpm,HR_(rmse)=16.17 bpm,相关系数r=0.75,为rPPG技术的实用化进程提供了解决思路。 展开更多
关键词 远程光电容积描记法 非接触 色差模型 联合盲源分离 运动噪声去除
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部