期刊文献+
共找到6篇文章
< 1 >
每页显示 20 50 100
基于SMPL模型人体三维重建算法研究 被引量:2
1
作者 王栾栾 严群 +1 位作者 姚剑敏 林志贤 《传感器与微系统》 CSCD 北大核心 2022年第10期59-63,共5页
为了实现人体模型的高效快速建模,获得丰富的重建细节,提出了基于SMPL模型的三维人体重建算法。首先,通过图像分割与关键点检测,将2D图像映射到3D人体表面,实现人体关节点精确定位和姿势估计;其次,通过U-Net++和PatchGAN对抗生成网络,... 为了实现人体模型的高效快速建模,获得丰富的重建细节,提出了基于SMPL模型的三维人体重建算法。首先,通过图像分割与关键点检测,将2D图像映射到3D人体表面,实现人体关节点精确定位和姿势估计;其次,通过U-Net++和PatchGAN对抗生成网络,计算出人体三维图像的法线贴图和位移贴图;最后,将贴图信息采用线性差值方法添加到SMPL模型表面,实现模型顶点和SMPL模型参数的校正。在Human 3.6 M数据集上将本方法与SMPLify, HMR,NBF等算法进行了对比试验,本文提出的方法可以较完整重建人体的表面褶皱及凹凸细节,在13.7 s内实现完成重建任务。 展开更多
关键词 smpl模型 深度学习 三维重建 法线贴图
在线阅读 下载PDF
基于双流网络融合的三维人体网格重建
2
作者 于冰 程广 +1 位作者 黄东晋 丁友东 《图学学报》 北大核心 2025年第3期625-634,共10页
三维人体网格重建在计算机视觉、动画制作和虚拟现实等领域具有重要的应用价值。然而,目前大多数方法主要聚焦于单幅图像的三维人体重建,如何从视频数据中准确、平滑地重建三维人体动作仍然是一个难题。为此,提出了一种双流网络融合结构... 三维人体网格重建在计算机视觉、动画制作和虚拟现实等领域具有重要的应用价值。然而,目前大多数方法主要聚焦于单幅图像的三维人体重建,如何从视频数据中准确、平滑地重建三维人体动作仍然是一个难题。为此,提出了一种双流网络融合结构,以三维人体姿态为中介,在视频数据中实现三维人体网格重建。首先,利用三维姿态估计流网络对输入视频进行三维关节点估计,获得精确的关节信息;其次,通过时序特征聚合流网络提取视频的时序图像特征,捕获人体运动位置信息和时序姿态特征信息;最后,设计融合解码器,将三维关节点、时序图像特征与SMPL模板提供的网格结构进行回归,预测三维网格顶点坐标。实验结果表明,该方法相对于MPS-Net方法具有更好的预测精度,在3DPW数据集上比MPS-Net的平均关节位置误差(MPJPE)低了9.3%;在MPI-INF-3DHP数据集上比MPS-Net的MPJPE低了9.2%,同时重建结果在视觉效果上更为合理,展现出更高的准确性和平滑性。 展开更多
关键词 三维人体重建 smpl模型 注意力机制 双流网络结构 时空信息关联
在线阅读 下载PDF
基于单视图的带纹理三维人体网格参数化重建 被引量:1
3
作者 邢燕 徐冬 +1 位作者 洪沛霖 檀结庆 《合肥工业大学学报(自然科学版)》 CAS 北大核心 2024年第3期347-353,共7页
针对计算机视觉中的三维人体重建问题,文章提出一种端到端的的网络框架,在三维和二维混合监督下,从单幅彩色图像重建带纹理信息的精准三维人体网格。使用4个编码器分别提取形状姿态特征、纹理特征、光照参数和像机参数,得到的图像特征... 针对计算机视觉中的三维人体重建问题,文章提出一种端到端的的网络框架,在三维和二维混合监督下,从单幅彩色图像重建带纹理信息的精准三维人体网格。使用4个编码器分别提取形状姿态特征、纹理特征、光照参数和像机参数,得到的图像特征被送入三维回归模块,迭代推断出三维人体参数;纹理参数送入纹理解码器网络得到纹理图;学习到的人体参数可转化为三维人体网格;对于损失函数的设置,预测的人体网格顶点与真实顶点的差值用来进行三维监督;通过预测的像机参数、光照参数和纹理计算二维渲染损失;通过三维关节投射得到的二维关节与图像上的二维关节真值计算二维关节重投影损失;生成对抗网络的鉴别器使得渲染图像更加真实。该文方法与现有的三维人体重建方法相比具有竞争力,而且重建的三维人体网格带有纹理信息。 展开更多
关键词 三维人体重建 深度学习 蒙皮多人线性(smpl)模型 形状姿态 纹理
在线阅读 下载PDF
轻量化人体和手部网格重建 被引量:2
4
作者 安平 刘熠尧 +2 位作者 周敏 黄新彭 杨超 《信号处理》 CSCD 北大核心 2024年第7期1185-1196,共12页
三维人体网格重建在影视、虚拟现实等下游任务中有广泛应用。然而现有重建方式关注更好的重建精度和纹理表达,也因此更依赖高性能的计算或采集设备,缺乏对低成本、轻量化重建方式的研究。为降低人体重建任务的使用成本和硬件要求,本文... 三维人体网格重建在影视、虚拟现实等下游任务中有广泛应用。然而现有重建方式关注更好的重建精度和纹理表达,也因此更依赖高性能的计算或采集设备,缺乏对低成本、轻量化重建方式的研究。为降低人体重建任务的使用成本和硬件要求,本文提出了一种轻量化的人体和手部网格重建方式,基于参数化模型对身体和手部重建任务进行解耦,针对身体和手部的不同特点分别设计了不同分支网络。身体重建分支和手部重建分支均为编码器-解码器结构。身体重建分支编码器为双阶段编码器,第一阶段通过Litehrnet和Canny算子获得热点图和边缘图,并对图片进行代理表示,第二阶段通过Shufflenet提取全局特征,解码器通过级联低维度多层感知器以概率分布的方式对人体参数进行回归;手部重建分支的编码器以Litehrnet为主干网络获取多分辨率特征分支,通过姿态池化对多分辨率特征分支进行融合得到全局特征,解码器通过深度可分离卷积网络获得手部顶点,并通过MLP对形状进行估计,利用顶点坐标基于逆向拓扑数学求解得到关节旋转参数。与现有方法相比,参数量和计算量显著减少,整体参数量为6.12M,计算量为433M,且具有较好的重建效果,在Human3.6M数据集中平均关节点误差(MPJPE)为86.7 mm,手部重建分支在FreiHand数据集上对齐后平均关节点误差(PA-MPJPE)为10.8 mm。此外该方法完成了在移动设备的推理,在骁龙8Gen3处理器推理速度为79.7 ms(12.5 fps),可以达到实时推理的效果。 展开更多
关键词 人体重建 轻量化网络 smpl+H模型 MANO模型
在线阅读 下载PDF
基于单张图像的人体准确姿势3D重建研究 被引量:2
5
作者 裘志超 姚剑敏 +1 位作者 严群 林志贤 《传感器与微系统》 CSCD 北大核心 2023年第5期61-64,共4页
为了解决单张图像人体重建时存在部分姿势不准确,模型精确度不足的问题,提出了基于单张图像进行人体准确姿势3D重建的方法。首先,提取图像特征,并将特征与SMPL基础模板信息相融合,通过图卷积网络将2D图像映射为3D人体表面;其次,将参数化... 为了解决单张图像人体重建时存在部分姿势不准确,模型精确度不足的问题,提出了基于单张图像进行人体准确姿势3D重建的方法。首先,提取图像特征,并将特征与SMPL基础模板信息相融合,通过图卷积网络将2D图像映射为3D人体表面;其次,将参数化SMPL模型所表达的3D人体投影到2D平面,通过投影后的3D信息与输入图像的2D信息相匹配,实现体型与姿势的估计;然后,使用生成对抗网络判断模型数据是否来自未配对数据的真实人体网格数据;最后,使用多种损失函数共同训练,生成最终生成器模型。使用Human 3.6M测试时与SMPLify, NBF,Rogez等算法进行了对比,姿势估计准确度有所提升。 展开更多
关键词 3D人体重建 smpl模型 图卷积神经网络
在线阅读 下载PDF
基于全连接神经网络的三维人体姿态估计 被引量:10
6
作者 孟琭 高恒上 +1 位作者 张含光 刘阳 《仪器仪表学报》 EI CAS CSCD 北大核心 2020年第10期165-177,共13页
人体姿态估计是计算机视觉领域的重要分支,在实践中有广泛应用,例如:智能交通、安防监控、影视娱乐、司法分析等。现有的三维人体姿态估计算法大多来源于二维人体姿态估计算法的扩展,其识别结果是以三维关节点、线的形式来体现,无法展... 人体姿态估计是计算机视觉领域的重要分支,在实践中有广泛应用,例如:智能交通、安防监控、影视娱乐、司法分析等。现有的三维人体姿态估计算法大多来源于二维人体姿态估计算法的扩展,其识别结果是以三维关节点、线的形式来体现,无法展示更多的人体细节信息,且表达形式比较抽象,难于理解。为解决这个问题,本文引入了参数化人体模型(SMPL),该模型可以实体化的展示三维人体姿态。本文通过二维图像预测人体的三维姿态,该过程分为3个阶段,首先从多角度二维图像中预测人体关节点的二维坐标,然后基于全连接神经网络实现二维关节点到SMPL模型参数的映射,最后根据这些参数构建三维SMPL模型,以展示三维人体姿态。实验表明,本文通过从图像中提取二维关节点坐标,并以此为全连接神经网络的输入,可以快速、准确的估计出人体三维姿态。相比从二维图像直接估计三维人体姿态的方法,本文的模型降低了训练参数,简化了网络结构,加快了模型训练的速度,节约了训练成本。 展开更多
关键词 三维人体姿态估计 全连接神经网络 沙漏型网络 smpl网格模型
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部