人脸语音动画中语音特征参数提取算法研究 被引量：1

1

作者 林睿 樊养余 《现代电子技术》 2011年第6期74-77,共4页

人脸语音动画是虚拟现实领域的热点,语音特征参数提取是实现语音同步动画的前提和关键所在。为了能够提取鲁棒性更好的语音特征参数,在小波变换的理论基础上,借鉴MFCC特征参数的提取方法,运用表征语音动态特征的特征差分算法,提出了一... 人脸语音动画是虚拟现实领域的热点,语音特征参数提取是实现语音同步动画的前提和关键所在。为了能够提取鲁棒性更好的语音特征参数,在小波变换的理论基础上,借鉴MFCC特征参数的提取方法,运用表征语音动态特征的特征差分算法,提出了一种基于离散小波变换的语音特征参数(DWTMFCC)提取方法,并与反映语音情感特征的韵律参数相结合。通过基于LGB算法的VQ模型进行说话人语音识别,可以得到组合特征参数的识别率较高。 展开更多

关键词 人脸语音动画 语音特征提取 小波变换 动态特征 组合特征参数

在线阅读 下载PDF 职称材料

面向纹理特征的真实感三维人脸动画方法 被引量：10

2

作者 姜大龙 高文 +1 位作者 王兆其 陈益强 《计算机学报》 EI CSCD 北大核心 2004年第6期750-757,共8页

纹理变化是人脸表情的重要组成部分 ,传统的人脸动画方法通常只是对纹理图像做简单的拉伸变换 ,没有考虑人脸细微纹理特征的变化 ,比如皱纹、酒窝等 .该文提出了一种面向纹理特征变化的真实感三维人脸动画方法 .给出局部表情比率图 (Par... 纹理变化是人脸表情的重要组成部分 ,传统的人脸动画方法通常只是对纹理图像做简单的拉伸变换 ,没有考虑人脸细微纹理特征的变化 ,比如皱纹、酒窝等 .该文提出了一种面向纹理特征变化的真实感三维人脸动画方法 .给出局部表情比率图 (PartialExpressionRatioImage,PERI)的概念及其获取方法 ,在此基础上 ,进一步给出了面向MPEG 4的PERI参数化与面向三维人脸动画的多方向PERI方法 ,前者通过有机结合MPEG 4的人脸动画参数(FacialAnimationParameter ,FAP) ,实现人脸动画中细微表情特征的参数化表示 ;后者通过多方向PERI纹理特征调整方法 ,使得三维人脸模型在不同角度都具有较好的细微表情特征 .该文提出的方法克服了传统人脸动画只考虑人脸曲面形变控制而忽略纹理变化的缺陷 ,实现面向纹理变化的具有细微表情特征的真实感三维人脸动画 .实验表明 ,该文提出的方法能有效捕捉纹理变化细节 ,提高人脸动画的真实感 . 展开更多

关键词 纹理特征 PERI 局部表情比率图 fap 人脸动画参数 三维人脸动画方法

在线阅读 下载PDF 职称材料

基于MPEG-4的三维人脸动画 被引量：2

3

作者 蒋秀凤 蒲晓蓉 章毅 《电子科技大学学报》 EI CAS CSCD 北大核心 2007年第3期569-572,共4页

具有真实感的三维人脸动画是计算机图形学研究的一个重要分支,有着广泛的应用领域。如何在三维人脸模型上实时地模拟人脸的运动,产生具有真实感的人脸表情和动作,是其中的一个难点。该文在MPEG-4的三维人脸动画原理的基础上提出一种新... 具有真实感的三维人脸动画是计算机图形学研究的一个重要分支,有着广泛的应用领域。如何在三维人脸模型上实时地模拟人脸的运动,产生具有真实感的人脸表情和动作,是其中的一个难点。该文在MPEG-4的三维人脸动画原理的基础上提出一种新的基于MPEG-4的、适宜于任意拓扑结构模型的三维人脸动画实现方法。该方法能够在FAP帧的驱动下实现真实感较强的三维人脸动画。 展开更多

关键词 人脸动画 人脸动画参数 人脸特征点 MPEG-4

在线阅读 下载PDF 职称材料

基于标注图像的MPEG-4人脸运动参数获取方法 被引量：1

4

作者 左力 李治国 +1 位作者 李锦涛 高文 《系统仿真学报》 CAS CSCD 2001年第S2期497-501,共5页

提出了一种基于标注图像的MPEG-4人脸运动参数(FAP)获取方法。首先对人脸进行手工标点,然后使用摄像机拍摄人脸运动序列并录制语音数据,通过图像分割与标记点定位等操作提取标记点位置信息,再根据人脸特征点的几何分布确认标记点对应的... 提出了一种基于标注图像的MPEG-4人脸运动参数(FAP)获取方法。首先对人脸进行手工标点,然后使用摄像机拍摄人脸运动序列并录制语音数据,通过图像分割与标记点定位等操作提取标记点位置信息,再根据人脸特征点的几何分布确认标记点对应的三维FDP参数,最后经过计算得到人脸运动参数。将获取的结果数据应用到基于MPEG-4的语音驱动的三维人脸合成与动画系统中,取得了很好的效果。 展开更多

关键词 MPEG-4 人脸定义参数(FDP) 人脸运动参数(fap) 色彩空间 图像分割

在线阅读 下载PDF 职称材料

基于数据驱动的人脸动画合成技术的研究与发展 被引量：2

5

作者 孙延鹏 傅蓉 孙海伦 《计算机工程与科学》 CSCD 北大核心 2009年第1期48-49,84,共3页

本文从人脸动画合成技术的发展、特点及应用出发,介绍了人脸动画系统中的核心技术,并对基于参数的控制方法和基于数据驱动的方法进行了对比分析,展望了人脸动画合成技术的发展方向与应用前景。

关键词 人脸动画 参数控制 数据驱动 语音可视化

在线阅读 下载PDF 职称材料

基于MPEG-4的三维人脸动画系统

6

作者 孔德慧 郭金铜 +1 位作者 尹宝才 王珂 《北京工业大学学报》 CAS CSCD 北大核心 2005年第2期214-219,共6页

为了解决基于模型编码的新一代多媒体压缩标准中的MPEG-4人脸动画技术,引入了一个MPEG-4三维人脸动画系统.首先用3D Scanner获取的主体对象的深度信息和纹理信息特定化通用网格模型;然后采用参数模型和肌肉模型相结合的方法控制模型网... 为了解决基于模型编码的新一代多媒体压缩标准中的MPEG-4人脸动画技术,引入了一个MPEG-4三维人脸动画系统.首先用3D Scanner获取的主体对象的深度信息和纹理信息特定化通用网格模型;然后采用参数模型和肌肉模型相结合的方法控制模型网格点的变化,生成人脸动画;同时引入人脸功能区的划分并定义了人脸动画表.实验表明:此方法可以在FAP(facial animation parameter)流的驱动下生成理想的三维人脸动画. 展开更多

关键词 MPEG-4 人脸动画 人脸动画参数 肌肉模型

在线阅读 下载PDF 职称材料

基于ICA算法的一般人脸动画模式表达

7

作者 王珂 尹宝才 +1 位作者 郭金铜 马淑燕 《计算机工程与应用》 CSCD 北大核心 2004年第32期59-61,共3页

该文基于三维扫描数据抽取特定人面部特征点的三维运动,转化为FAP训练数据。然后通过对获取数据应用独立元分析获得一般人脸动画模式,最终使用ICA参数空间生成任意特定人的面部表情。实验结果表明,ICA比PCA给出更加紧致准确的一般人脸... 该文基于三维扫描数据抽取特定人面部特征点的三维运动,转化为FAP训练数据。然后通过对获取数据应用独立元分析获得一般人脸动画模式,最终使用ICA参数空间生成任意特定人的面部表情。实验结果表明,ICA比PCA给出更加紧致准确的一般人脸动画表达模式,当两种分量的数目相同时,ICA的重建误差比PCA的重建误差小。表情参数影响动画人脸不同部分的独立性和相关性,改善了不同表情人脸动画的真实性。 展开更多

关键词 面部动画参数空间 独立元分析 一般人脸动画模式

在线阅读 下载PDF 职称材料

人脸语音动画中基于PSOLA的情感语音合成系统

8

作者 王华 樊养余 《计算机应用研究》 CSCD 北大核心 2012年第3期1002-1004,共3页

提出一种基于时域基音同步叠加TD-PSOLA算法的情感语音合成系统。根据情感语音库分析总结情感规则,在此基础上利用TD-PSOLA算法对中性语音的韵律参数进行改变,并提出一种能够对基频曲线尾部形状改变的方法,使句子表达出丰富的情感。实... 提出一种基于时域基音同步叠加TD-PSOLA算法的情感语音合成系统。根据情感语音库分析总结情感规则,在此基础上利用TD-PSOLA算法对中性语音的韵律参数进行改变,并提出一种能够对基频曲线尾部形状改变的方法,使句子表达出丰富的情感。实验表明,合成出的语音具有明显的情感色彩,证明了该系统能以简单明了的方式实现情感语音的合成,有助于提高人脸语音动画表达的丰富性和生动性。 展开更多

关键词 人脸语音动画 时域基音同步叠加 韵律参数 基频曲线 情感语音合成

在线阅读 下载PDF 职称材料

基于优化CANDIDE模型的人脸动画 被引量：2

9

作者 葛美玲 姚莉秀 +1 位作者 李鹃 杨杰 《上海交通大学学报》 EI CAS CSCD 北大核心 2010年第11期1491-1495,共5页

使用CANDIDE模型,实现模型与照片人脸的快速自动匹配.在模型与人脸初步匹配后,对模型局部进行网格优化,提高了模型的表征力同时并不影响匹配速度.用基于薄板样条插值方法(TPS)的网格形变取代传统的移动网格结点的动画方法,有效提高了动... 使用CANDIDE模型,实现模型与照片人脸的快速自动匹配.在模型与人脸初步匹配后,对模型局部进行网格优化,提高了模型的表征力同时并不影响匹配速度.用基于薄板样条插值方法(TPS)的网格形变取代传统的移动网格结点的动画方法,有效提高了动画的真实感.实验结果显示,自动模型匹配让动画角色的更换工作变得快速易行,优化的网格形变产生的动画更加生动、自然. 展开更多

关键词 CANDIDE模型 人脸动画 薄板样条 面部动画参数

在线阅读 下载PDF 职称材料

全自动的基于MPEG-4的任意拓扑结构人脸动画 被引量：1

10

作者 李治国 姜大龙 +1 位作者 高文 王巍 《计算机辅助设计与图形学学报》 EI CSCD 北大核心 2003年第7期863-869,共7页

构造任意拓扑结构人脸网格的人脸动画定义表是基于MPEG 4的任意拓扑结构人脸动画系统的关键 通过搜索三维模型的二维纹理图像特征 ,提出一种自动地在任意拓扑结构三维人脸模型上定位特征点的方法 通过利用任意拓扑结构人脸模型上的三... 构造任意拓扑结构人脸网格的人脸动画定义表是基于MPEG 4的任意拓扑结构人脸动画系统的关键 通过搜索三维模型的二维纹理图像特征 ,提出一种自动地在任意拓扑结构三维人脸模型上定位特征点的方法 通过利用任意拓扑结构人脸模型上的三维特征点变形标准人脸模型 ,并根据标准人脸模型的动画定义表 ,实现了自动、准确地构造任意拓扑结构人脸模型动画定义表的方法 给定一个任意拓扑结构三维人脸模型 。 展开更多

关键词 拓扑结构 人脸动画 人脸定义参数 人脸动画参数 人脸动画参数单元

在线阅读 下载PDF 职称材料

一种用于人脸动画的拟合抽象肌肉模型

11

作者 司倩倩 樊养余 《现代电子技术》 2011年第10期1-4,共4页

三维人脸动画是计算机图形学领域的热点课题。针对目前三维动画模型对人脸的模拟难度高且效果不够逼真地问题,为了简洁且逼真的模拟人脸表情动作,提出了一种拟合抽象肌肉模型。该模型基于人脸动画模型中常用的抽象肌肉模型,对其中宽线... 三维人脸动画是计算机图形学领域的热点课题。针对目前三维动画模型对人脸的模拟难度高且效果不够逼真地问题,为了简洁且逼真的模拟人脸表情动作,提出了一种拟合抽象肌肉模型。该模型基于人脸动画模型中常用的抽象肌肉模型,对其中宽线性肌的数学模型进行改进,利用形变参数控制宽线性肌的形态,对面部肌肉动作直接进行模拟。仿真实验表明,利用拟合抽象肌肉模型能够更为真实地模拟出复杂的嘴部动作。因此,拟合抽象肌肉模型与传统的抽象肌肉模型相比,实现的计算复杂度不高,并且模拟效果更加逼真,具有广阔的应用前景。 展开更多

关键词 人脸动画 拟合抽象肌肉模型 宽线性肌 形变参数

在线阅读 下载PDF 职称材料

特定人的三维人脸模型生成与应用 被引量：4

12

作者 杜平 徐大为 刘重庆 《上海交通大学学报》 EI CAS CSCD 北大核心 2003年第3期435-439,共5页

计算机三维人脸对象的应用范围包括虚拟现实、辅助教学、远程会议、人机交互、游戏娱乐、电影制作等诸多方面 .提出利用区域差值法的算法实现基于两幅人脸图像生成具有特定人特征的三维人脸模型 ,并在生成特定人三维人脸模型的基础上实... 计算机三维人脸对象的应用范围包括虚拟现实、辅助教学、远程会议、人机交互、游戏娱乐、电影制作等诸多方面 .提出利用区域差值法的算法实现基于两幅人脸图像生成具有特定人特征的三维人脸模型 ,并在生成特定人三维人脸模型的基础上实现了基于 MPEG- 4的特定人的人脸动画功能 。 展开更多

关键词 人脸模型 人脸动画 MPEG-4 人脸动画参数 三维

在线阅读 下载PDF 职称材料

拼音文本驱动的任意嘴唇曲线的动画生成 被引量：2

13

作者 孙晓鹏 安丹丹 刘小丹 《计算机辅助设计与图形学学报》 EI CSCD 北大核心 2008年第12期1603-1608,1616,共7页

口型的变化是人脸动画中的重要组成部分.为了能够简单、形象地研究口型曲线动画,定义了一种新的口型LAP模型,用28个LAP控制口型形状,并用Cardinal曲线进行绘制,得到了很逼真的口型效果.提出将已测定的拼音基本视位的标准LAP值应用到不... 口型的变化是人脸动画中的重要组成部分.为了能够简单、形象地研究口型曲线动画,定义了一种新的口型LAP模型,用28个LAP控制口型形状,并用Cardinal曲线进行绘制,得到了很逼真的口型效果.提出将已测定的拼音基本视位的标准LAP值应用到不同嘴唇上的自适应动画方法.首先计算出"单位LAP参数值";再根据任意指定的嘴唇的宽度、高度和突出度,计算出适合该嘴唇所有视位的每个LAP;最后以任意拼音文本驱动该嘴唇,生成连续动画.在动画实现过程中,采用插值来实现口型与口型之间的连续过渡,同时考虑前一口型对后续口型的影响,以达到连续、光滑的视觉效果. 展开更多

关键词 拼音驱动 嘴唇模型 fap 嘴唇动画参数 口型动画

在线阅读 下载PDF 职称材料

特定人脸的3D模型生成与应用的研究 被引量：1

14

作者 杜平 徐大为 刘重庆 《红外与激光工程》 EI CSCD 北大核心 2003年第3期288-293,共6页

计算机3D人脸对象的应用范围十分广泛,包括虚拟现实、辅助教学、远程会议、人机交互、游戏娱乐、电影制作等诸多方面。提出了利用区域差值法的算法实现基于两幅人脸图像生成具有特定人特征的3D人脸模型,并在生成的特定人3D人脸模型的基... 计算机3D人脸对象的应用范围十分广泛,包括虚拟现实、辅助教学、远程会议、人机交互、游戏娱乐、电影制作等诸多方面。提出了利用区域差值法的算法实现基于两幅人脸图像生成具有特定人特征的3D人脸模型,并在生成的特定人3D人脸模型的基础上实现了基于MPEG 4的特定人的人脸动画功能,实验取得了良好的效果。 展开更多

关键词 3D人脸模型3 人脸动画 MPEG-4 人脸动画参数

在线阅读 下载PDF 职称材料

视觉语音参数的自动估计

15

作者 王志明 蔡莲红 艾海舟 《计算机研究与发展》 EI CSCD 北大核心 2005年第7期1185-1190,共6页

视觉语音参数估计在视觉语音的研究中占有重要的地位.从MPEG4定义的人脸动画参数FAP中选择24个与发音有直接关系的参数来描述视觉语音,将统计学习方法和基于规则的方法结合起来,利用人脸颜色概率分布信息和先验形状及边缘知识跟踪嘴唇... 视觉语音参数估计在视觉语音的研究中占有重要的地位.从MPEG4定义的人脸动画参数FAP中选择24个与发音有直接关系的参数来描述视觉语音,将统计学习方法和基于规则的方法结合起来,利用人脸颜色概率分布信息和先验形状及边缘知识跟踪嘴唇轮廓线和人脸特征点,取得了较为精确的跟踪效果.在滤除参考点跟踪中的高频噪声后,利用人脸上最为突出的4个参考点估计出主要的人脸运动姿态,从而消除了全局运动的影响,最后根据这些人脸特征点的运动计算出准确的视觉语音参数,并得到了实际应用. 展开更多

关键词 视觉语音 人脸动画参数(fap) 混合高斯模型(GMM) 变形模板

在线阅读 下载PDF 职称材料

面向中国手语合成的口型与表情库构建

16

作者 李敬华 王立春 +2 位作者 王振 孔德慧 尹宝才 《北京工业大学学报》 EI CAS CSCD 北大核心 2012年第11期1665-1669,共5页

为提高手语合成的真实感和可懂度,分析了手语表达中唇动和表情运动的特点,基于MPEG-4的参数化表达模型,提出了兼容于MPEG-4的口型和表情库构建方法,并基于该库完成了包含手势、唇动和表情的虚拟人手语动画.实验结果表明,包含唇动和表情... 为提高手语合成的真实感和可懂度,分析了手语表达中唇动和表情运动的特点,基于MPEG-4的参数化表达模型,提出了兼容于MPEG-4的口型和表情库构建方法,并基于该库完成了包含手势、唇动和表情的虚拟人手语动画.实验结果表明,包含唇动和表情的合成手语的真实感得到增强,进而说明了口型和表情库的有效性. 展开更多

关键词 手语合成 多模式 人脸定义参数(FDP) 人脸动画参数(fap)

在线阅读 下载PDF 职称材料