CASIA OpenIR  > 毕业生  > 博士学位论文
个性化人脸自动建模与动画技术研究
其他题名Research on Automatical Individual Facial Modeling and Animation
姚健
学位类型工学博士
导师王阳生
2008-06-03
学位授予单位中国科学院研究生院
学位授予地点中国科学院自动化研究所
学位专业模式识别与智能系统
关键词个性化人脸建模 人脸动画 三维人脸数据库 自动化重建 形状无关纹理 球面参数化 Individual Facial Modeling Face Animation 3d Face Database Automatical Reconstruction Shape-free Texture Spherical Parametrization
摘要人脸建模和动画在动画制作、人机交互、医疗和教育等领域都具有重要的应用和研究价值。本文以基于图像的快速、自动个性化人脸建模和动画为主要研究内容,围绕其中的关键点控制的快速建模、自动化形变模型重建、形状无关纹理重建、 以及快速人脸动画重映射等方面展开了研究。主要研究工作和贡献如下: 1.提出了一种关键点控制下的快速个性化人脸建模方法。在输入是单张正面人脸图像的条件下,自动检测和标定目标图像中的关键点位置,从关键点的二维坐标迭代计算其三维空间坐标。利用关键点信息和径向基函数变形预定义的三维人脸模型,获取个性化网格。 在网格确定后, 计算顶点在图像上的正投影坐标,根据输入图像生成个性化纹理。 生成的人脸模型具有一定的真实感,可以应用于多人在线的网络游戏。 2.提出了基于单张照片的全自动个性化人脸建模方法。对于输入图像非正脸且光照非均匀的条件下,仅依靠人脸检测的结果自动初始化参数,再根据统计的三维人脸信息迭代修正图像参数和模型参数,最终达到渲染图象与输入图像匹配的结果,从而实现自动化的个性化人脸模型重建。引入规则网格作为模型的标准结构,方便了归一化样本和纹理生成。迭代过程采用分阶段方式, 不但能加快迭代速度,还能够消除由于前景和背景相似引起的局部收敛。 3.提出了以形状无关纹理为匹配目标重建个性化模型的方法。对于渲染图匹配法重建存在的关键点定位不准等问题,引入以形状无关纹理作为匹配目标,从而消除姿态、形状变化对像素权重的影响。提出以视角图控制形状无关纹理的迭代系数,能够解决渲染图匹配方法中关键点不易对齐的问题。进而把视角图引入纹理合成过程中,能够最大限度的利用输入图像中有效的细节信息, 提升合成纹理的效果。 4.提出基于球面参数化的稀疏关键点动画重映射方法,使用关键点网格的三角形重心坐标对运动数据进行差值, 只需要在Motioncapture系统中标定少量关键点并采集动画数据,就可以快速映射到封闭或半封闭的人脸模型上。使用较少的标记点可以缓解系统精度和处理速度间的矛盾,还保证了表演者的舒适度,结合个性化建模的结果就能够生成具有真实感的个性化人脸表情动画。
其他摘要Facial modeling and animation are valuable for both application and research field such as animation film, human-computer interface, medical treatment and education. In this thesis, we focus on some of the key issues in image based automatical modeling and animation of individual face. The main contributions include: 1.We propose a reconstruction method under the control of key points, which can generate individual face model fast. Based on one frontal face image captured from PC camera, the facial key points can be detected automatically and their 3D coordinates are estimated with morphable models. Then a generic face model is deformed with RBF and key points' coordinates to generate individual mesh. Finally, we crop the face region from input image and generate individual texture to make the model more realistic. The method can be applied in multi-player online games. 2.For one face image captured in different direction and different illumination, we propose a totally automatical method for reconstruction. We only need the result of face detection to initialize parameters for individual face. The final parameters include morphable models can be obtained by matching rendered model image to input image. The regular mesh facilitates normalization of input samples and generation of individual face. The strategy of iteration by stages makes computation faster, also it can eliminate errors when the background is similar to face region. 3.We improve the automatical reconstruction method by replacing rendered image with shape-free texture. Thus we can eliminate the influence of posture and shape variance, and can decrease the probability of local convergence. Also we propose visual angle map in the method. It improves the key points alignment and refines detail of texture image. 4.We introduce spherical parametrization in facial animation and achieve animation remapping with sparse key points. The original animations are captured by Motion Capture system and with only 34 markers. After remapping the key points' motion vectors, we interpolate the non-key points' motion vectors with barycentric coordinates of key mesh triangles. All the method can achieve fast remapping of realistic expression animation. Fewer markers makes fewer uncomfortableness for the performer.
馆藏号XWLW1230
其他标识符200418014628073
语种中文
文献类型学位论文
条目标识符http://ir.ia.ac.cn/handle/173211/6115
专题毕业生_博士学位论文
推荐引用方式
GB/T 7714
姚健. 个性化人脸自动建模与动画技术研究[D]. 中国科学院自动化研究所. 中国科学院研究生院,2008.
条目包含的文件
文件名称/大小 文献类型 版本类型 开放类型 使用许可
CASIA_20041801462807(16996KB) 暂不开放CC BY-NC-SA请求全文
个性服务
推荐该条目
保存到收藏夹
查看访问统计
导出为Endnote文件
谷歌学术
谷歌学术中相似的文章
[姚健]的文章
百度学术
百度学术中相似的文章
[姚健]的文章
必应学术
必应学术中相似的文章
[姚健]的文章
相关权益政策
暂无数据
收藏/分享
所有评论 (0)
暂无评论
 

除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。