视频驱动的语义表情基动画方法

视频驱动的语义表情基动画方法

王涵;夏时洪

【期刊名称】《计算机辅助设计与图形学学报》

【年(卷),期】2015(000)005

【摘要】This paper proposes a novel method about semantic expression definition and optimization. The pro-posed method solves the real-time video-driven facial retargeting problem. First, it defines a set of semantic val-ues, which represents the expression, from sparse 2D feature points with noise. Then, an extended optimization solved in semantic space is employed to improve the quality of expression retargeting. The method neither needs to calibrate camera, nor requires user-specific training to construct the special 3D model and blendshape. So, the proposed algorithm can be applied widely for retargeting expression of network video, real-time social networks, and so on. The experiments demonstrates that the proposed method can achieve accurate and stable facial anima-tion results with the pitch and yaw ranged from-15° to 15°.%为了重用视频内容中的表情信息,提出一种语义表情构造与语义表情参数优化方法。首先从带有噪声的稀疏特征点中定义出人脸表情的语义信息；然后在语义表情空间中优化求解出最优表情参数,以提高人脸动画的真实感。该方法既不需要标定相机参数,也不需要预先建立表演者的3D人脸模型及其表情基,因此除了可用于网络视频的表情重用,也可用于开发实时在线的网络社交等应用。实验结果表明,对于头部摆动的俯仰

角和侧角在[-15°,15°]范围内的原始视频,文中方法能够实时合成稳定、逼真的表情动画。

【总页数】10页(P873-882)

【作者】王涵;夏时洪

【作者单位】中国科学院计算技术研究所前瞻研究实验室/移动计算与新型终端北京市重点实验室北京 100190; 中国科学院大学北京 100049;中国科学院计算技术研究所前瞻研究实验室/移动计算与新型终端北京市重点实验室北京 100190【正文语种】中文

【中图分类】TP391

【相关文献】

1.支持表情细节的语音驱动人脸动画 [J], 范懿文;夏时洪

2.一种视频驱动的三维虚拟人动画实现方法 [J], 郭瑾;高伟;刘德山;王林松

3.试析表演驱动的矢量化二维表情动画 [J], 丁艳

4.表演驱动的三维表情动画技术综述 [J], 魏巍;刘尚武;段晓东;姜再阳;宋金淼;;;;;

5.一种视频驱动的三维人体动画合成方法 [J], 王瑢瑢;邱显杰;王文中;王兆其

因版权原因，仅展示原文概要，查看原文内容请购买