基于对抗学习生成人脸动态纹理
计算机学院(国家示范性软件学院)
Generation of face dynamic texture based on confrontation learning
近些年来,基于图像的人脸表情动画技术迅猛发展,例如根据单张图像生成三维人脸拓扑结构,这一过程需要将图像中的人脸皮肤映射到三维人脸拓扑结构上,从而使人脸更加的逼真,此时,被映射的纹理是静态的。之后,可以通过视频序列驱动重建后的人脸模型,即改变模型的顶点位置,实现与视频序列中人脸相同的表情动作。这时,当人脸模型顶点位置改变后,其纹理也会随之拉伸缩放,但是由于纹理始终是起始的静态纹理,不会对产生像皱纹等细节,因此表情效果不会十分细腻。
本课题实现了一种人脸动态纹理,根据起始的静态纹理与当前视频帧的纹理,为每一帧生成单独的纹理,这样就能更加细腻、生动的呈现人脸表情动画。除此之外,还利用对抗学习的方法动态生成嘴巴内部的纹理,这样能在起始静态纹理不包含嘴巴内部图像时,较好的模拟出嘴巴内部的纹理(牙齿、舌头)。