Unsupervised Learning Facial Parameter Regressor for Action Unit Intensity Estimation via Differentiable Renderer

发布:2022-12-19 10:56:24
阅读:452
作者:宋新慧、石天阳、冯尊磊、宋明黎、林杰、林传杰、范长杰、袁燚
分享:复制链接

论文介绍

人脸运动单元是描述人脸表情的一个系统。在游戏中,玩家可以把自己的表情迁移到游戏中的角色。本文研究了通过单张图像无监督的估计人脸运动单元的强度的问题。由于表情参数和人脸参数是高度耦合的,这大大增加了人脸运动单元的估计难度。又因为人脸运动单元标注需要专业的知识,并且非常耗时耗力。为了解决这些问题,我们提出了一种无监督的人脸参数估计方法。首先用神经网络模拟游戏引擎的渲染过程,得到一个神经网络渲染器。然后结合对抗训练、参数交换、身份识别来训练整个网络结构。实验结果证明我们可以准确的估计人脸运动单元的强度并且可以迁移到游戏角色中有比较好的表现。

论文地址

https://dl.acm.org/doi/abs/10.1145/3394171.3413955

扫码进群
微信群
免费体验AI服务