基于流形学习的面部表情交互式探索与细化

视频

DOI

制作富有表现力的3D面部表情极具挑战性。典型面部绑定有30多个可控参数，虽然解剖学上有意义，但由于表情冗余、不真实配置以及参数之间的许多语义和样式相关性，使用起来很困难。我们提出了一种基于“自然”表情数据驱动面部流形快速探索和细化静态面部表情的全新界面。快速探索的面部配置被交互式投影到这一有意义的表情流形上。这些表情可以使用附近人脸的2D嵌入进行细化，既可在流形上也可在流形外。我们的验证有四个方面：我们展示了使用各种设备创建富有表现力的面部；我们验证了学习到的流形超越了其训练面孔，能够不同面孔进行富有表现力的控制；我们进行了众包研究以评估流形面部表情的质量；并报告了一项可用性研究，表明我们的方法是有效的交互式面部表情创作工具。