OpenSeeFace:通过Unity集成在CPU上进行可靠的实时面部和面部界标跟踪 源码

总览 注意:这是一个跟踪库,不是独立的头像伪造程序。 我也在开发的应用程序,该应用程序目前处于公开测试阶段。 该项目实现了基于MobileNetV3的面部标志检测模型。 由于Windows上的Pytorch 1.3 CPU推断速度非常低,因此该模型已转换为ONNX格式。 使用它可以以30-60 fps的速度运行,跟踪一张脸。 有四种模型,以不同的速度跟踪质量折衷。 如果有人好奇,这个名字就是在公海和看到面Kong的傻双关语。 没有更深层的意义。 您可以在找到最新的示例视频,其中显示了在不同噪声和光照水平下默认跟踪模型的性能。 用法 可以在找到基于VRM的头像动画的Unity项目示例。