基于三维生成模型的人脸编辑算法FaceEdit3D，能够对任意人脸进行交互式的人脸编辑，实现人脸的脸型、表情、朝向、风格等属性的编辑，并且保留照片的原有细节。

我们的算法允许用户直接操作3D点来编辑3D脸部，实现自然、快速的脸部编辑。 在用户操纵一个或多个点后，我们提出三平面扭曲来直接使与视图无关的 3D 表示变形。 为了解决三平面扭曲引起的失真问题，我们训练了扭曲感知编码器将扭曲的面投影到标准化的潜在空间上。 在这个空间中，我们进一步提出定向潜在编辑，以减轻编码器引起的身份偏差，并实现各种属性的解缠结编辑。 大量的实验表明，我们的方法取得了优异的结果，具有丰富的面部细节和良好的身份保留。 我们的方法还支持通用应用程序，例如多属性连续编辑和猫/汽车编辑。

相关论文发表于世界顶级计算机视觉会议CVPR2024中。