小红书发布 DynamicFace 技术：可控高质量人脸生成与视频一致性突破

 

小红书 AIGC 团队正式发布了全新的可控人脸生成方法 DynamicFace，在图像与视频人脸交换任务中实现了前所未有的 质量与一致性。该方法已入选 ICCV 2025，并在论文 DynamicFace: High-Quality and Consistent Face Swapping for Image and Video using Composable 3D Facial Priors 中详细阐述。

 

? 论文地址：arXiv:2501.08553
? 项目主页：DynamicFace 官网

 

---

 

核心创新点

 

1️⃣ 精准控制

 

• 基于三维人脸先验，引入四种解耦的细粒度条件，实现 表情、姿态、身份、光照 等维度的独立语义控制。

 

2️⃣ 高保真

 

• 通过 FaceFormer 与 ReferenceNet 注入高级语义与细节特征，确保身份特征高度还原，细节逼真。

 

3️⃣ 高一致性

 

• 引入 FusionTVO 模块，显著增强 视频帧间与背景的稳定性，避免常见的画面割裂与表情失真问题。

 

---

 

人脸生成的挑战与价值

 

人脸是 AI 生成视频中最敏感且最关键的元素。表情传递情绪、姿态展现动态、轮廓定义身份、光影塑造氛围与环境，每一个细微变化都决定着情感传达的成败。

 

然而，现有的人脸替换方法常面临以下三大挑战：

 

1. 空间与时间建模矛盾：图像模型擅长静态特征提取，但一旦引入运动建模，身份特征往往被污染，导致时间一致性下降。
2. 身份一致性降低：在大幅度动作或复杂场景下，人物面貌特征容易失真，削弱了识别度与可信度。
3. 整体视频质量受损：现有模型依赖外部后处理改善细节，却往往破坏整体画面的连贯性和自然度。

 

DynamicFace 针对这些痛点提出了解耦条件控制与多层特征注入的新方法，使得 身份还原与表情动作一致性得以兼顾，显著提升了视频人脸生成的真实感和稳定性。

 

---

 

应用前景

 

• 娱乐与社交：实现自然稳定的人脸替换，用于短视频、虚拟互动与个性化内容创作。
• 影视制作：为替身演员、特效镜头和角色重建提供高效解决方案。
• 虚拟人类与数字资产：支持虚拟偶像、数字人形象的高质量生成。
• 科研与教育：在人机交互、心理学实验等领域带来新的研究工具。

 

---

 

亮点总结

 

• ? 细粒度控制：实现表情、姿态、光照等多维度独立编辑。
• ?️ 高保真特征注入：保持身份特征和细节真实自然。
• ? 视频一致性：解决帧间割裂问题，保证情感表达连贯性。
• ? 学术认可：入选 ICCV 2025，成为视频人脸生成研究的重要成果。