如何通过 ControlNet 结合 IP-Adapter 精准控制人物姿态与面部特征一致性

想在 Stable Diffusion 里实现同一个角色在不同场景下做特定动作，单纯靠 Prompt 抽卡几乎不可能。最稳的方案是 ControlNet (OpenPose) + IP-Adapter (FaceID) 的组合拳。

很多人用 IP-Adapter 觉得像是在“随机抽奖”，其实是因为没有给模型足够的空间去处理结构。我的实操经验是：先用 OpenPose 定死骨架，再用 IP-Adapter 注入特征，最后用局部重绘（Inpaint）微调。

具体配置流程：

1. 姿态锁定：ControlNet OpenPose
不要直接用原图，建议先用 dwpose 预处理器提取姿态图。如果你需要极高精度的手指或面部朝向，可以在 ControlNet 界面里把 Control Mode 设为 ControlNet is more important。

2. 特征注入：IP-Adapter-FaceID
这里有个关键坑：千万别用基础版的 IP-Adapter，必须用 ip-adapter-faceid-plus_sd15（或 XL 版本）。
配置技巧：

• Weight (权重)：设置在 0.6 - 0.8 之间。太高会把背景颜色也带进来，导致画面发灰。
• Noise (噪声)：如果人物脸部僵硬，尝试调低权重并增加 Denoising strength 到 0.4 左右。

3. 提示词的配合
即便有了 IP-Adapter，Prompt 依然要写基础特征。比如人物是金发蓝眼，必须在正向提示词里写 blonde hair, blue eyes，否则 AI 在解析图像特征时容易产生漂移。

进阶技巧：解决“脸不像”的组合命令
如果生成结果依然像个陌生人，我会采用这个工作流：

• Step 1: 生成一张姿态正确但脸部略有偏差的图。
• Step 2: 将图发送至 Inpaint，掩码涂抹面部。
• Step 3: 保持 IP-Adapter 开启，将 Denoising strength 设为 0.45，再次运行。

避坑指南：

• 分辨率陷阱：如果生成图的分辨率与参考图比例不一致，OpenPose 的骨架会拉伸，导致人物肢体畸形。务必保证 Width 和 Height 与参考图等比。
• 模型冲突：不要同时开启三个以上的 ControlNet 单元，否则显存会爆，且权重互相干扰导致画面崩坏。

核心参数快照：

ControlNet_Unit_0:
  Preprocessor: dwpose
  Model: control_v11p_sd15_openpose
  Weight: 1.0
  Control_Mode: ControlNet is more important

ControlNet_Unit_1:
  Model: ip-adapter-faceid-plus_sd15
  Weight: 0.7
  Reference_Image: [你的角色面部照片]