通过 Stable Diffusion 生成人物图像后,面部的角度/表情往往不及预期。通常我们会使用OpenPose绘制,但是效果并不理想,会破坏除了OpenPose外的区域。本文介绍结合 Ref Only + ControlNetMediaPipeFace 完美控制面部角度的技巧。
效果一览
以前我会使用openpose face,但是会导致了脸部区域以外的更多干扰。与 "openpose face"相比,使用 "ref_only "所做的改变几乎处于同一水平,同时尽可能地保留了面部区域的完整性。
更多测试结果:
ref_only的安装说明可以看之前的文章Midjourney开放中国区之后,还是搭配Stable Diffusion使用最佳
ControlNet mediapipe_face 安装和使用
你可以从( https://huggingface.co/CrucibleAI/ControlNetMediaPipeFace 下载 "mediapipe_face "模型。)
下载完成后放在ControlNet的插件目录中。
而后在预处理器和模型均选择 mediapipe_face
而后在上方图片区域放入一张你期望得到的面部表情&角度参考图片
点击生成即可看到对应的处理效果
结合 Ref Only 使用也同样是结合 ControlNet 的多重图层能力,在Ref Only中放入期望修改的原图,在mediapipe_face放入期望得到面部示例图片,合并生成即可。