Flux人像生成与手脸修复工作流DF_FluxBeauty

工作流介绍

DF_FluxBeauty是基于FLux模型的图像生成或者Controlnet生成角色图片+加角色手脸修复的工作流，基础Nunchaku0.3.0（或以上）加速插件与FLUX.1-dev-ControlNet-Union-Pro-2.0控制模型。

如果你想单独生成角色，或者想要通过深度控制一个带有角色的场景推进使用该工作流，可以让生成的角色更加细致和准确。

如果你的场景中没有角色需求或者角色深度图，那么请不要使用该工作流。

环境配置

插件

• Nunchaku3.0：ComfyUI超级加速插件Nunchaku0.30版本-数字折叠
• Inspire-Pack:ComfyUI-Inspire-Pack 扩展节点插件-数字折叠
• Impact-PackComfyUI-Impact-Pack图像检测增强插件(函检测模型)-数字折叠 （模型也一并安装）

模型

• Flux模型：适配Nunchaku0.3.0版本Flux模型：dev|t5|schnell|depth-数字折叠（下载里面的svdq-int4_r32-flux.1-schnell.safetensors）
• VAE Clip模型：svdq-int4-flux.1-dev适配Nunchaku加速模型-数字折叠（根据下方参数提示的文件名下载）
• Controlnet模型：多合一控制模型FLUX.1-dev-ControlNet-Union-Pro-2.0-数字折叠

Houdini

• 在Houdini Python中安装WebSocket模块-数字折叠

---

参数说明

• 启动AI:点击后会启动ComfyUI程序，需要先配置好ComfyUI的路径和服务地址
• 执行：点击后就会执行出图操作，执行完会将图片导入到hda里面的Copnetwork节点，需要打开Composite View面板查看。
• 种子：不同种子会得到不同的图像
• 提示词：写出图的提示词，如果有LoRA需要加上LoRA的触发词，细节建议用Chatgpt或者我们的提示词插件丰富。
• 生成模式：
  图像控制：该模式需要输入一张带有角色的深度图或者线框图或姿态图，控制最终图像的生成。
  文字控制：该模式仅需要输入提示词就可以生成图像，在你的提示词中需要有角色相关的描写。

模型配置

• ComfyUI：输入你的Comfyui的安装路径
• FLux模型：选择svdq-int4_r32-flux.1-schnell.safetensors
• Control模型：选择ControlNet-Union-Pro-2.0.safetensors
• LoRA1:选择支持Flux的lora，在\models\loras里选择，就算不启用LoRA也需要填写一个LoRA路径占位
• LoRA2:选择支持Flux的lora，在\models\loras里选择，就算不启用LoRA也需要填写一个LoRA路径占位
• Clip1路径：选择clip_l.safetensors
• Clip2路径：选择t5xxl_fp8_e4m3fn.safetensors
• VAE路径：选择ae.safetensors
• 服务器地址：ae.safetensors

ControlNet

• 控制图路径：选择你存放深度图或其他控制图的路径，默认使用该文件夹的第一张图片
• 控制强度：图像控制的强度大小，值越小控制力越弱
• 开始时间：在生图时，控制图产生作用的时间，如果是0则一开始就产生作用
• 结束时间：控制图控制效果结束的时间，如果是1则完全控制，如果小于1，则大于该值小于1的部分由模型自由发挥。

生成控制

• 采样步数：图像生成时的采样步数
• 分辨率：图像生成的分辨率，该值只在文字控制模式下有效，如果是图像控制模式，分辨率获取的时控制图的分辨率。
• 加速容忍度：通过增加 cache_threshold 值，允许系统使用更多的缓存数据而减少计算量，从而加速处理过程。但是降低一些质量，如果开启，建议值在0.12左右。为0则不开启。
• LoRA1强度：控制LoRA1的作用大小，为0则关闭该LoRA
• LoRA2强度：控制LoRA2的作用大小，为0则关闭该LoRA
• 脸部提示词：模型修复脸部的提示词，默认是对女性进行修复，如果是男性，请修改为children,boy
• 脸部修复步数：脸部修复时的采样步数
• 脸部修复种子：脸部修复的随机种子
• 手部修复步数：手部修复时 的采样步数
• 手部修复种子：手部修复时的随机种子

保存设置

• 保存路径：图像生成自动保存的路径
• 图像前缀：图像保存时的前缀
• 图片数量：每次执行生成的图像数量（实测nunchaku插件如果数量大于1会很慢，在插件没有修复之前该值请默认给到1）
• 清理原始图像：点击会把Comfyui里面output\dffluxbeauty文件夹内的所有图像删除（不会影响自定义保存路径里的图像）

---

使用方法

1.将hda下载下来，通过Houdini菜单上的Assets-Install Asset Library进行安装，或者直接放到C:\Users\yourname\Documents\houdini20.5\otls文件夹内Houdini会自动识别。

2.配置好模型参数和ComfyUI路径就可跑图了

版权说明