ComfyUI ControlNet 工作流
面向 RTX 4060 8GB 的参考图与姿势约束工作流,输出可进入后续合成的透明角色 PNG。
项目概况
- 平台
- ComfyUI-Aki v1.7
- 底模
- Animagine XL 3.1
- 条件输入
- IP-Adapter Plus · ControlNet(DWPose / OpenPoseXL2)
- 透明输出
- LayerDiffuse 单批次 RGBA 解码
- 显存目标
- RTX 4060 8 GB(--lowvram)
- 输出规格
- 768 × 1152 透明角色 PNG
- 运行方式
- 可视化版调试 / API 版批量运行
ComfyUI-AkiControlNetIP-AdapterLayerDiffuse
ControlNet 条件生成工作流
工作流基于 ComfyUI-Aki v1.7,组合 Animagine XL 3.1、IP-Adapter Plus、DWPose/OpenPoseXL2 与 LayerDiffuse。参考图负责角色身份和风格,姿势图只提供骨架结构,文本提示词补充服装与画面条件。把这些信号分开后,角色不像时调 IP-Adapter,动作不准时调 ControlNet,不必在一长串提示词里碰运气。
模型和节点属于第三方能力。我的工作是节点编排、依赖补齐、参数归档、空路径报错修复与 8GB 显存配置。可视化版用于调试,API 版用于批量运行;两者共享种子、提示词、输入和输出清单。`--lowvram` 与单批次 RGBA 解码让 768 x 1152 透明角色图可以稳定生成。
条件输入与采样流程
- 01Reference
IP-Adapter 注入角色与画风特征,不负责姿势。
- 02Pose
DWPose 提取骨架,ControlNet 约束身体结构。
- 03Sampling
模型、提示词、种子与条件权重在固定阶段组合。
- 04RGBA decode
LayerDiffuse 分离前景,单批次解码控制峰值显存。
- 05Archive
输入、参数和结果按方案归档,API 批处理可复现。
每种条件都有单独的开关和预览。定位问题时先关闭某一路约束,确认是身份、姿势还是透明解码造成的偏差。