← BACK TO TOOLS & PIPELINE
06Tools & Pipeline

ComfyUI ControlNet 工作流

面向 RTX 4060 8GB 的参考图与姿势约束工作流,输出可进入后续合成的透明角色 PNG。

PROJECT OVERVIEW

项目概况

平台
ComfyUI-Aki v1.7
底模
Animagine XL 3.1
条件输入
IP-Adapter Plus · ControlNet(DWPose / OpenPoseXL2)
透明输出
LayerDiffuse 单批次 RGBA 解码
显存目标
RTX 4060 8 GB(--lowvram)
输出规格
768 × 1152 透明角色 PNG
运行方式
可视化版调试 / API 版批量运行
PROJECT FILM项目展示
STACK
ComfyUI-AkiControlNetIP-AdapterLayerDiffuse
WORKFLOW DESIGN

ControlNet 条件生成工作流

工作流基于 ComfyUI-Aki v1.7,组合 Animagine XL 3.1、IP-Adapter Plus、DWPose/OpenPoseXL2 与 LayerDiffuse。参考图负责角色身份和风格,姿势图只提供骨架结构,文本提示词补充服装与画面条件。把这些信号分开后,角色不像时调 IP-Adapter,动作不准时调 ControlNet,不必在一长串提示词里碰运气。

模型和节点属于第三方能力。我的工作是节点编排、依赖补齐、参数归档、空路径报错修复与 8GB 显存配置。可视化版用于调试,API 版用于批量运行;两者共享种子、提示词、输入和输出清单。`--lowvram` 与单批次 RGBA 解码让 768 x 1152 透明角色图可以稳定生成。

SYSTEM MAP

条件输入与采样流程

  1. 01Reference

    IP-Adapter 注入角色与画风特征,不负责姿势。

  2. 02Pose

    DWPose 提取骨架,ControlNet 约束身体结构。

  3. 03Sampling

    模型、提示词、种子与条件权重在固定阶段组合。

  4. 04RGBA decode

    LayerDiffuse 分离前景,单批次解码控制峰值显存。

  5. 05Archive

    输入、参数和结果按方案归档,API 批处理可复现。

每种条件都有单独的开关和预览。定位问题时先关闭某一路约束,确认是身份、姿势还是透明解码造成的偏差。