🚀 核心实战价值
用 Z-Image Turbo + ControlNet Union 2.1 在 ComfyUI 中实现「一次加载,任意控制」—— 从精确姿势迁移、深度构图复制,到老照片上色,画质不减、速度依旧,彻底告别多模型切换的繁琐。
📊 核心参数表 / 工作流拆解
模型核心参数(生图场景)
| 参数项 | 推荐值 / 模型 | 说明 |
|---|---|---|
| 基座模型 | z_image_turbo_bf16.safetensors |
Z-Image Turbo 扩散模型,8步推理,极速高质 |
| ControlNet 模型 | Z-Image-Turbo-Fun-Controlnet-Union-2.1-2602-8steps.safetensors |
全能 Union 模型,放于 model_patches 目录 |
| VAE | ae.safetensors |
专用 VAE,路径 models/vae/ |
| 文本编码器 | qwen_3_4b.safetensors |
Qwen 3B 系列,放于 models/text_encoders/ |
| 预处理器 (AIO Aux) | OpenPose / DW / HED / Zoe / Canny / None | 根据任务选择:姿势→OpenPose;深度→Zoe;上色→None |
| ControlNet 强度 | 0.5 – 0.9 (建议从低开始) | 强度越低,生成自由度高;上色建议 0.7~0.85 |
| 步数 (Steps) | 8 (Z-Image Turbo 默认) | 极低步数即可收敛,配合 Union 控制力优秀 |
完整工作流拆解 · 7 步上车
- 更新 ComfyUI — 使用 Manager 一键更新,重启保证节点兼容。
- 下载四件套 — VAE (
ae.safetensors) / 文本编码器 (qwen_3_4b.safetensors) / 扩散模型 (z_image_turbo_bf16.safetensors) / Union 模型 (...2602-8steps.safetensors),严格放入对应文件夹。 - 加载工作流 JSON — 下载官方工作流文件,直接拖入 ComfyUI 窗口。
- 安装缺失节点 — 若节点红色报警 → Manager → Install Missing Custom Nodes,必须安装
ComfyUI-ControlNet-Auxiliary等。 - 上传参考图 + 选预处理器 —
Reference Image节点载入图片;AIO Aux Preprocessor 选择 OpenPose / HED / Canny / None (上色模式)。 - 编写提示词 — 描述目标画面;上色任务建议加
color photo, natural color, soft light。 - 一键 Run — 调整种子 (Seed) 与 ControlNet 强度,迭代至满意。
🎨 画面/镜头表现技巧
构图与姿势的精密控制:使用 OpenPose / DW 预处理器可原封不动迁移人物骨架,适合保持角色动作一致性。若希望保留原图深度层次(如前后景关系),选用 Zoe Depth Map 可得到立体感极强的构图迁移,尤其适合复杂场景。
上色艺术 · 灰度控制 (Gray Control):新版 Union 2.1 引入灰度上色模式,预处理器务必设为 None,提示词强调 “natural color, soft light” 可避免色彩溢出。老照片上色时,ControlNet 强度建议 0.75~0.85,既能保留原始细节又赋予真实色调。配合 Z-Image Turbo 的速度,批量修复历史照片效率惊人。
镜头语言借鉴:若想生成电影感画面,可先用 Canny 或 HED 提取参考图的轮廓结构,再通过提示词注入 “cinematic lighting, anamorphic, shallow depth of field”,获得镜头感一致的二次创作。
💡 避坑指南 & 高级技巧
- ❌ 模型放错目录 — Union 模型是
model_patches而非controlnet或diffusion_models,放错直接报错或无法加载。请反复核对路径。 - ❌ 预处理器与任务不匹配 — 上色任务选了 OpenPose 或 Canny 会导致轮廓干扰,色彩溢出。牢记:灰度上色 →
None。 - ❌ ControlNet 强度拉满 — 强度 ≥1.0 容易产生伪影或过拟合,导致画面僵硬。建议从 0.6 起步,逐步微调,找到“控制最强且画质无损”的临界点。
- ⚠️ 高级微调 · 多预处理器对比 — 同一个构图任务,可以尝试 HED、Canny、Zoe Depth 分别生成,融合不同控制信号。例如用 OpenPose 固定姿势 + Zoe 保留深度,通过两个 ControlNet 节点并联 (Union 模型本身支持多控制,但需拆分支),出图层次感飙升。
- ⚡ 高级微调 · 种子锁定的迭代法 — 固定一个优质种子 (Seed),只微调 ControlNet 强度或预处理器类型,可以快速找到最佳控制权重。适合批量生成角色三视图或表情包。
🔧 基于 Z-Image Turbo ControlNet Union 2.1 (2602) · 工作流来自 Stable Diffusion Art · 适配 ComfyUI 全平台 (Win/Mac/Colab)