目录

在 ComfyUI 中使用 Flux、Qwen-Image 等新一代图像模型

在 SD 1.5、SDXL 之后,新一代开源图像模型(例如 Black Forest Labs 的 Flux 系列、阿里巴巴的 Qwen-Image 系列,以及其他持续推出的模型)在画面质量、提示词理解和文字绘制方面都有明显进步。ComfyUI 通常会在模型发布后很快提供支持。

和 SDXL 的主要差异

SD 1.5 / SDXL新一代模型(Flux、Qwen-Image 等)
模型大小2~7 GB常见为 10~20 GB 以上(另有压缩版本)
模型文件一个 checkpoint扩散模型、文本编码器、VAE 通常分开存放
提示词以关键词为主理解完整句子,能绘制指定文字
负向提示词有效许多模型不使用(CFG 为 1)
显卡显存6~8 GB 可用建议 12 GB 以上,或使用量化版本

最简单的开始方式:官方模板

新模型的节点组合与参数各不相同,最可靠的方式是使用 ComfyUI 内置的模板:

ComfyUI 模板窗口
模板(Templates)窗口:按用途分类,首次打开 ComfyUI 时会自动显示(ComfyUI 0.39)
  1. 选择菜单 → 浏览模板(Browse Templates)。
  2. 找到想用的模型分类,例如 Flux 或 Qwen-Image,然后选择文生图模板。
  3. 加载后,如果缺少模型,ComfyUI 通常会显示需要下载的文件列表和下载链接,甚至可以直接下载到正确的文件夹。
  4. 确认每个加载节点都选中了正确的文件,然后点击 Run。

模板中的参数(步数、采样器、guidance)就是官方建议的设置。先用这些参数生成,熟悉后再调整。

文件放置方式

分开的模型文件通常这样放置:

models/
├── diffusion_models/   flux 或 qwen-image 的主模型
├── text_encoders/      文本编码器(例如 clip_l、t5xxl、qwen 等,视模型而定)
└── vae/                模型专用的 VAE

对应的节点:

文件节点
主模型Load Diffusion Model(UNETLoader)
文本编码器Load CLIP、DualCLIPLoader 等,type 选择对应的模型
VAELoad VAE

不同模型使用的文本编码器和 VAE 不同,不能混用。请根据模板或模型页面的说明下载。

显卡显存不足时

版本说明
FP8文件大小约为原来的一半,质量损失小。在 Load Diffusion Model 的 weight_dtype 中也可以选择 fp8
GGUF 量化(Q8、Q6、Q5、Q4…)文件更小,需要 ComfyUI-GGUF 自定义节点,用它的加载节点替代 Load Diffusion Model / Load CLIP
蒸馏 / 加速版本步数更少(例如 4~8 步),速度快很多

ComfyUI 会自动把显存放不下的部分移到系统内存(速度较慢),所以即使显卡显存略有不足,通常仍可运行,只是会比较慢。建议系统内存为 32 GB 以上。

提示词写法

新一代模型能理解自然语言,可以用完整句子描述画面:

A cozy bookstore in an old Taipei alley at dusk. A hand-painted wooden sign above the
door says "Corner Books" in neat white letters. Warm light spills onto the wet street,
and a black cat sits by the doorway. Shot on a 35mm film camera.
  • 想让图中出现文字时,用引号括起文字。
  • 描述构图、光线和镜头,比堆叠「masterpiece, best quality」之类的词更有效。
  • 部分模型(例如 Qwen-Image)对中文提示词和中文字的绘制也有不错的支持。

图像编辑模型

除了文生图,新一代模型也有专门的编辑模型(例如 Flux Kontext、Qwen-Image-Edit):输入一张图片和一条指令,例如:

把背景换成下雪的街道,人物保持不变

不需要手动画遮罩,就能更换背景、改变衣服颜色、移除物品、修改图片中的文字。在模板中搜索 Edit 或 Kontext,即可找到对应的工作流。

LoRA 与 ControlNet

新模型也有对应的 LoRA 与 ControlNet,但必须使用针对该模型训练的版本。SDXL 的 LoRA 不能用在 Flux 上。加载新模型的 LoRA 时,通常使用 LoraLoaderModelOnly 节点。

授权

新一代模型的授权差异很大:有些可以用于商业用途,有些仅限非商业用途(例如部分 Flux 版本),有些则需要额外获取授权。用于商业用途前,请务必确认模型的授权条款。

更新于 2026年10月12日