说实话,几次社区里的ComfyUI共学活动下来,一个感受特别强烈——AI工作流的入门门槛,确实把不少创作者挡在了门外。潜空间、VAE、LoRA、ControlNet……这一连串专业名词,光是听着就足够让人头疼,更别提还要自己动手搭建一个完整的ComfyUI工作流了。

这不,英伟达最近搞了个有意思的——ComfyGen,翻译过来就是“Comfy生成器”。它的思路非常直接:你输入一段描述性提示词,它就能自动为你生成一个匹配的ComfyUI工作流。目前这个方案还只支持文生图模型,但光是这个方向,就已经让人看到了打破AI绘画技术门槛的无限可能。
英伟达在发布时提到,ComfyGen生成的图像质量相当不错,而且具备跨领域泛化能力。他们还特地强调了一句:下面这些示例图,完全是用SDXL规模模型生成的,并没有使用Flux。
当然,学术论文不会随便下结论。英伟达团队做了几组对比测试:
- SDXL原生
- 两个微调模型(用过的同学应该很熟悉)
- 两个人手搭的工作流
- 两个不同版本的ComfyGen生成的图(这两者的区别,后面原理部分会细说)

结果怎么说呢?不仅效果做到了持平,甚至在有些维度上,ComfyGen生成的内容更符合人类对提示词的语义理解。他们还拿C站上人类撰写的提示词做了对比,结果同样略胜一筹。
不过项目目前尚未开源,暂时无法亲自上手体验。如果实际效果真如官方所说,那确实相当惊艳。
ComfyGen核心技术原理
ComfyGen的背后,依托的是大语言模型(LLM)。它的工作方式很简单:你输入一个具体的提示词,LLM会自动为你定制并优化出一个完整的ComfyUI工作流。
这个工作流并不是凭空产生的,而是组合了多个专门的功能组件——比如改进的输入处理、精细的解码器、超分辨率模块等等。这些组件协同运作,显著提升了出图质量和细节表现。
核心在于,ComfyGen能根据你的具体需求,智能选出最合适的工作流组件,从而实现更高质量、更精准对齐用户意图的图像输出。
ComfyGen-IC与ComfyGen-FT对比
英伟达团队做了一张表格,记录了工作流生成的图像分类,并根据美学评估和人类偏好预测给它们打分。然后让LLM选择最能匹配新提示词、且得分最高的工作流。
训练时也是一样:把表格中的得分、提示词和工作流作为训练素材。推理时,LLM根据提示词和高得分去预测最合适的工作流。
可以说,这份研究不仅为ComfyUI带来了新的可能性,也为更多智能体开发打开了思路——甚至对LLM工作流的自动生成,都会产生深远影响。
