SDXL 的 Canny Contronet 发布了,但是它只能在 ComfyUI 中使用。今天这篇文章我们不讲 prompt,而是要深入了解如何在 ComfyUI 上面使用 SDXL Contronet。老规矩,先上个效果图。

一、什么是 ComfyUI?
ComfyUI 是一个图形用户界面(GUI)工具,专门设计用来进行 Stable Diffusion 的实验和创作。与 A1111 不同,ComfyUI 是基于模块化设计的。每个模块都执行特定的任务,例如加载模型、prompt 编码、解码生成图片等待。用户可以根据项目的需要,灵活地选择和组合这些模块。
此外,ComfyUI 允许用户根据自己的需求添加新的模块或修改现有模块的功能。这种设计使得
ComfyUI 可以轻松地适应不同的应用场景和需求。
二、为什么选择 ComfyUI?
可能很多人觉得很奇怪,A1111 不是已经很好了吗?为什么还要使用 ComfyUI 呢?
1.深入理解 Stable Diffusion:
ComfyUI 的设计初衷是为了让用户能够深入了解 Stable Diffusion 的工作原理。它提供了一种直观的方式来观察和理解 Stable Diffusion 的各个步骤和参数。
2.绘图速度:
ComfyUI 对 SD 的优化更好,这意味着在相同的硬件条件下,ComfyUI
可以实现更快的计算速度和更低的显存占用。对于 SD v1 版本,A1111 和 ComfyUI 的绘图速度看不出明显区别,但使用 SDXL 来绘图,ComfyUI 的速度差不多是 A1111 的两倍。
3.SDXL
使用起来更方便:
这里有两点:
·
第一点,都知道 SDXL 有两个模型,base 和 refine,在
A1111 上面来回切换实在太麻烦了,光切个模型都得几分钟,但是在 ComfyUI 就没有这个问题。
·
第二点,Contronet 支持,新出的 Canny 只能在 ComfyUI 上面使用,没得选。
三、如何学习 ComfyUI?
如果要在一篇文章里面介绍完整的使用方法实在太麻烦了,这里我推荐几个 B站 大神的视频。
1.SDXL:
Nenly同学的AI绘画就不用说了,B站应该观看量最高的吧。直接搜索 “关于SDXL 1.0,这个视频里有你想知道的全部” 就可以了,介绍里面有学习资料包,包含了 ComfyUI 软件包、模型等资料,不好翻墙的同学可以直接从里面下载相关资源。
2.ComfyUI:
EVA剑心的,别看观看量小,这个可是魔兽争霸的补丁作者写的,从原理开始讲,看完就完全不纠结每个参数怎么填。直接 B站 搜索 “SDXL comfyui工作流入门到进阶” 就行。
3.完整工作流:
看完这两个视频如果还嫌麻烦,不想画工作流,关注我直接发完整工作流,包括 SDXL 整个流程,Lora,Canny
所有的,绝对唯一,直接导入就能跑。
四、如何使用工作流
1.选择模型
三个模型
1)base 模型
2)refine 模型
3)lora 模型

2.输入正\负向提示词

3.选择 Contronet 图片
点击选择文件上传即可

生成图片
点击生成/排队就可以了

总结
ComfyUI 是一个强大而灵活的 Stable Diffusion 实验和创作工具。它的模块化设计和优化性能使得它成为了
SDXL 的理想使用平台。
出自:https://mp.weixin.qq.com/s/F9umUhcovFE4uSYqaZVvYA