如果您一直在使用StabilityAI以StableDiffusion形式创建的AI艺术生成器,并且一直在享受最新版本的SDXL形式。但想要对扩散模型有更多的控制,本指南将概述如何安装定制的图形用户界面。

如何将ComfyUI与StableDiffusionXLAI艺术生成器结合使用

ComfyUI用户界面是一个出色的工具,允许用户使用基于图形/节点/流程图的界面来设计和执行高级稳定扩散管道。这个创新平台是由一位匿名开发人员开发的,他试图了解稳定扩散的复杂性,并希望有一个干净、强大的工具,使他们能够不受限制地试验稳定扩散。

ComfyUI专为有兴趣使用StableDiffusion创建复杂工作流程的任何人或希望更深入了解StableDiffusion如何运作的人而设计。该界面密切反映了稳定扩散的工作原理,并且代码比其他稳定扩散用户界面更容易理解。

ComfyUI的突出功能之一是其节点/图形/流程图界面,它允许用户试验和创建复杂的稳定扩散工作流程,而无需编码。对于那些想要深入研究稳定扩散世界但缺乏传统所需的编码技能的人来说,此功能是一个游戏规则改变者。

如何安装ComfyUI

ComfyUI支持SD1.x、SD2.x和SDXL,并且还具有异步队列系统。它拥有许多优化功能,包括仅重新执行工作流程中在执行之间发生变化的部分的能力。此功能显着提高了效率并减少了不必要的计算负载。

对于GPUvram小于3GB的用户,ComfyUI提供了一个命令行选项:–lowvram。此选项会在显存较低的GPU上自动启用,确保广大用户仍然可以访问该界面。此外,即使没有带有–cpu选项的GPU,ComfyUI也可以运行,尽管这确实会减慢进程。

ComfyUI可以加载ckpt、safetensors和扩散器模型/检查点、独立VAE和CLIP模型。它还支持嵌入/文本反转、Loras(常规、locon和loha)、超网络以及从生成的PNG文件加载完整工作流程(带有种子)。用户可以将工作流程保存和加载为Json文件,并且节点界面可用于创建复杂的工作流程,例如用于Hires修复的工作流程甚至更高级的工作流程。

该界面还支持区域合成、使用常规模型和修复模型进行修复、ControlNet和T2I-Adapter、高档模型(ESRGAN、ESRGAN变体、SwinIR、Swin2SR等)、unCLIP模型、GLIGEN、模型合并以及使用TAESD进行潜在预览。ComfyUI启动速度非常快,并且完全离线工作,确保它永远不会下载任何东西。还可以使用配置文件来设置模型的搜索路径。

对于那些希望提高生成速度的人,ComfyUI建议使用常规加载器/加载检查点节点来加载检查点。这将根据您的GPU自动选择正确的设置。用户可以设置此命令行设置以在某些交叉注意操作中禁用向上转换到fp32,这将提高速度。但请务必注意,这可能会导致SD2.x型号上出现黑色图像。如果用户选择xformers,此选项将不会产生任何效果。

ComfyUI是一个功能强大、用户友好的界面,允许用户不受限制地探索和试验稳定扩散。其广泛的功能和优化使其成为任何对稳定扩散感兴趣的人的宝贵工具,无论他们的编码技能或硬件功能如何。