Stable Diffusion 3.5 在 ComfyUI 中的工作流教程

Stable Diffusion 3.5 在 ComfyUI 中的工作流教程

Stable Diffusion 3.5 是最新的 AI 图像生成模型,提供了多种强大的模型变体。通过 ComfyUI,用户可以轻松地在本地进行推理,并体验这些模型的强大功能。

本教程为你整理的以下资源内容,主要是关于如何在 ComfyUI 中使用 Stable Diffusion 3.5

  • Stable Diffusion 3.5 FP16 版本 ComfyUI 相关工作流
  • Stable Diffusion 3.5 FP8 版本 ComfyUI 相关工作流(低显存解决方案)
  • Stable Diffusion 3.5 在线运行资源与 API

Stable Diffusion 3.5模型介绍

Stable Diffusion 3.5 是由 Stability AI 发布的最新一代 AI 图像生成模型。它在图像质量和提示词遵循方面实现了重大突破,标志着 AI 绘图技术迈入了一个新的纪元。该系列提供了多个模型变体,以满足不同用户的需求:

Stable Diffusion 3.5 Diverse Outputs

目前Stable Diffusion 3.5 官方主要提供以下版本

模型名称参数量特点
Stable Diffusion 3.5 Large80 亿最强大的基础模型,适合专业用途,支持 1 百万像素分辨率。
Stable Diffusion 3.5 Large Turbo精简版通过 4 步即可生成高质量图像,速度更快。
Stable Diffusion 3.5 Medium25 亿适用于消费级硬件,支持 0.25 到 2 百万像素分辨率,易于定制。

Stable Diffusion 3.5 社区许可

社区许可允许研究、非商业和年收入总额不超过 100 万美元的组织或个人免费使用。更多详细信息请参阅社区许可协议 (opens in a new tab)

Stable Diffusion 3.5 原始 FP16版本 ComfyUI 相关工作流

本部分将会介绍官方认识版本的相关模型安装以及工作流文件的下载,工作流文件以及事例均来自ComfyUI 博客 (opens in a new tab)

下载 Stable Diffusion 3.5 模型文件

  1. 下载 Stable Diffusion 3.5 模型文件
资源名称下载链接安装文件夹
Stable Diffusion 3.5 Large下载链接 (opens in a new tab)models/checkpoint
Stable Diffusion 3.5 Large Turbo下载链接 (opens in a new tab)models/checkpoint

请参考对应的这个说明以及安装文件路径,完成对应的模型的下载和安装,按你的需要选择一个就可以

  1. 对应的 clip 模型文件
资源名称下载链接安装文件夹
clip_g.safetensors下载链接 (opens in a new tab)models/clip
clip_l.safetensors下载链接 (opens in a new tab)models/clip
t5xxl_fp16.safetensors下载链接 (opens in a new tab)models/clip

clip 模型文件如果你有使用过 3.0 或者其他相关的模型,对应的这些文件你可能已经有了,如果你是第1次使用呢,那么请下载安装

下载 Stable Diffusion 3.5 工作流workflow文件

下面是Comfy官方提供的相关事例,你可以下载对应的这个工作流文件

相对应的这个文件拖入 ComfyUI 界面,并运行生成

Stable Diffusion 3.5 FP8低显存解决方案

如果生成过程中出现内存不足的问题,可以尝试以下低显存选项:

下载 Stable Diffusion 3.5 FP8 模型文件

  1. 下载 Stable Diffusion 3.5 FP8 模型文件
资源名称下载链接安装文件夹
Stable Diffusion 3.5 Large FP8下载链接 (opens in a new tab)models/checkpoint

请参考对应的这个说明以及安装文件路径,完成对应的模型的下载和安装

  1. 对应的 clip 模型文件
资源名称下载链接安装文件夹
clip_g.safetensors下载链接 (opens in a new tab)models/clip
clip_l.safetensors下载链接 (opens in a new tab)models/clip
t5xxl_fp8_e4m3fn.safetensors下载链接 (opens in a new tab)models/clip
(experimental)t5xxl_fp8_e4m3fn_scaled.safetensors下载链接 (opens in a new tab)models/clip

如果您的内存超过32GB,仍然建议使用t5xxl_fp16模型。

下载 Stable Diffusion 3.5 FP8 工作流workflow文件

下面是Comfy官方提供的相关事例,你可以下载对应的这个工作流文件

相对应的这个文件拖入 Comfyui 界面,并运行生成

在线运行 Stable Diffusion 3.5

您还可以通过 Hugging Face 的 Space 在线运行 Stable Diffusion 3.5:

除了可以从 Hugging Face 下载模型权重进行自托管外,用户还可以通过以下平台访问 Stable Diffusion 3.5:

其他资源

  1. Stable Diffusion 3.5 LoRA 模型 https://huggingface.co/Shakker-Labs/SD3.5-LoRA-Linear-Red-Light (opens in a new tab) https://huggingface.co/Shakker-Labs/SD3.5-LoRA-Futuristic-Bzonze-Colored (opens in a new tab) https://huggingface.co/Shakker-Labs/SD3.5-LoRA-Chinese-Line-Art (opens in a new tab)

2.controlnet 模型

  • 待更新