提升40% 4步搞定StableCascadeComfyui工作流不再报错

疯狂的KK

发布于 2024-02-29 13:52:17

3340

发布于 2024-02-29 13:52:17

文章被收录于专栏：Java项目实战

模型概述

稳定级联由三个模型组成：阶段 A、阶段 B 和阶段 C，代表生成图像的级联，因此得名“Stable Cascade”。A级和B级用于压缩图像，类似于VAE在稳定扩散中的工作。但是，通过这种设置，可以实现更高的图像压缩。虽然 Stable Diffusion 模型使用空间压缩因子为8，编码分辨率为1024 x 1024至128 x 128的图像，Stable Cascade 实现压缩系数为 42。这将 1024 x 1024 图像编码为 24 x 24，同时能够准确地解码图像。这带来了更便宜的训练和推理的巨大好处。此外，C 阶段负责用于生成给定文本提示的小型 24 x 24 潜伏物。下图直观地显示了这一点

对于此版本，我们为 C 阶段提供了两个检查点，为 B 阶段提供了两个检查点，为 A 阶段提供了一个检查点一个 10 亿和 36 亿参数版本，但我们强烈建议使用 36 亿版本，因为大多数工作都是投入到微调中。B阶段的两个版本分别为7亿个和15亿个参数。两者都实现了然而，15亿人擅长重建小而精细的细节。因此，您将实现如果使用每个变体的较大变体，则效果最佳。最后，阶段 A 包含 2000 万个参数，并且是固定的，因为它的体积小。

这个在工作流中很好的体现了这一点C -B -A的级联方式

视频教学

第一步更新Comfyui到最新版本

秋叶版本操作如下

本地版本点击本地的update

第二步，下载对应的模型

存放位置如下

模型存放地址ComfyUI\models\unet
CLIP存放地址ComfyUI\models\clip
stage_a放在ComfyUI\models\vae

第三步下载工作流

第四步填入提示词就可以啦~

transparent cube suspended, volcanic landscape within, 
molten lava rivers flowing, night sky canvas, 
twinkling stars speckled above, moon's glow soft, 
juxtaposition of icy chill against fiery eruptions, 
glacial formations bordering the inferno,
 slow dance of ash and vapor, 
 lunar reflection on icy surfaces, 
 cube edges catching the celestial light,
  dynamic contrast of elements, 
 primeval earth forces encased,
  (best quality, 4k, 8k, highres, masterpiece:1.2), ultra-detailed, 
  (photorealistic:1.37), frozen and fiery, harmonious duality, (nature photography), volcanic activity vibrant, (environmental art), 
  (digital painting), atmospheric effects, 
mystical emanation, elemental balance, serene, sublime geology,

‍

显存占用情况