歸藏的AI工具箱

SDXL模型泄露,这里是信息汇总和如何使用

今天SDXL 0.9的模型泄露了,最后有模型下载地址。我汇总和整理了一些现在能够知道的信息,主要包括:

  • 泄露模型效果如何

  • SDXL为什么效果好有什么特点

  • 泄露版的配置需求

  • 如何使用泄露版模型

  • 模型下载地址

Image

效果如何

  • 模型对色情内容做了限制,但没有那么离谱,通过提示词还是可以生成

  • 3060显卡下,生成一张1024x1024图片需要22秒

  • 从效果上来看,图像质量接近Midjourney V5刚发布的那个版本

  • 下面是reddit上面的一些测试图可以看一下效果

Image
Image
Image

为什么效果好

  • 模型规模较大:SDXL使用了比之前版本的Stable Diffusion大三倍的UNet主干,具有更多的注意力块和更大的交叉注意力上下文,从而提高了视觉保真度。

  • 引入新的条件策略:SDXL引入了多种新的条件策略,可以改善生成图像的质量,并能够在多种长宽比例的图像上进行训练。这些新的条件策略不需要额外的监督

  • 引入改进模型提高样本质量:SDXL引入了一个改进模型,在SDXL生成的潜变量上应用去噪过程,从而提高样本的质量。这个改进模型能够通过后处理的图像技术改善生成样本的视觉质量

  • 上面的信息来自于前几天官方发布的相关报告:https://github.com/Stability-AI/generative-models/blob/main/assets/sdxl_report.pdf

配置需求

  • 需要注意的是泄露的模型是不能在Web UI中直接使用的

  • Automatic1111的适配工作正在进行,正式版发布的时候有可能能够使用

  • 你现在可以通过ComfyUI运行泄露的版本

  • 泄露版本需要的显存最低为7G,所以建议还是12G显存的显卡稳妥一些,貌似3060 6G也可以运行

  • 运行时需要先将 sd_xl_base_0.9 模型转换为 fp16

  • 通过名为 sd-webui-model-converter 的 AUTOMATIC1111 插件转换模型(扩展的创建者:Akegarasu)

如何使用

  • 下载的时候只下载 sd_xl_base_0.9.safetensors 和可选的 sd_xl_refiner_0.9.safetensors 就行

  • 之后需要将模型文件放进:ComfyUI\models\checkpoints

  • 复制下面链接所有代码并粘贴到 ComfyUI 上https://github.com/comfyanonymous/ComfyUI/issues/817#issuecomment-1615162251

  • 界面配置如图所示

Image

下载地址:回复{下载地址}获取

注意:上面这些基于reddit部分帖子汇总而成部分细节可能有误