Stable Diffusion模型存放位置及种类介绍

Stable Diffusion主要用于根据文本的描述产生详细图像,尽管它也可以应用于其他任务,如内补绘制、外补绘制,以及在提示词指导下产生图生图的翻译。每种模型都有各自特定的功能,可以使用不同种类模型组合生成不同风格的图片,从而实现对不同细节的定制化处理。

1、Stable Diffusion基础模型

stable diffusion基础模型(大模型、底模型、主模型、base mode)

基础模型,它是stable diffusion绘图的主模型,包含了大量的场景素材,所以它的体积很大,其它模型都是在它基础上做一些细节的定制,安装完stable diffusion软件后,必须搭配基础模型才能使用,每种基础模型都有各自侧重的画风和擅长领域。

常见文件格式

尾缀ckpt、safetensors

常见文件大小:2G-7G

注:模型文件有 2 种格式,分别是 .ckpt(Model PickleTensor) 和 .safetensors(Model SafeTensor),据说 .safetensors 更安全,这两种格式 stable-diffusion-webui 都支持,随意下载一种即可。

文件格式说明

  • ckpt 是 pytoch 使用 pickle 序列化存储的格式,简单易用,但是会可能序列化某些 python 执行代码。
  • safetensors 是 HuggingFace 推出的新的模型存储格式,不会包含执行代码,不需要反序列化,加载更快,目前已经是主流的 Stable Diffusion 模型存储格式。

模型存放路径

E:\sd-webui-aki-v4.3\sd-webui-aki-v4.3\models\Stable-diffusion

基础模型切换:在浏览器的Stable-Diffusion用户界面左上角Stable Diffusion 模型的下拉选项选选择自己需要的模型,新的基础模型放入对应目录后,不用重启,直接点击下拉选项旁边刷新按钮即可。

cyweb20230914-9

2、VAE模型

VAE,中文叫变分自编码器,全名Variational autoenconder,VAE一般用于美化图片的色彩和细节微调,主要功能是滤镜和微调;滤镜就像是剪映、美图秀秀、PS等软件用到的滤镜一样,让图片的画面看上整体色彩饱和清晰度更高;微调就是对出图的部分细节进行细微调整。

常见文件格式

尾缀ckpt、pt、safetensors(一般名字中会带有vae的字样)

常见文件大小:100MB-800MB不等

模型存放路径

E:\sd-webui-aki-v4.3\sd-webui-aki-v4.3\models\VAE

模型切换:在浏览器的Stable-Diffusion用户界面外挂 VAE 模型的下拉选项选选择自己需要的VAE模型,新的VAE模型放入对应目录后,不用重启,直接点击下拉选项旁边刷新按钮即可。

cyweb20230914-8

如果在Stable-Diffusion-WebUI用户界面中,没有这个入口,可以点击“设置”,找到“用户界面”,在快捷设置列表中补充上“sd_vae”,然后重启webui界面即可。

cyweb20230914-7

VAE模型下载:在绘世启动界面点击模型管理,再点击变分自编码器(VAE)模型就可以看到卡伊下的模型。

cyweb20230914-6

3、Lora模型

Loar模型它是一个微调模型,主要是用于满足对应特定的风格,或指定的人物特征属性进行定制。在数据相似度非常高的情形下,lora模型更加轻巧,训练效率也更高,可以节省大量的训练时间和训练资源。

常见文件格式

尾缀safetensors、pt、ckpt

常见文件大小:100MB-300MB不等

模型存放路径1

E:\sd-webui-aki-v4.3\sd-webui-aki-v4.3\models\Lora

模型切换及使用1:操作如下面。
PS:常用

cyweb20230914-5

模型存放路径2

E:\sd-webui-aki-v4.3\sd-webui-aki-v4.3\extensions\sd-webui-additional-networks\models\lora
模型切换及使用2:操作如下面。

cyweb20230914-4

4、Embedding模型(反向Tag)

Embedding模型是一种嵌入式模型,属于微调模型,Embedding模型的主要作用是文本反转,调教文本理解能力、用于个性化图像生成。

常见文件格式

尾缀pt

常见文件大小: 几十KB

模型存放路径

E:\sd-webui-aki-v4.3\sd-webui-aki-v4.3\embeddings

模型切换及使用:操作如下图。

cyweb20230914-3

5、Hypernetwork模型

Hypernetwork模型,它是一个超网络模型。Hypernetwork模型的主要功能是定制生成图片的画风和风格。通过使用Hypernetwork模型,可以对生成的图片进行更加细致的风格调整和定制化处理。

常见文件格式

尾缀pt

常见文件大小: 几十KB

模型存放路径

E:\sd-webui-aki-v4.3\sd-webui-aki-v4.3\models\hypernetworks

模型切换及使用:操作如下图。

cyweb20230914-2

6、扩展

通过webui下载的扩展,如果不想用,先取消然后在下面目录中删除相对应文件夹!

模型存放路径

E:\sd-webui-aki-v4.3\sd-webui-aki-v4.3\extensions

7、算法文件

常见文件格式

扩展名:pth

常见文件大小: 几十KB

模型存放路径

将该文件复制到C:\sd-webui-aki-v4\models\ESRGAN ,也就是xxxxx\models\ESRGAN 这个路径下
© 版权声明
THE END
如果喜欢,可以【点赞】【分享】【收藏】
点赞11赞赏分享
评论 抢沙发
头像
人生坎坎,山山而峦,不过尔尔;心路漫漫,水水而川,如此悠悠
提交
头像

昵称

取消
昵称表情代码图片

    暂无评论内容