stablediffusion小模型是什么?如何使用

时间:23-09-27 14:46:29

作者:

分类:AI软件教程

    stablediffusion小模型是什么?如何使用

  Stable Diffusion中文网是一个提供小模型(Extra networks)的平台,这些小模型可以用来改善图像的风格并提高生成特定对象或角色的准确度。与根据需求切换ckpt模型不同,使用小模型可以额外叠加几层网络,从而改善图像的风格。

  例如,可以使用Anything模型生成图像,并与”Taiwan-doll-likeness LoRA”模型结合,将图像转换为真人风格,而不需要依赖大量的提示词。此外,可以一次叠加多个小模型,就像套用多层滤镜一样。

  与ckpt大模型相比,这些小模型的文件大小都很小,主要用于微调现有模型。小模型有三种类型:嵌入(Embedding)、超网络(HyperNetwork)和LoRA。这些模型文件的扩展名为.pt或.safetensors,目前最受欢迎的是”LoRA”。

  更好的是,由于文件大小较小,自行训练喜欢的人物模型的成本并不高。

  1. 安装小模型

  Stable Diffusion中文网提供了许多小模型可供下载。在下载时,请注意模型的类型。

  将嵌入模型放置在stable-diffusion-webui文件夹下的embeddings文件夹中。

  将超网络模型放置在stable-diffusion-webui/models/hypernetworks文件夹中。

  将LoRA模型放置在stable-diffusion-webui/models/Lora文件夹中。

  如果要显示小模型的缩略图,请将图片命名为与该模型文件相同的名称,并放置在该模型的文件夹中。例如,在Taiwan-doll-likeness.safetensors所在的文件夹中放置一张名为Taiwan-doll-likeness.png的图片。

  2. 小模型的使用方法

  进入WebUI,在右上角点击”Show extra networks”。

  这样就会出现一个菜单。以LoRA模型为例,点击小模型的卡片,将其添加到提示词字段中,提示词字段中会出现< >,表示在绘图时使用LoRA模型。

  然后,再添加其他的提示词,生成的图像将会具有LoRA模型的风格。

  如果生成的图像看起来太奇怪,可以调整提示词字段中每个LoRA后面的数字,以控制权重。

  通过以上方法,可以改善生成图像的效果。

  以上就是Stable Diffusion中文网关于小模型的介绍和使用方法。