AI绘图模型训练|lora

【AI绘图模型训练|lora】lot物联网小编为你整理了的相关内容，希望能为你解答。

最近一直有粉丝在后台留言，说哪怕有完整的提示词信息，也无法对原始图片进行复原。其实如果想复原一张图片，需要用到的参数和注意事项比较多，另外就是即使你的生成参数完全一致，不同的显卡生成的图片也会有些微差别。不过如果你生成的图片差别太大，那肯定你遗漏了某些关键步骤。

今天我就带大家一步一步用lora生成一幅AI图片，把需要用到的注意事项尽量讲全，希望对大家有所帮助。

1、首先我们来到C站，这里有很多模型和带参数的图片，我们从中挑选一张进行复原。

找到一张图片点击进去，右上方是它用到的 lora ，点击下载，注意下载后保存的 lora名称。为什么要特别注意保存的lora名称呢？因为有时候提示词中的lora名称和你保存的名字称有一些不一样，一定要确保提示词中的名称和你保存名称的完全一致。

lora下载后放置路径为：*stable-diffusion-webuimodelsLora

2、在参考图片的下方有这个图片的说明信息，要仔细阅读，从中我们能够发现一些有用的信息：

（1）这个图片使用了“Ulzzang-6500”和“ vae-ft-mse-840000”文件。

（2）标准版只使用了 1 个 lora 模型，lora推荐权重为 0.45-0.75之间。

（3）提示词中使用“yae_sakura”，会获得更好的效果。

3、下载“Ulzzang-6500”和“ vae-ft-mse-840000”文件

这两个文件的下载方法分别见下图中的红字部分，下载好后，“Ulzzang-6500”放置路径为：*stable-diffusion-webuiembeddings；VAE放置路径为：*stable-diffusion-webuimodelsVAE。文件放好后，重新启动webUI。

下载UIzzang-6500

下载vae

4、点开这个图片的提示词信息，右下角红框内是它用到的大模型名称，如果你没有这个模型，需要进行下载。

正常情况下需要用到的模型在C站都可以找到，不过这个模型比较例外，我在C站没有找到，好在我在抱脸网上找到了，只是名字有些不同，不知是它在命名时改了名字，还是这个模型有了新版本。

模型下载地址见下图中的红字部分，下载后放置路径为：*stable-diffusion-webuimodelsStable-diffusion

5、下载参考图片，注意保存格式为png。

6、设置VAE文件

来到webUI工作台，设置-->stable diffusion，选择刚刚下载好的VAE文件，保存后重启。重启后最好再回来检查一下有没有正确设置。

7、将参考图片拖进webUI工作台的图片信息中，会自动识别生成参数，点击下方的文生图，会把所有参数信息自动填充到文生图中。

8、来到文生图界面，这时参考图片中所有的提示词信息全部自动填充好了，这时先要设置正确的大模型（见左上角，这个模型是我们刚刚从抱脸上面下载的），然后点生成按钮。

不过生成的图片和原始参考图差别太大，这并不是我们想要的效果。

9、指定lora。

其实我们仔细查看提示词信息，发现提示词里面并没有指定lora,我们得手动将 lora 添加进来，提示词中还可以添加“yae_sakura”。

记得我们前面讲过 lora 的推荐权重为 0.45-0.75 之间，自己设置好权重后点击生成按钮出图。

设置lora

最终生成的图片和参考图片已经很接近了，但仍有差别。

前面我们说过，即使完全相同的参数，不同的显卡生成的图片也会有些微差别，那么除了显卡外，还有哪些因素会对最终出图会有影响呢，我以本图为例跟大家分析一下。

1、大模型。因为C站没找到参考图用的大模型，我们从抱脸网下载的大模型名字有些不同，有可能我们下载是同一系列不同版本的模型，会对最终出图有影响。

2、lora的推荐权重是0.45-0.75之间，我选择的是0.6，不同的权重值也会影响出图效果。

3、本图默认勾选了高清修复，高清修复中的重绘幅度值不同也会影响出图效果。

4、种子数。虽然我们没有对种子数更改，不同种子数对出图影响较大，这点在出图的时候要特别注意。

本文结束，如果你喜欢这篇文章，多谢关注、点赞和评论，你的支持是我最大的动力。

以上内容为【AI绘图模型训练|lora】的相关内容，更多相关内容关注lot物联网。