文章编号：3887 / 分类：Stable Diffusion绘画 / 更新时间：2024-06-13 08:34:59 / 浏览：次

为什么要训练自己的模型？训练自己的模型可以在现有模型的基础上，让AI懂得如何更精确生成或生成特定的风格、概念、角色、姿势、对象。

举例来说，如果喂给AI十几张我精挑细选的「Hara老师绘制的、不同角度、FGO的斯卡萨哈」做训练，那么就能让AI更懂得如何生成斯卡萨哈的脸部，风格也会比较固定。

以下是一个具体例子，通过使用自行训练的HyperNetwork，便改善单靠Anything模型无法生成出Hara老师画风的缺点。在不使用HyperNetwork的情况下，风格永远是左边那样；一使用HyperNetwork，右边的风格就能轻松生成出来了。

训练模型是复杂的议题，基于哪个现有模型，以及喂给AI学习的图片品质，还有训练时的参数，都会影响模型训练结果。

如果硬件条件许可的话，搜集大量图片训练特定领域的checkpoint大模型，再上传到HuggingFace造福他人也是不错的选项，只不过此任务过于庞大。要知道Stable Diffusion 1.5版的模型可是输入了23亿张图片训练出来的！网络上其他人训练的模型至少也准备了几万张图片。因此要生成特定的人物/对象/画风，训练小模型对一般人来说比较划算。

各个模型的原理差异请参考下图。技术原理以及训练参数设置请参阅「参考数据」一章，碍于篇幅无法一一细讲，本章以操作过程为主。

就训练时间与实用度而言，目前应是 LoRA > HyperNetwork > Embedding

本章节以AUTOMATIC1111开发的Stable Diffusion WebUI为中心撰写，因其图形化且易操作。后面简称SD WebUI。

接着选择部署在本机或是云端？

训练模型至少需要10GB的VRAM，也就是RTX3060等级以上的GPU。

如果你有Nvidia RTX3060以上等级的GPU，那就参考安装教学部署在本机，想训练多久就训练多久。训练数据不到50张图片的小模型训练时间约只要1~3个小时。

通过训练自己的模型，我们可以让AI更好地满足我们的需求，生成特定的风格、概念、角色、姿势、对象。使用Stable Diffusion提供的Embedding、HyperNetwork和LoRA等小模型，我们可以在相对较短的时间内训练出满足特定需求的模型。对于一般用户来说，训练小模型是更划算的选择。无论是部署在本机还是云端，只要拥有足够的硬件条件，我们都可以轻松进行模型训练。训练自己的模型，让AI更懂你的需求，为你带来更好的生成结果。

你好，我是Stable Diffusion中文网的小编。今天，我们将深入探讨如何下载Stable Diffusion模型，以帮助您轻松获取所需的资源。Stable Diffusio…

大家好，我是Stable Diffusion中文网的小编。今天，我们将为您介绍Stable Diffusion这一强大的文生成图AI模型，以及如何利用它来生成令人满意的建筑效果图。…

大家好，我是Stable Diffusion中文网的小编。今天，我们将探讨如何下载、安装以及使用Stable Diffusion模型来创建出令人印象深刻的图像。无论您是一个创意爱好…

LoRA（Language-Only Representation Algorithm）是一种基于语言的AI模型，可以根据给定的提示词生成对应的图像。LoRA模型可以应用于各种不同…

我们将deliberate_v2.safetensors文件放置在models/Lora文件夹下。在提示词中，使用lora:deliberate_v2:0.4来调用该模型，权重为0…

Stable Diffusion模型是一种能够有效控制生成的画风和内容的算法模型。在进行下载和安装之前，我们可以在以下常用的模型网站中选择获取： Civitai | Stable …

lora模型的原理是基于低秩适应技术，通过对cross-attention layers进行更改来加速大型模型的训练。在模型训练过程中，lora允许您更轻松地针对不同的概念进行模型…

Civitai，这个名字或许还有点陌生，但它正在以稳定扩散（Stable Diffusion）的力量，为AI艺术和创作领域注入新的活力。Civitai是一个独特的平台，旨在让人们轻…

本文地址：https://www.badfl.com/article/1c09a35927137ff7fce7.html

上一篇：stablediffusion配置要求高吗mac电脑amd显...
下一篇：StableDiffusion零基础入门课程快速上手案...