深圳网站建设可以吗,各大网站博客怎么做推广,上海网站建设怎么赚钱,个人导航网站怎么备案文章目录 前言一、优点1.1、免费开源1.2、拥有强大的外接模型 二、组成要素2.1 底模2.2 风格2.3 提示词2.4 参数配置 三、生图原理四、下载链接 实践正文一、安装1.1 电脑硬件配置查看1.2 安装本地版本的stable diffusion1.3 SD使用教程 二、模型介绍与下载2.1大模型2.2 Lora模… 文章目录 前言一、优点1.1、免费开源1.2、拥有强大的外接模型 二、组成要素2.1 底模2.2 风格2.3 提示词2.4 参数配置 三、生图原理四、下载链接 实践正文一、安装1.1 电脑硬件配置查看1.2 安装本地版本的stable diffusion1.3 SD使用教程 二、模型介绍与下载2.1大模型2.2 Lora模型2.3 VAE美化模型2.4 Hypernetworks超网络模型2.5 LyCORIS2.6 embeddingTEXTUAL INVERSION2.7 ControlNet模型下载 三、生图操作4.1 基础- 提示词文生图4.2 基础-png图片成文生图4.3 基础-图生图4.4 基础-黑白稿线稿上色4.4 基础-局部重绘4.x 进阶-文生图-组合 四、参数介绍4.1 提示词5.2 CLIP 终止层数5.3 采样方法和迭代步数5.4 宽高设置以及高清修复5.5 随机数种子seed面部修复平铺图Tiling提示词引导系数CFG Scale ControlNet v1.1.224ControlNet 说明ControlNet 安装控制类型Canny(硬边缘)Depth深度 预处理器模型控制权重引导介入机制 前言 Stable Diffusion的定义 Stable Diffusion简称SD是一种人工智能生成图像的软件。通过输入文字描述SD能够生成对应的图片无需像以往那样需要手工绘制或拍摄照片。
一、优点
1.1、免费开源
Midjourney 需要开魔法使用免费额度用完之后付费才能继续最低 10 美元/月。而 SD 在 B 站上有大神整理好的整合安装包不用魔法免费下载一键安装。 安装到本地的 SD 随开随用生成的图片只有自己能看到保密性更强。
1.2、拥有强大的外接模型
由于开源属性SD 有很多免费高质量的外接预训练模型fine-tune和插件比如可以提取物体轮廓、人体姿势骨架、画面深度信息、进行语义分割的插件 Controlnet使用它可以让我们在绘画过程中精准控制人物的动作姿势、手势和画面构图等细节插件 Mov2Mov 可以将真人视频进行风格化转换SD 还拥有 Inpainting 和 Outpainting 功能可以对图像进行智能局部修改和外延这些都是目前 Midjourney 无法做到的。
二、组成要素
组要有四大部分组成分别是
2.1 底模
大模型决定了图片的基础风格比如真实照片风格chilloutmix模型二次元漫画风格Anything模型
2.2 风格
Lora模型决定了图片的细节风格比如人物脸型koreanDollLikeness衣服款式Beautiful_Dress
2.3 提示词
描述画面的具体内容正面提示词负面提示词。
2.4 参数配置
迭代步数采样模式等。
三、生图原理
stable diffusion实践操作-SD原理
四、下载链接
主要内容有 1.前置包无需使用新手可直接跳过 2.安装包 3.精选大模型 4.精选embedding 5.精选lora 6.精选 hypernetwork 7.精选姿势包 8.Contronet模型包 9.Vae 10.插件包 11.提示词合集新加 12.附录1处理器、GPU购买指南
链接https://pan.quark.cn/s/218e0e20a915 非常感谢轩轩大家可以看他的入门教程入口
实践正文 一、安装
1.1 电脑硬件配置查看
链接入口stable diffusion实践操作-电脑硬件查看
1.2 安装本地版本的stable diffusion
链接入口stable diffusion实践操作-安装
1.3 SD使用教程
链接入口stable diffusion实践操作-webUI教程-不是基础-是特例妙用
二、模型介绍与下载
2.1大模型
底模/大模型 是SD能够绘图的基础模型控制图片整体风格比如二次元anything真实写照等。 安装完SD软件后必须搭配基础模型才能使用。不同的基础模型其画风和擅长的领域会有侧重。常见的模式后缀ckptsafetensors大小在2-8G之间。
链接入口stable diffusion实践操作-大模型介绍 链接入口stable diffusion实践操作-大模型介绍-SDXL1大模型 下载后存放地址sd-webui-aki-v4.2\models\Stable-diffusion
2.2 Lora模型
Lora是微调模型某品牌汽车特斯拉人物姿势剪刀手可以固定我们照片的特征人物特征、动作特征、还有照片风格。
链接入口stable diffusion实践操作-常见lora模型介绍
下载后存放地址sd-webui-aki-v4.2\models\Lora
2.3 VAE美化模型
VAE全名Variational autoenconder中文叫变分自编码器。作用是滤镜微调 名字中带有vae后缀ckpt,pt 有的大模型是会自带VAE的比如我们常用的Chilloutmix。如果再加VAE则可能画面效果会适得其反 。
链接入口stable diffusion实践操作-VAE
下载后存放地址sd-webui-aki-v4.2\models\VAE
2.4 Hypernetworks超网络模型
链接入口stable diffusion实践操作-hypernetworks
下载后存放地址sd-webui-aki-v4.2\models\hypernetworks
2.5 LyCORIS
此类模型也可以归为Lora模型也是属于微调模型的一种。一般文件大小在340M左右。不同的是训练方式与常见的lora不同但效果似乎会更好不少。
链接入口stable diffusion实践操作-LyCORIS
下载后存放地址sd-webui-aki-v4.2\models\LyCORIS
2.6 embeddingTEXTUAL INVERSION
可以理解为提示词的集合可以省略大量的提示词。主要是负向提示词后缀safetensors大小几十kb
链接入口stable diffusion实践操作-embeddingTEXTUAL INVERSION
下载后存放地址sd-webui-aki-v4.2\embeddings
2.7 ControlNet模型下载
正常来说秋叶安装包就有一些模型的其余后期补充。 介绍链接https://zhuanlan.zhihu.com/p/619721909
链接入口stable diffusion实践操作-Controlnet
下载后存放地址sd-webui-aki-v4.2\models\ControlNet
三、生图操作
4.1 基础- 提示词文生图
链接入口stable diffusion实践操作-文生图
4.2 基础-png图片成文生图
链接入口stable diffusion实践操作-图片生文字到图片
4.3 基础-图生图
链接入口stable diffusion实践操作-图生图
4.4 基础-黑白稿线稿上色
链接入口stable diffusion实践操作-黑白稿线稿上色
4.4 基础-局部重绘
链接入口stable diffusion实践操作-局部重绘
4.x 进阶-文生图-组合
将需求进行拆分熟练运用组合比如
KoreranDollLikeness Beautiful_dress ChilloutmixMIX4 20D 黑丝 Chilloutmix
链接入口 进阶-文生图-组合KoreranDollLikeness Beautiful_dress CHilloutmix
四、参数介绍
4.1 提示词
提示词是SD中非常重要你生成的图片质量基本就取决于提示词的好坏提示词分为正向提示词和反向提示词。
模板如下画质 主体 主体细节 人物服装 其他背景、天气、构图等
Best quality,masterpiece,ultra high res,nu no humans,(long:1.2),lora:long-000020:0.8, no humans, cloud, architecture, east asian architecture, red eyes, horns, open mouth, sky, fangs, eastern dragon, cloudy sky, teeth, flying, fire, bird, wings.链接入口stable diffusion实践操作-提示词
5.2 CLIP 终止层数
链接入口CLIP
5.3 采样方法和迭代步数
链接入口采样方法
5.4 宽高设置以及高清修复
链接入口stable diffusion实践操作-宽高设置以及高清修复
5.5 随机数种子seed
当使用相同的大模型、关键词、Lora模型和其他参数时生成的图像可能与他人不同其中一个影响因素是随机数种子Seed。 随机数种子控制了图像生成的底层形状类似于画画时最开始的线稿。它决定了图像的基础轮廓包括人物的外形轮廓、姿势和站位等。 当随机数为“-1”的时候SD就会随机给你的照片生成一个种子这个种子就理解成不一样的线稿就可以你可以在生成的图像下方查看英文字符串中的seed值以了解当前生成图像所使用的随机数种子。
链接入口stable diffusion实践操作-随机种子seed
面部修复
这两个功能没有太多讲解直接使用即可。 注意点如下
面部修复适用于生成真人照片。高分辨率修复需要较好的电脑配置配置较低的电脑不建议使用否则可能无法生成照片
平铺图Tiling
提示词引导系数CFG Scale
ControlNet v1.1.224
ControlNet 说明
ControlNet 安装
控制类型
Canny(硬边缘)
Depth深度
预处理器
模型
控制权重
引导介入机制
