diff --git a/_posts/2023-04-04-Image-Generation.md b/_posts/2023-04-04-Image-Generation.md index c1f1864d0a7..1dfb179e1f4 100644 --- a/_posts/2023-04-04-Image-Generation.md +++ b/_posts/2023-04-04-Image-Generation.md @@ -994,6 +994,23 @@ Stable Diffusion 是以文本生成图像的 AI 工具,`慕尼黑大学`的Com - 文生图: [官方文档](https://huggingface.co/docs/diffusers/api/pipelines/stable_diffusion/text2img) - 图生图: [官方文档](https://huggingface.co/docs/diffusers/api/pipelines/stable_diffusion/img2img) +【2023-12-16】[2023年最新Stable Diffusion下载+安装+使用教程(超详细版本)](https://zhuanlan.zhihu.com/p/672219296?utm_psn=1719312593804754944) + +#### SD 生态 + + +
+ + +SD基本概念 +- **大模型**:用素材+SD低模(如SD1.5/SD1.4/SD2.1),深度学习之后炼制出的大模型,可以直接用来生图。大模型决定了最终出图的大方向,是底料。多为CKPT/SAFETENSORS扩展名。 +- `VAE`:类似滤镜,是对大模型的补充,稳定画面的色彩范围。多为CKPT/SAFETENSORS扩展名。 +- `LoRA`:模型插件,是在基于某个大模型的基础上,深度学习之后炼制出的小模型。需要搭配大模型使用,可以在中小范围内影响出图的风格,或是增加大模型所没有的东西。炼制的时候如果基于SD底模,在不同大模型之间更换使用时的通用性会较好。但如果基于特定的大模型,可能会在和该大模型配合时得到针对性的极佳效果。 +- `ControlNet`:神级插件,让SD有了眼睛,能够基于现有图片得到诸如线条或景深的信息,再反推用于处理图片。 +- `Stable Diffusion Web-UI`(`SD-WEBUI`):开源大神AUTOMATIC1111基于Stability AI算法制作的开源软件,能够展开浏览器,用图形界面操控SD。 +- **整合包**:由于WEBUI本身基于GitHub的特性,绝大多数时候的部署都需要极高的网络需求,以及Python环境的需求。使用整合包,内置了和电脑本身系统隔离的Python环境,以及内置了Git,不需要了解这两个软件就可以运行。可以几乎忽视这样的门槛,让更多人能够享受AI出图。 + + #### 体验方法 体验方法