AI绘画之Stable diffusion入门级教程
AI绘画技术在当下引起了广泛的关注和兴趣,其中一种备受瞩目的技术就是”stable diffusion“。稳定扩散(stable diffusion)是一种基于人工智能的绘画工具,它能够以惊人的效果将文字描述转化为逼真的图像作品。
1.Stable Diffusion是什么 ?
Stable Diffusion是2022年发布的一种深度学习模型,它可以根据文本输入生成对应的图像。它是由创业公司Stability AI与多个学术机构和非盈利组织合作开发的。Stable Diffusion的源代码和模型都已经开源,在Github上有一个完整的项目,由AUTOMATIC1111负责维护,也有很多开发者参与贡献。由于完整版需要一些网络和Python环境的支持,国内有一些开发者制作了一些封装包,方便大家使用。开源社区为Stable Diffusion的普及做出了很大的贡献。
SD相关的github项目地址:https://github.com/AUTOMATIC1111/stable-diffusion-webui
2.Stable Diffusion它的原理是什么?
扩散技术借鉴了深度学习和生成对抗网络(GAN)的思想,通过模型训练和优化来实现创作出高质量图像的能力。这项技术可以根据用户提供的文字描述和参数要求,生成与之完美匹配的图像作品。无论是描绘风景、人物还是抽象的概念,稳定扩散都能够以其强大的创作能力令人惊叹。
与传统的绘画方式相比,AI绘画的优势在于减轻了艺术家的创作负担,并且大大缩短了作品制作的时间周期。稳定扩散技术通过智能化的算法和高效的计算能力,使得艺术创作变得更加便捷和高效。
除此之外,稳定扩散技术还支持用户上传自己的图片进行AI生成,使得创作者能够更好地个性化自己的作品。这为艺术家提供了一个与AI合作的全新可能性,同时也开辟了商业应用的新道路。
3.进入正文:
随着AI技术的不断进步和发展,稳定扩散等AI绘画技术必将带来更多的创新和机遇。它们将推动着艺术创作的边界不断拓展,为我们呈现出更加美妙而惊艳的艺术作品。
4.关于SD电脑配置问题:
Stable Diffusion最大的特点,就是它可以在电脑本地离线运行。只要有一台配备至少8GB显存(建议12G)的NVIDIA显卡的电脑(目前ATI显卡支持度很差),就可以运行Stable Diffusion。这样就不需要花钱、排队、受限于网络等问题,可以自由地享受AI绘画的乐趣。当然,如果想要进阶学习AI绘画,还需要了解一些nVidia的显卡技术,以及Python相关的深度学习组件,比如CUDA、CUDNN、xformer、pytorch等。
5.Stable Diffusion基本概念
在使用Stable Diffusion之前,我们需要了解一些基本概念:
大模型(checkpoint):用素材+SD低模(如SD1.5/SD1.4/SD2.1)进行深度学习后制作出来的大模型,可以直接用来生成图像。大模型决定了生成图像的主要风格和内容,是最重要的基础。文件扩展名通常是CKPT或SAFETENSORS,下载的大模型存放在:
\sd-webui-aki-v4\models\Stable-diffusion
VAE:类似于滤镜,是对大模型的补充,可以稳定画面的色彩范围。文件扩展名通常是CKPT或SAFETENSORS。下载的VAE存放在:
\sd-webui-aki-v4\models\Stable-diffusion
LoRA:模型插件,是在某个大模型的基础上进行深度学习后制作出来的小模型。需要搭配大模型使用,可以在小范围内调整生成图像的风格或增加一些细节。如果基于SD底模制作,可以在不同大模型之间通用。如果基于特定的大模型制作,可能会有更好的针对性效果。下载的LoRA模型存放在:
sd-webui-aki-v4\extensions\sd-webui-additional-networks\models\lora
ControlNet:让SD走向生产力工具的插件,可以让SD根据现有图片获取一些信息,比如线条或景深,然后按照使用者的想法,高度可控地处理图片。下载的ControlNet插件模型存放在:
\sd-webui-aki-v4\models\ControlNet
Stable Diffusion Web-UI(SD-WEBUI):开源软件,由AUTOMATIC1111基于Stability AI算法制作,可以在浏览器中用图形界面操作SD。
6.秋叶SD整合包及相关资源资料下载:
目前网上比较有名的整合包是由秋叶大佬开发的:”绘世“SD整合包”!!真的很厉害,好用!
秋叶包:整合包,由国内大神秋叶开发。由于WEBUI本身需要GitHub的支持,很多时候需要高速的网络和Python环境。使用秋叶包,可以内置一个和电脑系统隔离的Python环境和Git,不需要额外安装和了解这两个软件。可以让更多人轻松地享受AI绘画。
【SD软件地址】注意:安装电脑版本根据需要型号安装,跑图显卡需要有一定的要求!
下载地址:
Stable-Diffusion(SD)开源AI绘图工具一键安装包下载:
链接:https://pan.baidu.com/s/1KLNLj_2CMAMUgVbwcRwAyg?pwd=pkyg
提取码:pkyg
SD相关资料网址(在线文档)——涵盖模型等多个方面
https://docs.qq.com/doc/DWXlpWllRR2RhS2pm
最后,来几组相关AI绘画SD跑图鉴赏: (敬请欣赏!)
竖屏+横屏图:脑容量+1