AI 绘画 | Stable Diffusion精确控制ControlNet扩展插件_秋叶 controlnet

ControlNet

ControlNet是一个用于控制AI图像生成的插件，通过使用Conditional Generative Adversarial Networks（条件生成对抗网络）的技术来生成图像。它允许用户对生成的图像进行更精细的控制，从而在许多应用场景中非常有用，例如计算机视觉、艺术设计、虚拟现实等。

对于stable diffusion，ControlNet的出现提供了一种新的神经网络概念，通过额外的输入来控制预训练的大模型，例如stable diffusion。这种端对端的训练方式，让这种端对端的训练有了更好的应用空间。

举个需要使用ControlNet简单的例子，假如我们想要画一个人物画，需要人物摆一个固定的姿势，如果使用提示词就难以准确描述，即使可以用提示描述人物的姿势，但是因为扩散模型的的特性，生成图片的人物姿势还有部分不一样的随机性。利用ControlNet中的OpenPose模型，我们只需要给Stable Diffusion上传一张包含我们想要生成的姿势的图片即可生成我们想要的效果。

安装ControlNet插件

秋叶整合包内整合了ControlNet扩展插件，我们无需无需安装。没有安装的可以通过这个国内镜像仓库去下载安装
https://gitcode.net/ranting8323/sd-webui-controlnet，安装方