当前位置:   article > 正文

揭秘Stable Diffusion:由线稿到绚丽效果图的深入学习_用stable diffusion画展台效果

用stable diffusion画展台效果

做设计的伙伴都知道SD的强大,但是,对于使用是有一定的门槛的,熟练之后,做设计那是得心应手,特别是室内设计,建筑设计,好了,接下来,我们开始今天的分享。文末扫码可免费获取AI绘画资料。

一、SD模型三大在线平台

分享stable diffusion模型加载及线稿图转化的过程之前,我们先要熟悉三个在线平台,分别如下:

全球领先的模型站点:C站,civital

全球第二大模型站点:拥抱脸,hugging face

全球第三大模型站点:T站,吐司

二、效果展示

我们先来展示一下效果,

1、线稿生成效果图

这是一个空白的画布,当然,你也可以手绘。以下以专业的景观设计方向为例:

通过SD,只需几秒钟生成出效果,如下图所示:

当然,这里还没有充分调整VAE,通过多次尝试不同滤镜,效果将会更加出色。接下来,我们将展示一些世界三大模型网站的资源。

2、模型建筑效果图展示

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

3、衣服和鞋子

4、动物

stable diffusion 会根据这些基础模型的信息来创造出类似的画作。

三、模型介绍

在Stable Diffusion(SD)的左上方,我们可以看到Autumn Leaves包中目前只加载了一个名为"anything"的模型。

这个模型是一个大杂烩,汇聚了各种风格,包括风景、建筑、动漫人物等。但当你需要制作独特风格的图像时,就需要更为优化的模型。你可以选择自己训练模型,也可以先下载其他人已经训练好的模型。对于新手来说,建议从白嫖学起。

这里以"anything"和"architecturerealmix"(一种建筑模型)为例,演示如何生成建筑图,前提是所有参数相同,提示词一致:

"anything"模型:

"architecturerealmix"模型:

我们可以发现,使用特定模型生成特定风格的效果更好。这也是我们下载或训练模型的原因。

让我们了解当前流行的模型类型。

1、大模型

主模型(底层模型、核心模型、base model) 典型命名:附加后缀ckpt、safetensors 通常规模:2G-7G 存储位置:D:\tool\novelai-webui一键包\novelai-webui-aki\models\Sta

可以称之为主模型(大模型),即在开篇左上角介绍的anything和architecturerealmix。

2、Lora模型

Lora模型通常以ckpt、safetensors和pt为尾缀,大小约为100MB左右,存储在D:\tool\novelai-webui一键包\novelai-webui-akiioaetdra路径中。

这个也可以被称为滤镜模型,即一种能够使你的图片更加绚丽多彩的模型。

3、embeddings模型

这被称为嵌入模型,通常以“pt”为尾缀。大小通常在几十KB左右,存储路径位于D:\tool\novelai-webui一键包\novelai-webui-aki\embeddings。与其他模型不同,这个模型是用于反向训练的,它涉及的内容将在后续进行另外的解释。

4、美化VAE模型

美化VAE模型常见模式:尾缀ckpt、pt 模型名包含vae 存放路径:D:\tool\novelai-webui一键包\novelai-webui-aki\models\VAE

这个模型也可以称之为图像滤镜,使用它可以使你的图片更加绚丽多彩。

5、DreamBooth模型和LyCORIS模型

DreamBooth模型以及LyCORIS模型都与训练相关,对它们的详细说明将在后续进行。关于安装路径,你可以将下载好的模型文件直接拖放到上述提及的存放路径中。以下以architecturerealmix为例说明。

四、安装方法

在这之前,将模型从模型网下载好之后,只需简单地将其拖放到以下路径即可。以architecturerealmix为例:

1、大模型(底模型、主模型、base model) 常见模式:尾缀ckpt、safetensors 常见大小:2G-7G 存放路径:D:\tool\novelai-webui一键包\novelai-webui-aki\models\Stable

models(模型)

2、将下载好的architecturerealmix模型复制粘贴到相应目录后,重新启动sd-webui即可加载模型。

3、加载完成后,前往查找并打开controlNet插件,然后将线稿图放入其中。

在这里,使用的是线稿图。

生成的效果如下图所示。

在此过程中,有一个需要注意的参数。

控制权重,数值越大,生成的图像越接近原模型,数值越小,创造性越强。对于新手建议设置在0.7到0.75左右。

在右侧还有一个controlNet模型,这是源文件中带有的,但需要用户自行安装:

将其全部复制,粘贴到指定文件夹内。完成以上步骤后,再次重启模型即可。

在进行线稿图转模型时,请确保点击启用controlNet选项。如下图所示;

所有的AI设计工具,模型和插件,都已经整理好了,文末扫码即可免费获取噢~

写在最后

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述

若有侵权,请联系删除
声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/weixin_40725706/article/detail/898471
推荐阅读
相关标签
  

闽ICP备14008679号